Multiple Sub-Nyquist Sampling Encoding

MUSE (Multiple Sub-Nyquist Sampling Encoding) とは、NHK放送技術研究所が1984年に開発した^[1]ハイビジョン向けの映像圧縮技術である。日本におけるBS放送向けに開発されたがアメリカでのBS放送の便も考慮され^[2]、CATVや標準テレビ放送と同様にVSB-AM変調による地上波での放送実験、マイクロ波による中継実験^[3]、現在のデジタル放送で採用されているISDBシリーズが備えているような字幕・データ放送の実験^[4]などの諸実験が行われ、ハイビジョンLDの記録方式としても採用された^[5]。この他にもBSを通じてMUSEによる有料放送を行うべくそれに関する仕様が定義され^[6][7]、MUSEデコーダを内蔵したテレビの説明書にデスクランブラの接続についての記載もされていた^[8]。

NHKでは現在のテレビ(System-J/NTSC-J)の「次のテレビ」として1964年より立体テレビジョン及び高品位テレビジョン(ハイビジョンのことである)についての研究を始め、1972年にはCCIR(現在のITU-R)に規格提案を行うまでとなった。しかし、ハイビジョン放送を実用化するためには大きな壁が立ちふさがっていた。それは利用できる帯域幅である。当時利用可能な最大の帯域幅は12GHz BSの27MHzであり、BSではFM変調が用いられていることから駒井・カーソン則に従って計算すると伝送可能なベースバンド信号(原信号)の幅はわずか9MHz以下となってしまう。従ってRGB各色ごとに30MHzもあるスタジオ規格、視覚的な差異がないとされる^[9]放送規格の各色それぞれ20MHz幅のハイビジョン映像をそのまま放送するのは不可能である。この問題を解決するために放送用伝送手段が考えられ^[10]、その結果MUSE方式が開発された。

MUSEの特徴は入力された映像をさいころの五の目(千鳥格子)状のサンプリングパターンとなるサブサンプリングを動きベクトルを利用して行うことと、色信号の多重化に色線順次TCIを用いてYC時分割多重を行ったことである。人間の目は縦横方向に比べ斜め方向の解像度は低く^[11]、動体視力は静止視力にくらべてやはり低い性質を活用し静止画・動画を振り分けた圧縮を行っているが、パン・チルトを行っている場合は動画として圧縮処理を行うと目の特性から動いてても画質の低下が目に付いてしまうのでフィールド間・フレーム間で合成ができるように動きベクトルを用いた動き補正を行って静止画的に処理できるようにしている。

出典：^[11]

• 圧縮対象走査線 : 1,032本
• 原始サンプリング周波数 : 44.55MHz
• 伝送サンプリング周波数 : 16.2MHz
• ベースバンド帯域幅 : 8.1MHz (-6dB)
• 同期信号 : デジタルフレームパルス型、正極同期
• 色差多重方式 : 時間軸圧縮多重 (TCI)
  • 時間軸輝度圧縮率 : 12:11
  • 時間軸色差圧縮率 : 4:1
  • 輝度算出式 : Y' = 0.588G + 0.118B + 0.294R
• 圧縮方式 : フィールド間、フレーム間、ライン間オフセットサンプリング方式
• 動きベクトル補正 : 水平±16サンプル (32.4MHzクロック)/フレーム、垂直±3ライン/フィールド

MUSEで圧縮するに至ってまず、得られたハイビジョン信号の20MHzを超える情報を捨て(帯域制限)、サンプリング周波数44.55MHzでRGB各色ないしは輝度・色差(明るさとその色合い)各成分のデジタル化を行う。そして圧縮するのに適したカラーマトリクス(計算式)で求められた輝度・色差に変換し、輝度・色差を時分割で格納するために輝度は12:11の時間軸変更が行われる。これによって輝度のサンプリング周波数は48.6MHzとなる。色差に関しては7.425MHz以上の情報を捨てた後に2種類の色差信号Cb/Crを交互に送るため縦方向の情報を半分にし、サンプリング周波数を14.85MHzに変換して2回の単純なクインカンクスサブナイキストサンプリング(さいころの五の目状のサンプリング点の間引き)が行われる^[2]。輝度は静止画と動画とで映像に施される処理が異なり、入力された映像が静止画の場合サンプリング周波数変換を交えた2回のサブナイキストサンプリングを行うことによって20MHzぶんの情報が8.1MHzに畳み込まれる。動画の場合は更に16MHzを超えた情報を捨て、静止画の2回目と同じサンプリングの様相を示すサブサンプリングを行って8.1MHzに畳み込まれる。この畳み込まれたデジタル映像を静止画と動画とで適宜混合してアナログに変換して伝送を行う。静止画と動画の最後の処理を同じくすることにより、デコーダによって行われる静止画・動画の判定において誤判定が起きたとしてもデコード結果画像の破綻が起きないようになっている。これらの処理がエンコード時の基本となっているが、フィルタの工夫・静止画のフレーム単位での処理などいくつかの改善案が挙げられている。^{[12][13][14][15][16]}デコード時には伝送されてきた畳み込みアナログ映像をデジタル化し、圧縮時に行ったように静止画・動画の判定を行って静止画の場合は前のフレームと合成することによって補完してデコードが行われる。

出典：^[17]

• 1フレームあたり1350ビット 1ミリ秒
• 音声圧縮方式 : 準瞬時圧伸 DPCM
• モード
  • Aモード : 32kHz 15-8bit(8レンジ)×4ch(3-1ステレオ)
  • Bモード : 48kHz 16-11bit(6レンジ)×2ch
• 音声誤り制御 : (82,74)短縮化BCH 16ビットインターリーブ
• 多重化方式 : 垂直帰線期間に12.15Mbaudで3値ベースバンド多重

音声に関してはMUSEのために開発されたDANCE(DPCM Audio Near-instantaneous Compressing and Expanding)方式で圧縮される。標準放送と違い、3-1ステレオ方式をサポートする最大4チャンネルのAモードではサンプリング周波数32kHz15ビット、高音質ではあるが最大2チャンネルのBモードでは48kHz16ビットデジタル化した音声をサンプル点間の差をとってDPCM圧縮し、その差信号を1ms区間の準瞬時圧伸(ケタ落し)を行ってAモードでは8レンジ8ビット、Bモードでは6レンジ11ビットに圧縮する。ここで行われるDPCM圧縮の際にリーク値を利用した不完全積分を行うことによって伝送誤り時の雑音と直流誤差を少なくし、ローカルデコーダを設けることによって圧縮誤差が積み重なることを防止している。この圧縮されたデジタル音声を(82，74)短縮化BCHで保護した後16ビットインターリーブし、0と1の2値から0/1/2の3値12.15Mbaudに変換・時間軸変更してMUSE映像の画面に映らない部分、垂直帰線区間に格納する。3値化の際の値は伝送経路がAMとFMとで違い、LDの場合はデータ放送のための領域を削ってさらに強固なエラー訂正を付加する^[5][18]。データ放送に関しては標準テレビジョン放送と同様に斜め配置の288バイトパケット方式を採用し、18フレームで1スーパーフレームを構成している^[19]

MUSEの原型となるシステムは1983年の技研公開で展示されたもので、伝送サンプル周波数が19MHzと27MHzのRF帯域にぎりぎり合致する代物であり、音声も水平同期(33.75kHz)にロックした14-11bit準瞬時圧伸2チャンネルであった^[20]。初期のMUSEともいえるものとなると映像はサンプリング周波数64.8MHzでデジタル化され、画素は単純に2回の1/2にサブサンプリングによって1/4となる。TCI多重化の際の輝度信号の時間軸圧縮もなかった^[21]。音声はQPSK変調のRFを時分割多重^[22][23]もしくは標準テレビジョン放送で用いられた音声フレームを4値ベースバンド多重する^[24]。

出典：^[25]

放送用に作られたMUSE(以下区別のためにMUSE-Eと記す)であるが、MUSE-Tは4:2:2 TCIを利用することが不可能な狭帯域での素材伝送などの用を足すために作られた。RGBの各色を初期のMUSE-E同様^[11][26]にサンプリング周波数64.8MHｚでデジタル化し、MUSE-E同様にカラーマトリクスの変換を行う。そして入力映像が静止画の場合、1回のみ単純なフィールドオフセットサブサンプリングを行う。動画の場合も帯域制限が加わるだけで静止画の場合と同一である。音声に関してもMUSE-Eと変わらず圧縮・時間軸したことによってシンボルレート12.15Mbaudとなった音声を垂直帰線区間に多重する。

日本におけるハイビジョンの開発・放送に影響を受けてアメリカでもHDTVの放送を望む声が高まってきた。これに対しATSC^[27]は既存の受信機と互換性のあるHDTV方式であるATVを募集し、FCCはそれに応える形で既存の受信機と互換性のある方式ないしは占有帯域が6MHz幅とサイマル放送しやすい方式でなければならないと定めた^[28]。FCCの諮問機関であるACATSが行ったATVコンペディションに応募すべく、走査線数1125本のHDTVスタジオ規格を普及させるべく^[29]NHK技研はADTV(Advanced Definition Television)であるNarrow MUSEおよびMUSE-6, MUSE-9を開発した。この開発された3方式のうち最後まで残れたのはNarrow MUSEであった^[30]。

出典：^[31]

• 圧縮対象走査線数 : 648本
• 原始サンプリング周波数 : 40.095MHz
• 伝送サンプリング周波数 : 19.44MHz
• ベースバンド帯域幅 : 4.86MHz (-6dB)

Narrow MUSEは占有帯域が6MHzであるという条件のみを満たした一番NTSCとの互換性を軽視し、一番ADTVの中で高画質なシステムである。最初にデジタル化する際のサンプリング周波数が40.095MHzであり、圧縮前に1125(有効走査線数1035本)→750本(同690本)の走査線数変換がある^[32]ほか、音声の映像への多重化のシンボルレートが7.29Mbaudとなっている^[33]などBS向けのMUSEとは微妙な違いが存在している。そして電波発射時の変調には標準テレビジョン放送との相互干渉を防ぐために単純なVSB-AM変調を採用せず、750kHzまでの低域はVSB-AM、高域はSSB変調を行うという特殊な変調方式が採用された^[34][35]。

出典：^[36]

NTSC Compartible MUSE-6は既に広範に普及している標準テレビジョン放送受像機で受信・受像できる一方で、対応のテレビで受信した場合は約2倍の静止画解像度をもたらす、という方式である。画面アスペクト比の4:3から16:9への変更には、中心部と画面端の画質差を防ぐためにサイドピクチャー方式ではなくワイドクリアビジョンのようにレターボックス方式を採用した。圧縮元の映像が順次走査525本(有効走査線本数480本)、放送時飛び越し走査360本のワイドクリアビジョンと違い、MUSE-6は飛び越し走査750本(同690本)の映像を圧縮、飛び越し走査345本で放送している。走査線数を半分にした結果失われるはずだった情報は、レターボックス方式を採用することによって生まれた黒帯に圧縮して格納される。この分離法として加減算法とSSKF(Symmetric Short Kernel Filter)を用いられた方式とが検討された^[37]。入力された映像が静止画の場合は7.7MHzまでの情報を周波数領域で4分割し、3.9～7.7MHzの分を1.9～4.2MHzに周波数をずらして2フレームオフセット変調多重^[38]で多重化・格納される。一方で音声は2チャンネルまでのみMUSE-EのAモード同様にDANCE方式で圧縮・3値化されるが、1フレームあたり1170ビット^[39]であり、多重化区間は垂直帰線区間ではなく水平帰線区間に格納される。MUSE-9はMUSE-6の拡張であり、MUSE-6では格納しきれなかった動画の高い周波数成分の情報や、AモードとBモードとの差分高音質化信号、Aモードのサラウンド化のための追加2チャンネル音声が追加チャンネルによって送信される。この追加チャンネルは主チャンネルであるMUSE-6が使っている帯域と地続きであっても、離れて別の送信機を使っていても構わない。

1. ^ 「放送技術のあゆみ」, 『NHKの放送技術2014』, 44-45, NHK広報局
2. ^ ^{a b} 二宮佑一(1988)「MUSE方式(<講座>HDTV(ハイビジョン) 第3回)」, 『テレビジョン学会誌』 42(8), 823-830, 1988-08-20
3. ^ 勝部和夫ほか(1990) 「BCS90-51, ROFT90-59 ハイビジョンMUSE伝送実験」, 『テレビジョン学会技術報告』 14(57), 19-23, 1990-10-26
4. ^ 臼井和也ほか(1995) 「BCS95-50, BFO95-57, ROFT95-57 マルチメディアMUSE : データチャンネルを利用したハイビジョン放送の高機能化」, 『テレビジョン学会技術報告』 19(38), 61-66, 1995-08-24
5. ^ ^{a b} 日置 敏昭(1994) 「<技術解説(規格特集)51>ハイビジョンLD(MUSE方式ハイビジョンビデオディスク)規格」, 『テレビジョン学会誌』 48(3), 283-286, 1994-03-20
6. ^ 二宮佑一(1991) 「ハイビジョン伝送規格(技術解説(規格特集)(20))」, 『テレビジョン学会誌』 45(8), 981-984, 1991-08-20
7. ^ 『BTA S-1007 MUSE有料ユニットインターフェース』, 放送技術開発協議会, 1994-05
8. ^ 『KW-32HDF9:取扱説明書』, SONY, pp.45-46
9. ^ 三橋哲雄(1988) 「方式と規格(HDTV(ハイビジョン)第2回)」,『テレビジョン学会誌』 42(7), 742-750
10. ^ 石田順一・二宮佑一(1982)「3-1信号方式(3.信号方式と伝送)」, 『テレビジョン学会誌』 36(10), 882-888, 1982-10-20
11. ^ ^{a b c} 二宮佑一ほか(1988) 「ハイビジョン衛星伝送方式－MUSE－」, 『テレビジョン学会誌』 42(5), 468-477, 一般社団法人映像情報メディア学会
12. ^ 苗村昌秀ほか(1991) 「BCS91-24 MUSE方式の動画解像度に関する一検討」, テレビジョン学会技術報告 15(46), 25-30, 1991-08-22
13. ^ 合志清一・苗村昌秀・山口孝一(1992) 「BCS92-2 MUSE方式における動画処理方式の検討」, テレビジョン学会技術報告 16(7), 7-12, 1992-01-24
14. ^ 合志清一ほか(1993) 「MUSE 方式の色差信号処理に関する検討」, 『電子情報通信学会論文誌. B-I, 通信I-情報通信システム・理論』 J76-B-1(3), 290-298, 1993-03-25
15. ^ 二宮佑一(1993) 「次世代テレビに関する最近の動向とユーザ側より見た半導体技術への期待」, 『電子情報通信学会技術研究報告. ICD, 集積回路』 93(288), 1-8, 1993-10-22
16. ^ 合志清一ほか(1994) 「高精細度化によるMUSEの画質向上」, 『テレビジョン学会誌』 48(12), 1573-1584, 1994-12-20
17. ^ 菅並秀樹ほか(1989) 「準瞬時圧伸差分符号化法を用いたハイビジョンベースバンド多重音声伝送方式」, 『テレビジョン学会誌』 43(12), 1388-1397
18. ^ 菅並秀樹ほか(1989) 「音声ベースバンド多重方式によるMUSEビデオディスクの試作」, 『テレビジョン学会全国大会講演予稿集』 (25), 157-158, 1989-07-25
19. ^ 吉村俊郎・太田雅敏・磯部忠(1989) 「BCS89-61 ハイビジョン放送データチャンネルの伝送特性」, 『テレビジョン学会技術報告』 13(62), 19-24, 1989-12-20
20. ^ 二宮佑一・川島正(1986) 「ICS81-2 高品位テレビの衛星1チャンネル放送方式」, 『テレビジョン学会技術報告』 10(35), 7-14, 1986-11
21. ^ 柴谷弘道ほか(1985) 「3.記録機器(<小特集>高品位テレビジョン機器)」, 『テレビジョン学会誌』 39(8), 675-679, 1985-08-20
22. ^ 外山建夫ほか(1984) 「IPA74-8 MUSE方式による高品位テレビジョン用光学式ビデオディスク<"高品位画像技術"特集>」, 『テレビジョン学会技術報告』 8(32), 9-14, 1984-11
23. ^ 大塚吉道・小幡伊和男(1990)「BCS90-47 MUSE方式における帯域圧縮技術」, 『テレビジョン学会技術報告』 14(56), 7-12, 1990-10-25
24. ^ 日置敏昭ほか(1984) 「VR75-8 高品位光ビデオディスクの信号フォーマット」, 『テレビジョン学会技術報告』 10(4), 47-52, 1986-05
25. ^ 二宮佑一ほか(1987) 「TEBS87-30 MUSEシステムの現状 : MUSE-EとMUSE-T」, 『テレビジョン学会技術報告』 11(36), 19-24
26. ^ 二宮佑一ほか(1984)「IPA74-7 高品位テレビの衛星1チャンネル伝送方式(MUSE)<"高品位画像技術"特集>」, 『テレビジョン学会技術報告』 8(32), 1-8
27. ^ デジタルテレビ規格ではなく団体としてのATSCである
28. ^ Jim Slater(1991) 『Modern Television Systems』, Trans-Atlantic Pubns, 189pp ISBN 978-0273031222
29. ^ 村上聖一(2012) 「〈放送史への証言 〉 大場吉延さん（元NHK 理事）規格統一で揺れ続けたハイビジョン開発 ～ MUSE 開発からデジタル方式への転換まで～」, 『放送研究と調査』 2012年4月号, NHK放送文化研究所, pp.70-79
30. ^ 福井清健・安本吉雄(1992) 「欧米における次世代テレビ方式の動向」, 『テレビジョン学会誌』 46(3), 276-283, 1992-03-20
31. ^ 合志清一ほか(1991) 「Narrow MUSEのベースバンド信号処理」, 『テレビジョン学会誌』 45(6), 737-746, 一般社団法人映像情報メディア学会
32. ^ デコード時に再度1125本に戻して受像機では表示される
33. ^ 音声フレーム構造などは変わらない
34. ^ 本田稔ほか(1990) 「Narrow-MUSE信号の伝送方式」, 『テレビジョン学会年次大会講演予稿集』 (26), 413-414, 1990-07-25
35. ^ 奥井誠人ほか(1992) 「AIPS92-43 Narrow-MUSEシステムの開発と室内実験」, 『テレビジョン学会技術報告』 16(47), 9-16, 1992-07-23
36. ^ 奥田治雄ほか(1989) 「BCS89-1 ADTVシステムの開発(1)」, 『テレビジョン学会技術報告』 13(41), 1-6, 1989-08-31
37. ^ 近藤いさお他(1990) 「NTSC-Compatible MUSE-6における垂直解像度の改善方法」, 『テレビジョン学会年次大会講演予稿集』 (26), 415-416, 1990-07-25
38. ^ 矢島亮一ほか(1989) 「BCS89-3 2フレームオフセット変調多重技術を用いた帯域圧縮方式の検討」, 『テレビジョン学会技術報告』 13(41), 13-18, 1989-08-31
39. ^ 渡辺馨ほか(1990) 「NTSCコンパチブルテレビジョンの音声伝送方式」, 『テレビジョン学会誌』 44(12), 1740-1749, 1990-12-20

• ハイビジョン
• MUSEデコーダ
• UNIHI
• W-VHS
• ハイビジョンLD