信号処理装置及び信号処理方法
【課題】高精細な映像信号に同期させて１９２ｋＨｚオーディオを伝送すること。
【解決手段】信号送信装置５は、１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、第１及び第２のＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングする。次に、第１及び第２のＡＥＳサブフレームにマッピングされたオーディオサンプルを２つのＡＥＳチャンネルから取り出し、取り出された４つのオーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納する。そして、オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して映像信号を出力する。
【解決手段】信号送信装置５は、１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、第１及び第２のＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングする。次に、第１及び第２のＡＥＳサブフレームにマッピングされたオーディオサンプルを２つのＡＥＳチャンネルから取り出し、取り出された４つのオーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納する。そして、オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して映像信号を出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、１９２ｋＨｚでサンプリングされたオーディオデータを映像信号に多重して伝送する場合に適用して好適な信号処理装置及び方法に関する。
【背景技術】
【０００２】
現行の１フレームが１９２０サンプル×１０８０ラインの映像信号（画像信号）であるＨＤ（High Definition）信号を超える、超高精細映像信号の受像システムや撮像システムの開発が進んでいる。例えば、現行ＨＤの４倍、１６倍もの画素数を持つ次世代の放送方式であるＵＨＤＴＶ（Ultra High Definition Television）規格の標準化が行われている。この標準化は、ＩＴＵ（International Telecommunication Union）やＳＭＰＴＥ（Society of Motion Picture and Television Engineers）に提案されて行われる。ＩＴＵやＳＭＰＴＥに提案されている映像規格は、１９２０サンプル×１０８０ラインの２倍、４倍のサンプル数、ライン数を持つ３８４０サンプル×２１６０ラインや７６８０サンプル×４３２０ラインの映像信号である。このうち、ＩＴＵで標準化されているものはＬＳＤＩ（Large screen digital imagery）と呼ばれ、ＳＭＰＴＥに提案されているものはＵＨＤＴＶ（Ultra High Definition TV）と呼ばれる。ＵＨＤＴＶに関しては次表１の信号が規定されている。
【０００３】
【表１】
【０００４】
これらのインタフェースとして、ＵＨＤＴＶ規格の３８４０サンプル／６０フレームの映像信号は、ビットレート１０Ｇｂｐｓの伝送路を２チャンネル使用して伝送する方式が提案されている。また、７６８０サンプル／６０フレームの映像信号は、ビットレート１０Ｇｂｐｓの伝送路を８チャンネル使用して伝送する方式が提案されている。
【０００５】
特許文献１には、４ｋ×２ｋ信号（４ｋサンプル×２ｋラインの超高解像度信号）の一種である３８４０×２１６０／３０Ｐ，３０／１．００１Ｐ／４：４：４／１２ビット信号を、ビットレート１０Ｇｂｐｓ以上でシリアル伝送する技術について開示されている。なお、［３８４０×２１６０／３０Ｐ］と示した場合には、［水平方向の画素数］×［垂直方向のライン数］／［１秒当りのフレーム数］を示している。本明細書において以下同じである。また、［４：４：４］は、原色信号伝送方式である場合、［赤信号Ｒ：緑信号Ｇ：青信号Ｂ］の比率を示し、色差信号伝送方式である場合、［輝度信号Ｙ：第１色差信号Ｃｂ：第２色差信号Ｃｒ］の比率を示す。
【特許文献１】特開２００５−３２８４９４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、超高精細映像信号の伝送規格では、オーディオ信号についても高音質化を図るようにしてある。例えばＵＨＤＴＶ用途では、現行ＨＤ用である４８ｋＨｚのサンプリング周波数でサンプリングしたオーディオの２倍である９６ｋＨｚのサンプリング周波数でサンプリングしたオーディオの伝送が想定されている。また、４８ｋＨｚのサンプリング周波数の４倍である１９２ｋＨｚのサンプリング周波数でサンプリングしたオーディオの伝送が想定されている。以下の説明では、ｍｋＨｚのサンプリング周波数でサンプリングしたオーディオを、「ｍｋＨｚオーディオ」という。オーディオ信号チャンネルについては、最大で２４チャンネルが必要とされている。
【０００７】
しかしながら、従来の伝送方式では、最も伝送レートが高い光ファイバを伝送路に使用した伝送方式でも、１チャンネルで最大で１０Ｇｂｐｓ程度の伝送しかできない。このため、超高精細映像信号に必要な伝送レートではなく、超高精細映像信号そのものを複数のチャンネルに分割して伝送することが必要である。オーディオ信号も分割したチャンネルのいずれかを使用して伝送されることになる。そして、映像信号に同期したオーディオ信号は、映像信号と同じタイミングで伝送される必要があるため、映像信号とオーディオ信号を同期させる処理が必要である。しかし、上述した最大２４チャンネルの１９２ｋＨｚオーディオを、多チャンネルに分割された映像データに同期して伝送するためには、何らかの同期処理が必要であり、そのための同期処理構成が複雑化する問題があった。また、１９２ｋＨｚオーディオを、１０．６９２Ｇｂｐｓに多重して伝送する方式や、オーディオ位相の規定は、これまで存在していなかった。
【０００８】
本発明はこのような状況に鑑みて成されたものであり、高精細な映像信号に同期させて１９２ｋＨｚオーディオ伝送することを目的とする。
【課題を解決するための手段】
【０００９】
本発明は、１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、２つのＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングする。
次に、第１及び第２のＡＥＳサブフレームにマッピングされたオーディオサンプルを２つのＡＥＳチャンネルから取り出し、取り出された４つのオーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納する。
そして、オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して映像信号を出力する。
【００１０】
このようにしたことによって、１９２ｋＨｚオーディオをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して映像信号を出力することができる。
【発明の効果】
【００１１】
本発明によれば、１９２ｋＨｚの周波数でサンプリングされたオーディオデータをＨＤ−ＳＤＩの水平ブランキング期間に多重する方式に関する。そして、現行の４８ｋＨｚオーディオデータをＨＤ−ＳＤＩの水平ブランキング期間へ多重する方式（ＳＭＰＴＥ２９９Ｍ）と互換の取れる多重方式を得られる。
【発明を実施するための最良の形態】
【００１２】
以下、発明を実施するための最良の形態（以下実施の形態とする。）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（オーディオサンプルの割当て制御：１９２ｋＨｚオーディオを映像信号に多重する第１の割当て例）
２．第２の実施の形態（オーディオサンプルの割当て制御：１９２ｋＨｚオーディオを映像信号に多重する第２の割当て例）
３．変形例
【００１３】
＜１．第１の実施の形態＞
［伝送システムの例］
【００１４】
以下、本発明の第１の実施の形態について、図１〜図１３を参照して説明する。
図１は、本実施の形態を適用したテレビジョン放送局用のカメラ伝送システムの全体構成を示す図である。このカメラ伝送システムは、複数台の放送用カメラ１とＣＣＵ（カメラコントロールユニット）２とで構成されており、各放送用カメラ１が光ファイバケーブル３でＣＣＵ２に接続されている。
【００１５】
放送用カメラ１は、同一構成のものである。そして、４ｋ×２ｋ信号として、ＵＨＤＴＶに相当する３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号を生成し、送信する信号送信装置として機能する。なお、４ｋ×２ｋ信号は、４ｋサンプル×２ｋラインの超高解像度信号を表す。
【００１６】
ＣＣＵ２は、各放送用カメラ１を制御したり、各放送用カメラ１から映像信号を受信したり、各放送用カメラ１のモニタに他の放送用カメラ１で撮影中の映像を表示させるための映像信号（リターンビデオ）を送信するユニットである。ＣＣＵ２は、各放送用カメラ１から映像信号を受信する信号受信装置として機能する。
【００１７】
［放送用カメラが備える信号処理装置の内部構成例］
図２は、放送用カメラ１の回路構成のうち、本実施の形態に関連する部分に係る信号処理装置のブロック図である。以下、データ構成等の説明を容易とするため、従来の信号処理装置と本発明に係る信号処理装置とを比較しながら説明する。
【００１８】
図２Ａは、従来の信号処理装置１００の内部構成例を示す。
信号処理装置１００は、収音した音声から音声信号を生成する２本のマイクロホン１０１と、音声信号を所定のフォーマットのＡＥＳチャンネルにマッピングする２つのマッピング部１０２を備える。また、信号処理装置１００は、マッピング部１０２から供給されるＡＥＳチャンネルのオーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される入力映像信号の補助データスペースに多重するオーディオ信号多重部１０３を備える。マッピング部１０２は、４８ｋＨｚオーディオ又は９６ｋＨｚオーディオをＡＥＳチャンネルにマッピングする。このとき、２本のＡＥＳチャンネルが用いられており、４８ｋＨｚオーディオは、２チャンネルずつの計４チャンネルで伝送される。また、９６ｋＨｚオーディオは、１本のＡＥＳチャンネルで１チャンネルずつの計２チャンネルで伝送される。
【００１９】
図２Ｂは、本発明に係る信号処理装置５の内部構成例を示す。
信号処理装置５、音声を収音して音声信号を生成する２本のマイクロホン６と、音声信号を所定のフォーマットのＡＥＳチャンネルにマッピングする２つのマッピング部７を備える。また、信号処理装置５は、マッピング部７から供給される第１及び第２のＡＥＳチャンネルのオーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される入力映像信号の水平補助データスペースに多重するオーディオ信号多重部８を備える。
【００２０】
音声信号は、１９２ｋＨｚのサンプリング周波数でサンプリングされたオーディオサンプルを含む。マッピング部７は、４つのオーディオサンプルを、第１及び第２のＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングする。
【００２１】
放送用カメラ１内の撮像部及び映像信号処理部（図示略）によって生成された３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、オーディオ信号多重部８に送られる。オーディオ信号多重部８は、１９２ｋＨｚでサンプリングされたビデオラインに続く水平補助データスペース（Horizontal ancillary data space）に、オーディオデータパケットを多重する。このとき、オーディオ信号多重部８は、第１及び第２のＡＥＳサブフレームにマッピングされたオーディオサンプルを第１及び第２のＡＥＳチャンネルから取り出す。次に、オーディオ信号多重部８は、取り出された４つのオーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納する。そして、オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して後続する不図示の処理ブロックに映像信号を出力する。
【００２２】
３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、ワード長が１２ビットずつのＧデータ系列，Ｂデータ系列，Ｒデータ系列の同期を取って並列配置した、３６ビット幅の信号である。１フレーム期間は１／２４秒，１／２５秒，１／３０秒のうちのいずれかであり、１フレーム期間内に２１６０の有効ライン期間が含まれている。
【００２３】
入力映像信号の有効ライン（水平ライン）期間には、タイミング基準信号ＥＡＶ（End of Active Video）と、ライン番号ＬＮと、誤り検出符号ＣＲＣと、水平ブランキング期間（補助データスペース／未定義ワードデータの区間）が配置される。また、タイミング基準信号ＳＡＶ（Start of Active Video）と、映像データの区間であるアクティブラインが配置される。アクティブラインのサンプル数は３８４０であり、Ｇデータ系列，Ｂデータ系列，Ｒデータ系列のアクティブラインには、それぞれＧ，Ｂ，Ｒの映像データが配置される。
【００２４】
［オーディオデータパケットの構成例］
図３は、所定のサンプリング周波数でサンプリングしたオーディオデータをＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの構成例の一部を示す図である。オーディオデータパケットのデータ構造は、ＳＭＰＴＥ２９９Ｍによって定められる。以下の説明では、第１のＡＥＳサブフレームをＡＥＳサブフレーム１とし、第２のＡＥＳサブフレームをＡＥＳサブフレーム２とする。
【００２５】
図３Ａは、４８ｋＨｚオーディオをＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。このオーディオデータパケットは、２ワードのユーザデータワード（以下、ＵＤＷ（User Data Word）と略記する場合がある。）を含むクロック領域と、４ワードのＵＤＷを含むチャンネル１〜４で構成される。ＵＤＷは、オーディオクロック位相データ（ＣＬＫ）、チャンネルｎ（オーディオデータ）、誤り訂正コード（以下、ＥＣＣ（Error Correction Codes）と略記する場合がある。）の３種類のデータを含む。ＵＤＷに含まれるデータの内容は、後述する。
【００２６】
図３Ｂは、９６ｋＨｚオーディオをＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。このオーディオデータパケットは、２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むチャンネル１，１，２，２で構成される。
【００２７】
図３Ｃは、１９２ｋＨｚオーディオをサンプル毎に第１及び第２のＡＥＳチャンネルのＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。以下の説明では、第１のＡＥＳチャンネルをチャンネルＡとし、第２のＡＥＳチャンネルをチャンネルＢとする。オーディオデータパケットは、ＡＥＳチャンネルＢにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ＋２，ｎ＋３，ｎ＋６，ｎ＋７で構成される。また、ＡＥＳチャンネルＡにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ，ｎ＋１，ｎ＋４，ｎ＋５で構成される。なお、以下の説明において「ｎ」とは、ｋを０以上の整数とした場合に４ｋ＋１として定まる数値（ｎ＝４ｋ＋１（ｋ≧０））を表す。
【００２８】
クロック領域には、次表２に示すように、オーディオクロック位相データが挿入される。どこでオーディオが発生したかを示すオーディオ位相は、表２（ＳＭＰＴＥ２９９Ｍ）に示されるオーディオクロック位相データに従って定められる。また、所定のサンプリングクロックでサンプルされたオーディオサンプル位置は、各フレームの一水平期間中の７４．２５ＭＨｚでのサンプル位置で定義される。オーディオデータパケットは、オーディオ信号多重部８によって、水平補助データスペースに多重される。
【００２９】
【表２】
【００３０】
オーディオクロック位相データは、表２に示すｃｋ０〜ｃｋ１２の１３ビットで定められる。ｃｋ０〜ｃｋ１２までのビットは、フォーマッタに入力したオーディオサンプルと同時に入力した画素サンプルと、映像ストリームのＥＡＶの最初のワードとの差の映像クロック数を表示する。そして、ｃｋ０〜ｃｋ１２は、ＳＭＰＴＥ２９２Ｍによる７４．２５ＭＨｚのサンプリングクロックを使用するシステムで管理することができる。つまり、所定のサンプリングクロックでサンプルされたオーディオサンプルが挿入された一水平期間におけるオーディオ位相を、８１９２クロックまで管理することができる。
【００３１】
デジタルオーディオのシリアルインタフェース規格であるＡＥＳ（Audio Engineering Society）３―２００３のＦｉｇｕｒｅ２には、サブフレームフォーマットが定められている。また、この規格にはフレームフォーマットとして、２チャンネルモードの場合、２チャンネルの４８ｋＨｚオーディオを、連続したＡＥＳサブフレーム１，２で送る旨が規定されている。また、ＳＭＰＴＥ２９９Ｍには、４８ｋＨｚオーディオをチャンネル１，２に入れることについて規定されている。
【００３２】
従来は、図３Ａに示すように、４８ｋＨｚオーディオのオーディオチャンネルの内、チャンネル１は、ＡＥＳサブフレーム１で送られ、チャンネル２は、ＡＥＳサブフレーム２で送られる。さらに、チャンネル３は、ＡＥＳサブフレーム１で送られ、チャンネル４は、ＡＥＳサブフレーム２で送られる。
また、図３Ｂに示すように、９６ｋＨｚオーディオの連続したオーディオチャンネルの内、チャンネル１が連続するＡＥＳサブフレーム１，２で送られる。そして、チャンネル２が連続するＡＥＳサブフレーム１，２で送られる。
【００３３】
本実施の形態では、図３Ｃに示すように、１チャンネルの１９２ｋＨｚオーディオの連続したオーディオサンプルのうち、ＡＥＳチャンネルＡのサンプルｎ，ｎ＋１が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋２，ｎ＋３が連続するＡＥＳサブフレーム１，２で送られる。同様に、ＡＥＳチャンネルＡのサンプルｎ＋４，ｎ＋５が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋６，ｎ＋７が連続するＡＥＳサブフレーム１，２で送られる。
【００３４】
このとき、信号送信装置５と、受信側の機器との間で、信号伝送時の互換性を有するために、１９２ｋＨｚオーディオのチャンネル１の連続したオーディオサンプル（第１及び第２のオーディオサンプル）を、チャンネル１，２に入れる。さらに、９６ｋＨｚオーディオのチャンネル２の連続したオーディオサンプルを、チャンネル３，４に入れる。
【００３５】
また、１９２ｋＨｚオーディオのオーディオデータパケットに定義されるクロック位相を、連続した４つのオーディオサンプル（第１〜第４のオーディオサンプル）のうち、第２のオーディオサンプルの位置で定めている。このことについては、図８を参照して後述する。
【００３６】
［各オーディオデータパケットの構成例］
以下、オーディオ信号多重部８が行う処理の例について、データフォーマットと合わせて説明する。
図４は、ＡＥＳ３で定義される３２〜４８ｋＨｚオーディオとオーディオデータパケットの構造例を示す。
【００３７】
ＡＥＳオーディオは、ＡＥＳ３で規定される１つのＡＥＳデジタルストリームに含まれる全てのＶＵＣＰデータ、オーディオデータ及び付加データを指す。そして、ＡＥＳサブフレーム１，２を順に並べたフレームを、ＡＥＳフレームという。
【００３８】
３２〜４８ｋＨｚオーディオの場合、ＡＥＳチャンネルペア１（ＡＥＳ１），ＡＥＳチャンネルペア２（ＡＥＳ２）によってサブフレームが伝送される。３２〜４８ｋＨｚオーディオのＡＥＳチャンネルペア１，２には、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。そして、ＡＥＳチャンネルペア１には、所定の周波数でサンプリングされたＡＥＳサブフレーム１，２が連続して含まれる。同様に、ＡＥＳチャンネルペア２にも、ＡＥＳサブフレーム１，２が連続して含まれる。そして、ＡＥＳチャンネルペア２には、第１及び第２のオーディオサンプルが含まれる。ＡＥＳサブフレームは、４ビットのプリアンブル、４ビットの付加データ又はオーディオデータ、２０ビットのオーディオデータ、１ビットのＶ，Ｕ，Ｃ，Ｐデータの順に、３２ビットで構成される。
【００３９】
オーディオデータパケットは、各種フィールドを含む。例えば、補助データフラグ（ＡＤＦ）、データＩＤ（ＤＩＤ）、データブロックナンバー（ＤＢＮ）、データカウント（ＤＣ）、オーディオクロック位相データ（ＣＬＫ）、ユーザデータワード（ＵＤＷ）、チェックサム（ＣＳ）フィールドがある。
【００４０】
また、オーディオデータも、各種フィールドを含む。例えば、クロック（ＣＬＫ）と、チェックサムフィールドの間に、ＡＥＳチャンネル１の第１のオーディオサンプル（ＣＨ１）、ＡＥＳチャンネル１の第２のオーディオサンプル（ＣＨ２）を含む。また、ＡＥＳチャンネル２の第１のオーディオサンプル（ＣＨ３）、ＡＥＳチャンネル２の第２のオーディオサンプル（ＣＨ４）フィールドと、ＥＣＣフィールドを含む。オーディオデータパケットは、Ｃｂ／Ｃｒデータストリームの水平補助データスペースに多重される。
【００４１】
図５は、ＡＥＳ３で定義される９６ｋＨｚオーディオとオーディオデータパケットとの関係を示す。
【００４２】
９６ｋＨｚオーディオの場合、ＡＥＳチャンネル１，２によってサブフレームが伝送される。ＡＥＳチャンネル１，２には、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。ＡＥＳサブフレーム１，２には、所定の周波数でサンプリングされた第１及び第２のオーディオサンプルが連続して含まれる。同様に、ＡＥＳチャンネル２も、ＡＥＳサブフレーム１，２が連続して含まれ、ＡＥＳサブフレーム１，２には、第１及び第２のオーディオサンプルが含まれる。ＡＥＳサブフレームの構成例とオーディオデータパケットの構成例は、上述した４８ｋＨｚオーディオの場合と同様である。
【００４３】
図６は、本実施の形態に係るＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係例を示す。
【００４４】
１９２ｋＨｚオーディオの場合、ＡＥＳチャンネルＡ，Ｂによってサブフレーム１，２が伝送される。ＡＥＳチャンネルＡには、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。ＡＥＳサブフレーム１，２の構成例は、上述した４８ｋＨｚオーディオの場合と同様である。また、オーディオデータパケットの構成例は、上述した４８ｋＨｚオーディオの場合と同様である。
【００４５】
マッピング部８は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、オーディオサンプルをマッピングする。
このとき、ｎ番目にサンプリングされた第ｎのオーディオサンプルを第１のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。次に、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを第１のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。次に、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。
【００４６】
この結果、１９２ｋＨｚオーディオのオーディオサンプルは、ＡＥＳチャンネルＡ，Ｂによって以下のようにマッピングされる。
・ＡＥＳチャンネルＡ：ｎ，ｎ＋１，ｎ＋４，ｎ＋５，ｎ＋８，ｎ＋９，…
・ＡＥＳチャンネルＢ：ｎ＋２，ｎ＋３，ｎ＋６，ｎ＋７，ｎ＋１０，ｎ＋１１，…
【００４７】
そして、オーディオ信号多重部８は、ＡＥＳチャンネルＡ，Ｂにマッピングされたオーディオサンプルをオーディオデータパケットに格納する。
本例では、オーディオデータパケットに、ＡＥＳチャンネルＡの第ｎのオーディオサンプル、第ｎ＋１のオーディオサンプル、ＡＥＳチャンネルＢの第ｎ＋２のオーディオサンプル、第ｎ＋３のオーディオサンプルを格納する。
【００４８】
映像に同期したオーディオの映像フレーム当りオーディオサンプル数は、次表３に示される。表３には、オーディオサンプリングレートが３２．０ｋＨｚ、４４．１ｋＨｚ、４８．０ｋＨｚ、９６．０ｋＨｚ、１９２．０ｋＨｚの場合に、フレーム毎のオーディオサンプル数が示される。
【００４９】
【表３】
【００５０】
表４は、ＵＤＷｎに対するチャンネル割当ての例を示す。ＵＤＷｎとは、ｎ番目のＵＤＷを意味する。オーディオサンプリングレートが３２．０ｋＨｚ、４４．１ｋＨｚ、４８．０ｋＨｚ、９６．０ｋＨｚの場合と、１９２．０ｋＨｚの場合とで割り当てられるチャンネルが異なることが示される。
【００５１】
【表４】
【００５２】
図７は、各オーディオデータパケットの構成例である。
ＣＨ１〜ＣＨ４に格納されるデータは、３２ｋＨｚ〜４８ｋＨｚオーディオ、９６ｋＨｚオーディオ及び１９２ｋＨｚオーディオの場合で異なる。つまり、１９２ｋＨｚオーディオの場合、連続するチャンネルＡ，Ａ，Ｂ，Ｂの順に、オーディオサンプルｎ，ｎ＋１，ｎ＋２，ｎ＋３が格納される。
【００５３】
図８は、１９２ｋＨｚオーディオのビデオライン、デジタル音声のサンプリングポイント、オーディオクロック位相データ間の関係を示す。ここでは、１９２ｋＨｚオーディオのサンプリングポイントについて説明する。
【００５４】
入力音声信号のサンプリングポイントは、各オーディオデータに対して、連続する４つのオーディオサンプル（第１〜第４のオーディオサンプル）で規定される。このような４つのサンプルを、４サンプルペアともいう。
【００５５】
例えば、１９２ｋＨｚオーディオでは、４サンプルペアのうち、ＥＡＶの先頭から見て、４つ目のオーディオサンプルの位置でオーディオクロック位相が定まる。クロック位相は、初めに、ＥＡＶの先頭からオーディオの発生した位置までの時間を、ＨＤ−ＳＤＩの７４．２５ＭＨｚあるいは７４．２５／１．００１ＭＨｚクロックの１クロック期間で割って算定される。さらに、クロック位相は、ＵＤＷ０，１のオーディオクロック位相データｃｋ０〜ｃｋ１２（０〜８１９１）に書き込まれる。
【００５６】
図９は、１９２ｋＨｚオーディオの多重位置フラグ（ｍｐｆ）の規定例を示す。オーディオデータＡ〜Ｈは、４サンプルペアを含む。
【００５７】
１９２ｋＨｚオーディオのデータパケットに定義する多重位置フラグ（ｍｐｆ：Multiplex Position Flag）は、サンプルペアのうち、４つ目のオーディオサンプル位置を基準として設定される。オーディオデータパケットの多重位置は、オーディオのサンプリングポイントが発生した水平ラインに対して次のライン、あるいは、さらに１ライン遅れた水平補助データスペース（ＨＡＮＣ、水平補助期間ともいう。）である。多重位置フラグ（ｍｐｆ）は、オーディオデータパケットの多重位置とそれに対応する映像データとの関係を規定する。
【００５８】
オーディオ信号多重部８は、４つのオーディオサンプルがマッピングされた第１及び第２のＡＥＳサブフレームが含まれる第１及び第２のＡＥＳチャンネルから第ｎ乃至第ｎ＋３番目にサンプリングされたオーディオサンプルを４サンプルペアとして取り出す。そして、映像信号に含まれる第１の水平ラインに第ｎ＋３のオーディオサンプルのサンプリングポイントが含まれる場合に、第１の水平ラインに連続する第２の水平ラインの補助データスペースに、オーディオデータパケットを多重する。
【００５９】
オーディオ信号多重部８は、第１の水平ラインにスイッチングポイントが含まれる場合、オーディオデータパケットを、第２の水平ラインに連続する第３の水平ラインの補助データスペースに多重する。
【００６０】
例えば、オーディオデータＡ，Ｂ，Ｃ，Ｅ，Ｇの場合、４サンプルペアのうち、第４のオーディオサンプルの位置の次の水平ラインの水平補助データスペースにオーディオデータパケットが多重される。このとき、ｍｐｆ＝０である。そして、オーディオ信号多重部８は、オーディオサンプリングが行われたビデオラインに続く水平補助データスペースにオーディオデータパケットを多重される。また、オーディオデータパケットがスイッチングポイントに続く場合、データの誤りを防ぐために、１水平ライン分遅延して多重される。
【００６１】
オーディオ信号多重部８は、所定の周波数でオーディオ信号がサンプリングされたサンプリングポイントが含まれる第１の水平ラインを認識する。そして、第１の水平ラインに連続する第２の水平ラインの補助データスペースに、第１〜第４のオーディオサンプルを含むオーディオデータパケットを多重して挿入する。そして、オーディオデータパケットが多重して挿入された映像信号は、後続の処理に供給される。
【００６２】
一方、水平補助データスペースがスイッチングポイントに続く場合は、データの誤りを防ぐため、オーディオデータパケットを、次の１ライン分だけ遅延して多重する。つまり、オーディオ信号多重部８は、第１及び第２のオーディオサンプルが含まれる第１のオーディオデータパケット及び第１のオーディデータパケットに連続する第２のオーディオデータパケットを、第３の水平ラインの補助データスペースに多重して挿入する。第３の水平ラインは、第２の水平ラインに連続するラインである。
【００６３】
ところで、Ｎ／Ａ(Not Available)は、スイッチングポイントの次のラインの水平補助データスペースに、オーディオデータパケットが多重できないことを示す。例えば、オーディオデータＤのサンプリングポイントには、入力映像信号の中にスイッチングポイントがある。このため、オーディオデータパケットがオーディオサンプルの入力タイミングに対して、２番目のラインの水平補助データスペースに多重されているので、ｍｐｆ＝１にセットされる。
【００６４】
図１０は、オーディオデータ（チャンネルｎ）のビット割当ての例を示す。
図１０には、ＣＨ１〜４に割り当てられたＵＤＷｎのビット毎に設定される値が規定される。ＡＥＳサブフレームのすべてのビットは、４つの連続するＵＤＷ（ＵＤＷ４ｎ−２、ＵＤＷ４ｎ―１、ＵＤＷ４ｎ、ＵＤＷ４ｎ＋１）で伝送される。ＵＤＷ２〜ＵＤＷ１７は、オーディオデータパケットで常に、ＣＨｎに用いられる。
【００６５】
ＣＨ１には、ＵＤＷ２〜５が割り当てられる。ＣＨ２には、ＵＤＷ６〜９が割り当てられる。ＣＨ３には、ＵＤＷ１０〜１３が割り当てられる。ＣＨ４には、ＵＤＷ１４〜１７が割り当てられる。
【００６６】
ＵＤＷ１８〜２３の構成例は、表５に示される。
【００６７】
【表５】
【００６８】
誤り訂正コード（ＥＣＣ）は、ＡＤＦの最初からＵＤＷ１７までの２４ワードの誤りを訂正、検出するために使用される。この誤り訂正コードは、ＢＣＨコードである。
ＢＣＨコードは、ｂ０〜ｂ７の各ビットシーケンスから生成される。ＥＣＣは、６ワードからなり、以下の生成方程式で決定される。
【００６９】
【数１】
【００７０】
図１１は、ＢＣＨコード生成回路のブロックダイヤグラムの構成例を示す。
２４ワード中のｂ０〜ｂ７ビットの各ビットシーケンス（ＡＤＦの最初のワードからＵＤＷ１７まで）を入力として、ＥＣＣ０〜５が決定される。
【００７１】
図１２は、オーディオデータパケットの伝送に使用される、Ｃｒ／Ｃｂデータストリームの補助データスペースの例を示す。
入力映像信号の水平ラインは、入力映像信号の有効ライン期間を示すタイミング基準信号と、水平ラインにおける水平ブランキング期間を示す補助データスペースを含む。そして、色差信号（Ｃｒ／Ｃｂ）のデータストリームの水平補助データスペースのみがオーディオデータパケットの送出に使用される。この水平補助データスペースは、サンプルナンバー１９２８〜２１９５であって、ラインナンバー１〜７，９〜５６９，５７１〜１１２５の領域である。ただし、スイッチングポイントの次のラインの水平補助データスペースには多重してはならない。
【００７２】
そして、１つの水平補助データスペースに割り当てられる１９２ｋＨｚオーディオデータパケットの多重数は、以下の条件式で算定されるＮａ／４以下に制限される。このとき、１つの水平補助データスペースに多重できるチャンネル当りのオーディオサンプル数Ｎｏは、以下の条件式に基づいて、Ｎａ（Number of Audio samples）の値から導かれる。
【００７３】
【数２】
【００７４】
多重位置は、オーディオサンプルが発生した次の水平補助データスペース、あるいは、さらにもう一つ後の水平補助データスペースである。
【００７５】
ここで、オーディオコントロールパケットについて説明する。
図１３は、オーディオコントロールパケットの構成を示す。
オーディオコントロールパケットは、インタレースシステムでは１フィールドに１回、プログレッシブシステムでは１フレームに１回、スイッチングポイントから後の２番目のラインの、Ｙデータストリームの水平補助データスペースで送出される。この水平補助データスペースは、サンプルナンバー１９２８〜２１９５であって、インタレースシステムではラインナンバー９，５７１、プログレッシブシステムではラインナンバー９の領域である。１つのオーディオコントロールパケットのＵＤＷには、常に１１ワードがある。
【００７６】
そして、オーディオコントロールパケットは、ＳＭＰＴＥ２９１Ｍの規定に従ってフォーマットされる。オーディオコントロールパケットは、補助データフラグ（ＡＤＦ）、データＩＤ（ＤＩＤ）、データブロックナンバー（ＤＢＮ）、データカウント（ＤＣ）、ユーザデータワード（ＵＤＷ）、チェックサム（ＣＳ）フィールドを含む。
【００７７】
ＤＩＤは、以下のように定義される。つまり、ＣＨ１〜４をオーディオグループ１とする。ＣＨ５〜８をオーディオグループ２とする。ＣＨ９〜１２をオーディオグループ３とする。ＣＨ１３〜１６をオーディオグループ４とする。
以下、ユーザデータワード（ＵＤＷｎ）の構成について説明する。
【００７８】
ＵＤＷ０の構成例は、表６に示される。表６は、オーディオフレームナンバーデータ（ＡＦ）のビット割当てを示す。
【００７９】
【表６】
【００８０】
オーディオフレームナンバーデータ（ＡＦ）は、ビデオフレームのシーケンシャル番号である。そして、オーディオサンプルの数が各ビデオフレーム当りで整数関係にないときに、総ビデオフレーム（オーディオフレームシーケンス）の何番目のフレームに当たるかを表示する。シーケンスの最初の番号は１であり、最後の番号はオーディオフレームシーケンスの長さに等しい。ＡＦが全てゼロのときは、フレーム番号が得られないことを示す。
【００８１】
１から始まりシーケンスの最後まで続く全てのオーディオフレームシーケンスでは、フレーム当りのオーディオサンプル数は、２つの整数（ｍ，ｍ＋１）を基本にする。
基本的には奇数のオーディオフレーム（１，２，５，…）は２つのうちの大きい整数のオーディオサンプル数をもつ。また、偶数のオーディオフレーム（２，４，６，…）は小さい整数のオーディオサンプル数をもつ。しかし、表７に示される例外フレームがある。
【００８２】
【表７】
【００８３】
表７には、テレビジョンシステムが、３０．００フレーム／秒の場合と、３０．００／１．００１フレーム／秒の場合について、サンプリングレート、フレームシーケンス、基本サンプル数、例外が示される。
【００８４】
ＵＤＷ１の構成例は、表８に示される。ＵＤＷ１には、サンプリングレートを決定するためのレートコードが割り当てられる。全てのチャンネルペアに対するサンプリングレートは、ＲＡＴＥワードで規定される。チャンネルペアとは、同じＡＥＳオーディオ信号源からの２つのデジタルオーディオチャンネルをいう。
【００８５】
【表８】
【００８６】
表８に示したＵＤＷ１のビットｂ１，ｂ２，ｂ３に設定されるＲＡＴＥコードの割当て例は、表９に示される。
【００８７】
【表９】
【００８８】
表９より、ＵＤＷ１にセットされたＸ２，Ｘ１，Ｘ０フィールドが、それぞれ１，０，１の場合、サンプルレートは、１９２．０ｋＨｚであることが示される。
【００８９】
ＵＤＷ２の構成例は、表１０に示される。
【００９０】
【表１０】
ＡＣＴワードは、アクティブチャンネルを表示する。ａ１〜ａ４のビットは、そのオーディオグループのアクティブな各チャンネル（ＣＨ１〜４）について、対応するビットを１にセットする。アクティブでないチャンネルのビットはゼロにセットする。
【００９１】
ＵＤＷ３〜８の構成例は、表１１に示される。ＵＤＷ３〜８には、ＤＥＬｍ−ｎのビットが割当てられる。
【００９２】
【表１１】
【００９３】
ＤＥＬｍ−ｎワードは、映像に対する、オーディオプロセスで蓄積された遅延量（accumulated audio processing delay）を表示する。この遅延量は、ＣＨｍとＣＨｎのチャンネルペアに対するもので、オーディオサンプリングクロックインターバルを基準単位としたものである。ＤＥＬ０−２５は、２６ビットの２の歩数フォーマットで表現される。正の値は映像がオーディオに対して進んでいることを示す。
【００９４】
ＵＤＷ９〜１０の構成例は、表１２に示される。ＵＤＷ９，１０には、リザーブ（ＲＳＲＶ）のビットが割当てられる。将来の仕様変更に際して用いられるデータ領域である。
【００９５】
【表１２】
【００９６】
以上説明した第１の実施の形態に係るカメラ伝送システムにおいて１９２ｋＨｚオーディオの伝送フォーマットは、従来用いられている４８ｋＨｚオーディオ、９６ｋＨｚオーディオの伝送規格であるＳＭＰＴＥ２９９Ｍと整合する形で定義される。例えば、３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、ＣＨ１〜ＣＨ８（ＬｉｎｋＡ及びＬｉｎｋＢ）のＨＤ−ＳＤＩ信号にマッピングされる。これにより、ビットレート１０．６９２Ｇｂｐｓのシリアル・デジタルデータに変換して伝送することができる。つまり、ＩＴＵやＳＭＰＴＥで審議されている次世代の映像信号である４ｋ信号を、従来用いている１０．６９２Ｇｂｐｓシリアルインタフェースの多ｃｈで伝送することが出来るという効果がある。
【００９７】
また、上述した第１の実施の形態では、ＵＨＤＴＶ規格でサンプリングされた映像データの水平補助データスペースに、所定の周波数でサンプリングされたオーディオサンプルを多重することが可能となる。このとき、ＵＨＤＴＶの要求仕様であるオーディオ２４ｃｈの多重は、ＵＨＤＴＶ１では４８ｋＨｚオーディオで実現されると共に、ＵＨＤＴＶ２では１９２ｋＨｚオーディオで実現される。
【００９８】
また、オーディオ位相をＵＨＤＴＶ１とＵＨＤＴＶ２のサンプリングクロックではなく、７４．２５ＭＨｚで定義する。この結果、１０Ｇインタフェースの１ＣＨから順次オーディオサンプルを多重することが可能となり、ハードウエアの負担を軽減できるという効果が得られる。また、現行の４８ｋＨｚオーディオ規格であるＳＭＰＴＥ２９９Ｍの内容と整合性が取れる形で１９２ｋＨｚオーディオのフォーマットを定義することが可能となる。
【００９９】
＜２．第２の実施の形態＞
次に、本発明の第２の実施の形態に係るマッピング部７とオーディオ信号多重部８の動作例について、図１４〜図１６を参照して説明する。以下の説明において、既に第１の実施の形態で説明した図１に対応する部分には同一符号を付し、詳細な説明を省略する。また、３２〜４８ｋＨｚオーディオ、９６ｋＨｚオーディオに関しても詳細な説明を省略する。
【０１００】
［オーディオデータパケットの構成例］
図１４は、１９２ｋＨｚオーディオをサンプル毎に２チャンネルのＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。このオーディオデータパケットは、ＡＥＳチャンネルＡにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ，ｎ＋２，ｎ＋４，ｎ＋６で構成される。また、ＡＥＳチャンネルＢにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ＋１，ｎ＋３，ｎ＋５，ｎ＋７で構成される。つまり、ＡＥＳチャンネルＡには、偶数番目のオーディオサンプルが含まれ、ＡＥＳチャンネルＢには、奇数番目のオーディオサンプルが含まれる。
【０１０１】
本実施の形態では、１チャンネルの１９２ｋＨｚオーディオの連続したオーディオサンプルのうち、ＡＥＳチャンネルＡのサンプルｎ，ｎ＋２が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋１，ｎ＋３が連続するＡＥＳサブフレーム１，２で送られる。同様に、ＡＥＳチャンネルＡのサンプルｎ＋４，ｎ＋６が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋５，ｎ＋７が連続するＡＥＳサブフレーム１，２で送られる。
【０１０２】
図１５は、本実施の形態に係るＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係を示す。
【０１０３】
１９２ｋＨｚオーディオの場合、ＡＥＳチャンネルＡ，Ｂによってサブフレーム１，２が伝送される。ＡＥＳチャンネルＡには、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。ＡＥＳサブフレーム１，２の構成例は、上述した４８ｋＨｚオーディオの場合と同様である。また、オーディオデータパケットの構成例は、上述した４８ｋＨｚオーディオの場合と同様である。
【０１０４】
マッピング部８は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、オーディオサンプルをマッピングする。
このとき、ｎ番目にサンプリングされた第ｎのオーディオサンプルを第１のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。次に、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを第１のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。次に、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。
【０１０５】
この結果、１９２ｋＨｚオーディオのオーディオサンプルは、ＡＥＳチャンネルＡ，Ｂによって以下のようにマッピングされる。
・ＡＥＳチャンネルＡ：ｎ，ｎ＋２，ｎ＋４，ｎ＋６，ｎ＋８，ｎ＋１０，…
・ＡＥＳチャンネルＢ：ｎ＋１，ｎ＋３，ｎ＋５，ｎ＋７，ｎ＋９，ｎ＋１１，…
【０１０６】
そして、オーディオ信号多重部８は、ＡＥＳチャンネルＡ，Ｂにマッピングされたオーディオサンプルをオーディオデータパケットに格納する。
本例では、オーディオデータパケットに、ＡＥＳチャンネルＡの第ｎのオーディオサンプル、第ｎ＋２のオーディオサンプル、ＡＥＳチャンネルＢの第ｎ＋１のオーディオサンプル、第ｎ＋３のオーディオサンプルを格納する。
【０１０７】
表１３は、ＵＤＷｎに対するチャンネル割当ての例を示す。オーディオサンプリングレートが３２．０ｋＨｚ、４４．１ｋＨｚ、４８．０ｋＨｚ、９６．０ｋＨｚの場合と、１９２．０ｋＨｚの場合とで割り当てられるチャンネルが異なることが示される。
【０１０８】
【表１３】
【０１０９】
図１６は、各オーディオデータパケットの構成例である。
ＣＨ１〜ＣＨ４に格納されるデータは、３２ｋＨｚ〜４８ｋＨｚオーディオ、９６ｋＨｚオーディオ及び１９２ｋＨｚオーディオの場合で異なる。つまり、１９２ｋＨｚオーディオの場合、連続するチャンネルＡ，Ａ，Ｂ，Ｂの順に、オーディオサンプルｎ，ｎ＋３，ｎ＋２，ｎ＋４が格納される。
【０１１０】
以上説明した第２の実施の形態に係るカメラ伝送システムにおいて１９２ｋＨｚオーディオは、従来用いられている４８ｋＨｚオーディオ、９６ｋＨｚオーディオの伝送規格であるＳＭＰＴＥ２９９Ｍと整合する形で定義される。このとき、チャンネルＡには、偶数番目のオーディオサンプルを格納し、チャンネルＢには、奇数番目のオーディオサンプルを格納する。このように格納しても、例えば、３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、ＣＨ１〜ＣＨ８（ＬｉｎｋＡ及びＬｉｎｋＢ）のＨＤ−ＳＤＩ信号にマッピングされる。これにより、ビットレート１０．６９２Ｇｂｐｓのシリアル・デジタルデータに変換して伝送することができる。つまり、ＩＴＵやＳＭＰＴＥで審議されている次世代の映像信号である４ｋ信号を、従来用いている１０．６９２Ｇｂｐｓシリアルインタフェースの多ｃｈで伝送することが出来るという効果がある。
【０１１１】
＜３．変形例＞
なお、以上の例ではカメラ伝送システムに本発明を適用しているが、他にも様々な方式の信号を伝送するようにしてもよい。このように、様々な信号を送信する場合に、適用することができる。
【図面の簡単な説明】
【０１１２】
【図１】本発明の第１の実施の形態に係るテレビジョン放送局用のカメラ伝送システムの全体構成を示す図である。
【図２】放送用カメラの回路構成のうち、信号送信装置の内部構成例を示すブロック図である。
【図３】オーディオデータパケットの例を示す説明図である。
【図４】ＡＥＳ３で定義される３２〜４８ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図５】ＡＥＳ３で定義される９６ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図６】ＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図７】各オーディオデータパケットの構造の例を示す説明図である。
【図８】１９２ｋＨｚオーディオのビデオライン、デジタル音声のサンプリングポイント、オーディオクロック位相データ間の関係を示す説明図である。
【図９】多重位置フラグ（ｍｐｆ）とオーディオデータパケットの多重位置との関係を示す説明図である。
【図１０】オーディオデータ（チャンネルｎ）のビット割当ての例を示す説明図である。
【図１１】ＢＣＨコード生成回路のブロックダイヤグラムの例を示す説明図である。
【図１２】オーディオデータパケットの伝送に使用できる、Ｃｒ／Ｃｂデータストリームの補助データスペース（１０８０／６０Ｉシステム）を示す説明図である。
【図１３】オーディオコントロールパケットの構造の例を示す説明図である。
【図１４】オーディオデータパケットの例を示す説明図である。
【図１５】ＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図１６】各オーディオデータパケットの構造の例を示す説明図である。
【符号の説明】
【０１１３】
１…放送用カメラ、２…ＣＣＵ（カメラコントロールユニット）、３…光ファイバケーブル、５…信号送信装置、７…マッピング部、８…オーディオ信号多重部
【技術分野】
【０００１】
本発明は、１９２ｋＨｚでサンプリングされたオーディオデータを映像信号に多重して伝送する場合に適用して好適な信号処理装置及び方法に関する。
【背景技術】
【０００２】
現行の１フレームが１９２０サンプル×１０８０ラインの映像信号（画像信号）であるＨＤ（High Definition）信号を超える、超高精細映像信号の受像システムや撮像システムの開発が進んでいる。例えば、現行ＨＤの４倍、１６倍もの画素数を持つ次世代の放送方式であるＵＨＤＴＶ（Ultra High Definition Television）規格の標準化が行われている。この標準化は、ＩＴＵ（International Telecommunication Union）やＳＭＰＴＥ（Society of Motion Picture and Television Engineers）に提案されて行われる。ＩＴＵやＳＭＰＴＥに提案されている映像規格は、１９２０サンプル×１０８０ラインの２倍、４倍のサンプル数、ライン数を持つ３８４０サンプル×２１６０ラインや７６８０サンプル×４３２０ラインの映像信号である。このうち、ＩＴＵで標準化されているものはＬＳＤＩ（Large screen digital imagery）と呼ばれ、ＳＭＰＴＥに提案されているものはＵＨＤＴＶ（Ultra High Definition TV）と呼ばれる。ＵＨＤＴＶに関しては次表１の信号が規定されている。
【０００３】
【表１】
【０００４】
これらのインタフェースとして、ＵＨＤＴＶ規格の３８４０サンプル／６０フレームの映像信号は、ビットレート１０Ｇｂｐｓの伝送路を２チャンネル使用して伝送する方式が提案されている。また、７６８０サンプル／６０フレームの映像信号は、ビットレート１０Ｇｂｐｓの伝送路を８チャンネル使用して伝送する方式が提案されている。
【０００５】
特許文献１には、４ｋ×２ｋ信号（４ｋサンプル×２ｋラインの超高解像度信号）の一種である３８４０×２１６０／３０Ｐ，３０／１．００１Ｐ／４：４：４／１２ビット信号を、ビットレート１０Ｇｂｐｓ以上でシリアル伝送する技術について開示されている。なお、［３８４０×２１６０／３０Ｐ］と示した場合には、［水平方向の画素数］×［垂直方向のライン数］／［１秒当りのフレーム数］を示している。本明細書において以下同じである。また、［４：４：４］は、原色信号伝送方式である場合、［赤信号Ｒ：緑信号Ｇ：青信号Ｂ］の比率を示し、色差信号伝送方式である場合、［輝度信号Ｙ：第１色差信号Ｃｂ：第２色差信号Ｃｒ］の比率を示す。
【特許文献１】特開２００５−３２８４９４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、超高精細映像信号の伝送規格では、オーディオ信号についても高音質化を図るようにしてある。例えばＵＨＤＴＶ用途では、現行ＨＤ用である４８ｋＨｚのサンプリング周波数でサンプリングしたオーディオの２倍である９６ｋＨｚのサンプリング周波数でサンプリングしたオーディオの伝送が想定されている。また、４８ｋＨｚのサンプリング周波数の４倍である１９２ｋＨｚのサンプリング周波数でサンプリングしたオーディオの伝送が想定されている。以下の説明では、ｍｋＨｚのサンプリング周波数でサンプリングしたオーディオを、「ｍｋＨｚオーディオ」という。オーディオ信号チャンネルについては、最大で２４チャンネルが必要とされている。
【０００７】
しかしながら、従来の伝送方式では、最も伝送レートが高い光ファイバを伝送路に使用した伝送方式でも、１チャンネルで最大で１０Ｇｂｐｓ程度の伝送しかできない。このため、超高精細映像信号に必要な伝送レートではなく、超高精細映像信号そのものを複数のチャンネルに分割して伝送することが必要である。オーディオ信号も分割したチャンネルのいずれかを使用して伝送されることになる。そして、映像信号に同期したオーディオ信号は、映像信号と同じタイミングで伝送される必要があるため、映像信号とオーディオ信号を同期させる処理が必要である。しかし、上述した最大２４チャンネルの１９２ｋＨｚオーディオを、多チャンネルに分割された映像データに同期して伝送するためには、何らかの同期処理が必要であり、そのための同期処理構成が複雑化する問題があった。また、１９２ｋＨｚオーディオを、１０．６９２Ｇｂｐｓに多重して伝送する方式や、オーディオ位相の規定は、これまで存在していなかった。
【０００８】
本発明はこのような状況に鑑みて成されたものであり、高精細な映像信号に同期させて１９２ｋＨｚオーディオ伝送することを目的とする。
【課題を解決するための手段】
【０００９】
本発明は、１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、２つのＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングする。
次に、第１及び第２のＡＥＳサブフレームにマッピングされたオーディオサンプルを２つのＡＥＳチャンネルから取り出し、取り出された４つのオーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納する。
そして、オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して映像信号を出力する。
【００１０】
このようにしたことによって、１９２ｋＨｚオーディオをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して映像信号を出力することができる。
【発明の効果】
【００１１】
本発明によれば、１９２ｋＨｚの周波数でサンプリングされたオーディオデータをＨＤ−ＳＤＩの水平ブランキング期間に多重する方式に関する。そして、現行の４８ｋＨｚオーディオデータをＨＤ−ＳＤＩの水平ブランキング期間へ多重する方式（ＳＭＰＴＥ２９９Ｍ）と互換の取れる多重方式を得られる。
【発明を実施するための最良の形態】
【００１２】
以下、発明を実施するための最良の形態（以下実施の形態とする。）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（オーディオサンプルの割当て制御：１９２ｋＨｚオーディオを映像信号に多重する第１の割当て例）
２．第２の実施の形態（オーディオサンプルの割当て制御：１９２ｋＨｚオーディオを映像信号に多重する第２の割当て例）
３．変形例
【００１３】
＜１．第１の実施の形態＞
［伝送システムの例］
【００１４】
以下、本発明の第１の実施の形態について、図１〜図１３を参照して説明する。
図１は、本実施の形態を適用したテレビジョン放送局用のカメラ伝送システムの全体構成を示す図である。このカメラ伝送システムは、複数台の放送用カメラ１とＣＣＵ（カメラコントロールユニット）２とで構成されており、各放送用カメラ１が光ファイバケーブル３でＣＣＵ２に接続されている。
【００１５】
放送用カメラ１は、同一構成のものである。そして、４ｋ×２ｋ信号として、ＵＨＤＴＶに相当する３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号を生成し、送信する信号送信装置として機能する。なお、４ｋ×２ｋ信号は、４ｋサンプル×２ｋラインの超高解像度信号を表す。
【００１６】
ＣＣＵ２は、各放送用カメラ１を制御したり、各放送用カメラ１から映像信号を受信したり、各放送用カメラ１のモニタに他の放送用カメラ１で撮影中の映像を表示させるための映像信号（リターンビデオ）を送信するユニットである。ＣＣＵ２は、各放送用カメラ１から映像信号を受信する信号受信装置として機能する。
【００１７】
［放送用カメラが備える信号処理装置の内部構成例］
図２は、放送用カメラ１の回路構成のうち、本実施の形態に関連する部分に係る信号処理装置のブロック図である。以下、データ構成等の説明を容易とするため、従来の信号処理装置と本発明に係る信号処理装置とを比較しながら説明する。
【００１８】
図２Ａは、従来の信号処理装置１００の内部構成例を示す。
信号処理装置１００は、収音した音声から音声信号を生成する２本のマイクロホン１０１と、音声信号を所定のフォーマットのＡＥＳチャンネルにマッピングする２つのマッピング部１０２を備える。また、信号処理装置１００は、マッピング部１０２から供給されるＡＥＳチャンネルのオーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される入力映像信号の補助データスペースに多重するオーディオ信号多重部１０３を備える。マッピング部１０２は、４８ｋＨｚオーディオ又は９６ｋＨｚオーディオをＡＥＳチャンネルにマッピングする。このとき、２本のＡＥＳチャンネルが用いられており、４８ｋＨｚオーディオは、２チャンネルずつの計４チャンネルで伝送される。また、９６ｋＨｚオーディオは、１本のＡＥＳチャンネルで１チャンネルずつの計２チャンネルで伝送される。
【００１９】
図２Ｂは、本発明に係る信号処理装置５の内部構成例を示す。
信号処理装置５、音声を収音して音声信号を生成する２本のマイクロホン６と、音声信号を所定のフォーマットのＡＥＳチャンネルにマッピングする２つのマッピング部７を備える。また、信号処理装置５は、マッピング部７から供給される第１及び第２のＡＥＳチャンネルのオーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される入力映像信号の水平補助データスペースに多重するオーディオ信号多重部８を備える。
【００２０】
音声信号は、１９２ｋＨｚのサンプリング周波数でサンプリングされたオーディオサンプルを含む。マッピング部７は、４つのオーディオサンプルを、第１及び第２のＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングする。
【００２１】
放送用カメラ１内の撮像部及び映像信号処理部（図示略）によって生成された３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、オーディオ信号多重部８に送られる。オーディオ信号多重部８は、１９２ｋＨｚでサンプリングされたビデオラインに続く水平補助データスペース（Horizontal ancillary data space）に、オーディオデータパケットを多重する。このとき、オーディオ信号多重部８は、第１及び第２のＡＥＳサブフレームにマッピングされたオーディオサンプルを第１及び第２のＡＥＳチャンネルから取り出す。次に、オーディオ信号多重部８は、取り出された４つのオーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納する。そして、オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して後続する不図示の処理ブロックに映像信号を出力する。
【００２２】
３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、ワード長が１２ビットずつのＧデータ系列，Ｂデータ系列，Ｒデータ系列の同期を取って並列配置した、３６ビット幅の信号である。１フレーム期間は１／２４秒，１／２５秒，１／３０秒のうちのいずれかであり、１フレーム期間内に２１６０の有効ライン期間が含まれている。
【００２３】
入力映像信号の有効ライン（水平ライン）期間には、タイミング基準信号ＥＡＶ（End of Active Video）と、ライン番号ＬＮと、誤り検出符号ＣＲＣと、水平ブランキング期間（補助データスペース／未定義ワードデータの区間）が配置される。また、タイミング基準信号ＳＡＶ（Start of Active Video）と、映像データの区間であるアクティブラインが配置される。アクティブラインのサンプル数は３８４０であり、Ｇデータ系列，Ｂデータ系列，Ｒデータ系列のアクティブラインには、それぞれＧ，Ｂ，Ｒの映像データが配置される。
【００２４】
［オーディオデータパケットの構成例］
図３は、所定のサンプリング周波数でサンプリングしたオーディオデータをＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの構成例の一部を示す図である。オーディオデータパケットのデータ構造は、ＳＭＰＴＥ２９９Ｍによって定められる。以下の説明では、第１のＡＥＳサブフレームをＡＥＳサブフレーム１とし、第２のＡＥＳサブフレームをＡＥＳサブフレーム２とする。
【００２５】
図３Ａは、４８ｋＨｚオーディオをＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。このオーディオデータパケットは、２ワードのユーザデータワード（以下、ＵＤＷ（User Data Word）と略記する場合がある。）を含むクロック領域と、４ワードのＵＤＷを含むチャンネル１〜４で構成される。ＵＤＷは、オーディオクロック位相データ（ＣＬＫ）、チャンネルｎ（オーディオデータ）、誤り訂正コード（以下、ＥＣＣ（Error Correction Codes）と略記する場合がある。）の３種類のデータを含む。ＵＤＷに含まれるデータの内容は、後述する。
【００２６】
図３Ｂは、９６ｋＨｚオーディオをＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。このオーディオデータパケットは、２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むチャンネル１，１，２，２で構成される。
【００２７】
図３Ｃは、１９２ｋＨｚオーディオをサンプル毎に第１及び第２のＡＥＳチャンネルのＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。以下の説明では、第１のＡＥＳチャンネルをチャンネルＡとし、第２のＡＥＳチャンネルをチャンネルＢとする。オーディオデータパケットは、ＡＥＳチャンネルＢにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ＋２，ｎ＋３，ｎ＋６，ｎ＋７で構成される。また、ＡＥＳチャンネルＡにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ，ｎ＋１，ｎ＋４，ｎ＋５で構成される。なお、以下の説明において「ｎ」とは、ｋを０以上の整数とした場合に４ｋ＋１として定まる数値（ｎ＝４ｋ＋１（ｋ≧０））を表す。
【００２８】
クロック領域には、次表２に示すように、オーディオクロック位相データが挿入される。どこでオーディオが発生したかを示すオーディオ位相は、表２（ＳＭＰＴＥ２９９Ｍ）に示されるオーディオクロック位相データに従って定められる。また、所定のサンプリングクロックでサンプルされたオーディオサンプル位置は、各フレームの一水平期間中の７４．２５ＭＨｚでのサンプル位置で定義される。オーディオデータパケットは、オーディオ信号多重部８によって、水平補助データスペースに多重される。
【００２９】
【表２】
【００３０】
オーディオクロック位相データは、表２に示すｃｋ０〜ｃｋ１２の１３ビットで定められる。ｃｋ０〜ｃｋ１２までのビットは、フォーマッタに入力したオーディオサンプルと同時に入力した画素サンプルと、映像ストリームのＥＡＶの最初のワードとの差の映像クロック数を表示する。そして、ｃｋ０〜ｃｋ１２は、ＳＭＰＴＥ２９２Ｍによる７４．２５ＭＨｚのサンプリングクロックを使用するシステムで管理することができる。つまり、所定のサンプリングクロックでサンプルされたオーディオサンプルが挿入された一水平期間におけるオーディオ位相を、８１９２クロックまで管理することができる。
【００３１】
デジタルオーディオのシリアルインタフェース規格であるＡＥＳ（Audio Engineering Society）３―２００３のＦｉｇｕｒｅ２には、サブフレームフォーマットが定められている。また、この規格にはフレームフォーマットとして、２チャンネルモードの場合、２チャンネルの４８ｋＨｚオーディオを、連続したＡＥＳサブフレーム１，２で送る旨が規定されている。また、ＳＭＰＴＥ２９９Ｍには、４８ｋＨｚオーディオをチャンネル１，２に入れることについて規定されている。
【００３２】
従来は、図３Ａに示すように、４８ｋＨｚオーディオのオーディオチャンネルの内、チャンネル１は、ＡＥＳサブフレーム１で送られ、チャンネル２は、ＡＥＳサブフレーム２で送られる。さらに、チャンネル３は、ＡＥＳサブフレーム１で送られ、チャンネル４は、ＡＥＳサブフレーム２で送られる。
また、図３Ｂに示すように、９６ｋＨｚオーディオの連続したオーディオチャンネルの内、チャンネル１が連続するＡＥＳサブフレーム１，２で送られる。そして、チャンネル２が連続するＡＥＳサブフレーム１，２で送られる。
【００３３】
本実施の形態では、図３Ｃに示すように、１チャンネルの１９２ｋＨｚオーディオの連続したオーディオサンプルのうち、ＡＥＳチャンネルＡのサンプルｎ，ｎ＋１が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋２，ｎ＋３が連続するＡＥＳサブフレーム１，２で送られる。同様に、ＡＥＳチャンネルＡのサンプルｎ＋４，ｎ＋５が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋６，ｎ＋７が連続するＡＥＳサブフレーム１，２で送られる。
【００３４】
このとき、信号送信装置５と、受信側の機器との間で、信号伝送時の互換性を有するために、１９２ｋＨｚオーディオのチャンネル１の連続したオーディオサンプル（第１及び第２のオーディオサンプル）を、チャンネル１，２に入れる。さらに、９６ｋＨｚオーディオのチャンネル２の連続したオーディオサンプルを、チャンネル３，４に入れる。
【００３５】
また、１９２ｋＨｚオーディオのオーディオデータパケットに定義されるクロック位相を、連続した４つのオーディオサンプル（第１〜第４のオーディオサンプル）のうち、第２のオーディオサンプルの位置で定めている。このことについては、図８を参照して後述する。
【００３６】
［各オーディオデータパケットの構成例］
以下、オーディオ信号多重部８が行う処理の例について、データフォーマットと合わせて説明する。
図４は、ＡＥＳ３で定義される３２〜４８ｋＨｚオーディオとオーディオデータパケットの構造例を示す。
【００３７】
ＡＥＳオーディオは、ＡＥＳ３で規定される１つのＡＥＳデジタルストリームに含まれる全てのＶＵＣＰデータ、オーディオデータ及び付加データを指す。そして、ＡＥＳサブフレーム１，２を順に並べたフレームを、ＡＥＳフレームという。
【００３８】
３２〜４８ｋＨｚオーディオの場合、ＡＥＳチャンネルペア１（ＡＥＳ１），ＡＥＳチャンネルペア２（ＡＥＳ２）によってサブフレームが伝送される。３２〜４８ｋＨｚオーディオのＡＥＳチャンネルペア１，２には、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。そして、ＡＥＳチャンネルペア１には、所定の周波数でサンプリングされたＡＥＳサブフレーム１，２が連続して含まれる。同様に、ＡＥＳチャンネルペア２にも、ＡＥＳサブフレーム１，２が連続して含まれる。そして、ＡＥＳチャンネルペア２には、第１及び第２のオーディオサンプルが含まれる。ＡＥＳサブフレームは、４ビットのプリアンブル、４ビットの付加データ又はオーディオデータ、２０ビットのオーディオデータ、１ビットのＶ，Ｕ，Ｃ，Ｐデータの順に、３２ビットで構成される。
【００３９】
オーディオデータパケットは、各種フィールドを含む。例えば、補助データフラグ（ＡＤＦ）、データＩＤ（ＤＩＤ）、データブロックナンバー（ＤＢＮ）、データカウント（ＤＣ）、オーディオクロック位相データ（ＣＬＫ）、ユーザデータワード（ＵＤＷ）、チェックサム（ＣＳ）フィールドがある。
【００４０】
また、オーディオデータも、各種フィールドを含む。例えば、クロック（ＣＬＫ）と、チェックサムフィールドの間に、ＡＥＳチャンネル１の第１のオーディオサンプル（ＣＨ１）、ＡＥＳチャンネル１の第２のオーディオサンプル（ＣＨ２）を含む。また、ＡＥＳチャンネル２の第１のオーディオサンプル（ＣＨ３）、ＡＥＳチャンネル２の第２のオーディオサンプル（ＣＨ４）フィールドと、ＥＣＣフィールドを含む。オーディオデータパケットは、Ｃｂ／Ｃｒデータストリームの水平補助データスペースに多重される。
【００４１】
図５は、ＡＥＳ３で定義される９６ｋＨｚオーディオとオーディオデータパケットとの関係を示す。
【００４２】
９６ｋＨｚオーディオの場合、ＡＥＳチャンネル１，２によってサブフレームが伝送される。ＡＥＳチャンネル１，２には、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。ＡＥＳサブフレーム１，２には、所定の周波数でサンプリングされた第１及び第２のオーディオサンプルが連続して含まれる。同様に、ＡＥＳチャンネル２も、ＡＥＳサブフレーム１，２が連続して含まれ、ＡＥＳサブフレーム１，２には、第１及び第２のオーディオサンプルが含まれる。ＡＥＳサブフレームの構成例とオーディオデータパケットの構成例は、上述した４８ｋＨｚオーディオの場合と同様である。
【００４３】
図６は、本実施の形態に係るＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係例を示す。
【００４４】
１９２ｋＨｚオーディオの場合、ＡＥＳチャンネルＡ，Ｂによってサブフレーム１，２が伝送される。ＡＥＳチャンネルＡには、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。ＡＥＳサブフレーム１，２の構成例は、上述した４８ｋＨｚオーディオの場合と同様である。また、オーディオデータパケットの構成例は、上述した４８ｋＨｚオーディオの場合と同様である。
【００４５】
マッピング部８は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、オーディオサンプルをマッピングする。
このとき、ｎ番目にサンプリングされた第ｎのオーディオサンプルを第１のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。次に、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを第１のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。次に、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。
【００４６】
この結果、１９２ｋＨｚオーディオのオーディオサンプルは、ＡＥＳチャンネルＡ，Ｂによって以下のようにマッピングされる。
・ＡＥＳチャンネルＡ：ｎ，ｎ＋１，ｎ＋４，ｎ＋５，ｎ＋８，ｎ＋９，…
・ＡＥＳチャンネルＢ：ｎ＋２，ｎ＋３，ｎ＋６，ｎ＋７，ｎ＋１０，ｎ＋１１，…
【００４７】
そして、オーディオ信号多重部８は、ＡＥＳチャンネルＡ，Ｂにマッピングされたオーディオサンプルをオーディオデータパケットに格納する。
本例では、オーディオデータパケットに、ＡＥＳチャンネルＡの第ｎのオーディオサンプル、第ｎ＋１のオーディオサンプル、ＡＥＳチャンネルＢの第ｎ＋２のオーディオサンプル、第ｎ＋３のオーディオサンプルを格納する。
【００４８】
映像に同期したオーディオの映像フレーム当りオーディオサンプル数は、次表３に示される。表３には、オーディオサンプリングレートが３２．０ｋＨｚ、４４．１ｋＨｚ、４８．０ｋＨｚ、９６．０ｋＨｚ、１９２．０ｋＨｚの場合に、フレーム毎のオーディオサンプル数が示される。
【００４９】
【表３】
【００５０】
表４は、ＵＤＷｎに対するチャンネル割当ての例を示す。ＵＤＷｎとは、ｎ番目のＵＤＷを意味する。オーディオサンプリングレートが３２．０ｋＨｚ、４４．１ｋＨｚ、４８．０ｋＨｚ、９６．０ｋＨｚの場合と、１９２．０ｋＨｚの場合とで割り当てられるチャンネルが異なることが示される。
【００５１】
【表４】
【００５２】
図７は、各オーディオデータパケットの構成例である。
ＣＨ１〜ＣＨ４に格納されるデータは、３２ｋＨｚ〜４８ｋＨｚオーディオ、９６ｋＨｚオーディオ及び１９２ｋＨｚオーディオの場合で異なる。つまり、１９２ｋＨｚオーディオの場合、連続するチャンネルＡ，Ａ，Ｂ，Ｂの順に、オーディオサンプルｎ，ｎ＋１，ｎ＋２，ｎ＋３が格納される。
【００５３】
図８は、１９２ｋＨｚオーディオのビデオライン、デジタル音声のサンプリングポイント、オーディオクロック位相データ間の関係を示す。ここでは、１９２ｋＨｚオーディオのサンプリングポイントについて説明する。
【００５４】
入力音声信号のサンプリングポイントは、各オーディオデータに対して、連続する４つのオーディオサンプル（第１〜第４のオーディオサンプル）で規定される。このような４つのサンプルを、４サンプルペアともいう。
【００５５】
例えば、１９２ｋＨｚオーディオでは、４サンプルペアのうち、ＥＡＶの先頭から見て、４つ目のオーディオサンプルの位置でオーディオクロック位相が定まる。クロック位相は、初めに、ＥＡＶの先頭からオーディオの発生した位置までの時間を、ＨＤ−ＳＤＩの７４．２５ＭＨｚあるいは７４．２５／１．００１ＭＨｚクロックの１クロック期間で割って算定される。さらに、クロック位相は、ＵＤＷ０，１のオーディオクロック位相データｃｋ０〜ｃｋ１２（０〜８１９１）に書き込まれる。
【００５６】
図９は、１９２ｋＨｚオーディオの多重位置フラグ（ｍｐｆ）の規定例を示す。オーディオデータＡ〜Ｈは、４サンプルペアを含む。
【００５７】
１９２ｋＨｚオーディオのデータパケットに定義する多重位置フラグ（ｍｐｆ：Multiplex Position Flag）は、サンプルペアのうち、４つ目のオーディオサンプル位置を基準として設定される。オーディオデータパケットの多重位置は、オーディオのサンプリングポイントが発生した水平ラインに対して次のライン、あるいは、さらに１ライン遅れた水平補助データスペース（ＨＡＮＣ、水平補助期間ともいう。）である。多重位置フラグ（ｍｐｆ）は、オーディオデータパケットの多重位置とそれに対応する映像データとの関係を規定する。
【００５８】
オーディオ信号多重部８は、４つのオーディオサンプルがマッピングされた第１及び第２のＡＥＳサブフレームが含まれる第１及び第２のＡＥＳチャンネルから第ｎ乃至第ｎ＋３番目にサンプリングされたオーディオサンプルを４サンプルペアとして取り出す。そして、映像信号に含まれる第１の水平ラインに第ｎ＋３のオーディオサンプルのサンプリングポイントが含まれる場合に、第１の水平ラインに連続する第２の水平ラインの補助データスペースに、オーディオデータパケットを多重する。
【００５９】
オーディオ信号多重部８は、第１の水平ラインにスイッチングポイントが含まれる場合、オーディオデータパケットを、第２の水平ラインに連続する第３の水平ラインの補助データスペースに多重する。
【００６０】
例えば、オーディオデータＡ，Ｂ，Ｃ，Ｅ，Ｇの場合、４サンプルペアのうち、第４のオーディオサンプルの位置の次の水平ラインの水平補助データスペースにオーディオデータパケットが多重される。このとき、ｍｐｆ＝０である。そして、オーディオ信号多重部８は、オーディオサンプリングが行われたビデオラインに続く水平補助データスペースにオーディオデータパケットを多重される。また、オーディオデータパケットがスイッチングポイントに続く場合、データの誤りを防ぐために、１水平ライン分遅延して多重される。
【００６１】
オーディオ信号多重部８は、所定の周波数でオーディオ信号がサンプリングされたサンプリングポイントが含まれる第１の水平ラインを認識する。そして、第１の水平ラインに連続する第２の水平ラインの補助データスペースに、第１〜第４のオーディオサンプルを含むオーディオデータパケットを多重して挿入する。そして、オーディオデータパケットが多重して挿入された映像信号は、後続の処理に供給される。
【００６２】
一方、水平補助データスペースがスイッチングポイントに続く場合は、データの誤りを防ぐため、オーディオデータパケットを、次の１ライン分だけ遅延して多重する。つまり、オーディオ信号多重部８は、第１及び第２のオーディオサンプルが含まれる第１のオーディオデータパケット及び第１のオーディデータパケットに連続する第２のオーディオデータパケットを、第３の水平ラインの補助データスペースに多重して挿入する。第３の水平ラインは、第２の水平ラインに連続するラインである。
【００６３】
ところで、Ｎ／Ａ(Not Available)は、スイッチングポイントの次のラインの水平補助データスペースに、オーディオデータパケットが多重できないことを示す。例えば、オーディオデータＤのサンプリングポイントには、入力映像信号の中にスイッチングポイントがある。このため、オーディオデータパケットがオーディオサンプルの入力タイミングに対して、２番目のラインの水平補助データスペースに多重されているので、ｍｐｆ＝１にセットされる。
【００６４】
図１０は、オーディオデータ（チャンネルｎ）のビット割当ての例を示す。
図１０には、ＣＨ１〜４に割り当てられたＵＤＷｎのビット毎に設定される値が規定される。ＡＥＳサブフレームのすべてのビットは、４つの連続するＵＤＷ（ＵＤＷ４ｎ−２、ＵＤＷ４ｎ―１、ＵＤＷ４ｎ、ＵＤＷ４ｎ＋１）で伝送される。ＵＤＷ２〜ＵＤＷ１７は、オーディオデータパケットで常に、ＣＨｎに用いられる。
【００６５】
ＣＨ１には、ＵＤＷ２〜５が割り当てられる。ＣＨ２には、ＵＤＷ６〜９が割り当てられる。ＣＨ３には、ＵＤＷ１０〜１３が割り当てられる。ＣＨ４には、ＵＤＷ１４〜１７が割り当てられる。
【００６６】
ＵＤＷ１８〜２３の構成例は、表５に示される。
【００６７】
【表５】
【００６８】
誤り訂正コード（ＥＣＣ）は、ＡＤＦの最初からＵＤＷ１７までの２４ワードの誤りを訂正、検出するために使用される。この誤り訂正コードは、ＢＣＨコードである。
ＢＣＨコードは、ｂ０〜ｂ７の各ビットシーケンスから生成される。ＥＣＣは、６ワードからなり、以下の生成方程式で決定される。
【００６９】
【数１】
【００７０】
図１１は、ＢＣＨコード生成回路のブロックダイヤグラムの構成例を示す。
２４ワード中のｂ０〜ｂ７ビットの各ビットシーケンス（ＡＤＦの最初のワードからＵＤＷ１７まで）を入力として、ＥＣＣ０〜５が決定される。
【００７１】
図１２は、オーディオデータパケットの伝送に使用される、Ｃｒ／Ｃｂデータストリームの補助データスペースの例を示す。
入力映像信号の水平ラインは、入力映像信号の有効ライン期間を示すタイミング基準信号と、水平ラインにおける水平ブランキング期間を示す補助データスペースを含む。そして、色差信号（Ｃｒ／Ｃｂ）のデータストリームの水平補助データスペースのみがオーディオデータパケットの送出に使用される。この水平補助データスペースは、サンプルナンバー１９２８〜２１９５であって、ラインナンバー１〜７，９〜５６９，５７１〜１１２５の領域である。ただし、スイッチングポイントの次のラインの水平補助データスペースには多重してはならない。
【００７２】
そして、１つの水平補助データスペースに割り当てられる１９２ｋＨｚオーディオデータパケットの多重数は、以下の条件式で算定されるＮａ／４以下に制限される。このとき、１つの水平補助データスペースに多重できるチャンネル当りのオーディオサンプル数Ｎｏは、以下の条件式に基づいて、Ｎａ（Number of Audio samples）の値から導かれる。
【００７３】
【数２】
【００７４】
多重位置は、オーディオサンプルが発生した次の水平補助データスペース、あるいは、さらにもう一つ後の水平補助データスペースである。
【００７５】
ここで、オーディオコントロールパケットについて説明する。
図１３は、オーディオコントロールパケットの構成を示す。
オーディオコントロールパケットは、インタレースシステムでは１フィールドに１回、プログレッシブシステムでは１フレームに１回、スイッチングポイントから後の２番目のラインの、Ｙデータストリームの水平補助データスペースで送出される。この水平補助データスペースは、サンプルナンバー１９２８〜２１９５であって、インタレースシステムではラインナンバー９，５７１、プログレッシブシステムではラインナンバー９の領域である。１つのオーディオコントロールパケットのＵＤＷには、常に１１ワードがある。
【００７６】
そして、オーディオコントロールパケットは、ＳＭＰＴＥ２９１Ｍの規定に従ってフォーマットされる。オーディオコントロールパケットは、補助データフラグ（ＡＤＦ）、データＩＤ（ＤＩＤ）、データブロックナンバー（ＤＢＮ）、データカウント（ＤＣ）、ユーザデータワード（ＵＤＷ）、チェックサム（ＣＳ）フィールドを含む。
【００７７】
ＤＩＤは、以下のように定義される。つまり、ＣＨ１〜４をオーディオグループ１とする。ＣＨ５〜８をオーディオグループ２とする。ＣＨ９〜１２をオーディオグループ３とする。ＣＨ１３〜１６をオーディオグループ４とする。
以下、ユーザデータワード（ＵＤＷｎ）の構成について説明する。
【００７８】
ＵＤＷ０の構成例は、表６に示される。表６は、オーディオフレームナンバーデータ（ＡＦ）のビット割当てを示す。
【００７９】
【表６】
【００８０】
オーディオフレームナンバーデータ（ＡＦ）は、ビデオフレームのシーケンシャル番号である。そして、オーディオサンプルの数が各ビデオフレーム当りで整数関係にないときに、総ビデオフレーム（オーディオフレームシーケンス）の何番目のフレームに当たるかを表示する。シーケンスの最初の番号は１であり、最後の番号はオーディオフレームシーケンスの長さに等しい。ＡＦが全てゼロのときは、フレーム番号が得られないことを示す。
【００８１】
１から始まりシーケンスの最後まで続く全てのオーディオフレームシーケンスでは、フレーム当りのオーディオサンプル数は、２つの整数（ｍ，ｍ＋１）を基本にする。
基本的には奇数のオーディオフレーム（１，２，５，…）は２つのうちの大きい整数のオーディオサンプル数をもつ。また、偶数のオーディオフレーム（２，４，６，…）は小さい整数のオーディオサンプル数をもつ。しかし、表７に示される例外フレームがある。
【００８２】
【表７】
【００８３】
表７には、テレビジョンシステムが、３０．００フレーム／秒の場合と、３０．００／１．００１フレーム／秒の場合について、サンプリングレート、フレームシーケンス、基本サンプル数、例外が示される。
【００８４】
ＵＤＷ１の構成例は、表８に示される。ＵＤＷ１には、サンプリングレートを決定するためのレートコードが割り当てられる。全てのチャンネルペアに対するサンプリングレートは、ＲＡＴＥワードで規定される。チャンネルペアとは、同じＡＥＳオーディオ信号源からの２つのデジタルオーディオチャンネルをいう。
【００８５】
【表８】
【００８６】
表８に示したＵＤＷ１のビットｂ１，ｂ２，ｂ３に設定されるＲＡＴＥコードの割当て例は、表９に示される。
【００８７】
【表９】
【００８８】
表９より、ＵＤＷ１にセットされたＸ２，Ｘ１，Ｘ０フィールドが、それぞれ１，０，１の場合、サンプルレートは、１９２．０ｋＨｚであることが示される。
【００８９】
ＵＤＷ２の構成例は、表１０に示される。
【００９０】
【表１０】
ＡＣＴワードは、アクティブチャンネルを表示する。ａ１〜ａ４のビットは、そのオーディオグループのアクティブな各チャンネル（ＣＨ１〜４）について、対応するビットを１にセットする。アクティブでないチャンネルのビットはゼロにセットする。
【００９１】
ＵＤＷ３〜８の構成例は、表１１に示される。ＵＤＷ３〜８には、ＤＥＬｍ−ｎのビットが割当てられる。
【００９２】
【表１１】
【００９３】
ＤＥＬｍ−ｎワードは、映像に対する、オーディオプロセスで蓄積された遅延量（accumulated audio processing delay）を表示する。この遅延量は、ＣＨｍとＣＨｎのチャンネルペアに対するもので、オーディオサンプリングクロックインターバルを基準単位としたものである。ＤＥＬ０−２５は、２６ビットの２の歩数フォーマットで表現される。正の値は映像がオーディオに対して進んでいることを示す。
【００９４】
ＵＤＷ９〜１０の構成例は、表１２に示される。ＵＤＷ９，１０には、リザーブ（ＲＳＲＶ）のビットが割当てられる。将来の仕様変更に際して用いられるデータ領域である。
【００９５】
【表１２】
【００９６】
以上説明した第１の実施の形態に係るカメラ伝送システムにおいて１９２ｋＨｚオーディオの伝送フォーマットは、従来用いられている４８ｋＨｚオーディオ、９６ｋＨｚオーディオの伝送規格であるＳＭＰＴＥ２９９Ｍと整合する形で定義される。例えば、３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、ＣＨ１〜ＣＨ８（ＬｉｎｋＡ及びＬｉｎｋＢ）のＨＤ−ＳＤＩ信号にマッピングされる。これにより、ビットレート１０．６９２Ｇｂｐｓのシリアル・デジタルデータに変換して伝送することができる。つまり、ＩＴＵやＳＭＰＴＥで審議されている次世代の映像信号である４ｋ信号を、従来用いている１０．６９２Ｇｂｐｓシリアルインタフェースの多ｃｈで伝送することが出来るという効果がある。
【００９７】
また、上述した第１の実施の形態では、ＵＨＤＴＶ規格でサンプリングされた映像データの水平補助データスペースに、所定の周波数でサンプリングされたオーディオサンプルを多重することが可能となる。このとき、ＵＨＤＴＶの要求仕様であるオーディオ２４ｃｈの多重は、ＵＨＤＴＶ１では４８ｋＨｚオーディオで実現されると共に、ＵＨＤＴＶ２では１９２ｋＨｚオーディオで実現される。
【００９８】
また、オーディオ位相をＵＨＤＴＶ１とＵＨＤＴＶ２のサンプリングクロックではなく、７４．２５ＭＨｚで定義する。この結果、１０Ｇインタフェースの１ＣＨから順次オーディオサンプルを多重することが可能となり、ハードウエアの負担を軽減できるという効果が得られる。また、現行の４８ｋＨｚオーディオ規格であるＳＭＰＴＥ２９９Ｍの内容と整合性が取れる形で１９２ｋＨｚオーディオのフォーマットを定義することが可能となる。
【００９９】
＜２．第２の実施の形態＞
次に、本発明の第２の実施の形態に係るマッピング部７とオーディオ信号多重部８の動作例について、図１４〜図１６を参照して説明する。以下の説明において、既に第１の実施の形態で説明した図１に対応する部分には同一符号を付し、詳細な説明を省略する。また、３２〜４８ｋＨｚオーディオ、９６ｋＨｚオーディオに関しても詳細な説明を省略する。
【０１００】
［オーディオデータパケットの構成例］
図１４は、１９２ｋＨｚオーディオをサンプル毎に２チャンネルのＡＥＳサブフレーム１，２で送る場合のオーディオデータパケットの例である。このオーディオデータパケットは、ＡＥＳチャンネルＡにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ，ｎ＋２，ｎ＋４，ｎ＋６で構成される。また、ＡＥＳチャンネルＢにおける２ワードのＵＤＷを含むクロック領域と、４ワードのＵＤＷを含むサンプルｎ＋１，ｎ＋３，ｎ＋５，ｎ＋７で構成される。つまり、ＡＥＳチャンネルＡには、偶数番目のオーディオサンプルが含まれ、ＡＥＳチャンネルＢには、奇数番目のオーディオサンプルが含まれる。
【０１０１】
本実施の形態では、１チャンネルの１９２ｋＨｚオーディオの連続したオーディオサンプルのうち、ＡＥＳチャンネルＡのサンプルｎ，ｎ＋２が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋１，ｎ＋３が連続するＡＥＳサブフレーム１，２で送られる。同様に、ＡＥＳチャンネルＡのサンプルｎ＋４，ｎ＋６が連続するＡＥＳサブフレーム１，２で送られる。そして、ＡＥＳチャンネルＢのサンプルｎ＋５，ｎ＋７が連続するＡＥＳサブフレーム１，２で送られる。
【０１０２】
図１５は、本実施の形態に係るＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係を示す。
【０１０３】
１９２ｋＨｚオーディオの場合、ＡＥＳチャンネルＡ，Ｂによってサブフレーム１，２が伝送される。ＡＥＳチャンネルＡには、１つのＡＥＳフレームにＡＥＳサブフレーム１，２が連続して含まれる。ＡＥＳサブフレーム１，２の構成例は、上述した４８ｋＨｚオーディオの場合と同様である。また、オーディオデータパケットの構成例は、上述した４８ｋＨｚオーディオの場合と同様である。
【０１０４】
マッピング部８は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、オーディオサンプルをマッピングする。
このとき、ｎ番目にサンプリングされた第ｎのオーディオサンプルを第１のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。次に、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを第１のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。次に、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第１のＡＥＳサブフレームに格納する。ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを第２のＡＥＳチャンネルに含まれる第２のＡＥＳサブフレームに格納する。
【０１０５】
この結果、１９２ｋＨｚオーディオのオーディオサンプルは、ＡＥＳチャンネルＡ，Ｂによって以下のようにマッピングされる。
・ＡＥＳチャンネルＡ：ｎ，ｎ＋２，ｎ＋４，ｎ＋６，ｎ＋８，ｎ＋１０，…
・ＡＥＳチャンネルＢ：ｎ＋１，ｎ＋３，ｎ＋５，ｎ＋７，ｎ＋９，ｎ＋１１，…
【０１０６】
そして、オーディオ信号多重部８は、ＡＥＳチャンネルＡ，Ｂにマッピングされたオーディオサンプルをオーディオデータパケットに格納する。
本例では、オーディオデータパケットに、ＡＥＳチャンネルＡの第ｎのオーディオサンプル、第ｎ＋２のオーディオサンプル、ＡＥＳチャンネルＢの第ｎ＋１のオーディオサンプル、第ｎ＋３のオーディオサンプルを格納する。
【０１０７】
表１３は、ＵＤＷｎに対するチャンネル割当ての例を示す。オーディオサンプリングレートが３２．０ｋＨｚ、４４．１ｋＨｚ、４８．０ｋＨｚ、９６．０ｋＨｚの場合と、１９２．０ｋＨｚの場合とで割り当てられるチャンネルが異なることが示される。
【０１０８】
【表１３】
【０１０９】
図１６は、各オーディオデータパケットの構成例である。
ＣＨ１〜ＣＨ４に格納されるデータは、３２ｋＨｚ〜４８ｋＨｚオーディオ、９６ｋＨｚオーディオ及び１９２ｋＨｚオーディオの場合で異なる。つまり、１９２ｋＨｚオーディオの場合、連続するチャンネルＡ，Ａ，Ｂ，Ｂの順に、オーディオサンプルｎ，ｎ＋３，ｎ＋２，ｎ＋４が格納される。
【０１１０】
以上説明した第２の実施の形態に係るカメラ伝送システムにおいて１９２ｋＨｚオーディオは、従来用いられている４８ｋＨｚオーディオ、９６ｋＨｚオーディオの伝送規格であるＳＭＰＴＥ２９９Ｍと整合する形で定義される。このとき、チャンネルＡには、偶数番目のオーディオサンプルを格納し、チャンネルＢには、奇数番目のオーディオサンプルを格納する。このように格納しても、例えば、３８４０×２１６０／２４Ｐ，２５Ｐ，３０Ｐ／４：４：４，４：２：２，４：２：０／１０ビット，１２ビット信号は、ＣＨ１〜ＣＨ８（ＬｉｎｋＡ及びＬｉｎｋＢ）のＨＤ−ＳＤＩ信号にマッピングされる。これにより、ビットレート１０．６９２Ｇｂｐｓのシリアル・デジタルデータに変換して伝送することができる。つまり、ＩＴＵやＳＭＰＴＥで審議されている次世代の映像信号である４ｋ信号を、従来用いている１０．６９２Ｇｂｐｓシリアルインタフェースの多ｃｈで伝送することが出来るという効果がある。
【０１１１】
＜３．変形例＞
なお、以上の例ではカメラ伝送システムに本発明を適用しているが、他にも様々な方式の信号を伝送するようにしてもよい。このように、様々な信号を送信する場合に、適用することができる。
【図面の簡単な説明】
【０１１２】
【図１】本発明の第１の実施の形態に係るテレビジョン放送局用のカメラ伝送システムの全体構成を示す図である。
【図２】放送用カメラの回路構成のうち、信号送信装置の内部構成例を示すブロック図である。
【図３】オーディオデータパケットの例を示す説明図である。
【図４】ＡＥＳ３で定義される３２〜４８ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図５】ＡＥＳ３で定義される９６ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図６】ＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図７】各オーディオデータパケットの構造の例を示す説明図である。
【図８】１９２ｋＨｚオーディオのビデオライン、デジタル音声のサンプリングポイント、オーディオクロック位相データ間の関係を示す説明図である。
【図９】多重位置フラグ（ｍｐｆ）とオーディオデータパケットの多重位置との関係を示す説明図である。
【図１０】オーディオデータ（チャンネルｎ）のビット割当ての例を示す説明図である。
【図１１】ＢＣＨコード生成回路のブロックダイヤグラムの例を示す説明図である。
【図１２】オーディオデータパケットの伝送に使用できる、Ｃｒ／Ｃｂデータストリームの補助データスペース（１０８０／６０Ｉシステム）を示す説明図である。
【図１３】オーディオコントロールパケットの構造の例を示す説明図である。
【図１４】オーディオデータパケットの例を示す説明図である。
【図１５】ＡＥＳ３で定義される１９２ｋＨｚオーディオとオーディオデータパケットとの関係を示す説明図である。
【図１６】各オーディオデータパケットの構造の例を示す説明図である。
【符号の説明】
【０１１３】
１…放送用カメラ、２…ＣＣＵ（カメラコントロールユニット）、３…光ファイバケーブル、５…信号送信装置、７…マッピング部、８…オーディオ信号多重部
【特許請求の範囲】
【請求項１】
１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、第１及び第２のＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングするマッピング部と、
前記第１及び第２のＡＥＳサブフレームにマッピングされた前記オーディオサンプルを前記第１及び第２のＡＥＳチャンネルから取り出し、取り出された４つの前記オーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納し、前記オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して前記映像信号を出力するオーディオ信号多重部と、を備える
信号処理装置。
【請求項２】
請求項１記載の情報処理装置において、
前記マッピング部は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、ｎ番目にサンプリングされた第ｎのオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納し、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納する
信号処理装置。
【請求項３】
請求項２に記載の信号処理装置において、
前記オーディオ信号多重部は、前記４つのオーディオサンプルがマッピングされた前記第１及び第２のＡＥＳサブフレームが含まれる前記第１及び第２のＡＥＳチャンネルから前記第ｎ乃至第ｎ＋３番目にサンプリングされた前記オーディオサンプルを４サンプルペアとして取り出し、前記映像信号に含まれる第１の水平ラインに前記第ｎ＋３のオーディオサンプルのサンプリングポイントが含まれる場合に、前記第１の水平ラインに連続する第２の水平ラインの補助データスペースに、前記オーディオデータパケットを多重する
信号処理装置。
【請求項４】
請求項３に記載の信号処理装置において、
前記オーディオ信号多重部は、前記第１の水平ラインにスイッチングポイントが含まれる場合、前記オーディオデータパケットを、前記第２の水平ラインに連続する第３の水平ラインの補助データスペースに多重する
信号処理装置。
【請求項５】
請求項１記載の情報処理装置において、
前記マッピング部は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、ｎ番目にサンプリングされた第ｎのオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納し、ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納する
信号処理装置。
【請求項６】
１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、２つのＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングするステップと、
前記第１及び第２のＡＥＳサブフレームにマッピングされた前記オーディオサンプルを前記第１及び第２のＡＥＳチャンネルから取り出し、取り出された４つの前記オーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納するステップと、
前記オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して前記映像信号を出力するステップと、を有する
信号処理方法。
【請求項１】
１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、第１及び第２のＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングするマッピング部と、
前記第１及び第２のＡＥＳサブフレームにマッピングされた前記オーディオサンプルを前記第１及び第２のＡＥＳチャンネルから取り出し、取り出された４つの前記オーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納し、前記オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して前記映像信号を出力するオーディオ信号多重部と、を備える
信号処理装置。
【請求項２】
請求項１記載の情報処理装置において、
前記マッピング部は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、ｎ番目にサンプリングされた第ｎのオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納し、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納する
信号処理装置。
【請求項３】
請求項２に記載の信号処理装置において、
前記オーディオ信号多重部は、前記４つのオーディオサンプルがマッピングされた前記第１及び第２のＡＥＳサブフレームが含まれる前記第１及び第２のＡＥＳチャンネルから前記第ｎ乃至第ｎ＋３番目にサンプリングされた前記オーディオサンプルを４サンプルペアとして取り出し、前記映像信号に含まれる第１の水平ラインに前記第ｎ＋３のオーディオサンプルのサンプリングポイントが含まれる場合に、前記第１の水平ラインに連続する第２の水平ラインの補助データスペースに、前記オーディオデータパケットを多重する
信号処理装置。
【請求項４】
請求項３に記載の信号処理装置において、
前記オーディオ信号多重部は、前記第１の水平ラインにスイッチングポイントが含まれる場合、前記オーディオデータパケットを、前記第２の水平ラインに連続する第３の水平ラインの補助データスペースに多重する
信号処理装置。
【請求項５】
請求項１記載の情報処理装置において、
前記マッピング部は、ｋを０以上の整数とした場合に４ｋ＋１として定まるｎに基づいて、ｎ番目にサンプリングされた第ｎのオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋１番目にサンプリングされた第ｎ＋１のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第１のＡＥＳサブフレームに格納し、ｎ＋２番目にサンプリングされた第ｎ＋２のオーディオサンプルを前記第１のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納し、ｎ＋３番目にサンプリングされた第ｎ＋３のオーディオサンプルを前記第２のＡＥＳチャンネルに含まれる前記第２のＡＥＳサブフレームに格納する
信号処理装置。
【請求項６】
１９２ｋＨｚのサンプリング周波数でサンプリングされた４つのオーディオサンプルを、２つのＡＥＳチャンネルのそれぞれに含まれる第１及び第２のＡＥＳサブフレームに所定の順番でマッピングするステップと、
前記第１及び第２のＡＥＳサブフレームにマッピングされた前記オーディオサンプルを前記第１及び第２のＡＥＳチャンネルから取り出し、取り出された４つの前記オーディオサンプルをオーディオデータパケットに４チャンネルペアのオーディオデータとして格納するステップと、
前記オーディオデータパケットをＨＤ−ＳＤＩフォーマットで規定される映像信号の補助データスペースに多重して前記映像信号を出力するステップと、を有する
信号処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【公開番号】特開２０１０−１０３７７６（Ｐ２０１０−１０３７７６Ａ）
【公開日】平成２２年５月６日（２０１０．５．６）
【国際特許分類】
【出願番号】特願２００８−２７３６０６（Ｐ２００８−２７３６０６）
【出願日】平成２０年１０月２３日（２００８．１０．２３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２２年５月６日（２０１０．５．６）
【国際特許分類】
【出願日】平成２０年１０月２３日（２００８．１０．２３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]