動画像送信装置
【課題】
音声データフォーマットの切り替えに伴う音声欠落（ミュート）期間を低減又は解消する。
【解決手段】
多重分離部（１１０）は、ＭＰＥＧ−ＴＳのＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。オーディオブロック内で音声データフォーマットの変化があると、パケット処理部（１１３）は、当該変化に続く後継音声データがＡＣ３の場合、そのオーディオブロック内で、後継音声データの先頭のＡＡＵ（Audio Access Unit）を破棄し、ＬＰＣＭの場合、オーディオブロック内のＬＰＣＭ音声データを破棄する。又は、パケット処理部（１１３）は、変化を検出したオーディオブロック内で、その変化に先行する音声データを破棄する。
音声データフォーマットの切り替えに伴う音声欠落（ミュート）期間を低減又は解消する。
【解決手段】
多重分離部（１１０）は、ＭＰＥＧ−ＴＳのＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。オーディオブロック内で音声データフォーマットの変化があると、パケット処理部（１１３）は、当該変化に続く後継音声データがＡＣ３の場合、そのオーディオブロック内で、後継音声データの先頭のＡＡＵ（Audio Access Unit）を破棄し、ＬＰＣＭの場合、オーディオブロック内のＬＰＣＭ音声データを破棄する。又は、パケット処理部（１１３）は、変化を検出したオーディオブロック内で、その変化に先行する音声データを破棄する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、互いに同期する映像情報と音声情報からなる動画像を送信する動画像送信装置に関する。
【背景技術】
【０００２】
音声データの伝送フォーマットとしてＳＰＤＩＦ（Sony Philips Digital InterFace）フォーマットが広く普及している。例えばＨＤＭＩ（High Definition Multimedia Interface）の一部としても使用されている。
【０００３】
ＳＰＤＩＦは、非圧縮音声データの伝送フォーマット（ＩＥＣ６０９５８）と、圧縮音声データの伝送フォーマット（ＩＥＣ６１９７３）の両方に対応している。このような異なる音声データフォーマットでの伝送を可能とするため、ＳＰＤＩＦパケットは、実データを格納するペイロード部に伝送音声データフォーマットを示すメタ情報を付加した構造からなる。このメタ情報が、音声データフォーマットの識別子として利用される。
【０００４】
このメタ情報は、１９２個のパケットに１ビットずつ分割して格納されており、この１９２パケットを集めることで復元可能である（図２（Ａ））。メタ情報の復元に必要な１９２パケットをオーディオブロックと呼び、この期間内はメタ情報を切り替えることができない。一方、メタ情報とペイロード部の同期関係に関する規定は定義されていない。従って、音声データフォーマットの切り替え時に、このメタ情報とペイロード部の間に不一致が発生し得る。例えば、メタ情報がリニアＰＣＭ（ＬＰＣＭ）であるオーディオブロック中でＡＣ３（Dolby Digital, AC-3:Audio Code number 3）へと切り替わった場合、受信器はＡＣ３データをＬＰＣＭデータと誤認する。誤認の結果、このオーディオブロックで異音が出る可能性がある（図２（Ｂ））。
【０００５】
音声データフォーマットの現実的な切り替え手段として、特許文献１に記載の技術が知られている。特許文献１に記載の技術では、ＨＤＭＩ内のデジタル音声の信号線（ＳＰＤＩＦ）とは別の信号線を用いて、音声データフォーマットの切り替わり期間を受信器に通知する。切り替わり期間を通知された受信器は、伝送されたデジタル音声データを用いずに、その期間をミュート再生する。これにより、異音の発生が抑制される。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００８−１０７３９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
特許文献１に記載の技術は、特殊な信号の使用を前提とするので、汎用的な機器では、異音発生の抑止効果が得られない。また、ＨＤＭＩ以外の伝送方法、例えば、映像信号をＤ端子で、音声信号をＳＰＤＩＦで伝送する伝送方法の場合、特許文献１に記載の技術を適用できない。
【０００８】
さらに、特許文献１に記載の技術では、音声データフォーマットの切り替わり期間を通知する信号が音声データと非同期である。この結果、音声データフォーマットの切り替えタイミングに対して十分なマージンを持って切り替わり期間を通知する必要があり、ミュート期間が長くなってしまう。
【０００９】
本発明は、このような問題を解決し、異音の発生を抑制し、音声欠落（ミュート）期間を低減又は解消する動画像送信装置を提示することを目的とする。
【課題を解決するための手段】
【００１０】
本発明における動画像送信装置は、映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、前記音声データフォーマットの変化を検出した前記オーディオブロックにおいて、前記変化に時間的に先行する音声データを含む前記伝送パケット、または、前記変化に続く後継音声データを含む前記伝送パケットを破棄する破棄手段とを具備することを特徴とする。
【００１１】
本発明における動画像送信装置は、映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、前記映像データの、前記音声データフォーマットの変化を検出した前記オーディオブロックに対応する映像をリピートし、リピートで生じる前記音声データの空きにヌルバーストデータを挿入する手段とを具備することを特徴とする。
【００１２】
本発明に係る動画像送信装置は、映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、前記音声データフォーマットの変化を検出した前記オーディオブロックにおける、前記変化に続く後継音声データを、次のオーディオブロック以降に遅延させる手段とを具備することを特徴とする。
【発明の効果】
【００１３】
本発明によれば、音声データフォーマットが異なるコンテンツを連続的に送出する場合に、異音の発生を抑制でき、音声データフォーマットの切り替えに伴う音声欠落（ミュート）期間を低減又は解消できる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施例の概略構成ブロック図である。
【図２】ＳＰＤＩＦパケットの構造と異音発生の説明図である。
【図３】本実施例の音声出力処理のフローチャートである。
【図４】図３に示す処理での音声データ伝送タイミング例を示す図である。
【図５】本実施例の別の音声データ出力処理のフローチャートである。
【図６】図５に示す処理での音声データ伝送タイミング例を示す図である。
【図７】本実施例の別の音声データ出力処理のフローチャートである。
【図８】図７に示す処理での音声データ伝送タイミング例を示す図である。
【図９】本実施例の別の音声データ出力処理のフローチャートである。
【図１０】図９に示す処理での音声データ伝送タイミング例を示す図である。
【発明を実施するための形態】
【００１５】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【実施例１】
【００１６】
図１は、本発明に係る動画像送信装置の一実施例を有する動画像伝送システムの概略構成ブロック図を示す。送信装置１００は、映像データ及び音声データを含むコンテンツ（動画像ビデオコンテンツ又は動画像コンテンツ）をＨＤＭＩ信号で受信装置１０１に送出する。受信装置１０１は、送信装置１００からＨＤＭＩ信号として受信した映像データ及び音声データをそれぞれ図示しないモニタおよびスピーカに出力する。ＨＤＭＩケーブル１０２が、送信装置１００と受信装置１０１を接続する。動画像コンテンツは、本実施例では、ＭＰＥＧ−ＴＳストリームである。ＭＰＥＧ−ＴＳストリームは、管理情報として、ＰＴＳ（Presentation Time Stamp）、及びＰＳＩ（Program Specific Information）／ＳＩ（Service Information）を有する。
【００１７】
多重分離部１１０には外部から動画像コンテンツが入力し、また、パケット処理部１１３からオーディオブロックの境界を示すタイミング信号（オーディオブロックタイミング信号）が入力する。多重分離部１１０は、入力された動画像コンテンツを映像データと音声データに分離し、映像データを復号部１１１に、音声データをパケット処理部１１３に出力する。多重分離部１１０はまた、映像データと音声データを出力する際に、ＭＰＥＧ−ＴＳストリーム内のＰＴＳから同期信号を分離し、パケット処理部１１３及びＤＰＢ１１２に供給する。この同期信号は、パケット処理部１１３及びＤＰＢ１１２が処理済みのデータをＴＭＤＳエンコーダ（ＴＭＤＳ ＥＮＣ）１１４に出力するタイミングを決定するのに利用される。
【００１８】
多重分離部１１０は更に、ＭＰＥＧ−ＴＳストリームのＰＳＩ／ＳＩから、動画像コンテンツの跨ぎによる音声データフォーマットの切り替えを検出し、オーディオブロックタイミング信号に従い以下の１又は複数の処理を選択的に実行する。第１の処理は、ＭＰＥＧ−ＴＳ内の音声データの一部をパケット処理部１１３へ出力せずに破棄する音声データ破棄処理である。第２の処理は、後述するヌルバースト（null-burst）データを生成してパケット処理部１１３へ出力するヌルバースト出力処理である。第３の処理は、映像データを１フレームリピートするように同期信号を生成するリピート処理である。第４の処理は、音声データの出力タイミングを、ＰＴＳに対して調整するタイミング調整処理である。
【００１９】
復号部１１１は、多重分離部１１０から出力される圧縮映像データを復号し、非圧縮映像データをＤＰＢ１１２に出力する。
【００２０】
ＤＰＢ１１２は、復号部１１１からの非圧縮映像データを一時蓄積し、多重分離部１１０からの同期信号に同期して、ＴＭＤＳエンコーダ１１４に出力する遅延及びタイミング調整の回路である。
【００２１】
パケット処理部１１３は、多重分離部１１０から出力される音声データをペイロード部に入れ、多重分離部１１０からの音声データフォーマット情報からチャネルステータス等のメタ情報を生成し、伝送パケットであるＳＰＤＩＦパケットを生成する。パケット処理部１１３は、生成したＳＰＤＩＦパケットを多重分離部１１０からの同期信号に同期して、ＴＭＤＳエンコーダ１１４に出力する。パケット処理部１１３はまた、多重分離部１１０から入力する音声データの一部を破棄し、所望のデータをペイロード部に入れる機能も有する。音声データは、固定長のオーディオブロックを単位に伝送され、１オーディオブロック内に１９２個のＳＰＤＩＦパケットが配置される。
【００２２】
ＴＭＤＳエンコーダ１１４は、ＤＰＢ１１２からの非圧縮映像データと、パケット処理部１１３からのＳＰＤＩＦパケットを遷移時間最短差動信号伝送方式、いわゆるＴＭＤＳ方式で外部に出力する。ＴＭＤＳ（Transition Minimized Differential Signaling）は、Ｓｉｌｉｃｏｎ Ｉｍａｇｅ社の商標である。
【００２３】
受信装置１０１のＴＭＤＳデコーダ（ＴＭＤＳ ＤＥＣ）１２０には、ＨＤＭＩケーブル１０２を介して送信装置１００からのＴ．Ｍ．Ｄ．Ｓ方式の信号が入力する。ＴＭＤＳデコーダ１２０は、入力信号から非圧縮映像データとＳＰＤＩＦパケットの音声データを取り出し、非圧縮映像データをＶ遅延バッファ１２１に、ＳＰＤＩＦパケットの音声データをパケット処理部１２２に出力する。
【００２４】
Ｖ遅延バッファ１２１は、ＴＭＤＳデコーダ１２０からの非圧縮映像データを一定時間、遅延して、出力する。
【００２５】
パケット処理部１２２は、ＳＰＤＩＦパケットからメタ情報とペイロード部を抽出して出力する。パケット処理部１２２はまた、取得したメタ情報からペイロード部に含まれる音声データフォーマットを検出し、音声データの処理系を決定しスイッチ１２５，１２６を制御する。
【００２６】
スイッチ１２５は、パケット処理部１２２の制御下に、パケット処理部１２２からのＡＣ３データをＡＣ３復号部１２３に供給し、ＬＰＣＭデータをＡ遅延バッファ１２４に供給する。ＡＣ３復号部１２３は、スイッチ１２５からのＡＣ３データを復号してＬＰＣＭデータを出力する。Ａ遅延バッファ１２４は、スイッチ１２５からのＬＰＣＭデータを一定時間、遅延して、出力する。スイッチ１２６は、スイッチ１２５と連動して、ＡＣ３復号部１２３又はＡ遅延バッファ１２４の出力を選択する。スイッチ１２６で選択されたＬＰＣＭデータを外部に出力する。
【００２７】
本実施例における動画像コンテンツの伝送動作を説明する。ＨＤＭＩケーブル１０２によって送信装置１００と受信装置１０１が接続されると、ＨＤＭＩ上の図示しない信号線ＨＰＤ（Hot Plug Detect）によって、送信装置１００は、受信装置１０１との接続を認識する。また、ＨＤＭＩの図示しない信号線ＤＤＣ（Display Data Channel）によって、送信装置１００は、受信装置１０１の構成情報を確認し、接続状態を確立する。
【００２８】
接続状態が確立されると、送信装置１００は動画像コンテンツの出力を開始する。送信装置１００は、図示しない記録媒体から動画像コンテンツを読み出し、多重分離部１１０へ入力する。以下の説明では、動画像コンテンツは、多重化方式がＭＰＥＧ−ＴＳ、音声データフォーマットがＬＰＣＭ又はＡＣ３であるものとする。
【００２９】
多重分離部１１０は、入力されたＭＰＥＧ−ＴＳデータのＰＳＩ／ＳＩを元に、圧縮映像データと音声データ（ＬＰＣＭ又はＡＣ３）に分離し、ＰＳＩ／ＳＩから音声データフォーマット（ＬＰＣＭ又はＡＣ３）を検出する。多重分離部１１０は、音声データフォーマットの切り替わり又は変化とパケット処理部１１３からのオーディオブロックタイミング信号に従い、動画像コンテンツ跨ぎに関する必要な処理を加える。この処理の詳細は後述する。
【００３０】
多重分離部１１０は、分離した圧縮映像データを復号部１１１に出力し、ＰＴＳから生成した同期信号をＤＰＢ１１２とパケット処理部１１３に出力する。復号部１１１は、多重分離部１１０からの圧縮映像データを復号し、復号結果である非圧縮映像データをＤＰＢ１１２に出力する。ＤＰＢ１１２は、多重分離部１１０からの同期信号に基づいたタイミングで、復号部１１１からの非圧縮映像データをＴＭＤＳエンコーダ１１４に出力する。
【００３１】
多重分離部１１０はまた、分離した音声データと音声データフォーマット情報をパケット処理部１１３に供給する。パケット処理部１１３は、多重分離部１１０からの音声データからＳＰＤＩＦパケットを生成し、音声データフォーマットからメタ情報としてチャネルステータスビット（Channel-Status bit）を生成する。パケット処理部１１３は、多重分離部１１０からの同期信号に基づくタイミングで、ＳＰＤＩＦパケットをＴＭＤＳエンコーダ１１４に出力する。
【００３２】
ＴＭＤＳエンコーダ１１４は、ＤＰＢ１１２からの非圧縮映像データとパケット処理部１１３からのＳＰＤＩＦパケット形式の音声データをＴＭＤＳ信号に変換し、ＨＤＭＩケーブル１０２に出力する。
【００３３】
送信装置１００と接続が確立されると、受信装置１０１は、映像音声データの受信を開始する。ＴＭＤＳデコーダ１２０は、ＨＤＭＩケーブル１０２からのＴＭＤＳ信号から非圧縮映像データとＳＰＤＩＦパケットを分離し、前者をＶ遅延バッファ１２１に、後者をパケット処理部１２２に出力する。
【００３４】
Ｖ遅延バッファ１２１は、ＴＭＤＳデコーダ１２０からの非圧縮映像データを所定時間、遅延して、外部の図示しないモニタ等に出力する。
【００３５】
パケット処理部１２２は、ＴＭＤＳデコーダ１２０からのＳＰＤＩＦパケットのメタ情報のチャネルステータスビットから音声データフォーマット情報を取得し、音声データの復号処理系を選択する。すなわち、音声データがＡＣ３形式で符号化されている場合は、ＡＣ３復号部１２３を選択するようにスイッチ１２５，１２６を制御し、ＬＰＣＭ形式の場合には、Ａ遅延バッファ１２４を選択するようにスイッチ１２５，１２６を制御する。パケット処理部１２２は、ＳＰＤＩＦパケットのペイロード部に入る音声データ（ＡＣ３又はＬＰＣＭ）をスイッチ１２５に出力する。ＡＣ３復号部１２３は、スイッチ１２５からのＡＣ３音声データを復号し、得られたＬＰＣＭ音声データをスイッチ１２６に出力する。Ａ遅延バッファ１２４、スイッチ１２５からのＬＰＣＭ音声データを、所定時間遅延して、スイッチ１２６に出力する。
【００３６】
図３及び図４を参照して、送信装置１００の音声データ送出処理を説明する。図３は、送信装置１００の音声データ出力処理のフローチャートを示す。図４は、伝送タイミング例を示すタイミングチャートである。
【００３７】
Ｓ３００において、多重分離部１１０は、ＰＳＩ／ＳＩから動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否か、すなわち、音声データフォーマットの変化を検出する。図４（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図４（Ｂ）又は図４（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ３０１に進む。図４（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図４（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００３８】
Ｓ３０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図４（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ３０５に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図４（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ３０２に進む。
【００３９】
Ｓ３０２において、パケット処理部１１３は、音声データフォーマットが切り替わるタイミングより時間的に後の音声データ、すなわち後継音声データの音声データフォーマットが符号化形式であるか否かを判定する。符号化形式（ＡＣ３）の場合、Ｓ３０３に進み、非符号化形式（ＬＰＣＭ）の場合、Ｓ３０４に進む。
【００４０】
Ｓ３０３において、パケット処理部１１３は、後継音声データの先頭のＡＡＵ（Audio Access Unit）を破棄する。ＡＣ３のＡＡＵサイズがオーディオブロックサイズより十分大きいので、先頭のＡＡＵを破棄することで、混在するオーディオブロック内のＡＣ３音声データを破棄できる。
【００４１】
Ｓ３０４において、パケット処理部１１３は、音声データフォーマットが混在するオーディオブロック内のＬＰＣＭ音声データを破棄する。
【００４２】
Ｓ３０２〜Ｓ３０４の処理によって、図４（Ｃ）の場合のパケット処理部１１３の出力は、図４（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００４３】
Ｓ３０５において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入又は配置する。ヌルバーストデータは、ＳＰＤＩＦによる伝送で音声データフォーマットの切り替えが発生する際に、送信装置が出力すべき信号である。ヌルバーストデータの詳細はＩＥＣ６１９７３に説明されており、これ以上の説明は省略する。
【００４４】
Ｓ３０６において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【００４５】
このように、本実施例では、動画像コンテンツ跨ぎ時に音声データフォーマットの切り替えが発生しても、メタ情報であるチャネルステータスとペイロードとを一致させることができ、最短のミュート期間で異音の発生を抑止できる。
【００４６】
送信装置と受信装置との間のインターフェースをＨＤＭＩとしたが、音声データの送出がＳＰＤＩＦ又はこれに類するパケット構造を有するものであれば、同様の作用効果を得ることができる。また、音声データフォーマットとしてＡＣ３／ＬＰＣＭの例を説明したが、この組み合わせに限定されない。
【実施例２】
【００４７】
後継動画像コンテンツの音声データ始端を破棄する代わりに、先行動画像コンテンツの音声データ末尾を破棄してもよい。図５は、その音声データ出力処理のフローチャートを示す。図６は、伝送タイミング例を示す。
【００４８】
Ｓ５００において、多重分離部１１０は、ＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。図６（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図６（Ｂ）又は図６（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ５０１に進む。図６（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図６（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００４９】
Ｓ５０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図６（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ５０５に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図６（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ５０２に進む。
【００５０】
Ｓ５０２において、パケット処理部１１３は、音声データフォーマットの切り替わりより時間的に先行する音声データ、すなわち先行音声データの音声データフォーマットが符号化形式であるか否かを判定する。符号化形式（ＡＣ３）である場合、Ｓ５０３に進む。非符号化形式（ＬＰＣＭ）である場合、Ｓ５０４に進む。
【００５１】
Ｓ５０３において、パケット処理部１１３は、先行音声データの末尾のＡＡＵを破棄することで、混在するオーディオブロック内のＡＣ３音声データを破棄する。
【００５２】
Ｓ５０４において、パケット処理部１１３は、音声データフォーマットが混在するオーディオブロック内のＬＰＣＭ音声データを破棄する。
【００５３】
Ｓ５０２〜Ｓ５０４の処理によって、図６（Ｃ）の場合のパケット処理部１１３の出力は、図６（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００５４】
Ｓ５０５において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入又は配置する。
【００５５】
Ｓ５０６において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【実施例３】
【００５６】
先行動画像コンテンツの最終出力映像をリピートする動作を説明する。図７は、そのための音声データ出力処理のフローチャートを示し、図８は伝送タイミング例を示す。
【００５７】
Ｓ７００において、多重分離部１１０は、ＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。図８（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図８（Ｂ）又は図８（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ７０１に進む。図８（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図８（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００５８】
Ｓ７０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図８（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ７０３に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図８（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ７０２に進む。
【００５９】
Ｓ７０２において、多重分離部１１０は、先行動画像コンテンツの映像データの末尾に１フレームのリピートを加える。具体的には、ＤＰＢ１１２への後継動画像コンテンツの出力タイミングを１フレーム分遅延させてリピート映像を発生させ、それに合わせて後継動画像コンテンツの映像・音声データの出力タイミングを１フレーム遅延させる。この処理によって、図８（Ｃ）の場合のパケット処理部１１３の出力は、図８（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００６０】
Ｓ７０３において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入又は配置する。
【００６１】
Ｓ７０４において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【実施例４】
【００６２】
後継動画像コンテンツの音声データ出力タイミングを、オーディオブロック境界まで遅延させる動作を説明する。図９は、この動作の音声データ出力処理のフローチャートを示し、図１０は伝送タイミング例を示す。
【００６３】
Ｓ９００において、多重分離部１１０は、ＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。図１０（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図１０（Ｂ）又は図１０（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ９０１に進む。図１０（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図４（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００６４】
Ｓ９０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図１０（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ９０３に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図１０（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ９０２に進む。
【００６５】
Ｓ９０２において、パケット処理部１１３は、後継動画像コンテンツの音声データの末尾に遅延を加える。加える遅延は、始端となる音声データの出力タイミングを、次オーディオブロックの境界に合わせるために必要な量であり、後継音声データを次のオーディオブロック以降に遅延させる。この処理によって、図１０（Ｃ）の場合のパケット処理部１１３の出力は、図１０（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００６６】
Ｓ９０３において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入する。
【００６７】
Ｓ９０４において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【技術分野】
【０００１】
本発明は、互いに同期する映像情報と音声情報からなる動画像を送信する動画像送信装置に関する。
【背景技術】
【０００２】
音声データの伝送フォーマットとしてＳＰＤＩＦ（Sony Philips Digital InterFace）フォーマットが広く普及している。例えばＨＤＭＩ（High Definition Multimedia Interface）の一部としても使用されている。
【０００３】
ＳＰＤＩＦは、非圧縮音声データの伝送フォーマット（ＩＥＣ６０９５８）と、圧縮音声データの伝送フォーマット（ＩＥＣ６１９７３）の両方に対応している。このような異なる音声データフォーマットでの伝送を可能とするため、ＳＰＤＩＦパケットは、実データを格納するペイロード部に伝送音声データフォーマットを示すメタ情報を付加した構造からなる。このメタ情報が、音声データフォーマットの識別子として利用される。
【０００４】
このメタ情報は、１９２個のパケットに１ビットずつ分割して格納されており、この１９２パケットを集めることで復元可能である（図２（Ａ））。メタ情報の復元に必要な１９２パケットをオーディオブロックと呼び、この期間内はメタ情報を切り替えることができない。一方、メタ情報とペイロード部の同期関係に関する規定は定義されていない。従って、音声データフォーマットの切り替え時に、このメタ情報とペイロード部の間に不一致が発生し得る。例えば、メタ情報がリニアＰＣＭ（ＬＰＣＭ）であるオーディオブロック中でＡＣ３（Dolby Digital, AC-3:Audio Code number 3）へと切り替わった場合、受信器はＡＣ３データをＬＰＣＭデータと誤認する。誤認の結果、このオーディオブロックで異音が出る可能性がある（図２（Ｂ））。
【０００５】
音声データフォーマットの現実的な切り替え手段として、特許文献１に記載の技術が知られている。特許文献１に記載の技術では、ＨＤＭＩ内のデジタル音声の信号線（ＳＰＤＩＦ）とは別の信号線を用いて、音声データフォーマットの切り替わり期間を受信器に通知する。切り替わり期間を通知された受信器は、伝送されたデジタル音声データを用いずに、その期間をミュート再生する。これにより、異音の発生が抑制される。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００８−１０７３９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
特許文献１に記載の技術は、特殊な信号の使用を前提とするので、汎用的な機器では、異音発生の抑止効果が得られない。また、ＨＤＭＩ以外の伝送方法、例えば、映像信号をＤ端子で、音声信号をＳＰＤＩＦで伝送する伝送方法の場合、特許文献１に記載の技術を適用できない。
【０００８】
さらに、特許文献１に記載の技術では、音声データフォーマットの切り替わり期間を通知する信号が音声データと非同期である。この結果、音声データフォーマットの切り替えタイミングに対して十分なマージンを持って切り替わり期間を通知する必要があり、ミュート期間が長くなってしまう。
【０００９】
本発明は、このような問題を解決し、異音の発生を抑制し、音声欠落（ミュート）期間を低減又は解消する動画像送信装置を提示することを目的とする。
【課題を解決するための手段】
【００１０】
本発明における動画像送信装置は、映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、前記音声データフォーマットの変化を検出した前記オーディオブロックにおいて、前記変化に時間的に先行する音声データを含む前記伝送パケット、または、前記変化に続く後継音声データを含む前記伝送パケットを破棄する破棄手段とを具備することを特徴とする。
【００１１】
本発明における動画像送信装置は、映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、前記映像データの、前記音声データフォーマットの変化を検出した前記オーディオブロックに対応する映像をリピートし、リピートで生じる前記音声データの空きにヌルバーストデータを挿入する手段とを具備することを特徴とする。
【００１２】
本発明に係る動画像送信装置は、映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、前記音声データフォーマットの変化を検出した前記オーディオブロックにおける、前記変化に続く後継音声データを、次のオーディオブロック以降に遅延させる手段とを具備することを特徴とする。
【発明の効果】
【００１３】
本発明によれば、音声データフォーマットが異なるコンテンツを連続的に送出する場合に、異音の発生を抑制でき、音声データフォーマットの切り替えに伴う音声欠落（ミュート）期間を低減又は解消できる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施例の概略構成ブロック図である。
【図２】ＳＰＤＩＦパケットの構造と異音発生の説明図である。
【図３】本実施例の音声出力処理のフローチャートである。
【図４】図３に示す処理での音声データ伝送タイミング例を示す図である。
【図５】本実施例の別の音声データ出力処理のフローチャートである。
【図６】図５に示す処理での音声データ伝送タイミング例を示す図である。
【図７】本実施例の別の音声データ出力処理のフローチャートである。
【図８】図７に示す処理での音声データ伝送タイミング例を示す図である。
【図９】本実施例の別の音声データ出力処理のフローチャートである。
【図１０】図９に示す処理での音声データ伝送タイミング例を示す図である。
【発明を実施するための形態】
【００１５】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【実施例１】
【００１６】
図１は、本発明に係る動画像送信装置の一実施例を有する動画像伝送システムの概略構成ブロック図を示す。送信装置１００は、映像データ及び音声データを含むコンテンツ（動画像ビデオコンテンツ又は動画像コンテンツ）をＨＤＭＩ信号で受信装置１０１に送出する。受信装置１０１は、送信装置１００からＨＤＭＩ信号として受信した映像データ及び音声データをそれぞれ図示しないモニタおよびスピーカに出力する。ＨＤＭＩケーブル１０２が、送信装置１００と受信装置１０１を接続する。動画像コンテンツは、本実施例では、ＭＰＥＧ−ＴＳストリームである。ＭＰＥＧ−ＴＳストリームは、管理情報として、ＰＴＳ（Presentation Time Stamp）、及びＰＳＩ（Program Specific Information）／ＳＩ（Service Information）を有する。
【００１７】
多重分離部１１０には外部から動画像コンテンツが入力し、また、パケット処理部１１３からオーディオブロックの境界を示すタイミング信号（オーディオブロックタイミング信号）が入力する。多重分離部１１０は、入力された動画像コンテンツを映像データと音声データに分離し、映像データを復号部１１１に、音声データをパケット処理部１１３に出力する。多重分離部１１０はまた、映像データと音声データを出力する際に、ＭＰＥＧ−ＴＳストリーム内のＰＴＳから同期信号を分離し、パケット処理部１１３及びＤＰＢ１１２に供給する。この同期信号は、パケット処理部１１３及びＤＰＢ１１２が処理済みのデータをＴＭＤＳエンコーダ（ＴＭＤＳ ＥＮＣ）１１４に出力するタイミングを決定するのに利用される。
【００１８】
多重分離部１１０は更に、ＭＰＥＧ−ＴＳストリームのＰＳＩ／ＳＩから、動画像コンテンツの跨ぎによる音声データフォーマットの切り替えを検出し、オーディオブロックタイミング信号に従い以下の１又は複数の処理を選択的に実行する。第１の処理は、ＭＰＥＧ−ＴＳ内の音声データの一部をパケット処理部１１３へ出力せずに破棄する音声データ破棄処理である。第２の処理は、後述するヌルバースト（null-burst）データを生成してパケット処理部１１３へ出力するヌルバースト出力処理である。第３の処理は、映像データを１フレームリピートするように同期信号を生成するリピート処理である。第４の処理は、音声データの出力タイミングを、ＰＴＳに対して調整するタイミング調整処理である。
【００１９】
復号部１１１は、多重分離部１１０から出力される圧縮映像データを復号し、非圧縮映像データをＤＰＢ１１２に出力する。
【００２０】
ＤＰＢ１１２は、復号部１１１からの非圧縮映像データを一時蓄積し、多重分離部１１０からの同期信号に同期して、ＴＭＤＳエンコーダ１１４に出力する遅延及びタイミング調整の回路である。
【００２１】
パケット処理部１１３は、多重分離部１１０から出力される音声データをペイロード部に入れ、多重分離部１１０からの音声データフォーマット情報からチャネルステータス等のメタ情報を生成し、伝送パケットであるＳＰＤＩＦパケットを生成する。パケット処理部１１３は、生成したＳＰＤＩＦパケットを多重分離部１１０からの同期信号に同期して、ＴＭＤＳエンコーダ１１４に出力する。パケット処理部１１３はまた、多重分離部１１０から入力する音声データの一部を破棄し、所望のデータをペイロード部に入れる機能も有する。音声データは、固定長のオーディオブロックを単位に伝送され、１オーディオブロック内に１９２個のＳＰＤＩＦパケットが配置される。
【００２２】
ＴＭＤＳエンコーダ１１４は、ＤＰＢ１１２からの非圧縮映像データと、パケット処理部１１３からのＳＰＤＩＦパケットを遷移時間最短差動信号伝送方式、いわゆるＴＭＤＳ方式で外部に出力する。ＴＭＤＳ（Transition Minimized Differential Signaling）は、Ｓｉｌｉｃｏｎ Ｉｍａｇｅ社の商標である。
【００２３】
受信装置１０１のＴＭＤＳデコーダ（ＴＭＤＳ ＤＥＣ）１２０には、ＨＤＭＩケーブル１０２を介して送信装置１００からのＴ．Ｍ．Ｄ．Ｓ方式の信号が入力する。ＴＭＤＳデコーダ１２０は、入力信号から非圧縮映像データとＳＰＤＩＦパケットの音声データを取り出し、非圧縮映像データをＶ遅延バッファ１２１に、ＳＰＤＩＦパケットの音声データをパケット処理部１２２に出力する。
【００２４】
Ｖ遅延バッファ１２１は、ＴＭＤＳデコーダ１２０からの非圧縮映像データを一定時間、遅延して、出力する。
【００２５】
パケット処理部１２２は、ＳＰＤＩＦパケットからメタ情報とペイロード部を抽出して出力する。パケット処理部１２２はまた、取得したメタ情報からペイロード部に含まれる音声データフォーマットを検出し、音声データの処理系を決定しスイッチ１２５，１２６を制御する。
【００２６】
スイッチ１２５は、パケット処理部１２２の制御下に、パケット処理部１２２からのＡＣ３データをＡＣ３復号部１２３に供給し、ＬＰＣＭデータをＡ遅延バッファ１２４に供給する。ＡＣ３復号部１２３は、スイッチ１２５からのＡＣ３データを復号してＬＰＣＭデータを出力する。Ａ遅延バッファ１２４は、スイッチ１２５からのＬＰＣＭデータを一定時間、遅延して、出力する。スイッチ１２６は、スイッチ１２５と連動して、ＡＣ３復号部１２３又はＡ遅延バッファ１２４の出力を選択する。スイッチ１２６で選択されたＬＰＣＭデータを外部に出力する。
【００２７】
本実施例における動画像コンテンツの伝送動作を説明する。ＨＤＭＩケーブル１０２によって送信装置１００と受信装置１０１が接続されると、ＨＤＭＩ上の図示しない信号線ＨＰＤ（Hot Plug Detect）によって、送信装置１００は、受信装置１０１との接続を認識する。また、ＨＤＭＩの図示しない信号線ＤＤＣ（Display Data Channel）によって、送信装置１００は、受信装置１０１の構成情報を確認し、接続状態を確立する。
【００２８】
接続状態が確立されると、送信装置１００は動画像コンテンツの出力を開始する。送信装置１００は、図示しない記録媒体から動画像コンテンツを読み出し、多重分離部１１０へ入力する。以下の説明では、動画像コンテンツは、多重化方式がＭＰＥＧ−ＴＳ、音声データフォーマットがＬＰＣＭ又はＡＣ３であるものとする。
【００２９】
多重分離部１１０は、入力されたＭＰＥＧ−ＴＳデータのＰＳＩ／ＳＩを元に、圧縮映像データと音声データ（ＬＰＣＭ又はＡＣ３）に分離し、ＰＳＩ／ＳＩから音声データフォーマット（ＬＰＣＭ又はＡＣ３）を検出する。多重分離部１１０は、音声データフォーマットの切り替わり又は変化とパケット処理部１１３からのオーディオブロックタイミング信号に従い、動画像コンテンツ跨ぎに関する必要な処理を加える。この処理の詳細は後述する。
【００３０】
多重分離部１１０は、分離した圧縮映像データを復号部１１１に出力し、ＰＴＳから生成した同期信号をＤＰＢ１１２とパケット処理部１１３に出力する。復号部１１１は、多重分離部１１０からの圧縮映像データを復号し、復号結果である非圧縮映像データをＤＰＢ１１２に出力する。ＤＰＢ１１２は、多重分離部１１０からの同期信号に基づいたタイミングで、復号部１１１からの非圧縮映像データをＴＭＤＳエンコーダ１１４に出力する。
【００３１】
多重分離部１１０はまた、分離した音声データと音声データフォーマット情報をパケット処理部１１３に供給する。パケット処理部１１３は、多重分離部１１０からの音声データからＳＰＤＩＦパケットを生成し、音声データフォーマットからメタ情報としてチャネルステータスビット（Channel-Status bit）を生成する。パケット処理部１１３は、多重分離部１１０からの同期信号に基づくタイミングで、ＳＰＤＩＦパケットをＴＭＤＳエンコーダ１１４に出力する。
【００３２】
ＴＭＤＳエンコーダ１１４は、ＤＰＢ１１２からの非圧縮映像データとパケット処理部１１３からのＳＰＤＩＦパケット形式の音声データをＴＭＤＳ信号に変換し、ＨＤＭＩケーブル１０２に出力する。
【００３３】
送信装置１００と接続が確立されると、受信装置１０１は、映像音声データの受信を開始する。ＴＭＤＳデコーダ１２０は、ＨＤＭＩケーブル１０２からのＴＭＤＳ信号から非圧縮映像データとＳＰＤＩＦパケットを分離し、前者をＶ遅延バッファ１２１に、後者をパケット処理部１２２に出力する。
【００３４】
Ｖ遅延バッファ１２１は、ＴＭＤＳデコーダ１２０からの非圧縮映像データを所定時間、遅延して、外部の図示しないモニタ等に出力する。
【００３５】
パケット処理部１２２は、ＴＭＤＳデコーダ１２０からのＳＰＤＩＦパケットのメタ情報のチャネルステータスビットから音声データフォーマット情報を取得し、音声データの復号処理系を選択する。すなわち、音声データがＡＣ３形式で符号化されている場合は、ＡＣ３復号部１２３を選択するようにスイッチ１２５，１２６を制御し、ＬＰＣＭ形式の場合には、Ａ遅延バッファ１２４を選択するようにスイッチ１２５，１２６を制御する。パケット処理部１２２は、ＳＰＤＩＦパケットのペイロード部に入る音声データ（ＡＣ３又はＬＰＣＭ）をスイッチ１２５に出力する。ＡＣ３復号部１２３は、スイッチ１２５からのＡＣ３音声データを復号し、得られたＬＰＣＭ音声データをスイッチ１２６に出力する。Ａ遅延バッファ１２４、スイッチ１２５からのＬＰＣＭ音声データを、所定時間遅延して、スイッチ１２６に出力する。
【００３６】
図３及び図４を参照して、送信装置１００の音声データ送出処理を説明する。図３は、送信装置１００の音声データ出力処理のフローチャートを示す。図４は、伝送タイミング例を示すタイミングチャートである。
【００３７】
Ｓ３００において、多重分離部１１０は、ＰＳＩ／ＳＩから動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否か、すなわち、音声データフォーマットの変化を検出する。図４（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図４（Ｂ）又は図４（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ３０１に進む。図４（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図４（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００３８】
Ｓ３０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図４（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ３０５に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図４（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ３０２に進む。
【００３９】
Ｓ３０２において、パケット処理部１１３は、音声データフォーマットが切り替わるタイミングより時間的に後の音声データ、すなわち後継音声データの音声データフォーマットが符号化形式であるか否かを判定する。符号化形式（ＡＣ３）の場合、Ｓ３０３に進み、非符号化形式（ＬＰＣＭ）の場合、Ｓ３０４に進む。
【００４０】
Ｓ３０３において、パケット処理部１１３は、後継音声データの先頭のＡＡＵ（Audio Access Unit）を破棄する。ＡＣ３のＡＡＵサイズがオーディオブロックサイズより十分大きいので、先頭のＡＡＵを破棄することで、混在するオーディオブロック内のＡＣ３音声データを破棄できる。
【００４１】
Ｓ３０４において、パケット処理部１１３は、音声データフォーマットが混在するオーディオブロック内のＬＰＣＭ音声データを破棄する。
【００４２】
Ｓ３０２〜Ｓ３０４の処理によって、図４（Ｃ）の場合のパケット処理部１１３の出力は、図４（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００４３】
Ｓ３０５において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入又は配置する。ヌルバーストデータは、ＳＰＤＩＦによる伝送で音声データフォーマットの切り替えが発生する際に、送信装置が出力すべき信号である。ヌルバーストデータの詳細はＩＥＣ６１９７３に説明されており、これ以上の説明は省略する。
【００４４】
Ｓ３０６において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【００４５】
このように、本実施例では、動画像コンテンツ跨ぎ時に音声データフォーマットの切り替えが発生しても、メタ情報であるチャネルステータスとペイロードとを一致させることができ、最短のミュート期間で異音の発生を抑止できる。
【００４６】
送信装置と受信装置との間のインターフェースをＨＤＭＩとしたが、音声データの送出がＳＰＤＩＦ又はこれに類するパケット構造を有するものであれば、同様の作用効果を得ることができる。また、音声データフォーマットとしてＡＣ３／ＬＰＣＭの例を説明したが、この組み合わせに限定されない。
【実施例２】
【００４７】
後継動画像コンテンツの音声データ始端を破棄する代わりに、先行動画像コンテンツの音声データ末尾を破棄してもよい。図５は、その音声データ出力処理のフローチャートを示す。図６は、伝送タイミング例を示す。
【００４８】
Ｓ５００において、多重分離部１１０は、ＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。図６（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図６（Ｂ）又は図６（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ５０１に進む。図６（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図６（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００４９】
Ｓ５０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図６（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ５０５に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図６（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ５０２に進む。
【００５０】
Ｓ５０２において、パケット処理部１１３は、音声データフォーマットの切り替わりより時間的に先行する音声データ、すなわち先行音声データの音声データフォーマットが符号化形式であるか否かを判定する。符号化形式（ＡＣ３）である場合、Ｓ５０３に進む。非符号化形式（ＬＰＣＭ）である場合、Ｓ５０４に進む。
【００５１】
Ｓ５０３において、パケット処理部１１３は、先行音声データの末尾のＡＡＵを破棄することで、混在するオーディオブロック内のＡＣ３音声データを破棄する。
【００５２】
Ｓ５０４において、パケット処理部１１３は、音声データフォーマットが混在するオーディオブロック内のＬＰＣＭ音声データを破棄する。
【００５３】
Ｓ５０２〜Ｓ５０４の処理によって、図６（Ｃ）の場合のパケット処理部１１３の出力は、図６（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００５４】
Ｓ５０５において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入又は配置する。
【００５５】
Ｓ５０６において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【実施例３】
【００５６】
先行動画像コンテンツの最終出力映像をリピートする動作を説明する。図７は、そのための音声データ出力処理のフローチャートを示し、図８は伝送タイミング例を示す。
【００５７】
Ｓ７００において、多重分離部１１０は、ＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。図８（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図８（Ｂ）又は図８（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ７０１に進む。図８（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図８（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００５８】
Ｓ７０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図８（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ７０３に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図８（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ７０２に進む。
【００５９】
Ｓ７０２において、多重分離部１１０は、先行動画像コンテンツの映像データの末尾に１フレームのリピートを加える。具体的には、ＤＰＢ１１２への後継動画像コンテンツの出力タイミングを１フレーム分遅延させてリピート映像を発生させ、それに合わせて後継動画像コンテンツの映像・音声データの出力タイミングを１フレーム遅延させる。この処理によって、図８（Ｃ）の場合のパケット処理部１１３の出力は、図８（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００６０】
Ｓ７０３において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入又は配置する。
【００６１】
Ｓ７０４において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【実施例４】
【００６２】
後継動画像コンテンツの音声データ出力タイミングを、オーディオブロック境界まで遅延させる動作を説明する。図９は、この動作の音声データ出力処理のフローチャートを示し、図１０は伝送タイミング例を示す。
【００６３】
Ｓ９００において、多重分離部１１０は、ＰＳＩ／ＳＩから、動画像コンテンツ跨ぎにおいて音声データフォーマットが切り替わるか否かを検出する。図１０（Ａ）に示すように、動画像コンテンツの跨ぎで音声データフォーマットが切り替わらない（共にＡＣ３）場合、パケット処理部１１３は、特別な処理はせず、同期信号に基づく音声データの出力を継続する。図１０（Ｂ）又は図１０（Ｃ）に示すように動画像コンテンツの跨ぎで音声データフォーマットが切り替わる場合（図示例では、ＡＣ３からＬＰＣＭに）、Ｓ９０１に進む。図１０（Ｂ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に、後継動画像コンテンツの音声データ出力が含まれない場合を示す。図４（Ｃ）は、先行動画像コンテンツの音声データ（ＡＣ３）を出力しているオーディオブロック内に後継動画像コンテンツの音声データ出力が含まれる場合を示す。
【００６４】
Ｓ９０１において、多重分離部１１０は、パケット処理部１１３からのオーディオブロックタイミング信号と音声データフォーマットの切り替わりタイミングを確認する。図１０（Ｂ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有しない場合には、Ｓ９０３に進み、音声データフォーマット切り替えに必要な処理を行う。逆に、図１０（Ｃ）に示すように、同一オーディオブロック内に異なる音声データフォーマットの出力タイミングを有する場合、Ｓ９０２に進む。
【００６５】
Ｓ９０２において、パケット処理部１１３は、後継動画像コンテンツの音声データの末尾に遅延を加える。加える遅延は、始端となる音声データの出力タイミングを、次オーディオブロックの境界に合わせるために必要な量であり、後継音声データを次のオーディオブロック以降に遅延させる。この処理によって、図１０（Ｃ）の場合のパケット処理部１１３の出力は、図１０（Ｂ）の場合のそれと同様、同一オーディオブロック内に１種類の音声データフォーマットのみが存在するものとなる。
【００６６】
Ｓ９０３において、パケット処理部１１３は、動画像コンテンツの跨ぎにおける先行動画像コンテンツの音声データ末尾と後継動画像コンテンツの音声データ始端との間にヌルバースト（null-burst）データを挿入する。
【００６７】
Ｓ９０４において、パケット処理部１１３は、後継動画像コンテンツの音声データ始端を含むオーディオブロックタイミングから、音声データフォーマット信号を切り替える。これにより、後継動画像コンテンツに対応したチャネルステータス（Channel-Status）が出力される。
【特許請求の範囲】
【請求項１】
映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、
前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、
前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、
前記音声データフォーマットの変化を検出した前記オーディオブロックにおいて、前記変化に時間的に先行する音声データを含む前記伝送パケット、または前記変化に続く後継音声データを含む前記伝送パケットを破棄する破棄手段
とを具備することを特徴とする動画像送信装置。
【請求項２】
前記破棄手段が、破棄した前記伝送パケットに対してヌルバーストデータを配置することを特徴とする請求項１に記載の動画像送信装置。
【請求項３】
映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、
前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、
前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、
前記映像データの、前記音声データフォーマットの変化を検出した前記オーディオブロックに対応する映像をリピートし、リピートで生じる前記音声データの空きにヌルバーストデータを挿入する手段
とを具備することを特徴とする動画像送信装置。
【請求項４】
映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、
前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、
前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、
前記音声データフォーマットの変化を検出した前記オーディオブロックにおける、前記変化に続く後継音声データを、次のオーディオブロック以降に遅延させる手段
とを具備することを特徴とする動画像送信装置。
【請求項５】
前記伝送パケットが、ＳＰＤＩＦパケットであることを特徴とする請求項１乃至４の何れか１項に記載の動画像送信装置。
【請求項１】
映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、
前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、
前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、
前記音声データフォーマットの変化を検出した前記オーディオブロックにおいて、前記変化に時間的に先行する音声データを含む前記伝送パケット、または前記変化に続く後継音声データを含む前記伝送パケットを破棄する破棄手段
とを具備することを特徴とする動画像送信装置。
【請求項２】
前記破棄手段が、破棄した前記伝送パケットに対してヌルバーストデータを配置することを特徴とする請求項１に記載の動画像送信装置。
【請求項３】
映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、
前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、
前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、
前記映像データの、前記音声データフォーマットの変化を検出した前記オーディオブロックに対応する映像をリピートし、リピートで生じる前記音声データの空きにヌルバーストデータを挿入する手段
とを具備することを特徴とする動画像送信装置。
【請求項４】
映像データと、それぞれペイロード部、及び、音声データフォーマットを示す音声データフォーマット情報を含むメタ情報を有する複数の伝送パケットからなるオーディオブロックを単位に伝送される音声データとを有する動画像コンテンツを送信する動画像送信装置であって、
前記音声データの前記メタ情報の前記音声データフォーマット情報から、前記音声データの前記伝送パケットごとの音声データフォーマットを検出する手段と、
前記オーディオブロック内で前記音声データフォーマットが変化するか否かを検出する手段と、
前記音声データフォーマットの変化を検出した前記オーディオブロックにおける、前記変化に続く後継音声データを、次のオーディオブロック以降に遅延させる手段
とを具備することを特徴とする動画像送信装置。
【請求項５】
前記伝送パケットが、ＳＰＤＩＦパケットであることを特徴とする請求項１乃至４の何れか１項に記載の動画像送信装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１２−７５０６９（Ｐ２０１２−７５０６９Ａ）
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願番号】特願２０１０−２２０３５１（Ｐ２０１０−２２０３５１）
【出願日】平成２２年９月３０日（２０１０．９．３０）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願日】平成２２年９月３０日（２０１０．９．３０）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]