立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
【課題】コンテンツ供給事業者における視差情報の伝送の自由度を高める。
【解決手段】トランスポートストリームＴＳに、視差情報の伝送があるか否かを識別する識別情報を挿入する。例えば、ステレオ映像記述子を新たに定義して、ＥＩＴの配下に挿入する。ステレオ映像記述子には、番組単位の視差情報の伝送があるか否かを識別する識別情報が含まれる。また、例えば、視差情報リンク記述子を新たに定義して、ＥＩＴの配下に挿入する。視差情報リンク記述子には、汎用目的の視差情報の伝送があるか否かを識別する識別情報が含まれる。また、この視差情報リンク記述子には、特定用途向けの視差情報の伝送があるか否かを識別する識別情報が含まれる。この識別情報の存在により、視差情報として、番組単位の視差情報、汎用目的の視差情報、特定の重畳情報用の視差情報等を選択的に伝送することが可能となる。また、視差情報を送らない選択も可能となる。
【解決手段】トランスポートストリームＴＳに、視差情報の伝送があるか否かを識別する識別情報を挿入する。例えば、ステレオ映像記述子を新たに定義して、ＥＩＴの配下に挿入する。ステレオ映像記述子には、番組単位の視差情報の伝送があるか否かを識別する識別情報が含まれる。また、例えば、視差情報リンク記述子を新たに定義して、ＥＩＴの配下に挿入する。視差情報リンク記述子には、汎用目的の視差情報の伝送があるか否かを識別する識別情報が含まれる。また、この視差情報リンク記述子には、特定用途向けの視差情報の伝送があるか否かを識別する識別情報が含まれる。この識別情報の存在により、視差情報として、番組単位の視差情報、汎用目的の視差情報、特定の重畳情報用の視差情報等を選択的に伝送することが可能となる。また、視差情報を送らない選択も可能となる。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法に関し、特に、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高める立体画像データ送信装置等に関する。
【背景技術】
【０００２】
例えば、特許文献１には、立体画像データのテレビ放送電波を用いた伝送方式について提案されている。この場合、左眼用画像データおよび右眼用画像データを含む立体画像データが送信され、テレビ受信機において、両眼視差を利用した立体画像表示が行われる。
【０００３】
図３０は、両眼視差を利用した立体画像表示において、スクリーン上におけるオブジェクト（物体）の左右像の表示位置と、その立体画像（３Ｄ画像）の再生位置との関係を示している。例えば、スクリーン上に図示のように左像Ｌａが右側に右像Ｒａが左側にずれて表示されているオブジェクトＡに関しては、左右の視線がスクリーン面より手前で交差するため、その立体画像の再生位置はスクリーン面より手前となる。ＤＰａは、オブジェクトＡに関する水平方向の視差ベクトルを表している。
【０００４】
また、例えば、スクリーン上に図示のように左像Ｌｂおよび右像Ｒｂが同一位置に表示されているオブジェクトＢに関しては、左右の視線がスクリーン面で交差するため、その立体画像の再生位置はスクリーン面上となる。さらに、例えば、スクリーン上に図示のように左像Ｌｃが左側に右像Ｒｃが右側にずれて表示されているオブジェクトＣに関しては、左右の視線がスクリーン面より奥で交差するため、その立体画像の再生位置はスクリーン面より奥となる。ＤＰｃは、オブジェクトＣに関する水平方向の視差ベクトルを表している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−６１１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上述したようにテレビ受信機で表示される立体画像（３Ｄ画像）に、字幕やデータ放送表示、端末アプリケーション独自の表示などの重畳情報を重ねる場合、立体画像に対して、視聴者にとって見やすい適切な深さ（奥行き）を設定することが望ましい。通常、適切な深さとは、立体画像の深さに対して、それより手前の深さと考えられている。図３１は、画像とサブタイトル（字幕）の位置関係の一例を示している。この例において、サブタイトルは、画像の最も近い位置よりさらに手前に認識される。
【０００７】
現状の３Ｄテレビ方式においては、左右の眼の視点による２つの画像を用いるので、深さとは、左右の画像の表示対象における左右のずれの画素数で表現される。よって、字幕、その他の画像に重ねる重畳情報においても、重畳情報毎に左右のずれの画素数で適切な深さを規定することが想定されている。このずれの画素数の情報を視差情報（Disparity Data）と呼ぶ。
【０００８】
３Ｄ映画における字幕では、時間経過に伴う画像（映像）の変化を反映して、時間と共に画像に重ねる字幕も深さを変化させることがよく行われている。３Ｄテレビ方式おいても同様の表示を行うためには、字幕毎に時々刻々深さを変化させる運用が望ましいあり方として想定されている。一方で、字幕毎に、時々刻々変化する視差情報を作成するのは、労力がかかり、制作コストを引き上げることになる。また、望ましい視差情報を作成して配信する設備にも新たな投資が必要となる。
【０００９】
今後、放送やＩＰＴＶ（Internet Protocol TeleVision）などで配信する目的で、様々な３Ｄ映像コンテンツを制作することが想定される。しかし、画像に比較して重要性が低いと考えられる字幕の見易さに対して、コンテンツ供給事業者は、必ずしも上述のような望ましい視差情報の供給を行うべきとは考えないかもしれない。
【００１０】
その場合、コンテンツ供給事業者はある３Ｄ映像コンテンツを配信するにあたって、字幕その他の特定の重畳情報の表示期間は、この重畳情報を固定の深さに表示することが考えられる。また、別の３Ｄ映像コンテンツでは、番組（コンテンツ）全体で固定の深さに表示することでよしとするかもしれない。
【００１１】
さらに、別の３Ｄ映像コンテンツに関しては、字幕その他の重畳情報のデータは２Ｄ映像コンテンツと同様に伝送するにしても、重畳情報の表示に関しては、３Ｄ映像としての考慮は一切したくないかもしれない。この場合には、視差情報の供給を行わない。当然、ある３Ｄ映像コンテンツについては、望ましい視差情報を必ず付与したいと考えることも想定される。
【００１２】
従来、３Ｄ映像コンテンツを考慮した放送、ＩＰＴＶなどにおいて、字幕その他の重畳情報に関する、上述のようなコンテンツ供給事業者の想定される様々な要望の範囲に応えられる解決策が考えられていない。
【００１３】
この発明の目的は、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることにある。
【課題を解決するための手段】
【００１４】
この発明の概念は、
左眼画像データおよび右眼画像データを有する所定番組の立体画像データを出力する画像データ出力部と、
上記画像データ出力部から出力される所定番組の立体画像データを含むトランスポートストリームを送信する画像データ送信部とを備え、
上記画像データ送信部は、上記トランスポートストリームに、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報を挿入する
立体画像データ送信装置にある。
【００１５】
この発明において、画像データ出力部により、左眼画像データおよび右眼画像データを含む所定番組の立体画像データが出力される。また、画像データ送信部により、画像データ出力部から出力される所定番組の立体画像データを含むトランスポートストリームが送信される。ここで、画像データ出力部により、トランスポートストリームに、左眼画像データおよび右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入される。
【００１６】
ここで、重畳情報は、字幕を表示するサブタイトル情報、クローズド・キャプション情報、ロゴ等のグラフィクスを表示するグラフィクス情報、電子番組表（ＥＰＧ：Electronic Program Guide）、文字放送内容等を表示するテキスト情報、テレビ受信機固有のＯＳＤ表示など、画像に重畳表示される情報を意味している。
【００１７】
この発明において、例えば、識別情報は、番組単位の視差情報の伝送があるか否かを識別する識別情報とされてもよい。識別情報が番組単位の視差情報の伝送があることを示す場合、画像データ送信部により、さらに、トランスポートストリームに、番組単位の視差情報が挿入される。
【００１８】
この場合、画像データ送信部により、識別情報および視差情報は、例えば、トランスポートストリームに、番組単位のメタデータとして挿入される。例えば、トランスポートストリームには、番組単位の管理を行うサービス・インフォメーションとしてのイベント・インフォメーション・テーブルが含まれており、識別情報および視差情報は、このイベント・インフォメーション・テーブルの配下に挿入される。
【００１９】
また、この発明において、例えば、識別情報は、汎用目的の視差情報の伝送があるか否かを識別する識別情報とされてもよい。識別情報が汎用目的の視差情報の伝送があることを示す場合、画像データ送信部により、さらに、トラスポートストリームに、汎用目的の視差情報を含む視差情報エレメンタリストリームが挿入されると共に、このトランスポートストリームに、識別情報と関連付けて視差情報エレメンタリストリームを識別するための識別情報が挿入される。
【００２０】
また、この発明において、例えば、識別情報は、特定の重畳情報用の視差情報の伝送であるか否かを識別する識別情報とされてもよい。識別情報が特定の重畳情報用の視差情報の伝送であることを示す場合、画像データ送信部により、さらに、トランスポートストリームに、特定の重畳情報が表示される所定数のフレーム期間で共通に使用される視差情報の伝送および所定数のフレーム期間で順次更新される視差情報の伝送のいずれであるか、または双方であるかを示す固定／変動情報が挿入される。ここで、例えば、画像データ送信部により、トランスポートストリームに、特定の重畳情報のデータを含む重畳情報エレメンタリストリームが挿入される。そして、固定／変動情報は、この重畳情報エレメンタリストリームに、重畳情報毎に、挿入される。
【００２１】
例えば、固定／変動情報が、所定数のフレーム期間で共通に使用される視差情報の伝送であることを示す場合、画像データ送信部により、重畳情報エレメンタリストリームに、重畳情報毎に、固定／変動情報に関連付けて所定数のフレーム期間で共通に使用される視差情報が挿入される。また、例えば、固定／変動情報が、特定の重畳情報が表示される所定数のフレーム期間で順次更新される視差情報の伝送であることを示す場合、トランスポートストリームに、重畳情報毎の視差情報列を識別情報により識別可能に含む重畳情報エレメンタリストリームが挿入されると共に、この重畳情報エレメンタリストリームに、重畳情報毎に、固定／変動情報に関連付けて、視差情報エレメンタリストリーム内の対応する視差情報列を指定する識別情報が挿入される。
【００２２】
このように、この発明においては、所定番組の立体画像データを含むトランスポートストリームに、視差情報の伝送があるか否かを識別する識別情報が挿入される。これにより、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることが可能となる。すなわち、視差情報として、番組単位の視差情報、汎用目的の視差情報、特定の重畳情報用の視差情報等を選択的に伝送することが可能となる。また、視差情報を送らない選択も可能となる。
【００２３】
また、この発明の他の概念は、
左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれると共に、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されているトランスポートストリームを受信する画像データ受信部と、
上記画像データ受信部で受信されたトランスポートストリームから上記立体画像データを取得する画像データ取得部と、
上記画像データ受信部で受信されたトランスポートストリームから上記識別情報を取得する識別情報取得部と、
上記画像データ取得部で取得された上記立体画像データと、上記識別情報取得部で取得された上記識別情報に基づいて、左眼画像および右眼画像に重畳する同一の重畳情報に所定の視差情報による視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部と
を備える立体画像データ受信装置にある。
【００２４】
この発明において、画像データ受信部により、トランスポートストリームが受信される。このトランスポートストリームには、左眼画像データおよび右眼画像データを含む所定番組の立体画像データが含まれる。また、このトランスポートストリームには、左眼画像データおよび右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されている。ここで、識別情報は、例えば、番組単位の視差情報の伝送があるか否かを識別する識別情報、汎用目的の視差情報の伝送があるか否かを識別する識別情報、特定の重畳情報用の視差情報の伝送があるか否かを識別する識別情報などである。
【００２５】
画像データ取得部により、画像データ受信部で受信されたトランスポートストリームから立体画像データが取得される。また、識別情報取得部により、画像データ受信部で受信されたトランスポートストリームから識別情報が取得される。そして、画像データ処理部により、立体画像データと識別情報に基づいて、重畳情報が重畳された左眼画像のデータおよび重畳情報が重畳された右眼画像のデータが得られる。この場合、左眼画像および右眼画像に重畳される同一の重畳情報には、所定の視差情報による視差が付与される。
【００２６】
ここで、例えば、識別情報が視差情報の伝送があることを示す場合、所定の視差情報として、トランスポートストリームから取得された視差情報が用いられる。また、例えば、識別情報が視差情報の伝送がないことを示す場合、所定の視差情報として、予め用意されている視差情報が用いられる。
【００２７】
このように、この発明においては、トランスポートストリームに挿入されている識別情報が取得される。そして、左眼画像および右眼画像に重畳される同一の重畳情報には、この識別情報に基づいて、所定の視差情報による視差が付与される。これにより、字幕、その他の重畳情報を、３Ｄ映像コンテンツ供給事業者の意図した深さで立体画像に重ねて表示することが可能となる。
【発明の効果】
【００２８】
この発明によれば、所定番組の立体画像データを含むトランスポートストリームに、視差情報の伝送があるか否かを識別する識別情報が挿入されるものである。そのため、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることが可能となる。また、字幕、その他の重畳情報を、３Ｄ映像コンテンツ供給事業者の意図した深さで立体画像に重ねて表示することが可能となる
【図面の簡単な説明】
【００２９】
【図１】この発明の実施の形態としての立体画像送受信システムの構成例を示すブロック図である。
【図２】放送局における送信データ生成部の構成例を示すブロック図である。
【図３】ビデオ、オーディオ、サブタイトル、視差情報のＰＥＳパケットおよびＥＩＴ，ＰＭＴなどのテーブルを含むトランスポートストリームの構成例を示す図である。
【図４】ビデオエレメンタリストリーム、サブタイトルエレメンタリストリーム、オーディオエレメンタリストリーム、視差情報エレメンタリストリームを含む一般的なトランスポートストリームＴＳの構成例を示す図である。
【図５】ステレオ映像記述子（Stereoscopic_descriptor）の構造（syntax）の一例を示す図である。
【図６】ステレオ映像記述子（Stereoscopic_descriptor）のデータ規定内容（semantics）を示す図である。
【図７】視差情報リンク記述子（Disparity_Link_descriptor）の構造（syntax）の一例を示す図である。
【図８】視差情報リンク記述子（Disparity_Link_descriptor）のデータ規定内容（semantics）を示す図である。
【図９】サブタイトルの２Ｄ表示と、３Ｄ表示の一例を示す図である。
【図１０】視差情報が表示期間（display set）を構成する所定数のフレーム期間で共通に使用される１個である場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示す図である。
【図１１】視差情報が表示期間（display set）を構成する所定数のフレーム期間で順次更新される複数個である場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示す図である。
【図１２】サブタイトルデータの構造を示す図である。
【図１３】サブタイトルストリーム（ＰＥＳ）、つまりＤＶＢ_Subtitlingの構造（Syntax）を示す図である。
【図１４】セグメント「segment_type」の各値とセグメントタイプとの対応関係を示す図である。
【図１５】３Ｄ・セグメント(3D segment)の構造例（syntax）を示す図である。
【図１６】３Ｄ・セグメント(3D segment)のデータ規定内容（semantics）を示す図である。
【図１７】視差情報ストリームの構造（Syntax）、すなわち視差情報（disparity_data）を含むPES_data_fieldの構造の一例を示す図である。
【図１８】「disparity_data_set」の構造（Syntax）を示す図である。
【図１９】「disparity_data_set」の主要なデータ規定内容（semantics）を示す図である。
【図２０】立体画像送受信システムを受信機の構成例を示すブロック図である。
【図２１】重畳情報がＯＳＤ表示である場合における、視差情報出力部の処理手順の一例を示フローチャートである。
【図２２】重畳情報がサブタイトルである場合における、視差情報出力部の処理手順の一例を示すフローチャートである。
【図２３】受信機の画像・表示データ重畳部の構成例を示す図である。
【図２４】リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスに基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２５】リージョン（Region）／表示期間（Display set）単位の固定視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２６】リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスに基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２７】リージョン（Region）／表示期間（Display set）単位の固定視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２８】番組単位の視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２９】受信機に予め用意されている視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図３０】両眼視差を利用した立体画像表示において、スクリーン上におけるオブジェクト（物体）の左右像の表示位置と、その立体画像（３Ｄ画像）の再生位置との関係を示す図である。
【図３１】字幕が画像の最も近い位置よりさらに手前に認識される場合における、画像と字幕の位置関係の一例を示す図である。
【発明を実施するための形態】
【００３０】
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例
【００３１】
＜１．実施の形態＞
［画像送受信システムの構成例］
図１は、実施の形態としての画像送受信システム１０の構成例を示している。この立体画像送受信システム１０は、放送局１００と受信機２００により構成されている。放送局１００は、トランスポートストリームを、放送波にのせて送信する。このトランスポートストリームには、左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれている。
【００３２】
また、このトランスポートストリームには、視差情報の伝送があるか否かを識別する識別情報が挿入されている。ここで、視差情報は、左眼画像データおよび右眼画像データによる画像に重畳する字幕その他の重畳情報をシフトさせて視差を付与するための情報であり、視差ベクトル、あるいは奥行きデータ等である。奥行きデータは、所定の変換により視差ベクトルとして扱うことが可能となる。
【００３３】
受信機２００は、放送局１００から放送波に載せて送られてくる、上述のトランスポートストリームを受信する。受信機２００は、このトランスポートストリームから、立体画像データを取得すると共に、上述の識別情報を取得する。そして、受信機２００は、立体画像データと識別情報に基づいて、字幕その他の重畳情報が重畳された左眼画像のデータおよび重畳情報が重畳された右眼画像のデータを得る。
【００３４】
［放送局の説明］
放送局１００について説明する。この放送局１００は、上述したように、立体画像データが含まれると共に、視差情報の伝送があるか否かを識別する識別情報が挿入されたトランスポートストリームを、放送波に載せて送信する。このトランスポートストリームには、この実施の形態において、立体画像データの他に、音声データ、サブタイトルデータ、視差情報などが含まれる。なお、視差情報は、上述の識別情報が、視差情報の伝送があることを示す場合のみ含まれる。
【００３５】
「送信データ生成部の構成例」
図２は、放送局１００において、上述したトランスポートストリームを生成する送信データ生成部１１０の構成例を示している。この送信データ生成部１１０は、データ取り出し部（アーカイブ部）１１１と、ビデオエンコーダ１１２と、視差情報エンコーダ１１３と、オーディオエンコーダ１１４を有している。また、この送信データ生成部１１０は、サブタイトル発生部１１５と、サブタイトルエンコーダ１１６と、マルチプレクサ１１７を有している。
【００３６】
データ取り出し部１１１には、データ記録媒体１１１ａが、例えば、着脱自在に装着される。このデータ記録媒体１１１ａには、トランスポートストリームで送信する所定番組の立体画像データと共に、この立体画像データに対応した音声データが記録されている。この立体画像データには、左眼画像データおよび右眼画像データが含まれている。
【００３７】
また、データ記録媒体１１１ａには、所定番組の立体画像データに関連付けて、視差情報（Disparity Data）が記録されていることがある。このように視差情報が記録されている場合には、この視差情報を、トランスポートストリームに挿入して、所定番組の立体画像データに関連付けて送信することが可能となる。
【００３８】
ここで、データ記録媒体１１１ａに記録されている視差情報は、例えば、番組単位の視差情報、汎用目的の視差情報、特定用途向け（特定の重畳情報用）の視差情報等である。特定用途向けの視差情報は、例えば、サブタイトル用、クローズド・キャプション用などが考えられるが、この実施の形態においては、サブタイトル用の視差情報である。番組単位の視差情報の場合、データ記録媒体１１１ａには、所定番組の立体画像データに対応付けて、１個の視差情報が記録される。
【００３９】
また、汎用目的の視差情報の場合、データ記録媒体１１１ａには、所定番組の立体画像データに対応付けて、例えば、画面を所定数に分割して得られる各分割領域に属する視差情報が記録される。この場合、各分割領域に属する視差情報は、例えば、所定番組内で１個である場合、あるいは所定フレーム数毎の複数個である場合などがある。
【００４０】
また、特定用途向けの視差情報の場合、データ記録媒体１１１ａには、所定番組の立体画像データに対応付けて、表示期間（Display set）単位で、各ページ（page）の各リージョン（region）の視差情報が記録される。この場合、各リージョンの視差情報は、表示期間を構成する所定数のフレーム期間で共通に使用される１個である場合、あるいは、所定数のフレーム期間で順次更新される複数個である場合などがある。
【００４１】
データ取り出し部１１１のデータ記録媒体１１１ａは、例えば、ディスク状記録媒体、半導体メモリなどである。データ取り出し部１１１は、データ記録媒体１１１ａから、所定番組の立体画像データを取り出すと共に、この立体画像データに関連付けて記録されている音声データ、さらには視差情報を取り出して出力する。
【００４２】
ビデオエンコーダ１１２は、データ取り出し部１１１から出力される画像データに対して、ＭＰＥＧ４−ＡＶＣ、ＭＰＥＧ２等の符号化を施して符号化ビデオデータを得る。また、このビデオエンコーダ１１２は、後段に備えるストリームフォーマッタ（図示せず）により、立体画像データを含むビデオエレメンタリストリームを生成する。
【００４３】
視差情報エンコーダ１１３は、データ取り出し部１１１から出力される視差情報を含む視差情報エレメンタリストリームを生成する。ここで、視差情報エンコーダ１１３は、視差情報が汎用目的の視差情報である場合に、視差情報エレメンタリストリームを生成する。また、視差情報エンコーダ１１３は、視差情報が特定用途向けの視差情報であって各リージョンの視差情報が所定数のフレーム期間で順次更新される複数個である場合に、視差情報エレメンタリストリームを生成する。
【００４４】
つまり、視差情報エンコーダ１１３は、視差情報が番組単位の視差情報である場合には、視差情報エレメンタリストリームを生成しない。この番組単位の視差情報は、詳細は後述するが、マルチプレクサ１１７において、ＥＩＴ（Event Information Table）の配下に挿入されるステレオ映像記述子（Stereoscopic_descriptor）に記述される。
【００４５】
また、視差情報エンコーダ１１３は、視差情報が特定用途向けの視差情報であって各リージョンの視差情報が所定数のフレーム期間で共通に使用される１個の場合には、視差情報エレメンタリストリームを生成しない。この各リージョンの視差情報は、詳細は後述するが、サブタイトルエンコーダ１１６で生成されるサブタイトルエレメンタリストリームに、各リージョンのサブタイトルデータに対応付けて挿入される。
【００４６】
オーディオエンコーダ１１４は、データ取り出し部１１１から出力される音声データに対して、ＭＰＥＧ−２Ａｕｄｉｏ ＡＡＣ等の符号化を施し、オーディオのエレメンタリストリームを生成する。サブタイトル発生部１１５は、画像に重畳するサブタイトルのデータ（サブタイトルデータ）を発生する。サブタイトルは、例えば、字幕である。サブタイトルエンコーダ１１６は、サブタイトル発生部１１５で発生されたサブタイトルデータを含むサブタイトルエレメンタリストリームを生成する。
【００４７】
マルチプレクサ１１７は、ビデオエンコーダ１１２、視差情報エンコーダ１１３、オーディオエンコーダ１１４およびサブタイトルエンコーダ１１６で生成された各エレメンタリストリームをパケット化して多重し、トランスポートストリームＴＳを生成する。図３は、トランスポートストリームＴＳの構成例を示している。トランスポートストリームＴＳには、各エレメンタリストリームをパケット化して得られたパケット（ＰＥＳパケット）が時分割的に含まれている。
【００４８】
また、このトランスポートストリームＴＳには、間欠的に、イベント単位の管理を行うＳＩ（Serviced Information）としてのＥＩＴ(EventInformation Table)が含まれている。また、このトランスポートストリームＴＳには、間欠的に、ＰＳＩ（Program Specific Information）として、ＰＭＴ（ProgramMap Table）が含まれている。このＰＳＩは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。
【００４９】
［識別情報の挿入］
マルチプレクサ１１７は、トランスポートストリームＴＳに、視差情報の伝送があるか否かを識別する識別情報を挿入する。この実施の形態においては、識別情報を挿入するため、ステレオ映像記述子（Stereoscopic_descriptor）および視差情報リンク記述子（Disparity_Link_descriptor）を、新たに定義する。ステレオ映像記述子には、番組単位の視差情報の伝送があるか否かを識別する識別情報が含まれる。マルチプレクサ１１７は、このステレオ映像記述子を、トランスポートストリームＴＳに、番組単位のメタデータとして挿入する。この実施の形態において、マルチプレクサ１１７は、このステレオ映像記述子を、上述のＥＩＴの配下に挿入する。
【００５０】
また、視差情報リンク記述子には、汎用目的の視差情報の伝送があるか否かを識別する識別情報が含まれる。また、この視差情報リンク記述子には、特定用途向けの視差情報の伝送があるか否かを識別する識別情報が含まれる。マルチプレクサ１１７は、この視差情報リンク記述子を、必要に応じて、トランスポートストリームＴＳに、挿入する。この実施の形態において、マルチプレクサ１１７は、この視差情報リンク記述子を、上述のＥＩＴの配下に挿入する。
【００５１】
図４は、ビデオエレメンタリストリーム、サブタイトルエレメンタリストリーム、オーディオエレメンタリストリーム、視差情報エレメンタリストリームを含む一般的なトランスポートストリームＴＳの構成例を示している。このトランスポートストリームＴＳには、上述したように、各エレメンタリストリームをパケット化して得られたＰＥＳパケットが含まれている。この構成例では、ビデオエレメンタリストリームのＰＥＳパケット「Video PES」が含まれている。
【００５２】
また、この構成例では、サブタイトルエレメンタリストリームのＰＥＳパケット「Subtitle PES」およびオーディオエレメンタリストリームのＰＥＳパケット「AudioPES」が含まれている。また、この構成例では、さらに、視差情報（Disparity Data）エレメンタリストリームのＰＥＳパケット「Disparity Data PES」が含まれている。
【００５３】
また、トランスポートストリームＴＳには、ＰＳＩ（Program Specific Information）として、ＰＭＴ（ProgramMap Table）が含まれている。このＰＳＩは、トランスポートストリームＴＳに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。また、トランスポートストリームＴＳには、イベント単位の管理を行うＳＩ（Serviced Information）としてのＥＩＴ(EventInformation Table)が含まれている。このＥＩＴには、番組単位のメタデータが記載される。
【００５４】
ＰＭＴには、プログラム全体に関連する情報を記述するプログラム・デスクリプタ（Program Descriptor）が存在する。また、このＰＭＴには、各エレメンタリストリームに関連した情報を持つエレメンタリ・ループが存在する。この構成例では、ビデオエレメンタリ・ループ、サブタイトルエレメンタリ・ループ、オーディオエレメンタリ・ループ、プライベートエレメンタリ・ループが存在する。各エレメンタリ・ループには、ストリーム毎に、パケット識別子（PID）等の情報が配置されると共に、図示していないが、そのエレメンタリストリームに関連する情報を記述する記述子（デスクリプタ）も配置される。
【００５５】
例えば、このエレメンタリストリームに関連する情報を記述する記述子として、ストリーム識別記述子（Stream_Identifier_Descriptor）がある。図４のトランスポートストリームＴＳの構成例では、サブタイトルエレメンタリ・ループにのみ図示しているが、他のエレメンタリ・ループに同様に配置されている。このストリーム識別記述子は、エリメンタリストリームの種類・位置付けを示すＩＤ（component_tag）である。各エレメンタリ・ループに、このストリーム識別記述子が配置されていることで、ＩＤ（component_tag）が与えられた場合に、それに対応するパケット識別子（PID）を取得することが可能となる。
【００５６】
この実施の形態においては、図４に示すように、ＥＩＴの配下に、ステレオ映像記述子（Stereoscopic_descriptor）が挿入される。また、このＥＩＴの配下に、必要に応じて、視差情報リンク記述子（Disparity_Link_descriptor）が配置される。
【００５７】
［ステレオ映像記述子の説明］
図５は、ステレオ映像記述子（Stereoscopic_descriptor）の構造（syntax）の一例を示している。図６は、ステレオ映像記述子のデータ規定内容（semantics）を示している。「descriptor_tag」は、デスクリプタタイプを示す８ビットのデータであり、ここでは、ステレオ映像記述子であることを示す。「descriptor_length」は、デスクリプタの長さ（サイズ）を示す８ビットのデータである。このデータは、デスクリプタの長さとして、「descriptor _length」以降のバイト数を示す。
【００５８】
「3D_format_type」は、３Ｄフォーマットのタイプを示す４ビットのデータである。例えば、“３”は、３Ｄフォーマットがサイド・バイ・サイド（Side By Side）方式であることを示す。また、例えば、“４”は、３Ｄフォーマットがトップ・アンド・ボトム（Top & Bottom）方式であることを示す。また、例えば、“７”は、フル・リゾルーション・ステレオ（Full resolution stereo）方式であることを示す。フル・リゾルーション・ステレオ方式は、左眼画像データおよび右眼画像データのうち、一方をベースビュー(base view)の画像データとして伝送し、他方をノンベースビュー(non-base view)の画像データとして伝送する方式である。
【００５９】
「2D_display_view」は、２Ｄディスプレイ・モードにおいて、表示すべきビュー（画像）を示す１ビットのデータである。例えば、“０”は、表示すべきビューが、左眼画像であることを示し、“１”は、表示すべきビューが、右眼画像であることを示す。なお、３Ｄフォーマットが上述のフル・リゾルーション・ステレオ方式である場合には、２Ｄディスプレイ・モードにおいて表示すべきビュー（画像）は、例えば、ベースビューとされる。
【００６０】
「Simulcast_condition」は、２ビットのデータである。このデータは、３Ｄフォーマットがサイド・バイ・サイド方式、トップ・アンド・ボトム方式などの場合に、これらの方式の立体（３Ｄ）画像データと共に、２Ｄ画像データを同時に伝送する状態にあるか否かを示す。また、このデータは、２Ｄ画像データを基本とし、３Ｄ画像データの送信形態を示す。３Ｄ画像表示に対応していない従来の２Ｄの受信機では、サイド・バイ・サイド方式、トップ・アンド・ボトム方式などで立体画像データが伝送されてくる場合、画面の左右、あるいは上下に、左眼画像および右眼画像が並んだ画像が表示されることを考慮したものである。
【００６１】
例えば、“０”は、２Ｄ画像データを同時に伝送する状態にないことを示す。また、例えば、“１”〜“３”は、２Ｄ画像データを同時に伝送する状態にあることを示す。そして、例えば、“１”は、２Ｄ画像データを基本とし、同じチャネルの中に、別のストリームとして、２Ｄ画像データに対する３Ｄ画像データを送ることを示す。この場合、詳細は図示しないが、例えば、コンポーネント・デスクリプタ（component descriptor）によりパケット識別子（PID）等の詳細情報の参照が可能とされる。
【００６２】
また、例えば、“２”は、２Ｄ画像データを基本とし、他のチャネルに、別番組（service）として、２Ｄ画像データに対する３Ｄ画像データを送ることを示す。この場合、詳細は図示しないが、例えば、リンケージ・デスクリプタ（linkage descriptor）により、他チャネル等の詳細情報の参照が可能とされる。また、例えば、“３”は、２Ｄ画像データを基本とし、放送ではなく、ネットワーク通信などの他の方式で、２Ｄ画像データに対する３Ｄ画像データを送ることを示す。この場合、詳細は図示しないが、例えば、他の新たなデスクリプタ（the another descriptor）により、ＵＲＬ等の詳細情報の参照が可能とされる。
【００６３】
「detailed_disparity_supply」は、視差情報リンク記述子（Disparity_Link_descriptor）に記述される詳細な視差情報（DisparityData）が供給されるか否を示す１ビットのデータである。例えば、“１”は、供給されることを示し、このとき、ＥＩＴの配下に、ステレオ映像記述子（Stereoscopic_descriptor）と共に視差情報リンク記述子が挿入される。また、例えば、“０”は、供給されないことを示す。このデータは、汎用目的の視差情報あるいは特定用途向けの視差情報の伝送があるか否かを識別する識別情報を構成する。
【００６４】
「event_disparity_supply」は、この番組（event）のための１個の固定の視差情報（Disparity Data）が供給されるか否かを示す１ビットのデータである。例えば、“１”は、供給されることを示す。また、例えば、“０”は、供給されないことを示す。このデータは、番組単位の視差情報の伝送があるか否かを識別する識別情報を構成する。
【００６５】
「Select_view_shift」は、「event_disparity_supply=1」の場合にのみ有効となり、シフト対象指定情報を構成する２ビットのデータである。このデータは、左眼画像に重畳する重畳情報（サブタイトル、ＯＳＤ表示など）および右眼画像に重畳する重畳情報のうち、視差情報（Disparity Data）に基づいてシフトさせる重畳情報を指定する。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。
【００６６】
「Disparity_value」は、「event_disparity_supply=1」の場合にのみ有効となり、視差情報の値を示す８ビットのデータであり、−１２８〜＋１２７の範囲の値をとる。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。
【００６７】
［視差情報リンク記述子の説明］
図７は、視差情報リンク記述子（Disparity_Link_descriptor）の構造（syntax）の一例を示している。図８は、視差情報リンク記述子のデータ規定内容（semantics）を示している。なお、「descriptor_tag」、「descriptor_length」に関しては、図６に示すデータ規定例（semantics）で示すものと同様であり、図８においては、省略している。「descriptor_tag」は、デスクリプタタイプを示す８ビットのデータであり、ここでは、視差情報リンク記述子であることを示す。「descriptor_length」は、デスクリプタの長さ（サイズ）を示す８ビットのデータである。このデータは、デスクリプタの長さとして、「descriptor _length」以降のバイト数を示す。
【００６８】
「disparity_component」は、視差情報が含まれる視差情報ストリームを示すコンポーネント・タグ（component_tag）の値を示す。上述したように、このコンポーネント・タグの値に基づいて、視差情報ストリームのパケット識別子（PID）を取得することが可能となる。
【００６９】
「Subtitle_disparity_flg」は、サブタイトル向けの視差情報が設定されているか否かを示す１ビットのフラグデータである。このフラグデータは、上述のステレオ映像記述子の「Detaild_disparity_supply」のデータと共に、特定用途向けの視差情報の伝送があるか否かを識別する識別情報を構成する。例えば、“１”は、サブタイトル向けの視差情報が設定されていることを示し、“０”は、サブタイトル向けの視差情報の設定がないことを示す。
【００７０】
「general_use_disparity_flg」は、汎用目的の視差情報が存在するか否かを示す１ビットのフラグデータである。このフラグデータは、上述のステレオ映像記述子の「Detaild_disparity_supply」のデータと共に、汎用目的の視差情報の伝送があるか否かを識別する識別情報を構成する。例えば、“１”は、汎用目的の視差情報が存在することを示し、“０”は、汎用目的の視差情報が存在しないことを示す。
【００７１】
「reserved_for_future_use」は、予約領域を示す。今後、視差情報の使用対象となる放送データ（例えば、データ放送など）が出現した場合に、その用途向けの視差情報が設定されているか否かを示すフラグデータの領域として利用することを想定している。
【００７２】
［サブタイトルストリームの説明］
図９は、サブタイトルの２Ｄ表示と、３Ｄ表示の一例を示している。図９（ａ）は、サブタイトルの２Ｄ重畳例を示している。この表示例において、「Region 1」のリージョンには、丸数字の「７」を示すサブタイトルが重畳され、「Region2」のリージョンには、「Shall we ?」の文字を示すサブタイトルが重畳されている。この場合、各サブタイトルは、画面（スクリーン）上に認識される。
【００７３】
図９（ｂ）は、サブタイトルの３Ｄ重畳例を示している。この表示例においても、「Region 1」のリージョンには、丸数字の「７」を示すサブタイトルが重畳され、「Region2」のリージョンには、「Shall we ?」の文字を示すサブタイトルが重畳されている。この場合、各サブタイトルは、視差情報を用いて、画像の最も近い位置よりさらに手前に認識可能にされる。
【００７４】
上述の視差情報リンク記述子における「Subtitle_disparity_flg」の１ビットのフラグデータが例えば“１”で、サブタイトル向けの視差情報が設定される場合を説明する。この場合、視差情報としては、上述したように、表示期間（Display set）単位で、各ページ（page）の各リージョン（region）の視差情報が設定される。この場合、各リージョンの視差情報は、表示期間を構成する所定数のフレーム期間で共通に使用される１個である場合、あるいは、所定数のフレーム期間で順次更新される複数個である場合などがある。
【００７５】
上述したように、視差情報が表示期間（display set）を構成する所定数のフレーム期間で共通に使用される１個である場合、サブタイトルの深さ（奥行き）は、その表示期間の間は一定となる。図１０は、その場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示している。
【００７６】
また、上述したように、視差情報が表示期間を構成する所定数のフレーム期間で順次更新される複数個である場合、サブタイトルの深さ（奥行き）は、その表示期間の間、立体画像内のオブジェクトの位置変動に応じて変化させることができる。図１１は、その場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示している。
【００７７】
図１２は、サブタイトルデータの構造を示している。サブタイトルデータは、ＰＥＳヘッダ（PES header）と、このＰＥＳヘッダに続く各表示期間（display set）のデータとから構成されている。そして、各表示期間（display set）のデータは、「ＤＤＳ」、「ＰＣＳ」、「ＣＤＳ」、「ＲＣＳ」、「ＯＤＳ」、「ＥＤＳ」のセグメントの他に、新たに定義する「３ＤＳ」により構成されている。
【００７８】
「ＤＤＳ」は、ディスプレイ・デフィニション・セグメント（Display Definition Segment）であり、サブタイトル（字幕）の表示領域を規定する。「ＰＣＳ」ページ・コンポジション・セグメント（Page Composition Segment）であり、ページ（Page）全体の状態と、ページ（Page）を構成する各リージョン（region）と、その位置情報を示す。「ＲＣＳ」は、リージョン・コンポジション・セグメント（Region Composition Segment）であり、リージョン（Region）に配置される各オブジェクト（object）と、その位置情報を示す。
【００７９】
「ＣＤＳ」は、ＣＬＵＴ・デフィニション・セグメント（CLUT Definition Segment）であり、「ＲＣＳ」で指定される各ＣＬＵＴ(ColorLook-up Table)のデータである。「ＯＤＳ」は、オブジェクト・データ・セグメント（ObjectData Segment）であり、各オブジェクト（Object）のデータである。この「ＯＤＳ」には、オブジェクト（Object）のタイプによりビットマップデータかテキストデータが記述される。「ＥＤＳ」は、エンド・オブ・ディスプレイ・セグメント（End or Display set Segment）であり、表示期間（Displayset）の伝送の終わりを示す。
【００８０】
「３ＤＳ」は、３Ｄ・セグメント（3D Segment）であり、サブタイトル向けの視差情報に関する種々の情報を持つ。視差情報として、表示期間（display set）を構成する所定数のフレーム期間で共通に使用される１個の視差情報が存在する場合、「３ＤＳ」には、その視差情報（Disparity Data）が含まれる。また、視差情報として、表示期間（displayset）を構成する所定数のフレーム期間で順次更新される複数個の視差情報（視差情報列）が設定されている場合、「３ＤＳ」には、視差情報ストリーム内のその視差情報列を識別する識別情報が含まれる。この「３ＤＳ」の詳細な構造例については、後述する。
【００８１】
図１３は、サブタイトルストリーム（ＰＥＳ）、つまりＤＶＢ_Subtitlingの構造（Syntax）を示している。この構造は、ＥＴＳＩ（European Telecommunications Standards Institute）で規格化されている（ETSI EN 300 743）。この図１３の構造は、ＰＥＳレイヤから見たものである。「PES_data_field」には、「data_identifier」で示される、サブタイトルデータであることを示す８ビット情報が含まれている。また、この「PES_data_field」には、「Subtitle_stream_id」で示される、サブタイトルストリームを識別するための８ビット情報が含まれている。
【００８２】
また、この「PES_data_field」には、「Subtitling_segment」が含まれている。そして、この「Subtitling_segment」は、「Sync_byte」、「segment_type」、「page_id」、「segment_length」、「segment_data_field」の各情報を含んでいる。「page_id」は、各ページを識別するための識別情報である。
【００８３】
「segment_type」は８ビットの情報であり、セグメントのタイプ（種類）を示す。図１４は、「segment_type」の各値とセグメントタイプとの対応関係を示している。例えば、「0x10」は、ＰＣＳ（page composition segment）を示す。また、[0x11]は、ＲＣＳ（Region Composition Segment）を示す。
【００８４】
また、例えば、「0x40」は、従来リザーブとされているが、ここでは、３ＤＳ(3D segment)を示すものとして、新たに定義される。従来の３Ｄ対応でないサブタイトルデコーダは、「0x40」はリザーブなので、このセグメントは読み飛ばすことになる。これに対して、３Ｄ対応のデコーダは、「0x40」は「３ＤＳ」と認識するので、このセグメントからサブタイトル向けの視差情報に関する種々の情報を読み取ることが可能となる。
【００８５】
［３Ｄセグメントの説明］
図１５は、３ＤＳ(3D segment)の構造例（syntax）を示している。図１６は、３ＤＳのデータ規定内容（semantics）を示している。「3D_segment」は、「Sync_byte」、「segment_type」、「page_id」、「segment_length」の各情報を含んでいる。「page_id」は、各ページを識別するための識別情報である。「segment_type」は、セグメントタイプを示す８ビットのデータであり、ここでは、「３ＤＳ」を示す「0x40」とされている。「segment_length」は、セグメントの長さ（サイズ）を示す８ビットのデータである。このデータは、セグメントの長さとして、「segment _length」以降のバイト数を示す。
【００８６】
また、「3D_segment」は、「disparity_static_supply」、「disparity_sequence_supply」の各情報を含んでいる。「disparity_static_supply」は、リージョン（Region）／表示期間（Display set）単位に、固定の視差情報（Disparity Data）の値を供給するか否かを示す１ビットのデータである。例えば、“１”は、供給することを示し、“０”は、供給しないことを示す。すなわち、「disparity_static_supply=1」は、リージョン毎に、表示期間（displayset）を構成する所定数のフレーム期間で共通に使用される１個の視差情報が存在することを示す。
【００８７】
また、「disparity_sequence_supply」は、１ビットのデータである。このデータは、リージョン（Region）／表示期間（Display set）単位に、視差情報（Disparity Data）の値の時間変動を示す視差情報シーケンス（Disparitysequence）を供給するか否かを示す。例えば、“１”は、供給することを示し、“０”は、供給しないことを示す。すなわち、「disparity_sequence_supply =1」は、リージョン毎に、表示期間（displayset）を構成する所定数のフレーム期間で順次更新される複数個の視差情報シーケンス（視差情報列）が設定されていることを示す。
【００８８】
また、「3D_segment」は、「select_view_shift」、「number_of_regions」の各情報を含んでいる。「select_view_shift」は、シフト対象指定情報を構成する２ビットのデータである。このデータは、左眼画像および右眼画像に重畳するサブタイトルのうち、視差情報（Disparity Data）に基づいてシフトさせるサブタイトルを指定する。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。「number_of_regions」は、リージョン（Region）の数を示す。
【００８９】
また、「3D_segment」は、リージョン数だけ、「disparity_value」、「disparity_sequence_id」のいずれか、あるいは双方のデータを含んでいる。「disparity_value」は、「disparity_static_supply」が例えば“１”で、固定の視差情報（Disparity Data）の値を供給する場合に含まれる。この「disparity_value」は、上述したリージョン（Region）／表示期間（Display set）単位のそれぞれの視差情報の値を示す８ビットのデータである。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。
【００９０】
また、「disparity_sequence_id」は、「disparity_sequence_supply」が例えば“１”で、視差情報シーケンス（Disparity sequence）を供給する場合に含まれる。この「disparity_sequence_id」は、上述したリージョン（Region）／表示期間（Display set）単位のそれぞれの視差情報の値の時間変動を示す、視差情報ストリーム上の特定の視差情報シーケンスを指定する識別子である。
【００９１】
［視差情報ストリームの説明］
次に、視差情報（Disparity data）を視差情報ストリームに埋め込む場合について説明する。図１７は、視差情報ストリームの構造（Syntax）、すなわち視差情報（disparity_data）を含むPES_data_fieldの構造の一例を示している。この構造には、「data_identifier」、「disparity_stream_id」、「disparity_data_set」、「end_of_PES_data_field_marker」などの情報が含まれている。
【００９２】
図１８は、「disparity_data_set」の構造（Syntax）を示している。図１９は、「disparity_data_set」の主要なデータ規定内容（semantics）を示している。この構造には、「sync_byte」、「disparity_sequence_id」、「select_view_shift」、「fram_count」、「disparity_value」などの情報が含まれている。「disparity_sequence_id」は、視差情報シーケンス（Disparity sequence）の識別子を示す。
【００９３】
「select_view_shift」は、シフト対象指定情報を構成する２ビットの情報である。この「select_view_shift」は、左眼画像に重畳するサービス・コンポーネントおよび右眼画像に重畳するサービス・コンポーネントのうち、視差情報に基づいてシフトさせるサービス・コンポーネントを指定する。例えば、「select_view_shift=00」はリザーブとされる。サービス・コンポーネントは、サブタイトル情報、クローズド・キャプション情報などである。
【００９４】
また、例えば、「select_view_shift=‘01’」であるとき、左眼画像に重畳するサービス・コンポーネント（サブタイトルなど）のみを、視差情報（disparity）分だけ、水平方向にシフトさせることを示す。ここで、視差情報（disparity）が正の値であるときは、左眼画像に重畳するサービス・コンポーネントは、右方向にシフトされる。一方、視差情報（disparity）が負の値であるときは、左眼画像に重畳するサービス・コンポーネントは、左方向にシフトされる。
【００９５】
また、例えば、「select_view_shift=‘10’」であるとき、右眼画像に重畳するサービス・コンポーネントのみを、視差情報（disparity）分だけ、水平方向にシフトさせることを示す。ここで、視差情報（disparity）が正の値であるときは、右眼画像に重畳するサービス・コンポーネントは、右方向にシフトされる。一方、視差情報（disparity）が負の値であるときは、右眼画像に重畳するサービス・コンポーネントは、左方向にシフトされる。
【００９６】
また、例えば、「select_view_shift=11」であるとき、左眼画像に重畳するサービス・コンポーネントおよび右眼画像に重畳するサービス・コンポーネントの双方を、水平方向の互いに逆の方向にシフトさせることを示す。ここで、左眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity ）が偶数値である場合、正のときは「disparity／２」分だけ右方向にシフトされ、負のときは「disparity／２」分だけ左方向にシフトされる。また、右眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity）が偶数値である場合、正のときは「disparity／２」分だけ左方向にシフトされ、負のときは「disparity／２」分だけ右方向にシフトされる。
【００９７】
また、左眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity）が奇数値である場合、正のときは「（disparity＋１）／２」分だけ右方向にシフトされ、負のときは「（disparity＋１）／２」分だけ左方向にシフトされる。また、右眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity）が奇数値である場合、正のときは「（disparity−１）／２」分だけ左方向にシフトされ、負のときは「（disparity−１）／２」分だけ右方向にシフトされる。
【００９８】
「frame_count」は、表示期間（Display set）に含まれるフレームの数を示す。「disparity_value」は、視差情報の値を示す８ビットのデータであり、−１２８〜＋１２７の範囲の値をとる。このデータの値が正の値であるとき、３Ｄの深さ（奥行き）は、スクリーンより遠くになる。一方、このデータの値が負の値であるとき、３Ｄの深さ（奥行き）は、スクリーンより近くになる。
【００９９】
「disparity_sequence_id」で特定される「disparity_data_set」には、「frame_count」で示されるフレームの数だけ、「disparity_value」が含まれる。つまり、「disparity_sequence_id」で示される視差情報シーケンス（Disparity sequence）は、「fram_count」で示されるフレームの数の「disparity_value」からなる視差情報列となる。
【０１００】
［送信データ生成部の動作］
図２に示す送信データ生成部１１０の動作を簡単に説明する。データ取り出し部１１１から出力される所定番組の立体（３Ｄ）画像データは、ビデオエンコーダ１１２に供給される。このビデオエンコーダ１１２では、その画像データに対して、ＭＰＥＧ４−ＡＶＣ、ＭＰＥＧ２等の符号化が施され、符号化ビデオデータを含むビデオのエレメンタリストリームが生成される。このビデオのエレメンタリストリームは、マルチプレクサ１１７に供給される。
【０１０１】
また、データ取り出し部１１１から上述したように所定番組の立体画像データが出力される場合、データ記録媒体にその立体画像データに対応した視差情報が記録されているとき、データ取り出し部１１１からはその視差情報も出力される。この視差情報は、上述したように、番組単位の視差情報、汎用目的の視差情報、特定用途向け（この実施の形態においてはサブタイトル向け）等の視差情報である。
【０１０２】
また、特定用途向けの視差情報には、所定番組の立体画像データに対応付けて、表示期間（Display set）単位で、各ページ（page）の各リージョン（region）の視差情報が存在する。そして、各リージョンの視差情報は、表示期間を構成する所定数のフレーム期間で共通に使用される１個である場合、あるいは、所定数のフレーム期間で順次更新される複数個である場合がある。これらの各視差情報は、単独で存在する場合の他、重複して存在することもある。
【０１０３】
データ取り出し部１１１から出力される視差情報が番組単位の視差情報である場合、この視差情報は、マルチプレクサ１１７に供給される。また、データ取り出し部１１１から出力される視差情報が汎用目的の視差情報である場合、その視差情報は視差情報エンコーダ１１３に供給される。
【０１０４】
また、データ取り出し部１１１から出力される視差情報が特定用途向けの視差情報であって、各リージョンの視差情報が所定数のフレーム期間で共通に使用される１個の場合、この視差情報は、サブタイトルエンコーダ１１６に供給される。さらに、データ取り出し部１１１から出力される視差情報が特定用途向けの視差情報であって、所定数のフレーム期間で順次更新される複数個である場合、その視差情報は視差情報エンコーダ１１３に供給される。
【０１０５】
視差情報エンコーダ１１３では、視差情報に対して所定の符号化が施され、符号化データを含む視差情報エレメンタリストリーム（図１７〜図１９参照）が生成される。この視差情報エレメンタリストリームはマルチプレクサ１１７に供給される。なお、汎用目的の視差情報と、特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個）とが併存する場合、これらの視差情報は、例えば「disparity_sequence_id」で区別可能に含まれる。
【０１０６】
また、データ取り出し部１１１から上述したように所定番組の立体画像データが出力される場合、このデータ取り出し部１１１からその画像データに対応した音声データも出力される。この音声データは、オーディオエンコーダ１１４に供給される。このオーディオエンコーダ１１４では、音声データに対して、ＭＰＥＧ−２Ａｕｄｉｏ ＡＡＣ等の符号化が施され、符号化オーディオデータを含むオーディオエレメンタリストリームが生成される。このオーディオエレメンタリストリームはマルチプレクサ１１７に供給される。
【０１０７】
また、データ取り出し部１１１から出力される画像データに対応してサブタイトル発生部１１５では、画像（ビュー）に重畳するサブタイトルのデータ（サブタイトルデータ）が発生される。このサブタイトルデータは、サブタイトルエンコーダ１１６に供給される。サブタイトルエンコーダ１１６では、このサブタイトルデータに対して所定の符号化が施され、符号化データを含むサブタイトルエレメンタリストリームが生成される。このサブタイトルエレメンタリストリームはマルチプレクサ１１７に供給される。
【０１０８】
ここで、サブタイトルデータには、各表示期間（Display set）のデータとして、サブタイトル向けの視差情報に関する種々の情報を持つ３Ｄ・セグメント（３ＤＳ）（図１５、図１６参照）が含まれている。サブタイトルエンコーダ１１６では、データ取り出し部１１１からサブタイトル向けの視差情報（所定数のフレーム期間で共通に使用される各リージョンの１個の視差情報）が、３Ｄ・セグメントに「disparity_value」の情報として挿入される。その場合、「disparity_static_supply」のデータは、例えば“１”とされ、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の供給が示される。
【０１０９】
また、上述したように、データ取り出し部１１１から特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個である場合）が出力される場合、「disparity_sequence_supply」のデータは、例えば“１”とされる。これにより、リージョン（Region）／表示期間（Display set）単位に、視差情報（Disparity Data）の値の時間変動を示す視差情報シーケンス（Disparitysequence）の供給が示される。そして、「disparity_sequence_id」は、リージョン（Region）／表示期間（Display set）単位のそれぞれの視差情報の値の時間変動を示す、視差情報ストリーム上の特定の視差情報シーケンスを指定する識別子とされる。
【０１１０】
マルチプレクサ１１７では、各エンコーダから供給されるエレメンタリストリームがパケット化されて多重され、トランスポートストリームＴＳが生成される。この場合、トランスポートストリームＴＳには、ステレオ映像記述子（Stereoscopic_descriptor）（図５、図６参照）が挿入される。また、この場合、トランスポートストリームＴＳには、さらに必要に応じて、視差情報リンク記述子（Disparity_Link_descriptor）（図７、図８参照）が挿入される。これらの記述子は、ＥＩＴの配下に挿入される（図４参照）。
【０１１１】
データ取り出し部１１１から番組単位の視差情報が出力される場合、ステレオ映像記述子の「event_disparity_supply」の情報は、例えば“１”とされる。これにより、番組単位の視差情報の供給が示される。そして、その場合、この番組単位の視差情報が、ステレオ映像記述子に、「disparity_value」の情報として挿入される。また、データ取り出し部１１１から汎用目的の視差情報およびサブタイトル向けの視差情報の少なくともいずれかが出力される場合、ステレオ映像記述子の「detailed_disparity_supply」の情報は、例えば“１”とされる。この場合、トランスポートストリームＴＳには、視差情報リンク記述子（Disparity_Link_descriptor）が挿入される。
【０１１２】
また、データ取り出し部１１１から汎用目的の視差情報が出力される場合、視差情報リンク記述子の「general_use_disparity_flg」のフラグデータは、例えば“１”とされる。これにより、汎用目的の視差情報の供給が示される。また、データ取り出し部１１１からサブタイトル向けの視差情報が出力される場合、視差情報リンク記述子の「subtitle_disparity_flg」のフラグデータは、例えば“１”とされる。これにより、サブタイトル向けの視差情報の供給が示される。
【０１１３】
「受信機の構成例」
図２０は、受信機２００の構成例を示している。この受信機２００は、アンテナ端子２０１と、デジタルチューナ２０２と、デマルチプレクサ２０３と、ビデオデコーダ２０４と、３Ｄ信号処理部２０５を有している。また、受信機２００は、サブタイトルデコーダ２０６と、サブタイトル発生部２０７と、視差情報デコーダ２０８と、メタデータ処理部２０９と、視差情報出力部２１０と、ＯＳＤ表示データ生成部２１１を有している。また、受信機２００は、画像・表示データ重畳部２１２と、ディスプレイ２１３と、オーディオデコーダ２１４と、音声処理回路２１５と、音声増幅回路２１６と、スピーカ２１７を有している。
【０１１４】
アンテナ端子２０１は、受信アンテナ（図示せず）で受信されたテレビ放送信号を入力する端子である。デジタルチューナ２０２は、アンテナ端子２０１に入力されたテレビ放送信号を処理して、ユーザの選択チャネルに対応した所定のトランスポートストリーム（ビットストリームデータ）ＴＳ（図３参照）を出力する。デマルチプレクサ２０３は、デジタルチューナ２０２から出力されるトランスポートストリームＴＳから、ビデオ、オーディオ、サブタイトル、視差情報の各エレメンタリストリームを抽出する。また、デマルチプレクサ２０３は、このトランスポートストリームＴＳから、ＥＩＴ、ＰＭＴなどのテーブルも抽出する。
【０１１５】
ビデオデコーダ２０４は、上述の送信データ生成部１１０のビデオエンコーダ１１２とは逆の処理を行う。すなわち、このビデオデコーダ２０４は、デマルチプレクサ２０３で抽出されたビデオエレメンタリストリームに含まれる符号化画像データに対して復号化処理を行って、復号化された立体画像データを得る。３Ｄ信号処理部２０５は、ビデオデコーダ２０４で得られた立体画像データに対して、３Ｄフォーマットに対応した処理を行って左眼画像データＳＬおよび右眼画像データＳＲを生成する。
【０１１６】
サブタイトルデコーダ２０６は、上述の送信データ生成部１１０のサブタイトルエンコーダ１１６とは逆の処理を行う。すなわち、サブタイトルデコーダ２０６は、デマルチプレクサ２０３で抽出されたサブタイトルエレメンタリストリームに含まれる符号化サブタイトルデータに対して復号化処理を行って、復号化されたサブタイトルデータを得る。
【０１１７】
サブタイトルデコーダ２０６は、３Ｄ・セグメント（３ＤＳ）に含まれるサブタイトル向けの視差情報に関する種々の情報を取得する。例えば、サブタイトルデコーダ２０６は、３Ｄ・セグメントから、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の供給があるか否かを示す「disparity_static_supply」の情報を取得する。また、例えば、サブタイトルデコーダ２０６は、３Ｄ・セグメントから、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスの供給があるか否かを示す「disparity_sequence_supply」の情報を取得する。
【０１１８】
また、サブタイトルデコーダ２０６は、特定用途向けの視差情報（所定数のフレーム期間で共通に使用される各リージョンの１個の視差情報）の伝送がある場合、その視差情報が３Ｄ・セグメントに含まれていることから、その視差情報も取得する。サブタイトル発生部２０７は、サブタイトルデコーダ２０６で得られたサブタイトルデータに基づいて、画像に重畳するサブタイトルの表示データを発生する。
【０１１９】
視差情報デコーダ２０８は、上述の送信データ生成部１１０の視差情報エンコーダ１１３とは逆の処理を行う。すなわち、この視差情報デコーダ２０８は、デマルチプレクサ２０３で抽出された視差情報エレメンタリストリームに含まれる符号化された視差情報に対して復号化処理を行って、復号化された視差情報を得る。ここで、視差情報デコーダ２０８は、汎用目的の視差情報および特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個の視差情報）のいずれか、あるいは双方の伝送がある場合のみ、それらの視差情報を得る。
【０１２０】
メタデータ処理部２０９は、デマルチプレクサ２０３から出力されるＥＩＴの配下に挿入されているステレオ映像記述子（図５、図６参照）、視差情報リンク記述子（図７、図８参照）を処理して、視差情報に関する種々の情報を得る。例えば、メタデータ処理部２０９は、ステレオ映像記述子から、番組単位の視差情報の伝送があるか否かを識別するための「event_disparity_supply」の情報を取得する。また、例えば、メタデータ処理部２０９は、ステレオ映像記述子から、詳細な視差情報の伝送があるか否かを識別するための「detailed_disparity_supply」の情報を取得する。ここで、メタデータ処理部２０９は、番組単位の識別情報の伝送がある場合、その視差情報がステレオ映像記述子に含まれていることから、その視差情報も取得する。
【０１２１】
また、例えば、メタデータ処理部２０９は、視差情報リンク記述子から、汎用目的の視差情報の伝送があるか否かを識別する「general_use_disparity_flg」の情報を取得する。また、例えば、メタデータ処理部２０９は、視差情報リンク記述子から、サブタイトル向けの視差情報の伝送があるか否かを識別する「subtitle_disparity_flg」の情報を取得する。また、例えば、メタデータ処理部２０９は、視差情報リンク記述子から、「disparity_component」の情報を取得する。この情報は、視差情報が含まれる視差情報ストリームを示すコンポーネント・タグ（component_tag）の値を示し、このコンポーネント・タグの値に基づいて視差情報ストリームのパケット識別子（PID）を取得できる。
【０１２２】
視差情報出力部２１０は、視差情報デコーダ２０８からの視差情報、サブタイトルデコーダ２０６からの視差情報に関する種々の情報、およびメタデータ処理部２０９からの視差情報に関する種々の情報に基づいて、使用すべき視差情報を決定して出力する。
【０１２３】
図２１のフローチャートは、重畳情報がＯＳＤ表示である場合における、視差情報出力部２１０の処理手順の一例を示している。視差情報出力部２１０は、ステップＳＴ１において、処理を開始し、その後に、ステップＳＴ２の処理に移る。このステップＳＴ２において、視差情報出力部２１０は、ステレオ映像記述子の「detailed_disparity_supply」の情報を参照し、詳細な視差情報の伝送があるか否かを判断する。
【０１２４】
「detailed_disparity_supply=1」であって、詳細な視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ３の処理に移る。このステップＳＴ３において、視差情報出力部２１０は、視差情報リンク記述子の「general_use_disparity_flg」の情報を参照して、汎用目的の視差情報の伝送があるか否かを判断する。「general_use_disparity_flg=1」であって、汎用目的の視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ４の処理に移る。このステップＳＴ４において、視差情報出力部２１０は、視差情報デコーダ２０８で視差情報ストリームから取得される汎用目的の視差情報を、使用すべき視差情報に決定して出力する。
【０１２５】
ステップＳＴ２で「detailed_disparity_supply=0」であって、詳細な視差情報の伝送がないと識別されるとき、視差情報出力部２１０は、ステップＳＴ５の処理に移る。また、同様に、ステップＳＴ３で「general_use_disparity_flg=0」であって、汎用目的の視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ５の処理に移る。このステップＳＴ５において、視差情報出力部２１０は、ステレオ映像記述子の「event_disparity_supply」の情報を参照して、番組単位の視差情報の伝送があるか否かを判断する。
【０１２６】
「event_disparity_supply=1」であって、番組単位の視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ６の処理に移る。このステップＳＴ６において、視差情報出力部２１０は、メタデータ処理部２０９でステレオ映像記述子から取得される番組単位の視差情報（Disparity_value）を、使用すべき視差情報に決定して出力する。また、「event_disparity_supply=0」であって、番組単位の視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ７の処理に移る。このステップＳＴ７において、視差情報出力部２１０は、受信機２００に予め用意されている視差情報を、使用すべき視差情報に決定して出力する。
【０１２７】
図２２のフローチャートは、重畳情報がサブタイトルである場合における、視差情報出力部２１０の処理手順の一例を示している。視差情報出力部２１０は、ステップＳＴ１１において、処理を開始し、その後に、ステップＳＴ１２の処理に移る。次に、視差情報出力部２１０は、ステップＳＴ１２において、ステレオ映像記述子の「detailed_disparity_supply」の情報を参照し、詳細な視差情報の伝送があるか否かを判断する。
【０１２８】
「detailed_disparity_supply=1」であって、詳細な視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ１３の処理に移る。このステップＳＴ１３において、視差情報出力部２１０は、視差情報リンク記述子の「subtitle_disparity_flg」の情報を参照して、サブタイトル向けの視差情報の伝送があるか否かを判断する。「subtitle_disparity_flg=1」であって、サブタイトル向けの視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ1４の判断処理に移る。
【０１２９】
このステップＳＴ1４において、視差情報出力部２１０は、３Ｄ・セグメント（３ＤＳ）から取得された「disparity_static_supply」、「disparity_sequence_supply」の情報を参照して判断処理を行う。視差情報出力部２１０は、「disparity_sequence_supply=1」であって、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスの供給があると判断するとき、ステップＳＴ１５の処理に移る。このステップＳＴ１５において、視差情報出力部２１０は、視差情報デコーダ２０８で視差情報ストリームから取得されるリージョン（Region）／表示期間（Display set）単位の視差情報シーケンスを、使用すべき視差情報に決定して出力する。
【０１３０】
また、視差情報出力部２１０は、「disparity_static_supply=1」、「disparity_sequence_supply=0」であるとき、リージョン（Region）／表示期間（Display set）単位の固定視差情報の供給のみがあると判断する。そして、視差情報出力部２１０は、このとき、ステップＳＴ１６の処理に移る。このステップＳＴ１６において、視差情報出力部２１０は、サブタイトルデコーダ２０６で取得されるリージョン（Region）／表示期間（Display set）単位の固定視差情報を、使用すべき視差情報に決定して出力する。
【０１３１】
ステップＳＴ１２で「detailed_disparity_supply=0」であって、詳細な視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ１７の処理に移る。また、同様に、ステップＳＴ１３で「subtitle_disparity_flg=0」であって、サブタイトル向けの視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ１７の処理に移る。さらに、視差情報出力部２１０は、ステップＳＴ１４で「disparity_static_supply=0」、「disparity_sequence_supply=0」であるとき、ステップＳＴ１７の処理に移る。この場合、視差情報出力部２１０は、リージョン（Region）／表示期間（Display set）単位の、固定視差情報および視差情報シーケンスのいずれの伝送もないと判断する。
【０１３２】
このステップＳＴ１７において、視差情報出力部２１０は、ステレオ映像記述子の「event_disparity_supply」の情報を参照して、番組単位の視差情報の伝送があるか否かを判断する。「event_disparity_supply=1」であって、番組単位の視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ１８の処理に移る。このステップＳＴ１８において、視差情報出力部２１０は、メタデータ処理部２０９でステレオ映像記述子から取得される番組単位の視差情報（Disparity_value）を、使用すべき視差情報に決定して出力する。また、「event_disparity_supply=0」であって、番組単位の視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ１９の処理に移る。このステップＳＴ１９において、視差情報出力部２１０は、受信機２００に予め用意されている視差情報を、使用すべき視差情報に決定して出力する。
【０１３３】
図２０に戻って、画像・表示データ重畳部２１２は、３Ｄ信号処理部２０５で得られた左眼画像データおよび右眼画像データに対して、サブタイトル表示データおよびＯＳＤ表示データを重畳する。この場合、画像・表示データ重畳部２１２は、左眼画像および右眼画像に重ねて表示される重畳情報（サブタイトル、ＯＳＤ表示）に対して、視差情報出力部２１０から出力される視差情報に基づいてシフト処理を行って、視差を付与する。
【０１３４】
図２３は、画像・表示データ重畳部２１２の構成例を示している。この画像・表示データ重畳部２１２は、Ｌビデオプレーン３０１と、Ｒビデオプレーン３０２と、スイッチ部３０３と、サブタイトルプレーン３０４と、ＯＳＤ表示プレーン３０５と、シフト部３０６，３０７と、重畳部３０８を有している。
【０１３５】
Ｌビデオプレーン３０１は、３Ｄ信号処理部２０５から出力される左眼画像データを一時的に蓄積する。Ｒビデオプレーン３０２は、３Ｄ信号処理部２０５から出力される右眼画像データを一時的に蓄積する。スイッチ部３０３は、Ｌビデオプレーン３０１およびＲビデオプレーン３０２から交互に画像データを取り出して出力する。つまり、スイッチ部３０３は、左眼画像データおよび右眼画像データを交互に出力する。
【０１３６】
サブタイトルプレーン３０４は、サブタイトル発生部２０７で発生されるサブタイトル表示データを一時的に蓄積する。シフト部３０６は、サブタイトルプレーン３０４から、サブタイトル表示データを取り出し、視差情報出力部２１０から出力される視差情報に基づいて、シフト処理を施す。この処理により、左眼画像および右眼画像に重畳されるサブタイトルに左右方向のずれが与えられて、視差が付与される。シフト部３０６は、スイッチ部３０３からの左眼画像データおよび右眼画像データの出力に同期して、左眼画像データおよび右眼画像データに重畳するサブタイトル表示データを出力する。
【０１３７】
この場合、視差情報出力部２１０から出力される視差情報が表示期間（Display set）単位の視差情報シーケンスであるときは、表示期間（Displayset）単位で、さらにフレーム毎に順次変化する視差が、リージョン毎に付与される。また、この場合、視差情報出力部２１０から出力される視差情報が表示期間（Display set）単位の固定視差情報であるときは、表示期間（Display set）単位で固定の視差が、リージョン毎に付与される。
【０１３８】
また、この場合、視差情報出力部２１０から出力される視差情報が番組単位の視差情報であるときは、番組単位で固定の視差が各リージョンに付与される。さらに、この場合、視差情報出力部２１０から出力される視差情報が受信機２００に予め用意された視差情報であるときは、その視差情報による視差が付与される。
【０１３９】
ＯＳＤ表示プレーン３０５は、ＯＳＤ表示データ生成部２１１で生成されるＯＳＤ表示データを一時的に蓄積する。シフト部３０７は、ＯＳＤ表示プレーン３０５から、ＯＳＤ表示データを取り出し、視差情報出力部２１０から出力される視差情報に基づいて、シフト処理を施す。この処理により、左眼画像および右眼画像に重畳されるＯＳＤ表示に左右方向のずれが与えられて、視差が付与される。シフト部３０７は、スイッチ部３０３からの左眼画像データおよび右眼画像データの出力に同期して、左眼画像データおよび右眼画像データに重畳するＯＳＤ表示データを出力する。
【０１４０】
この場合、視差情報出力部２１０から出力される視差情報が汎用目的の視差情報であるときは、この視差情報に基づいて、例えば、各ＯＳＤ表示位置に対応した視差が付与される。また、この場合、視差情報出力部２１０から出力される視差情報が番組単位の視差情報であるときは、番組単位で固定の視差が各ＯＳＤ表示に付与される。さらに、この場合、視差情報出力部２１０から出力される視差情報が受信機２００に予め用意された視差情報であるときは、その視差情報による視差が各ＯＳＤ表示に付与される。
【０１４１】
重畳部３０８は、スイッチ部３０３から出力される左眼画像データおよび右眼画像データに対して、シフト部３０６から出力されるサブタイトル表示データおよびシフト部３０７から出力されるＯＳＤ表示データを重畳する。そして、重畳部３０８は、サブタイトルやＯＳＤ表示が重畳された左眼画像のデータＳＬ′と、サブタイトルやＯＳＤ表示が重畳された右眼画像のデータＳＲ′を交互に出力する。
【０１４２】
図２０に戻って、ディスプレイ２１３は、例えば、液晶表示パネル、プラズマディスプレイなどにより構成される。このディスプレイ２１３は、画像・表示データ重畳部２１２から出力される左眼画像データＳＬ′および右眼画像データＳＲ′による画像を交互に表示する。このようにディスプレイ２１３に表示される左眼画像および右眼画像は、例えば、図示しないシャッタメガネを装着した視聴者の左眼および右眼で知覚され、立体画像が呈示可能とされる。
【０１４３】
オーディオデコーダ２１４は、上述の送信データ生成部１１０のオーディオエンコーダ１１４とは逆の処理を行う。すなわち、オーディオデコーダ２１４は、デマルチプレクサ２０３で抽出されたオーディオエレメンタリストリームに含まれる符号化音声データに対して復号化処理を行って、復号化された音声データを得る。音声信号処理回路２１５は、オーディオデコーダ２１４で得られた音声データに対してＤ／Ａ変換等の必要な処理を行う。音声増幅回路２１６は、音声信号処理回路２１５から出力される音声信号を増幅してスピーカ２１７に供給する。
【０１４４】
［受信機の動作］
図２０に示す受信機２００の動作を簡単に説明する。アンテナ端子２０１に入力されたテレビ放送信号はデジタルチューナ２０２に供給される。このデジタルチューナ２０２では、テレビ放送信号が処理されて、ユーザの選択チャネルに対応した所定のトランスポートストリームＴＳが出力される。このトランスポートストリームＴＳは、デマルチプレクサ２０３に供給される。デマルチプレクサ２０３では、トランスポートストリームＴＳから、ビデオ、サブタイトル、視差情報およびオーディオの各エレメンタリストリームが抽出される。また、デマルチプレクサ２０３では、トランスポートストリームＴＳから、ＥＩＴ、ＰＭＴなどのテーブルも抽出される。
【０１４５】
デマルチプレクサ２０３で抽出されるビデオエレメンタリストリームは、ビデオデコーダ２０４に供給される。ビデオデコーダ２０４では、ビデオエレメンタリストリームに含まれる符号化画像データに対して復号化処理が行われて、復号化された立体画像データが得られる。この立体画像データは、３Ｄ信号処理部２０５に供給される。３Ｄ信号処理部２０５では、立体画像データに対して、３Ｄフォーマットに対応した処理が行われて、左眼画像データＳＬおよび右眼画像データＳＲが生成される。この左眼画像データＳＬおよび右眼画像データＳＲは、画像・表示データ重畳部２１２に供給される。
【０１４６】
また、デマルチプレクサ２０３で抽出されるサブタイトルエレメンタリストリームは、サブタイトルデコーダ２０６に供給される。サブタイトルデコーダ２０６では、サブタイトルエレメンタリストリームに含まれる符号化サブタイトルデータに対して復号化処理が行われて、復号化されたサブタイトルデータが得られる。このサブタイトルデータは、サブタイトル発生部２０７に供給される。サブタイトル発生部２０７では、サブタイトルデータに基づいて、画像に重畳するサブタイトルの表示データが発生される。このサブタイトル表示データは、画像・表示データ重畳部２１２に供給される。
【０１４７】
また、サブタイトルデコーダ２０６では、３Ｄ・セグメント（３ＤＳ）に含まれるサブタイトル向けの視差情報に関する種々の情報が取得される。この情報は、視差情報出力部２１０に供給される。例えば、サブタイトルデコーダ２０６では、３Ｄ・セグメントから、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の供給があるか否かを示す「disparity_static_supply」の情報が取得される。また、例えば、サブタイトルデコーダ２０６では、３Ｄ・セグメントから、「disparity_sequence_supply」の情報が取得される。この情報は、上述したように、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスの供給があるか否かを示す。
【０１４８】
また、デマルチプレクサ２０３で抽出される視差情報エレメンタリストリームは、視差情報デコーダ２０４に供給される。視差情報デコーダ２０８では、視差情報エレメンタリストリームに含まれる符号化された視差情報に対して復号化処理が行われて、復号化された視差情報が得られる。なお、視差情報デコーダ２０８では、汎用目的の視差情報および特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個の視差情報）のいずれか、あるいは双方の伝送がある場合のみ、それらの視差情報が得られる。この視差情報は、視差情報出力部２１０に供給される。
【０１４９】
また、メタデータ処理部２０９では、デマルチプレクサ２０３から出力されるＥＩＴの配下に挿入されているステレオ映像記述子（図５、図６参照）、視差情報リンク記述子（図７、図８参照）が処理されて、視差情報に関する種々の情報が得られる。例えば、メタデータ処理部２０９では、ステレオ映像記述子から、番組単位の視差情報の伝送があるか否かを識別するための「event_disparity_supply」の情報が取得される。また、例えば、メタデータ処理部２０９では、ステレオ映像記述子から、詳細な視差情報の伝送があるか否かを識別するための「detailed_disparity_supply」の情報が取得される。ここで、メタデータ処理部２０９では、番組単位の識別情報の伝送がある場合、その視差情報がステレオ映像記述子に含まれていることから、その視差情報も取得される。
【０１５０】
また、例えば、メタデータ処理部２０９では、視差情報リンク記述子から、汎用目的の視差情報の伝送があるか否かを識別する「general_use_disparity_flg」の情報が取得される。また、例えば、メタデータ処理部２０９では、視差情報リンク記述子から、サブタイトル向けの視差情報の伝送があるか否かを識別する「subtitle_disparity_flg」の情報が取得される。また、例えば、メタデータ処理部２０９では、視差情報リンク記述子から、「disparity_component」の情報が取得される。この情報は、視差情報が含まれる視差情報ストリームを示すコンポーネント・タグ（component_tag）の値を示し、このコンポーネント・タグの値に基づいて視差情報ストリームのパケット識別子（PID）を取得できる。メタデータ処理部２０９で取得される種々の情報は、視差情報出力部２１０に供給さされる。
【０１５１】
視差情報出力部２１０では、視差情報デコーダ２０８からの視差情報、サブタイトルデコーダ２０６からの視差情報に関する種々の情報、およびメタデータ処理部２０９からの視差情報に関する種々の情報に基づいて、使用すべき視差情報が決定されて出力される。
【０１５２】
例えば、重畳情報がＯＳＤ表示である場合、以下の視差情報が出力される。すなわち、汎用目的の視差情報の伝送があるとき、汎用目的の視差情報が、使用すべき視差情報に決定されて出力される。また、汎用目的の視差情報の伝送はないが、番組単位の視差情報の伝送があるとき、番組単位の視差情報が、使用すべき視差情報に決定されて出力される。さらに、汎用目的の視差情報の伝送がなく、番組単位の視差情報の伝送もないとき、受信機２００に予め用意されている視差情報が、使用すべき視差情報に決定されて出力される。
【０１５３】
また、例えば、重畳情報がサブタイトルの場合、以下の視差情報が出力される。すなわち、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンス（視差情報列）の伝送があるとき、この視差情報シーケンスが、使用すべき視差情報に決定されて出力される。また、上述の視差情報シーケンスの伝送はないが、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の伝送があるとき、この固定視差情報が、使用すべき視差情報に決定されて出力される。
【０１５４】
また、リージョン（Region）／表示期間（Display set）単位の視差情報の伝送
はないが、番組単位の視差情報の伝送があるとき、番組単位の視差情報が、使用すべき視差情報に決定されて出力される。さらに、リージョン（Region）／表示期間（Display set）単位の視差情報の伝送がなく、番組単位の視差情報の伝送もないとき、受信機２００に予め用意されている視差情報が、使用すべき視差情報に決定されて出力される。
【０１５５】
このように視差情報出力部２１０で決定されて出力される視差情報は、画像・表示データ重畳部２１２に供給される。画像・表示データ重畳部２１２では、３Ｄ信号処理部２０５で得られた左眼画像データおよび右眼画像データに対して、サブタイトル発生部２０７で発生されたサブタイトル表示データおよびＯＳＤ表示データ生成部２１１で生成されたＯＳＤ表示データが重畳される。この場合、画像・表示データ重畳部２１２では、左眼画像および右眼画像に重ねて表示される重畳情報（サブタイトル、ＯＳＤ表示）に対して、視差情報出力部２１０から出力される視差情報に基づいてシフト処理が行われて、視差が付与される。
【０１５６】
画像・表示データ重畳部２１２からは、サブタイトルやＯＳＤ表示が重畳された左眼画像のデータＳＬ′と、サブタイトルやＯＳＤ表示が重畳された右眼画像のデータＳＲ′が交互に出力される。これらの画像データＳＬ′，ＳＲ′は、ディスプレイ２１３に供給される。ディスプレイ２１３では、左眼画像データＳＬ′および右眼画像データＳＲ′による画像が交互に表示される。このようにディスプレイ２１３に表示される左眼画像および右眼画像は、例えば、図示しないシャッタメガネを装着した視聴者の左眼および右眼で知覚され、視聴者に立体画像が認識される。
【０１５７】
この場合、上述したように、視差情報に基づいて、左眼画像および右眼画像に重畳される重畳情報（サブタイトル、ＯＳＤ表示）に視差が付与されている。そのため、これらの重畳情報は、視聴者に、画像の最も近い位置よりさらに手前に認識される。なお、この場合、使用する視差情報により、重畳情報の深さ（奥行き）が決定される。
【０１５８】
図２４は、サブタイトルの３Ｄ表示の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンス（視差情報列）が伝送されており、この視差情報シーケンスに基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１５９】
この例では、所定のページ（Page ID=P1）において、リージョン（Region ID=R1）にサブタイトル「Subtitle1」が表示され、リージョン（Region ID=R2）にサブタイトル「Subtitle2」が表示される。リージョン（Region ID=R1）の表示位置は（X1,Y1,X2,Y2）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle1”である。また、リージョン（Region ID=R2）の表示位置は（X3,Y3,X4,Y4）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle2”である。
【０１６０】
そして、この例では、サブタイトル「Subtitle1」に視差を付与するために、視差情報ストリームに含まれる「disparity_sequence_id=DS1」の視差情報シーケンス（視差情報列）が参照される。この視差情報シーケンスには、表示期間内の各時刻T10,T11,T12,・・・,T1nにそれぞれ対応した視差情報（Disparity Data）D10,D11,D12,・・・,D1nが含まれている。
【０１６１】
また、この例では、サブタイトル「Subtitle2」に視差を付与するために、視差情報ストリームに含まれる「disparity_sequence_id=DS2」の視差情報シーケンス（視差情報列）が参照される。この視差情報シーケンスには、表示期間内の各時刻T10,T11,T12,・・・,T1nにそれぞれ対応した視差情報（Disparity Data）D20,D21,D22,・・・,D2nが含まれている。
【０１６２】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、「disparity_sequence_id=DS1」、「disparity_sequence_id=DS2」の視差情報シーケンスにより、視差が付与される。この場合、サブタイトル「Subtitle1」、「Subtitle2」には、表示期間（Display set）内で、画像内容の変化に応じて、時々刻々と変化した視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、画像内容の変化に応じて、時々刻々と変化したものとなる。
【０１６３】
図２５は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の固定視差情報が伝送されており、この固定視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１６４】
この例では、所定のページ（Page ID=P1）において、リージョン（Region ID=R1）にサブタイトル「Subtitle1」が表示され、リージョン（Region ID=R2）にサブタイトル「Subtitle2」が表示される。リージョン（Region ID=R1）の表示位置は（X1,Y1,X2,Y2）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle1”である。また、リージョン（Region ID=R2）の表示位置は（X3,Y3,X4,Y4）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle2”である。
【０１６５】
そして、この例では、サブタイトル「Subtitle1」に視差を付与するために、サブタイトルストリームに含まれる固定視差情報（Fixed Disparity=D1）が使用される。また、この例では、サブタイトル「Subtitle2」に視差を付与するために、サブタイトルストリームに含まれる固定視差情報（Fixed Disparity=D2）が使用される。
【０１６６】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、固定視差情報（Fixed Disparity=D1,D2）により、表示期間（Display set）内で、固定視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、一定となる。
【０１６７】
図２６は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンス（視差情報列）が伝送されており、この視差情報シーケンスに基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１６８】
この例では、ある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」に視差を付与するために、視差情報ストリームに含まれる、このサブタイトル「Subtitle1」に視差を付与するための視差情報シーケンス（視差情報列）が参照される。また、サブタイトル「Subtitle2」に視差を付与するために、視差情報ストリームに含まれる、このサブタイトル「Subtitle2」に視差を付与するための視差情報シーケンス（視差情報列）が参照される。
【０１６９】
この例では、ある表示期間および他の表示期間に左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、視差情報シーケンスにより、表示期間内で、画像内容の変化に応じて、時々刻々と変化した視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、画像内容の変化に応じて、時々刻々と変化したものとなる。
【０１７０】
図２７は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の固定視差情報が伝送されており、この固定視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１７１】
この例では、ある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」に視差を付与するために、サブタイトルストリームに含まれる、このサブタイトル「Subtitle1」に視差を付与するための固定視差情報が使用される。また、サブタイトル「Subtitle2」に視差を付与するために、サブタイトルストリームに含まれる、このサブタイトル「Subtitle2」に視差を付与するための固定視差情報が使用される。
【０１７２】
この例では、ある表示期間および他の表示期間に左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、固定視差情報により、表示期間内で、固定の視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、一定となる。
【０１７３】
図２８は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、番組単位の視差情報が伝送されており、この視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１７４】
この例では、番組内のある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」、「Subtitle2」に視差を付与するために、ＥＩＴのステレオ映像記述子（Stereoscopic_descriptor）に含まれる、番組単位の視差情報（Ｄ１）が使用される。
【０１７５】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、番組単位の視差情報（Ｄ１）により、番組内で、固定の視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、番組内で、一定となる。
【０１７６】
図２９は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、視差情報の伝送がなく、受信機２００に予め用意されている視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１７７】
この例では、番組内のある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」、「Subtitle2」に視差を付与するために、受信機２００に予め用意されている視差情報が使用される。
【０１７８】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、受信機２００に予め用意されている視差情報により、例えば、番組内で、固定の視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、番組内で、一定となる。
【０１７９】
また、図２０に戻って、デマルチプレクサ２０３で抽出されるオーディオエレメンタリストリームは、オーディオデコーダ２１４に供給される。オーディオデコーダ２１４では、オーディオエレメンタリストリームに含まれる符号化音声データに対して復号化処理が行われて、復号化された音声データが得られる。この音声データは、音声処理回路２１５に供給される。音声処理回路２１５では、音声データに対してＤ／Ａ変換等の必要な処理が施される。この音声データは、音声増幅回路２１６で増幅された後に、スピーカ２１７に供給される。そのため、スピーカ２１７からディスプレイ２１３の表示画像に対応した音声が出力される。
【０１８０】
上述したように、図１に示す立体画像送受信システム１０において、放送局１００の送信データ生成部１１０（図２参照）では、所定番組の立体画像データを含むトランスポートストリームＴＳに、視差情報の伝送があるか否かを識別する識別情報が挿入される。そのため、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることが可能となる。すなわち、視差情報として、番組単位の視差情報、汎用目的の視差情報、サブタイトル向けの視差情報等を選択的に伝送することが可能となる。また、視差情報を送らない選択も可能となる。
【０１８１】
また、図１に示す立体画像送受信システム１０において、受信機２００（図２０参照）では、トランスポートストリームＴＳに挿入されている、視差情報の伝送があるか否かを識別する識別情報が取得される。そして、左眼画像および右眼画像に重畳される同一の重畳情報（サブタイトル、ＯＳＤ表示など）には、この識別情報に基づいて、番組単位の視差情報、汎用目的の視差情報、サブタイトル向けの視差情報等の所定の視差情報による視差が付与される。これにより、サブタイトル、ＯＳＤ表示などの重畳情報を、３Ｄ映像コンテンツ供給事業者の意図した深さで立体画像に重ねて表示することが可能となる。
【０１８２】
＜２．変形例＞
なお、上述実施の形態においては、ステレオ映像記述子（Stereoscopic_descriptor）および視差情報リンク記述子（Disparity_Link_descriptor）を、ＥＩＴの配下に挿入している。しかし、これらの記述子の挿入位置は、ＥＩＴの配下に限定されない。例えば、ステレオ映像記述子はＥＩＴの配下に挿入するが、視差情報リンク記述子はＰＭＴの配下に挿入することが考えられる。また、例えば、双方とも、ＰＭＴの配下に挿入することが考えられる。あるいは、これらの記述子をさらに他の位置に挿入することも考えられる。
【０１８３】
また、上述実施の形態において、受信機２００では、例えば、図２１、図２２のフローチャートに示すように、伝送されてくる視差情報の種類に基づいて、使用すべき視差情報が自動的に決定される。しかし、ユーザの操作によって、使用すべき視差情報を任意に決定する構成とすることも可能である。
【０１８４】
また、上述実施の形態において、特定の重畳情報がサブタイトルである例を示したが、クローズド・キャプションなどのその他の重畳情報の場合も同様に考えることができる。また、上述実施例においては、立体画像データを含むトランスポートストリームＴＳが放送局１００から放送される例を示した。しかし、この発明は、このトランスポートストリームＴＳがインターネット等のネットワークを利用して受信端末に配信される構成のシステムにも同様に適用できることは勿論である。
【産業上の利用可能性】
【０１８５】
この発明は、立体画像データを放送波に載せて送信する、あるいは立体画像データをインターネット等のネットワークを介して配信する立体画像データ送受信システムに適用できる。
【符号の説明】
【０１８６】
１０・・・立体画像送受信システム
１１０・・・送信データ生成部
１１１・・・データ取り出し部
１１１ａ・・・データ記録媒体
１１２・・・ビデオエンコーダ
１１３・・・視差情報エンコーダ
１１４・・・オーディオエンコーダ
１１５・・・サブタイトル発生部
１１６・・・サブタイトルエンコーダ
１１７・・・マルチプレクサ
２００・・・受信機
２０１・・・アンテナ端子
２０２・・・デジタルチューナ
２０３・・・デマルチプレクサ
２０４・・・ビデオデコーダ
２０５・・・３Ｄ信号処理部
２０６・・・サブタイトルデコーダ
２０７・・・サブタイトル発生部
２０８・・・視差情報デコーダ
２０９・・・メタデータ処理部
２１０・・・視差情報出力部
２１１・・・ＯＳＤ表示データ生成部
２１２・・・画像・表示データ重畳部
２１３・・・ディスプレイ
２１４・・・オーディオデコーダ
２１５・・・音声処理回路
２１６・・・音声増幅回路
２１７・・・スピーカ
３０１・・・Ｌビデオプレーン
３０２・・・Ｒビデオプレーン
３０３・・・スイッチ部
３０４・・・サブタイトルプレーン
３０５・・・ＯＳＤ表示プレーン
３０６，３０７・・・シフト部
３０８・・・重畳部
【技術分野】
【０００１】
この発明は、立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法に関し、特に、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高める立体画像データ送信装置等に関する。
【背景技術】
【０００２】
例えば、特許文献１には、立体画像データのテレビ放送電波を用いた伝送方式について提案されている。この場合、左眼用画像データおよび右眼用画像データを含む立体画像データが送信され、テレビ受信機において、両眼視差を利用した立体画像表示が行われる。
【０００３】
図３０は、両眼視差を利用した立体画像表示において、スクリーン上におけるオブジェクト（物体）の左右像の表示位置と、その立体画像（３Ｄ画像）の再生位置との関係を示している。例えば、スクリーン上に図示のように左像Ｌａが右側に右像Ｒａが左側にずれて表示されているオブジェクトＡに関しては、左右の視線がスクリーン面より手前で交差するため、その立体画像の再生位置はスクリーン面より手前となる。ＤＰａは、オブジェクトＡに関する水平方向の視差ベクトルを表している。
【０００４】
また、例えば、スクリーン上に図示のように左像Ｌｂおよび右像Ｒｂが同一位置に表示されているオブジェクトＢに関しては、左右の視線がスクリーン面で交差するため、その立体画像の再生位置はスクリーン面上となる。さらに、例えば、スクリーン上に図示のように左像Ｌｃが左側に右像Ｒｃが右側にずれて表示されているオブジェクトＣに関しては、左右の視線がスクリーン面より奥で交差するため、その立体画像の再生位置はスクリーン面より奥となる。ＤＰｃは、オブジェクトＣに関する水平方向の視差ベクトルを表している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−６１１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上述したようにテレビ受信機で表示される立体画像（３Ｄ画像）に、字幕やデータ放送表示、端末アプリケーション独自の表示などの重畳情報を重ねる場合、立体画像に対して、視聴者にとって見やすい適切な深さ（奥行き）を設定することが望ましい。通常、適切な深さとは、立体画像の深さに対して、それより手前の深さと考えられている。図３１は、画像とサブタイトル（字幕）の位置関係の一例を示している。この例において、サブタイトルは、画像の最も近い位置よりさらに手前に認識される。
【０００７】
現状の３Ｄテレビ方式においては、左右の眼の視点による２つの画像を用いるので、深さとは、左右の画像の表示対象における左右のずれの画素数で表現される。よって、字幕、その他の画像に重ねる重畳情報においても、重畳情報毎に左右のずれの画素数で適切な深さを規定することが想定されている。このずれの画素数の情報を視差情報（Disparity Data）と呼ぶ。
【０００８】
３Ｄ映画における字幕では、時間経過に伴う画像（映像）の変化を反映して、時間と共に画像に重ねる字幕も深さを変化させることがよく行われている。３Ｄテレビ方式おいても同様の表示を行うためには、字幕毎に時々刻々深さを変化させる運用が望ましいあり方として想定されている。一方で、字幕毎に、時々刻々変化する視差情報を作成するのは、労力がかかり、制作コストを引き上げることになる。また、望ましい視差情報を作成して配信する設備にも新たな投資が必要となる。
【０００９】
今後、放送やＩＰＴＶ（Internet Protocol TeleVision）などで配信する目的で、様々な３Ｄ映像コンテンツを制作することが想定される。しかし、画像に比較して重要性が低いと考えられる字幕の見易さに対して、コンテンツ供給事業者は、必ずしも上述のような望ましい視差情報の供給を行うべきとは考えないかもしれない。
【００１０】
その場合、コンテンツ供給事業者はある３Ｄ映像コンテンツを配信するにあたって、字幕その他の特定の重畳情報の表示期間は、この重畳情報を固定の深さに表示することが考えられる。また、別の３Ｄ映像コンテンツでは、番組（コンテンツ）全体で固定の深さに表示することでよしとするかもしれない。
【００１１】
さらに、別の３Ｄ映像コンテンツに関しては、字幕その他の重畳情報のデータは２Ｄ映像コンテンツと同様に伝送するにしても、重畳情報の表示に関しては、３Ｄ映像としての考慮は一切したくないかもしれない。この場合には、視差情報の供給を行わない。当然、ある３Ｄ映像コンテンツについては、望ましい視差情報を必ず付与したいと考えることも想定される。
【００１２】
従来、３Ｄ映像コンテンツを考慮した放送、ＩＰＴＶなどにおいて、字幕その他の重畳情報に関する、上述のようなコンテンツ供給事業者の想定される様々な要望の範囲に応えられる解決策が考えられていない。
【００１３】
この発明の目的は、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることにある。
【課題を解決するための手段】
【００１４】
この発明の概念は、
左眼画像データおよび右眼画像データを有する所定番組の立体画像データを出力する画像データ出力部と、
上記画像データ出力部から出力される所定番組の立体画像データを含むトランスポートストリームを送信する画像データ送信部とを備え、
上記画像データ送信部は、上記トランスポートストリームに、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報を挿入する
立体画像データ送信装置にある。
【００１５】
この発明において、画像データ出力部により、左眼画像データおよび右眼画像データを含む所定番組の立体画像データが出力される。また、画像データ送信部により、画像データ出力部から出力される所定番組の立体画像データを含むトランスポートストリームが送信される。ここで、画像データ出力部により、トランスポートストリームに、左眼画像データおよび右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入される。
【００１６】
ここで、重畳情報は、字幕を表示するサブタイトル情報、クローズド・キャプション情報、ロゴ等のグラフィクスを表示するグラフィクス情報、電子番組表（ＥＰＧ：Electronic Program Guide）、文字放送内容等を表示するテキスト情報、テレビ受信機固有のＯＳＤ表示など、画像に重畳表示される情報を意味している。
【００１７】
この発明において、例えば、識別情報は、番組単位の視差情報の伝送があるか否かを識別する識別情報とされてもよい。識別情報が番組単位の視差情報の伝送があることを示す場合、画像データ送信部により、さらに、トランスポートストリームに、番組単位の視差情報が挿入される。
【００１８】
この場合、画像データ送信部により、識別情報および視差情報は、例えば、トランスポートストリームに、番組単位のメタデータとして挿入される。例えば、トランスポートストリームには、番組単位の管理を行うサービス・インフォメーションとしてのイベント・インフォメーション・テーブルが含まれており、識別情報および視差情報は、このイベント・インフォメーション・テーブルの配下に挿入される。
【００１９】
また、この発明において、例えば、識別情報は、汎用目的の視差情報の伝送があるか否かを識別する識別情報とされてもよい。識別情報が汎用目的の視差情報の伝送があることを示す場合、画像データ送信部により、さらに、トラスポートストリームに、汎用目的の視差情報を含む視差情報エレメンタリストリームが挿入されると共に、このトランスポートストリームに、識別情報と関連付けて視差情報エレメンタリストリームを識別するための識別情報が挿入される。
【００２０】
また、この発明において、例えば、識別情報は、特定の重畳情報用の視差情報の伝送であるか否かを識別する識別情報とされてもよい。識別情報が特定の重畳情報用の視差情報の伝送であることを示す場合、画像データ送信部により、さらに、トランスポートストリームに、特定の重畳情報が表示される所定数のフレーム期間で共通に使用される視差情報の伝送および所定数のフレーム期間で順次更新される視差情報の伝送のいずれであるか、または双方であるかを示す固定／変動情報が挿入される。ここで、例えば、画像データ送信部により、トランスポートストリームに、特定の重畳情報のデータを含む重畳情報エレメンタリストリームが挿入される。そして、固定／変動情報は、この重畳情報エレメンタリストリームに、重畳情報毎に、挿入される。
【００２１】
例えば、固定／変動情報が、所定数のフレーム期間で共通に使用される視差情報の伝送であることを示す場合、画像データ送信部により、重畳情報エレメンタリストリームに、重畳情報毎に、固定／変動情報に関連付けて所定数のフレーム期間で共通に使用される視差情報が挿入される。また、例えば、固定／変動情報が、特定の重畳情報が表示される所定数のフレーム期間で順次更新される視差情報の伝送であることを示す場合、トランスポートストリームに、重畳情報毎の視差情報列を識別情報により識別可能に含む重畳情報エレメンタリストリームが挿入されると共に、この重畳情報エレメンタリストリームに、重畳情報毎に、固定／変動情報に関連付けて、視差情報エレメンタリストリーム内の対応する視差情報列を指定する識別情報が挿入される。
【００２２】
このように、この発明においては、所定番組の立体画像データを含むトランスポートストリームに、視差情報の伝送があるか否かを識別する識別情報が挿入される。これにより、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることが可能となる。すなわち、視差情報として、番組単位の視差情報、汎用目的の視差情報、特定の重畳情報用の視差情報等を選択的に伝送することが可能となる。また、視差情報を送らない選択も可能となる。
【００２３】
また、この発明の他の概念は、
左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれると共に、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されているトランスポートストリームを受信する画像データ受信部と、
上記画像データ受信部で受信されたトランスポートストリームから上記立体画像データを取得する画像データ取得部と、
上記画像データ受信部で受信されたトランスポートストリームから上記識別情報を取得する識別情報取得部と、
上記画像データ取得部で取得された上記立体画像データと、上記識別情報取得部で取得された上記識別情報に基づいて、左眼画像および右眼画像に重畳する同一の重畳情報に所定の視差情報による視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部と
を備える立体画像データ受信装置にある。
【００２４】
この発明において、画像データ受信部により、トランスポートストリームが受信される。このトランスポートストリームには、左眼画像データおよび右眼画像データを含む所定番組の立体画像データが含まれる。また、このトランスポートストリームには、左眼画像データおよび右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されている。ここで、識別情報は、例えば、番組単位の視差情報の伝送があるか否かを識別する識別情報、汎用目的の視差情報の伝送があるか否かを識別する識別情報、特定の重畳情報用の視差情報の伝送があるか否かを識別する識別情報などである。
【００２５】
画像データ取得部により、画像データ受信部で受信されたトランスポートストリームから立体画像データが取得される。また、識別情報取得部により、画像データ受信部で受信されたトランスポートストリームから識別情報が取得される。そして、画像データ処理部により、立体画像データと識別情報に基づいて、重畳情報が重畳された左眼画像のデータおよび重畳情報が重畳された右眼画像のデータが得られる。この場合、左眼画像および右眼画像に重畳される同一の重畳情報には、所定の視差情報による視差が付与される。
【００２６】
ここで、例えば、識別情報が視差情報の伝送があることを示す場合、所定の視差情報として、トランスポートストリームから取得された視差情報が用いられる。また、例えば、識別情報が視差情報の伝送がないことを示す場合、所定の視差情報として、予め用意されている視差情報が用いられる。
【００２７】
このように、この発明においては、トランスポートストリームに挿入されている識別情報が取得される。そして、左眼画像および右眼画像に重畳される同一の重畳情報には、この識別情報に基づいて、所定の視差情報による視差が付与される。これにより、字幕、その他の重畳情報を、３Ｄ映像コンテンツ供給事業者の意図した深さで立体画像に重ねて表示することが可能となる。
【発明の効果】
【００２８】
この発明によれば、所定番組の立体画像データを含むトランスポートストリームに、視差情報の伝送があるか否かを識別する識別情報が挿入されるものである。そのため、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることが可能となる。また、字幕、その他の重畳情報を、３Ｄ映像コンテンツ供給事業者の意図した深さで立体画像に重ねて表示することが可能となる
【図面の簡単な説明】
【００２９】
【図１】この発明の実施の形態としての立体画像送受信システムの構成例を示すブロック図である。
【図２】放送局における送信データ生成部の構成例を示すブロック図である。
【図３】ビデオ、オーディオ、サブタイトル、視差情報のＰＥＳパケットおよびＥＩＴ，ＰＭＴなどのテーブルを含むトランスポートストリームの構成例を示す図である。
【図４】ビデオエレメンタリストリーム、サブタイトルエレメンタリストリーム、オーディオエレメンタリストリーム、視差情報エレメンタリストリームを含む一般的なトランスポートストリームＴＳの構成例を示す図である。
【図５】ステレオ映像記述子（Stereoscopic_descriptor）の構造（syntax）の一例を示す図である。
【図６】ステレオ映像記述子（Stereoscopic_descriptor）のデータ規定内容（semantics）を示す図である。
【図７】視差情報リンク記述子（Disparity_Link_descriptor）の構造（syntax）の一例を示す図である。
【図８】視差情報リンク記述子（Disparity_Link_descriptor）のデータ規定内容（semantics）を示す図である。
【図９】サブタイトルの２Ｄ表示と、３Ｄ表示の一例を示す図である。
【図１０】視差情報が表示期間（display set）を構成する所定数のフレーム期間で共通に使用される１個である場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示す図である。
【図１１】視差情報が表示期間（display set）を構成する所定数のフレーム期間で順次更新される複数個である場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示す図である。
【図１２】サブタイトルデータの構造を示す図である。
【図１３】サブタイトルストリーム（ＰＥＳ）、つまりＤＶＢ_Subtitlingの構造（Syntax）を示す図である。
【図１４】セグメント「segment_type」の各値とセグメントタイプとの対応関係を示す図である。
【図１５】３Ｄ・セグメント(3D segment)の構造例（syntax）を示す図である。
【図１６】３Ｄ・セグメント(3D segment)のデータ規定内容（semantics）を示す図である。
【図１７】視差情報ストリームの構造（Syntax）、すなわち視差情報（disparity_data）を含むPES_data_fieldの構造の一例を示す図である。
【図１８】「disparity_data_set」の構造（Syntax）を示す図である。
【図１９】「disparity_data_set」の主要なデータ規定内容（semantics）を示す図である。
【図２０】立体画像送受信システムを受信機の構成例を示すブロック図である。
【図２１】重畳情報がＯＳＤ表示である場合における、視差情報出力部の処理手順の一例を示フローチャートである。
【図２２】重畳情報がサブタイトルである場合における、視差情報出力部の処理手順の一例を示すフローチャートである。
【図２３】受信機の画像・表示データ重畳部の構成例を示す図である。
【図２４】リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスに基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２５】リージョン（Region）／表示期間（Display set）単位の固定視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２６】リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスに基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２７】リージョン（Region）／表示期間（Display set）単位の固定視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２８】番組単位の視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図２９】受信機に予め用意されている視差情報に基づいて左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合における、サブタイトルの３Ｄ表示の一例を示す図である。
【図３０】両眼視差を利用した立体画像表示において、スクリーン上におけるオブジェクト（物体）の左右像の表示位置と、その立体画像（３Ｄ画像）の再生位置との関係を示す図である。
【図３１】字幕が画像の最も近い位置よりさらに手前に認識される場合における、画像と字幕の位置関係の一例を示す図である。
【発明を実施するための形態】
【００３０】
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例
【００３１】
＜１．実施の形態＞
［画像送受信システムの構成例］
図１は、実施の形態としての画像送受信システム１０の構成例を示している。この立体画像送受信システム１０は、放送局１００と受信機２００により構成されている。放送局１００は、トランスポートストリームを、放送波にのせて送信する。このトランスポートストリームには、左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれている。
【００３２】
また、このトランスポートストリームには、視差情報の伝送があるか否かを識別する識別情報が挿入されている。ここで、視差情報は、左眼画像データおよび右眼画像データによる画像に重畳する字幕その他の重畳情報をシフトさせて視差を付与するための情報であり、視差ベクトル、あるいは奥行きデータ等である。奥行きデータは、所定の変換により視差ベクトルとして扱うことが可能となる。
【００３３】
受信機２００は、放送局１００から放送波に載せて送られてくる、上述のトランスポートストリームを受信する。受信機２００は、このトランスポートストリームから、立体画像データを取得すると共に、上述の識別情報を取得する。そして、受信機２００は、立体画像データと識別情報に基づいて、字幕その他の重畳情報が重畳された左眼画像のデータおよび重畳情報が重畳された右眼画像のデータを得る。
【００３４】
［放送局の説明］
放送局１００について説明する。この放送局１００は、上述したように、立体画像データが含まれると共に、視差情報の伝送があるか否かを識別する識別情報が挿入されたトランスポートストリームを、放送波に載せて送信する。このトランスポートストリームには、この実施の形態において、立体画像データの他に、音声データ、サブタイトルデータ、視差情報などが含まれる。なお、視差情報は、上述の識別情報が、視差情報の伝送があることを示す場合のみ含まれる。
【００３５】
「送信データ生成部の構成例」
図２は、放送局１００において、上述したトランスポートストリームを生成する送信データ生成部１１０の構成例を示している。この送信データ生成部１１０は、データ取り出し部（アーカイブ部）１１１と、ビデオエンコーダ１１２と、視差情報エンコーダ１１３と、オーディオエンコーダ１１４を有している。また、この送信データ生成部１１０は、サブタイトル発生部１１５と、サブタイトルエンコーダ１１６と、マルチプレクサ１１７を有している。
【００３６】
データ取り出し部１１１には、データ記録媒体１１１ａが、例えば、着脱自在に装着される。このデータ記録媒体１１１ａには、トランスポートストリームで送信する所定番組の立体画像データと共に、この立体画像データに対応した音声データが記録されている。この立体画像データには、左眼画像データおよび右眼画像データが含まれている。
【００３７】
また、データ記録媒体１１１ａには、所定番組の立体画像データに関連付けて、視差情報（Disparity Data）が記録されていることがある。このように視差情報が記録されている場合には、この視差情報を、トランスポートストリームに挿入して、所定番組の立体画像データに関連付けて送信することが可能となる。
【００３８】
ここで、データ記録媒体１１１ａに記録されている視差情報は、例えば、番組単位の視差情報、汎用目的の視差情報、特定用途向け（特定の重畳情報用）の視差情報等である。特定用途向けの視差情報は、例えば、サブタイトル用、クローズド・キャプション用などが考えられるが、この実施の形態においては、サブタイトル用の視差情報である。番組単位の視差情報の場合、データ記録媒体１１１ａには、所定番組の立体画像データに対応付けて、１個の視差情報が記録される。
【００３９】
また、汎用目的の視差情報の場合、データ記録媒体１１１ａには、所定番組の立体画像データに対応付けて、例えば、画面を所定数に分割して得られる各分割領域に属する視差情報が記録される。この場合、各分割領域に属する視差情報は、例えば、所定番組内で１個である場合、あるいは所定フレーム数毎の複数個である場合などがある。
【００４０】
また、特定用途向けの視差情報の場合、データ記録媒体１１１ａには、所定番組の立体画像データに対応付けて、表示期間（Display set）単位で、各ページ（page）の各リージョン（region）の視差情報が記録される。この場合、各リージョンの視差情報は、表示期間を構成する所定数のフレーム期間で共通に使用される１個である場合、あるいは、所定数のフレーム期間で順次更新される複数個である場合などがある。
【００４１】
データ取り出し部１１１のデータ記録媒体１１１ａは、例えば、ディスク状記録媒体、半導体メモリなどである。データ取り出し部１１１は、データ記録媒体１１１ａから、所定番組の立体画像データを取り出すと共に、この立体画像データに関連付けて記録されている音声データ、さらには視差情報を取り出して出力する。
【００４２】
ビデオエンコーダ１１２は、データ取り出し部１１１から出力される画像データに対して、ＭＰＥＧ４−ＡＶＣ、ＭＰＥＧ２等の符号化を施して符号化ビデオデータを得る。また、このビデオエンコーダ１１２は、後段に備えるストリームフォーマッタ（図示せず）により、立体画像データを含むビデオエレメンタリストリームを生成する。
【００４３】
視差情報エンコーダ１１３は、データ取り出し部１１１から出力される視差情報を含む視差情報エレメンタリストリームを生成する。ここで、視差情報エンコーダ１１３は、視差情報が汎用目的の視差情報である場合に、視差情報エレメンタリストリームを生成する。また、視差情報エンコーダ１１３は、視差情報が特定用途向けの視差情報であって各リージョンの視差情報が所定数のフレーム期間で順次更新される複数個である場合に、視差情報エレメンタリストリームを生成する。
【００４４】
つまり、視差情報エンコーダ１１３は、視差情報が番組単位の視差情報である場合には、視差情報エレメンタリストリームを生成しない。この番組単位の視差情報は、詳細は後述するが、マルチプレクサ１１７において、ＥＩＴ（Event Information Table）の配下に挿入されるステレオ映像記述子（Stereoscopic_descriptor）に記述される。
【００４５】
また、視差情報エンコーダ１１３は、視差情報が特定用途向けの視差情報であって各リージョンの視差情報が所定数のフレーム期間で共通に使用される１個の場合には、視差情報エレメンタリストリームを生成しない。この各リージョンの視差情報は、詳細は後述するが、サブタイトルエンコーダ１１６で生成されるサブタイトルエレメンタリストリームに、各リージョンのサブタイトルデータに対応付けて挿入される。
【００４６】
オーディオエンコーダ１１４は、データ取り出し部１１１から出力される音声データに対して、ＭＰＥＧ−２Ａｕｄｉｏ ＡＡＣ等の符号化を施し、オーディオのエレメンタリストリームを生成する。サブタイトル発生部１１５は、画像に重畳するサブタイトルのデータ（サブタイトルデータ）を発生する。サブタイトルは、例えば、字幕である。サブタイトルエンコーダ１１６は、サブタイトル発生部１１５で発生されたサブタイトルデータを含むサブタイトルエレメンタリストリームを生成する。
【００４７】
マルチプレクサ１１７は、ビデオエンコーダ１１２、視差情報エンコーダ１１３、オーディオエンコーダ１１４およびサブタイトルエンコーダ１１６で生成された各エレメンタリストリームをパケット化して多重し、トランスポートストリームＴＳを生成する。図３は、トランスポートストリームＴＳの構成例を示している。トランスポートストリームＴＳには、各エレメンタリストリームをパケット化して得られたパケット（ＰＥＳパケット）が時分割的に含まれている。
【００４８】
また、このトランスポートストリームＴＳには、間欠的に、イベント単位の管理を行うＳＩ（Serviced Information）としてのＥＩＴ(EventInformation Table)が含まれている。また、このトランスポートストリームＴＳには、間欠的に、ＰＳＩ（Program Specific Information）として、ＰＭＴ（ProgramMap Table）が含まれている。このＰＳＩは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。
【００４９】
［識別情報の挿入］
マルチプレクサ１１７は、トランスポートストリームＴＳに、視差情報の伝送があるか否かを識別する識別情報を挿入する。この実施の形態においては、識別情報を挿入するため、ステレオ映像記述子（Stereoscopic_descriptor）および視差情報リンク記述子（Disparity_Link_descriptor）を、新たに定義する。ステレオ映像記述子には、番組単位の視差情報の伝送があるか否かを識別する識別情報が含まれる。マルチプレクサ１１７は、このステレオ映像記述子を、トランスポートストリームＴＳに、番組単位のメタデータとして挿入する。この実施の形態において、マルチプレクサ１１７は、このステレオ映像記述子を、上述のＥＩＴの配下に挿入する。
【００５０】
また、視差情報リンク記述子には、汎用目的の視差情報の伝送があるか否かを識別する識別情報が含まれる。また、この視差情報リンク記述子には、特定用途向けの視差情報の伝送があるか否かを識別する識別情報が含まれる。マルチプレクサ１１７は、この視差情報リンク記述子を、必要に応じて、トランスポートストリームＴＳに、挿入する。この実施の形態において、マルチプレクサ１１７は、この視差情報リンク記述子を、上述のＥＩＴの配下に挿入する。
【００５１】
図４は、ビデオエレメンタリストリーム、サブタイトルエレメンタリストリーム、オーディオエレメンタリストリーム、視差情報エレメンタリストリームを含む一般的なトランスポートストリームＴＳの構成例を示している。このトランスポートストリームＴＳには、上述したように、各エレメンタリストリームをパケット化して得られたＰＥＳパケットが含まれている。この構成例では、ビデオエレメンタリストリームのＰＥＳパケット「Video PES」が含まれている。
【００５２】
また、この構成例では、サブタイトルエレメンタリストリームのＰＥＳパケット「Subtitle PES」およびオーディオエレメンタリストリームのＰＥＳパケット「AudioPES」が含まれている。また、この構成例では、さらに、視差情報（Disparity Data）エレメンタリストリームのＰＥＳパケット「Disparity Data PES」が含まれている。
【００５３】
また、トランスポートストリームＴＳには、ＰＳＩ（Program Specific Information）として、ＰＭＴ（ProgramMap Table）が含まれている。このＰＳＩは、トランスポートストリームＴＳに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。また、トランスポートストリームＴＳには、イベント単位の管理を行うＳＩ（Serviced Information）としてのＥＩＴ(EventInformation Table)が含まれている。このＥＩＴには、番組単位のメタデータが記載される。
【００５４】
ＰＭＴには、プログラム全体に関連する情報を記述するプログラム・デスクリプタ（Program Descriptor）が存在する。また、このＰＭＴには、各エレメンタリストリームに関連した情報を持つエレメンタリ・ループが存在する。この構成例では、ビデオエレメンタリ・ループ、サブタイトルエレメンタリ・ループ、オーディオエレメンタリ・ループ、プライベートエレメンタリ・ループが存在する。各エレメンタリ・ループには、ストリーム毎に、パケット識別子（PID）等の情報が配置されると共に、図示していないが、そのエレメンタリストリームに関連する情報を記述する記述子（デスクリプタ）も配置される。
【００５５】
例えば、このエレメンタリストリームに関連する情報を記述する記述子として、ストリーム識別記述子（Stream_Identifier_Descriptor）がある。図４のトランスポートストリームＴＳの構成例では、サブタイトルエレメンタリ・ループにのみ図示しているが、他のエレメンタリ・ループに同様に配置されている。このストリーム識別記述子は、エリメンタリストリームの種類・位置付けを示すＩＤ（component_tag）である。各エレメンタリ・ループに、このストリーム識別記述子が配置されていることで、ＩＤ（component_tag）が与えられた場合に、それに対応するパケット識別子（PID）を取得することが可能となる。
【００５６】
この実施の形態においては、図４に示すように、ＥＩＴの配下に、ステレオ映像記述子（Stereoscopic_descriptor）が挿入される。また、このＥＩＴの配下に、必要に応じて、視差情報リンク記述子（Disparity_Link_descriptor）が配置される。
【００５７】
［ステレオ映像記述子の説明］
図５は、ステレオ映像記述子（Stereoscopic_descriptor）の構造（syntax）の一例を示している。図６は、ステレオ映像記述子のデータ規定内容（semantics）を示している。「descriptor_tag」は、デスクリプタタイプを示す８ビットのデータであり、ここでは、ステレオ映像記述子であることを示す。「descriptor_length」は、デスクリプタの長さ（サイズ）を示す８ビットのデータである。このデータは、デスクリプタの長さとして、「descriptor _length」以降のバイト数を示す。
【００５８】
「3D_format_type」は、３Ｄフォーマットのタイプを示す４ビットのデータである。例えば、“３”は、３Ｄフォーマットがサイド・バイ・サイド（Side By Side）方式であることを示す。また、例えば、“４”は、３Ｄフォーマットがトップ・アンド・ボトム（Top & Bottom）方式であることを示す。また、例えば、“７”は、フル・リゾルーション・ステレオ（Full resolution stereo）方式であることを示す。フル・リゾルーション・ステレオ方式は、左眼画像データおよび右眼画像データのうち、一方をベースビュー(base view)の画像データとして伝送し、他方をノンベースビュー(non-base view)の画像データとして伝送する方式である。
【００５９】
「2D_display_view」は、２Ｄディスプレイ・モードにおいて、表示すべきビュー（画像）を示す１ビットのデータである。例えば、“０”は、表示すべきビューが、左眼画像であることを示し、“１”は、表示すべきビューが、右眼画像であることを示す。なお、３Ｄフォーマットが上述のフル・リゾルーション・ステレオ方式である場合には、２Ｄディスプレイ・モードにおいて表示すべきビュー（画像）は、例えば、ベースビューとされる。
【００６０】
「Simulcast_condition」は、２ビットのデータである。このデータは、３Ｄフォーマットがサイド・バイ・サイド方式、トップ・アンド・ボトム方式などの場合に、これらの方式の立体（３Ｄ）画像データと共に、２Ｄ画像データを同時に伝送する状態にあるか否かを示す。また、このデータは、２Ｄ画像データを基本とし、３Ｄ画像データの送信形態を示す。３Ｄ画像表示に対応していない従来の２Ｄの受信機では、サイド・バイ・サイド方式、トップ・アンド・ボトム方式などで立体画像データが伝送されてくる場合、画面の左右、あるいは上下に、左眼画像および右眼画像が並んだ画像が表示されることを考慮したものである。
【００６１】
例えば、“０”は、２Ｄ画像データを同時に伝送する状態にないことを示す。また、例えば、“１”〜“３”は、２Ｄ画像データを同時に伝送する状態にあることを示す。そして、例えば、“１”は、２Ｄ画像データを基本とし、同じチャネルの中に、別のストリームとして、２Ｄ画像データに対する３Ｄ画像データを送ることを示す。この場合、詳細は図示しないが、例えば、コンポーネント・デスクリプタ（component descriptor）によりパケット識別子（PID）等の詳細情報の参照が可能とされる。
【００６２】
また、例えば、“２”は、２Ｄ画像データを基本とし、他のチャネルに、別番組（service）として、２Ｄ画像データに対する３Ｄ画像データを送ることを示す。この場合、詳細は図示しないが、例えば、リンケージ・デスクリプタ（linkage descriptor）により、他チャネル等の詳細情報の参照が可能とされる。また、例えば、“３”は、２Ｄ画像データを基本とし、放送ではなく、ネットワーク通信などの他の方式で、２Ｄ画像データに対する３Ｄ画像データを送ることを示す。この場合、詳細は図示しないが、例えば、他の新たなデスクリプタ（the another descriptor）により、ＵＲＬ等の詳細情報の参照が可能とされる。
【００６３】
「detailed_disparity_supply」は、視差情報リンク記述子（Disparity_Link_descriptor）に記述される詳細な視差情報（DisparityData）が供給されるか否を示す１ビットのデータである。例えば、“１”は、供給されることを示し、このとき、ＥＩＴの配下に、ステレオ映像記述子（Stereoscopic_descriptor）と共に視差情報リンク記述子が挿入される。また、例えば、“０”は、供給されないことを示す。このデータは、汎用目的の視差情報あるいは特定用途向けの視差情報の伝送があるか否かを識別する識別情報を構成する。
【００６４】
「event_disparity_supply」は、この番組（event）のための１個の固定の視差情報（Disparity Data）が供給されるか否かを示す１ビットのデータである。例えば、“１”は、供給されることを示す。また、例えば、“０”は、供給されないことを示す。このデータは、番組単位の視差情報の伝送があるか否かを識別する識別情報を構成する。
【００６５】
「Select_view_shift」は、「event_disparity_supply=1」の場合にのみ有効となり、シフト対象指定情報を構成する２ビットのデータである。このデータは、左眼画像に重畳する重畳情報（サブタイトル、ＯＳＤ表示など）および右眼画像に重畳する重畳情報のうち、視差情報（Disparity Data）に基づいてシフトさせる重畳情報を指定する。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。
【００６６】
「Disparity_value」は、「event_disparity_supply=1」の場合にのみ有効となり、視差情報の値を示す８ビットのデータであり、−１２８〜＋１２７の範囲の値をとる。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。
【００６７】
［視差情報リンク記述子の説明］
図７は、視差情報リンク記述子（Disparity_Link_descriptor）の構造（syntax）の一例を示している。図８は、視差情報リンク記述子のデータ規定内容（semantics）を示している。なお、「descriptor_tag」、「descriptor_length」に関しては、図６に示すデータ規定例（semantics）で示すものと同様であり、図８においては、省略している。「descriptor_tag」は、デスクリプタタイプを示す８ビットのデータであり、ここでは、視差情報リンク記述子であることを示す。「descriptor_length」は、デスクリプタの長さ（サイズ）を示す８ビットのデータである。このデータは、デスクリプタの長さとして、「descriptor _length」以降のバイト数を示す。
【００６８】
「disparity_component」は、視差情報が含まれる視差情報ストリームを示すコンポーネント・タグ（component_tag）の値を示す。上述したように、このコンポーネント・タグの値に基づいて、視差情報ストリームのパケット識別子（PID）を取得することが可能となる。
【００６９】
「Subtitle_disparity_flg」は、サブタイトル向けの視差情報が設定されているか否かを示す１ビットのフラグデータである。このフラグデータは、上述のステレオ映像記述子の「Detaild_disparity_supply」のデータと共に、特定用途向けの視差情報の伝送があるか否かを識別する識別情報を構成する。例えば、“１”は、サブタイトル向けの視差情報が設定されていることを示し、“０”は、サブタイトル向けの視差情報の設定がないことを示す。
【００７０】
「general_use_disparity_flg」は、汎用目的の視差情報が存在するか否かを示す１ビットのフラグデータである。このフラグデータは、上述のステレオ映像記述子の「Detaild_disparity_supply」のデータと共に、汎用目的の視差情報の伝送があるか否かを識別する識別情報を構成する。例えば、“１”は、汎用目的の視差情報が存在することを示し、“０”は、汎用目的の視差情報が存在しないことを示す。
【００７１】
「reserved_for_future_use」は、予約領域を示す。今後、視差情報の使用対象となる放送データ（例えば、データ放送など）が出現した場合に、その用途向けの視差情報が設定されているか否かを示すフラグデータの領域として利用することを想定している。
【００７２】
［サブタイトルストリームの説明］
図９は、サブタイトルの２Ｄ表示と、３Ｄ表示の一例を示している。図９（ａ）は、サブタイトルの２Ｄ重畳例を示している。この表示例において、「Region 1」のリージョンには、丸数字の「７」を示すサブタイトルが重畳され、「Region2」のリージョンには、「Shall we ?」の文字を示すサブタイトルが重畳されている。この場合、各サブタイトルは、画面（スクリーン）上に認識される。
【００７３】
図９（ｂ）は、サブタイトルの３Ｄ重畳例を示している。この表示例においても、「Region 1」のリージョンには、丸数字の「７」を示すサブタイトルが重畳され、「Region2」のリージョンには、「Shall we ?」の文字を示すサブタイトルが重畳されている。この場合、各サブタイトルは、視差情報を用いて、画像の最も近い位置よりさらに手前に認識可能にされる。
【００７４】
上述の視差情報リンク記述子における「Subtitle_disparity_flg」の１ビットのフラグデータが例えば“１”で、サブタイトル向けの視差情報が設定される場合を説明する。この場合、視差情報としては、上述したように、表示期間（Display set）単位で、各ページ（page）の各リージョン（region）の視差情報が設定される。この場合、各リージョンの視差情報は、表示期間を構成する所定数のフレーム期間で共通に使用される１個である場合、あるいは、所定数のフレーム期間で順次更新される複数個である場合などがある。
【００７５】
上述したように、視差情報が表示期間（display set）を構成する所定数のフレーム期間で共通に使用される１個である場合、サブタイトルの深さ（奥行き）は、その表示期間の間は一定となる。図１０は、その場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示している。
【００７６】
また、上述したように、視差情報が表示期間を構成する所定数のフレーム期間で順次更新される複数個である場合、サブタイトルの深さ（奥行き）は、その表示期間の間、立体画像内のオブジェクトの位置変動に応じて変化させることができる。図１１は、その場合における、表示期間内の各フレームにおけるサブタイトル「subtitle」の深さの一例を示している。
【００７７】
図１２は、サブタイトルデータの構造を示している。サブタイトルデータは、ＰＥＳヘッダ（PES header）と、このＰＥＳヘッダに続く各表示期間（display set）のデータとから構成されている。そして、各表示期間（display set）のデータは、「ＤＤＳ」、「ＰＣＳ」、「ＣＤＳ」、「ＲＣＳ」、「ＯＤＳ」、「ＥＤＳ」のセグメントの他に、新たに定義する「３ＤＳ」により構成されている。
【００７８】
「ＤＤＳ」は、ディスプレイ・デフィニション・セグメント（Display Definition Segment）であり、サブタイトル（字幕）の表示領域を規定する。「ＰＣＳ」ページ・コンポジション・セグメント（Page Composition Segment）であり、ページ（Page）全体の状態と、ページ（Page）を構成する各リージョン（region）と、その位置情報を示す。「ＲＣＳ」は、リージョン・コンポジション・セグメント（Region Composition Segment）であり、リージョン（Region）に配置される各オブジェクト（object）と、その位置情報を示す。
【００７９】
「ＣＤＳ」は、ＣＬＵＴ・デフィニション・セグメント（CLUT Definition Segment）であり、「ＲＣＳ」で指定される各ＣＬＵＴ(ColorLook-up Table)のデータである。「ＯＤＳ」は、オブジェクト・データ・セグメント（ObjectData Segment）であり、各オブジェクト（Object）のデータである。この「ＯＤＳ」には、オブジェクト（Object）のタイプによりビットマップデータかテキストデータが記述される。「ＥＤＳ」は、エンド・オブ・ディスプレイ・セグメント（End or Display set Segment）であり、表示期間（Displayset）の伝送の終わりを示す。
【００８０】
「３ＤＳ」は、３Ｄ・セグメント（3D Segment）であり、サブタイトル向けの視差情報に関する種々の情報を持つ。視差情報として、表示期間（display set）を構成する所定数のフレーム期間で共通に使用される１個の視差情報が存在する場合、「３ＤＳ」には、その視差情報（Disparity Data）が含まれる。また、視差情報として、表示期間（displayset）を構成する所定数のフレーム期間で順次更新される複数個の視差情報（視差情報列）が設定されている場合、「３ＤＳ」には、視差情報ストリーム内のその視差情報列を識別する識別情報が含まれる。この「３ＤＳ」の詳細な構造例については、後述する。
【００８１】
図１３は、サブタイトルストリーム（ＰＥＳ）、つまりＤＶＢ_Subtitlingの構造（Syntax）を示している。この構造は、ＥＴＳＩ（European Telecommunications Standards Institute）で規格化されている（ETSI EN 300 743）。この図１３の構造は、ＰＥＳレイヤから見たものである。「PES_data_field」には、「data_identifier」で示される、サブタイトルデータであることを示す８ビット情報が含まれている。また、この「PES_data_field」には、「Subtitle_stream_id」で示される、サブタイトルストリームを識別するための８ビット情報が含まれている。
【００８２】
また、この「PES_data_field」には、「Subtitling_segment」が含まれている。そして、この「Subtitling_segment」は、「Sync_byte」、「segment_type」、「page_id」、「segment_length」、「segment_data_field」の各情報を含んでいる。「page_id」は、各ページを識別するための識別情報である。
【００８３】
「segment_type」は８ビットの情報であり、セグメントのタイプ（種類）を示す。図１４は、「segment_type」の各値とセグメントタイプとの対応関係を示している。例えば、「0x10」は、ＰＣＳ（page composition segment）を示す。また、[0x11]は、ＲＣＳ（Region Composition Segment）を示す。
【００８４】
また、例えば、「0x40」は、従来リザーブとされているが、ここでは、３ＤＳ(3D segment)を示すものとして、新たに定義される。従来の３Ｄ対応でないサブタイトルデコーダは、「0x40」はリザーブなので、このセグメントは読み飛ばすことになる。これに対して、３Ｄ対応のデコーダは、「0x40」は「３ＤＳ」と認識するので、このセグメントからサブタイトル向けの視差情報に関する種々の情報を読み取ることが可能となる。
【００８５】
［３Ｄセグメントの説明］
図１５は、３ＤＳ(3D segment)の構造例（syntax）を示している。図１６は、３ＤＳのデータ規定内容（semantics）を示している。「3D_segment」は、「Sync_byte」、「segment_type」、「page_id」、「segment_length」の各情報を含んでいる。「page_id」は、各ページを識別するための識別情報である。「segment_type」は、セグメントタイプを示す８ビットのデータであり、ここでは、「３ＤＳ」を示す「0x40」とされている。「segment_length」は、セグメントの長さ（サイズ）を示す８ビットのデータである。このデータは、セグメントの長さとして、「segment _length」以降のバイト数を示す。
【００８６】
また、「3D_segment」は、「disparity_static_supply」、「disparity_sequence_supply」の各情報を含んでいる。「disparity_static_supply」は、リージョン（Region）／表示期間（Display set）単位に、固定の視差情報（Disparity Data）の値を供給するか否かを示す１ビットのデータである。例えば、“１”は、供給することを示し、“０”は、供給しないことを示す。すなわち、「disparity_static_supply=1」は、リージョン毎に、表示期間（displayset）を構成する所定数のフレーム期間で共通に使用される１個の視差情報が存在することを示す。
【００８７】
また、「disparity_sequence_supply」は、１ビットのデータである。このデータは、リージョン（Region）／表示期間（Display set）単位に、視差情報（Disparity Data）の値の時間変動を示す視差情報シーケンス（Disparitysequence）を供給するか否かを示す。例えば、“１”は、供給することを示し、“０”は、供給しないことを示す。すなわち、「disparity_sequence_supply =1」は、リージョン毎に、表示期間（displayset）を構成する所定数のフレーム期間で順次更新される複数個の視差情報シーケンス（視差情報列）が設定されていることを示す。
【００８８】
また、「3D_segment」は、「select_view_shift」、「number_of_regions」の各情報を含んでいる。「select_view_shift」は、シフト対象指定情報を構成する２ビットのデータである。このデータは、左眼画像および右眼画像に重畳するサブタイトルのうち、視差情報（Disparity Data）に基づいてシフトさせるサブタイトルを指定する。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。「number_of_regions」は、リージョン（Region）の数を示す。
【００８９】
また、「3D_segment」は、リージョン数だけ、「disparity_value」、「disparity_sequence_id」のいずれか、あるいは双方のデータを含んでいる。「disparity_value」は、「disparity_static_supply」が例えば“１”で、固定の視差情報（Disparity Data）の値を供給する場合に含まれる。この「disparity_value」は、上述したリージョン（Region）／表示期間（Display set）単位のそれぞれの視差情報の値を示す８ビットのデータである。このデータの詳細については、後述する視差情報ストリーム（Disparity Stream）の部分で、さらに説明する。
【００９０】
また、「disparity_sequence_id」は、「disparity_sequence_supply」が例えば“１”で、視差情報シーケンス（Disparity sequence）を供給する場合に含まれる。この「disparity_sequence_id」は、上述したリージョン（Region）／表示期間（Display set）単位のそれぞれの視差情報の値の時間変動を示す、視差情報ストリーム上の特定の視差情報シーケンスを指定する識別子である。
【００９１】
［視差情報ストリームの説明］
次に、視差情報（Disparity data）を視差情報ストリームに埋め込む場合について説明する。図１７は、視差情報ストリームの構造（Syntax）、すなわち視差情報（disparity_data）を含むPES_data_fieldの構造の一例を示している。この構造には、「data_identifier」、「disparity_stream_id」、「disparity_data_set」、「end_of_PES_data_field_marker」などの情報が含まれている。
【００９２】
図１８は、「disparity_data_set」の構造（Syntax）を示している。図１９は、「disparity_data_set」の主要なデータ規定内容（semantics）を示している。この構造には、「sync_byte」、「disparity_sequence_id」、「select_view_shift」、「fram_count」、「disparity_value」などの情報が含まれている。「disparity_sequence_id」は、視差情報シーケンス（Disparity sequence）の識別子を示す。
【００９３】
「select_view_shift」は、シフト対象指定情報を構成する２ビットの情報である。この「select_view_shift」は、左眼画像に重畳するサービス・コンポーネントおよび右眼画像に重畳するサービス・コンポーネントのうち、視差情報に基づいてシフトさせるサービス・コンポーネントを指定する。例えば、「select_view_shift=00」はリザーブとされる。サービス・コンポーネントは、サブタイトル情報、クローズド・キャプション情報などである。
【００９４】
また、例えば、「select_view_shift=‘01’」であるとき、左眼画像に重畳するサービス・コンポーネント（サブタイトルなど）のみを、視差情報（disparity）分だけ、水平方向にシフトさせることを示す。ここで、視差情報（disparity）が正の値であるときは、左眼画像に重畳するサービス・コンポーネントは、右方向にシフトされる。一方、視差情報（disparity）が負の値であるときは、左眼画像に重畳するサービス・コンポーネントは、左方向にシフトされる。
【００９５】
また、例えば、「select_view_shift=‘10’」であるとき、右眼画像に重畳するサービス・コンポーネントのみを、視差情報（disparity）分だけ、水平方向にシフトさせることを示す。ここで、視差情報（disparity）が正の値であるときは、右眼画像に重畳するサービス・コンポーネントは、右方向にシフトされる。一方、視差情報（disparity）が負の値であるときは、右眼画像に重畳するサービス・コンポーネントは、左方向にシフトされる。
【００９６】
また、例えば、「select_view_shift=11」であるとき、左眼画像に重畳するサービス・コンポーネントおよび右眼画像に重畳するサービス・コンポーネントの双方を、水平方向の互いに逆の方向にシフトさせることを示す。ここで、左眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity ）が偶数値である場合、正のときは「disparity／２」分だけ右方向にシフトされ、負のときは「disparity／２」分だけ左方向にシフトされる。また、右眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity）が偶数値である場合、正のときは「disparity／２」分だけ左方向にシフトされ、負のときは「disparity／２」分だけ右方向にシフトされる。
【００９７】
また、左眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity）が奇数値である場合、正のときは「（disparity＋１）／２」分だけ右方向にシフトされ、負のときは「（disparity＋１）／２」分だけ左方向にシフトされる。また、右眼画像に重畳するサービス・コンポーネントは、視差情報の値（disparity）が奇数値である場合、正のときは「（disparity−１）／２」分だけ左方向にシフトされ、負のときは「（disparity−１）／２」分だけ右方向にシフトされる。
【００９８】
「frame_count」は、表示期間（Display set）に含まれるフレームの数を示す。「disparity_value」は、視差情報の値を示す８ビットのデータであり、−１２８〜＋１２７の範囲の値をとる。このデータの値が正の値であるとき、３Ｄの深さ（奥行き）は、スクリーンより遠くになる。一方、このデータの値が負の値であるとき、３Ｄの深さ（奥行き）は、スクリーンより近くになる。
【００９９】
「disparity_sequence_id」で特定される「disparity_data_set」には、「frame_count」で示されるフレームの数だけ、「disparity_value」が含まれる。つまり、「disparity_sequence_id」で示される視差情報シーケンス（Disparity sequence）は、「fram_count」で示されるフレームの数の「disparity_value」からなる視差情報列となる。
【０１００】
［送信データ生成部の動作］
図２に示す送信データ生成部１１０の動作を簡単に説明する。データ取り出し部１１１から出力される所定番組の立体（３Ｄ）画像データは、ビデオエンコーダ１１２に供給される。このビデオエンコーダ１１２では、その画像データに対して、ＭＰＥＧ４−ＡＶＣ、ＭＰＥＧ２等の符号化が施され、符号化ビデオデータを含むビデオのエレメンタリストリームが生成される。このビデオのエレメンタリストリームは、マルチプレクサ１１７に供給される。
【０１０１】
また、データ取り出し部１１１から上述したように所定番組の立体画像データが出力される場合、データ記録媒体にその立体画像データに対応した視差情報が記録されているとき、データ取り出し部１１１からはその視差情報も出力される。この視差情報は、上述したように、番組単位の視差情報、汎用目的の視差情報、特定用途向け（この実施の形態においてはサブタイトル向け）等の視差情報である。
【０１０２】
また、特定用途向けの視差情報には、所定番組の立体画像データに対応付けて、表示期間（Display set）単位で、各ページ（page）の各リージョン（region）の視差情報が存在する。そして、各リージョンの視差情報は、表示期間を構成する所定数のフレーム期間で共通に使用される１個である場合、あるいは、所定数のフレーム期間で順次更新される複数個である場合がある。これらの各視差情報は、単独で存在する場合の他、重複して存在することもある。
【０１０３】
データ取り出し部１１１から出力される視差情報が番組単位の視差情報である場合、この視差情報は、マルチプレクサ１１７に供給される。また、データ取り出し部１１１から出力される視差情報が汎用目的の視差情報である場合、その視差情報は視差情報エンコーダ１１３に供給される。
【０１０４】
また、データ取り出し部１１１から出力される視差情報が特定用途向けの視差情報であって、各リージョンの視差情報が所定数のフレーム期間で共通に使用される１個の場合、この視差情報は、サブタイトルエンコーダ１１６に供給される。さらに、データ取り出し部１１１から出力される視差情報が特定用途向けの視差情報であって、所定数のフレーム期間で順次更新される複数個である場合、その視差情報は視差情報エンコーダ１１３に供給される。
【０１０５】
視差情報エンコーダ１１３では、視差情報に対して所定の符号化が施され、符号化データを含む視差情報エレメンタリストリーム（図１７〜図１９参照）が生成される。この視差情報エレメンタリストリームはマルチプレクサ１１７に供給される。なお、汎用目的の視差情報と、特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個）とが併存する場合、これらの視差情報は、例えば「disparity_sequence_id」で区別可能に含まれる。
【０１０６】
また、データ取り出し部１１１から上述したように所定番組の立体画像データが出力される場合、このデータ取り出し部１１１からその画像データに対応した音声データも出力される。この音声データは、オーディオエンコーダ１１４に供給される。このオーディオエンコーダ１１４では、音声データに対して、ＭＰＥＧ−２Ａｕｄｉｏ ＡＡＣ等の符号化が施され、符号化オーディオデータを含むオーディオエレメンタリストリームが生成される。このオーディオエレメンタリストリームはマルチプレクサ１１７に供給される。
【０１０７】
また、データ取り出し部１１１から出力される画像データに対応してサブタイトル発生部１１５では、画像（ビュー）に重畳するサブタイトルのデータ（サブタイトルデータ）が発生される。このサブタイトルデータは、サブタイトルエンコーダ１１６に供給される。サブタイトルエンコーダ１１６では、このサブタイトルデータに対して所定の符号化が施され、符号化データを含むサブタイトルエレメンタリストリームが生成される。このサブタイトルエレメンタリストリームはマルチプレクサ１１７に供給される。
【０１０８】
ここで、サブタイトルデータには、各表示期間（Display set）のデータとして、サブタイトル向けの視差情報に関する種々の情報を持つ３Ｄ・セグメント（３ＤＳ）（図１５、図１６参照）が含まれている。サブタイトルエンコーダ１１６では、データ取り出し部１１１からサブタイトル向けの視差情報（所定数のフレーム期間で共通に使用される各リージョンの１個の視差情報）が、３Ｄ・セグメントに「disparity_value」の情報として挿入される。その場合、「disparity_static_supply」のデータは、例えば“１”とされ、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の供給が示される。
【０１０９】
また、上述したように、データ取り出し部１１１から特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個である場合）が出力される場合、「disparity_sequence_supply」のデータは、例えば“１”とされる。これにより、リージョン（Region）／表示期間（Display set）単位に、視差情報（Disparity Data）の値の時間変動を示す視差情報シーケンス（Disparitysequence）の供給が示される。そして、「disparity_sequence_id」は、リージョン（Region）／表示期間（Display set）単位のそれぞれの視差情報の値の時間変動を示す、視差情報ストリーム上の特定の視差情報シーケンスを指定する識別子とされる。
【０１１０】
マルチプレクサ１１７では、各エンコーダから供給されるエレメンタリストリームがパケット化されて多重され、トランスポートストリームＴＳが生成される。この場合、トランスポートストリームＴＳには、ステレオ映像記述子（Stereoscopic_descriptor）（図５、図６参照）が挿入される。また、この場合、トランスポートストリームＴＳには、さらに必要に応じて、視差情報リンク記述子（Disparity_Link_descriptor）（図７、図８参照）が挿入される。これらの記述子は、ＥＩＴの配下に挿入される（図４参照）。
【０１１１】
データ取り出し部１１１から番組単位の視差情報が出力される場合、ステレオ映像記述子の「event_disparity_supply」の情報は、例えば“１”とされる。これにより、番組単位の視差情報の供給が示される。そして、その場合、この番組単位の視差情報が、ステレオ映像記述子に、「disparity_value」の情報として挿入される。また、データ取り出し部１１１から汎用目的の視差情報およびサブタイトル向けの視差情報の少なくともいずれかが出力される場合、ステレオ映像記述子の「detailed_disparity_supply」の情報は、例えば“１”とされる。この場合、トランスポートストリームＴＳには、視差情報リンク記述子（Disparity_Link_descriptor）が挿入される。
【０１１２】
また、データ取り出し部１１１から汎用目的の視差情報が出力される場合、視差情報リンク記述子の「general_use_disparity_flg」のフラグデータは、例えば“１”とされる。これにより、汎用目的の視差情報の供給が示される。また、データ取り出し部１１１からサブタイトル向けの視差情報が出力される場合、視差情報リンク記述子の「subtitle_disparity_flg」のフラグデータは、例えば“１”とされる。これにより、サブタイトル向けの視差情報の供給が示される。
【０１１３】
「受信機の構成例」
図２０は、受信機２００の構成例を示している。この受信機２００は、アンテナ端子２０１と、デジタルチューナ２０２と、デマルチプレクサ２０３と、ビデオデコーダ２０４と、３Ｄ信号処理部２０５を有している。また、受信機２００は、サブタイトルデコーダ２０６と、サブタイトル発生部２０７と、視差情報デコーダ２０８と、メタデータ処理部２０９と、視差情報出力部２１０と、ＯＳＤ表示データ生成部２１１を有している。また、受信機２００は、画像・表示データ重畳部２１２と、ディスプレイ２１３と、オーディオデコーダ２１４と、音声処理回路２１５と、音声増幅回路２１６と、スピーカ２１７を有している。
【０１１４】
アンテナ端子２０１は、受信アンテナ（図示せず）で受信されたテレビ放送信号を入力する端子である。デジタルチューナ２０２は、アンテナ端子２０１に入力されたテレビ放送信号を処理して、ユーザの選択チャネルに対応した所定のトランスポートストリーム（ビットストリームデータ）ＴＳ（図３参照）を出力する。デマルチプレクサ２０３は、デジタルチューナ２０２から出力されるトランスポートストリームＴＳから、ビデオ、オーディオ、サブタイトル、視差情報の各エレメンタリストリームを抽出する。また、デマルチプレクサ２０３は、このトランスポートストリームＴＳから、ＥＩＴ、ＰＭＴなどのテーブルも抽出する。
【０１１５】
ビデオデコーダ２０４は、上述の送信データ生成部１１０のビデオエンコーダ１１２とは逆の処理を行う。すなわち、このビデオデコーダ２０４は、デマルチプレクサ２０３で抽出されたビデオエレメンタリストリームに含まれる符号化画像データに対して復号化処理を行って、復号化された立体画像データを得る。３Ｄ信号処理部２０５は、ビデオデコーダ２０４で得られた立体画像データに対して、３Ｄフォーマットに対応した処理を行って左眼画像データＳＬおよび右眼画像データＳＲを生成する。
【０１１６】
サブタイトルデコーダ２０６は、上述の送信データ生成部１１０のサブタイトルエンコーダ１１６とは逆の処理を行う。すなわち、サブタイトルデコーダ２０６は、デマルチプレクサ２０３で抽出されたサブタイトルエレメンタリストリームに含まれる符号化サブタイトルデータに対して復号化処理を行って、復号化されたサブタイトルデータを得る。
【０１１７】
サブタイトルデコーダ２０６は、３Ｄ・セグメント（３ＤＳ）に含まれるサブタイトル向けの視差情報に関する種々の情報を取得する。例えば、サブタイトルデコーダ２０６は、３Ｄ・セグメントから、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の供給があるか否かを示す「disparity_static_supply」の情報を取得する。また、例えば、サブタイトルデコーダ２０６は、３Ｄ・セグメントから、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスの供給があるか否かを示す「disparity_sequence_supply」の情報を取得する。
【０１１８】
また、サブタイトルデコーダ２０６は、特定用途向けの視差情報（所定数のフレーム期間で共通に使用される各リージョンの１個の視差情報）の伝送がある場合、その視差情報が３Ｄ・セグメントに含まれていることから、その視差情報も取得する。サブタイトル発生部２０７は、サブタイトルデコーダ２０６で得られたサブタイトルデータに基づいて、画像に重畳するサブタイトルの表示データを発生する。
【０１１９】
視差情報デコーダ２０８は、上述の送信データ生成部１１０の視差情報エンコーダ１１３とは逆の処理を行う。すなわち、この視差情報デコーダ２０８は、デマルチプレクサ２０３で抽出された視差情報エレメンタリストリームに含まれる符号化された視差情報に対して復号化処理を行って、復号化された視差情報を得る。ここで、視差情報デコーダ２０８は、汎用目的の視差情報および特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個の視差情報）のいずれか、あるいは双方の伝送がある場合のみ、それらの視差情報を得る。
【０１２０】
メタデータ処理部２０９は、デマルチプレクサ２０３から出力されるＥＩＴの配下に挿入されているステレオ映像記述子（図５、図６参照）、視差情報リンク記述子（図７、図８参照）を処理して、視差情報に関する種々の情報を得る。例えば、メタデータ処理部２０９は、ステレオ映像記述子から、番組単位の視差情報の伝送があるか否かを識別するための「event_disparity_supply」の情報を取得する。また、例えば、メタデータ処理部２０９は、ステレオ映像記述子から、詳細な視差情報の伝送があるか否かを識別するための「detailed_disparity_supply」の情報を取得する。ここで、メタデータ処理部２０９は、番組単位の識別情報の伝送がある場合、その視差情報がステレオ映像記述子に含まれていることから、その視差情報も取得する。
【０１２１】
また、例えば、メタデータ処理部２０９は、視差情報リンク記述子から、汎用目的の視差情報の伝送があるか否かを識別する「general_use_disparity_flg」の情報を取得する。また、例えば、メタデータ処理部２０９は、視差情報リンク記述子から、サブタイトル向けの視差情報の伝送があるか否かを識別する「subtitle_disparity_flg」の情報を取得する。また、例えば、メタデータ処理部２０９は、視差情報リンク記述子から、「disparity_component」の情報を取得する。この情報は、視差情報が含まれる視差情報ストリームを示すコンポーネント・タグ（component_tag）の値を示し、このコンポーネント・タグの値に基づいて視差情報ストリームのパケット識別子（PID）を取得できる。
【０１２２】
視差情報出力部２１０は、視差情報デコーダ２０８からの視差情報、サブタイトルデコーダ２０６からの視差情報に関する種々の情報、およびメタデータ処理部２０９からの視差情報に関する種々の情報に基づいて、使用すべき視差情報を決定して出力する。
【０１２３】
図２１のフローチャートは、重畳情報がＯＳＤ表示である場合における、視差情報出力部２１０の処理手順の一例を示している。視差情報出力部２１０は、ステップＳＴ１において、処理を開始し、その後に、ステップＳＴ２の処理に移る。このステップＳＴ２において、視差情報出力部２１０は、ステレオ映像記述子の「detailed_disparity_supply」の情報を参照し、詳細な視差情報の伝送があるか否かを判断する。
【０１２４】
「detailed_disparity_supply=1」であって、詳細な視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ３の処理に移る。このステップＳＴ３において、視差情報出力部２１０は、視差情報リンク記述子の「general_use_disparity_flg」の情報を参照して、汎用目的の視差情報の伝送があるか否かを判断する。「general_use_disparity_flg=1」であって、汎用目的の視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ４の処理に移る。このステップＳＴ４において、視差情報出力部２１０は、視差情報デコーダ２０８で視差情報ストリームから取得される汎用目的の視差情報を、使用すべき視差情報に決定して出力する。
【０１２５】
ステップＳＴ２で「detailed_disparity_supply=0」であって、詳細な視差情報の伝送がないと識別されるとき、視差情報出力部２１０は、ステップＳＴ５の処理に移る。また、同様に、ステップＳＴ３で「general_use_disparity_flg=0」であって、汎用目的の視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ５の処理に移る。このステップＳＴ５において、視差情報出力部２１０は、ステレオ映像記述子の「event_disparity_supply」の情報を参照して、番組単位の視差情報の伝送があるか否かを判断する。
【０１２６】
「event_disparity_supply=1」であって、番組単位の視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ６の処理に移る。このステップＳＴ６において、視差情報出力部２１０は、メタデータ処理部２０９でステレオ映像記述子から取得される番組単位の視差情報（Disparity_value）を、使用すべき視差情報に決定して出力する。また、「event_disparity_supply=0」であって、番組単位の視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ７の処理に移る。このステップＳＴ７において、視差情報出力部２１０は、受信機２００に予め用意されている視差情報を、使用すべき視差情報に決定して出力する。
【０１２７】
図２２のフローチャートは、重畳情報がサブタイトルである場合における、視差情報出力部２１０の処理手順の一例を示している。視差情報出力部２１０は、ステップＳＴ１１において、処理を開始し、その後に、ステップＳＴ１２の処理に移る。次に、視差情報出力部２１０は、ステップＳＴ１２において、ステレオ映像記述子の「detailed_disparity_supply」の情報を参照し、詳細な視差情報の伝送があるか否かを判断する。
【０１２８】
「detailed_disparity_supply=1」であって、詳細な視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ１３の処理に移る。このステップＳＴ１３において、視差情報出力部２１０は、視差情報リンク記述子の「subtitle_disparity_flg」の情報を参照して、サブタイトル向けの視差情報の伝送があるか否かを判断する。「subtitle_disparity_flg=1」であって、サブタイトル向けの視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ1４の判断処理に移る。
【０１２９】
このステップＳＴ1４において、視差情報出力部２１０は、３Ｄ・セグメント（３ＤＳ）から取得された「disparity_static_supply」、「disparity_sequence_supply」の情報を参照して判断処理を行う。視差情報出力部２１０は、「disparity_sequence_supply=1」であって、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスの供給があると判断するとき、ステップＳＴ１５の処理に移る。このステップＳＴ１５において、視差情報出力部２１０は、視差情報デコーダ２０８で視差情報ストリームから取得されるリージョン（Region）／表示期間（Display set）単位の視差情報シーケンスを、使用すべき視差情報に決定して出力する。
【０１３０】
また、視差情報出力部２１０は、「disparity_static_supply=1」、「disparity_sequence_supply=0」であるとき、リージョン（Region）／表示期間（Display set）単位の固定視差情報の供給のみがあると判断する。そして、視差情報出力部２１０は、このとき、ステップＳＴ１６の処理に移る。このステップＳＴ１６において、視差情報出力部２１０は、サブタイトルデコーダ２０６で取得されるリージョン（Region）／表示期間（Display set）単位の固定視差情報を、使用すべき視差情報に決定して出力する。
【０１３１】
ステップＳＴ１２で「detailed_disparity_supply=0」であって、詳細な視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ１７の処理に移る。また、同様に、ステップＳＴ１３で「subtitle_disparity_flg=0」であって、サブタイトル向けの視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ１７の処理に移る。さらに、視差情報出力部２１０は、ステップＳＴ１４で「disparity_static_supply=0」、「disparity_sequence_supply=0」であるとき、ステップＳＴ１７の処理に移る。この場合、視差情報出力部２１０は、リージョン（Region）／表示期間（Display set）単位の、固定視差情報および視差情報シーケンスのいずれの伝送もないと判断する。
【０１３２】
このステップＳＴ１７において、視差情報出力部２１０は、ステレオ映像記述子の「event_disparity_supply」の情報を参照して、番組単位の視差情報の伝送があるか否かを判断する。「event_disparity_supply=1」であって、番組単位の視差情報の伝送があると判断するとき、視差情報出力部２１０は、ステップＳＴ１８の処理に移る。このステップＳＴ１８において、視差情報出力部２１０は、メタデータ処理部２０９でステレオ映像記述子から取得される番組単位の視差情報（Disparity_value）を、使用すべき視差情報に決定して出力する。また、「event_disparity_supply=0」であって、番組単位の視差情報の伝送がないと判断するとき、視差情報出力部２１０は、ステップＳＴ１９の処理に移る。このステップＳＴ１９において、視差情報出力部２１０は、受信機２００に予め用意されている視差情報を、使用すべき視差情報に決定して出力する。
【０１３３】
図２０に戻って、画像・表示データ重畳部２１２は、３Ｄ信号処理部２０５で得られた左眼画像データおよび右眼画像データに対して、サブタイトル表示データおよびＯＳＤ表示データを重畳する。この場合、画像・表示データ重畳部２１２は、左眼画像および右眼画像に重ねて表示される重畳情報（サブタイトル、ＯＳＤ表示）に対して、視差情報出力部２１０から出力される視差情報に基づいてシフト処理を行って、視差を付与する。
【０１３４】
図２３は、画像・表示データ重畳部２１２の構成例を示している。この画像・表示データ重畳部２１２は、Ｌビデオプレーン３０１と、Ｒビデオプレーン３０２と、スイッチ部３０３と、サブタイトルプレーン３０４と、ＯＳＤ表示プレーン３０５と、シフト部３０６，３０７と、重畳部３０８を有している。
【０１３５】
Ｌビデオプレーン３０１は、３Ｄ信号処理部２０５から出力される左眼画像データを一時的に蓄積する。Ｒビデオプレーン３０２は、３Ｄ信号処理部２０５から出力される右眼画像データを一時的に蓄積する。スイッチ部３０３は、Ｌビデオプレーン３０１およびＲビデオプレーン３０２から交互に画像データを取り出して出力する。つまり、スイッチ部３０３は、左眼画像データおよび右眼画像データを交互に出力する。
【０１３６】
サブタイトルプレーン３０４は、サブタイトル発生部２０７で発生されるサブタイトル表示データを一時的に蓄積する。シフト部３０６は、サブタイトルプレーン３０４から、サブタイトル表示データを取り出し、視差情報出力部２１０から出力される視差情報に基づいて、シフト処理を施す。この処理により、左眼画像および右眼画像に重畳されるサブタイトルに左右方向のずれが与えられて、視差が付与される。シフト部３０６は、スイッチ部３０３からの左眼画像データおよび右眼画像データの出力に同期して、左眼画像データおよび右眼画像データに重畳するサブタイトル表示データを出力する。
【０１３７】
この場合、視差情報出力部２１０から出力される視差情報が表示期間（Display set）単位の視差情報シーケンスであるときは、表示期間（Displayset）単位で、さらにフレーム毎に順次変化する視差が、リージョン毎に付与される。また、この場合、視差情報出力部２１０から出力される視差情報が表示期間（Display set）単位の固定視差情報であるときは、表示期間（Display set）単位で固定の視差が、リージョン毎に付与される。
【０１３８】
また、この場合、視差情報出力部２１０から出力される視差情報が番組単位の視差情報であるときは、番組単位で固定の視差が各リージョンに付与される。さらに、この場合、視差情報出力部２１０から出力される視差情報が受信機２００に予め用意された視差情報であるときは、その視差情報による視差が付与される。
【０１３９】
ＯＳＤ表示プレーン３０５は、ＯＳＤ表示データ生成部２１１で生成されるＯＳＤ表示データを一時的に蓄積する。シフト部３０７は、ＯＳＤ表示プレーン３０５から、ＯＳＤ表示データを取り出し、視差情報出力部２１０から出力される視差情報に基づいて、シフト処理を施す。この処理により、左眼画像および右眼画像に重畳されるＯＳＤ表示に左右方向のずれが与えられて、視差が付与される。シフト部３０７は、スイッチ部３０３からの左眼画像データおよび右眼画像データの出力に同期して、左眼画像データおよび右眼画像データに重畳するＯＳＤ表示データを出力する。
【０１４０】
この場合、視差情報出力部２１０から出力される視差情報が汎用目的の視差情報であるときは、この視差情報に基づいて、例えば、各ＯＳＤ表示位置に対応した視差が付与される。また、この場合、視差情報出力部２１０から出力される視差情報が番組単位の視差情報であるときは、番組単位で固定の視差が各ＯＳＤ表示に付与される。さらに、この場合、視差情報出力部２１０から出力される視差情報が受信機２００に予め用意された視差情報であるときは、その視差情報による視差が各ＯＳＤ表示に付与される。
【０１４１】
重畳部３０８は、スイッチ部３０３から出力される左眼画像データおよび右眼画像データに対して、シフト部３０６から出力されるサブタイトル表示データおよびシフト部３０７から出力されるＯＳＤ表示データを重畳する。そして、重畳部３０８は、サブタイトルやＯＳＤ表示が重畳された左眼画像のデータＳＬ′と、サブタイトルやＯＳＤ表示が重畳された右眼画像のデータＳＲ′を交互に出力する。
【０１４２】
図２０に戻って、ディスプレイ２１３は、例えば、液晶表示パネル、プラズマディスプレイなどにより構成される。このディスプレイ２１３は、画像・表示データ重畳部２１２から出力される左眼画像データＳＬ′および右眼画像データＳＲ′による画像を交互に表示する。このようにディスプレイ２１３に表示される左眼画像および右眼画像は、例えば、図示しないシャッタメガネを装着した視聴者の左眼および右眼で知覚され、立体画像が呈示可能とされる。
【０１４３】
オーディオデコーダ２１４は、上述の送信データ生成部１１０のオーディオエンコーダ１１４とは逆の処理を行う。すなわち、オーディオデコーダ２１４は、デマルチプレクサ２０３で抽出されたオーディオエレメンタリストリームに含まれる符号化音声データに対して復号化処理を行って、復号化された音声データを得る。音声信号処理回路２１５は、オーディオデコーダ２１４で得られた音声データに対してＤ／Ａ変換等の必要な処理を行う。音声増幅回路２１６は、音声信号処理回路２１５から出力される音声信号を増幅してスピーカ２１７に供給する。
【０１４４】
［受信機の動作］
図２０に示す受信機２００の動作を簡単に説明する。アンテナ端子２０１に入力されたテレビ放送信号はデジタルチューナ２０２に供給される。このデジタルチューナ２０２では、テレビ放送信号が処理されて、ユーザの選択チャネルに対応した所定のトランスポートストリームＴＳが出力される。このトランスポートストリームＴＳは、デマルチプレクサ２０３に供給される。デマルチプレクサ２０３では、トランスポートストリームＴＳから、ビデオ、サブタイトル、視差情報およびオーディオの各エレメンタリストリームが抽出される。また、デマルチプレクサ２０３では、トランスポートストリームＴＳから、ＥＩＴ、ＰＭＴなどのテーブルも抽出される。
【０１４５】
デマルチプレクサ２０３で抽出されるビデオエレメンタリストリームは、ビデオデコーダ２０４に供給される。ビデオデコーダ２０４では、ビデオエレメンタリストリームに含まれる符号化画像データに対して復号化処理が行われて、復号化された立体画像データが得られる。この立体画像データは、３Ｄ信号処理部２０５に供給される。３Ｄ信号処理部２０５では、立体画像データに対して、３Ｄフォーマットに対応した処理が行われて、左眼画像データＳＬおよび右眼画像データＳＲが生成される。この左眼画像データＳＬおよび右眼画像データＳＲは、画像・表示データ重畳部２１２に供給される。
【０１４６】
また、デマルチプレクサ２０３で抽出されるサブタイトルエレメンタリストリームは、サブタイトルデコーダ２０６に供給される。サブタイトルデコーダ２０６では、サブタイトルエレメンタリストリームに含まれる符号化サブタイトルデータに対して復号化処理が行われて、復号化されたサブタイトルデータが得られる。このサブタイトルデータは、サブタイトル発生部２０７に供給される。サブタイトル発生部２０７では、サブタイトルデータに基づいて、画像に重畳するサブタイトルの表示データが発生される。このサブタイトル表示データは、画像・表示データ重畳部２１２に供給される。
【０１４７】
また、サブタイトルデコーダ２０６では、３Ｄ・セグメント（３ＤＳ）に含まれるサブタイトル向けの視差情報に関する種々の情報が取得される。この情報は、視差情報出力部２１０に供給される。例えば、サブタイトルデコーダ２０６では、３Ｄ・セグメントから、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の供給があるか否かを示す「disparity_static_supply」の情報が取得される。また、例えば、サブタイトルデコーダ２０６では、３Ｄ・セグメントから、「disparity_sequence_supply」の情報が取得される。この情報は、上述したように、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンスの供給があるか否かを示す。
【０１４８】
また、デマルチプレクサ２０３で抽出される視差情報エレメンタリストリームは、視差情報デコーダ２０４に供給される。視差情報デコーダ２０８では、視差情報エレメンタリストリームに含まれる符号化された視差情報に対して復号化処理が行われて、復号化された視差情報が得られる。なお、視差情報デコーダ２０８では、汎用目的の視差情報および特定用途向けの視差情報（所定数のフレーム期間で順次更新される複数個の視差情報）のいずれか、あるいは双方の伝送がある場合のみ、それらの視差情報が得られる。この視差情報は、視差情報出力部２１０に供給される。
【０１４９】
また、メタデータ処理部２０９では、デマルチプレクサ２０３から出力されるＥＩＴの配下に挿入されているステレオ映像記述子（図５、図６参照）、視差情報リンク記述子（図７、図８参照）が処理されて、視差情報に関する種々の情報が得られる。例えば、メタデータ処理部２０９では、ステレオ映像記述子から、番組単位の視差情報の伝送があるか否かを識別するための「event_disparity_supply」の情報が取得される。また、例えば、メタデータ処理部２０９では、ステレオ映像記述子から、詳細な視差情報の伝送があるか否かを識別するための「detailed_disparity_supply」の情報が取得される。ここで、メタデータ処理部２０９では、番組単位の識別情報の伝送がある場合、その視差情報がステレオ映像記述子に含まれていることから、その視差情報も取得される。
【０１５０】
また、例えば、メタデータ処理部２０９では、視差情報リンク記述子から、汎用目的の視差情報の伝送があるか否かを識別する「general_use_disparity_flg」の情報が取得される。また、例えば、メタデータ処理部２０９では、視差情報リンク記述子から、サブタイトル向けの視差情報の伝送があるか否かを識別する「subtitle_disparity_flg」の情報が取得される。また、例えば、メタデータ処理部２０９では、視差情報リンク記述子から、「disparity_component」の情報が取得される。この情報は、視差情報が含まれる視差情報ストリームを示すコンポーネント・タグ（component_tag）の値を示し、このコンポーネント・タグの値に基づいて視差情報ストリームのパケット識別子（PID）を取得できる。メタデータ処理部２０９で取得される種々の情報は、視差情報出力部２１０に供給さされる。
【０１５１】
視差情報出力部２１０では、視差情報デコーダ２０８からの視差情報、サブタイトルデコーダ２０６からの視差情報に関する種々の情報、およびメタデータ処理部２０９からの視差情報に関する種々の情報に基づいて、使用すべき視差情報が決定されて出力される。
【０１５２】
例えば、重畳情報がＯＳＤ表示である場合、以下の視差情報が出力される。すなわち、汎用目的の視差情報の伝送があるとき、汎用目的の視差情報が、使用すべき視差情報に決定されて出力される。また、汎用目的の視差情報の伝送はないが、番組単位の視差情報の伝送があるとき、番組単位の視差情報が、使用すべき視差情報に決定されて出力される。さらに、汎用目的の視差情報の伝送がなく、番組単位の視差情報の伝送もないとき、受信機２００に予め用意されている視差情報が、使用すべき視差情報に決定されて出力される。
【０１５３】
また、例えば、重畳情報がサブタイトルの場合、以下の視差情報が出力される。すなわち、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンス（視差情報列）の伝送があるとき、この視差情報シーケンスが、使用すべき視差情報に決定されて出力される。また、上述の視差情報シーケンスの伝送はないが、リージョン（Region）／表示期間（Display set）単位の固定の視差情報の伝送があるとき、この固定視差情報が、使用すべき視差情報に決定されて出力される。
【０１５４】
また、リージョン（Region）／表示期間（Display set）単位の視差情報の伝送
はないが、番組単位の視差情報の伝送があるとき、番組単位の視差情報が、使用すべき視差情報に決定されて出力される。さらに、リージョン（Region）／表示期間（Display set）単位の視差情報の伝送がなく、番組単位の視差情報の伝送もないとき、受信機２００に予め用意されている視差情報が、使用すべき視差情報に決定されて出力される。
【０１５５】
このように視差情報出力部２１０で決定されて出力される視差情報は、画像・表示データ重畳部２１２に供給される。画像・表示データ重畳部２１２では、３Ｄ信号処理部２０５で得られた左眼画像データおよび右眼画像データに対して、サブタイトル発生部２０７で発生されたサブタイトル表示データおよびＯＳＤ表示データ生成部２１１で生成されたＯＳＤ表示データが重畳される。この場合、画像・表示データ重畳部２１２では、左眼画像および右眼画像に重ねて表示される重畳情報（サブタイトル、ＯＳＤ表示）に対して、視差情報出力部２１０から出力される視差情報に基づいてシフト処理が行われて、視差が付与される。
【０１５６】
画像・表示データ重畳部２１２からは、サブタイトルやＯＳＤ表示が重畳された左眼画像のデータＳＬ′と、サブタイトルやＯＳＤ表示が重畳された右眼画像のデータＳＲ′が交互に出力される。これらの画像データＳＬ′，ＳＲ′は、ディスプレイ２１３に供給される。ディスプレイ２１３では、左眼画像データＳＬ′および右眼画像データＳＲ′による画像が交互に表示される。このようにディスプレイ２１３に表示される左眼画像および右眼画像は、例えば、図示しないシャッタメガネを装着した視聴者の左眼および右眼で知覚され、視聴者に立体画像が認識される。
【０１５７】
この場合、上述したように、視差情報に基づいて、左眼画像および右眼画像に重畳される重畳情報（サブタイトル、ＯＳＤ表示）に視差が付与されている。そのため、これらの重畳情報は、視聴者に、画像の最も近い位置よりさらに手前に認識される。なお、この場合、使用する視差情報により、重畳情報の深さ（奥行き）が決定される。
【０１５８】
図２４は、サブタイトルの３Ｄ表示の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンス（視差情報列）が伝送されており、この視差情報シーケンスに基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１５９】
この例では、所定のページ（Page ID=P1）において、リージョン（Region ID=R1）にサブタイトル「Subtitle1」が表示され、リージョン（Region ID=R2）にサブタイトル「Subtitle2」が表示される。リージョン（Region ID=R1）の表示位置は（X1,Y1,X2,Y2）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle1”である。また、リージョン（Region ID=R2）の表示位置は（X3,Y3,X4,Y4）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle2”である。
【０１６０】
そして、この例では、サブタイトル「Subtitle1」に視差を付与するために、視差情報ストリームに含まれる「disparity_sequence_id=DS1」の視差情報シーケンス（視差情報列）が参照される。この視差情報シーケンスには、表示期間内の各時刻T10,T11,T12,・・・,T1nにそれぞれ対応した視差情報（Disparity Data）D10,D11,D12,・・・,D1nが含まれている。
【０１６１】
また、この例では、サブタイトル「Subtitle2」に視差を付与するために、視差情報ストリームに含まれる「disparity_sequence_id=DS2」の視差情報シーケンス（視差情報列）が参照される。この視差情報シーケンスには、表示期間内の各時刻T10,T11,T12,・・・,T1nにそれぞれ対応した視差情報（Disparity Data）D20,D21,D22,・・・,D2nが含まれている。
【０１６２】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、「disparity_sequence_id=DS1」、「disparity_sequence_id=DS2」の視差情報シーケンスにより、視差が付与される。この場合、サブタイトル「Subtitle1」、「Subtitle2」には、表示期間（Display set）内で、画像内容の変化に応じて、時々刻々と変化した視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、画像内容の変化に応じて、時々刻々と変化したものとなる。
【０１６３】
図２５は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の固定視差情報が伝送されており、この固定視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１６４】
この例では、所定のページ（Page ID=P1）において、リージョン（Region ID=R1）にサブタイトル「Subtitle1」が表示され、リージョン（Region ID=R2）にサブタイトル「Subtitle2」が表示される。リージョン（Region ID=R1）の表示位置は（X1,Y1,X2,Y2）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle1”である。また、リージョン（Region ID=R2）の表示位置は（X3,Y3,X4,Y4）であり、その表示期間はＴ１〜Ｔ２であり、その表示テキストは“Subtitle2”である。
【０１６５】
そして、この例では、サブタイトル「Subtitle1」に視差を付与するために、サブタイトルストリームに含まれる固定視差情報（Fixed Disparity=D1）が使用される。また、この例では、サブタイトル「Subtitle2」に視差を付与するために、サブタイトルストリームに含まれる固定視差情報（Fixed Disparity=D2）が使用される。
【０１６６】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、固定視差情報（Fixed Disparity=D1,D2）により、表示期間（Display set）内で、固定視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、一定となる。
【０１６７】
図２６は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の視差情報シーケンス（視差情報列）が伝送されており、この視差情報シーケンスに基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１６８】
この例では、ある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」に視差を付与するために、視差情報ストリームに含まれる、このサブタイトル「Subtitle1」に視差を付与するための視差情報シーケンス（視差情報列）が参照される。また、サブタイトル「Subtitle2」に視差を付与するために、視差情報ストリームに含まれる、このサブタイトル「Subtitle2」に視差を付与するための視差情報シーケンス（視差情報列）が参照される。
【０１６９】
この例では、ある表示期間および他の表示期間に左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、視差情報シーケンスにより、表示期間内で、画像内容の変化に応じて、時々刻々と変化した視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、画像内容の変化に応じて、時々刻々と変化したものとなる。
【０１７０】
図２７は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、リージョン（Region）／表示期間（Display set）単位の固定視差情報が伝送されており、この固定視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１７１】
この例では、ある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」に視差を付与するために、サブタイトルストリームに含まれる、このサブタイトル「Subtitle1」に視差を付与するための固定視差情報が使用される。また、サブタイトル「Subtitle2」に視差を付与するために、サブタイトルストリームに含まれる、このサブタイトル「Subtitle2」に視差を付与するための固定視差情報が使用される。
【０１７２】
この例では、ある表示期間および他の表示期間に左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、固定視差情報により、表示期間内で、固定の視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、表示期間（Display set）内で、一定となる。
【０１７３】
図２８は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、番組単位の視差情報が伝送されており、この視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１７４】
この例では、番組内のある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」、「Subtitle2」に視差を付与するために、ＥＩＴのステレオ映像記述子（Stereoscopic_descriptor）に含まれる、番組単位の視差情報（Ｄ１）が使用される。
【０１７５】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、番組単位の視差情報（Ｄ１）により、番組内で、固定の視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、番組内で、一定となる。
【０１７６】
図２９は、サブタイトルの３Ｄ表示の他の一例を示している。この例は、視差情報の伝送がなく、受信機２００に予め用意されている視差情報に基づいて、左眼画像および右眼画像に重畳するサブタイトルに視差が付与される場合の例である。
【０１７７】
この例では、番組内のある表示期間（Display set）において、あるリージョンにサブタイトル「Subtitle1」が表示され、他の表示期間（Display set）において、他のリージョンにサブタイトル「Subtitle2」が表示される。そして、サブタイトル「Subtitle1」、「Subtitle2」に視差を付与するために、受信機２００に予め用意されている視差情報が使用される。
【０１７８】
この例では、左眼画像および右眼画像に重畳されるサブタイトル「Subtitle1」、「Subtitle2」には、受信機２００に予め用意されている視差情報により、例えば、番組内で、固定の視差が付与される。したがって、視聴者に認識されるサブタイトル「Subtitle1」、「Subtitle2」の深さ（奥行き）は、番組内で、一定となる。
【０１７９】
また、図２０に戻って、デマルチプレクサ２０３で抽出されるオーディオエレメンタリストリームは、オーディオデコーダ２１４に供給される。オーディオデコーダ２１４では、オーディオエレメンタリストリームに含まれる符号化音声データに対して復号化処理が行われて、復号化された音声データが得られる。この音声データは、音声処理回路２１５に供給される。音声処理回路２１５では、音声データに対してＤ／Ａ変換等の必要な処理が施される。この音声データは、音声増幅回路２１６で増幅された後に、スピーカ２１７に供給される。そのため、スピーカ２１７からディスプレイ２１３の表示画像に対応した音声が出力される。
【０１８０】
上述したように、図１に示す立体画像送受信システム１０において、放送局１００の送信データ生成部１１０（図２参照）では、所定番組の立体画像データを含むトランスポートストリームＴＳに、視差情報の伝送があるか否かを識別する識別情報が挿入される。そのため、３Ｄ映像コンテンツ供給事業者における視差情報の伝送の自由度を高めることが可能となる。すなわち、視差情報として、番組単位の視差情報、汎用目的の視差情報、サブタイトル向けの視差情報等を選択的に伝送することが可能となる。また、視差情報を送らない選択も可能となる。
【０１８１】
また、図１に示す立体画像送受信システム１０において、受信機２００（図２０参照）では、トランスポートストリームＴＳに挿入されている、視差情報の伝送があるか否かを識別する識別情報が取得される。そして、左眼画像および右眼画像に重畳される同一の重畳情報（サブタイトル、ＯＳＤ表示など）には、この識別情報に基づいて、番組単位の視差情報、汎用目的の視差情報、サブタイトル向けの視差情報等の所定の視差情報による視差が付与される。これにより、サブタイトル、ＯＳＤ表示などの重畳情報を、３Ｄ映像コンテンツ供給事業者の意図した深さで立体画像に重ねて表示することが可能となる。
【０１８２】
＜２．変形例＞
なお、上述実施の形態においては、ステレオ映像記述子（Stereoscopic_descriptor）および視差情報リンク記述子（Disparity_Link_descriptor）を、ＥＩＴの配下に挿入している。しかし、これらの記述子の挿入位置は、ＥＩＴの配下に限定されない。例えば、ステレオ映像記述子はＥＩＴの配下に挿入するが、視差情報リンク記述子はＰＭＴの配下に挿入することが考えられる。また、例えば、双方とも、ＰＭＴの配下に挿入することが考えられる。あるいは、これらの記述子をさらに他の位置に挿入することも考えられる。
【０１８３】
また、上述実施の形態において、受信機２００では、例えば、図２１、図２２のフローチャートに示すように、伝送されてくる視差情報の種類に基づいて、使用すべき視差情報が自動的に決定される。しかし、ユーザの操作によって、使用すべき視差情報を任意に決定する構成とすることも可能である。
【０１８４】
また、上述実施の形態において、特定の重畳情報がサブタイトルである例を示したが、クローズド・キャプションなどのその他の重畳情報の場合も同様に考えることができる。また、上述実施例においては、立体画像データを含むトランスポートストリームＴＳが放送局１００から放送される例を示した。しかし、この発明は、このトランスポートストリームＴＳがインターネット等のネットワークを利用して受信端末に配信される構成のシステムにも同様に適用できることは勿論である。
【産業上の利用可能性】
【０１８５】
この発明は、立体画像データを放送波に載せて送信する、あるいは立体画像データをインターネット等のネットワークを介して配信する立体画像データ送受信システムに適用できる。
【符号の説明】
【０１８６】
１０・・・立体画像送受信システム
１１０・・・送信データ生成部
１１１・・・データ取り出し部
１１１ａ・・・データ記録媒体
１１２・・・ビデオエンコーダ
１１３・・・視差情報エンコーダ
１１４・・・オーディオエンコーダ
１１５・・・サブタイトル発生部
１１６・・・サブタイトルエンコーダ
１１７・・・マルチプレクサ
２００・・・受信機
２０１・・・アンテナ端子
２０２・・・デジタルチューナ
２０３・・・デマルチプレクサ
２０４・・・ビデオデコーダ
２０５・・・３Ｄ信号処理部
２０６・・・サブタイトルデコーダ
２０７・・・サブタイトル発生部
２０８・・・視差情報デコーダ
２０９・・・メタデータ処理部
２１０・・・視差情報出力部
２１１・・・ＯＳＤ表示データ生成部
２１２・・・画像・表示データ重畳部
２１３・・・ディスプレイ
２１４・・・オーディオデコーダ
２１５・・・音声処理回路
２１６・・・音声増幅回路
２１７・・・スピーカ
３０１・・・Ｌビデオプレーン
３０２・・・Ｒビデオプレーン
３０３・・・スイッチ部
３０４・・・サブタイトルプレーン
３０５・・・ＯＳＤ表示プレーン
３０６，３０７・・・シフト部
３０８・・・重畳部
【特許請求の範囲】
【請求項１】
左眼画像データおよび右眼画像データを有する所定番組の立体画像データを出力する画像データ出力部と、
上記画像データ出力部から出力される所定番組の立体画像データを含むトランスポートストリームを送信する画像データ送信部とを備え、
上記画像データ送信部は、上記トランスポートストリームに、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報を挿入する
立体画像データ送信装置。
【請求項２】
上記識別情報は、番組単位の視差情報の伝送があるか否かを識別する識別情報である
請求項１に記載の立体画像データ送信装置。
【請求項３】
上記識別情報が上記番組単位の視差情報の伝送があることを示す場合、上記画像データ送信部は、さらに、上記トランスポートストリームに、上記番組単位の視差情報を挿入する
請求項２に記載の立体画像データ送信装置。
【請求項４】
上記画像データ送信部は、上記識別情報および上記視差情報を、上記トランスポートストリームに、番組単位のメタデータとして挿入する
請求項３に記載の立体画像データ送信装置。
【請求項５】
上記トランスポートストリームには、番組単位の管理を行うサービス・インフォメーションとしてのイベント・インフォメーション・テーブルが含まれており、
上記画像データ送信部は、上記識別情報および上記視差情報を上記イベント・インフォメーション・テーブルの配下に挿入する
請求項４に記載の立体画像データ送信装置。
【請求項６】
上記識別情報は、汎用目的の視差情報の伝送があるか否かを識別する識別情報である
請求項１に記載の立体画像データ送信装置。
【請求項７】
上記識別情報が上記汎用目的の視差情報の伝送があることを示す場合、上記画像データ送信部は、さらに、上記トラスポートストリームに、上記汎用目的の視差情報を含む視差情報エレメンタリストリームを挿入すると共に、上記トランスポートストリームに、上記識別情報と関連付けて上記視差情報エレメンタリストリームを識別するための識別情報を挿入する
請求項６に記載の立体画像データ送信装置。
【請求項８】
上記識別情報は、特定の重畳情報用の視差情報の伝送であるか否かを識別する識別情報である
請求項１に記載の立体画像データ送信装置。
【請求項９】
上記識別情報が上記特定の重畳情報用の視差情報の伝送であることを示す場合、上記画像データ送信部は、さらに、上記トランスポートストリームに、上記特定の重畳情報が表示される所定数のフレーム期間で共通に使用される視差情報の伝送および上記所定数のフレーム期間で順次更新される視差情報の伝送のいずれであるか、または双方であるかを示す固定／変動情報を挿入する
請求項８に記載の立体画像データ送信装置。
【請求項１０】
上記画像データ送信部は、
上記トランスポートストリームに、上記特定の重畳情報のデータを含む重畳情報エレメンタリストリームを挿入し、
上記固定／変動情報を、上記重畳情報エレメンタリストリームに、重畳情報毎に、挿入する
請求項９に記載の立体画像データ送信装置。
【請求項１１】
上記固定／変動情報が、上記所定数のフレーム期間で共通に使用される視差情報の伝送であることを示す場合、上記画像データ送信部は、上記重畳情報エレメンタリストリームに、重畳情報毎に、上記固定／変動情報に関連付けて上記所定数のフレーム期間で共通に使用される視差情報を挿入する
請求項１０に記載の立体画像データ送信装置。
【請求項１２】
上記画像データ送信部は、
上記固定／変動情報が、上記特定の重畳情報が表示される所定数のフレーム期間で順次更新される視差情報の伝送であることを示す場合、
上記トランスポートストリームに、重畳情報毎の視差情報列を識別情報により識別可能に含む重畳情報エレメンタリストリームを挿入すると共に、
上記重畳情報エレメンタリストリームに、重畳情報毎に、上記固定／変動情報に関連付けて、上記視差情報エレメンタリストリーム内の対応する上記視差情報列を指定する識別情報を挿入する
請求項１０に記載の立体画像データ送信装置。
【請求項１３】
左眼画像データおよび右眼画像データを有する各番組の立体画像データを順次出力する画像データ出力ステップと、
上記画像データ出力ステップで順次出力される各番組の立体画像データを有するトランスポートストリームを送信する画像データ送信ステップとを備え、
上記画像データ送信ステップでは、上記トランスポートストリームに、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報を挿入する
立体画像データ送信方法。
【請求項１４】
左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれると共に、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されているトランスポートストリームを受信する画像データ受信部と、
上記画像データ受信部で受信されたトランスポートストリームから上記立体画像データを取得する画像データ取得部と、
上記画像データ受信部で受信されたトランスポートストリームから上記識別情報を取得する識別情報取得部と、
上記画像データ取得部で取得された上記立体画像データと、上記識別情報取得部で取得された上記識別情報に基づいて、左眼画像および右眼画像に重畳する同一の重畳情報に所定の視差情報による視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部と
を備える立体画像データ受信装置。
【請求項１５】
上記識別情報は、番組単位の視差情報の伝送があるか否かを識別する識別情報である
請求項１４に記載の立体画像データ受信装置。
【請求項１６】
上記識別情報は、汎用目的の視差情報の伝送があるか否かを識別する識別情報である
請求項１４に記載の立体画像データ受信装置。
【請求項１７】
上記識別情報は、特定の重畳情報用の視差情報の伝送があるか否かを識別する識別情報である
請求項１４に記載の立体画像データ受信装置。
【請求項１８】
上記画像データ処理部は、上記識別情報が上記視差情報の伝送があることを示す場合、上記トランスポートストリームから取得された視差情報を上記所定の視差情報として用いる
請求項１４に記載の立体画像データ受信装置。
【請求項１９】
上記画像データ処理部は、上記識別情報が上記視差情報の伝送がないことを示す場合、予め用意されている視差情報を上記所定の視差情報として用いる
請求項１４に記載の立体画像データ受信装置。
【請求項２０】
左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれると共に、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されているトランスポートストリームを受信する画像データ受信ステップと、
上記画像データ受信ステップで受信されたトランスポートストリームから上記立体画像データを取得する画像データ取得ステップと、
上記画像データ受信ステップで受信されたトランスポートストリームから上記識別情報を取得する識別情報取得ステップと、
上記画像データ取得ステップで取得された上記立体画像データと、上記識別情報取得ステップで取得された上記識別情報に基づいて、左眼画像および右眼画像に重畳する同一の重畳情報に所定の視差情報による視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理ステップと
を備える立体画像データ受信方法。
【請求項１】
左眼画像データおよび右眼画像データを有する所定番組の立体画像データを出力する画像データ出力部と、
上記画像データ出力部から出力される所定番組の立体画像データを含むトランスポートストリームを送信する画像データ送信部とを備え、
上記画像データ送信部は、上記トランスポートストリームに、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報を挿入する
立体画像データ送信装置。
【請求項２】
上記識別情報は、番組単位の視差情報の伝送があるか否かを識別する識別情報である
請求項１に記載の立体画像データ送信装置。
【請求項３】
上記識別情報が上記番組単位の視差情報の伝送があることを示す場合、上記画像データ送信部は、さらに、上記トランスポートストリームに、上記番組単位の視差情報を挿入する
請求項２に記載の立体画像データ送信装置。
【請求項４】
上記画像データ送信部は、上記識別情報および上記視差情報を、上記トランスポートストリームに、番組単位のメタデータとして挿入する
請求項３に記載の立体画像データ送信装置。
【請求項５】
上記トランスポートストリームには、番組単位の管理を行うサービス・インフォメーションとしてのイベント・インフォメーション・テーブルが含まれており、
上記画像データ送信部は、上記識別情報および上記視差情報を上記イベント・インフォメーション・テーブルの配下に挿入する
請求項４に記載の立体画像データ送信装置。
【請求項６】
上記識別情報は、汎用目的の視差情報の伝送があるか否かを識別する識別情報である
請求項１に記載の立体画像データ送信装置。
【請求項７】
上記識別情報が上記汎用目的の視差情報の伝送があることを示す場合、上記画像データ送信部は、さらに、上記トラスポートストリームに、上記汎用目的の視差情報を含む視差情報エレメンタリストリームを挿入すると共に、上記トランスポートストリームに、上記識別情報と関連付けて上記視差情報エレメンタリストリームを識別するための識別情報を挿入する
請求項６に記載の立体画像データ送信装置。
【請求項８】
上記識別情報は、特定の重畳情報用の視差情報の伝送であるか否かを識別する識別情報である
請求項１に記載の立体画像データ送信装置。
【請求項９】
上記識別情報が上記特定の重畳情報用の視差情報の伝送であることを示す場合、上記画像データ送信部は、さらに、上記トランスポートストリームに、上記特定の重畳情報が表示される所定数のフレーム期間で共通に使用される視差情報の伝送および上記所定数のフレーム期間で順次更新される視差情報の伝送のいずれであるか、または双方であるかを示す固定／変動情報を挿入する
請求項８に記載の立体画像データ送信装置。
【請求項１０】
上記画像データ送信部は、
上記トランスポートストリームに、上記特定の重畳情報のデータを含む重畳情報エレメンタリストリームを挿入し、
上記固定／変動情報を、上記重畳情報エレメンタリストリームに、重畳情報毎に、挿入する
請求項９に記載の立体画像データ送信装置。
【請求項１１】
上記固定／変動情報が、上記所定数のフレーム期間で共通に使用される視差情報の伝送であることを示す場合、上記画像データ送信部は、上記重畳情報エレメンタリストリームに、重畳情報毎に、上記固定／変動情報に関連付けて上記所定数のフレーム期間で共通に使用される視差情報を挿入する
請求項１０に記載の立体画像データ送信装置。
【請求項１２】
上記画像データ送信部は、
上記固定／変動情報が、上記特定の重畳情報が表示される所定数のフレーム期間で順次更新される視差情報の伝送であることを示す場合、
上記トランスポートストリームに、重畳情報毎の視差情報列を識別情報により識別可能に含む重畳情報エレメンタリストリームを挿入すると共に、
上記重畳情報エレメンタリストリームに、重畳情報毎に、上記固定／変動情報に関連付けて、上記視差情報エレメンタリストリーム内の対応する上記視差情報列を指定する識別情報を挿入する
請求項１０に記載の立体画像データ送信装置。
【請求項１３】
左眼画像データおよび右眼画像データを有する各番組の立体画像データを順次出力する画像データ出力ステップと、
上記画像データ出力ステップで順次出力される各番組の立体画像データを有するトランスポートストリームを送信する画像データ送信ステップとを備え、
上記画像データ送信ステップでは、上記トランスポートストリームに、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報を挿入する
立体画像データ送信方法。
【請求項１４】
左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれると共に、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されているトランスポートストリームを受信する画像データ受信部と、
上記画像データ受信部で受信されたトランスポートストリームから上記立体画像データを取得する画像データ取得部と、
上記画像データ受信部で受信されたトランスポートストリームから上記識別情報を取得する識別情報取得部と、
上記画像データ取得部で取得された上記立体画像データと、上記識別情報取得部で取得された上記識別情報に基づいて、左眼画像および右眼画像に重畳する同一の重畳情報に所定の視差情報による視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理部と
を備える立体画像データ受信装置。
【請求項１５】
上記識別情報は、番組単位の視差情報の伝送があるか否かを識別する識別情報である
請求項１４に記載の立体画像データ受信装置。
【請求項１６】
上記識別情報は、汎用目的の視差情報の伝送があるか否かを識別する識別情報である
請求項１４に記載の立体画像データ受信装置。
【請求項１７】
上記識別情報は、特定の重畳情報用の視差情報の伝送があるか否かを識別する識別情報である
請求項１４に記載の立体画像データ受信装置。
【請求項１８】
上記画像データ処理部は、上記識別情報が上記視差情報の伝送があることを示す場合、上記トランスポートストリームから取得された視差情報を上記所定の視差情報として用いる
請求項１４に記載の立体画像データ受信装置。
【請求項１９】
上記画像データ処理部は、上記識別情報が上記視差情報の伝送がないことを示す場合、予め用意されている視差情報を上記所定の視差情報として用いる
請求項１４に記載の立体画像データ受信装置。
【請求項２０】
左眼画像データおよび右眼画像データを有する所定番組の立体画像データが含まれると共に、上記左眼画像データおよび上記右眼画像データによる画像に重畳する重畳情報に視差を付与するための視差情報の伝送があるか否かを識別する識別情報が挿入されているトランスポートストリームを受信する画像データ受信ステップと、
上記画像データ受信ステップで受信されたトランスポートストリームから上記立体画像データを取得する画像データ取得ステップと、
上記画像データ受信ステップで受信されたトランスポートストリームから上記識別情報を取得する識別情報取得ステップと、
上記画像データ取得ステップで取得された上記立体画像データと、上記識別情報取得ステップで取得された上記識別情報に基づいて、左眼画像および右眼画像に重畳する同一の重畳情報に所定の視差情報による視差を付与し、上記重畳情報が重畳された左眼画像のデータおよび上記重畳情報が重畳された右眼画像のデータを得る画像データ処理ステップと
を備える立体画像データ受信方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図３０】
【図３１】
【図１０】
【図１１】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図３０】
【図３１】
【図１０】
【図１１】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【公開番号】特開２０１１−２３９１６９（Ｐ２０１１−２３９１６９Ａ）
【公開日】平成２３年１１月２４日（２０１１．１１．２４）
【国際特許分類】
【出願番号】特願２０１０−１０８８１７（Ｐ２０１０−１０８８１７）
【出願日】平成２２年５月１０日（２０１０．５．１０）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２３年１１月２４日（２０１１．１１．２４）
【国際特許分類】
【出願日】平成２２年５月１０日（２０１０．５．１０）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]