三次元ビデオストリームの生成方法
【課題】ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をサイド・バイ・サイド方式で三次元立体画像のグラフィックスプレーンまたはバックグラウンドプレーンの画像を視認可能にする。
【解決手段】左目と右目用の映像信号のフレームがサイド・バイ・サイド方式で単位フレームとされた二次元ビデオストリームを有し、バックグラウンドプレーン又はグラフィックスプレーンの少なくとも一方を一つの表示イメージに合成して三次元ビデオストリームを生成する方法であって、グラフィックスデータ１を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２を生成し、前記第１圧縮グラフィックスデータを複写処理して当該第１圧縮グラフィックスデータと同一の第２圧縮グラフィックスデータ３を生成し、前記第１圧縮グラフィックスデータ２と前記第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べたフレーム４を生成する。
【解決手段】左目と右目用の映像信号のフレームがサイド・バイ・サイド方式で単位フレームとされた二次元ビデオストリームを有し、バックグラウンドプレーン又はグラフィックスプレーンの少なくとも一方を一つの表示イメージに合成して三次元ビデオストリームを生成する方法であって、グラフィックスデータ１を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２を生成し、前記第１圧縮グラフィックスデータを複写処理して当該第１圧縮グラフィックスデータと同一の第２圧縮グラフィックスデータ３を生成し、前記第１圧縮グラフィックスデータ２と前記第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べたフレーム４を生成する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ブルーレイディスク向けサイド・バイ・サイド方式により再生可能な三次元ビデオストリームの生成方法に関する。
【背景技術】
【０００２】
三次元立体映像を再生するサイド・バイ・サイド方式は、図４（Ａ）に示すように、右目用映像信号の１フレームと、左目用映像信号の１フレームとの２つのフレームをそれぞれ水平方向に１／２に圧縮し、これらを横に並べて１枚のフレームとして再生する方式である（特許文献１）。そして、同図（Ｂ）に示すように、ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をブルーレイ再生機でデコードし、サイド・バイ・サイド方式に対応したテレビジョン側で三次元立体画像に変換処理すれば、三次元立体画像として視認することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−３４７０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ＭＰＥＧ４−ＡＶＣの二次元ビデオストリームは、上記のように処理すればサイド・バイ・サイド方式に対応したテレビジョン装置で三次元立体画像として再生できる。
【０００５】
しかしながら、三次元立体画像に他のグラフィック素材、たとえば画像の背景、操作ボタン、字幕などを合成して一つの表示イメージとして表示しようとすると以下の問題がある。すなわち、図５（Ｃ）に示すように、グラフィックプレーンは１枚の二次元画像であるため、サイド・バイ・サイド方式に対応したテレビジョン側でこのグラフィックスプレーンを再生すると、同図（Ｄ）に示すように、左目用エリアにあるグラフィックスが水平方向に引き伸ばされて左目でしか見えず、これを両目で見ようとすると視認に耐えないという問題がある。
【０００６】
本発明が解決しようとする課題は、ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をサイド・バイ・サイド方式で三次元立体画像として再生する場合に、合成して表示するグラフィックスプレーンまたはバックグラウンドプレーンの画像も視認可能にすることである。
【課題を解決するための手段】
【０００７】
本発明は、グラフィックスデータを水平方向に対して１／２に圧縮処理するとともにこれを複写処理して２つの圧縮グラフィックスデータを生成し、これら２つの圧縮グラフィックスデータをサイド・バイ・サイド方式で並べたフレームを生成する、ことによって上記課題を解決する。
【発明の効果】
【０００８】
本発明によれば、グラフィックスデータについてもサイド・バイ・サイド方式に準拠したフレームに変換処理するので、ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をサイド・バイ・サイド方式で三次元立体画像として再生する場合に、合成して表示されたグラフィックスプレーンまたはバックグラウンドプレーンの画像も円滑に視認することができる。
【図面の簡単な説明】
【０００９】
【図１】発明の一実施の形態を適用した生成方法を示す工程図である。
【図２】図１の擬似サイドバイサイドミラー化処理（二次元画像）を示す工程図である。
【図３】図１の擬似サイドバイサイドミラー化処理（三次元画像）を示す工程図である。
【図４】一般的なサイド・バイ・サイド方式による三次元立体映像の表示方法を説明するための図である。
【図５】本発明が解決しようとする課題を説明するための工程図である。
【発明を実施するための形態】
【００１０】
以下の本発明の一実施の形態においては、図１（Ｄ）に示すように、静止画である背景画像に、動画であるビデオストリームと静止画である操作ボタン画像とを合成してサイド・バイ・サイド方式による三次元立体画像をディスプレイに一つの表示イメージとして表示する例を挙げて本発明を説明する。ただし、本発明は動画と静止画とを合成して一つの表示イメージの三次元立体画像として表示するものであれば適用することができるので、本例にのみ限定されるものではない。
【００１１】
本例の三次元立体画像の再生用データは、表示画像のうちの背景に相当するバックグラウンドプレーン（図１（Ａ））を構成する背景用グラフィックスデータと、表示画像のうちの三次元立体動画像に相当するビデオプレーン（同図（Ｂ））を構成する二次元ビデオストリームと、表示画像のうちの操作ボタン又は字幕に相当するグラフィックスプレーン（同図（Ｃ））を構成する操作ボタン用グラフィックスデータと、を備え、これらのデータがＢＤなどの媒体又はサーバの記録装置に格納されている。
【００１２】
そして、三次元立体画像の再生用データが格納されたＢＤを再生機にセットして当該再生機にてデータをデコードし、これら背景用グラフィックスデータと二次元ビデオストリームと操作ボタン用グラフィックスデータとを合成し（レンダリング又はオーバレイとも称される。）、これをサイド・バイ・サイド方式に対応したテレビジョンに出力する。これにより、同図（Ｄ）に示すようにテレビジョンのディスプレイに一つの表示イメージとしての三次元立体画像が表示される。なお、同図（Ｄ）において三次元立体画像が表現できないため、便宜的に二次元画像にて示している。
【００１３】
三次元立体画像の再生用データのうちの二次元ビデオストリームは、ＭＰＥＧ４−ＡＶＣ規格に準拠したビデオストリームであって、図１（Ｂ）に示すように、右目用映像信号の１フレームと、左目用映像信号の１フレームとの２つのフレームをそれぞれ水平方向に１／２に圧縮し、これらを横に並べて１枚のフレームとしたものであり、この形のフレームをストリームに対応した数だけ有する。この二次元ビデオストリームをエンコードしてＢＤに格納するが、再生時にはデコードし、これをサイド・バイ・サイド方式に対応したテレビジョンに出力すると、テレビジョン側で三次元立体動画像として表示することになる。
【００１４】
三次元立体画像の再生用データのうちの操作ボタン用グラフィックスデータは、図１（Ｅ）の下に示すような二次元グラフィックス素材で構成され、これらグラフィックス素材は、特に限定はされないがたとえばＪＰＥＧ(Joint Photographic Experts Group)，ＰＮＧ(Portable Network Graphics)などのファイルフォーマットの画像データで構成されている。同図（Ｅ）に示す例では、３つの操作ボタンが縦方向に並び、４つの操作ボタンが横方向に並んだ一つの操作ボタン用グラフィックス素材を有し、この背景用グラフィックス素材を用いて、図１（Ｃ）に示す再生用データのうちの操作ボタン用グラフィックスデータを生成する。
【００１５】
三次元立体画像の再生用データのうちの操作ボタン用グラフィックスデータの生成方法は、図２（Ａ）に示す操作ボタン用グラフィックス素材１（二次元画像データ）を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２を生成し、この第１圧縮グラフィックスデータ２を複写処理して当該第１圧縮グラフィックスデータ２と同一の第２圧縮グラフィックスデータ３を生成し、さらにこれら第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べた一つのフレーム４を生成することにより得られる。
【００１６】
得られた一つのフレーム４を図２（Ｂ）及び図１（Ｃ）に示す。第１圧縮グラフィックスデータ２が左目エリアに、第２圧縮グラフィックスデータ３が右眼エリアにそれぞれ並べられることにより、サイド・バイ・サイド方式に対応したテレビジョンにて再生すると、両眼で見ても違和感のない画像として視認することができる。
【００１７】
なお、本例の操作ボタン用グラフィックスデータは一つの静止画であり、常時同じ操作ボタンが表示されるが、複数の静止画の操作ボタン用グラフィックスデータを生成して、所定の時間に同期させて操作ボタンの表示を変更してもよい。また、映画などの字幕を表示したグラフィックス素材を同様の処理で複数のフレーム４を生成し、ビデオストリームのフレームに同期させて表示してもよい。本例では字幕のグラフィックスデータも便宜的に操作ボタン用グラフィックスデータと称する。
【００１８】
上述した操作ボタン用グラフィックスデータは、操作ボタン用グラフィックス素材１の水平方向の圧縮処理（第１圧縮グラフィックスデータ２の生成）→第１圧縮グラフィックスデータ２の複写処理（第２圧縮グラフィックスデータ３の生成）→第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べてフレーム４の生成という手順で生成したが、操作ボタン用グラフィックスデータ１を複写処理して当該操作ボタン用グラフィックスデータを２つ生成し、これら２つの操作ボタン用グラフィックスデータ１をそれぞれ水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３を生成したのち、これらをサイド・バイ・サイド方式で並べてフレーム４を生成してもよい。ただし、この処理手順によると圧縮処理が２回必要とされるため処理時間の観点からは上述した手順の方が有利である。
【００１９】
三次元立体画像の再生用データのうちの背景用グラフィックスデータは、図１（Ｅ）に示すような二次元グラフィックス素材で構成され、これらグラフィックス素材は、特に限定はされないがたとえばＪＰＥＧ，ＰＮＧなどのファイルフォーマットの画像データで構成されている。同図（Ｅ）に示す例では、表示画面の中央または全体の背景、左右それぞれの背景、上下それぞれの背景といった５つの領域が異なる模様や色彩とされた一つの背景用グラフィックス素材を有し、この背景用グラフィックス素材を用いて、図１（Ａ）に示す再生用データのうちの背景用グラフィックスデータを生成する。
【００２０】
三次元立体画像の再生用データのうちの背景用グラフィックスデータは、図２を参照して説明した操作ボタン用グラフィックスデータと同様にして生成することができる。すなわち、図１（Ｅ）に示す背景用グラフィックス素材（二次元画像データ）を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータを生成し、この第１圧縮グラフィックスデータを複写処理して当該第１圧縮グラフィックスデータと同一の第２圧縮グラフィックスデータを生成し、さらにこれら第１圧縮グラフィックスデータと第２圧縮グラフィックスデータとをサイド・バイ・サイド方式で並べた一つのフレームを生成することにより得られる。
【００２１】
なお、背景用グラフィックスデータを複写処理して当該背景用グラフィックスデータを２つ生成し、これら２つの背景用グラフィックスデータをそれぞれ水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータと第２圧縮グラフィックスデータを生成したのち、これらをサイド・バイ・サイド方式で並べてフレームを生成してもよい。
【００２２】
得られた一つのフレームを図１（Ａ）に示す。第１圧縮グラフィックスデータが左目エリアに、第２圧縮グラフィックスデータが右眼エリアにそれぞれ並べられることにより、サイド・バイ・サイド方式に対応したテレビジョンにて再生すると両眼で見ても違和感のない画像として視認することができる。なお、本例の背景用グラフィックスデータは一つの静止画であり、常時同じ背景が表示されるが、複数の静止画の背景用グラフィックスデータを生成して、所定の時間に同期させて背景を変更してもよい。
【００２３】
以上のように処理された三次元立体画像の再生用データは、背景用グラフィックスデータとビデオストリームと操作ボタン用グラフィックスデータとを合成することで一つの表示イメージに（レンダリング）してテレビジョンへ出力される。そして、テレビジョン側でサイド・バイ・サイド方式による三次元立体画像処理が実行されることにより、図１（Ｄ）に示すように、本例では背景及び操作ボタンが二次元画像として表示され、ビデオストリームが三次元立体画像としてテレビジョンのディスプレイに表示される。
【００２４】
そして、背景用グラフィックスデータと操作ボタン用グラフィックスデータは、サイド・バイ・サイド方式に準拠したフレームに変換処理されているので、ビデオストリームに合成されて表示された背景及び操作ボタンの画像は、両眼で見ても違和感のない画像として視認することができる。
【００２５】
以上の実施形態では、背景用グラフィックスデータと操作ボタン用グラフィックスデータをサイド・バイ・サイド方式で再生した際に違和感のない画像として視認できるように二次元画像としたが、これらを三次元立体画像とすることもできる。この場合は、上述した実施形態で生成した図２（Ｂ）のフレーム４をさらに処理する。
【００２６】
図３は操作ボタン用グラフィックスデータを三次元立体画像としてテレビジョンのディスプレイに表示するための処理ステップを示す図であり、便宜的に一部の操作ボタンのみを図示する。本例では、図３（Ａ）及び図３（Ｂ）の途中までは図２（Ａ）及び図２（Ｂ）に示した処理ステップと同じ処理を実行する。
【００２７】
すなわち、図３（Ａ）に示す操作ボタン用グラフィックス素材１（二次元画像データ）を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２を生成し、この第１圧縮グラフィックスデータ２を複写処理して当該第１圧縮グラフィックスデータ２と同一の第２圧縮グラフィックスデータ３を生成し、さらにこれら第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べた一つのフレーム４を生成する。
【００２８】
さらに、得られたフレーム４の第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３のうちの一方、本例では第２圧縮グラフィックデータ３について、このなかで三次元立体化させたいオブジェクトを左右の視差に相当する距離ｙだけ水平方向にオフセット処理する。本例では操作ボタンの部分(Top Menu, Chapter, Makingと表示されたボタン部)を背景に対して水平方向にｙだけオフセットする。これを操作ボタン用グラフィックスデータとして格納する。
【００２９】
以上のように処理された三次元立体画像の再生用データを、背景用グラフィックスデータとビデオストリームと操作ボタン用グラフィックスデータとを合成して一つの表示イメージに（レンダリング）してテレビジョンへ出力すると、テレビジョン側でサイド・バイ・サイド方式による三次元立体画像処理が実行される。これにより、図３（Ｃ）に示すように、背景が二次元画像として表示され、ビデオストリーム及び操作ボタンが三次元立体画像としてテレビジョンのディスプレイに表示される。
【００３０】
なお、背景用グラフィックスデータについても同様にしてオフセット処理することにより三次元立体画像として再生することができる。
【００３１】
なお、上述した実施形態のプレーンは、バックグランドプレーンとビデオプレーンとグラフィックスプレーンとの３つで構成されているが、バックグランドプレーンとビデオプレーンの２つのプレーン又はビデオプレーンとグラフィックスプレーンの２つのプレーンで構成してもよい。
【符号の説明】
【００３２】
１…グラフィックス素材
２…第１圧縮グラフィックスデータ
３…第２圧縮グラフィックスデータ
４…フレーム
【技術分野】
【０００１】
本発明は、ブルーレイディスク向けサイド・バイ・サイド方式により再生可能な三次元ビデオストリームの生成方法に関する。
【背景技術】
【０００２】
三次元立体映像を再生するサイド・バイ・サイド方式は、図４（Ａ）に示すように、右目用映像信号の１フレームと、左目用映像信号の１フレームとの２つのフレームをそれぞれ水平方向に１／２に圧縮し、これらを横に並べて１枚のフレームとして再生する方式である（特許文献１）。そして、同図（Ｂ）に示すように、ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をブルーレイ再生機でデコードし、サイド・バイ・サイド方式に対応したテレビジョン側で三次元立体画像に変換処理すれば、三次元立体画像として視認することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−３４７０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ＭＰＥＧ４−ＡＶＣの二次元ビデオストリームは、上記のように処理すればサイド・バイ・サイド方式に対応したテレビジョン装置で三次元立体画像として再生できる。
【０００５】
しかしながら、三次元立体画像に他のグラフィック素材、たとえば画像の背景、操作ボタン、字幕などを合成して一つの表示イメージとして表示しようとすると以下の問題がある。すなわち、図５（Ｃ）に示すように、グラフィックプレーンは１枚の二次元画像であるため、サイド・バイ・サイド方式に対応したテレビジョン側でこのグラフィックスプレーンを再生すると、同図（Ｄ）に示すように、左目用エリアにあるグラフィックスが水平方向に引き伸ばされて左目でしか見えず、これを両目で見ようとすると視認に耐えないという問題がある。
【０００６】
本発明が解決しようとする課題は、ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をサイド・バイ・サイド方式で三次元立体画像として再生する場合に、合成して表示するグラフィックスプレーンまたはバックグラウンドプレーンの画像も視認可能にすることである。
【課題を解決するための手段】
【０００７】
本発明は、グラフィックスデータを水平方向に対して１／２に圧縮処理するとともにこれを複写処理して２つの圧縮グラフィックスデータを生成し、これら２つの圧縮グラフィックスデータをサイド・バイ・サイド方式で並べたフレームを生成する、ことによって上記課題を解決する。
【発明の効果】
【０００８】
本発明によれば、グラフィックスデータについてもサイド・バイ・サイド方式に準拠したフレームに変換処理するので、ＭＰＥＧ４−ＡＶＣの二次元ビデオ映像をサイド・バイ・サイド方式で三次元立体画像として再生する場合に、合成して表示されたグラフィックスプレーンまたはバックグラウンドプレーンの画像も円滑に視認することができる。
【図面の簡単な説明】
【０００９】
【図１】発明の一実施の形態を適用した生成方法を示す工程図である。
【図２】図１の擬似サイドバイサイドミラー化処理（二次元画像）を示す工程図である。
【図３】図１の擬似サイドバイサイドミラー化処理（三次元画像）を示す工程図である。
【図４】一般的なサイド・バイ・サイド方式による三次元立体映像の表示方法を説明するための図である。
【図５】本発明が解決しようとする課題を説明するための工程図である。
【発明を実施するための形態】
【００１０】
以下の本発明の一実施の形態においては、図１（Ｄ）に示すように、静止画である背景画像に、動画であるビデオストリームと静止画である操作ボタン画像とを合成してサイド・バイ・サイド方式による三次元立体画像をディスプレイに一つの表示イメージとして表示する例を挙げて本発明を説明する。ただし、本発明は動画と静止画とを合成して一つの表示イメージの三次元立体画像として表示するものであれば適用することができるので、本例にのみ限定されるものではない。
【００１１】
本例の三次元立体画像の再生用データは、表示画像のうちの背景に相当するバックグラウンドプレーン（図１（Ａ））を構成する背景用グラフィックスデータと、表示画像のうちの三次元立体動画像に相当するビデオプレーン（同図（Ｂ））を構成する二次元ビデオストリームと、表示画像のうちの操作ボタン又は字幕に相当するグラフィックスプレーン（同図（Ｃ））を構成する操作ボタン用グラフィックスデータと、を備え、これらのデータがＢＤなどの媒体又はサーバの記録装置に格納されている。
【００１２】
そして、三次元立体画像の再生用データが格納されたＢＤを再生機にセットして当該再生機にてデータをデコードし、これら背景用グラフィックスデータと二次元ビデオストリームと操作ボタン用グラフィックスデータとを合成し（レンダリング又はオーバレイとも称される。）、これをサイド・バイ・サイド方式に対応したテレビジョンに出力する。これにより、同図（Ｄ）に示すようにテレビジョンのディスプレイに一つの表示イメージとしての三次元立体画像が表示される。なお、同図（Ｄ）において三次元立体画像が表現できないため、便宜的に二次元画像にて示している。
【００１３】
三次元立体画像の再生用データのうちの二次元ビデオストリームは、ＭＰＥＧ４−ＡＶＣ規格に準拠したビデオストリームであって、図１（Ｂ）に示すように、右目用映像信号の１フレームと、左目用映像信号の１フレームとの２つのフレームをそれぞれ水平方向に１／２に圧縮し、これらを横に並べて１枚のフレームとしたものであり、この形のフレームをストリームに対応した数だけ有する。この二次元ビデオストリームをエンコードしてＢＤに格納するが、再生時にはデコードし、これをサイド・バイ・サイド方式に対応したテレビジョンに出力すると、テレビジョン側で三次元立体動画像として表示することになる。
【００１４】
三次元立体画像の再生用データのうちの操作ボタン用グラフィックスデータは、図１（Ｅ）の下に示すような二次元グラフィックス素材で構成され、これらグラフィックス素材は、特に限定はされないがたとえばＪＰＥＧ(Joint Photographic Experts Group)，ＰＮＧ(Portable Network Graphics)などのファイルフォーマットの画像データで構成されている。同図（Ｅ）に示す例では、３つの操作ボタンが縦方向に並び、４つの操作ボタンが横方向に並んだ一つの操作ボタン用グラフィックス素材を有し、この背景用グラフィックス素材を用いて、図１（Ｃ）に示す再生用データのうちの操作ボタン用グラフィックスデータを生成する。
【００１５】
三次元立体画像の再生用データのうちの操作ボタン用グラフィックスデータの生成方法は、図２（Ａ）に示す操作ボタン用グラフィックス素材１（二次元画像データ）を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２を生成し、この第１圧縮グラフィックスデータ２を複写処理して当該第１圧縮グラフィックスデータ２と同一の第２圧縮グラフィックスデータ３を生成し、さらにこれら第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べた一つのフレーム４を生成することにより得られる。
【００１６】
得られた一つのフレーム４を図２（Ｂ）及び図１（Ｃ）に示す。第１圧縮グラフィックスデータ２が左目エリアに、第２圧縮グラフィックスデータ３が右眼エリアにそれぞれ並べられることにより、サイド・バイ・サイド方式に対応したテレビジョンにて再生すると、両眼で見ても違和感のない画像として視認することができる。
【００１７】
なお、本例の操作ボタン用グラフィックスデータは一つの静止画であり、常時同じ操作ボタンが表示されるが、複数の静止画の操作ボタン用グラフィックスデータを生成して、所定の時間に同期させて操作ボタンの表示を変更してもよい。また、映画などの字幕を表示したグラフィックス素材を同様の処理で複数のフレーム４を生成し、ビデオストリームのフレームに同期させて表示してもよい。本例では字幕のグラフィックスデータも便宜的に操作ボタン用グラフィックスデータと称する。
【００１８】
上述した操作ボタン用グラフィックスデータは、操作ボタン用グラフィックス素材１の水平方向の圧縮処理（第１圧縮グラフィックスデータ２の生成）→第１圧縮グラフィックスデータ２の複写処理（第２圧縮グラフィックスデータ３の生成）→第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べてフレーム４の生成という手順で生成したが、操作ボタン用グラフィックスデータ１を複写処理して当該操作ボタン用グラフィックスデータを２つ生成し、これら２つの操作ボタン用グラフィックスデータ１をそれぞれ水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３を生成したのち、これらをサイド・バイ・サイド方式で並べてフレーム４を生成してもよい。ただし、この処理手順によると圧縮処理が２回必要とされるため処理時間の観点からは上述した手順の方が有利である。
【００１９】
三次元立体画像の再生用データのうちの背景用グラフィックスデータは、図１（Ｅ）に示すような二次元グラフィックス素材で構成され、これらグラフィックス素材は、特に限定はされないがたとえばＪＰＥＧ，ＰＮＧなどのファイルフォーマットの画像データで構成されている。同図（Ｅ）に示す例では、表示画面の中央または全体の背景、左右それぞれの背景、上下それぞれの背景といった５つの領域が異なる模様や色彩とされた一つの背景用グラフィックス素材を有し、この背景用グラフィックス素材を用いて、図１（Ａ）に示す再生用データのうちの背景用グラフィックスデータを生成する。
【００２０】
三次元立体画像の再生用データのうちの背景用グラフィックスデータは、図２を参照して説明した操作ボタン用グラフィックスデータと同様にして生成することができる。すなわち、図１（Ｅ）に示す背景用グラフィックス素材（二次元画像データ）を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータを生成し、この第１圧縮グラフィックスデータを複写処理して当該第１圧縮グラフィックスデータと同一の第２圧縮グラフィックスデータを生成し、さらにこれら第１圧縮グラフィックスデータと第２圧縮グラフィックスデータとをサイド・バイ・サイド方式で並べた一つのフレームを生成することにより得られる。
【００２１】
なお、背景用グラフィックスデータを複写処理して当該背景用グラフィックスデータを２つ生成し、これら２つの背景用グラフィックスデータをそれぞれ水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータと第２圧縮グラフィックスデータを生成したのち、これらをサイド・バイ・サイド方式で並べてフレームを生成してもよい。
【００２２】
得られた一つのフレームを図１（Ａ）に示す。第１圧縮グラフィックスデータが左目エリアに、第２圧縮グラフィックスデータが右眼エリアにそれぞれ並べられることにより、サイド・バイ・サイド方式に対応したテレビジョンにて再生すると両眼で見ても違和感のない画像として視認することができる。なお、本例の背景用グラフィックスデータは一つの静止画であり、常時同じ背景が表示されるが、複数の静止画の背景用グラフィックスデータを生成して、所定の時間に同期させて背景を変更してもよい。
【００２３】
以上のように処理された三次元立体画像の再生用データは、背景用グラフィックスデータとビデオストリームと操作ボタン用グラフィックスデータとを合成することで一つの表示イメージに（レンダリング）してテレビジョンへ出力される。そして、テレビジョン側でサイド・バイ・サイド方式による三次元立体画像処理が実行されることにより、図１（Ｄ）に示すように、本例では背景及び操作ボタンが二次元画像として表示され、ビデオストリームが三次元立体画像としてテレビジョンのディスプレイに表示される。
【００２４】
そして、背景用グラフィックスデータと操作ボタン用グラフィックスデータは、サイド・バイ・サイド方式に準拠したフレームに変換処理されているので、ビデオストリームに合成されて表示された背景及び操作ボタンの画像は、両眼で見ても違和感のない画像として視認することができる。
【００２５】
以上の実施形態では、背景用グラフィックスデータと操作ボタン用グラフィックスデータをサイド・バイ・サイド方式で再生した際に違和感のない画像として視認できるように二次元画像としたが、これらを三次元立体画像とすることもできる。この場合は、上述した実施形態で生成した図２（Ｂ）のフレーム４をさらに処理する。
【００２６】
図３は操作ボタン用グラフィックスデータを三次元立体画像としてテレビジョンのディスプレイに表示するための処理ステップを示す図であり、便宜的に一部の操作ボタンのみを図示する。本例では、図３（Ａ）及び図３（Ｂ）の途中までは図２（Ａ）及び図２（Ｂ）に示した処理ステップと同じ処理を実行する。
【００２７】
すなわち、図３（Ａ）に示す操作ボタン用グラフィックス素材１（二次元画像データ）を水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ２を生成し、この第１圧縮グラフィックスデータ２を複写処理して当該第１圧縮グラフィックスデータ２と同一の第２圧縮グラフィックスデータ３を生成し、さらにこれら第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３とをサイド・バイ・サイド方式で並べた一つのフレーム４を生成する。
【００２８】
さらに、得られたフレーム４の第１圧縮グラフィックスデータ２と第２圧縮グラフィックスデータ３のうちの一方、本例では第２圧縮グラフィックデータ３について、このなかで三次元立体化させたいオブジェクトを左右の視差に相当する距離ｙだけ水平方向にオフセット処理する。本例では操作ボタンの部分(Top Menu, Chapter, Makingと表示されたボタン部)を背景に対して水平方向にｙだけオフセットする。これを操作ボタン用グラフィックスデータとして格納する。
【００２９】
以上のように処理された三次元立体画像の再生用データを、背景用グラフィックスデータとビデオストリームと操作ボタン用グラフィックスデータとを合成して一つの表示イメージに（レンダリング）してテレビジョンへ出力すると、テレビジョン側でサイド・バイ・サイド方式による三次元立体画像処理が実行される。これにより、図３（Ｃ）に示すように、背景が二次元画像として表示され、ビデオストリーム及び操作ボタンが三次元立体画像としてテレビジョンのディスプレイに表示される。
【００３０】
なお、背景用グラフィックスデータについても同様にしてオフセット処理することにより三次元立体画像として再生することができる。
【００３１】
なお、上述した実施形態のプレーンは、バックグランドプレーンとビデオプレーンとグラフィックスプレーンとの３つで構成されているが、バックグランドプレーンとビデオプレーンの２つのプレーン又はビデオプレーンとグラフィックスプレーンの２つのプレーンで構成してもよい。
【符号の説明】
【００３２】
１…グラフィックス素材
２…第１圧縮グラフィックスデータ
３…第２圧縮グラフィックスデータ
４…フレーム
【特許請求の範囲】
【請求項１】
左目用映像信号のフレームと右目用映像信号のフレームとがサイド・バイ・サイド方式で単位フレームとされたＭＰＥＧ４−ＡＶＣ規格の二次元ビデオストリームを有するビデオプレーンと、
グラフィックスデータを有する、バックグラウンドプレーン又はグラフィックスプレーンの少なくとも一方と、を一つの表示イメージに合成して三次元ビデオストリームを生成する方法であって、
前記グラフィックスデータを水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータを生成する第１ステップと、
前記第１圧縮グラフィックスデータを複写処理して当該第１圧縮グラフィックスデータと同一の第２圧縮グラフィックスデータを生成する第２ステップと、
前記第１圧縮グラフィックスデータと前記第２圧縮グラフィックスデータとをサイド・バイ・サイド方式で並べたフレームを生成する第３ステップと、を備える三次元ビデオストリームの生成方法。
【請求項２】
左目用映像信号のフレームと右目用映像信号のフレームとがサイド・バイ・サイド方式で単位フレームとされたＭＰＥＧ４−ＡＶＣ規格の二次元ビデオストリームを有するビデオプレーンと、
第１グラフィックスデータを有する、バックグラウンドプレーン又はグラフィックスプレーンの少なくとも一方と、を一つの表示イメージに合成して三次元ビデオストリームを生成する方法であって、
前記第１グラフィックスデータを複写処理して当該第１グラフィックスデータと同一の第２グラフィックスデータを生成する第１ステップと、
前記第１グラフィックスデータ及び前記第２グラフィックスデータのそれぞれを水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ及び第２圧縮グラフィックスデータを生成する第２ステップと、
前記第１圧縮グラフィックスデータと前記第２圧縮グラフィックスデータとをサイド・バイ・サイド方式で並べたフレームを生成する第３ステップと、を備える三次元ビデオストリームの生成方法。
【請求項３】
請求項１又は２に記載の三次元ビデオストリームの生成方法において、
前記第１圧縮グラフィックスデータ及び前記第２圧縮グラフィックスデータの一方を視差に対応する距離だけ水平方向にオフセットしたフレームを生成する第４ステップをさらに備える三次元ビデオストリームの生成方法。
【請求項４】
請求項１又は２に記載の三次元ビデオストリームの生成方法において、
前記第３ステップで生成されたフレームを、対応する二次元ビデオストリームに時間的同期をとって対応付ける三次元ビデオストリームの生成方法。
【請求項１】
左目用映像信号のフレームと右目用映像信号のフレームとがサイド・バイ・サイド方式で単位フレームとされたＭＰＥＧ４−ＡＶＣ規格の二次元ビデオストリームを有するビデオプレーンと、
グラフィックスデータを有する、バックグラウンドプレーン又はグラフィックスプレーンの少なくとも一方と、を一つの表示イメージに合成して三次元ビデオストリームを生成する方法であって、
前記グラフィックスデータを水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータを生成する第１ステップと、
前記第１圧縮グラフィックスデータを複写処理して当該第１圧縮グラフィックスデータと同一の第２圧縮グラフィックスデータを生成する第２ステップと、
前記第１圧縮グラフィックスデータと前記第２圧縮グラフィックスデータとをサイド・バイ・サイド方式で並べたフレームを生成する第３ステップと、を備える三次元ビデオストリームの生成方法。
【請求項２】
左目用映像信号のフレームと右目用映像信号のフレームとがサイド・バイ・サイド方式で単位フレームとされたＭＰＥＧ４−ＡＶＣ規格の二次元ビデオストリームを有するビデオプレーンと、
第１グラフィックスデータを有する、バックグラウンドプレーン又はグラフィックスプレーンの少なくとも一方と、を一つの表示イメージに合成して三次元ビデオストリームを生成する方法であって、
前記第１グラフィックスデータを複写処理して当該第１グラフィックスデータと同一の第２グラフィックスデータを生成する第１ステップと、
前記第１グラフィックスデータ及び前記第２グラフィックスデータのそれぞれを水平方向に対して１／２に圧縮処理して第１圧縮グラフィックスデータ及び第２圧縮グラフィックスデータを生成する第２ステップと、
前記第１圧縮グラフィックスデータと前記第２圧縮グラフィックスデータとをサイド・バイ・サイド方式で並べたフレームを生成する第３ステップと、を備える三次元ビデオストリームの生成方法。
【請求項３】
請求項１又は２に記載の三次元ビデオストリームの生成方法において、
前記第１圧縮グラフィックスデータ及び前記第２圧縮グラフィックスデータの一方を視差に対応する距離だけ水平方向にオフセットしたフレームを生成する第４ステップをさらに備える三次元ビデオストリームの生成方法。
【請求項４】
請求項１又は２に記載の三次元ビデオストリームの生成方法において、
前記第３ステップで生成されたフレームを、対応する二次元ビデオストリームに時間的同期をとって対応付ける三次元ビデオストリームの生成方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１２−７０１１７（Ｐ２０１２−７０１１７Ａ）
【公開日】平成２４年４月５日（２０１２．４．５）
【国際特許分類】
【出願番号】特願２０１０−２１１６８４（Ｐ２０１０−２１１６８４）
【出願日】平成２２年９月２２日（２０１０．９．２２）
【出願人】（５０１０６４３４３）株式会社プランネット・アソシエイツ (8)
【Ｆターム（参考）】
【公開日】平成２４年４月５日（２０１２．４．５）
【国際特許分類】
【出願日】平成２２年９月２２日（２０１０．９．２２）
【出願人】（５０１０６４３４３）株式会社プランネット・アソシエイツ (8)
【Ｆターム（参考）】
[ Back to top ]