３Ｄのための分割画面
３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査する方法、装置、およびシステムが提供される。復号された３次元ビデオ・ストリームのフレームの部分および再符号化されている３次元ビデオ・ストリームのフレームの対応する部分が合成されたビデオ・フレームに配置し、ビデオ・フレームの各部分が合成されたビデオ・フレーム内に共に現れるようにする。合成されたビデオ・フレーム内のビデオ・フレームの各部分の間の境界を操作し、ビデオ・フレームの各部分の間の境界上の視差の変化、さらに、合成されたビデオ・フレームの各部分の重なりが見えないようにする。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は、２０１０年２月２４日付で出願された米国仮特許出願第６１／３０７，７３４号の利益を主張するものであり、その開示内容全体を本明細書に盛り込んだものとする。
【０００２】
本発明は、一般的には、３Ｄコンテンツの視覚的な評価に関し、より具体的には、３Ｄコンテンツの評価のための分割画面を実施するための方法、装置、およびシステムに関する。
【背景技術】
【０００３】
比較対象となるコンテンツの２つ以上のシーケンスを比較するために、プレイヤーは、１つの画面上に、または他の場合には、複数の画面上に、コンテンツの少なくとも部分を同時に表示することができる。このような技術は、一般的には、分割画面と呼ばれている。最も一般的な分割画面技術として、垂直分割画面モードおよび垂直バタフライ分割画面モードが挙げられる。例として、図１Ａは、２Ｄシーケンスの原フレーム（オリジナルのフレーム）の表示の代表的な図であり、図１Ｂは、図１Ａの２Ｄシーケンスの原フレームを符号化したバージョンの表示の代表的な図である。このようなシーケンスを比較するために、分割画面技術を使用することができる。例として、図２Ａは、従来技術に係る分割画面技術に従って垂直分割画面方向（ｖｅｒｔｉｃａｌ ｓｐｌｉｔ ｓｃｒｅｅｎ ｏｒｉｅｎｔａｔｉｏｎ）に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図を描いている。図２Ａに例示されるように、垂直分割画面技術は、原シーケンスと符号化後のシーケンスとをサイドバイサイドで（横に並べて）比較できるようにすることにより正確性の評価、例えば、符号化処理の正確性の評価を行う視覚的手段を提供する。
【０００４】
このような比較を行うには、バタフライ垂直分割画面（ｂｕｔｔｅｒｆｌｙ ｖｅｒｔｉｃａｌ ｓｐｌｉｔ ｓｃｒｅｅｎ）も有用である。例として、図２Ｂは、従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向（ｏｒｉｅｎｔａｔｉｏｎ）に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図である。図２Ｂに例示されるように、垂直バタフライ分割画面技術は、原シーケンスと符号化済のシーケンスとをサイドバイサイドで（ｓｉｄｅ−ｂｙ−ｓｉｄｅ）比較できるようにすることにより正確性の評価、例えば、符号化処理の正確性の評価を行う視覚的手段を提供する。
【０００５】
このような分割画面技術は、２次元コンテンツの場合に良好に機能するものであるが、垂直分割画面モードは、３次元コンテンツを表示する際には様々な欠点を有することがある。より具体的には、分割画面技術が３次元コンテンツに適用されると、画像／画面間の境界で、突然の視差（ｄｉｓｐａｒｉｔｙ）の変化が表示されることがある。さらに、一方の領域／画像の再構成された３次元画像が他方の領域／画像と重なることがある。またさらに、分割画面技術としてバタフライ・モードが使用される場合には、３次元画像は、反転した視差（ｉｎｖｅｒｔｅｄ ｄｉｓｐａｒｉｔｙ）（デプス）を有する。
【発明の概要】
【０００６】
本発明の各実施形態は、分割画面モードでの３Ｄコンテンツの表示に関わる表示の問題を解決する方法、装置、およびシステムを提供することによって、従来技術の欠点に対処する。
【０００７】
本発明の一実施形態においては、３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査する方法は、
復号された３次元ビデオ・ストリームを少なくとも２つの復号されたビデオ・ストリームに分割するステップと、
少なくとも２つの分割された３次元ビデオ・ストリームのうちの１つを第２のビデオ・フォーマットに再符号化するステップと、
再符号化されていない復号された３次元ビデオ・ストリームのフレームの少なくとも部分および再符号化された３次元ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにするステップと、
復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューを妨げ、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界上の視差の変化、さらに、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするステップと、を含む。
【０００８】
本発明の代替的な実施形態においては、左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを含む復号された３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査する装置は、
復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および再符号化されている復号された３次元ビデオ・ストリームの分割コピーの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を第２のフォーマットで、合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにする手段を含む。さらに、この装置は、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界上の視差の変化、さらに、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにする手段を含む。
【０００９】
本発明の代替的な実施形態においては、３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査するシステムは、
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する３次元ビデオ・ストリームを復号するビデオ復号器と、
復号された３次元ビデオ・ストリームを少なくとも２つの復号された３次元ビデオ・ストリームに分割するストリーム・スプリッタと、
少なくとも２つの復号されたビデオ・ストリームのうちの１つを受信し、少なくとも２つの復号されたビデオ・ストリームのうちの受信されたビデオ・ストリームを第２のビデオ・フォーマットに再符号化する符号化器と、
再符号化されていない復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにする少なくとも１つのビデオ・ミキサと、
復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界上の視差の変化、さらに、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするレンダラと、を含む。本発明の一実施形態においては、システムは、ビデオ・フレームの混合され、レンダリングされた部分を合成されたビデオ・フレーム内に表示する表示装置をさらに含むことができる。
【００１０】
本発明の開示内容は、添付図面を参照して以下の詳細な説明を考慮することによって容易に理解できるであろう。
【図面の簡単な説明】
【００１１】
【図１Ａ】２Ｄシーケンスの原フレームの表示の代表的な図である。
【図１Ｂ】図１Ａの２Ｄシーケンスの原フレームを符号化したバージョンの表示の代表的な図である。
【図２Ａ】従来技術に係る分割画面技術に従って垂直分割画面方向に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図である。
【図２Ｂ】従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図である。
【図３Ａ】３Ｄシーケンスの左右の原フレームの表示の代表的な図である。
【図３Ｂ】図３Ａの３Ｄシーケンスの左右の原フレームを符号化したバージョンの表示の代表的な図である。
【図４Ａ】従来技術に係る分割画面技術に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図４Ｂ】従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図５Ａ】本発明の実施形態に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図５Ｂ】本発明の実施形態に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図６】本発明の実施形態に従った分割画面モードで３Ｄコンテンツを正しく表示するシステムのハイレベル・ブロック図である。
【図７】本発明の実施形態に従って本発明の実施形態が適用される３Ｄ符号化／復号システム７００のハイレベル・ブロック図である。
【図８】本発明の実施形態に従って３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査するための方法のハイレベル・フロー図である。
【００１２】
図面は、本発明の概念を例示するためのものであり、必ずしも、本発明を例示する構成がこれらの図面の構成のみに限定されるものではないことを理解すべきである。理解を容易にするために、可能な箇所では、図を通して同一の要素を示すために同一の参照符号が使用されている。
【発明を実施するための形態】
【００１３】
本発明は、分割画面モードにおける３Ｄコンテンツの表示に関わる表示の問題を解決する方法、装置、およびシステムを有益に提供する。本発明は、主に、２つの画像間の境界で垂直な不透明または黒色のバーまたはスペースを生成することによって視差誤差（ｄｉｓｐａｒｉｔｙ ｅｒｒｏｒ）を補正する処理との関連で説明されるが、本発明のこの特定の実施形態を本発明の範囲を限定するように取り扱うべきではない。本発明の開示内容に基づく情報を得た当業者であれば、本発明の概念は、２つ以上の画像間の境界において、実質的に、どのような形、色、方向、または、サイズを有するブロッキング手段またはスペーシング手段を使用しても達成できることが理解できるであろう。
【００１４】
図面において示される様々な要素の機能は、専用のハードウエアの使用により提供されてもよく、適切なソフトウエアと関連付けてソフトウエアを実行することが可能なハードウエアの使用によって提供されてもよい。機能がプロセッサによって提供される場合にも、単一の専用プロセッサによって提供されてもよく、単一の共有プロセッサによって提供されてもよく、複数の別個のプロセッサによって提供されてもよく、プロセッサの中に共有されているものがあってもよい。さらに、用語「プロセッサ」または「コントローラ」を明示的に使用した場合であっても、ソフトウエアを実行することが可能なハードウエアのみを意味するように解釈されるべきではなく、限定するものではないが、ディジタル信号プロセッサ（ＤＳＰ）・ハードウエア、ソフトウエアを格納する読み出し専用メモリ（ＲＯＭ）、ランダム・アクセス・メモリ（ＲＡＭ）、および不揮発性の記憶装置を暗黙的に含むことがある。また、本明細書における本開示内容の原理、態様、および、実施形態についての全ての記載、さらに、その特定の例は、構造的な均等物および機能的な均等物の双方を包含するように意図されている。さらに、このような均等物は、現在公知の均等物だけでなく、将来において開発される均等物、即ち、構造に係らず、同一の機能を実行するように開発されたどのような要素でも包含するように意図されている。
【００１５】
従って、例えば当業者であれば、本明細書において示されたブロック図は、本発明の原理を実施する例示的なシステム・コンポーネントおよび／または回路の概念図であることが理解できよう。同様に、フローチャート、フロー図、状態遷移図、擬似コードなどは、いずれも様々な処理を表すことが理解できよう。これらの処理は、実質的にコンピュータによって読み取り可能なメディアにおいて表すことができ、コンピュータまたはプロセッサにより実行され、このようなコンピュータまたはプロセッサが明示的に図示されているかどうかに関わるものではない。
【００１６】
上述したように、分割画面技術は２次元コンテンツの場合に良好に機能するものであるが、垂直分割画面モードは３次元コンテンツを表示する際には様々な欠点を有することがある。より具体的には、分割画面技術が３次元コンテンツに適用されると、画像／画面間の境界で、突然の視差の変化が表示されることがある。さらに、一方の領域／画像の再構成された３次元画像が他方の領域／画像と重なることがある。例として、図３Ａは、３Ｄシーケンスの左右の原フレームの表示の代表的な図を描いており、図３Ｂは、図３Ａの３Ｄシーケンスの左右の原フレームを符号化したバージョンの表示の代表的な図を描いている。
【００１７】
このようなシーケンスを比較するために、コンテンツは、垂直の分割画面方向に配置することができる。例として、図４Ａは、従来技術に係る分割画面技術に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図４Ａにおいて、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの左側の符号化されたフレームの画像と共に、垂直分割画面方向に表示されており、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの右側の符号化されたフレームの画像と共に、垂直分割画面方向に表示されている。図４Ａに描かれているように、３Ｄシーケンスの左側の原フレームの再構成された３次元画像は、３Ｄシーケンスの左側の符号化されたフレームの画像と重なっている。同様のことが３Ｄシーケンスの右側の原フレームの画像と３Ｄシーケンスの右側の符号化されたフレームの画像にも当てはまる。図４Ａから、さらに、画像間の画像／画面間の境界で、突然の視差の変化が表示されていることが理解できるであろう。
【００１８】
垂直バタフライ分割画面技術の適用に関わる問題が図４Ｂに例示されている。例として、図４Ｂは、従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図４Ｂにおいて、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの左側の符号化された画像と共に、垂直バタフライ分割画面方向に表示されており、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの右側の符号化された画像と共に、垂直バタフライ分割画面方向に表示されている。図４Ｂに描かれているように、３Ｄシーケンスの左側の原フレームの再構成された３次元画像のデプスは、３Ｄシーケンスの左側の符号化されたフレームの画像に対して反転されている。同様のことが３Ｄシーケンスの右側の原フレームの画像と３Ｄシーケンスの右側の符号化されたフレームの画像にも当てはまる。より具体的には、分割画面技術のためにバタフライ・モードが使用される場合には、３次元画像は反転された視差（デプス）を有する。
【００１９】
本発明の一実施形態においては、従来技術に係る垂直分割画面技術の上述した欠点に対処するために、より具体的には、垂直分割画面技術の境界上の視差に最終的に突然の変化が生ずることを避けるために、さらに、一方の領域と他方の領域とが重なることを避けるために、発明者は、表示された画像間の境界上に垂直なバーをレンダリングにより生成することを提案する。例として、図５Ａは、本発明の実施形態に係る分割画面技術に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図５Ａにおいて、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの左側の符号化された画像と共に、垂直分割画面方向に表示されており、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの右側の符号化されたフレームの画像と共に、垂直分割画面方向に表示されている。図５Ａに描かれているように、垂直の黒色バーが原画像と符号化されたフレームの画像との間の境界に置かれ、３Ｄシーケンスの左／右の原フレームの画像と３Ｄシーケンスの左／右の符号化されたフレームの画像との間での重なりのビューを妨げるようにしている。
【００２０】
本発明の概念に従って、さらに、図５Ａの実施形態の垂直な黒色バーが３Ｄシーケンスの左側／右側の原フレームの画像と３Ｄシーケンスの左側／右側の符号化されたフレームの画像との間の境界における突然の視差の変化のビューを妨げるように使用される。
【００２１】
本発明の一実施形態においては、３Ｄコンテンツの２つのソースの左右のビューの間の視差の値を使用して、本発明の垂直バーの厚さ（ｔｈｉｃｋｎｅｓｓ）が判定される。本発明の代替的な実施形態においては、本発明の垂直なバーの厚さは、ユーザによって、ユーザにとって利用可能な複数の厚さの中から選択される。例えば、本発明のこのような実施形態においては、ユーザは、本発明の垂直バーの厚さとして、５０画素の厚さ、１００画素の厚さ、または、１５０画素の厚さのうちから選択することができる。
【００２２】
本発明の代替的な実施形態においては、従来技術に係る垂直分割画面技術の上述した欠点に対処するために、具体的には、垂直分割画面技術の境界上の視差に最終的に突然の変化が表示されることを避けるために、さらに、一方の領域が他方の領域と重なることを避けるために、発明者は、２つの画像間の境界にレンダリングによりオフセットを生じさせることを提案する。より具体的には、本発明の代替的な実施形態においては、図５Ａの実施形態の場合のような画像間の境界上に垂直バーをレンダリングにより生成する代わりに、２つの画像間の境界でオフセットを使用することができる。図５Ａの実施形態と同様に、本明細書において説明するこのような本発明の実施形態においては、本発明の画像間のオフセットのサイズを３Ｄコンテンツの２つのソースの左右のビューの間の視差の値を使用して決定することができる。本発明の代替的な実施形態においては、本発明のオフセットのサイズは、ユーザによって、ユーザにとって利用可能な複数のオフセットのサイズから選択することができる。例えば、本発明のこのような実施形態においては、ユーザは、本発明のオフセットのサイズとして、５０画素のオフセットのサイズ、１００画素のオフセットのサイズ、または、１５０画素のオフセットのサイズのうちから選択することができる。
【００２３】
本発明の一実施形態においては、従来技術に係る垂直バタフライ分割画面技術の上述した欠点に対処するために、より具体的には、３次元画像間の反転された視差（デプス）を補正するために、発明者は、バタフライ効果を有するソースの左右のビューを入れ替えることを提案する。例として、図５Ｂは、本発明の実施形態に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図５Ｂに描かれているように、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの右側の符号化されたフレームの画像と共に垂直分割画面方向に表示され、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの左側の符号化されたフレームの画像と共に垂直分割画面方向に表示される。発明者は、このような方向により、垂直バタフライ分割画面方向での３次元画像の表示における反転した視差（デプス）が補正されることを発見した。
【００２４】
図６は、本発明の実施形態に従って分割画面モードで３Ｄコンテンツを正しく表示する装置／システムのハイレベル・ブロック図である。図６の装置／システム６００は、例示的には、３Ｄコンテンツの第１のソースおよび第２のソースを含む。より具体的には、図６は、コンテンツの左側のビューのソース１ ６０５と、コンテンツの右側のビューのソース１ ６１０と、コンテンツの左側のビューのソース２ ６１５と、コンテンツの右側のビューのソース２ ６２０とが含まれることを例示している。本発明の一実施形態においては、コンテンツの左側のビューおよび右側のビューのソース１は、３Ｄビデオ・ストリームを発生するために使用される原コンテンツの左側のビューおよび右側のビューのストリームを含む。本発明のこのような実施形態においては、コンテンツの左側のビューおよび右側のビューのソース２は、３Ｄビデオ・ストリームを発生させるために使用される原コンテンツの左側のビューおよび右側のビューのストリームの再符号化された分割ストリームを含む。本発明の代替的な実施形態においては、この代わりに、コンテンツの左側のビューおよび右側のビューのソース２は、３Ｄビデオ・ストリームを発生するために使用される原コンテンツの左側のビューおよび右側のビューのストリームを含み、コンテンツの左側のビューおよび右側のビューのソース１は、３Ｄビデオ・ストリームを発生するために使用される原コンテンツの左側のビューおよび右側のビューのストリームの再符号化された分割ストリームを含む。
【００２５】
図６の装置／システム６００は、さらに、左側のビューのためのミキサ６２５と、右側のビューのためのミキサ６３０と、画像をレンダリングするためのレンダラ６４０と、を含む。図６の装置／システム６００は、さらに、オプションとして、コミュート装置６５０を含む。
【００２６】
図６に描かれている本発明の実施の形態に従った装置／システム６００では、２つの左側のソース６０５、６１５からの左側のコンテンツ（例えば、原コンテンツ・ストリームおよび再符号化されたコンテンツ・ストリーム）が左側のビューのためのミキサ６２５で混合される。さらに、２つの右側のソース６１０、６２０からの右側のコンテンツ（例えば、原コンテンツ・ストリームおよび再符号化されたコンテンツ・ストリーム）が右側のビューのためのミキサ６３０で混合される。ミキサ６２５、６３０からの混合されたコンテンツは、次に、画像を生成するために、さらに、一実施形態では、本発明の実施形態に従った垂直分割画面画像を生成するためにレンダラ６４０に伝達される。より具体的には、本発明の一実施形態に従って、レンダラ６４０は、上述したような、比較のための垂直分割画面方向の画像の表示を可能にし、一実施形態では、本発明の概念を画像に適用する。
【００２７】
より具体的には、本発明の実施形態に従って、レンダラ６４０は、垂直分割画面モードで表示するための画像を生成し、本発明の垂直バーを垂直分割画面モードにおける画像間の境界に適用する。本発明の代替的な実施形態においては、レンダラ６４０は、垂直分割画面モードで表示するための画像を生成し、本明細書において説明されている本発明の様々な実施形態で特定されているように、オフセットを垂直分割画面モードにおける画像間の境界に適用する。
【００２８】
画像が垂直バタフライ分割画面モードで表示されるような場合には、図６の装置／システム６００のオプションのコミュート装置６５０が使用される。より具体的には、本発明のコミュート装置６５０が使用され、上述したような垂直バタフライ分割画面方向の３次元画像の表示における反転した視差（デプス）を補正するためにコンテンツのソースのうちの少なくとも１つの左側のビューと右側のビューとが入れ替えられる。
【００２９】
図６の装置／システム６００において、コミュート装置６５０は、装置／システム６００の別個のコンポーネントであるように例示されているが、本発明の代替的な実施形態においては、コミュート装置６５０は、ミキサ６２５、６３０またはレンダラ６４０の統合されたコンポーネントであってもよい。さらに、図６の実施形態においては、レンダラ６４０、ミキサ６２５、６３０、およびコミュート装置６５０は、別個のコンポーネントであるように描かれているが、本発明の代替的な実施形態においては、コンポーネントは、ハードウエアにおける１つの装置または、ソフトウエアにおける１つのコンポーネントであってもよい。
【００３０】
図７は、本発明の実施形態が適用される３Ｄ符号化／復号システム７００のハイレベル・ブロック図である。図７のシステム７００は、例示的には、３Ｄビデオ・ストリームのソース７０２を含み、ビデオ・ストリームは、左眼ビデオ・ストリーム７０４および右眼ビデオ・ストリーム７０６を有する。システム７００は、さらに、ビデオ復号器７０８と、ストリーム・スプリッタ７１０と、符号化器７１２と、図６の装置／システム６００とを含む。
【００３１】
図７のシステム７００においては、左眼ビデオ・ストリーム７０４および右眼ビデオ・ストリーム７０６は、復号器７０８によって復号され、復号済の左眼ビデオ・ストリーム６０５および右眼ビデオ・ストリーム６１０となり、２つの復号済みの３Ｄビデオ・ストリームに分割するために、ストリーム・スプリッタ７１０に伝達される。左眼ビデオ・ストリーム６０５および右眼ビデオ・ストリーム６１０は、ストリーム・スプリッタ７１０により分割され、第１の分割済の３Ｄビデオ・ストリームは、図６の装置／システム６００に伝達され、一実施形態においては、コンテンツ６０５の左側のビューのソース１およびコンテンツ６１０の右側のビューのソース１となる。図７のシステム７００においては、第２の分割済の３Ｄビデオ・ストリームは、符号化のため、符号化器７１２に伝達される。符号化器によって再符号化される第２の分割済の３Ｄビデオ・ストリームの左眼ビデオ・ストリーム６０５および右眼ビデオ・ストリーム６１０は、図６の装置／システム６００に伝達され、一実施形態においては、コンテンツ６１５の左側のビューのソース２およびコンテンツ６２０の右側のビューのソース２となる。復号された３Ｄのビデオ・ストリームの左眼および右眼のビデオ・ストリームは、図６の装置／システム６００に関して上述したように、さらに、本発明の上述した実施の形態に従って処理される。図７のシステム７００は、オプションとして、さらに、ビデオ・フレームの部分を合成されたビデオ・フレームに表示する表示装置７１５を含む。
【００３２】
図８は、本発明の実施形態に従って３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際の３次元ビデオ・ストリームの視覚的な検査のための方法のハイレベル・フロー図である。図８の方法８００は、例示的には、ステップ８０２で開始され、このステップ８０２では、左眼ビデオ・ストリームおよび右眼ビデオ・ストリームを有する復号された３次元ビデオ・ストリームを、少なくとも２つの復号されたビデオ・ストリームに分割する。各ビデオ・ストリームは、左眼ビデオ・ストリームおよび右眼ビデオ・ストリームを含む。方法８００は、次に、ステップ８０４に進む。
【００３３】
ステップ８０４において、少なくとも２つの分割された３次元ビデオ・ストリームのうちの１つを第２のビデオ・フォーマットに再符号化する。次に、方法８００は、ステップ８０６に進む。
【００３４】
ステップ８０６において、まだ再符号化されていない復号された３次元ビデオ・ストリームの左眼のビデオ・ストリームまたは右眼のビデオ・ストリームのフレームの少なくとも一部、さらに、再符号化された３次元ビデオ・ストリームの左眼ビデオ・ストリームまたは右眼ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレーム部分および対応する再符号化された３次元ビデオ・フレーム部分が合成されたビデオ・フレームに共に現れるようにする。次に、この方法は、ステップ８０８に進む。
【００３５】
ステップ８０８において、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューを操作し、復号された３次元ビデオ・フレーム部分と対応する再符号化された３次元ビデオ・フレーム部分との間の境界上の視差の変化、さらに、フレーム部分の重なりが見えないようにする。本発明の一実施形態では、この操作は、復号された３次元ビデオ・フレーム部分と対応する再符号化された３次元ビデオ・フレーム部分との間の境界に垂直なバーを挿入するステップを含む。本発明の代替的な実施形態においては、この操作は、復号された３次元ビデオ・フレーム部分と対応する再符号化された３次元ビデオ・フレーム部分との間の境界にオフセットを適用するステップを含む。ここで、方法８００は、終了する。
【００３６】
分割画面モードで３Ｄコンテンツを正しく表示する方法、装置、およびシステムについての様々な実施形態について説明したが、（これらの実施形態は、限定的な目的ではなく、例示的な目的で示されている）、上述した開示内容に基づいて当業者であれば、実施形態に対する変更や改変を施すことができる。従って、本発明の範囲および精神の範囲内で、開示した本発明の特定の実施形態に変更を施すことができることを理解すべきである。上述した内容は、本発明の様々な実施形態に関するが、本発明の基本的な範囲を逸脱することなく、本発明の他の実施形態、別の実施形態を企図することも可能である。
【技術分野】
【０００１】
本出願は、２０１０年２月２４日付で出願された米国仮特許出願第６１／３０７，７３４号の利益を主張するものであり、その開示内容全体を本明細書に盛り込んだものとする。
【０００２】
本発明は、一般的には、３Ｄコンテンツの視覚的な評価に関し、より具体的には、３Ｄコンテンツの評価のための分割画面を実施するための方法、装置、およびシステムに関する。
【背景技術】
【０００３】
比較対象となるコンテンツの２つ以上のシーケンスを比較するために、プレイヤーは、１つの画面上に、または他の場合には、複数の画面上に、コンテンツの少なくとも部分を同時に表示することができる。このような技術は、一般的には、分割画面と呼ばれている。最も一般的な分割画面技術として、垂直分割画面モードおよび垂直バタフライ分割画面モードが挙げられる。例として、図１Ａは、２Ｄシーケンスの原フレーム（オリジナルのフレーム）の表示の代表的な図であり、図１Ｂは、図１Ａの２Ｄシーケンスの原フレームを符号化したバージョンの表示の代表的な図である。このようなシーケンスを比較するために、分割画面技術を使用することができる。例として、図２Ａは、従来技術に係る分割画面技術に従って垂直分割画面方向（ｖｅｒｔｉｃａｌ ｓｐｌｉｔ ｓｃｒｅｅｎ ｏｒｉｅｎｔａｔｉｏｎ）に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図を描いている。図２Ａに例示されるように、垂直分割画面技術は、原シーケンスと符号化後のシーケンスとをサイドバイサイドで（横に並べて）比較できるようにすることにより正確性の評価、例えば、符号化処理の正確性の評価を行う視覚的手段を提供する。
【０００４】
このような比較を行うには、バタフライ垂直分割画面（ｂｕｔｔｅｒｆｌｙ ｖｅｒｔｉｃａｌ ｓｐｌｉｔ ｓｃｒｅｅｎ）も有用である。例として、図２Ｂは、従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向（ｏｒｉｅｎｔａｔｉｏｎ）に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図である。図２Ｂに例示されるように、垂直バタフライ分割画面技術は、原シーケンスと符号化済のシーケンスとをサイドバイサイドで（ｓｉｄｅ−ｂｙ−ｓｉｄｅ）比較できるようにすることにより正確性の評価、例えば、符号化処理の正確性の評価を行う視覚的手段を提供する。
【０００５】
このような分割画面技術は、２次元コンテンツの場合に良好に機能するものであるが、垂直分割画面モードは、３次元コンテンツを表示する際には様々な欠点を有することがある。より具体的には、分割画面技術が３次元コンテンツに適用されると、画像／画面間の境界で、突然の視差（ｄｉｓｐａｒｉｔｙ）の変化が表示されることがある。さらに、一方の領域／画像の再構成された３次元画像が他方の領域／画像と重なることがある。またさらに、分割画面技術としてバタフライ・モードが使用される場合には、３次元画像は、反転した視差（ｉｎｖｅｒｔｅｄ ｄｉｓｐａｒｉｔｙ）（デプス）を有する。
【発明の概要】
【０００６】
本発明の各実施形態は、分割画面モードでの３Ｄコンテンツの表示に関わる表示の問題を解決する方法、装置、およびシステムを提供することによって、従来技術の欠点に対処する。
【０００７】
本発明の一実施形態においては、３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査する方法は、
復号された３次元ビデオ・ストリームを少なくとも２つの復号されたビデオ・ストリームに分割するステップと、
少なくとも２つの分割された３次元ビデオ・ストリームのうちの１つを第２のビデオ・フォーマットに再符号化するステップと、
再符号化されていない復号された３次元ビデオ・ストリームのフレームの少なくとも部分および再符号化された３次元ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにするステップと、
復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューを妨げ、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界上の視差の変化、さらに、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするステップと、を含む。
【０００８】
本発明の代替的な実施形態においては、左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを含む復号された３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査する装置は、
復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および再符号化されている復号された３次元ビデオ・ストリームの分割コピーの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を第２のフォーマットで、合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにする手段を含む。さらに、この装置は、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界上の視差の変化、さらに、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにする手段を含む。
【０００９】
本発明の代替的な実施形態においては、３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査するシステムは、
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する３次元ビデオ・ストリームを復号するビデオ復号器と、
復号された３次元ビデオ・ストリームを少なくとも２つの復号された３次元ビデオ・ストリームに分割するストリーム・スプリッタと、
少なくとも２つの復号されたビデオ・ストリームのうちの１つを受信し、少なくとも２つの復号されたビデオ・ストリームのうちの受信されたビデオ・ストリームを第２のビデオ・フォーマットに再符号化する符号化器と、
再符号化されていない復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにする少なくとも１つのビデオ・ミキサと、
復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界上の視差の変化、さらに、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするレンダラと、を含む。本発明の一実施形態においては、システムは、ビデオ・フレームの混合され、レンダリングされた部分を合成されたビデオ・フレーム内に表示する表示装置をさらに含むことができる。
【００１０】
本発明の開示内容は、添付図面を参照して以下の詳細な説明を考慮することによって容易に理解できるであろう。
【図面の簡単な説明】
【００１１】
【図１Ａ】２Ｄシーケンスの原フレームの表示の代表的な図である。
【図１Ｂ】図１Ａの２Ｄシーケンスの原フレームを符号化したバージョンの表示の代表的な図である。
【図２Ａ】従来技術に係る分割画面技術に従って垂直分割画面方向に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図である。
【図２Ｂ】従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向に表示される図１Ａの２Ｄシーケンスの原フレームおよび図１Ｂの２Ｄシーケンスの原フレームを符号化したバージョンの代表的な図である。
【図３Ａ】３Ｄシーケンスの左右の原フレームの表示の代表的な図である。
【図３Ｂ】図３Ａの３Ｄシーケンスの左右の原フレームを符号化したバージョンの表示の代表的な図である。
【図４Ａ】従来技術に係る分割画面技術に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図４Ｂ】従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図５Ａ】本発明の実施形態に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図５Ｂ】本発明の実施形態に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図である。
【図６】本発明の実施形態に従った分割画面モードで３Ｄコンテンツを正しく表示するシステムのハイレベル・ブロック図である。
【図７】本発明の実施形態に従って本発明の実施形態が適用される３Ｄ符号化／復号システム７００のハイレベル・ブロック図である。
【図８】本発明の実施形態に従って３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に３次元ビデオ・ストリームを視覚的に検査するための方法のハイレベル・フロー図である。
【００１２】
図面は、本発明の概念を例示するためのものであり、必ずしも、本発明を例示する構成がこれらの図面の構成のみに限定されるものではないことを理解すべきである。理解を容易にするために、可能な箇所では、図を通して同一の要素を示すために同一の参照符号が使用されている。
【発明を実施するための形態】
【００１３】
本発明は、分割画面モードにおける３Ｄコンテンツの表示に関わる表示の問題を解決する方法、装置、およびシステムを有益に提供する。本発明は、主に、２つの画像間の境界で垂直な不透明または黒色のバーまたはスペースを生成することによって視差誤差（ｄｉｓｐａｒｉｔｙ ｅｒｒｏｒ）を補正する処理との関連で説明されるが、本発明のこの特定の実施形態を本発明の範囲を限定するように取り扱うべきではない。本発明の開示内容に基づく情報を得た当業者であれば、本発明の概念は、２つ以上の画像間の境界において、実質的に、どのような形、色、方向、または、サイズを有するブロッキング手段またはスペーシング手段を使用しても達成できることが理解できるであろう。
【００１４】
図面において示される様々な要素の機能は、専用のハードウエアの使用により提供されてもよく、適切なソフトウエアと関連付けてソフトウエアを実行することが可能なハードウエアの使用によって提供されてもよい。機能がプロセッサによって提供される場合にも、単一の専用プロセッサによって提供されてもよく、単一の共有プロセッサによって提供されてもよく、複数の別個のプロセッサによって提供されてもよく、プロセッサの中に共有されているものがあってもよい。さらに、用語「プロセッサ」または「コントローラ」を明示的に使用した場合であっても、ソフトウエアを実行することが可能なハードウエアのみを意味するように解釈されるべきではなく、限定するものではないが、ディジタル信号プロセッサ（ＤＳＰ）・ハードウエア、ソフトウエアを格納する読み出し専用メモリ（ＲＯＭ）、ランダム・アクセス・メモリ（ＲＡＭ）、および不揮発性の記憶装置を暗黙的に含むことがある。また、本明細書における本開示内容の原理、態様、および、実施形態についての全ての記載、さらに、その特定の例は、構造的な均等物および機能的な均等物の双方を包含するように意図されている。さらに、このような均等物は、現在公知の均等物だけでなく、将来において開発される均等物、即ち、構造に係らず、同一の機能を実行するように開発されたどのような要素でも包含するように意図されている。
【００１５】
従って、例えば当業者であれば、本明細書において示されたブロック図は、本発明の原理を実施する例示的なシステム・コンポーネントおよび／または回路の概念図であることが理解できよう。同様に、フローチャート、フロー図、状態遷移図、擬似コードなどは、いずれも様々な処理を表すことが理解できよう。これらの処理は、実質的にコンピュータによって読み取り可能なメディアにおいて表すことができ、コンピュータまたはプロセッサにより実行され、このようなコンピュータまたはプロセッサが明示的に図示されているかどうかに関わるものではない。
【００１６】
上述したように、分割画面技術は２次元コンテンツの場合に良好に機能するものであるが、垂直分割画面モードは３次元コンテンツを表示する際には様々な欠点を有することがある。より具体的には、分割画面技術が３次元コンテンツに適用されると、画像／画面間の境界で、突然の視差の変化が表示されることがある。さらに、一方の領域／画像の再構成された３次元画像が他方の領域／画像と重なることがある。例として、図３Ａは、３Ｄシーケンスの左右の原フレームの表示の代表的な図を描いており、図３Ｂは、図３Ａの３Ｄシーケンスの左右の原フレームを符号化したバージョンの表示の代表的な図を描いている。
【００１７】
このようなシーケンスを比較するために、コンテンツは、垂直の分割画面方向に配置することができる。例として、図４Ａは、従来技術に係る分割画面技術に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図４Ａにおいて、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの左側の符号化されたフレームの画像と共に、垂直分割画面方向に表示されており、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの右側の符号化されたフレームの画像と共に、垂直分割画面方向に表示されている。図４Ａに描かれているように、３Ｄシーケンスの左側の原フレームの再構成された３次元画像は、３Ｄシーケンスの左側の符号化されたフレームの画像と重なっている。同様のことが３Ｄシーケンスの右側の原フレームの画像と３Ｄシーケンスの右側の符号化されたフレームの画像にも当てはまる。図４Ａから、さらに、画像間の画像／画面間の境界で、突然の視差の変化が表示されていることが理解できるであろう。
【００１８】
垂直バタフライ分割画面技術の適用に関わる問題が図４Ｂに例示されている。例として、図４Ｂは、従来技術に係る分割画面技術に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図４Ｂにおいて、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの左側の符号化された画像と共に、垂直バタフライ分割画面方向に表示されており、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの右側の符号化された画像と共に、垂直バタフライ分割画面方向に表示されている。図４Ｂに描かれているように、３Ｄシーケンスの左側の原フレームの再構成された３次元画像のデプスは、３Ｄシーケンスの左側の符号化されたフレームの画像に対して反転されている。同様のことが３Ｄシーケンスの右側の原フレームの画像と３Ｄシーケンスの右側の符号化されたフレームの画像にも当てはまる。より具体的には、分割画面技術のためにバタフライ・モードが使用される場合には、３次元画像は反転された視差（デプス）を有する。
【００１９】
本発明の一実施形態においては、従来技術に係る垂直分割画面技術の上述した欠点に対処するために、より具体的には、垂直分割画面技術の境界上の視差に最終的に突然の変化が生ずることを避けるために、さらに、一方の領域と他方の領域とが重なることを避けるために、発明者は、表示された画像間の境界上に垂直なバーをレンダリングにより生成することを提案する。例として、図５Ａは、本発明の実施形態に係る分割画面技術に従って垂直分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図５Ａにおいて、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの左側の符号化された画像と共に、垂直分割画面方向に表示されており、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの右側の符号化されたフレームの画像と共に、垂直分割画面方向に表示されている。図５Ａに描かれているように、垂直の黒色バーが原画像と符号化されたフレームの画像との間の境界に置かれ、３Ｄシーケンスの左／右の原フレームの画像と３Ｄシーケンスの左／右の符号化されたフレームの画像との間での重なりのビューを妨げるようにしている。
【００２０】
本発明の概念に従って、さらに、図５Ａの実施形態の垂直な黒色バーが３Ｄシーケンスの左側／右側の原フレームの画像と３Ｄシーケンスの左側／右側の符号化されたフレームの画像との間の境界における突然の視差の変化のビューを妨げるように使用される。
【００２１】
本発明の一実施形態においては、３Ｄコンテンツの２つのソースの左右のビューの間の視差の値を使用して、本発明の垂直バーの厚さ（ｔｈｉｃｋｎｅｓｓ）が判定される。本発明の代替的な実施形態においては、本発明の垂直なバーの厚さは、ユーザによって、ユーザにとって利用可能な複数の厚さの中から選択される。例えば、本発明のこのような実施形態においては、ユーザは、本発明の垂直バーの厚さとして、５０画素の厚さ、１００画素の厚さ、または、１５０画素の厚さのうちから選択することができる。
【００２２】
本発明の代替的な実施形態においては、従来技術に係る垂直分割画面技術の上述した欠点に対処するために、具体的には、垂直分割画面技術の境界上の視差に最終的に突然の変化が表示されることを避けるために、さらに、一方の領域が他方の領域と重なることを避けるために、発明者は、２つの画像間の境界にレンダリングによりオフセットを生じさせることを提案する。より具体的には、本発明の代替的な実施形態においては、図５Ａの実施形態の場合のような画像間の境界上に垂直バーをレンダリングにより生成する代わりに、２つの画像間の境界でオフセットを使用することができる。図５Ａの実施形態と同様に、本明細書において説明するこのような本発明の実施形態においては、本発明の画像間のオフセットのサイズを３Ｄコンテンツの２つのソースの左右のビューの間の視差の値を使用して決定することができる。本発明の代替的な実施形態においては、本発明のオフセットのサイズは、ユーザによって、ユーザにとって利用可能な複数のオフセットのサイズから選択することができる。例えば、本発明のこのような実施形態においては、ユーザは、本発明のオフセットのサイズとして、５０画素のオフセットのサイズ、１００画素のオフセットのサイズ、または、１５０画素のオフセットのサイズのうちから選択することができる。
【００２３】
本発明の一実施形態においては、従来技術に係る垂直バタフライ分割画面技術の上述した欠点に対処するために、より具体的には、３次元画像間の反転された視差（デプス）を補正するために、発明者は、バタフライ効果を有するソースの左右のビューを入れ替えることを提案する。例として、図５Ｂは、本発明の実施形態に従って垂直バタフライ分割画面方向に表示される図３Ａの３Ｄシーケンスの左右の原フレームおよび図３Ｂの３Ｄシーケンスの左右の原フレームを符号化したバージョンの代表的な図を描いている。即ち、図５Ｂに描かれているように、３Ｄシーケンスの左側の原フレームの画像は、３Ｄシーケンスの右側の符号化されたフレームの画像と共に垂直分割画面方向に表示され、３Ｄシーケンスの右側の原フレームの画像は、３Ｄシーケンスの左側の符号化されたフレームの画像と共に垂直分割画面方向に表示される。発明者は、このような方向により、垂直バタフライ分割画面方向での３次元画像の表示における反転した視差（デプス）が補正されることを発見した。
【００２４】
図６は、本発明の実施形態に従って分割画面モードで３Ｄコンテンツを正しく表示する装置／システムのハイレベル・ブロック図である。図６の装置／システム６００は、例示的には、３Ｄコンテンツの第１のソースおよび第２のソースを含む。より具体的には、図６は、コンテンツの左側のビューのソース１ ６０５と、コンテンツの右側のビューのソース１ ６１０と、コンテンツの左側のビューのソース２ ６１５と、コンテンツの右側のビューのソース２ ６２０とが含まれることを例示している。本発明の一実施形態においては、コンテンツの左側のビューおよび右側のビューのソース１は、３Ｄビデオ・ストリームを発生するために使用される原コンテンツの左側のビューおよび右側のビューのストリームを含む。本発明のこのような実施形態においては、コンテンツの左側のビューおよび右側のビューのソース２は、３Ｄビデオ・ストリームを発生させるために使用される原コンテンツの左側のビューおよび右側のビューのストリームの再符号化された分割ストリームを含む。本発明の代替的な実施形態においては、この代わりに、コンテンツの左側のビューおよび右側のビューのソース２は、３Ｄビデオ・ストリームを発生するために使用される原コンテンツの左側のビューおよび右側のビューのストリームを含み、コンテンツの左側のビューおよび右側のビューのソース１は、３Ｄビデオ・ストリームを発生するために使用される原コンテンツの左側のビューおよび右側のビューのストリームの再符号化された分割ストリームを含む。
【００２５】
図６の装置／システム６００は、さらに、左側のビューのためのミキサ６２５と、右側のビューのためのミキサ６３０と、画像をレンダリングするためのレンダラ６４０と、を含む。図６の装置／システム６００は、さらに、オプションとして、コミュート装置６５０を含む。
【００２６】
図６に描かれている本発明の実施の形態に従った装置／システム６００では、２つの左側のソース６０５、６１５からの左側のコンテンツ（例えば、原コンテンツ・ストリームおよび再符号化されたコンテンツ・ストリーム）が左側のビューのためのミキサ６２５で混合される。さらに、２つの右側のソース６１０、６２０からの右側のコンテンツ（例えば、原コンテンツ・ストリームおよび再符号化されたコンテンツ・ストリーム）が右側のビューのためのミキサ６３０で混合される。ミキサ６２５、６３０からの混合されたコンテンツは、次に、画像を生成するために、さらに、一実施形態では、本発明の実施形態に従った垂直分割画面画像を生成するためにレンダラ６４０に伝達される。より具体的には、本発明の一実施形態に従って、レンダラ６４０は、上述したような、比較のための垂直分割画面方向の画像の表示を可能にし、一実施形態では、本発明の概念を画像に適用する。
【００２７】
より具体的には、本発明の実施形態に従って、レンダラ６４０は、垂直分割画面モードで表示するための画像を生成し、本発明の垂直バーを垂直分割画面モードにおける画像間の境界に適用する。本発明の代替的な実施形態においては、レンダラ６４０は、垂直分割画面モードで表示するための画像を生成し、本明細書において説明されている本発明の様々な実施形態で特定されているように、オフセットを垂直分割画面モードにおける画像間の境界に適用する。
【００２８】
画像が垂直バタフライ分割画面モードで表示されるような場合には、図６の装置／システム６００のオプションのコミュート装置６５０が使用される。より具体的には、本発明のコミュート装置６５０が使用され、上述したような垂直バタフライ分割画面方向の３次元画像の表示における反転した視差（デプス）を補正するためにコンテンツのソースのうちの少なくとも１つの左側のビューと右側のビューとが入れ替えられる。
【００２９】
図６の装置／システム６００において、コミュート装置６５０は、装置／システム６００の別個のコンポーネントであるように例示されているが、本発明の代替的な実施形態においては、コミュート装置６５０は、ミキサ６２５、６３０またはレンダラ６４０の統合されたコンポーネントであってもよい。さらに、図６の実施形態においては、レンダラ６４０、ミキサ６２５、６３０、およびコミュート装置６５０は、別個のコンポーネントであるように描かれているが、本発明の代替的な実施形態においては、コンポーネントは、ハードウエアにおける１つの装置または、ソフトウエアにおける１つのコンポーネントであってもよい。
【００３０】
図７は、本発明の実施形態が適用される３Ｄ符号化／復号システム７００のハイレベル・ブロック図である。図７のシステム７００は、例示的には、３Ｄビデオ・ストリームのソース７０２を含み、ビデオ・ストリームは、左眼ビデオ・ストリーム７０４および右眼ビデオ・ストリーム７０６を有する。システム７００は、さらに、ビデオ復号器７０８と、ストリーム・スプリッタ７１０と、符号化器７１２と、図６の装置／システム６００とを含む。
【００３１】
図７のシステム７００においては、左眼ビデオ・ストリーム７０４および右眼ビデオ・ストリーム７０６は、復号器７０８によって復号され、復号済の左眼ビデオ・ストリーム６０５および右眼ビデオ・ストリーム６１０となり、２つの復号済みの３Ｄビデオ・ストリームに分割するために、ストリーム・スプリッタ７１０に伝達される。左眼ビデオ・ストリーム６０５および右眼ビデオ・ストリーム６１０は、ストリーム・スプリッタ７１０により分割され、第１の分割済の３Ｄビデオ・ストリームは、図６の装置／システム６００に伝達され、一実施形態においては、コンテンツ６０５の左側のビューのソース１およびコンテンツ６１０の右側のビューのソース１となる。図７のシステム７００においては、第２の分割済の３Ｄビデオ・ストリームは、符号化のため、符号化器７１２に伝達される。符号化器によって再符号化される第２の分割済の３Ｄビデオ・ストリームの左眼ビデオ・ストリーム６０５および右眼ビデオ・ストリーム６１０は、図６の装置／システム６００に伝達され、一実施形態においては、コンテンツ６１５の左側のビューのソース２およびコンテンツ６２０の右側のビューのソース２となる。復号された３Ｄのビデオ・ストリームの左眼および右眼のビデオ・ストリームは、図６の装置／システム６００に関して上述したように、さらに、本発明の上述した実施の形態に従って処理される。図７のシステム７００は、オプションとして、さらに、ビデオ・フレームの部分を合成されたビデオ・フレームに表示する表示装置７１５を含む。
【００３２】
図８は、本発明の実施形態に従って３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際の３次元ビデオ・ストリームの視覚的な検査のための方法のハイレベル・フロー図である。図８の方法８００は、例示的には、ステップ８０２で開始され、このステップ８０２では、左眼ビデオ・ストリームおよび右眼ビデオ・ストリームを有する復号された３次元ビデオ・ストリームを、少なくとも２つの復号されたビデオ・ストリームに分割する。各ビデオ・ストリームは、左眼ビデオ・ストリームおよび右眼ビデオ・ストリームを含む。方法８００は、次に、ステップ８０４に進む。
【００３３】
ステップ８０４において、少なくとも２つの分割された３次元ビデオ・ストリームのうちの１つを第２のビデオ・フォーマットに再符号化する。次に、方法８００は、ステップ８０６に進む。
【００３４】
ステップ８０６において、まだ再符号化されていない復号された３次元ビデオ・ストリームの左眼のビデオ・ストリームまたは右眼のビデオ・ストリームのフレームの少なくとも一部、さらに、再符号化された３次元ビデオ・ストリームの左眼ビデオ・ストリームまたは右眼ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、復号された３次元ビデオ・フレーム部分および対応する再符号化された３次元ビデオ・フレーム部分が合成されたビデオ・フレームに共に現れるようにする。次に、この方法は、ステップ８０８に進む。
【００３５】
ステップ８０８において、復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューを操作し、復号された３次元ビデオ・フレーム部分と対応する再符号化された３次元ビデオ・フレーム部分との間の境界上の視差の変化、さらに、フレーム部分の重なりが見えないようにする。本発明の一実施形態では、この操作は、復号された３次元ビデオ・フレーム部分と対応する再符号化された３次元ビデオ・フレーム部分との間の境界に垂直なバーを挿入するステップを含む。本発明の代替的な実施形態においては、この操作は、復号された３次元ビデオ・フレーム部分と対応する再符号化された３次元ビデオ・フレーム部分との間の境界にオフセットを適用するステップを含む。ここで、方法８００は、終了する。
【００３６】
分割画面モードで３Ｄコンテンツを正しく表示する方法、装置、およびシステムについての様々な実施形態について説明したが、（これらの実施形態は、限定的な目的ではなく、例示的な目的で示されている）、上述した開示内容に基づいて当業者であれば、実施形態に対する変更や改変を施すことができる。従って、本発明の範囲および精神の範囲内で、開示した本発明の特定の実施形態に変更を施すことができることを理解すべきである。上述した内容は、本発明の様々な実施形態に関するが、本発明の基本的な範囲を逸脱することなく、本発明の他の実施形態、別の実施形態を企図することも可能である。
【特許請求の範囲】
【請求項１】
３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に前記３次元ビデオ・ストリームを視覚的に検査する方法であって、
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する復号された３次元ビデオ・ストリームを少なくとも２つの復号されたビデオ・ストリームに分割するステップであって、該少なくとも２つの復号されたビデオ・ストリームの各々が左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する、前記ステップと、
前記少なくとも２つの分割された３次元ビデオ・ストリームのうちの１つを前記第２のビデオ・フォーマットに再符号化するステップと、
再符号化されていない前記復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および前記再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が前記合成されたビデオ・フレームに共に現れるようにするステップと、
前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界上の視差の変化、さらに、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするステップと、を含む、前記方法。
【請求項２】
前記操作を行うステップは、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界に垂直の黒色バーを挿入するステップを含む、請求項１に記載の方法。
【請求項３】
前記垂直の黒色のバーの幅は、前記３次元ビデオ・ストリームの前記左眼用のビデオ・ストリームおよび前記右眼用のビデオ・ストリームの対応する各フレーム間の視差の値を使用して決定される、請求項２に記載の方法。
【請求項４】
前記復号された３次元ビデオ・ストリームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が並んで現れるように合成されたビデオ・フレームに配置される、請求項１に記載の方法。
【請求項５】
前記復号された３次元ビデオ・フレームの部分は、前記復号された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、または、前記復号された３次元ビデオ・フレームの部分は、前記復号された３次元ビデオ・ストリームの前記右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、前記ビデオ・フレームの各部分は、並んで現れるように合成されたビデオ・フレームに配置される、請求項４に記載の方法。
【請求項６】
前記復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分は、当該ビデオ・フレームの各部分が互いにＹ軸に沿って反転されて見えるように合成されたビデオ・フレームに配置される、請求項１に記載の方法。
【請求項７】
前記復号された３次元ビデオ・ストリームの部分は、前記復号された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、当該ビデオ・フレームの各部分が互いにＹ軸に沿って反転されて見えるように合成されたビデオ・フレームに配置される、請求項６に記載の方法。
【請求項８】
前記復号された３次元ビデオ・ストリームの部分は、前記復号された３次元ビデオ・ストリームの前記右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、当該ビデオ・フレームの各部分が互いにＹ軸に沿って反転されて見えるように合成されたビデオ・フレームに配置される、請求項６に記載の方法。
【請求項９】
前記操作を行うステップは、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界にオフセットを適用するステップを含む、請求項１に記載の方法。
【請求項１０】
前記オフセットのサイズは、前記３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームおよび前記右眼用ビデオ・ストリームの対応する各フレームの間の視差の値を使用して決定される、請求項９に記載の方法。
【請求項１１】
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを含む復号された３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に前記３次元ビデオ・ストリームを視覚的に検査する装置であって、
前記復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および再符号化されている前記復号された３次元ビデオ・ストリームの分割コピーの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を前記第２のフォーマットで、合成されたビデオ・フレームに配置し、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が前記合成されたビデオ・フレームに共に現れるようにする手段と、
前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界上の視差の変化、さらに、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにする手段と、
を備える、前記装置。
【請求項１２】
前記合成されたフレームにおける前記復号された３次元ビデオ・ストリームまたは前記再符号化された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームまたは前記右眼用ビデオ・ストリームの前記フレームの部分を入れ替える手段をさらに備える、請求項１１に記載の装置。
【請求項１３】
前記入れ替えが、垂直バタフライ分割画面方向の３次元画像の表示における反転された視差を補正するように行われる、請求項１２に記載の装置。
【請求項１４】
３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に前記３次元ビデオ・ストリームを視覚的に検査するシステムであって、
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する３次元ビデオ・ストリームを復号するビデオ復号器と、
前記復号された３次元ビデオ・ストリームを少なくとも２つの復号された３次元ビデオ・ストリームに分割するストリーム・スプリッタと、
前記少なくとも２つの復号されたビデオ・ストリームのうちの１つを受信し、前記少なくとも２つの復号されたビデオ・ストリームのうちの受信されたビデオ・ストリームを前記第２のビデオ・フォーマットに再符号化する符号化器と、
再符号化されていない前記復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および前記再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにする少なくとも１つのビデオ・ミキサと、
前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界上の視差の変化、さらに、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするレンダラと、
を備える、前記システム。
【請求項１５】
前記復号された３次元ビデオ・ストリームまたは前記再符号化された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームまたは前記右眼用ビデオ・ストリームの部分を前記合成されたフレーム内で入れ替えるコミュートをさらに備える、請求項１４に記載のシステム。
【請求項１６】
混合され、レンダリングされた前記ビデオ・フレームの各部分を前記合成されたビデオ・フレーム内に表示する表示装置をさらに備える、請求項１４に記載のシステム。
【請求項１】
３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に前記３次元ビデオ・ストリームを視覚的に検査する方法であって、
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する復号された３次元ビデオ・ストリームを少なくとも２つの復号されたビデオ・ストリームに分割するステップであって、該少なくとも２つの復号されたビデオ・ストリームの各々が左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する、前記ステップと、
前記少なくとも２つの分割された３次元ビデオ・ストリームのうちの１つを前記第２のビデオ・フォーマットに再符号化するステップと、
再符号化されていない前記復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および前記再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が前記合成されたビデオ・フレームに共に現れるようにするステップと、
前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界上の視差の変化、さらに、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするステップと、を含む、前記方法。
【請求項２】
前記操作を行うステップは、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界に垂直の黒色バーを挿入するステップを含む、請求項１に記載の方法。
【請求項３】
前記垂直の黒色のバーの幅は、前記３次元ビデオ・ストリームの前記左眼用のビデオ・ストリームおよび前記右眼用のビデオ・ストリームの対応する各フレーム間の視差の値を使用して決定される、請求項２に記載の方法。
【請求項４】
前記復号された３次元ビデオ・ストリームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が並んで現れるように合成されたビデオ・フレームに配置される、請求項１に記載の方法。
【請求項５】
前記復号された３次元ビデオ・フレームの部分は、前記復号された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、または、前記復号された３次元ビデオ・フレームの部分は、前記復号された３次元ビデオ・ストリームの前記右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、前記ビデオ・フレームの各部分は、並んで現れるように合成されたビデオ・フレームに配置される、請求項４に記載の方法。
【請求項６】
前記復号された３次元ビデオ・フレームの部分および対応する再符号化された３次元ビデオ・フレームの部分は、当該ビデオ・フレームの各部分が互いにＹ軸に沿って反転されて見えるように合成されたビデオ・フレームに配置される、請求項１に記載の方法。
【請求項７】
前記復号された３次元ビデオ・ストリームの部分は、前記復号された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、当該ビデオ・フレームの各部分が互いにＹ軸に沿って反転されて見えるように合成されたビデオ・フレームに配置される、請求項６に記載の方法。
【請求項８】
前記復号された３次元ビデオ・ストリームの部分は、前記復号された３次元ビデオ・ストリームの前記右眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含むと共に前記対応する再符号化された３次元ビデオ・フレームの部分は、前記対応する再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームからのビデオ・フレームの少なくとも部分を含み、当該ビデオ・フレームの各部分が互いにＹ軸に沿って反転されて見えるように合成されたビデオ・フレームに配置される、請求項６に記載の方法。
【請求項９】
前記操作を行うステップは、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界にオフセットを適用するステップを含む、請求項１に記載の方法。
【請求項１０】
前記オフセットのサイズは、前記３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームおよび前記右眼用ビデオ・ストリームの対応する各フレームの間の視差の値を使用して決定される、請求項９に記載の方法。
【請求項１１】
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを含む復号された３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に前記３次元ビデオ・ストリームを視覚的に検査する装置であって、
前記復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および再符号化されている前記復号された３次元ビデオ・ストリームの分割コピーの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を前記第２のフォーマットで、合成されたビデオ・フレームに配置し、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が前記合成されたビデオ・フレームに共に現れるようにする手段と、
前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界上の視差の変化、さらに、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにする手段と、
を備える、前記装置。
【請求項１２】
前記合成されたフレームにおける前記復号された３次元ビデオ・ストリームまたは前記再符号化された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームまたは前記右眼用ビデオ・ストリームの前記フレームの部分を入れ替える手段をさらに備える、請求項１１に記載の装置。
【請求項１３】
前記入れ替えが、垂直バタフライ分割画面方向の３次元画像の表示における反転された視差を補正するように行われる、請求項１２に記載の装置。
【請求項１４】
３次元ビデオ・ストリームが第２のビデオ・フォーマットに再符号化される際に前記３次元ビデオ・ストリームを視覚的に検査するシステムであって、
左眼用ビデオ・ストリームおよび右眼用ビデオ・ストリームを有する３次元ビデオ・ストリームを復号するビデオ復号器と、
前記復号された３次元ビデオ・ストリームを少なくとも２つの復号された３次元ビデオ・ストリームに分割するストリーム・スプリッタと、
前記少なくとも２つの復号されたビデオ・ストリームのうちの１つを受信し、前記少なくとも２つの復号されたビデオ・ストリームのうちの受信されたビデオ・ストリームを前記第２のビデオ・フォーマットに再符号化する符号化器と、
再符号化されていない前記復号された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの少なくとも部分および前記再符号化された３次元ビデオ・ストリームの左眼用ビデオ・ストリームまたは右眼用ビデオ・ストリームのフレームの対応する部分を合成されたビデオ・フレームに配置し、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分が合成されたビデオ・フレームに共に現れるようにする少なくとも１つのビデオ・ミキサと、
前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の境界のビューに対して操作を行い、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の間の前記境界上の視差の変化、さらに、前記復号された３次元ビデオ・フレームの部分および前記対応する再符号化された３次元ビデオ・フレームの部分の重なりが見えないようにするレンダラと、
を備える、前記システム。
【請求項１５】
前記復号された３次元ビデオ・ストリームまたは前記再符号化された３次元ビデオ・ストリームの前記左眼用ビデオ・ストリームまたは前記右眼用ビデオ・ストリームの部分を前記合成されたフレーム内で入れ替えるコミュートをさらに備える、請求項１４に記載のシステム。
【請求項１６】
混合され、レンダリングされた前記ビデオ・フレームの各部分を前記合成されたビデオ・フレーム内に表示する表示装置をさらに備える、請求項１４に記載のシステム。
【図１Ａ】
【図１Ｂ】
【図２Ａ】
【図２Ｂ】
【図３Ａ】
【図３Ｂ】
【図４Ａ】
【図４Ｂ】
【図５Ａ】
【図５Ｂ】
【図６】
【図７】
【図８】
【図１Ｂ】
【図２Ａ】
【図２Ｂ】
【図３Ａ】
【図３Ｂ】
【図４Ａ】
【図４Ｂ】
【図５Ａ】
【図５Ｂ】
【図６】
【図７】
【図８】
【公表番号】特表２０１３−５２０９２３（Ｐ２０１３−５２０９２３Ａ）
【公表日】平成２５年６月６日（２０１３．６．６）
【国際特許分類】
【出願番号】特願２０１２−５５４９６６（Ｐ２０１２−５５４９６６）
【出願日】平成２２年１０月８日（２０１０．１０．８）
【国際出願番号】ＰＣＴ／ＵＳ２０１０／００２７１６
【国際公開番号】ＷＯ２０１１／１０５９８８
【国際公開日】平成２３年９月１日（２０１１．９．１）
【出願人】（５０１２６３８１０）トムソン ライセンシング (2,848)
【氏名又は名称原語表記】Ｔｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ
【住所又は居所原語表記】１−５， ｒｕｅ Ｊｅａｎｎｅ ｄ’Ａｒｃ， ９２１３０ ＩＳＳＹ ＬＥＳ ＭＯＵＬＩＮＥＡＵＸ， Ｆｒａｎｃｅ
【Ｆターム（参考）】
【公表日】平成２５年６月６日（２０１３．６．６）
【国際特許分類】
【出願日】平成２２年１０月８日（２０１０．１０．８）
【国際出願番号】ＰＣＴ／ＵＳ２０１０／００２７１６
【国際公開番号】ＷＯ２０１１／１０５９８８
【国際公開日】平成２３年９月１日（２０１１．９．１）
【出願人】（５０１２６３８１０）トムソン ライセンシング (2,848)
【氏名又は名称原語表記】Ｔｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ
【住所又は居所原語表記】１−５， ｒｕｅ Ｊｅａｎｎｅ ｄ’Ａｒｃ， ９２１３０ ＩＳＳＹ ＬＥＳ ＭＯＵＬＩＮＥＡＵＸ， Ｆｒａｎｃｅ
【Ｆターム（参考）】
[ Back to top ]