立体フィルムにマーク付けするシステム及び方法
立体映画に色でマーク付けするシステム及び方法が提供される。システム及び方法は、あるマークを左画像に付加し、相補的な色を有するマークを右画像に付加し、視聴されたとき、マークは所定の条件下で見る事ができない。システム及び方法は、第一の画像と第二の画像とを含む立体画像を取得し（２０２）、第一の色を有する第一のマークを第一の画像の予め決定された位置に付加し（２０４）、第一の画像における予め決定された位置と実質的に同じ予め決定された位置で、第二の画像に、第一のマークの第一の色とは異なる第二の色を有する第二のマークを付加し（２０６）、３次元モードで視聴されたとき、第一のマーク及び第二のマークは、１つの色からなる単一のマークに結合される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータグラフィック処理及びディスプレイシステムに関し、より詳細には、立体フィルムにマーク付けするシステム及び方法に関する。
【背景技術】
【０００２】
立体フィルムの画像形成は、僅かに異なる視点から撮影された、あるシーンの少なくとも２つの画像を視覚的に結合して、３次元（３Ｄ）の奥行きの幻想を生成するプロセスである。この技術は、人間の目がある距離で離れて配置され、従って同じシーンを正確に見ない事実に依存する。それぞれの目に異なる視点からの画像を供給することで、見る人の目は、奥行きを知覚するようにトリックにかかる。典型的に、２つの異なる視点が提供された場合、コンポーネント画像は、参照画像及び相補画像としてもそれぞれ知られる、「左」画像及び「右」画像と呼ばれる。しかし、当業者であれば、立体画像を形成するため、２を超える視点が結合される場合があることを認識するであろう。
【０００３】
映画からデジタルシネマへの遷移は、３Ｄ及びリアルタイム伝送のようなシネマの新たな機会を形成している。３Ｄコンテンツについて、立体コンテンツが予知できる将来にデジタルシネマを支配することが期待される。立体デジタルシネマは、単一のプロジェクタを使用して２つの画像を投影することを含む。以下に記載されるように、デジタルシネマにおいて立体コンテンツを投影する３つの技術が現在存在する。
【０００４】
光学的な変更をもたないアクティブグラスを使用する。この技術では、プロジェクタは、標準のスクリーンに左画像と右画像を交互にする。ユーザ又はビューアは、ＩＲコントローラを使用してコンテンツに同期されるアクティブグラスを装着する。
【０００５】
円偏光子をもつパッシブグラスを使用する。これは、現在最も広く配置されるシステムである。また、プロジェクタは、シルバースクリーンに左画像と右画像を交互にする。偏光ユニットは、プロジェクタの前に配置される。ユーザ又はビューアは、特別のパッシブグラスを装着することが要求される。
【０００６】
ドルビー３Ｄ技術。この技術では、色が６つのバンドに分割され、それぞれの目に３つのバンドが割り当てられる。プロジェクタは、左画像と右画像とを交互にし、ユーザ又はビューアは、特別のカラーフィルタリンググラスを装着する。
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述されたように、全ての技術は、コンテンツを見るためにメガネを装着することを要求する。メガネを装着しなければ、３Ｄコンテンツは歪んで見える。
【０００８】
シネマでは、たとえばムービープレビューといった商業広告は典型的に２次元（２Ｄ）であることが一般的である。次いで、３Ｄ効果を実現するため、何時特別のメガネをビューアに装着させるべきかを知らせることが必要である。ビューアに何時メガネを装着させるべきかを知らせるため、シネマは、上下に移動するカーテンを使用するか、アナウンスを行う必要がある。これは、番組又は映画の間に、３Ｄから２Ｄへ、２Ｄから３Ｄへの多くの遷移が潜在的に存在するので、困難になる。したがって、ビューアに不快感を与えない立体フィルムの視聴者に遷移のメッセージを提供する技術について必要が存在する。
【０００９】
さらに、動画の劇場での上映に関連した海賊行為の懸念が知られている。ひとたび映画の配給業者が劇場での上映のために上映者に映画に関する印刷物を配給すると、その製品に対する所定の程度の制御が失われる。アナログであるかデジタルであるかに関わらず、ある劇場において映画を上映する過程で、劇場における顧客は、上映の間に、たとえばハンドヘルドカムコーダを使用して、映画をこっそりと記録する場合がある。結果として、比較的高品質の違法なコピーが行われる可能性がある。ある映画の係る違法な「海賊行為」による複製は、インターネットを通して配信されるか又はハードコピー（ビデオＣＤ又はＤＶＤ）を使用することで流通され、これにより、合法的な映画配信の経済価値が低減する。インターネット及び手頃な価格の高品質の記録装置の出現により、この問題は、近年において益々深刻になっている。したがって、映画の合法的な視聴者には見えない、映画の違法な複製に対する警告メッセージを提供する技術が更に必要とされる。
【課題を解決するための手段】
【００１０】
メタメリックな色で立体映画をマーク付けするシステム及び方法が提供される。本システム及び方法は、第一の色のマークを左画像に付加し、第二の異なる色（たとえば相補的な色）を有するマークを右画像に付加するものであり、視聴されたとき、マークは、所定の条件下で目で見る事ができない。３次元（３Ｄ）モードで視聴されたとき、左のマーク及び画像は、１つのマークに結合又は統合され、１つのマークの全ての画素は、同じ色からなる。
【００１１】
本発明の開示の１態様によれば、ある映画にマーク付けする方法が提供される。本方法は、第一の画像と第二の画像とを含む立体画像を取得するステップ（２０２）、第一の色を有する第一のマークを第一の画像の予め決定された位置に付加するステップ（２０４）、及び第一のマークの第一の色とは異なる第二の色を有する第二のマークを、第二の画像の実質的に同じ予め決定された位置に付加するステップ（２０６）を含む。３次元モードで視聴されたとき、第一のマークと第二のマークは、１つの色からなる１つのマークに結合される。
【００１２】
本発明の更なる態様によれば、ある映画にマーク付けするシステムが提供される。本システムは、第一の画像と第二の画像とを含む立体画像を取得する手段、第一の色を有する第一のマークを第二の画像の予め決定された位置に付加し、第一のマークの第一の色とは異なる第二の色を有する第二のマークを、第二の画像において、第一の画像と実質的な同じ予め決定された位置に付加するマーキングモジュールを含み、３次元モードで視聴されたとき、第一のマークと第二のマークは、１つの色からなる１つのマークに結合される。
【００１３】
この開示の別の態様によれば、本発明に従ってマーク付けされる立体画像が提供される。立体画像は、予め決定された位置において第一の色を有する第一のマークを有する第一の画像と、第一の画像における予め決定された位置と実質的に同じ位置において第二の色を有する第二のマークを有する第二の画像とを含み、立体画像が３次元画像として視聴されたとき、第一のマークと第二のマークは１つの色からなる１つのマークとして結合され、１つのマークは、３次元画像の視聴者により見る事ができない。
【図面の簡単な説明】
【００１４】
本発明のこれらの態様、特徴及び利点並びに他の態様、特徴及び利点は、添付図面と共に読まれたとき、好適な実施の形態の以下の詳細な説明から明らかとなるであろう。図面において、同じ参照符号は、図面を通して同じエレメントを示す。
図面は、本発明の概念を説明するためのものであり、必ずしも、本発明を例示する唯一の可能なコンフィギュレーションではない。
【図１】本発明の態様に係る、立体映画にマーク付けを行うシステムを例示する図である。
【図２】本発明の態様に係る、立体映画にマーク付けを行う例示的な方法のフローダイアグラムである。
【図３】立体のペアからなる左画像と右画像を例示する図であり、特別の３Ｄメガネを装着する視聴者が見たときの結果として得られる画像、特別の３Ｄメガネを装着していない視聴者が見たときの結果として得られる画像である。
【図４】本発明の態様に係る立体映画にマーク付けを行う別の例示的な方法のフローダイアグラムである。
【図５】反海賊行為の立体画像のペアにマーク付けするフローダイアグラムである。
【発明を実施するための形態】
【００１５】
図示されるエレメントはハードウェア、ソフトウェア又はその組み合わせの様々な形態で実現される場合があることを理解されたい。好ましくは、これらのエレメントは、プロセッサ、メモリ及び入力／出力インタフェースを含む１以上の適切にプログラムされた汎用装置でハードウェア及びソフトウェアの組み合わせで実現される。
【００１６】
本実施の形態は、本発明の原理を例示するものである。したがって、当業者であれば、本実施の形態で明示的に記載又は図示されていないが、本発明の原理を実施し、本発明の精神及び範囲に含まれる様々なアレンジメントを創作することができることを理解されたい。
【００１７】
本明細書で引用される全ての例及び条件付き言語は、本発明の原理及び当該技術分野を促進するために本発明者により寄与される概念の理解において読者を支援するためのものであり、係る特に引用される例及び条件に限定されることがないとして解釈されるべきである。
【００１８】
さらに、本発明の原理、態様及び実施の形態、並びに本発明の特別の例を引用する全ての説明は、本発明の構造的及び機能的に等価なものを包含することが意図される。さらに、係る等価なものは、現在知られている等価なものと、将来に開発される等価なもの、すなわち構造に関わらず、同じ機能を実行する開発されたエレメントを含むことが意図される。
【００１９】
従って、たとえば、本実施の形態で与えられるブロック図は、本発明の原理を実施する例示的な回路の概念図を表すことが当業者により理解されるであろう。同様に、フローチャート、フローダイアグラム、状態遷移図、擬似コード等は、コンピュータ読み取り可能な媒体で実質的に表され、コンピュータ又はプロセッサが明示的に示されているか否かに関わらず、係るコンピュータ又はプロセッサにより実行される様々なプロセスを表すことが理解される。
【００２０】
図示される様々なエレメントの機能は、適切なソフトウェアに関連してソフトウェアを実行可能なハードウェアの使用と同様に、専用のハードウェアの使用により提供される場合がある。プロセッサにより提供されたとき、機能は、１つの専用プロセッサにより、１つの共有プロセッサにより、或いはそのうちの幾つかが共有される複数の個々のプロセッサにより提供される場合がある。さらに、用語「プロセッサ」又は「コントローラ」の明示的な使用は、ソフトウェアを実行可能なハードウェアを排他的に示すように解釈されるべきではなく、限定されることなしに、デジタルシグナルプロセッサ（DSP）ハードウェア、ソフトウェアを記憶するリードオンリメモリ（ROM）、ランダムアクセスメモリ（RAM）、及び不揮発性メモリを暗黙的に含む場合がある。
【００２１】
コンベンショナル及び／又はカスタムな他のハードウェアが含まれる場合もある。同様に、図示される任意のスイッチは概念的なものである。それらの機能は、プログラムロジックの動作を通して、専用ロジックを通して、プログラム制御と専用ロジックのやり取りを通して、又は手動的に実行される場合があり、特定の技術は、文脈からより詳細に理解されるように実現者により選択可能である。
【００２２】
本発明の請求項では、特定の機能を実行する手段として表現されるエレメントは、たとえばａ）その機能を実行する回路エレメントの組み合わせ、又はｂ）その機能を実行するそのソフトウェアを実行する適切な回路と組み合わされる、ファームウェア、マイクロコード等を含む任意の形態でのソフトウェア、を含むその機能を実行する任意のやり方を包含することが意図される。係る請求項により定義される開示は、様々な引用される手段により提供される機能が請求項が求めるやり方で結合され、纏められる事実にある。従って、それらの機能を提供する任意の手段は本実施の形態で示されるものに等価であると見なされる。
【００２３】
立体３Ｄの機能は、過去２年間で多数の劇場に付加されている。２００９年までに５０００を超えてステレオ再生が利用可能になることが期待される。市場で利用可能な現在の立体システムは、３Ｄコンテンツを見るため、たとえば偏光メガネ又は色選択グラスといった特殊メガネをユーザが装着することが必要とされる。大部分の劇場は、２Ｄの商業広告と３Ｄ映画との間の遷移時間の間にアナウンス又は他のメカニズムを採用しない。本発明で提供される立体情報は、ダイレクトな視覚的効果を伝えるものであり、したがって視聴者は、特殊メガネを何時装着すべきかを認識することができる。同じプロジェクタ及びメガネが２Ｄコンテンツに採用されたと仮定すると、係る立体情報は警告メッセージとして採用される一方、特殊メガネにより視聴者に不快感を与えず、すなわちメッセージはユーザ又は視聴者に見えない。
【００２４】
メタメリックな色で立体映画にマーク付けするシステム及び方法が提供され、本システム及び方法は、左の画像を第一のマークでマーク付けし、右の画像を異なる色を有する第二の同じマークでマーク付けするものであり、視聴されたとき、マークは、所定の条件下で見えない。本発明の技術は、たとえばある映画のコンテンツにおけるメッセージ、オブジェクトの配置により、コンテンツが３Ｄにあるか又は２Ｄにあるかをユーザ又は視聴者に通知することが可能となる。これは、ユーザがコンテンツを正しく見るために特殊なメガネを装着することが必要であるので重要である。このように、３Ｄモードにおいて、本発明に従ってマーク付けされた映画又はコンテンツは、視聴者が３Ｄ体験のために特殊メガネを何時装着すべきかのタイミングに関する情報を伝達し、２Ｄモードにおいて、同じ環境下で、係る情報は、違法な記録に対する警告メッセージとして作用する。たとえば、カムコーダの前の特殊フィルタを使用した２Ｄコンテンツへの３Ｄコンテンツの違法な記録の場合、係る立体情報は、目で見る事ができ、画質を低下したときに警告メッセーとして使用することができる。
【００２５】
図面を参照して、本発明の実施の形態に係る例示的なシステム構成要素は、図１に示される。スキャニング装置１０３は、たとえばカメラのオリジナルのネガフィルムといったフィルムプリント１０４を、たとえばシネオンフォーマット又はＳＭＰＴＥ（Society of Motion Picture and Television Engineers）ＤＰＸ（Digital Picture Exchange）ファイルといったデジタルフォーマットにスキャニングするために設けられる。スキャニング装置１０３は、たとえばテレシネ、又はビデオ出力でArri LocPro（登録商標）のような映画からビデオ出力を生成する任意の装置を有する。代替的に、（たとえば既にコンピュータ読み取り可能な形式にあるファイルといった）ポストプロダクションプロセス又はデジタルシネマ１０６からのファイルは、直接に使用することができる。コンピュータ読み取り可能なファイルの潜在的な源は、AVID（登録商標）エディタ、DPXファイル、D5テープ等である。
【００２６】
スキャニングされたフィルムプリントは、たとえばコンピュータといったポストプロセッシング装置１０２に入力される。コンピュータは、１以上の中央処理装置（CPU）、ランダムアクセスメモリ（RAM）及び／又はリードオンリメモリ（ROM）のようなメモリ、及び、キーボード、カーソル制御装置（たとえばマウス又はジョイスティック）のような入力／出力（I/O）ユーザインタフェース１１２、並びに表示装置のようなハードウェアを有する様々公知のコンピュータプラットフォームの何れかで実現される。また、コンピュータプラットフォームは、オペレーティングシステム及びマイクロ命令コードを含む。本実施の形態で記載される様々な処理及び機能は、オペレーティングシステムを介して実行されるマイクロ命令コードの一部又はソフトウェアアプリケーションプログラムの一部（或いはその組み合わせ）の何れかである場合がある。１実施の形態では、ソフトウェアアプリケーションプログラムは、ポストプロセッシング装置１０２のような適切なコンピュータにアップロードされて実行されるプログラム記憶装置で実施される。さらに、様々な他の周辺装置は、パラレルポート、シリアルポート又はユニバーサルシリアルバス（USB）のような様々なインタフェース及びバス構造によりコンピュータプラットフォームに接続される場合がある。他の周辺装置は、更なる記憶装置１２４及びプリンタ１２８を含む場合がある。プリンタ１２８は、たとえばあるシーン又は複数のシーンが以下に記載される技術を使用して変更され又はマークアップされるフィルムの立体のマークアップされたバージョンといった、フィルム１２６の改訂されたバージョンを印刷するために利用される。
【００２７】
代替的に、（たとえば外部のハードドライブ１２４に記憶されるデジタルシネマといった）コンピュータ読み取り可能な形式１０６に既にあるファイル／フィルムのプリントは、コンピュータ１０２に直接に入力される。なお、本実施の形態で使用される用語「フィルム」は、フィルムプリント又はデジタルシネマの何れかを示す場合がある。
【００２８】
ソフトウェアプログラムは、テキストメッセージ、オブジェクト、ロゴ等のようなマークで立体のペアのそれぞれの画像にマーク付けする、メモリ１１０に記憶されるマーキングモジュール１１４を含む。マーキングモジュール１１４は、少なくとも２つの色を有する第一のマークを立体のペアの第一又は左目の画像に付け、たとえば相補的な色である少なくとも２つの異なる色を有する同じ第二のマークを第二の又は右目の画像（すなわち相補的な画像）に付ける。第一のマーク及び第二のマークの色は、メタメリックな色であると考えられる。これは、特殊な３Ｄメガネによる再生の間に２つの画像を見たとき、第一及び第二のマークは１つの色に結合又は統合され、視聴者に見る事ができないからである。
【００２９】
マーキングモジュール１１４は、第一のマークの少なくとも２つの色を選択し、第二のマークの少なくとも２つの異なる色を決定するカラーアナライザ１１６を含む。さらに、カラーアナライザ１１６は、第一又は第二の画像における少なくとも１つの色を決定し、少なくとも１つの色を少なくとも２つのメタメリックな色にスペクトル的に分割する。
【００３０】
マーキングモジュール１１４は、同じシーン又はショットに属する立体のペアの多数の連続するフレームを決定又は選択するシーケンスアナライザ１１８を更に含む。シーケンスアナライザ１１８は、少なくとも２つの連続するフレーム内のある画像における位置について、少なくとも１つの条件が満足されるかを判定する。たとえば、あるマークが他のコンテンツを持つ画像において配置される場合、シーケンスアナライザ１１８は、そのマークについて選択される位置が変化したか、従ってマークが視聴者にとって目障りになっているかを判定する。
【００３１】
１実施の形態では、マーキングモジュール１１４は、ある画像からオブジェクトを分割するオブジェクトセグメンタ１２０を含む。オブジェクトセグメンタ１２０は、ある画像におけるオブジェクトを識別し、カラーアナライザ１１６と共に、オブジェクトの色を判定し、マーク付けのために適切なオブジェクトであるかを判定する。カラーアナライザ１１６は、そのマークのメタメリックな色を選択するために、決定された色をスペクトル的に分割する。
【００３２】
図２は、本発明の態様に係る、立体のペアの少なくとも２つの２次元（２Ｄ）画像のマーク付けの例示的な方法のフローダイアグラムである。はじめに、ステップ２０２で、後処理装置１０２は、たとえば左目の画像と右目の画像をもつ立体画像といった少なくとも２つの２次元（２Ｄ）画像を取得する。後処理装置１０２は、コンピュータ読み取り可能なフォーマットでデジタルマスタ画像ファイルを取得することで、少なくとも２つの２次元画像を取得する。デジタルビデオファイルは、デジタルカメラで動画像の時間系列を捕捉することで取得される場合がある。代替的に、ビデオ系列は、従来のフィルムタイプのカメラにより捕捉される。このシナリオでは、フィルムは、スキャニング装置１０３を介して走査される。
【００３３】
フィルムがスキャンされるか又は既にデジタルフォーマットにあるかに関わらず、フィルムのデジタルファイルは、たとえばフレーム番号、フィルムの開始からの時間等のフレームの位置に関する示唆又は情報を含むことが理解される。デジタル画像ファイルのそれぞれのフレームは、たとえばＩ1，Ｉ2，．．．，Ｉnといった１つの画像を含む。
【００３４】
図３を参照して、左側の画像３０２及び右側の画像３０４が示される。図３で示される例では、ここでは、簡単さのために“No”のテキストメッセージである、テキストメッセージで画像がマーク付けされる。３Ｄ映画の遷移の環境では、メッセージは、「３次元映画開始“3D Movie Start”」、「メガネ装着“Put On Glasses”」等と読まれる。
【００３５】
図２及び図３を参照して、ステップ２０４では、マークは第一又は左画像に付けられ、この場合、マークは、少なくとも２つの色を含む。左側画像３０２では、画像の背景３０６は、黒であるように選択され、テキスト３０８は、白であるように選択される。ステップ２０６では、第二の、同じマークは、第二の又は右側の画像３０４に付けられる。第二の又は右側の画像３０４では、画像の背景３１０は、たとえば画像３０２の背景の相補的な色である白であるように選択され、テキスト３１２は、たとえば画像３０２のテキストの相補的な色である黒であるように選択される。この例では、マークが画像全体であると理解される。相補的な色のマークは、ほんの１例であり、１つのマークとなる２以上の色の組み合わせであり、１つの色に結合されるマークの全ての画素は、本発明の教示に従う。マーク又はテキストは、幾つかの連続するフレームに付けられるか、たとえばある映画又は動画の開始といった予め決定された期間に付けられる場合がある。なお、上述されたように、第一の画像において少なくとも２つの色を有するマークを使用すること、及び第二の画像において少なくとも２つの相補的な色を有するマークを使用することは、マークがテキストであるときに好ましいが、第一の画像において唯一の色を有するマークを使用すること、及び第二の画像において相補的な色を有するマークを使用することは、当業者により理解されるように本発明の範囲にある。唯一の色を有するマーク（すなわち第一の色及び相補的な色）は、たとえば限定されるものではないが、マークがオブジェクト、ロゴ、幾何学的形状等であるときに使用される。
【００３６】
ステップ２０８では、マークアップされた立体映画は、視聴者に再生又は表示される。画像３１４は、特殊な３Ｄメガネを装着した視聴者が見たときの結果的な画像を例示し、画像３１６は、特殊な３Ｄメガネを装着していない視聴者が見たときの結果的な画像を例示する。画像３１６に示されるように、マーク又はメッセージは、左画像３０２と右画像３０４との間の奥行きのために、視聴者が３Ｄメガネを装着し始める前に視聴者に提示される。画像３１４では、画像３０２及び画像３０４の両者の色は、メタメリックであるように選択されており、且つ画像は、メガネの使用と協調するので、マークの色は、１つの色及びマーク、すなわちテキストメッセージを形成するように結合し、もはや視聴者に見えない。この例では、画像３１４はグレイに見える。
【００３７】
図３（ａ）に関して記載される例は単色、すなわち黒及び白の立体情報を採用しているが、図３（ｂ）に示されるように、有色の立体情報が採用される場合がある。色が記載されるが、図３（ｂ）の画像は、グレイスケール、黒及び白で表示され、色は、参照符号により図３（ｂ）で記載及び表される。この例では、画像３２０、画像の背景３２４は、赤であるように選択され、テキスト３２６が緑であるように選択される。第二の又は右画像３２２では、画像の背景３２８は、緑、すなわち画像３２０の背景のメタメリックな色に選択され、テキスト３３０は、赤、すなわち画像３２０のテキストのメタメリックな色に選択される。画像３３４で示されるように、マーク又はテキストは、３Ｄメガネを使用することなしに見る事ができ、しかし、３Ｄメガネを使用すると、画像３３２は、無地であるように見えるか又はマークを有さない。この例では、画像３３２は、赤及び緑の色の結合のために、視聴者に黄色に見える。
【００３８】
更なる実施の形態では、本発明のシステム及び方法は、反海賊行為の目的であるフィルムにマーク付けするものである。ある映画の海賊行為又は複製では、複製者は、３Ｄコンテンツが実行されている間、特別のフィルタをカムコーダの前に配置する。言い換えれば、カムコーダは、フィルムの２Ｄバージョンとして唯一の画像を捕捉している。この場合、カムコーダは１つのアパーチャのみを有するため、フィルムに付加されるマーク又はメッセージが画像に現れ、左画像と右画像の統合は、不可能である。
【００３９】
反海賊行為のため、マーク又は幾つかのマークは、フィルムの開始のみでなく、複製されたバージョンの品質を低下させるためにフィルムを通して付加されるべきであることが理解されるべきである。マークは、警告メッセージの形式を取るか、又は適切な視聴の障害となるオブジェクトに関するマークであることを更に理解されたい。
【００４０】
図４及び図５を参照して、後処理装置１０２は、上述された左目の画像と右目の画像とをもつ立体画像のペアといった少なくとも２つの２次元（２Ｄ）画像５０２，５０４を取得する（ステップ４０２）。この実施の形態では、マークは、幾つかの他のコンテンツを有する画像に付加される可能性が最も高い。したがって、コンテンツを不明瞭にしないようにマークについて適切な位置が決定される必要がある。さらに、変化するシーン及びショットのため、マークは、フィルムを通して移動される必要がある可能性が高い。
【００４１】
ステップ４０６では、シーケンスアナライザ１１８は、マーク付けされるシーケンスの複数の連続するフレームを決定する。連続するフレームは、単一のショット又はシーン或いは共通のオブジェクトを有する複数のフレームからのフレームである場合がある。随意に、オブジェクトセグメンタ１２０は、立体のペアの少なくとも１つの画像からのオブジェクトを分割する。このオブジェクトは、シーンの連続するフレームの数を決定するため、シーケンスアナライザ１１８により使用される。次いで、オブジェクトは、特定のシーンのマークのための位置として選択される。このように、マークの色を選択するためにオブジェクトの色が使用され、従って再生の間に視聴されたとき、マークは視聴者に見えない。
【００４２】
ステップ４０８では、カラーアナライザ１１６は、マーク付けされる画像の位置の色又はマークされるオブジェクトの色を決定する。たとえば図５の画像５０２及び５０４では、空５０６は青であり、太陽５０８は黄色であり、草５１０は緑であることが決定される。この例では、マーク５１２は、画像の草の部分に配置されるように選択される。マーク５１２の位置の選択は手動的であるか、又は分割されているオブジェクトの色に基づいてポストプロセッシング装置１０２により自動的に決定される場合がある。
【００４３】
ステップ４１０で、結合されたときに、マークの位置の色を生成する少なくとも２つの色が選択される。記載される例では、マーク５１２は緑の上に位置されるので、選択される２つの色は、青及び黄色である。２を超える色を選択することができ、マークの位置の色を生成するために結合することができることを理解されたい。１実施の形態では、カラーアナライザ１１６は、マークの少なくとも２つの色を決定するため、マークの位置の色をスペクトル的に分割する。
【００４４】
つぎに、ステップ４１２において、マーク５１２は、第一の又は左画像５１４に付加される。マーク５１２は、任意の形式を取ることができ、それぞれ色を有する幾つかのコンポーネント又は部分を有する。簡単さのため、マーク５１２は、それぞれ色を有する２つの部分に分割される。ここで、マーク５１２は、青に着色される第一の部分５１８を含む。マーク５１２は、黄色に着色される第二の部分５２０を含む。ステップ４１４では、第二の同じマーク５２２は、マーク５１２が画像５１４に付加されたのと実質的に同じ位置において第二の又は右画像５１６に付加される。マーク５２２は、マーク５１２の第一及び第二の部分の色の異なる色（たとえば反対の色）で構築される。ここで、マーク５２２は、黄色である第一の部分５２４と青である第二の部分５２６とを含む。マークは、シーケンスのそれぞれのフレームに付加されるか、又はシーケンスの複数の連続するフレームの一部に付加される場合があることを理解されたい。
【００４５】
マークアップされた画像は、たとえば記憶装置１２４に記憶され、３Ｄ再生のために読み出される場合がある（４１６）。さらに、動画像又はビデオクリップの全ての画像は、動画像又はクリップのマークアップされた立体のバージョンを表す１つのデジタルファイル１３０で記憶することができる。デジタルファイル１３０は、たとえばフィルムプリンタ１２８を介したオリジナルフィルム１２６の立体のバージョンを印刷するため、後の読み出しのために記憶装置１２４で記憶される場合がある。
【００４６】
３Ｄ再生の間、ステップ４１６において、３Ｄメガネを装着している視聴者は、画像５１４及び５１６の統合として３Ｄ画像５２８を見る。この統合において、第一のマーク５１２及び第二のマーク５２２はオーバラップし、それぞれの部分の色は、統合されたマークの全ての画素について、目に見える１つの色、ここでは緑を生成するために結合される。この例では、マーク５１２の第一の青の部分５１８は、マーク５２２の第一の黄色の部分５２４と結合し、マーク５１２の第二の黄色の部分５２０は、マーク５２２の第二の青の部分５２６と結合する。３Ｄメガネで視聴したとき、結果として得られる画像５２８は、マークを表示せず、すなわち３Ｄ画像５２８の視聴者は、結合又は統合されたマークを見る事ができない。しかし、あるフィルタをもつカムコーダを使用して映画が複製された場合、複製プロセスの間に、たとえば左画像である画像のうちの唯一の画像が記録され、したがって、再生の間に、マーク５１２は、目に見る事ができ、複製されたフィルムの品質を低下する。１を超えるマークは、任意の画像に付加することができ、したがって海賊行為となる複製において目に見える複数のマークを形成して、複製されるフィルムの品質を低下させることができることを理解されたい。マークは、フィルムのそれぞれのフレームに配置され、複製されたフィルムの見易さの品質を低下させることができる。
【００４７】
本発明の教示を盛り込んだ実施の形態が本明細書において詳細に図示及び記載されたが、当業者であれば、これらの教示を盛り込んだ多数の他の変形された実施の形態を容易に創作することができる。（例示するものであって限定するものではない）色でフィルムにマーク付けするシステム及び方法の好適な実施の形態が記載されたが、変更及び変形は、先の教示に照らして当業者によりなされる。特許請求の範囲により概説される開示の範囲にある特定の実施の形態において、変形が行われる場合があることを理解されたい。
【技術分野】
【０００１】
本発明は、コンピュータグラフィック処理及びディスプレイシステムに関し、より詳細には、立体フィルムにマーク付けするシステム及び方法に関する。
【背景技術】
【０００２】
立体フィルムの画像形成は、僅かに異なる視点から撮影された、あるシーンの少なくとも２つの画像を視覚的に結合して、３次元（３Ｄ）の奥行きの幻想を生成するプロセスである。この技術は、人間の目がある距離で離れて配置され、従って同じシーンを正確に見ない事実に依存する。それぞれの目に異なる視点からの画像を供給することで、見る人の目は、奥行きを知覚するようにトリックにかかる。典型的に、２つの異なる視点が提供された場合、コンポーネント画像は、参照画像及び相補画像としてもそれぞれ知られる、「左」画像及び「右」画像と呼ばれる。しかし、当業者であれば、立体画像を形成するため、２を超える視点が結合される場合があることを認識するであろう。
【０００３】
映画からデジタルシネマへの遷移は、３Ｄ及びリアルタイム伝送のようなシネマの新たな機会を形成している。３Ｄコンテンツについて、立体コンテンツが予知できる将来にデジタルシネマを支配することが期待される。立体デジタルシネマは、単一のプロジェクタを使用して２つの画像を投影することを含む。以下に記載されるように、デジタルシネマにおいて立体コンテンツを投影する３つの技術が現在存在する。
【０００４】
光学的な変更をもたないアクティブグラスを使用する。この技術では、プロジェクタは、標準のスクリーンに左画像と右画像を交互にする。ユーザ又はビューアは、ＩＲコントローラを使用してコンテンツに同期されるアクティブグラスを装着する。
【０００５】
円偏光子をもつパッシブグラスを使用する。これは、現在最も広く配置されるシステムである。また、プロジェクタは、シルバースクリーンに左画像と右画像を交互にする。偏光ユニットは、プロジェクタの前に配置される。ユーザ又はビューアは、特別のパッシブグラスを装着することが要求される。
【０００６】
ドルビー３Ｄ技術。この技術では、色が６つのバンドに分割され、それぞれの目に３つのバンドが割り当てられる。プロジェクタは、左画像と右画像とを交互にし、ユーザ又はビューアは、特別のカラーフィルタリンググラスを装着する。
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述されたように、全ての技術は、コンテンツを見るためにメガネを装着することを要求する。メガネを装着しなければ、３Ｄコンテンツは歪んで見える。
【０００８】
シネマでは、たとえばムービープレビューといった商業広告は典型的に２次元（２Ｄ）であることが一般的である。次いで、３Ｄ効果を実現するため、何時特別のメガネをビューアに装着させるべきかを知らせることが必要である。ビューアに何時メガネを装着させるべきかを知らせるため、シネマは、上下に移動するカーテンを使用するか、アナウンスを行う必要がある。これは、番組又は映画の間に、３Ｄから２Ｄへ、２Ｄから３Ｄへの多くの遷移が潜在的に存在するので、困難になる。したがって、ビューアに不快感を与えない立体フィルムの視聴者に遷移のメッセージを提供する技術について必要が存在する。
【０００９】
さらに、動画の劇場での上映に関連した海賊行為の懸念が知られている。ひとたび映画の配給業者が劇場での上映のために上映者に映画に関する印刷物を配給すると、その製品に対する所定の程度の制御が失われる。アナログであるかデジタルであるかに関わらず、ある劇場において映画を上映する過程で、劇場における顧客は、上映の間に、たとえばハンドヘルドカムコーダを使用して、映画をこっそりと記録する場合がある。結果として、比較的高品質の違法なコピーが行われる可能性がある。ある映画の係る違法な「海賊行為」による複製は、インターネットを通して配信されるか又はハードコピー（ビデオＣＤ又はＤＶＤ）を使用することで流通され、これにより、合法的な映画配信の経済価値が低減する。インターネット及び手頃な価格の高品質の記録装置の出現により、この問題は、近年において益々深刻になっている。したがって、映画の合法的な視聴者には見えない、映画の違法な複製に対する警告メッセージを提供する技術が更に必要とされる。
【課題を解決するための手段】
【００１０】
メタメリックな色で立体映画をマーク付けするシステム及び方法が提供される。本システム及び方法は、第一の色のマークを左画像に付加し、第二の異なる色（たとえば相補的な色）を有するマークを右画像に付加するものであり、視聴されたとき、マークは、所定の条件下で目で見る事ができない。３次元（３Ｄ）モードで視聴されたとき、左のマーク及び画像は、１つのマークに結合又は統合され、１つのマークの全ての画素は、同じ色からなる。
【００１１】
本発明の開示の１態様によれば、ある映画にマーク付けする方法が提供される。本方法は、第一の画像と第二の画像とを含む立体画像を取得するステップ（２０２）、第一の色を有する第一のマークを第一の画像の予め決定された位置に付加するステップ（２０４）、及び第一のマークの第一の色とは異なる第二の色を有する第二のマークを、第二の画像の実質的に同じ予め決定された位置に付加するステップ（２０６）を含む。３次元モードで視聴されたとき、第一のマークと第二のマークは、１つの色からなる１つのマークに結合される。
【００１２】
本発明の更なる態様によれば、ある映画にマーク付けするシステムが提供される。本システムは、第一の画像と第二の画像とを含む立体画像を取得する手段、第一の色を有する第一のマークを第二の画像の予め決定された位置に付加し、第一のマークの第一の色とは異なる第二の色を有する第二のマークを、第二の画像において、第一の画像と実質的な同じ予め決定された位置に付加するマーキングモジュールを含み、３次元モードで視聴されたとき、第一のマークと第二のマークは、１つの色からなる１つのマークに結合される。
【００１３】
この開示の別の態様によれば、本発明に従ってマーク付けされる立体画像が提供される。立体画像は、予め決定された位置において第一の色を有する第一のマークを有する第一の画像と、第一の画像における予め決定された位置と実質的に同じ位置において第二の色を有する第二のマークを有する第二の画像とを含み、立体画像が３次元画像として視聴されたとき、第一のマークと第二のマークは１つの色からなる１つのマークとして結合され、１つのマークは、３次元画像の視聴者により見る事ができない。
【図面の簡単な説明】
【００１４】
本発明のこれらの態様、特徴及び利点並びに他の態様、特徴及び利点は、添付図面と共に読まれたとき、好適な実施の形態の以下の詳細な説明から明らかとなるであろう。図面において、同じ参照符号は、図面を通して同じエレメントを示す。
図面は、本発明の概念を説明するためのものであり、必ずしも、本発明を例示する唯一の可能なコンフィギュレーションではない。
【図１】本発明の態様に係る、立体映画にマーク付けを行うシステムを例示する図である。
【図２】本発明の態様に係る、立体映画にマーク付けを行う例示的な方法のフローダイアグラムである。
【図３】立体のペアからなる左画像と右画像を例示する図であり、特別の３Ｄメガネを装着する視聴者が見たときの結果として得られる画像、特別の３Ｄメガネを装着していない視聴者が見たときの結果として得られる画像である。
【図４】本発明の態様に係る立体映画にマーク付けを行う別の例示的な方法のフローダイアグラムである。
【図５】反海賊行為の立体画像のペアにマーク付けするフローダイアグラムである。
【発明を実施するための形態】
【００１５】
図示されるエレメントはハードウェア、ソフトウェア又はその組み合わせの様々な形態で実現される場合があることを理解されたい。好ましくは、これらのエレメントは、プロセッサ、メモリ及び入力／出力インタフェースを含む１以上の適切にプログラムされた汎用装置でハードウェア及びソフトウェアの組み合わせで実現される。
【００１６】
本実施の形態は、本発明の原理を例示するものである。したがって、当業者であれば、本実施の形態で明示的に記載又は図示されていないが、本発明の原理を実施し、本発明の精神及び範囲に含まれる様々なアレンジメントを創作することができることを理解されたい。
【００１７】
本明細書で引用される全ての例及び条件付き言語は、本発明の原理及び当該技術分野を促進するために本発明者により寄与される概念の理解において読者を支援するためのものであり、係る特に引用される例及び条件に限定されることがないとして解釈されるべきである。
【００１８】
さらに、本発明の原理、態様及び実施の形態、並びに本発明の特別の例を引用する全ての説明は、本発明の構造的及び機能的に等価なものを包含することが意図される。さらに、係る等価なものは、現在知られている等価なものと、将来に開発される等価なもの、すなわち構造に関わらず、同じ機能を実行する開発されたエレメントを含むことが意図される。
【００１９】
従って、たとえば、本実施の形態で与えられるブロック図は、本発明の原理を実施する例示的な回路の概念図を表すことが当業者により理解されるであろう。同様に、フローチャート、フローダイアグラム、状態遷移図、擬似コード等は、コンピュータ読み取り可能な媒体で実質的に表され、コンピュータ又はプロセッサが明示的に示されているか否かに関わらず、係るコンピュータ又はプロセッサにより実行される様々なプロセスを表すことが理解される。
【００２０】
図示される様々なエレメントの機能は、適切なソフトウェアに関連してソフトウェアを実行可能なハードウェアの使用と同様に、専用のハードウェアの使用により提供される場合がある。プロセッサにより提供されたとき、機能は、１つの専用プロセッサにより、１つの共有プロセッサにより、或いはそのうちの幾つかが共有される複数の個々のプロセッサにより提供される場合がある。さらに、用語「プロセッサ」又は「コントローラ」の明示的な使用は、ソフトウェアを実行可能なハードウェアを排他的に示すように解釈されるべきではなく、限定されることなしに、デジタルシグナルプロセッサ（DSP）ハードウェア、ソフトウェアを記憶するリードオンリメモリ（ROM）、ランダムアクセスメモリ（RAM）、及び不揮発性メモリを暗黙的に含む場合がある。
【００２１】
コンベンショナル及び／又はカスタムな他のハードウェアが含まれる場合もある。同様に、図示される任意のスイッチは概念的なものである。それらの機能は、プログラムロジックの動作を通して、専用ロジックを通して、プログラム制御と専用ロジックのやり取りを通して、又は手動的に実行される場合があり、特定の技術は、文脈からより詳細に理解されるように実現者により選択可能である。
【００２２】
本発明の請求項では、特定の機能を実行する手段として表現されるエレメントは、たとえばａ）その機能を実行する回路エレメントの組み合わせ、又はｂ）その機能を実行するそのソフトウェアを実行する適切な回路と組み合わされる、ファームウェア、マイクロコード等を含む任意の形態でのソフトウェア、を含むその機能を実行する任意のやり方を包含することが意図される。係る請求項により定義される開示は、様々な引用される手段により提供される機能が請求項が求めるやり方で結合され、纏められる事実にある。従って、それらの機能を提供する任意の手段は本実施の形態で示されるものに等価であると見なされる。
【００２３】
立体３Ｄの機能は、過去２年間で多数の劇場に付加されている。２００９年までに５０００を超えてステレオ再生が利用可能になることが期待される。市場で利用可能な現在の立体システムは、３Ｄコンテンツを見るため、たとえば偏光メガネ又は色選択グラスといった特殊メガネをユーザが装着することが必要とされる。大部分の劇場は、２Ｄの商業広告と３Ｄ映画との間の遷移時間の間にアナウンス又は他のメカニズムを採用しない。本発明で提供される立体情報は、ダイレクトな視覚的効果を伝えるものであり、したがって視聴者は、特殊メガネを何時装着すべきかを認識することができる。同じプロジェクタ及びメガネが２Ｄコンテンツに採用されたと仮定すると、係る立体情報は警告メッセージとして採用される一方、特殊メガネにより視聴者に不快感を与えず、すなわちメッセージはユーザ又は視聴者に見えない。
【００２４】
メタメリックな色で立体映画にマーク付けするシステム及び方法が提供され、本システム及び方法は、左の画像を第一のマークでマーク付けし、右の画像を異なる色を有する第二の同じマークでマーク付けするものであり、視聴されたとき、マークは、所定の条件下で見えない。本発明の技術は、たとえばある映画のコンテンツにおけるメッセージ、オブジェクトの配置により、コンテンツが３Ｄにあるか又は２Ｄにあるかをユーザ又は視聴者に通知することが可能となる。これは、ユーザがコンテンツを正しく見るために特殊なメガネを装着することが必要であるので重要である。このように、３Ｄモードにおいて、本発明に従ってマーク付けされた映画又はコンテンツは、視聴者が３Ｄ体験のために特殊メガネを何時装着すべきかのタイミングに関する情報を伝達し、２Ｄモードにおいて、同じ環境下で、係る情報は、違法な記録に対する警告メッセージとして作用する。たとえば、カムコーダの前の特殊フィルタを使用した２Ｄコンテンツへの３Ｄコンテンツの違法な記録の場合、係る立体情報は、目で見る事ができ、画質を低下したときに警告メッセーとして使用することができる。
【００２５】
図面を参照して、本発明の実施の形態に係る例示的なシステム構成要素は、図１に示される。スキャニング装置１０３は、たとえばカメラのオリジナルのネガフィルムといったフィルムプリント１０４を、たとえばシネオンフォーマット又はＳＭＰＴＥ（Society of Motion Picture and Television Engineers）ＤＰＸ（Digital Picture Exchange）ファイルといったデジタルフォーマットにスキャニングするために設けられる。スキャニング装置１０３は、たとえばテレシネ、又はビデオ出力でArri LocPro（登録商標）のような映画からビデオ出力を生成する任意の装置を有する。代替的に、（たとえば既にコンピュータ読み取り可能な形式にあるファイルといった）ポストプロダクションプロセス又はデジタルシネマ１０６からのファイルは、直接に使用することができる。コンピュータ読み取り可能なファイルの潜在的な源は、AVID（登録商標）エディタ、DPXファイル、D5テープ等である。
【００２６】
スキャニングされたフィルムプリントは、たとえばコンピュータといったポストプロセッシング装置１０２に入力される。コンピュータは、１以上の中央処理装置（CPU）、ランダムアクセスメモリ（RAM）及び／又はリードオンリメモリ（ROM）のようなメモリ、及び、キーボード、カーソル制御装置（たとえばマウス又はジョイスティック）のような入力／出力（I/O）ユーザインタフェース１１２、並びに表示装置のようなハードウェアを有する様々公知のコンピュータプラットフォームの何れかで実現される。また、コンピュータプラットフォームは、オペレーティングシステム及びマイクロ命令コードを含む。本実施の形態で記載される様々な処理及び機能は、オペレーティングシステムを介して実行されるマイクロ命令コードの一部又はソフトウェアアプリケーションプログラムの一部（或いはその組み合わせ）の何れかである場合がある。１実施の形態では、ソフトウェアアプリケーションプログラムは、ポストプロセッシング装置１０２のような適切なコンピュータにアップロードされて実行されるプログラム記憶装置で実施される。さらに、様々な他の周辺装置は、パラレルポート、シリアルポート又はユニバーサルシリアルバス（USB）のような様々なインタフェース及びバス構造によりコンピュータプラットフォームに接続される場合がある。他の周辺装置は、更なる記憶装置１２４及びプリンタ１２８を含む場合がある。プリンタ１２８は、たとえばあるシーン又は複数のシーンが以下に記載される技術を使用して変更され又はマークアップされるフィルムの立体のマークアップされたバージョンといった、フィルム１２６の改訂されたバージョンを印刷するために利用される。
【００２７】
代替的に、（たとえば外部のハードドライブ１２４に記憶されるデジタルシネマといった）コンピュータ読み取り可能な形式１０６に既にあるファイル／フィルムのプリントは、コンピュータ１０２に直接に入力される。なお、本実施の形態で使用される用語「フィルム」は、フィルムプリント又はデジタルシネマの何れかを示す場合がある。
【００２８】
ソフトウェアプログラムは、テキストメッセージ、オブジェクト、ロゴ等のようなマークで立体のペアのそれぞれの画像にマーク付けする、メモリ１１０に記憶されるマーキングモジュール１１４を含む。マーキングモジュール１１４は、少なくとも２つの色を有する第一のマークを立体のペアの第一又は左目の画像に付け、たとえば相補的な色である少なくとも２つの異なる色を有する同じ第二のマークを第二の又は右目の画像（すなわち相補的な画像）に付ける。第一のマーク及び第二のマークの色は、メタメリックな色であると考えられる。これは、特殊な３Ｄメガネによる再生の間に２つの画像を見たとき、第一及び第二のマークは１つの色に結合又は統合され、視聴者に見る事ができないからである。
【００２９】
マーキングモジュール１１４は、第一のマークの少なくとも２つの色を選択し、第二のマークの少なくとも２つの異なる色を決定するカラーアナライザ１１６を含む。さらに、カラーアナライザ１１６は、第一又は第二の画像における少なくとも１つの色を決定し、少なくとも１つの色を少なくとも２つのメタメリックな色にスペクトル的に分割する。
【００３０】
マーキングモジュール１１４は、同じシーン又はショットに属する立体のペアの多数の連続するフレームを決定又は選択するシーケンスアナライザ１１８を更に含む。シーケンスアナライザ１１８は、少なくとも２つの連続するフレーム内のある画像における位置について、少なくとも１つの条件が満足されるかを判定する。たとえば、あるマークが他のコンテンツを持つ画像において配置される場合、シーケンスアナライザ１１８は、そのマークについて選択される位置が変化したか、従ってマークが視聴者にとって目障りになっているかを判定する。
【００３１】
１実施の形態では、マーキングモジュール１１４は、ある画像からオブジェクトを分割するオブジェクトセグメンタ１２０を含む。オブジェクトセグメンタ１２０は、ある画像におけるオブジェクトを識別し、カラーアナライザ１１６と共に、オブジェクトの色を判定し、マーク付けのために適切なオブジェクトであるかを判定する。カラーアナライザ１１６は、そのマークのメタメリックな色を選択するために、決定された色をスペクトル的に分割する。
【００３２】
図２は、本発明の態様に係る、立体のペアの少なくとも２つの２次元（２Ｄ）画像のマーク付けの例示的な方法のフローダイアグラムである。はじめに、ステップ２０２で、後処理装置１０２は、たとえば左目の画像と右目の画像をもつ立体画像といった少なくとも２つの２次元（２Ｄ）画像を取得する。後処理装置１０２は、コンピュータ読み取り可能なフォーマットでデジタルマスタ画像ファイルを取得することで、少なくとも２つの２次元画像を取得する。デジタルビデオファイルは、デジタルカメラで動画像の時間系列を捕捉することで取得される場合がある。代替的に、ビデオ系列は、従来のフィルムタイプのカメラにより捕捉される。このシナリオでは、フィルムは、スキャニング装置１０３を介して走査される。
【００３３】
フィルムがスキャンされるか又は既にデジタルフォーマットにあるかに関わらず、フィルムのデジタルファイルは、たとえばフレーム番号、フィルムの開始からの時間等のフレームの位置に関する示唆又は情報を含むことが理解される。デジタル画像ファイルのそれぞれのフレームは、たとえばＩ1，Ｉ2，．．．，Ｉnといった１つの画像を含む。
【００３４】
図３を参照して、左側の画像３０２及び右側の画像３０４が示される。図３で示される例では、ここでは、簡単さのために“No”のテキストメッセージである、テキストメッセージで画像がマーク付けされる。３Ｄ映画の遷移の環境では、メッセージは、「３次元映画開始“3D Movie Start”」、「メガネ装着“Put On Glasses”」等と読まれる。
【００３５】
図２及び図３を参照して、ステップ２０４では、マークは第一又は左画像に付けられ、この場合、マークは、少なくとも２つの色を含む。左側画像３０２では、画像の背景３０６は、黒であるように選択され、テキスト３０８は、白であるように選択される。ステップ２０６では、第二の、同じマークは、第二の又は右側の画像３０４に付けられる。第二の又は右側の画像３０４では、画像の背景３１０は、たとえば画像３０２の背景の相補的な色である白であるように選択され、テキスト３１２は、たとえば画像３０２のテキストの相補的な色である黒であるように選択される。この例では、マークが画像全体であると理解される。相補的な色のマークは、ほんの１例であり、１つのマークとなる２以上の色の組み合わせであり、１つの色に結合されるマークの全ての画素は、本発明の教示に従う。マーク又はテキストは、幾つかの連続するフレームに付けられるか、たとえばある映画又は動画の開始といった予め決定された期間に付けられる場合がある。なお、上述されたように、第一の画像において少なくとも２つの色を有するマークを使用すること、及び第二の画像において少なくとも２つの相補的な色を有するマークを使用することは、マークがテキストであるときに好ましいが、第一の画像において唯一の色を有するマークを使用すること、及び第二の画像において相補的な色を有するマークを使用することは、当業者により理解されるように本発明の範囲にある。唯一の色を有するマーク（すなわち第一の色及び相補的な色）は、たとえば限定されるものではないが、マークがオブジェクト、ロゴ、幾何学的形状等であるときに使用される。
【００３６】
ステップ２０８では、マークアップされた立体映画は、視聴者に再生又は表示される。画像３１４は、特殊な３Ｄメガネを装着した視聴者が見たときの結果的な画像を例示し、画像３１６は、特殊な３Ｄメガネを装着していない視聴者が見たときの結果的な画像を例示する。画像３１６に示されるように、マーク又はメッセージは、左画像３０２と右画像３０４との間の奥行きのために、視聴者が３Ｄメガネを装着し始める前に視聴者に提示される。画像３１４では、画像３０２及び画像３０４の両者の色は、メタメリックであるように選択されており、且つ画像は、メガネの使用と協調するので、マークの色は、１つの色及びマーク、すなわちテキストメッセージを形成するように結合し、もはや視聴者に見えない。この例では、画像３１４はグレイに見える。
【００３７】
図３（ａ）に関して記載される例は単色、すなわち黒及び白の立体情報を採用しているが、図３（ｂ）に示されるように、有色の立体情報が採用される場合がある。色が記載されるが、図３（ｂ）の画像は、グレイスケール、黒及び白で表示され、色は、参照符号により図３（ｂ）で記載及び表される。この例では、画像３２０、画像の背景３２４は、赤であるように選択され、テキスト３２６が緑であるように選択される。第二の又は右画像３２２では、画像の背景３２８は、緑、すなわち画像３２０の背景のメタメリックな色に選択され、テキスト３３０は、赤、すなわち画像３２０のテキストのメタメリックな色に選択される。画像３３４で示されるように、マーク又はテキストは、３Ｄメガネを使用することなしに見る事ができ、しかし、３Ｄメガネを使用すると、画像３３２は、無地であるように見えるか又はマークを有さない。この例では、画像３３２は、赤及び緑の色の結合のために、視聴者に黄色に見える。
【００３８】
更なる実施の形態では、本発明のシステム及び方法は、反海賊行為の目的であるフィルムにマーク付けするものである。ある映画の海賊行為又は複製では、複製者は、３Ｄコンテンツが実行されている間、特別のフィルタをカムコーダの前に配置する。言い換えれば、カムコーダは、フィルムの２Ｄバージョンとして唯一の画像を捕捉している。この場合、カムコーダは１つのアパーチャのみを有するため、フィルムに付加されるマーク又はメッセージが画像に現れ、左画像と右画像の統合は、不可能である。
【００３９】
反海賊行為のため、マーク又は幾つかのマークは、フィルムの開始のみでなく、複製されたバージョンの品質を低下させるためにフィルムを通して付加されるべきであることが理解されるべきである。マークは、警告メッセージの形式を取るか、又は適切な視聴の障害となるオブジェクトに関するマークであることを更に理解されたい。
【００４０】
図４及び図５を参照して、後処理装置１０２は、上述された左目の画像と右目の画像とをもつ立体画像のペアといった少なくとも２つの２次元（２Ｄ）画像５０２，５０４を取得する（ステップ４０２）。この実施の形態では、マークは、幾つかの他のコンテンツを有する画像に付加される可能性が最も高い。したがって、コンテンツを不明瞭にしないようにマークについて適切な位置が決定される必要がある。さらに、変化するシーン及びショットのため、マークは、フィルムを通して移動される必要がある可能性が高い。
【００４１】
ステップ４０６では、シーケンスアナライザ１１８は、マーク付けされるシーケンスの複数の連続するフレームを決定する。連続するフレームは、単一のショット又はシーン或いは共通のオブジェクトを有する複数のフレームからのフレームである場合がある。随意に、オブジェクトセグメンタ１２０は、立体のペアの少なくとも１つの画像からのオブジェクトを分割する。このオブジェクトは、シーンの連続するフレームの数を決定するため、シーケンスアナライザ１１８により使用される。次いで、オブジェクトは、特定のシーンのマークのための位置として選択される。このように、マークの色を選択するためにオブジェクトの色が使用され、従って再生の間に視聴されたとき、マークは視聴者に見えない。
【００４２】
ステップ４０８では、カラーアナライザ１１６は、マーク付けされる画像の位置の色又はマークされるオブジェクトの色を決定する。たとえば図５の画像５０２及び５０４では、空５０６は青であり、太陽５０８は黄色であり、草５１０は緑であることが決定される。この例では、マーク５１２は、画像の草の部分に配置されるように選択される。マーク５１２の位置の選択は手動的であるか、又は分割されているオブジェクトの色に基づいてポストプロセッシング装置１０２により自動的に決定される場合がある。
【００４３】
ステップ４１０で、結合されたときに、マークの位置の色を生成する少なくとも２つの色が選択される。記載される例では、マーク５１２は緑の上に位置されるので、選択される２つの色は、青及び黄色である。２を超える色を選択することができ、マークの位置の色を生成するために結合することができることを理解されたい。１実施の形態では、カラーアナライザ１１６は、マークの少なくとも２つの色を決定するため、マークの位置の色をスペクトル的に分割する。
【００４４】
つぎに、ステップ４１２において、マーク５１２は、第一の又は左画像５１４に付加される。マーク５１２は、任意の形式を取ることができ、それぞれ色を有する幾つかのコンポーネント又は部分を有する。簡単さのため、マーク５１２は、それぞれ色を有する２つの部分に分割される。ここで、マーク５１２は、青に着色される第一の部分５１８を含む。マーク５１２は、黄色に着色される第二の部分５２０を含む。ステップ４１４では、第二の同じマーク５２２は、マーク５１２が画像５１４に付加されたのと実質的に同じ位置において第二の又は右画像５１６に付加される。マーク５２２は、マーク５１２の第一及び第二の部分の色の異なる色（たとえば反対の色）で構築される。ここで、マーク５２２は、黄色である第一の部分５２４と青である第二の部分５２６とを含む。マークは、シーケンスのそれぞれのフレームに付加されるか、又はシーケンスの複数の連続するフレームの一部に付加される場合があることを理解されたい。
【００４５】
マークアップされた画像は、たとえば記憶装置１２４に記憶され、３Ｄ再生のために読み出される場合がある（４１６）。さらに、動画像又はビデオクリップの全ての画像は、動画像又はクリップのマークアップされた立体のバージョンを表す１つのデジタルファイル１３０で記憶することができる。デジタルファイル１３０は、たとえばフィルムプリンタ１２８を介したオリジナルフィルム１２６の立体のバージョンを印刷するため、後の読み出しのために記憶装置１２４で記憶される場合がある。
【００４６】
３Ｄ再生の間、ステップ４１６において、３Ｄメガネを装着している視聴者は、画像５１４及び５１６の統合として３Ｄ画像５２８を見る。この統合において、第一のマーク５１２及び第二のマーク５２２はオーバラップし、それぞれの部分の色は、統合されたマークの全ての画素について、目に見える１つの色、ここでは緑を生成するために結合される。この例では、マーク５１２の第一の青の部分５１８は、マーク５２２の第一の黄色の部分５２４と結合し、マーク５１２の第二の黄色の部分５２０は、マーク５２２の第二の青の部分５２６と結合する。３Ｄメガネで視聴したとき、結果として得られる画像５２８は、マークを表示せず、すなわち３Ｄ画像５２８の視聴者は、結合又は統合されたマークを見る事ができない。しかし、あるフィルタをもつカムコーダを使用して映画が複製された場合、複製プロセスの間に、たとえば左画像である画像のうちの唯一の画像が記録され、したがって、再生の間に、マーク５１２は、目に見る事ができ、複製されたフィルムの品質を低下する。１を超えるマークは、任意の画像に付加することができ、したがって海賊行為となる複製において目に見える複数のマークを形成して、複製されるフィルムの品質を低下させることができることを理解されたい。マークは、フィルムのそれぞれのフレームに配置され、複製されたフィルムの見易さの品質を低下させることができる。
【００４７】
本発明の教示を盛り込んだ実施の形態が本明細書において詳細に図示及び記載されたが、当業者であれば、これらの教示を盛り込んだ多数の他の変形された実施の形態を容易に創作することができる。（例示するものであって限定するものではない）色でフィルムにマーク付けするシステム及び方法の好適な実施の形態が記載されたが、変更及び変形は、先の教示に照らして当業者によりなされる。特許請求の範囲により概説される開示の範囲にある特定の実施の形態において、変形が行われる場合があることを理解されたい。
【特許請求の範囲】
【請求項１】
第一の画像と第二の画像とを含む立体画像を取得するステップと、
第一の色を有する第一のマークを前記第一の画像の予め決定された位置に付加するステップと、
前記第一のマークの第一の色とは異なる第二の色を有する第二のマークを、前記第二の画像の、前記第一の画像における予め決定された位置と実質的に同じ位置に付加するステップとを含み、
３次元モードで視聴されたとき、前記第一のマークと前記第二のマークは、１つの色からなる１つのマークに結合される、
ことを特徴とするマーキング方法。
【請求項２】
前記第一のマークと前記第二のマークとは、テキストメッセージ、オブジェクト及びロゴの少なくとも１つである、
請求項１記載の方法。
【請求項３】
前記第一の画像における前記予め決定された位置の色を決定するステップと、
前記第一のマークの第一の色と前記第二のマークの第二の色とを、前記第一の画像における予め決定された位置の色のメタメリックな色として選択するステップと、
を更に含む請求項１記載の方法。
【請求項４】
前記第一の画像における予め決定された位置の色を決定するステップと、
前記色を第一及び第二のメタメリックな色にスペクトル的に分割するステップとを更に含み、
前記第一のマークの色は、第一のメタメリックな色であり、前記第二のマークの色は、第二のメタメリックな色である、
請求項１記載の方法。
【請求項５】
前記立体画像は、前記第一の画像及び前記第二の画像の連続するフレームの系列を含む立体シーンであり、
前記第一のマークを付加するステップ及び前記第二のマークを付加するステップは、前記第一のマーク及び前記第二のマークを前記系列のそれぞれのフレームに付加するステップを含む、
請求項１記載の方法。
【請求項６】
前記立体画像は、前記第一の画像及び前記第二の画像の連続するフレームの系列を含む立体シーンであり、
前記第一のマークを付加するステップ及び前記第二のマークを付加するステップは、前記系列の複数の連続するフレームの一部に前記第一のマーク及び前記第二のマークを付加するステップを含む、
請求項１記載の方法。
【請求項７】
前記第一の画像と前記第二の画像は、前記立体画像の左目の画像と右目の画像とを含む、
請求項１記載の方法。
【請求項８】
前記第一の画像と前記第二の画像からオブジェクトを分割するステップと、
前記第一のマーク及び前記第二のマークを前記オブジェクトに付加するステップと、
を更に含む請求項１記載の方法。
【請求項９】
前記オブジェクトの色を決定するステップと、
前記少なくとも１つの色を第一のメタメリックな色と第二のメタメリックな色とにスペクトル的に分割するステップと、
前記第一のメタメリックな色を前記第一のマークに付加するステップと、
前記第二のメタメリックな色を前記第二のマークに付加するステップと、
を更に含む請求項８記載の方法。
【請求項１０】
前記第一のマーク及び前記第二のマークの色は、単色又は有色である、
請求項１記載の方法。
【請求項１１】
第一の画像と第二の画像とを含む立体画像を取得する手段と、
第一の色を有する第一のマークを前記第一の画像の予め決定された位置に付加し、前記第一のマークの第一の色とは異なる第二の色を有する第二のマークを、前記第二の画像の、前記第一の画像における予め決定された位置と実質的に同じ位置に付加するマーキングモジュールとを含み、
３次元モードで視聴されたとき、前記第一のマークと前記第二のマークは、１つの色からなる１つのマークに結合される、
ことを特徴とするマーキングシステム。
【請求項１２】
前記第一のマークと前記第二のマークとは、テキストメッセージ、オブジェクト及びロゴの少なくとも１つである、
請求項１１記載のシステム。
【請求項１３】
前記第一の画像における前記予め決定された位置の色を決定し、前記第一のマークの第一の色と前記第二のマークの第二の色とを、前記第一の画像における予め決定された位置の色のメタメリックな色として選択するカラーアナライザを更に有する、
請求項１１記載のシステム。
【請求項１４】
前記第一の画像における予め決定された位置の色を決定し、前記色を第一及び第二のメタメリックな色にスペクトル的に分割するカラーアナライザを更に有し、
前記第一のマークの色は、第一のメタメリックな色であり、前記第二のマークの色は、第二のメタメリックな色である、
請求項１１記載のシステム。
【請求項１５】
前記立体画像は、前記第一の画像及び前記第二の画像の連続するフレームの系列を含む立体シーンであり、
マークが付加される前記系列の複数の連続するフレームを選択するシーケンスアナライザを更に有する、
請求項１１記載のシステム。
【請求項１６】
前記マーキングモジュールは、前記選択された系列のそれぞれのフレームに前記第一のマーク及び前記第二のマークを付加する、
請求項１５記載のシステム。
【請求項１７】
前記マーキングモジュールは、前記系列の複数の連続するフレームの一部に前記第一のマーク及び前記第二のマークを付加する、
請求項１５記載のシステム。
【請求項１８】
前記第一の画像及び前記第二の画像は、前記立体画像の左目の画像と右目の画像を含む、
請求項１１記載のシステム。
【請求項１９】
前記第一の画像からオブジェクトを分割するオブジェクト分割手段を更に有し、
前記マーキングモジュールは、前記第一及び第二のマークを前記第一及び第二の画像に付加する、
請求項１１記載のシステム。
【請求項２０】
前記オブジェクトの色を決定し、前記色を少なくとも２つのメタメリックな色にスペクトル的に分割するカラーアナライザを更に有する、
請求項１９記載のシステム。
【請求項２１】
前記第一のマーク及び前記第二のマークの色は、単色又は有色である、
請求項１１記載のシステム。
【請求項２２】
第一の色を有する第一のマークを予め決定された位置に有する第一の画像と、
第二の色を有する第二のマークを、前記第一の画像における予め決定された位置と実質的に同じ位置において有する第二の画像とを有する立体画像であって、
当該立体画像は、３次元画像として視聴されたとき、前記第一のマークと前記第二のマークは、１つの色からなる１つのマークに結合され、前記１つの色は、前記３次元画像の視聴者に見えない、
ことを特徴とする立体画像。
【請求項１】
第一の画像と第二の画像とを含む立体画像を取得するステップと、
第一の色を有する第一のマークを前記第一の画像の予め決定された位置に付加するステップと、
前記第一のマークの第一の色とは異なる第二の色を有する第二のマークを、前記第二の画像の、前記第一の画像における予め決定された位置と実質的に同じ位置に付加するステップとを含み、
３次元モードで視聴されたとき、前記第一のマークと前記第二のマークは、１つの色からなる１つのマークに結合される、
ことを特徴とするマーキング方法。
【請求項２】
前記第一のマークと前記第二のマークとは、テキストメッセージ、オブジェクト及びロゴの少なくとも１つである、
請求項１記載の方法。
【請求項３】
前記第一の画像における前記予め決定された位置の色を決定するステップと、
前記第一のマークの第一の色と前記第二のマークの第二の色とを、前記第一の画像における予め決定された位置の色のメタメリックな色として選択するステップと、
を更に含む請求項１記載の方法。
【請求項４】
前記第一の画像における予め決定された位置の色を決定するステップと、
前記色を第一及び第二のメタメリックな色にスペクトル的に分割するステップとを更に含み、
前記第一のマークの色は、第一のメタメリックな色であり、前記第二のマークの色は、第二のメタメリックな色である、
請求項１記載の方法。
【請求項５】
前記立体画像は、前記第一の画像及び前記第二の画像の連続するフレームの系列を含む立体シーンであり、
前記第一のマークを付加するステップ及び前記第二のマークを付加するステップは、前記第一のマーク及び前記第二のマークを前記系列のそれぞれのフレームに付加するステップを含む、
請求項１記載の方法。
【請求項６】
前記立体画像は、前記第一の画像及び前記第二の画像の連続するフレームの系列を含む立体シーンであり、
前記第一のマークを付加するステップ及び前記第二のマークを付加するステップは、前記系列の複数の連続するフレームの一部に前記第一のマーク及び前記第二のマークを付加するステップを含む、
請求項１記載の方法。
【請求項７】
前記第一の画像と前記第二の画像は、前記立体画像の左目の画像と右目の画像とを含む、
請求項１記載の方法。
【請求項８】
前記第一の画像と前記第二の画像からオブジェクトを分割するステップと、
前記第一のマーク及び前記第二のマークを前記オブジェクトに付加するステップと、
を更に含む請求項１記載の方法。
【請求項９】
前記オブジェクトの色を決定するステップと、
前記少なくとも１つの色を第一のメタメリックな色と第二のメタメリックな色とにスペクトル的に分割するステップと、
前記第一のメタメリックな色を前記第一のマークに付加するステップと、
前記第二のメタメリックな色を前記第二のマークに付加するステップと、
を更に含む請求項８記載の方法。
【請求項１０】
前記第一のマーク及び前記第二のマークの色は、単色又は有色である、
請求項１記載の方法。
【請求項１１】
第一の画像と第二の画像とを含む立体画像を取得する手段と、
第一の色を有する第一のマークを前記第一の画像の予め決定された位置に付加し、前記第一のマークの第一の色とは異なる第二の色を有する第二のマークを、前記第二の画像の、前記第一の画像における予め決定された位置と実質的に同じ位置に付加するマーキングモジュールとを含み、
３次元モードで視聴されたとき、前記第一のマークと前記第二のマークは、１つの色からなる１つのマークに結合される、
ことを特徴とするマーキングシステム。
【請求項１２】
前記第一のマークと前記第二のマークとは、テキストメッセージ、オブジェクト及びロゴの少なくとも１つである、
請求項１１記載のシステム。
【請求項１３】
前記第一の画像における前記予め決定された位置の色を決定し、前記第一のマークの第一の色と前記第二のマークの第二の色とを、前記第一の画像における予め決定された位置の色のメタメリックな色として選択するカラーアナライザを更に有する、
請求項１１記載のシステム。
【請求項１４】
前記第一の画像における予め決定された位置の色を決定し、前記色を第一及び第二のメタメリックな色にスペクトル的に分割するカラーアナライザを更に有し、
前記第一のマークの色は、第一のメタメリックな色であり、前記第二のマークの色は、第二のメタメリックな色である、
請求項１１記載のシステム。
【請求項１５】
前記立体画像は、前記第一の画像及び前記第二の画像の連続するフレームの系列を含む立体シーンであり、
マークが付加される前記系列の複数の連続するフレームを選択するシーケンスアナライザを更に有する、
請求項１１記載のシステム。
【請求項１６】
前記マーキングモジュールは、前記選択された系列のそれぞれのフレームに前記第一のマーク及び前記第二のマークを付加する、
請求項１５記載のシステム。
【請求項１７】
前記マーキングモジュールは、前記系列の複数の連続するフレームの一部に前記第一のマーク及び前記第二のマークを付加する、
請求項１５記載のシステム。
【請求項１８】
前記第一の画像及び前記第二の画像は、前記立体画像の左目の画像と右目の画像を含む、
請求項１１記載のシステム。
【請求項１９】
前記第一の画像からオブジェクトを分割するオブジェクト分割手段を更に有し、
前記マーキングモジュールは、前記第一及び第二のマークを前記第一及び第二の画像に付加する、
請求項１１記載のシステム。
【請求項２０】
前記オブジェクトの色を決定し、前記色を少なくとも２つのメタメリックな色にスペクトル的に分割するカラーアナライザを更に有する、
請求項１９記載のシステム。
【請求項２１】
前記第一のマーク及び前記第二のマークの色は、単色又は有色である、
請求項１１記載のシステム。
【請求項２２】
第一の色を有する第一のマークを予め決定された位置に有する第一の画像と、
第二の色を有する第二のマークを、前記第一の画像における予め決定された位置と実質的に同じ位置において有する第二の画像とを有する立体画像であって、
当該立体画像は、３次元画像として視聴されたとき、前記第一のマークと前記第二のマークは、１つの色からなる１つのマークに結合され、前記１つの色は、前記３次元画像の視聴者に見えない、
ことを特徴とする立体画像。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公表番号】特表２０１１−５２５３２４（Ｐ２０１１−５２５３２４Ａ）
【公表日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願番号】特願２０１１−５１３４６５（Ｐ２０１１−５１３４６５）
【出願日】平成２０年６月１３日（２００８．６．１３）
【国際出願番号】ＰＣＴ／ＵＳ２００８／００７５０８
【国際公開番号】ＷＯ２００９／１５１４２４
【国際公開日】平成２１年１２月１７日（２００９．１２．１７）
【出願人】（５０１２６３８１０）トムソン ライセンシング (2,848)
【氏名又は名称原語表記】Ｔｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ
【住所又は居所原語表記】１−５， ｒｕｅ Ｊｅａｎｎｅ ｄ’Ａｒｃ， ９２１３０ ＩＳＳＹ ＬＥＳ ＭＯＵＬＩＮＥＡＵＸ， Ｆｒａｎｃｅ
【Ｆターム（参考）】
【公表日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願日】平成２０年６月１３日（２００８．６．１３）
【国際出願番号】ＰＣＴ／ＵＳ２００８／００７５０８
【国際公開番号】ＷＯ２００９／１５１４２４
【国際公開日】平成２１年１２月１７日（２００９．１２．１７）
【出願人】（５０１２６３８１０）トムソン ライセンシング (2,848)
【氏名又は名称原語表記】Ｔｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ
【住所又は居所原語表記】１−５， ｒｕｅ Ｊｅａｎｎｅ ｄ’Ａｒｃ， ９２１３０ ＩＳＳＹ ＬＥＳ ＭＯＵＬＩＮＥＡＵＸ， Ｆｒａｎｃｅ
【Ｆターム（参考）】
[ Back to top ]