映像信号処理装置、及び、映像信号処理方法
【課題】処理量の増大を抑制することができる映像信号処理装置を提供する。
【解決手段】左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置１００であって、左眼用画像及び右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部の一例であるフィルム検出部３１０と、情報取得部によって取得された情報を用いて、左眼用画像及び右眼用画像の両方に上記所定の処理を行う画像処理部の一例であるＩＰ変換部３２０とを備える。
【解決手段】左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置１００であって、左眼用画像及び右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部の一例であるフィルム検出部３１０と、情報取得部によって取得された情報を用いて、左眼用画像及び右眼用画像の両方に上記所定の処理を行う画像処理部の一例であるＩＰ変換部３２０とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像信号処理装置に関し、特に、三次元映像信号を処理する映像信号処理装置に関する。
【背景技術】
【０００２】
従来、視聴者が立体的に感じる三次元映像を表示するために、左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置が知られている（例えば、特許文献１参照）。左眼用画像と右眼用画像とは、互いに視差を有しており、例えば、異なる位置に配置された２台のカメラによって生成される画像である。
【０００３】
映像信号処理装置は、例えば、入力された三次元映像信号にフォーマット変換処理を行う。フォーマット変換処理は、例えば、フレームレートの変換処理、画像サイズの変換処理、及び走査方式への変換処理などである。映像信号処理装置は、フォーマット変換処理を行った三次元映像信号を三次元映像表示装置に出力する。
【０００４】
三次元映像表示装置は、左眼用画像と右眼用画像とを所定の方式で表示させることで、視聴者が立体的に感じる三次元映像を表示する。例えば、三次元映像表示装置は、左眼用画像と右眼用画像とを１フレーム毎に交互に表示する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平４−２４１５９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記従来技術には、三次元映像信号の処理に関わる処理量が増大するという課題がある。
【０００７】
三次元映像を二次元映像と同等の画質及び同等のフレームレートで表示させるためには、二次元映像の２倍の処理が必要である。なぜなら、三次元映像では、１フレームの三次元画像は左眼用画像と右眼用画像との２つの二次元画像から構成されているためである。したがって、映像信号処理装置は、２つの二次元画像を処理しなければならず、処理量が増大してしまう。
【０００８】
そこで、本発明は、上記課題を解決するためになされたものであって、処理量の増大を抑制することができる映像信号処理装置及び映像信号処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するため、本発明に係る映像信号処理装置は、左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置であって、前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理部とを備える。
【００１０】
これにより、左眼用画像及び右眼用画像のいずれか一方から取得した情報を、左眼用画像及び右眼用画像の両方の処理に利用することで、処理の重複を避けることができ、処理量の増大を抑制することができる。これは、左眼用画像と右眼用画像とは通常、同一の被写体を異なる視点から撮影して得られた画像であるので、左眼用画像及び右眼用画像のそれぞれに対して所定の処理を行った場合、処理の結果が同じになることが多いためである。
【００１１】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方にフィルム検出を行うことで、前記三次元映像信号がフィルム映像から生成された映像信号であるか否かを示すフィルム情報を取得してもよい。
【００１２】
これにより、フィルム検出の結果を左眼用画像と右眼用画像とで共用することができる。フィルム検出は、画像の特徴検出処理の一例であり、三次元映像信号がフィルム映像から生成された映像信号であるか否かを検出する処理である。フィルム検出を行うことで、左眼用画像と右眼用画像とでは通常、同一の検出結果が得られる。したがって、フィルム検出の結果を共用することで、処理の重複を避けることができ、処理量の増大を抑制することができる。
【００１３】
また、前記情報取得部は、さらに、前記三次元映像信号がフィルム映像から生成された映像信号である場合に、前記フィルム映像に含まれる複数のフレームのうちの同一のフレームから生成されたピクチャを示すピクチャ情報を取得し、前記画像処理部は、前記三次元映像信号がフィルム映像から生成された映像信号であることを前記フィルム情報が示す場合に、前記所定の処理として、前記左眼用画像及び前記右眼用画像の両方にそれぞれ、前記ピクチャ情報を用いて、走査方式の変換及びフレームレートの変換の少なくとも一方を行ってもよい。
【００１４】
これにより、フィルム映像を元に生成された映像信号に、走査方式の変換又はフレームレートの変換を行う際に、処理量の増大を抑制することができる。
【００１５】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方に輝度値が一定の特定画像が含まれているか否かを検出することで、当該特定画像が含まれている領域を示す特定画像情報を取得してもよい。
【００１６】
これにより、特定画像の検出結果を左眼用画像と右眼用画像とで共用することができる。特定画像は、例えば、輝度値が一定の画像であり、アスペクト比の調整などを目的として本来の画像に付加される画像である。左眼用画像と右眼用画像とで通常同じ領域に付加されるので、左眼用画像及び右眼用画像のいずれか一方から特定画像を検出すればよく、処理の重複を避けることができる。
【００１７】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の左側と右側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得してもよい。
【００１８】
これにより、いわゆるサイドパネル（ピラーボックス）を検出することができる。
【００１９】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の上側と下側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得してもよい。
【００２０】
これにより、いわゆるレターボックスを検出することができる。
【００２１】
また、前記画像処理部は、前記左眼用画像及び前記右眼用画像の両方について、前記特定画像情報が示す領域以外の有効画像領域の平均輝度値をそれぞれ算出してもよい。
【００２２】
これにより、特定画像の領域以外の有効画像領域の平均輝度値を算出することで、本来の画像の平均輝度値を算出することができる。これは、検出した特定画像は本来の画像ではないので、画像の全領域の平均輝度値を算出した場合、本来の画像の平均輝度値と異なる値が算出されてしまうためである。
【００２３】
また、前記映像信号処理装置は、さらに、前記三次元映像信号を前記左眼用画像と前記右眼用画像とに分割する分割部を備え、前記画像処理部は、前記左眼用画像に前記所定の処理を行う左眼用画像処理部と、前記右眼用画像に前記所定の処理を行う右眼用画像処理部とを有し、前記情報取得部は、前記分割部によって分割された前記左眼用画像及び前記右眼用画像の一方から前記情報を取得し、取得した情報を前記左眼用画像処理部と前記右眼用画像処理部とに出力してもよい。
【００２４】
これにより、左眼用画像と右眼用画像とを並列処理で処理することが可能になるので、処理速度を向上させることができる。
【００２５】
なお、本発明は、上記に示す映像信号処理装置として実現できるだけではなく、当該映像信号処理装置を構成する処理部をステップとする方法として実現することもできる。また、これらステップをコンピュータに実行させるプログラムとして実現してもよい。さらに、当該プログラムを記録したコンピュータ読み取り可能なＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの記録媒体、並びに、当該プログラムを示す情報、データ又は信号として実現してもよい。そして、それらプログラム、情報、データ及び信号は、インターネットなどの通信ネットワークを介して配信してもよい。
【００２６】
また、上記の各映像信号処理装置を構成する構成要素の一部又は全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されていてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などを含んで構成されるコンピュータシステムである。
【発明の効果】
【００２７】
本発明に係る映像信号処理装置及び映像信号処理方法によれば、処理量の増大を抑制することができる。
【図面の簡単な説明】
【００２８】
【図１】実施の形態１に係る映像信号処理装置を含む映像信号処理システムの構成を示すブロック図である。
【図２Ａ】実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【図２Ｂ】実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【図３】実施の形態１に係る映像信号処理装置の構成を示すブロック図である。
【図４】実施の形態１に係る映像信号処理装置の動作の一例を示すフローチャートである。
【図５】実施の形態１に係る映像信号処理装置による三次元映像信号の流れの一例を示す図である。
【図６】実施の形態１に係る変換処理部の構成の一例を示すブロック図である。
【図７】実施の形態１に係る変換処理部の動作の一例を示すフローチャートである。
【図８】フィルム映像と入力三次元映像信号との一例を示す図である。
【図９】実施の形態１に係るＩＰ変換部による、６０ｉの映像を６０ｐの映像にＩＰ変換する際の処理例を示す図である。
【図１０Ａ】実施の形態２に係る入力選択部の構成の一例を示すブロック図である。
【図１０Ｂ】実施の形態２に係る入力選択部の構成の別の一例を示すブロック図である。
【図１１Ａ】サイドパネル画像の一例を示す図である。
【図１１Ｂ】レターボックス画像の一例を示す図である。
【図１２】実施の形態２に係る入力選択部の動作の一例を示す図である。
【図１３】本発明に係る映像信号処理装置を備えるデジタルビデオレコーダ及びデジタルテレビの一例を示す外観図である。
【発明を実施するための形態】
【００２９】
以下では、本発明に係る映像信号処理装置及び映像信号処理方法について、実施の形態に基づいて図面を参照しながら詳細に説明する。
【００３０】
（実施の形態１）
実施の形態１に係る映像信号処理装置は、左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置であって、左眼用画像及び右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、情報取得部によって取得された情報を用いて、左眼用画像及び右眼用画像の両方に上記所定の処理を行う画像処理部とを備えることを特徴とする。より具体的には、本実施の形態では、情報取得部は、画像特徴量検出処理の一例であるフィルム検出を行い、その検出結果を用いて、左眼用画像を含む左眼用映像データと右眼用画像を含む右眼用映像データとの両方にそれぞれ走査方式の変換又はフレームレートの変換を行う。
【００３１】
まず、実施の形態１に係る映像信号処理装置を含む映像信号処理システムの構成について説明する。
【００３２】
図１は、実施の形態１に係る映像信号処理装置１００を含む映像信号処理システム１０の構成を示すブロック図である。
【００３３】
図１に示す映像信号処理システム１０は、デジタルビデオレコーダ２０と、デジタルテレビ３０と、シャッタメガネ４０とを備える。また、デジタルビデオレコーダ２０とデジタルテレビ３０とは、ＨＤＭＩ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ケーブル４１によって接続されている。
【００３４】
デジタルビデオレコーダ２０は、記録媒体４２に記録されている三次元映像信号のフォーマットを変換し、変換した三次元映像信号を、ＨＤＭＩケーブル４１を介してデジタルテレビ３０に出力する。なお、記録媒体４２は、例えば、ＢＤ（Ｂｌｕ−ｒａｙ Ｄｉｓｃ）などの光ディスク、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの磁気ディスク、又は、不揮発性メモリなどである。
【００３５】
デジタルテレビ３０は、デジタルビデオレコーダ２０からＨＤＭＩケーブル４１を介して入力される三次元映像信号、又は、放送波４３に含まれる三次元映像信号のフォーマットを変換し、変換した三次元映像信号に含まれる三次元映像を表示する。なお、放送波４３は、例えば、地上デジタルテレビ放送、及び衛星デジタルテレビ放送などである。
【００３６】
シャッタメガネ４０は、三次元映像を見るために視聴者が装着するメガネであって、例えば、液晶シャッタメガネである。シャッタメガネ４０は、左眼用液晶シャッタと右眼用液晶シャッタとを備え、デジタルテレビ３０が表示する映像と同期してシャッタの開閉を制御することができる。
【００３７】
なお、デジタルビデオレコーダ２０は、放送波４３に含まれる三次元映像信号、又は、インターネットなどの通信網を介して取得した三次元映像信号のフォーマットを変換してもよい。また、デジタルビデオレコーダ２０は、外部の装置から外部入力端子（図示せず）を介して入力された三次元映像信号のフォーマットを変換してもよい。
【００３８】
同様に、デジタルテレビ３０は、記録媒体４２に記録されている三次元映像信号のフォーマットを変換してもよい。また、デジタルテレビ３０は、デジタルビデオレコーダ２０以外の外部の装置から、外部入力端子（図示せず）を介して入力された三次元映像信号のフォーマットを変換してもよい。
【００３９】
また、デジタルビデオレコーダ２０とデジタルテレビ３０とは、ＨＤＭＩケーブル４１以外の規格のケーブルによって接続されていてもよく、あるいは、無線通信網により接続されていてもよい。
【００４０】
以下では、デジタルビデオレコーダ２０、及びデジタルテレビ３０の詳細な構成について説明する。まず、デジタルビデオレコーダ２０について説明する。
【００４１】
図１に示すように、デジタルビデオレコーダ２０は、入力部２１と、デコーダ２２と、映像信号処理装置１００と、ＨＤＭＩ通信部２３とを備える。
【００４２】
入力部２１は、記録媒体４２に記録されている三次元映像信号５１を取得する。三次元映像信号５１は、例えば、ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４などの規格に基づいて圧縮符号化された符号化三次元映像を含んでいる。
【００４３】
デコーダ２２は、入力部２１によって取得された三次元映像信号５１を復号することで、入力三次元映像信号５２を生成する。
【００４４】
映像信号処理装置１００は、デコーダ２２によって生成された入力三次元映像信号５２を処理することで、出力三次元映像信号５３を生成する。映像信号処理装置１００の詳細な構成及び動作については、後で説明する。
【００４５】
ＨＤＭＩ通信部２３は、映像信号処理装置１００によって生成された出力三次元映像信号５３を、ＨＤＭＩケーブル４１を介してデジタルテレビ３０に出力する。
【００４６】
なお、デジタルビデオレコーダ２０は、生成した出力三次元映像信号を、当該デジタルビデオレコーダ２０が備える記憶部（ＨＤＤ及び不揮発性メモリなど）に記憶してもよい。あるいは、当該デジタルビデオレコーダ２０に着脱可能な記録媒体（光ディスクなど）に記録してもよい。
【００４７】
また、デジタルビデオレコーダ２０は、ＨＤＭＩケーブル４１以外の手段によってデジタルテレビ３０と接続されている場合は、ＨＤＭＩ通信部２３の代わりに、当該手段に対応した通信部を備えていてもよい。例えば、デジタルビデオレコーダ２０は、接続手段が無線通信網である場合は無線通信部を、接続手段が他の規格に従ったケーブルである場合は、当該規格に対応する通信部を備える。なお、デジタルビデオレコーダ２０は、これら複数の通信部を備え、複数の通信部を切り替えて利用してもよい。
【００４８】
続いて、デジタルテレビ３０について説明する。
【００４９】
図１に示すように、デジタルテレビ３０は、入力部３１と、デコーダ３２と、ＨＤＭＩ通信部３３と、映像信号処理装置１００と、表示パネル３４と、トランスミッタ３５とを備える。
【００５０】
入力部３１は、放送波４３に含まれる三次元映像信号５４を取得する。三次元映像信号５４は、例えば、ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４などの規格に基づいて圧縮符号化された符号化三次元映像を含んでいる。
【００５１】
デコーダ３２は、入力部３１によって取得された三次元映像信号５４を復号することで、入力三次元映像信号５５を生成する。
【００５２】
ＨＤＭＩ通信部３３は、デジタルビデオレコーダ２０のＨＤＭＩ通信部２３から出力された出力三次元映像信号５３を取得し、入力三次元映像信号５６として映像信号処理装置１００に出力する。
【００５３】
映像信号処理装置１００は、入力三次元映像信号５５及び５６を処理することで、出力三次元映像信号５７を生成する。映像信号処理装置１００の詳細な構成及び動作については、後で説明する。
【００５４】
表示パネル３４は、出力三次元映像信号５７に含まれる三次元映像を表示する。
【００５５】
トランスミッタ３５は、無線通信を用いて、シャッタメガネ４０のシャッタの開閉を制御する。
【００５６】
なお、デジタルテレビ３０は、デジタルビデオレコーダ２０と同様に、ＨＤＭＩケーブル４１以外の手段によってデジタルビデオレコーダ２０と接続されている場合は、ＨＤＭＩ通信部３３の代わりに、当該手段に対応した通信部を備えていてもよい。
【００５７】
ここで、表示パネル３４が表示する三次元映像について説明し、表示パネル３４とシャッタメガネ４０との同期をとる方法について説明する。
【００５８】
三次元映像は、互いに視差を有する左眼用画像と右眼用画像とを含んでいる。左眼用画像が視聴者の左眼に、右眼用画像が視聴者の右眼にそれぞれ選択的に入射されることで、視聴者は、映像を立体的に感じることが可能となる。
【００５９】
デジタルテレビ３０が備える映像信号処理装置１００によって生成された出力三次元映像信号５７の一例を図２Ａに示す。なお、図２Ａは、実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【００６０】
図２Ａに示す出力三次元映像信号５７は、左眼用画像５７Ｌと右眼用画像５７Ｒとを１フレーム毎に交互に含んでいる。例えば、出力三次元映像信号５７のフレームレートは１２０ｆｐｓであり、走査方式はプログレッシブ方式である。なお、このような映像信号を１２０ｐの映像信号とも記載する。
【００６１】
表示パネル３４は、図２Ａに示す出力三次元映像信号５７を受け取り、１フレーム毎に左眼用画像５７Ｌと右眼用画像５７Ｒとを交互に表示する。このとき、トランスミッタ３５は、表示パネル３４が左眼用画像５７Ｌを表示している期間に、シャッタメガネ４０の左眼用液晶シャッタを開き、かつ、右眼用液晶シャッタを閉じるようにシャッタメガネ４０を制御する。また、トランスミッタ３５は、表示パネル３４が右眼用画像５７Ｒを表示している期間に、シャッタメガネ４０の右眼用液晶シャッタを開き、かつ、左眼用液晶シャッタを閉じるようにシャッタメガネ４０を制御する。これにより、視聴者の左眼には左眼用画像５７Ｌが、右眼には右眼用画像５７Ｒがそれぞれ選択的に入射される。
【００６２】
このように、表示パネル３４は、左眼用画像５７Ｌと右眼用画像５７Ｒとを時間的に切り替えて表示する。なお、図２Ａに示す例では、１フレーム毎に左眼用画像５７Ｌと右眼用画像５７Ｒとを切り替えたが、複数フレーム毎に切り替えてもよい。
【００６３】
なお、視聴者の左眼と右眼とにそれぞれ選択的に左眼用画像と右眼用画像とを入射させる方法は、上記の方法に限らず、他の方法を用いてもよい。
【００６４】
例えば、デジタルテレビ３０が備える映像信号処理装置１００は、図２Ｂに示すような出力三次元映像信号５８を生成してもよい。生成した出力三次元映像信号５８は、表示パネル３４に出力される。なお、図２Ｂは、実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【００６５】
例えば、図２Ｂに示す出力三次元映像信号５８は、左眼用画像５８Ｌと右眼用画像５８Ｒとを、１フレーム内の異なる領域に含んでいる。具体的には、左眼用画像５８Ｌと右眼用画像５８Ｒとが市松状に配置されている。例えば、出力三次元映像信号５８のフレームレートは６０ｆｐｓであり、走査方式はプログレッシブ方式である。なお、このような映像信号を６０ｐの映像信号とも記載する。
【００６６】
表示パネル３４は、図２Ｂに示す出力三次元映像信号５８を受け取り、左眼用画像５８Ｌと右眼用画像５８Ｒとが市松状に配置された画像を表示する。この場合、表示パネル３４は、左眼用画像５８Ｌが表示される画素上に形成された左眼用偏光フィルムと、右眼用画像５８Ｒが表示される画素上に形成された右眼用偏光フィルムとを備える。これにより、左眼用画像５８Ｌと右眼用画像５８Ｒとに互いに異なる偏光（直線偏光又は円偏光など）をかける。
【００６７】
さらに、視聴者は、シャッタメガネ４０の代わりに、表示パネル３４が備える偏光にそれぞれ対応する左眼用偏光フィルタと右眼用偏光フィルタとを備える偏光メガネを装着する。これにより、視聴者の左眼及び右眼にそれぞれ、左眼用画像５８Ｌと右眼用画像５８Ｒとを選択的に入射させることができる。
【００６８】
このように、表示パネル３４は、左眼用画像５８Ｌと右眼用画像５８Ｒとが１フレーム内に空間的に異なる領域に配置された映像を表示する。なお、図２Ｂに示す例では、１画素毎に左眼用画像５８Ｌと右眼用画像５８Ｒとを配置したが、複数の画素毎に左眼用画像５８Ｌと右眼用画像５８Ｒとを配置してもよい。また、市松状でなくてもよく、水平ライン毎、又は、垂直ライン毎に左眼用画像５８Ｌと右眼用画像５８Ｒとを配置してもよい。
【００６９】
以下では、実施の形態１に係る映像信号処理装置１００の詳細な構成及び動作について説明する。
【００７０】
実施の形態１に係る映像信号処理装置１００は、左眼用画像と右眼用画像とを含む三次元映像信号を処理する。具体的には、映像信号処理装置１００は、入力された三次元映像信号にフォーマット変換処理を行う。例えば、デジタルビデオレコーダ２０が備える映像信号処理装置１００は、第１フォーマットの入力三次元映像信号５２を第２フォーマットの出力三次元映像信号５３に変換する。
【００７１】
ここで、映像信号処理装置１００が行うフォーマット変換処理とは、配置パターン、フレームレート、走査方式、及び画像サイズの変換の少なくとも１つの処理である。なお、映像信号処理装置１００は、これら以外の処理を行ってもよい。
【００７２】
配置パターンの変換は、三次元映像信号に含まれる左眼用画像と右眼用画像との時間的な配置又は空間的な配置を変換することである。例えば、映像信号処理装置１００は、図２Ａに示す三次元映像信号を図２Ｂに示す三次元映像信号に変換する。
【００７３】
フレームレートの変換は、三次元映像信号のフレームレートを変換することである。例えば、映像信号処理装置１００は、フレーム補間、又はフレームのコピー処理を行うことで、低フレームレート（例えば、６０ｆｐｓ）の三次元映像信号を高フレームレート（例えば、１２０ｆｐｓ）の三次元映像信号に変換する。あるいは、映像信号処理装置１００は、フレームを間引くことで、又は、複数のフレームを時間的に平均化したフレームを生成することで、高フレームレートの三次元映像信号を低フレームレートの三次元映像信号に変換する。
【００７４】
走査方式の変換は、インターレース方式からプログレッシブ方式への変換、又は、プログレッシブ方式からインターレース方式への変換である。なお、インターレース方式とは、奇数番目のラインから構成されるトップフィールドと偶数番目のラインから構成されるボトムフィールドとにフレームを分けて走査する方式である。
【００７５】
画像サイズの変換は、画像の拡大及び縮小を行うことである。例えば、映像信号処理装置１００は、画素の補間又はコピーを行うことで画像を拡大する。あるいは、映像信号処理装置１００は、画素を間引くことで、又は、複数の画素の平均値を算出することで画像を縮小する。例えば、画像サイズには、ＶＧＡ（６４０×４８０）、ハイビジョン画像（１２８０×７２０）、及びフルハイビジョン画像（１９２０×１０８０）などがある。
【００７６】
図３は、実施の形態１に係る映像信号処理装置１００の構成を示すブロック図である。
【００７７】
図３に示す映像信号処理装置１００は、入力選択部１１０と、第１処理部１２０と、第２処理部１３０と、合成部１４０とを備える。
【００７８】
入力選択部１１０は、入力三次元映像信号を左眼用画像２１０Ｌと右眼用画像２１０Ｒとに分割し、左眼用画像２１０Ｌを第１処理部１２０へ出力し、右眼用画像２１０Ｒを第２処理部１３０へ出力する。具体的には、入力選択部１１０は、入力三次元映像信号を、左眼用画像と右眼用画像とのうち左眼用画像のみを含む左眼用映像データと、右眼用画像のみを含む右眼用映像データとに分割する。そして、入力選択部１１０は、左眼用映像データを第１処理部１２０へ出力し、右眼用映像データを第２処理部１３０へ出力する。なお、入力選択部１１０は、入力三次元映像信号を第１処理部１２０と第２処理部１３０とへそれぞれ出力し、第１処理部１２０が左眼用映像データを抽出し、第２処理部１３０が右眼用映像データを抽出してもよい。
【００７９】
第１処理部１２０は、入力選択部１１０から入力された左眼用映像データを処理する。具体的には、第１処理部１２０は、左眼用映像データのフォーマット変換を行う。このとき、第１処理部１２０は、左眼用映像データから、所定の処理を行う際に用いられる情報を取得し、取得した情報を第２処理部１３０へ出力する。例えば、第１処理部１２０は、入力された左眼用映像データに画像特徴検出処理を行うことで、特徴検出結果として所定の情報を取得する。画像特徴検出処理は、例えば、フィルム検出である。フィルム検出の詳細は後で説明する。
【００８０】
第２処理部１３０は、入力選択部１１０から入力された右眼用映像データを処理する。具体的には、第２処理部１３０は、右眼用映像データのフォーマット変換を行う。このとき、第２処理部１３０は、第１処理部１２０によって左眼用映像データから取得された情報を受け取る。そして、第２処理部１３０は、受け取った情報を利用して、右眼用映像データに所定の処理を行う。
【００８１】
合成部１４０は、第１処理部１２０によって生成された変換後の左眼用画像２５０Ｌと、第２処理部１３０によって生成された変換後の右眼用画像２５０Ｒとを合成することにより、合成画像２６０を生成する。生成された合成画像２６０を含む映像信号は、出力三次元映像信号として出力される。
【００８２】
第１処理部１２０の詳細な構成は、以下の通りである。
【００８３】
図３に示すように、第１処理部１２０は、第１水平リサイズ部１２１と、変換処理部１２２と、垂直リサイズ部１２３と、第２水平リサイズ部１２４とを備える。
【００８４】
第１水平リサイズ部１２１は、入力された左眼用画像２１０Ｌの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第１水平リサイズ部１２１は、画素を間引くことで、又は、複数の画素の平均値を算出することで、左眼用画像２１０Ｌを水平方向に縮小する。縮小後の左眼用画像２２０Ｌは、変換処理部１２２に出力される。
【００８５】
変換処理部１２２は、入力された縮小後の左眼用画像２２０ＬにＩＰ変換を行う。ＩＰ変換は、走査方式の変換の一例であり、縮小後の左眼用画像２２０Ｌの走査方式を、インターレース方式からプログレッシブ方式へ変換することである。ＩＰ変換後の左眼用画像２３０Ｌは、垂直リサイズ部１２３に出力される。
【００８６】
なお、変換処理部１２２は、所定の処理に用いられる情報を左眼用画像２２０Ｌから取得し、第２処理部１３０へ出力する。また、変換処理部１２２は、ノイズリダクション処理（ＮＲ処理）を行ってもよい。変換処理部１２２の詳細な構成及び動作については、後で図４を用いて説明する。また、上記の所定の処理及び当該処理に用いられる情報についても、後で説明する。
【００８７】
垂直リサイズ部１２３は、変換処理部１２２によってＩＰ変換された左眼用画像２３０Ｌの垂直方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。リサイズ後の左眼用画像２４０Ｌは、第２水平リサイズ部１２４に出力される。
【００８８】
第２水平リサイズ部１２４は、リサイズ後の左眼用画像２４０Ｌの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第２水平リサイズ部１２４は、画素を補間することで、又は、画素をコピーすることでリサイズ後の左眼用画像２４０Ｌを水平方向に拡大する。拡大後の左眼用画像２５０Ｌは、合成部１４０に出力される。
【００８９】
また、第２処理部１３０の詳細な構成は、以下の通りである。
【００９０】
図３に示すように、第２処理部１３０は、第１水平リサイズ部１３１と、変換処理部１３２と、垂直リサイズ部１３３と、第２水平リサイズ部１３４とを備える。
【００９１】
第１水平リサイズ部１３１は、入力された右眼用画像２１０Ｒの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第１水平リサイズ部１３１は、画素を間引くことで、又は、複数の画素の平均値を算出することで、右眼用画像２１０Ｒを水平方向に縮小する。縮小後の右眼用画像２２０Ｒは、変換処理部１３２に出力される。
【００９２】
変換処理部１３２は、入力された縮小後の右眼用画像２２０ＲにＩＰ変換を行う。ＩＰ変換は、縮小後の右眼用画像２２０Ｒの走査方式を、インターレース方式からプログレッシブ方式へ変換することである。ＩＰ変換後の右眼用画像２３０Ｒは、垂直リサイズ部１３３に出力される。
【００９３】
なお、変換処理部１３２は、第１処理部１２０の変換処理部１２２から所定の処理に用いられる情報を取得する。また、変換処理部１３２は、ノイズリダクション処理（ＮＲ処理）を行ってもよい。
【００９４】
垂直リサイズ部１３３は、変換処理部１３２によってＩＰ変換された右眼用画像２３０Ｒの垂直方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。リサイズ後の右眼用画像２４０Ｒは、第２水平リサイズ部１３４に出力される。
【００９５】
第２水平リサイズ部１３４は、リサイズ後の右眼用画像２４０Ｒの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第２水平リサイズ部１３４は、画素を補間することで、又は、画素をコピーすることでリサイズ後の右眼用画像２４０Ｒを水平方向に拡大する。拡大後の右眼用画像２５０Ｒは、合成部１４０に出力される。
【００９６】
なお、入力選択部１１０は、左眼用画像２１０Ｌを第２処理部１３０へ出力し、右眼用画像２１０Ｒを第１処理部１２０へ出力してもよい。また、入力三次元映像信号として、左眼用画像のみを示す左眼用映像信号と右眼用画像のみを示す右眼用映像信号との２つの映像信号が入力された場合は、入力選択部１１０は、分割処理を行うことなく、左眼用映像信号を第１処理部１２０へ出力し、右眼用映像信号を第２処理部１３０へ出力してもよい。
【００９７】
以上のように、実施の形態１に係る映像信号処理装置１００は、左眼用画像及び右眼用画像のいずれか一方から情報を取得し、取得した情報を用いて左眼用画像及び右眼用画像の両方を処理する。
【００９８】
続いて、上記の映像信号処理装置１００が行う処理について、図４及び図５を用いて説明する。なお、図４は、実施の形態１に係る映像信号処理装置１００の動作の一例を示すフローチャートである。図５は、実施の形態１に係る映像信号処理装置１００による三次元映像信号の流れの一例を示す図である。
【００９９】
以下では、デジタルビデオレコーダ２０が備える映像信号処理装置１００の動作について説明する。なお、デジタルテレビ３０が備える映像信号処理装置１００の動作についても同様である。
【０１００】
まず、入力選択部１１０は、入力三次元映像信号５２を左眼用画像２１０Ｌと右眼用画像２１０Ｒとに分割する（Ｓ１１０）。なお、実施の形態１に係る入力三次元映像信号５２は、インターレース方式の映像信号であり、例えば、フルハイビジョンの映像である。
【０１０１】
したがって、図５に示すように、左眼用画像２１０Ｌは、左眼用トップフィールド２１０Ｌｔと左眼用ボトムフィールド２１０Ｌｂとを含んでいる。同様に、右眼用画像２１０Ｒは、右眼用トップフィールド２１０Ｒｔと右眼用ボトムフィールド２１０Ｒｂとを含んでいる。各フィールドは、１９２０×５４０画素で構成される。
【０１０２】
次に、第１水平リサイズ部１２１及び１３１はそれぞれ、左眼用画像２１０Ｌ及び右眼用画像２１０Ｒを水平方向に縮小する（Ｓ１２０）。ここでは、第１水平リサイズ部１２１及び１３１は、水平方向に１／２倍に縮小する。これにより、図５に示すように、縮小後の左眼用画像２２０Ｌと縮小後の右眼用画像２２０Ｒとを生成する。なお、縮小率は１／２倍に限られない。なお、第１水平リサイズ部１２１及び１３１はそれぞれ、左眼用画像２１０Ｌ及び右眼用画像２１０Ｒを水平方向に拡大してもよい。
【０１０３】
縮小後の左眼用画像２２０Ｌは、縮小後の左眼用トップフィールド２２０Ｌｔと縮小後の左眼用ボトムフィールド２２０Ｌｂとを含んでいる。縮小後の右眼用画像２２０Ｒは、縮小後の右眼用トップフィールド２２０Ｒｔと縮小後の右眼用ボトムフィールド２２０Ｒｂとを含んでいる。各フィールドは、９６０×５４０画素で構成される。
【０１０４】
なお、このとき、第１水平リサイズ部１２１及び１３１は、図２Ｂに示すような市松状の画像を生成するために、それぞれ開始位置をずらしてもよい。具体的には、第１水平リサイズ部１２１は、左眼用トップフィールド２１０Ｌｔに含まれる偶数番目の画素（０，２，４，６…）を抽出することで、縮小後の左眼用トップフィールド２２０Ｌｔを生成する。さらに、第１水平リサイズ部１２１は、左眼用ボトムフィールド２１０Ｌｂに含まれる奇数番目の画素（１，３，５，７…）を抽出することで、縮小後の左眼用ボトムフィールド２２０Ｌｂを生成する。
【０１０５】
また、第１水平リサイズ部１３１は、右眼用トップフィールド２１０Ｒｔに含まれる奇数番目の画素（１，３，５，７…）を抽出することで、縮小後の右眼用トップフィールド２２０Ｒｔを生成する。さらに、第１水平リサイズ部１３１は、右眼用ボトムフィールド２１０Ｒｂに含まれる偶数番目の画素（０，２，４，６…）を抽出することで、縮小後の右眼用ボトムフィールド２２０Ｒｂを生成する。
【０１０６】
次に、変換処理部１２２及び変換処理部１３２はそれぞれ、縮小後の左眼用画像２２０Ｌと縮小後の右眼用画像２２０ＲとにＩＰ変換を行う（Ｓ１３０）。変換処理部１２２及び変換処理部１３２はそれぞれ、ＩＰ変換を行うことで、プログレッシブ方式の左眼用画像２３０Ｌと右眼用画像２３０Ｒとを生成する。なお、ＩＰ変換の詳細については、後で説明する。
【０１０７】
次に、垂直リサイズ部１２３及び１３３は、左眼用画像２３０Ｌと右眼用画像２３０Ｒとを垂直方向にリサイズ、すなわち、拡大又は縮小する（Ｓ１４０）。図５に示す例では、垂直リサイズ部１２３及び１３３は、垂直方向のリサイズを行わずに、左眼用画像２４０Ｌと右眼用画像２４０Ｒとを出力する。
【０１０８】
次に、第２水平リサイズ部１２４及び１３４は、左眼用画像２４０Ｌと右眼用画像２４０Ｒとを水平方向に拡大する（Ｓ１５０）。例えば、第２水平リサイズ部１２４は、左眼用画像２４０Ｌに含まれる各画素をコピーすることで、２倍に拡大された左眼用画像２５０Ｌを生成する。同様に、第２水平リサイズ部１３４は、右眼用画像２４０Ｒに含まれる各画素をコピーすることで、２倍に拡大された右眼用画像２５０Ｒを生成する。
【０１０９】
なお、拡大率は、例えば、第１水平リサイズ部１２１及び１３１における縮小処理の縮小率の逆数である。ただし、これには限られない。第２水平リサイズ部１２４及び１３４はそれぞれ、左眼用画像２４０Ｌと右眼用画像２４０Ｒとを水平方向に縮小してもよい。
【０１１０】
最後に、合成部１４０は、左眼用画像２５０Ｌと右眼用画像２５０Ｒとを合成することで、合成画像２６０を生成する（Ｓ１６０）。合成画像２６０は、例えば、図２Ｂに示すように、左眼用画像２５０Ｌに含まれる画素と右眼用画像２５０Ｒに含まれる画素とが市松状に配列された画像である。合成により得られた合成画像２６０は、出力三次元映像信号５３として出力される。
【０１１１】
以上のようにして、実施の形態１に係る映像信号処理装置１００は、入力三次元映像信号５２を処理することで、出力三次元映像信号５３を生成する。
【０１１２】
次に、変換処理部１２２の詳細な構成及びその動作と、左眼用画像から取得する情報、及び当該情報を用いた所定の処理とについて説明する。
【０１１３】
実施の形態１に係る変換処理部１２２は、ＩＰ変換を行う前にフィルム検出を行う。フィルム検出は、画像特徴検出処理の一例であり、映像データがフィルム映像から生成された映像データであるか否かを検出する処理である。ここでは、変換処理部１２２は、フィルム検出として、左眼用画像のみを含む左眼用映像データがフィルム映像から生成された映像データであるか否かを検出する。
【０１１４】
そして、変換処理部１２２は、フィルム検出の結果を変換処理部１３２に出力する。なお、変換処理部１３２では、右眼用画像のみを含む右眼用映像データにＩＰ変換を行う。以下では、変換処理部１２２の具体的な構成及び動作について説明する。
【０１１５】
図６は、実施の形態１に係る変換処理部１２２の構成の一例を示すブロック図である。図６に示すように、変換処理部１２２は、フィルム検出部３１０と、ＩＰ変換部３２０とを備える。
【０１１６】
フィルム検出部３１０は、本発明に係る情報取得部の一例であり、左眼用画像にフィルム検出を行う。具体的には、フィルム検出部３１０は、左眼用画像を含む左眼用映像データにフィルム検出を行うことで、入力三次元映像信号がフィルム映像から生成された映像信号であるか否かを示すフィルム情報と、入力三次元映像信号がフィルム映像から生成された映像信号である場合に、フィルム映像に含まれる複数のフレームのうちの同一のフレームから生成されたピクチャを示すピクチャ情報とを取得する。なお、ここではフィルム検出部３１０は、ピクチャ情報の一例として、合成すべきフィールドを示すＩＰ変換情報を取得する。
【０１１７】
ＩＰ変換部３２０は、本発明に係る左眼用画像処理部の一例であり、フィルム情報とＩＰ変換情報とを用いて、左眼用映像データをインターレース方式からプログレッシブ方式へ変換する。具体的には、ＩＰ変換部３２０は、入力三次元映像信号がフィルム映像から生成された映像信号であることをフィルム情報が示す場合に、ＩＰ変換情報を用いて左眼用映像データをインターレース方式からプログレッシブ方式へ変換する。また、入力三次元映像信号がフィルム映像から生成された映像信号ではないことをフィルム情報が示す場合、ＩＰ変換部３２０は、例えば、隣接する２つのフィールドを合成することで、左眼用映像データをインターレース方式からプログレッシブ方式へ変換する。
【０１１８】
なお、変換処理部１３２は、本発明に係る右眼用画像処理部の一例であり、右眼用映像データに所定の処理を行う。具体的には、変換処理部１３２は、フィルム検出の結果であるフィルム情報とＩＰ変換情報とをフィルム検出部３１０から受け取る。そして、変換処理部１３２は、ＩＰ変換部３２０と同様にして、フィルム情報とＩＰ変換情報とを用いて、右眼用映像データをインターレース方式からプログレッシブ方式へ変換する。
【０１１９】
図７は、実施の形態１に係る変換処理部１２２の動作の一例を示すフローチャートである。
【０１２０】
まず、フィルム検出部３１０は、左眼用映像データにフィルム検出を行う（Ｓ１３１）。なお、第１処理部１２０に右眼用映像データを入力することで、フィルム検出部３１０は、右眼用映像データにフィルム検出を行ってもよい。フィルム検出の結果であるフィルム情報とＩＰ変換情報とは、ＩＰ変換部３２０と変換処理部１３２とに出力される。
【０１２１】
次に、ＩＰ変換部３２０及び変換処理部１３２は、フィルム情報とＩＰ変換情報とを用いて、左眼用映像データ及び右眼用映像データをインターレース方式からプログレッシブ方式へ変換する（Ｓ１３２）。フィルム検出及びＩＰ変換の具体的な処理については、フィルム映像と三次元映像との例を挙げて以下で説明する。
【０１２２】
図８は、フィルム映像と入力三次元映像信号との一例を示す図である。
【０１２３】
フィルム映像は、２４コマ／秒（２４ｆｐｓ）のプログレッシブ方式の映像（２４ｐの映像）である。
【０１２４】
入力三次元映像信号は、例えば、フレームレートが６０ｆｐｓであるインターレース方式の映像（６０ｉの映像）を示す信号である。すなわち、入力三次元映像信号は、トップフィールドとボトムフィールドとを１秒間に合わせて６０枚含んでいる（トップフィールド又はボトムフィールドのみのフレームレートは、３０ｆｐｓ）。
【０１２５】
図８に示すように、２４ｐの映像から６０ｉの映像を生成する場合、まず、２４ｐの映像に含まれるフレームＡをトップフィールド用（Ａtop）、ボトムフィールド用（Ａbtm）、トップフィールド用（Ａtop）に３回読み出す。次に、２４ｐの映像に含まれるフレームＢをボトムフィールド用（Ｂbtm）、トップフィールド用（Ｂtop）に２回読み出す。次に、２４ｐの映像に含まれるフレームＣをボトムフィールド用（Ｃbtm）、トップフィールド用（Ｃtop）、ボトムフィールド用（Ｃbtm）に３回読み出す。
【０１２６】
以上のように、フレームの３回読み出しと２回読み出しとを交互に繰り返すことで、２４ｐの映像から６０ｉの映像を生成することができる（３−２プルダウン処理）。なお、他のフレームレート間での変換を行う場合も同様に、変換前のフレームレートと変換後のフレームレートとの割合に応じて、読み出し回数を決定すればよい。
【０１２７】
次に、図８に示すように生成された６０ｉの映像（入力三次元映像信号）を６０ｐの映像（出力三次元映像信号）にＩＰ変換する場合について説明する。なお、６０ｐの映像は、６０ｆｐｓのプログレッシブ方式の映像のことである。
【０１２８】
フィルム検出部３１０は、フィルム検出として、２つのフィールド間の差分を算出する。例えば、フィルム検出部３１０は、対象となるフィールドと２つ前のフィールドとの差分を算出する。図８に示すように２４ｐの映像であるフィルム映像から生成された６０ｉの映像を含む入力三次元映像信号は、５枚のフィールド中に２枚の同じフィールドが含まれる（例えば、１番目と３番目のＡtop、６番目と８番目のＣbtm）。
【０１２９】
したがって、２つのフィールド間の差分を順次算出すると、５枚のフィールド中に１組は、差分がほぼ０となるフィールドの組が存在する。これにより、フィルム検出部３１０は、差分がほぼ０となる割合を検出することで、入力三次元映像信号が３−２プルダウンされた映像を含んでいることを検出することができる。つまり、差分がほぼ０となる割合が５枚のフィールド中に１組のフィールドであると検出した場合、フィルム検出部３１０は、入力三次元映像信号がフィルム映像から生成された映像信号であることを示すフィルム情報をＩＰ変換部３２０へ出力する。
【０１３０】
さらに、フィルム検出部３１０は、差分がほぼ０となる割合が５枚のフィールド中に１組のフィールドであると検出した場合、フィルム映像のフレームレートを示すフレームレート情報を取得する。つまり、入力三次元映像信号が３−２プルダウンされた映像であり、かつ、入力三次元映像信号のフレームレートが６０ｆｐｓであることから、フィルム映像のフレームレートは、２４（＝６０×２／５）ｆｐｓであることが分かる。そして、フィルム検出部３１０は、ＩＰ変換の際に、合成すべきトップフィールドとボトムフィールドとを示すＩＰ変換情報をＩＰ変換部３２０へ出力する。
【０１３１】
図９は、実施の形態１に係るＩＰ変換部３２０による、６０ｉの映像を６０ｐの映像にＩＰ変換する際の処理例を示す図である。
【０１３２】
ＩＰ変換部３２０は、６０ｉの入力映像と、当該入力映像を１フレーム遅延した第１遅延映像と、６０ｉの入力映像を２フレーム遅延した第２遅延映像との中から、フィールド毎に２つの映像を選択して合成する。このとき、どの映像を選択するか、すなわち、どのトップフィールドとどのボトムフィールドとを選択するかは、フィルム検出部３１０によるフィルム検出の結果であるＩＰ変換情報に従って決定される。
【０１３３】
具体的には、フィルム検出部３１０は、入力三次元映像信号が３−２プルダウンされた映像信号であることを検出した場合、フィルム映像に含まれる同一のフレームから生成されたフィールドを示す情報をＩＰ変換情報として出力する。そして、ＩＰ変換部３２０は、受け取ったＩＰ変換情報に従って、同一のフレームから生成されたフィールド同士を選択して合成する。
【０１３４】
例えば、ＩＰ変換部３２０は、図９に点線で示す四角によって囲まれた２枚のフィールドを合成することで１フレームの画像を生成する。
【０１３５】
具体的には、ＩＰ変換部３２０は、時刻Ｔ２では、第１遅延映像のＡtopと６０ｉの映像のＡbtmとを合成する。また、時刻Ｔ３では、ＩＰ変換部３２０は、第１遅延映像のＡbtmと６０ｉの映像のＡtopとを合成する。なお、時刻Ｔ３では、第１遅延映像のＡbtmと第２遅延映像のＡtopとを合成してもよい。
【０１３６】
さらに、時刻Ｔ４では、ＩＰ変換部３２０は、第１遅延映像のＡtopと第２遅延映像のＡbtmとを合成する。次に、時刻Ｔ５では、ＩＰ変換部３２０は、６０ｉの映像のＢtopと第１遅延映像のＡbtmとを合成する。
【０１３７】
このように、３−２プルダウンされた映像信号をＩＰ変換する場合、同一のフレームから生成された３枚連続するフィールドについては、最初の２枚は、第１遅延映像と入力映像とを合成し、残りの１枚は第１遅延映像と第２遅延映像とを合成すればよい。なお、真ん中の１枚は、第１遅延映像と第２遅延映像とを合成してもよい。さらに、同一のフレームから生成された２枚連続するフィールドについては、１枚目は、第１遅延映像と入力映像とを合成し、２枚目は、第１遅延映像と第２遅延映像とを合成すればよい。
【０１３８】
以上のように、ＩＰ変換部３２０は、フィルム映像に含まれる同一のフレームから生成されたフィールド同士を選択して合成することで、所定のフレームレートのインターレース方式の入力三次元映像信号から同じフレームレートのプログレッシブ方式の出力三次元映像信号を生成する。
【０１３９】
また、ＩＰ変換部３２０は、入力三次元映像信号がフィルム映像から生成された映像信号ではないことをフィルム情報が示す場合は、隣接するフィールドを順に合成することでプログレッシブ方式の出力三次元映像信号を生成する。
【０１４０】
なお、入力三次元映像信号がフィルム映像から生成された映像信号である場合に、ＩＰ変換部３２０がフィルム検出を行わず、単に、隣接するフィールドを順に合成した場合、例えば、ＡtopとＢbtmとが合成されてしまうことになり、画質が劣化してしまう。したがって、上記のようにフィルム検出を行うことで、本実施の形態に係るＩＰ変換部３２０は、フィルム映像に含まれる同一のフレームから生成されたフィールド同士を合成することができるので、画質の劣化を防止することができる。
【０１４１】
以上のように、実施の形態１に係る変換処理部１２２では、左眼用映像データにフィルム検出を行い、その結果を変換処理部１３２に出力する。変換処理部１３２は、変換処理部１２２から入力されるフィルム検出の結果を用いて、右眼用映像データにＩＰ変換を行う。
【０１４２】
左眼用画像と右眼用画像とは、そもそも同じ被写体を異なる視点から撮影して得られた画像、又は、同じ画像を所定の視差の分だけずらして生成された画像である。したがって、左眼用映像データと右眼用映像データとのいずれにフィルム検出を行ったとしても、同じ結果が得られる。
【０１４３】
このため、本実施の形態のように、左眼用映像データ及び右眼用映像データのいずれか一方のみにフィルム検出を行い、その検出結果を左眼用映像データ及び右眼用映像データの双方に利用することで、処理の重複を避けることができる。これにより、本実施の形態に係る映像信号処理装置１００は、冗長な処理を避けることができ、消費電力を低減、及び処理速度を向上させることができる。
【０１４４】
また、左眼用映像データと右眼用映像データとで個別に検出を行った場合、互いに異なる検出結果が得られる可能性がある。この場合、変換処理部１２２及び１３２は、異なる検出結果に基づいてＩＰ変換を行うことになるので、合成部１４０が左眼用画像と右眼用画像とを合成した場合に不自然な映像が生成される可能性がある。
【０１４５】
これに対して、本実施の形態に係る映像信号処理装置１００では、同じ検出結果を用いて、左眼用映像データと右眼用映像データとの両方を処理するので、上記のように不自然な映像が生成される可能性を低減することができる。
【０１４６】
なお、上記説明では、インターレース方式の入力三次元映像信号にフィルム検出を行う構成について示したが、プログレッシブ方式の入力三次元映像信号にフィルム検出を行ってもよい。例えば、図８に示すような２４ｐのフィルム映像（ＡＢＣ…）から生成された、図９に示すような６０ｐの映像信号（ＡＡＡＢＢＣＣＣ…）が、入力三次元映像信号として本実施の形態に係る映像信号処理装置１００に入力された場合を想定する。
【０１４７】
フィルム検出部３１０は、左眼用映像データに含まれる２つのフレーム間の差分を算出する。例えば、フィルム検出部３１０は、時間的に隣接する２つのフレーム間の差分を算出することで、差分が“小小大小大小小大小大…”となる。これにより、フィルム検出部３１０は、入力三次元映像信号が３−２プルダウンされた映像を含んでいることを示すフィルム情報をＩＰ変換部３２０へ出力する。
【０１４８】
さらに、フィルム検出部３１０は、ピクチャ情報の一例として、フィルム映像に含まれる同一のフレームから生成されたフレームを示すフレーム情報を、ＩＰ変換部３２０と変換処理部１３２とへ出力する。例えば、時間的に隣接する２つのフレーム間の差分がほぼ０となった場合、フィルム検出部３１０は、これら２つのフレームが、フィルム映像に含まれる同一のフレームから生成されたフレームであると判定することで、フレーム情報を出力する。
【０１４９】
ＩＰ変換部３２０は、フィルム情報とフレーム情報とを受け取り、受け取ったフィルム情報とフレーム情報とに基づいて、左眼用映像データである入力三次元映像信号のフレームレートを変換する。例えば、入力三次元映像信号が３−２プルダウンされた映像を含んでいることをフィルム情報が示す場合、ＩＰ変換部３２０は、フレーム情報を用いて出力すべきフレームとその枚数とを決定する。
【０１５０】
例えば、ＩＰ変換部３２０は、同一のフレームを２枚ずつ選択して出力することで、フレームレートが４８ｆｐｓの映像信号（ＡＡＢＢＣＣ…）を出力する。この映像信号には、同一のフレームが２枚ずつ含まれる。あるいは、ＩＰ変換部３２０は、同一のフレームを５枚ずつ選択して出力することで、フレームレートが１２０ｆｐｓの映像信号（ＡＡＡＡＡＢＢＢＢＢＣＣＣＣＣ…）を出力してもよい。この映像信号には、同一のフレームが５枚ずつ含まれる。
【０１５１】
変換処理部１３２は、右眼用映像データにＩＰ変換部３２０と同様の処理を行う。
【０１５２】
以上のようにして、プログレッシブ方式の入力三次元映像信号にフィルム検出を行ってもよい。この場合も、左眼用映像データと右眼用映像データとでは、フィルム検出結果が一致するので、一方のみにフィルム検出を行うことで、処理量の増大を抑制することができる。
【０１５３】
なお、ＩＰ変換部３２０は、走査方式の変換とフレームレートの変換との両方を行ってもよい。例えば、ＩＰ変換部３２０は、インターレース方式の映像信号（６０ｉの映像信号）をプログレッシブ方式の映像信号（６０ｐの映像信号）に変換するとともに、変換した映像信号のフレームレートを上述のように変換する。これにより、例えば、ＩＰ変換部３２０は、６０ｉの映像信号から４８ｐ又は１２０ｐの映像信号を生成することができる。
【０１５４】
また、フィルム検出では、入力三次元映像信号として３−２プルダウンされた映像信号について説明したが、２−２プルダウンされた映像信号であってもよい。例えば、隣接する２フィールドの差分を算出すると、２−２プルダウンされた映像信号の場合、差分が“大小大小…”を繰り返す。したがって、フィルム検出部３１０は、検出した差分の変化の傾向を判断することで、入力三次元映像信号が２−２プルダウンされた映像信号であることを検出することができる。
【０１５５】
なお、フィルム検出部３１０が行うフィルム検出は、上記の方法に限られず、他の方法であってもよい。
【０１５６】
また、本実施の形態に係る映像信号処理装置１００は、第１処理部１２０と第２処理部１３０とを用いて、左眼用映像データと右眼用映像データとを並列処理する構成について説明したが、２つの処理部のうちいずれか１つの処理部のみを備えていてもよい。例えば、入力選択部１１０は、左眼用映像データと右眼用映像データとの両方を第１処理部１２０に入力してもよい。
【０１５７】
第１処理部１２０が備える各処理部は、左眼用映像データと右眼用映像データとをそれぞれシーケンシャルに処理する。例えば、左眼用映像データを処理した後で、右眼用映像データを処理する（あるいは、逆でもよい）。このとき、左眼用映像データから取得されたフィルム情報及びＩＰ変換情報は、メモリなどに格納しておけばよい。
【０１５８】
また、本実施の形態では、左眼用画像にフィルム検出を行ったが、右眼用画像にフィルム検出を行い、検出結果を左眼用画像と右眼用画像との両方に利用してもよい。
【０１５９】
以上のように、実施の形態１に係る映像信号処理装置１００は、左眼用画像及び右眼用画像の一方から、ＩＰ変換などの所定の処理を行う際に用いられる情報を取得する情報取得部の一例であるフィルム検出部３１０を備える。また、映像信号処理装置１００は、情報取得部の一例であるフィルム検出部３１０によって取得された情報を用いて、左眼用画像及び右眼用画像の両方に、ＩＰ変換又はフレームレートの変換を行う画像処理部の一例であるＩＰ変換部３２０及び変換処理部１３２を備える。
【０１６０】
この構成により、実施の形態１に係る映像信号処理装置１００によれば、上記情報を取得するための処理の一例であるフィルム検出を左眼用画像及び右眼用画像の一方のみに行えばよく、処理の重複を避けることができる。したがって、処理量の増大を抑制することができる。
【０１６１】
（実施の形態２）
実施の形態２に係る映像信号処理装置は、実施の形態１と同様に、左眼用画像及び右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記処理を行う画像処理部とを備えることを特徴とする。より具体的には、実施の形態２では、情報取得部は、左眼用画像及び右眼用画像の一方に、輝度値が一定の特定画像が含まれているか否かを検出することで、特定画像が含まれている領域を示す特定画像情報を取得する。
【０１６２】
なお、以下では、実施の形態１と重複する説明は省略し、実施の形態１との相違点を中心に説明する。
【０１６３】
実施の形態２に係る映像信号処理装置は、実施の形態１の図３に示す映像信号処理装置１００とほぼ同じであり、入力選択部１１０の代わりに入力選択部４１０を備える点が異なっている。以下では、まず、実施の形態２に係る映像信号処理装置が備える入力選択部４１０の構成について説明する。
【０１６４】
図１０Ａ及び図１０Ｂは、実施の形態２に係る映像信号処理装置が備える入力選択部４１０の構成の一例を示すブロック図である。図１０Ａに示すように、入力選択部４１０は、分割部４１１と、特定画像検出部４１２と、ＡＰＬ算出部４１３及び４１４とを備える。
【０１６５】
分割部４１１は、入力三次元映像信号を左眼用画像と右眼用画像とに分割する。左眼用画像は特定画像検出部４１２に出力され、右眼用画像はＡＰＬ算出部４１４に出力される。なお、左眼用画像がＡＰＬ算出部４１４に出力され、右眼用画像が特定画像検出部４１２に出力されてもよい。
【０１６６】
また、入力三次元映像信号が予め左眼用画像と右眼用画像とに分割されている場合は、入力選択部４１０は、分割部４１１を備えていなくてもよい。この場合は、直接、左眼用画像が特定画像検出部４１２に入力され、右眼用画像がＡＰＬ算出部４１４に入力される。
【０１６７】
特定画像検出部４１２は、本発明に係る情報取得部の一例であり、左眼用画像及び右眼用画像の一方に輝度値が一定の特定画像が含まれているか否かを検出することで、当該特定画像が含まれている領域を示す特定画像情報を取得する。ここでは、左眼用画像が入力されるので、特定画像検出部４１２は、左眼用画像に特定画像が含まれているか否かを検出する。具体的には、特定画像検出部４１２は、サイドパネル検出及びレターボックス検出を行う。
【０１６８】
図１０Ａに示すように、特定画像検出部４１２は、サイドパネル検出部４１２ａと、レターボックス検出部４１２ｂとを備える。
【０１６９】
サイドパネル検出部４１２ａは、左眼用画像及び右眼用画像の一方について、画像の左側と右側とに特定画像が含まれているか否かを検出する（サイドパネル検出又はピラーボックス検出）。ここでは、左眼用画像が入力されるので、サイドパネル検出部４１２ａは、左眼用画像の左側と右側とに特定画像が含まれているか否かを検出する。なお、特定画像は、輝度値が一定の画像であり、例えば、黒色の画像である。
【０１７０】
サイドパネル検出部４１２ａは、サイドパネル検出を行うことで、特定画像が含まれている領域を示す特定画像情報を取得する。特定画像情報は、例えば、特定画像が含まれている領域が、画像の左側又は右側から何画素分であるかを示す情報である。
【０１７１】
レターボックス検出部４１２ｂは、左眼用画像及び右眼用画像の一方について、画像の上側と下側とに特定画像が含まれているか否かを検出する（レターボックス検出）。ここでは、左眼用画像が入力されるので、レターボックス検出部４１２ｂは、左眼用画像の上側と下側とに特定画像が含まれているか否かを検出する。
【０１７２】
レターボックス検出部４１２ｂは、レターボックス検出を行うことで、特定画像が含まれている領域を示す特定画像情報を取得する。特定画像情報は、例えば、特定画像が含まれている領域が、画像の上側又は下側から何画素分であるかを示す情報である。
【０１７３】
なお、特定画像検出部４１２は、サイドパネル検出とレターボックス検出とのいずれか一方のみを行ってもよい。両方の検出を行った場合は、特定画像検出部４１２は、サイドパネル検出部４１２ａによって取得された特定画像情報と、レターボックス検出部４１２ｂによって取得された特定画像情報とを合わせて、特定画像が含まれた領域を示す特定画像情報としてＡＰＬ算出部４１３及び４１４へ出力する。
【０１７４】
ＡＰＬ算出部４１３及び４１４は、本発明に係る画像処理部の一例であり、左眼用画像及び右眼用画像の両方について、特定画像情報が示す領域以外の有効画像領域の平均輝度値（Ａｖｅｒａｇｅ Ｐｉｃｔｕｒｅ Ｌｅｖｅｌ）を算出する。具体的には、ＡＰＬ算出部４１３は、左眼用画像のうち、特定画像情報が示す領域以外の有効画像領域の平均輝度値を算出する。また、ＡＰＬ算出部４１４は、右眼用画像のうち、特定画像情報が示す領域以外の有効画像領域の平均輝度値を算出する。なお、有効画像領域は、本来の画像が表示されている領域である。
【０１７５】
ここで、特定画像の例について説明する。
【０１７６】
図１１Ａは、サイドパネル画像５００の一例を示す図である。図１１Ｂは、レターボックス画像６００の一例を示す図である。
【０１７７】
サイドパネル画像５００は、本来の画像５１０の左側と右側とに特定画像５２０がそれぞれ付加されている。具体的には、アスペクト比が１６：９の画面にアスペクト比が４：３の本来の画像５１０を表示させるときに、特定画像５２０が本来の画像５１０に付加される。なお、サイドパネルは、ピラーボックスともいう。
【０１７８】
サイドパネル検出部４１２ａは、図１１Ａに示すような特定画像５２０が本来の画像５１０に付加されているか否かを検出する。例えば、サイドパネル検出部４１２ａは、入力された左眼用画像の左側の領域（数画素列分の領域）と右側の領域（数画素列分の領域）との双方に含まれる画素の輝度値が全て同じ所定の値（黒色）であるか否かを判定する。
【０１７９】
左側の領域と右側の領域とに含まれる画素の輝度値が全て同じ所定の値（黒色）であると判定した場合、サイドパネル検出部４１２ａは、入力された左眼用画像はサイドパネル画像５００であると判定する。そして、サイドパネル検出部４１２ａは、特定画像５２０の領域を示す特定画像情報をＡＰＬ算出部４１３に出力する。ＡＰＬ算出部４１３は、サイドパネル画像５００のうち特定画像５２０を除く領域（有効画像領域）、すなわち、本来の画像５１０の平均輝度値を算出する。
【０１８０】
サイドパネル画像５００の平均輝度値を算出した場合、輝度値が一定の特定画像５２０を含んだ平均輝度値が算出されてしまう。つまり、本来の画像５１０の平均輝度値とは異なる値が算出される。したがって、平均輝度値を用いて画像を補正する場合など、平均輝度値が異なっているので、正しく画像を補正することができなくなる。これに対して、本実施の形態では、サイドパネル検出を行い、特定画像の領域を特定することで、正確な補正処理などを行うことができる。
【０１８１】
レターボックス画像６００は、本来の画像６１０の上側と下側とに特定画像６２０がそれぞれ付加されている。具体的には、アスペクト比が４：３の画面にアスペクト比が１６：９の本来の画像６１０を表示させるときに、特定画像６２０が本来の画像６１０に付加される。
【０１８２】
レターボックス検出部４１２ｂは、図１１Ｂに示すような特定画像６２０が本来の画像６１０に付加されているか否かを検出する。例えば、レターボックス検出部４１２ｂは、入力された右眼用画像の上側の領域（数画素行分の領域）と下側の領域（数画素行分の領域）との双方に含まれる画素の輝度値が全て同じ所定の値（黒色）であるか否かを判定する。
【０１８３】
上側の領域と下側の領域とに含まれる画素の輝度値が全て同じ所定の値（黒色）であると判定した場合、レターボックス検出部４１２ｂは、入力された右眼用画像はレターボックス画像６００であると判定する。そして、レターボックス検出部４１２ｂは、特定画像５２０の領域を示す特定画像情報をＡＰＬ算出部４１３に出力する。ＡＰＬ算出部４１３は、レターボックス画像６００のうち特定画像６２０を除く領域（有効画像領域）、すなわち、本来の画像６１０の平均輝度値を算出する。これにより、サイドパネル検出と同様に、レターボックス検出を行い、特定画像の領域を特定することで、正確な補正処理などを行うことができる。
【０１８４】
なお、上記のアスペクト比は一例であって、他のアスペクト比の場合であっても同様である。
【０１８５】
以上のようにして左眼用画像から検出された特定画像情報を用いて、ＡＰＬ算出部４１４は、右眼用画像の平均輝度値を算出する。左眼用画像と右眼用画像とでは、通常、一方のみに特定画像が含まれている場合はなく、また、異なる領域に特定画像が含まれている場合もない。したがって、左眼用画像から検出された特定画像情報と、右眼用画像から検出した特定画像情報とはおおよそ一致する。
【０１８６】
このため、厳密な結果を必要としない場合は、左眼用画像と右眼用画像との両方から特定画像情報を取得する処理は冗長であり、本実施の形態のように、いずれか一方のみから特定画像情報を取得することで、処理量の増大を抑制することができる。なお、厳密な結果を必要とする場合は、サイドパネル検出部４１２ａ及びレターボックス検出部４１２ｂは、左眼用画像と右眼用画像とのそれぞれに、サイドパネル検出及びレターボックス検出を行えばよい。
【０１８７】
なお、図１０Ｂに示すように、入力選択部４１０は、ＡＰＬ算出部４１４を備えていなくてもよい。つまり、ＡＰＬ算出部４１３によって、左眼用画像から算出された平均輝度値を、右眼用画像の平均輝度値として利用してもよい。なぜなら、左眼用画像の平均輝度値と右眼用画像の平均輝度値とも同じ値になることが多いためである。なお、このときのＡＰＬ算出部４１３は、本発明に係る情報取得部の一例である。
【０１８８】
続いて、実施の形態２に係る映像信号処理装置の動作のうち、入力選択部４１０の動作について、図１２を用いて説明する。なお、実施の形態２に係る映像信号処理装置の動作は、実施の形態１に係る映像信号処理装置１００の動作（図４参照）とほぼ同じであり、入力選択部１１０の動作（Ｓ１１０）が異なっている。
【０１８９】
図１２は、実施の形態２に係る映像信号処理装置が備える入力選択部４１０の動作の一例を示すフローチャートである。図１２は、図４に示す入力選択部１１０の動作（Ｓ１１０）に相当する。
【０１９０】
まず、分割部４１１が、入力三次元映像信号を左眼用画像と右眼用画像とに分割する（Ｓ２１０）。左眼用画像は、特定画像検出部４１２に出力され、右眼用画像はＡＰＬ算出部４１４に出力される。
【０１９１】
次に、特定画像検出部４１２は、左眼用画像にサイドパネル検出とレターボックス検出とを行う（Ｓ２２０）。なお、サイドパネル検出とレターボックス検出とはいずれか一方のみが実行されてもよい。例えば、サイドパネル検出により特定画像が検出された場合は、レターボックス検出を行わなくてもよい。逆に、レターボックス検出により特定画像が検出された場合は、サイドパネル検出を行わなくてもよい。検出結果である特定画像情報は、ＡＰＬ算出部４１３とＡＰＬ算出部４１４との両方に出力される。
【０１９２】
次に、ＡＰＬ算出部４１３は、特定画像情報を用いて、左眼用画像の平均輝度値を算出し、ＡＰＬ算出部４１４は、特定画像情報を用いて、右眼用画像の平均輝度値を算出する（Ｓ２３０）。
【０１９３】
以上のように、実施の形態２に係る映像信号処理装置では、入力選択部４１０において、左眼用画像にサイドパネル検出及びレターボックス検出を行うことで、特定画像を検出し、検出した結果を用いて左眼用画像と右眼用画像との両方について、平均輝度値の算出を行う。
【０１９４】
これにより、実施の形態２に係る映像信号処理装置によれば、左眼用画像と右眼用画像とのいずれか一方のみから特定画像情報を取得することで、処理量の増大を抑制することができる。
【０１９５】
なお、実施の形態２では、入力選択部４１０がサイドパネル検出及びレターボックス検出を行ったが、実施の形態１と同様に、これらの検出を、変換処理部１２２が左眼用画像に行ってもよい。そして、変換処理部１２２は、得られた検出結果を変換処理部１３２に出力してもよい。
【０１９６】
また、平均輝度値の算出についても同様に、入力選択部４１０ではなく変換処理部１２２及び１３２が行ってもよい。あるいは、図示していない他の処理部によって実行してもよい。
【０１９７】
以上のように、本発明に係る映像信号処理装置は、左眼用画像と右眼用画像とを含む三次元映像信号処理装置であって、左眼用画像及び右眼用画像のいずれか一方から取得した情報を用いて、所定の処理を左眼用画像及び右眼用画像の両方に行う。これは、左眼用画像と右眼用画像とは通常、同じ被写体を異なる視点から撮影することにより得られた画像であって、互いに共通する点が多いことを利用する。
【０１９８】
例えば、上述のようにフィルム検出結果、サイドパネル検出結果、及びレターボックス検出結果などが、左眼用画像と右眼用画像とで共通する。したがって、共通の結果が得られる処理についてはいずれか一方にのみ行うことで、処理の重複を避けることができ、処理量の増大を抑制することができる。
【０１９９】
また、通常同じ結果が得られるはずのところ、異なる結果が得られた場合は、左眼用画像と右眼用画像とを合成する際に不自然な画像が生成されてしまう可能性がある。本発明に係る映像信号処理装置では、共通の結果を用いているため、このような不自然な画像の生成を防止することができる。
【０２００】
以上、映像信号処理装置及び映像信号処理方法について、実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を当該実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の範囲内に含まれる。
【０２０１】
例えば、左眼用画像及び右眼用画像の一方にＣＭ検出を行ってもよい。ＣＭ検出は、入力された左眼用画像又は右眼用画像が、映像に含まれる広告情報などのＣＭであるか、映画などのコンテンツであるかを判定する処理である。同一の表示時刻における左眼用画像と右眼用画像とのいずれか一方のみがＣＭであるということは通常ありえないため、ＣＭ検出結果も左眼用画像と右眼用画像とで同じである。
【０２０２】
したがって、左眼用画像と右眼用画像とのいずれか一方にＣＭ検出を行い、得られた結果を左眼用画像と右眼用画像との両方のＣＭ検出結果として用いることができる。なお、例えば、入力選択部１１０又は４１０がＣＭ検出を行う。例えば、画像がＣＭであることを示す識別子を検出する、あるいは、ＣＭとコンテンツとで解像度の違いを検出することで、入力された左眼用画像又は右眼用画像がＣＭであるか否かを判定する。
【０２０３】
左眼用画像がＣＭであると判定された場合は、例えば、第１水平リサイズ部１２１及び１３１が、左眼用画像及び右眼用画像を高い縮小率で縮小することで、以降の処理量を低減することができる。
【０２０４】
また、入力された三次元映像信号を符号化する場合に備えて、左眼用画像を含む左眼用映像データと、右眼用画像を含む右眼用映像データとの一方から動きを検出してもよい。また、同様にフレーム又はフィールドの参照関係を決定してもよい。これらの処理は、例えば、入力選択部１１０若しくは４１０、変換処理部１２２若しくは１３２、又は、他の処理部が行う。
【０２０５】
なお、本発明に係る映像信号処理装置１００は、図１３に示すようなデジタルビデオレコーダ２０及びデジタルテレビ３０に搭載される。
【０２０６】
なお、本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されないのは言うまでもない。以下のような場合も本発明の範囲に含まれる。
【０２０７】
上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。ＲＡＭ又はハードディスクユニットには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。
【０２０８】
上記の各装置を構成する構成要素の一部又は全部は、１個のシステムＬＳＩから構成されているとしてもよい。システムＬＳＩは、複数の構成要素を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。ＲＡＭには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、システムＬＳＩは、その機能を達成する。
【０２０９】
上記の各装置を構成する構成要素の一部又は全部は、各装置に脱着可能なＩＣカード又は単体のモジュールから構成されているとしてもよい。ＩＣカード又はモジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。ＩＣカード又はモジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、ＩＣカード又はモジュールは、その機能を達成する。このＩＣカード又はモジュールは、耐タンパ性を有するとしてもよい。
【０２１０】
また、本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、コンピュータプログラムからなるデジタル信号であるとしてもよい。
【０２１１】
また、本発明は、コンピュータプログラム又はデジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ Ｄｉｓｋ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ、半導体メモリなどに記録したものとしてもよい。また、これらの記録媒体に記録されているデジタル信号であるとしてもよい。
【０２１２】
また、本発明は、コンピュータプログラム又はデジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送などを経由して伝送するものとしてもよい。
【０２１３】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、メモリは、上記コンピュータプログラムを記憶しており、マイクロプロセッサは、コンピュータプログラムに従って動作するとしてもよい。
【０２１４】
また、プログラム又はデジタル信号を記録媒体に記録して移送することにより、あるいはプログラム又はデジタル信号を、ネットワークなどを経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
【産業上の利用可能性】
【０２１５】
本発明に係る映像信号処理装置及び映像信号処理方法は、処理量の増大を抑制することができるという効果を奏し、例えば、デジタルテレビ及びデジタルビデオレコーダなどに適用することができる。
【符号の説明】
【０２１６】
１０ 映像信号処理システム
２０ デジタルビデオレコーダ
２１、３１ 入力部
２２、３２ デコーダ
２３、３３ ＨＤＭＩ通信部
３０ デジタルテレビ
３４ 表示パネル
３５ トランスミッタ
４０ シャッタメガネ
４１ ＨＤＭＩケーブル
４２ 記録媒体
４３ 放送波
５１、５４ 三次元映像信号
５２、５５、５６ 入力三次元映像信号
５３、５７、５８ 出力三次元映像信号
５７Ｌ、５８Ｌ、２１０Ｌ、２２０Ｌ、２３０Ｌ、２４０Ｌ、２５０Ｌ 左眼用画像
５７Ｒ、５８Ｒ、２１０Ｒ、２２０Ｒ、２３０Ｒ、２４０Ｒ、２５０Ｒ 右眼用画像
１００ 映像信号処理装置
１１０、４１０ 入力選択部
１２０ 第１処理部
１２１、１３１ 第１水平リサイズ部
１２２、１３２ 変換処理部
１２３、１３３ 垂直リサイズ部
１２４、１３４ 第２水平リサイズ部
１３０ 第２処理部
１４０ 合成部
２１０Ｌｂ、２２０Ｌｂ 左眼用ボトムフィールド
２１０Ｌｔ、２２０Ｌｔ 左眼用トップフィールド
２１０Ｒｂ、２２０Ｒｂ 右眼用ボトムフィールド
２１０Ｒｔ、２２０Ｒｔ 右眼用トップフィールド
２６０ 合成画像
３１０ フィルム検出部
３２０ ＩＰ変換部
４１１ 分割部
４１２ 特定画像検出部
４１２ａ サイドパネル検出部
４１２ｂ レターボックス検出部
４１３、４１４ ＡＰＬ算出部
５００ サイドパネル画像
５１０、６１０ 本来の画像
５２０、６２０ 特定画像
６００ レターボックス画像
【技術分野】
【０００１】
本発明は、映像信号処理装置に関し、特に、三次元映像信号を処理する映像信号処理装置に関する。
【背景技術】
【０００２】
従来、視聴者が立体的に感じる三次元映像を表示するために、左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置が知られている（例えば、特許文献１参照）。左眼用画像と右眼用画像とは、互いに視差を有しており、例えば、異なる位置に配置された２台のカメラによって生成される画像である。
【０００３】
映像信号処理装置は、例えば、入力された三次元映像信号にフォーマット変換処理を行う。フォーマット変換処理は、例えば、フレームレートの変換処理、画像サイズの変換処理、及び走査方式への変換処理などである。映像信号処理装置は、フォーマット変換処理を行った三次元映像信号を三次元映像表示装置に出力する。
【０００４】
三次元映像表示装置は、左眼用画像と右眼用画像とを所定の方式で表示させることで、視聴者が立体的に感じる三次元映像を表示する。例えば、三次元映像表示装置は、左眼用画像と右眼用画像とを１フレーム毎に交互に表示する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平４−２４１５９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記従来技術には、三次元映像信号の処理に関わる処理量が増大するという課題がある。
【０００７】
三次元映像を二次元映像と同等の画質及び同等のフレームレートで表示させるためには、二次元映像の２倍の処理が必要である。なぜなら、三次元映像では、１フレームの三次元画像は左眼用画像と右眼用画像との２つの二次元画像から構成されているためである。したがって、映像信号処理装置は、２つの二次元画像を処理しなければならず、処理量が増大してしまう。
【０００８】
そこで、本発明は、上記課題を解決するためになされたものであって、処理量の増大を抑制することができる映像信号処理装置及び映像信号処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するため、本発明に係る映像信号処理装置は、左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置であって、前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理部とを備える。
【００１０】
これにより、左眼用画像及び右眼用画像のいずれか一方から取得した情報を、左眼用画像及び右眼用画像の両方の処理に利用することで、処理の重複を避けることができ、処理量の増大を抑制することができる。これは、左眼用画像と右眼用画像とは通常、同一の被写体を異なる視点から撮影して得られた画像であるので、左眼用画像及び右眼用画像のそれぞれに対して所定の処理を行った場合、処理の結果が同じになることが多いためである。
【００１１】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方にフィルム検出を行うことで、前記三次元映像信号がフィルム映像から生成された映像信号であるか否かを示すフィルム情報を取得してもよい。
【００１２】
これにより、フィルム検出の結果を左眼用画像と右眼用画像とで共用することができる。フィルム検出は、画像の特徴検出処理の一例であり、三次元映像信号がフィルム映像から生成された映像信号であるか否かを検出する処理である。フィルム検出を行うことで、左眼用画像と右眼用画像とでは通常、同一の検出結果が得られる。したがって、フィルム検出の結果を共用することで、処理の重複を避けることができ、処理量の増大を抑制することができる。
【００１３】
また、前記情報取得部は、さらに、前記三次元映像信号がフィルム映像から生成された映像信号である場合に、前記フィルム映像に含まれる複数のフレームのうちの同一のフレームから生成されたピクチャを示すピクチャ情報を取得し、前記画像処理部は、前記三次元映像信号がフィルム映像から生成された映像信号であることを前記フィルム情報が示す場合に、前記所定の処理として、前記左眼用画像及び前記右眼用画像の両方にそれぞれ、前記ピクチャ情報を用いて、走査方式の変換及びフレームレートの変換の少なくとも一方を行ってもよい。
【００１４】
これにより、フィルム映像を元に生成された映像信号に、走査方式の変換又はフレームレートの変換を行う際に、処理量の増大を抑制することができる。
【００１５】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方に輝度値が一定の特定画像が含まれているか否かを検出することで、当該特定画像が含まれている領域を示す特定画像情報を取得してもよい。
【００１６】
これにより、特定画像の検出結果を左眼用画像と右眼用画像とで共用することができる。特定画像は、例えば、輝度値が一定の画像であり、アスペクト比の調整などを目的として本来の画像に付加される画像である。左眼用画像と右眼用画像とで通常同じ領域に付加されるので、左眼用画像及び右眼用画像のいずれか一方から特定画像を検出すればよく、処理の重複を避けることができる。
【００１７】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の左側と右側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得してもよい。
【００１８】
これにより、いわゆるサイドパネル（ピラーボックス）を検出することができる。
【００１９】
また、前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の上側と下側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得してもよい。
【００２０】
これにより、いわゆるレターボックスを検出することができる。
【００２１】
また、前記画像処理部は、前記左眼用画像及び前記右眼用画像の両方について、前記特定画像情報が示す領域以外の有効画像領域の平均輝度値をそれぞれ算出してもよい。
【００２２】
これにより、特定画像の領域以外の有効画像領域の平均輝度値を算出することで、本来の画像の平均輝度値を算出することができる。これは、検出した特定画像は本来の画像ではないので、画像の全領域の平均輝度値を算出した場合、本来の画像の平均輝度値と異なる値が算出されてしまうためである。
【００２３】
また、前記映像信号処理装置は、さらに、前記三次元映像信号を前記左眼用画像と前記右眼用画像とに分割する分割部を備え、前記画像処理部は、前記左眼用画像に前記所定の処理を行う左眼用画像処理部と、前記右眼用画像に前記所定の処理を行う右眼用画像処理部とを有し、前記情報取得部は、前記分割部によって分割された前記左眼用画像及び前記右眼用画像の一方から前記情報を取得し、取得した情報を前記左眼用画像処理部と前記右眼用画像処理部とに出力してもよい。
【００２４】
これにより、左眼用画像と右眼用画像とを並列処理で処理することが可能になるので、処理速度を向上させることができる。
【００２５】
なお、本発明は、上記に示す映像信号処理装置として実現できるだけではなく、当該映像信号処理装置を構成する処理部をステップとする方法として実現することもできる。また、これらステップをコンピュータに実行させるプログラムとして実現してもよい。さらに、当該プログラムを記録したコンピュータ読み取り可能なＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの記録媒体、並びに、当該プログラムを示す情報、データ又は信号として実現してもよい。そして、それらプログラム、情報、データ及び信号は、インターネットなどの通信ネットワークを介して配信してもよい。
【００２６】
また、上記の各映像信号処理装置を構成する構成要素の一部又は全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されていてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などを含んで構成されるコンピュータシステムである。
【発明の効果】
【００２７】
本発明に係る映像信号処理装置及び映像信号処理方法によれば、処理量の増大を抑制することができる。
【図面の簡単な説明】
【００２８】
【図１】実施の形態１に係る映像信号処理装置を含む映像信号処理システムの構成を示すブロック図である。
【図２Ａ】実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【図２Ｂ】実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【図３】実施の形態１に係る映像信号処理装置の構成を示すブロック図である。
【図４】実施の形態１に係る映像信号処理装置の動作の一例を示すフローチャートである。
【図５】実施の形態１に係る映像信号処理装置による三次元映像信号の流れの一例を示す図である。
【図６】実施の形態１に係る変換処理部の構成の一例を示すブロック図である。
【図７】実施の形態１に係る変換処理部の動作の一例を示すフローチャートである。
【図８】フィルム映像と入力三次元映像信号との一例を示す図である。
【図９】実施の形態１に係るＩＰ変換部による、６０ｉの映像を６０ｐの映像にＩＰ変換する際の処理例を示す図である。
【図１０Ａ】実施の形態２に係る入力選択部の構成の一例を示すブロック図である。
【図１０Ｂ】実施の形態２に係る入力選択部の構成の別の一例を示すブロック図である。
【図１１Ａ】サイドパネル画像の一例を示す図である。
【図１１Ｂ】レターボックス画像の一例を示す図である。
【図１２】実施の形態２に係る入力選択部の動作の一例を示す図である。
【図１３】本発明に係る映像信号処理装置を備えるデジタルビデオレコーダ及びデジタルテレビの一例を示す外観図である。
【発明を実施するための形態】
【００２９】
以下では、本発明に係る映像信号処理装置及び映像信号処理方法について、実施の形態に基づいて図面を参照しながら詳細に説明する。
【００３０】
（実施の形態１）
実施の形態１に係る映像信号処理装置は、左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置であって、左眼用画像及び右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、情報取得部によって取得された情報を用いて、左眼用画像及び右眼用画像の両方に上記所定の処理を行う画像処理部とを備えることを特徴とする。より具体的には、本実施の形態では、情報取得部は、画像特徴量検出処理の一例であるフィルム検出を行い、その検出結果を用いて、左眼用画像を含む左眼用映像データと右眼用画像を含む右眼用映像データとの両方にそれぞれ走査方式の変換又はフレームレートの変換を行う。
【００３１】
まず、実施の形態１に係る映像信号処理装置を含む映像信号処理システムの構成について説明する。
【００３２】
図１は、実施の形態１に係る映像信号処理装置１００を含む映像信号処理システム１０の構成を示すブロック図である。
【００３３】
図１に示す映像信号処理システム１０は、デジタルビデオレコーダ２０と、デジタルテレビ３０と、シャッタメガネ４０とを備える。また、デジタルビデオレコーダ２０とデジタルテレビ３０とは、ＨＤＭＩ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ケーブル４１によって接続されている。
【００３４】
デジタルビデオレコーダ２０は、記録媒体４２に記録されている三次元映像信号のフォーマットを変換し、変換した三次元映像信号を、ＨＤＭＩケーブル４１を介してデジタルテレビ３０に出力する。なお、記録媒体４２は、例えば、ＢＤ（Ｂｌｕ−ｒａｙ Ｄｉｓｃ）などの光ディスク、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの磁気ディスク、又は、不揮発性メモリなどである。
【００３５】
デジタルテレビ３０は、デジタルビデオレコーダ２０からＨＤＭＩケーブル４１を介して入力される三次元映像信号、又は、放送波４３に含まれる三次元映像信号のフォーマットを変換し、変換した三次元映像信号に含まれる三次元映像を表示する。なお、放送波４３は、例えば、地上デジタルテレビ放送、及び衛星デジタルテレビ放送などである。
【００３６】
シャッタメガネ４０は、三次元映像を見るために視聴者が装着するメガネであって、例えば、液晶シャッタメガネである。シャッタメガネ４０は、左眼用液晶シャッタと右眼用液晶シャッタとを備え、デジタルテレビ３０が表示する映像と同期してシャッタの開閉を制御することができる。
【００３７】
なお、デジタルビデオレコーダ２０は、放送波４３に含まれる三次元映像信号、又は、インターネットなどの通信網を介して取得した三次元映像信号のフォーマットを変換してもよい。また、デジタルビデオレコーダ２０は、外部の装置から外部入力端子（図示せず）を介して入力された三次元映像信号のフォーマットを変換してもよい。
【００３８】
同様に、デジタルテレビ３０は、記録媒体４２に記録されている三次元映像信号のフォーマットを変換してもよい。また、デジタルテレビ３０は、デジタルビデオレコーダ２０以外の外部の装置から、外部入力端子（図示せず）を介して入力された三次元映像信号のフォーマットを変換してもよい。
【００３９】
また、デジタルビデオレコーダ２０とデジタルテレビ３０とは、ＨＤＭＩケーブル４１以外の規格のケーブルによって接続されていてもよく、あるいは、無線通信網により接続されていてもよい。
【００４０】
以下では、デジタルビデオレコーダ２０、及びデジタルテレビ３０の詳細な構成について説明する。まず、デジタルビデオレコーダ２０について説明する。
【００４１】
図１に示すように、デジタルビデオレコーダ２０は、入力部２１と、デコーダ２２と、映像信号処理装置１００と、ＨＤＭＩ通信部２３とを備える。
【００４２】
入力部２１は、記録媒体４２に記録されている三次元映像信号５１を取得する。三次元映像信号５１は、例えば、ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４などの規格に基づいて圧縮符号化された符号化三次元映像を含んでいる。
【００４３】
デコーダ２２は、入力部２１によって取得された三次元映像信号５１を復号することで、入力三次元映像信号５２を生成する。
【００４４】
映像信号処理装置１００は、デコーダ２２によって生成された入力三次元映像信号５２を処理することで、出力三次元映像信号５３を生成する。映像信号処理装置１００の詳細な構成及び動作については、後で説明する。
【００４５】
ＨＤＭＩ通信部２３は、映像信号処理装置１００によって生成された出力三次元映像信号５３を、ＨＤＭＩケーブル４１を介してデジタルテレビ３０に出力する。
【００４６】
なお、デジタルビデオレコーダ２０は、生成した出力三次元映像信号を、当該デジタルビデオレコーダ２０が備える記憶部（ＨＤＤ及び不揮発性メモリなど）に記憶してもよい。あるいは、当該デジタルビデオレコーダ２０に着脱可能な記録媒体（光ディスクなど）に記録してもよい。
【００４７】
また、デジタルビデオレコーダ２０は、ＨＤＭＩケーブル４１以外の手段によってデジタルテレビ３０と接続されている場合は、ＨＤＭＩ通信部２３の代わりに、当該手段に対応した通信部を備えていてもよい。例えば、デジタルビデオレコーダ２０は、接続手段が無線通信網である場合は無線通信部を、接続手段が他の規格に従ったケーブルである場合は、当該規格に対応する通信部を備える。なお、デジタルビデオレコーダ２０は、これら複数の通信部を備え、複数の通信部を切り替えて利用してもよい。
【００４８】
続いて、デジタルテレビ３０について説明する。
【００４９】
図１に示すように、デジタルテレビ３０は、入力部３１と、デコーダ３２と、ＨＤＭＩ通信部３３と、映像信号処理装置１００と、表示パネル３４と、トランスミッタ３５とを備える。
【００５０】
入力部３１は、放送波４３に含まれる三次元映像信号５４を取得する。三次元映像信号５４は、例えば、ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４などの規格に基づいて圧縮符号化された符号化三次元映像を含んでいる。
【００５１】
デコーダ３２は、入力部３１によって取得された三次元映像信号５４を復号することで、入力三次元映像信号５５を生成する。
【００５２】
ＨＤＭＩ通信部３３は、デジタルビデオレコーダ２０のＨＤＭＩ通信部２３から出力された出力三次元映像信号５３を取得し、入力三次元映像信号５６として映像信号処理装置１００に出力する。
【００５３】
映像信号処理装置１００は、入力三次元映像信号５５及び５６を処理することで、出力三次元映像信号５７を生成する。映像信号処理装置１００の詳細な構成及び動作については、後で説明する。
【００５４】
表示パネル３４は、出力三次元映像信号５７に含まれる三次元映像を表示する。
【００５５】
トランスミッタ３５は、無線通信を用いて、シャッタメガネ４０のシャッタの開閉を制御する。
【００５６】
なお、デジタルテレビ３０は、デジタルビデオレコーダ２０と同様に、ＨＤＭＩケーブル４１以外の手段によってデジタルビデオレコーダ２０と接続されている場合は、ＨＤＭＩ通信部３３の代わりに、当該手段に対応した通信部を備えていてもよい。
【００５７】
ここで、表示パネル３４が表示する三次元映像について説明し、表示パネル３４とシャッタメガネ４０との同期をとる方法について説明する。
【００５８】
三次元映像は、互いに視差を有する左眼用画像と右眼用画像とを含んでいる。左眼用画像が視聴者の左眼に、右眼用画像が視聴者の右眼にそれぞれ選択的に入射されることで、視聴者は、映像を立体的に感じることが可能となる。
【００５９】
デジタルテレビ３０が備える映像信号処理装置１００によって生成された出力三次元映像信号５７の一例を図２Ａに示す。なお、図２Ａは、実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【００６０】
図２Ａに示す出力三次元映像信号５７は、左眼用画像５７Ｌと右眼用画像５７Ｒとを１フレーム毎に交互に含んでいる。例えば、出力三次元映像信号５７のフレームレートは１２０ｆｐｓであり、走査方式はプログレッシブ方式である。なお、このような映像信号を１２０ｐの映像信号とも記載する。
【００６１】
表示パネル３４は、図２Ａに示す出力三次元映像信号５７を受け取り、１フレーム毎に左眼用画像５７Ｌと右眼用画像５７Ｒとを交互に表示する。このとき、トランスミッタ３５は、表示パネル３４が左眼用画像５７Ｌを表示している期間に、シャッタメガネ４０の左眼用液晶シャッタを開き、かつ、右眼用液晶シャッタを閉じるようにシャッタメガネ４０を制御する。また、トランスミッタ３５は、表示パネル３４が右眼用画像５７Ｒを表示している期間に、シャッタメガネ４０の右眼用液晶シャッタを開き、かつ、左眼用液晶シャッタを閉じるようにシャッタメガネ４０を制御する。これにより、視聴者の左眼には左眼用画像５７Ｌが、右眼には右眼用画像５７Ｒがそれぞれ選択的に入射される。
【００６２】
このように、表示パネル３４は、左眼用画像５７Ｌと右眼用画像５７Ｒとを時間的に切り替えて表示する。なお、図２Ａに示す例では、１フレーム毎に左眼用画像５７Ｌと右眼用画像５７Ｒとを切り替えたが、複数フレーム毎に切り替えてもよい。
【００６３】
なお、視聴者の左眼と右眼とにそれぞれ選択的に左眼用画像と右眼用画像とを入射させる方法は、上記の方法に限らず、他の方法を用いてもよい。
【００６４】
例えば、デジタルテレビ３０が備える映像信号処理装置１００は、図２Ｂに示すような出力三次元映像信号５８を生成してもよい。生成した出力三次元映像信号５８は、表示パネル３４に出力される。なお、図２Ｂは、実施の形態１に係る三次元映像信号の配置パターンの一例を示す図である。
【００６５】
例えば、図２Ｂに示す出力三次元映像信号５８は、左眼用画像５８Ｌと右眼用画像５８Ｒとを、１フレーム内の異なる領域に含んでいる。具体的には、左眼用画像５８Ｌと右眼用画像５８Ｒとが市松状に配置されている。例えば、出力三次元映像信号５８のフレームレートは６０ｆｐｓであり、走査方式はプログレッシブ方式である。なお、このような映像信号を６０ｐの映像信号とも記載する。
【００６６】
表示パネル３４は、図２Ｂに示す出力三次元映像信号５８を受け取り、左眼用画像５８Ｌと右眼用画像５８Ｒとが市松状に配置された画像を表示する。この場合、表示パネル３４は、左眼用画像５８Ｌが表示される画素上に形成された左眼用偏光フィルムと、右眼用画像５８Ｒが表示される画素上に形成された右眼用偏光フィルムとを備える。これにより、左眼用画像５８Ｌと右眼用画像５８Ｒとに互いに異なる偏光（直線偏光又は円偏光など）をかける。
【００６７】
さらに、視聴者は、シャッタメガネ４０の代わりに、表示パネル３４が備える偏光にそれぞれ対応する左眼用偏光フィルタと右眼用偏光フィルタとを備える偏光メガネを装着する。これにより、視聴者の左眼及び右眼にそれぞれ、左眼用画像５８Ｌと右眼用画像５８Ｒとを選択的に入射させることができる。
【００６８】
このように、表示パネル３４は、左眼用画像５８Ｌと右眼用画像５８Ｒとが１フレーム内に空間的に異なる領域に配置された映像を表示する。なお、図２Ｂに示す例では、１画素毎に左眼用画像５８Ｌと右眼用画像５８Ｒとを配置したが、複数の画素毎に左眼用画像５８Ｌと右眼用画像５８Ｒとを配置してもよい。また、市松状でなくてもよく、水平ライン毎、又は、垂直ライン毎に左眼用画像５８Ｌと右眼用画像５８Ｒとを配置してもよい。
【００６９】
以下では、実施の形態１に係る映像信号処理装置１００の詳細な構成及び動作について説明する。
【００７０】
実施の形態１に係る映像信号処理装置１００は、左眼用画像と右眼用画像とを含む三次元映像信号を処理する。具体的には、映像信号処理装置１００は、入力された三次元映像信号にフォーマット変換処理を行う。例えば、デジタルビデオレコーダ２０が備える映像信号処理装置１００は、第１フォーマットの入力三次元映像信号５２を第２フォーマットの出力三次元映像信号５３に変換する。
【００７１】
ここで、映像信号処理装置１００が行うフォーマット変換処理とは、配置パターン、フレームレート、走査方式、及び画像サイズの変換の少なくとも１つの処理である。なお、映像信号処理装置１００は、これら以外の処理を行ってもよい。
【００７２】
配置パターンの変換は、三次元映像信号に含まれる左眼用画像と右眼用画像との時間的な配置又は空間的な配置を変換することである。例えば、映像信号処理装置１００は、図２Ａに示す三次元映像信号を図２Ｂに示す三次元映像信号に変換する。
【００７３】
フレームレートの変換は、三次元映像信号のフレームレートを変換することである。例えば、映像信号処理装置１００は、フレーム補間、又はフレームのコピー処理を行うことで、低フレームレート（例えば、６０ｆｐｓ）の三次元映像信号を高フレームレート（例えば、１２０ｆｐｓ）の三次元映像信号に変換する。あるいは、映像信号処理装置１００は、フレームを間引くことで、又は、複数のフレームを時間的に平均化したフレームを生成することで、高フレームレートの三次元映像信号を低フレームレートの三次元映像信号に変換する。
【００７４】
走査方式の変換は、インターレース方式からプログレッシブ方式への変換、又は、プログレッシブ方式からインターレース方式への変換である。なお、インターレース方式とは、奇数番目のラインから構成されるトップフィールドと偶数番目のラインから構成されるボトムフィールドとにフレームを分けて走査する方式である。
【００７５】
画像サイズの変換は、画像の拡大及び縮小を行うことである。例えば、映像信号処理装置１００は、画素の補間又はコピーを行うことで画像を拡大する。あるいは、映像信号処理装置１００は、画素を間引くことで、又は、複数の画素の平均値を算出することで画像を縮小する。例えば、画像サイズには、ＶＧＡ（６４０×４８０）、ハイビジョン画像（１２８０×７２０）、及びフルハイビジョン画像（１９２０×１０８０）などがある。
【００７６】
図３は、実施の形態１に係る映像信号処理装置１００の構成を示すブロック図である。
【００７７】
図３に示す映像信号処理装置１００は、入力選択部１１０と、第１処理部１２０と、第２処理部１３０と、合成部１４０とを備える。
【００７８】
入力選択部１１０は、入力三次元映像信号を左眼用画像２１０Ｌと右眼用画像２１０Ｒとに分割し、左眼用画像２１０Ｌを第１処理部１２０へ出力し、右眼用画像２１０Ｒを第２処理部１３０へ出力する。具体的には、入力選択部１１０は、入力三次元映像信号を、左眼用画像と右眼用画像とのうち左眼用画像のみを含む左眼用映像データと、右眼用画像のみを含む右眼用映像データとに分割する。そして、入力選択部１１０は、左眼用映像データを第１処理部１２０へ出力し、右眼用映像データを第２処理部１３０へ出力する。なお、入力選択部１１０は、入力三次元映像信号を第１処理部１２０と第２処理部１３０とへそれぞれ出力し、第１処理部１２０が左眼用映像データを抽出し、第２処理部１３０が右眼用映像データを抽出してもよい。
【００７９】
第１処理部１２０は、入力選択部１１０から入力された左眼用映像データを処理する。具体的には、第１処理部１２０は、左眼用映像データのフォーマット変換を行う。このとき、第１処理部１２０は、左眼用映像データから、所定の処理を行う際に用いられる情報を取得し、取得した情報を第２処理部１３０へ出力する。例えば、第１処理部１２０は、入力された左眼用映像データに画像特徴検出処理を行うことで、特徴検出結果として所定の情報を取得する。画像特徴検出処理は、例えば、フィルム検出である。フィルム検出の詳細は後で説明する。
【００８０】
第２処理部１３０は、入力選択部１１０から入力された右眼用映像データを処理する。具体的には、第２処理部１３０は、右眼用映像データのフォーマット変換を行う。このとき、第２処理部１３０は、第１処理部１２０によって左眼用映像データから取得された情報を受け取る。そして、第２処理部１３０は、受け取った情報を利用して、右眼用映像データに所定の処理を行う。
【００８１】
合成部１４０は、第１処理部１２０によって生成された変換後の左眼用画像２５０Ｌと、第２処理部１３０によって生成された変換後の右眼用画像２５０Ｒとを合成することにより、合成画像２６０を生成する。生成された合成画像２６０を含む映像信号は、出力三次元映像信号として出力される。
【００８２】
第１処理部１２０の詳細な構成は、以下の通りである。
【００８３】
図３に示すように、第１処理部１２０は、第１水平リサイズ部１２１と、変換処理部１２２と、垂直リサイズ部１２３と、第２水平リサイズ部１２４とを備える。
【００８４】
第１水平リサイズ部１２１は、入力された左眼用画像２１０Ｌの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第１水平リサイズ部１２１は、画素を間引くことで、又は、複数の画素の平均値を算出することで、左眼用画像２１０Ｌを水平方向に縮小する。縮小後の左眼用画像２２０Ｌは、変換処理部１２２に出力される。
【００８５】
変換処理部１２２は、入力された縮小後の左眼用画像２２０ＬにＩＰ変換を行う。ＩＰ変換は、走査方式の変換の一例であり、縮小後の左眼用画像２２０Ｌの走査方式を、インターレース方式からプログレッシブ方式へ変換することである。ＩＰ変換後の左眼用画像２３０Ｌは、垂直リサイズ部１２３に出力される。
【００８６】
なお、変換処理部１２２は、所定の処理に用いられる情報を左眼用画像２２０Ｌから取得し、第２処理部１３０へ出力する。また、変換処理部１２２は、ノイズリダクション処理（ＮＲ処理）を行ってもよい。変換処理部１２２の詳細な構成及び動作については、後で図４を用いて説明する。また、上記の所定の処理及び当該処理に用いられる情報についても、後で説明する。
【００８７】
垂直リサイズ部１２３は、変換処理部１２２によってＩＰ変換された左眼用画像２３０Ｌの垂直方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。リサイズ後の左眼用画像２４０Ｌは、第２水平リサイズ部１２４に出力される。
【００８８】
第２水平リサイズ部１２４は、リサイズ後の左眼用画像２４０Ｌの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第２水平リサイズ部１２４は、画素を補間することで、又は、画素をコピーすることでリサイズ後の左眼用画像２４０Ｌを水平方向に拡大する。拡大後の左眼用画像２５０Ｌは、合成部１４０に出力される。
【００８９】
また、第２処理部１３０の詳細な構成は、以下の通りである。
【００９０】
図３に示すように、第２処理部１３０は、第１水平リサイズ部１３１と、変換処理部１３２と、垂直リサイズ部１３３と、第２水平リサイズ部１３４とを備える。
【００９１】
第１水平リサイズ部１３１は、入力された右眼用画像２１０Ｒの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第１水平リサイズ部１３１は、画素を間引くことで、又は、複数の画素の平均値を算出することで、右眼用画像２１０Ｒを水平方向に縮小する。縮小後の右眼用画像２２０Ｒは、変換処理部１３２に出力される。
【００９２】
変換処理部１３２は、入力された縮小後の右眼用画像２２０ＲにＩＰ変換を行う。ＩＰ変換は、縮小後の右眼用画像２２０Ｒの走査方式を、インターレース方式からプログレッシブ方式へ変換することである。ＩＰ変換後の右眼用画像２３０Ｒは、垂直リサイズ部１３３に出力される。
【００９３】
なお、変換処理部１３２は、第１処理部１２０の変換処理部１２２から所定の処理に用いられる情報を取得する。また、変換処理部１３２は、ノイズリダクション処理（ＮＲ処理）を行ってもよい。
【００９４】
垂直リサイズ部１３３は、変換処理部１３２によってＩＰ変換された右眼用画像２３０Ｒの垂直方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。リサイズ後の右眼用画像２４０Ｒは、第２水平リサイズ部１３４に出力される。
【００９５】
第２水平リサイズ部１３４は、リサイズ後の右眼用画像２４０Ｒの水平方向の画像サイズをリサイズ、すなわち、拡大又は縮小する。例えば、第２水平リサイズ部１３４は、画素を補間することで、又は、画素をコピーすることでリサイズ後の右眼用画像２４０Ｒを水平方向に拡大する。拡大後の右眼用画像２５０Ｒは、合成部１４０に出力される。
【００９６】
なお、入力選択部１１０は、左眼用画像２１０Ｌを第２処理部１３０へ出力し、右眼用画像２１０Ｒを第１処理部１２０へ出力してもよい。また、入力三次元映像信号として、左眼用画像のみを示す左眼用映像信号と右眼用画像のみを示す右眼用映像信号との２つの映像信号が入力された場合は、入力選択部１１０は、分割処理を行うことなく、左眼用映像信号を第１処理部１２０へ出力し、右眼用映像信号を第２処理部１３０へ出力してもよい。
【００９７】
以上のように、実施の形態１に係る映像信号処理装置１００は、左眼用画像及び右眼用画像のいずれか一方から情報を取得し、取得した情報を用いて左眼用画像及び右眼用画像の両方を処理する。
【００９８】
続いて、上記の映像信号処理装置１００が行う処理について、図４及び図５を用いて説明する。なお、図４は、実施の形態１に係る映像信号処理装置１００の動作の一例を示すフローチャートである。図５は、実施の形態１に係る映像信号処理装置１００による三次元映像信号の流れの一例を示す図である。
【００９９】
以下では、デジタルビデオレコーダ２０が備える映像信号処理装置１００の動作について説明する。なお、デジタルテレビ３０が備える映像信号処理装置１００の動作についても同様である。
【０１００】
まず、入力選択部１１０は、入力三次元映像信号５２を左眼用画像２１０Ｌと右眼用画像２１０Ｒとに分割する（Ｓ１１０）。なお、実施の形態１に係る入力三次元映像信号５２は、インターレース方式の映像信号であり、例えば、フルハイビジョンの映像である。
【０１０１】
したがって、図５に示すように、左眼用画像２１０Ｌは、左眼用トップフィールド２１０Ｌｔと左眼用ボトムフィールド２１０Ｌｂとを含んでいる。同様に、右眼用画像２１０Ｒは、右眼用トップフィールド２１０Ｒｔと右眼用ボトムフィールド２１０Ｒｂとを含んでいる。各フィールドは、１９２０×５４０画素で構成される。
【０１０２】
次に、第１水平リサイズ部１２１及び１３１はそれぞれ、左眼用画像２１０Ｌ及び右眼用画像２１０Ｒを水平方向に縮小する（Ｓ１２０）。ここでは、第１水平リサイズ部１２１及び１３１は、水平方向に１／２倍に縮小する。これにより、図５に示すように、縮小後の左眼用画像２２０Ｌと縮小後の右眼用画像２２０Ｒとを生成する。なお、縮小率は１／２倍に限られない。なお、第１水平リサイズ部１２１及び１３１はそれぞれ、左眼用画像２１０Ｌ及び右眼用画像２１０Ｒを水平方向に拡大してもよい。
【０１０３】
縮小後の左眼用画像２２０Ｌは、縮小後の左眼用トップフィールド２２０Ｌｔと縮小後の左眼用ボトムフィールド２２０Ｌｂとを含んでいる。縮小後の右眼用画像２２０Ｒは、縮小後の右眼用トップフィールド２２０Ｒｔと縮小後の右眼用ボトムフィールド２２０Ｒｂとを含んでいる。各フィールドは、９６０×５４０画素で構成される。
【０１０４】
なお、このとき、第１水平リサイズ部１２１及び１３１は、図２Ｂに示すような市松状の画像を生成するために、それぞれ開始位置をずらしてもよい。具体的には、第１水平リサイズ部１２１は、左眼用トップフィールド２１０Ｌｔに含まれる偶数番目の画素（０，２，４，６…）を抽出することで、縮小後の左眼用トップフィールド２２０Ｌｔを生成する。さらに、第１水平リサイズ部１２１は、左眼用ボトムフィールド２１０Ｌｂに含まれる奇数番目の画素（１，３，５，７…）を抽出することで、縮小後の左眼用ボトムフィールド２２０Ｌｂを生成する。
【０１０５】
また、第１水平リサイズ部１３１は、右眼用トップフィールド２１０Ｒｔに含まれる奇数番目の画素（１，３，５，７…）を抽出することで、縮小後の右眼用トップフィールド２２０Ｒｔを生成する。さらに、第１水平リサイズ部１３１は、右眼用ボトムフィールド２１０Ｒｂに含まれる偶数番目の画素（０，２，４，６…）を抽出することで、縮小後の右眼用ボトムフィールド２２０Ｒｂを生成する。
【０１０６】
次に、変換処理部１２２及び変換処理部１３２はそれぞれ、縮小後の左眼用画像２２０Ｌと縮小後の右眼用画像２２０ＲとにＩＰ変換を行う（Ｓ１３０）。変換処理部１２２及び変換処理部１３２はそれぞれ、ＩＰ変換を行うことで、プログレッシブ方式の左眼用画像２３０Ｌと右眼用画像２３０Ｒとを生成する。なお、ＩＰ変換の詳細については、後で説明する。
【０１０７】
次に、垂直リサイズ部１２３及び１３３は、左眼用画像２３０Ｌと右眼用画像２３０Ｒとを垂直方向にリサイズ、すなわち、拡大又は縮小する（Ｓ１４０）。図５に示す例では、垂直リサイズ部１２３及び１３３は、垂直方向のリサイズを行わずに、左眼用画像２４０Ｌと右眼用画像２４０Ｒとを出力する。
【０１０８】
次に、第２水平リサイズ部１２４及び１３４は、左眼用画像２４０Ｌと右眼用画像２４０Ｒとを水平方向に拡大する（Ｓ１５０）。例えば、第２水平リサイズ部１２４は、左眼用画像２４０Ｌに含まれる各画素をコピーすることで、２倍に拡大された左眼用画像２５０Ｌを生成する。同様に、第２水平リサイズ部１３４は、右眼用画像２４０Ｒに含まれる各画素をコピーすることで、２倍に拡大された右眼用画像２５０Ｒを生成する。
【０１０９】
なお、拡大率は、例えば、第１水平リサイズ部１２１及び１３１における縮小処理の縮小率の逆数である。ただし、これには限られない。第２水平リサイズ部１２４及び１３４はそれぞれ、左眼用画像２４０Ｌと右眼用画像２４０Ｒとを水平方向に縮小してもよい。
【０１１０】
最後に、合成部１４０は、左眼用画像２５０Ｌと右眼用画像２５０Ｒとを合成することで、合成画像２６０を生成する（Ｓ１６０）。合成画像２６０は、例えば、図２Ｂに示すように、左眼用画像２５０Ｌに含まれる画素と右眼用画像２５０Ｒに含まれる画素とが市松状に配列された画像である。合成により得られた合成画像２６０は、出力三次元映像信号５３として出力される。
【０１１１】
以上のようにして、実施の形態１に係る映像信号処理装置１００は、入力三次元映像信号５２を処理することで、出力三次元映像信号５３を生成する。
【０１１２】
次に、変換処理部１２２の詳細な構成及びその動作と、左眼用画像から取得する情報、及び当該情報を用いた所定の処理とについて説明する。
【０１１３】
実施の形態１に係る変換処理部１２２は、ＩＰ変換を行う前にフィルム検出を行う。フィルム検出は、画像特徴検出処理の一例であり、映像データがフィルム映像から生成された映像データであるか否かを検出する処理である。ここでは、変換処理部１２２は、フィルム検出として、左眼用画像のみを含む左眼用映像データがフィルム映像から生成された映像データであるか否かを検出する。
【０１１４】
そして、変換処理部１２２は、フィルム検出の結果を変換処理部１３２に出力する。なお、変換処理部１３２では、右眼用画像のみを含む右眼用映像データにＩＰ変換を行う。以下では、変換処理部１２２の具体的な構成及び動作について説明する。
【０１１５】
図６は、実施の形態１に係る変換処理部１２２の構成の一例を示すブロック図である。図６に示すように、変換処理部１２２は、フィルム検出部３１０と、ＩＰ変換部３２０とを備える。
【０１１６】
フィルム検出部３１０は、本発明に係る情報取得部の一例であり、左眼用画像にフィルム検出を行う。具体的には、フィルム検出部３１０は、左眼用画像を含む左眼用映像データにフィルム検出を行うことで、入力三次元映像信号がフィルム映像から生成された映像信号であるか否かを示すフィルム情報と、入力三次元映像信号がフィルム映像から生成された映像信号である場合に、フィルム映像に含まれる複数のフレームのうちの同一のフレームから生成されたピクチャを示すピクチャ情報とを取得する。なお、ここではフィルム検出部３１０は、ピクチャ情報の一例として、合成すべきフィールドを示すＩＰ変換情報を取得する。
【０１１７】
ＩＰ変換部３２０は、本発明に係る左眼用画像処理部の一例であり、フィルム情報とＩＰ変換情報とを用いて、左眼用映像データをインターレース方式からプログレッシブ方式へ変換する。具体的には、ＩＰ変換部３２０は、入力三次元映像信号がフィルム映像から生成された映像信号であることをフィルム情報が示す場合に、ＩＰ変換情報を用いて左眼用映像データをインターレース方式からプログレッシブ方式へ変換する。また、入力三次元映像信号がフィルム映像から生成された映像信号ではないことをフィルム情報が示す場合、ＩＰ変換部３２０は、例えば、隣接する２つのフィールドを合成することで、左眼用映像データをインターレース方式からプログレッシブ方式へ変換する。
【０１１８】
なお、変換処理部１３２は、本発明に係る右眼用画像処理部の一例であり、右眼用映像データに所定の処理を行う。具体的には、変換処理部１３２は、フィルム検出の結果であるフィルム情報とＩＰ変換情報とをフィルム検出部３１０から受け取る。そして、変換処理部１３２は、ＩＰ変換部３２０と同様にして、フィルム情報とＩＰ変換情報とを用いて、右眼用映像データをインターレース方式からプログレッシブ方式へ変換する。
【０１１９】
図７は、実施の形態１に係る変換処理部１２２の動作の一例を示すフローチャートである。
【０１２０】
まず、フィルム検出部３１０は、左眼用映像データにフィルム検出を行う（Ｓ１３１）。なお、第１処理部１２０に右眼用映像データを入力することで、フィルム検出部３１０は、右眼用映像データにフィルム検出を行ってもよい。フィルム検出の結果であるフィルム情報とＩＰ変換情報とは、ＩＰ変換部３２０と変換処理部１３２とに出力される。
【０１２１】
次に、ＩＰ変換部３２０及び変換処理部１３２は、フィルム情報とＩＰ変換情報とを用いて、左眼用映像データ及び右眼用映像データをインターレース方式からプログレッシブ方式へ変換する（Ｓ１３２）。フィルム検出及びＩＰ変換の具体的な処理については、フィルム映像と三次元映像との例を挙げて以下で説明する。
【０１２２】
図８は、フィルム映像と入力三次元映像信号との一例を示す図である。
【０１２３】
フィルム映像は、２４コマ／秒（２４ｆｐｓ）のプログレッシブ方式の映像（２４ｐの映像）である。
【０１２４】
入力三次元映像信号は、例えば、フレームレートが６０ｆｐｓであるインターレース方式の映像（６０ｉの映像）を示す信号である。すなわち、入力三次元映像信号は、トップフィールドとボトムフィールドとを１秒間に合わせて６０枚含んでいる（トップフィールド又はボトムフィールドのみのフレームレートは、３０ｆｐｓ）。
【０１２５】
図８に示すように、２４ｐの映像から６０ｉの映像を生成する場合、まず、２４ｐの映像に含まれるフレームＡをトップフィールド用（Ａtop）、ボトムフィールド用（Ａbtm）、トップフィールド用（Ａtop）に３回読み出す。次に、２４ｐの映像に含まれるフレームＢをボトムフィールド用（Ｂbtm）、トップフィールド用（Ｂtop）に２回読み出す。次に、２４ｐの映像に含まれるフレームＣをボトムフィールド用（Ｃbtm）、トップフィールド用（Ｃtop）、ボトムフィールド用（Ｃbtm）に３回読み出す。
【０１２６】
以上のように、フレームの３回読み出しと２回読み出しとを交互に繰り返すことで、２４ｐの映像から６０ｉの映像を生成することができる（３−２プルダウン処理）。なお、他のフレームレート間での変換を行う場合も同様に、変換前のフレームレートと変換後のフレームレートとの割合に応じて、読み出し回数を決定すればよい。
【０１２７】
次に、図８に示すように生成された６０ｉの映像（入力三次元映像信号）を６０ｐの映像（出力三次元映像信号）にＩＰ変換する場合について説明する。なお、６０ｐの映像は、６０ｆｐｓのプログレッシブ方式の映像のことである。
【０１２８】
フィルム検出部３１０は、フィルム検出として、２つのフィールド間の差分を算出する。例えば、フィルム検出部３１０は、対象となるフィールドと２つ前のフィールドとの差分を算出する。図８に示すように２４ｐの映像であるフィルム映像から生成された６０ｉの映像を含む入力三次元映像信号は、５枚のフィールド中に２枚の同じフィールドが含まれる（例えば、１番目と３番目のＡtop、６番目と８番目のＣbtm）。
【０１２９】
したがって、２つのフィールド間の差分を順次算出すると、５枚のフィールド中に１組は、差分がほぼ０となるフィールドの組が存在する。これにより、フィルム検出部３１０は、差分がほぼ０となる割合を検出することで、入力三次元映像信号が３−２プルダウンされた映像を含んでいることを検出することができる。つまり、差分がほぼ０となる割合が５枚のフィールド中に１組のフィールドであると検出した場合、フィルム検出部３１０は、入力三次元映像信号がフィルム映像から生成された映像信号であることを示すフィルム情報をＩＰ変換部３２０へ出力する。
【０１３０】
さらに、フィルム検出部３１０は、差分がほぼ０となる割合が５枚のフィールド中に１組のフィールドであると検出した場合、フィルム映像のフレームレートを示すフレームレート情報を取得する。つまり、入力三次元映像信号が３−２プルダウンされた映像であり、かつ、入力三次元映像信号のフレームレートが６０ｆｐｓであることから、フィルム映像のフレームレートは、２４（＝６０×２／５）ｆｐｓであることが分かる。そして、フィルム検出部３１０は、ＩＰ変換の際に、合成すべきトップフィールドとボトムフィールドとを示すＩＰ変換情報をＩＰ変換部３２０へ出力する。
【０１３１】
図９は、実施の形態１に係るＩＰ変換部３２０による、６０ｉの映像を６０ｐの映像にＩＰ変換する際の処理例を示す図である。
【０１３２】
ＩＰ変換部３２０は、６０ｉの入力映像と、当該入力映像を１フレーム遅延した第１遅延映像と、６０ｉの入力映像を２フレーム遅延した第２遅延映像との中から、フィールド毎に２つの映像を選択して合成する。このとき、どの映像を選択するか、すなわち、どのトップフィールドとどのボトムフィールドとを選択するかは、フィルム検出部３１０によるフィルム検出の結果であるＩＰ変換情報に従って決定される。
【０１３３】
具体的には、フィルム検出部３１０は、入力三次元映像信号が３−２プルダウンされた映像信号であることを検出した場合、フィルム映像に含まれる同一のフレームから生成されたフィールドを示す情報をＩＰ変換情報として出力する。そして、ＩＰ変換部３２０は、受け取ったＩＰ変換情報に従って、同一のフレームから生成されたフィールド同士を選択して合成する。
【０１３４】
例えば、ＩＰ変換部３２０は、図９に点線で示す四角によって囲まれた２枚のフィールドを合成することで１フレームの画像を生成する。
【０１３５】
具体的には、ＩＰ変換部３２０は、時刻Ｔ２では、第１遅延映像のＡtopと６０ｉの映像のＡbtmとを合成する。また、時刻Ｔ３では、ＩＰ変換部３２０は、第１遅延映像のＡbtmと６０ｉの映像のＡtopとを合成する。なお、時刻Ｔ３では、第１遅延映像のＡbtmと第２遅延映像のＡtopとを合成してもよい。
【０１３６】
さらに、時刻Ｔ４では、ＩＰ変換部３２０は、第１遅延映像のＡtopと第２遅延映像のＡbtmとを合成する。次に、時刻Ｔ５では、ＩＰ変換部３２０は、６０ｉの映像のＢtopと第１遅延映像のＡbtmとを合成する。
【０１３７】
このように、３−２プルダウンされた映像信号をＩＰ変換する場合、同一のフレームから生成された３枚連続するフィールドについては、最初の２枚は、第１遅延映像と入力映像とを合成し、残りの１枚は第１遅延映像と第２遅延映像とを合成すればよい。なお、真ん中の１枚は、第１遅延映像と第２遅延映像とを合成してもよい。さらに、同一のフレームから生成された２枚連続するフィールドについては、１枚目は、第１遅延映像と入力映像とを合成し、２枚目は、第１遅延映像と第２遅延映像とを合成すればよい。
【０１３８】
以上のように、ＩＰ変換部３２０は、フィルム映像に含まれる同一のフレームから生成されたフィールド同士を選択して合成することで、所定のフレームレートのインターレース方式の入力三次元映像信号から同じフレームレートのプログレッシブ方式の出力三次元映像信号を生成する。
【０１３９】
また、ＩＰ変換部３２０は、入力三次元映像信号がフィルム映像から生成された映像信号ではないことをフィルム情報が示す場合は、隣接するフィールドを順に合成することでプログレッシブ方式の出力三次元映像信号を生成する。
【０１４０】
なお、入力三次元映像信号がフィルム映像から生成された映像信号である場合に、ＩＰ変換部３２０がフィルム検出を行わず、単に、隣接するフィールドを順に合成した場合、例えば、ＡtopとＢbtmとが合成されてしまうことになり、画質が劣化してしまう。したがって、上記のようにフィルム検出を行うことで、本実施の形態に係るＩＰ変換部３２０は、フィルム映像に含まれる同一のフレームから生成されたフィールド同士を合成することができるので、画質の劣化を防止することができる。
【０１４１】
以上のように、実施の形態１に係る変換処理部１２２では、左眼用映像データにフィルム検出を行い、その結果を変換処理部１３２に出力する。変換処理部１３２は、変換処理部１２２から入力されるフィルム検出の結果を用いて、右眼用映像データにＩＰ変換を行う。
【０１４２】
左眼用画像と右眼用画像とは、そもそも同じ被写体を異なる視点から撮影して得られた画像、又は、同じ画像を所定の視差の分だけずらして生成された画像である。したがって、左眼用映像データと右眼用映像データとのいずれにフィルム検出を行ったとしても、同じ結果が得られる。
【０１４３】
このため、本実施の形態のように、左眼用映像データ及び右眼用映像データのいずれか一方のみにフィルム検出を行い、その検出結果を左眼用映像データ及び右眼用映像データの双方に利用することで、処理の重複を避けることができる。これにより、本実施の形態に係る映像信号処理装置１００は、冗長な処理を避けることができ、消費電力を低減、及び処理速度を向上させることができる。
【０１４４】
また、左眼用映像データと右眼用映像データとで個別に検出を行った場合、互いに異なる検出結果が得られる可能性がある。この場合、変換処理部１２２及び１３２は、異なる検出結果に基づいてＩＰ変換を行うことになるので、合成部１４０が左眼用画像と右眼用画像とを合成した場合に不自然な映像が生成される可能性がある。
【０１４５】
これに対して、本実施の形態に係る映像信号処理装置１００では、同じ検出結果を用いて、左眼用映像データと右眼用映像データとの両方を処理するので、上記のように不自然な映像が生成される可能性を低減することができる。
【０１４６】
なお、上記説明では、インターレース方式の入力三次元映像信号にフィルム検出を行う構成について示したが、プログレッシブ方式の入力三次元映像信号にフィルム検出を行ってもよい。例えば、図８に示すような２４ｐのフィルム映像（ＡＢＣ…）から生成された、図９に示すような６０ｐの映像信号（ＡＡＡＢＢＣＣＣ…）が、入力三次元映像信号として本実施の形態に係る映像信号処理装置１００に入力された場合を想定する。
【０１４７】
フィルム検出部３１０は、左眼用映像データに含まれる２つのフレーム間の差分を算出する。例えば、フィルム検出部３１０は、時間的に隣接する２つのフレーム間の差分を算出することで、差分が“小小大小大小小大小大…”となる。これにより、フィルム検出部３１０は、入力三次元映像信号が３−２プルダウンされた映像を含んでいることを示すフィルム情報をＩＰ変換部３２０へ出力する。
【０１４８】
さらに、フィルム検出部３１０は、ピクチャ情報の一例として、フィルム映像に含まれる同一のフレームから生成されたフレームを示すフレーム情報を、ＩＰ変換部３２０と変換処理部１３２とへ出力する。例えば、時間的に隣接する２つのフレーム間の差分がほぼ０となった場合、フィルム検出部３１０は、これら２つのフレームが、フィルム映像に含まれる同一のフレームから生成されたフレームであると判定することで、フレーム情報を出力する。
【０１４９】
ＩＰ変換部３２０は、フィルム情報とフレーム情報とを受け取り、受け取ったフィルム情報とフレーム情報とに基づいて、左眼用映像データである入力三次元映像信号のフレームレートを変換する。例えば、入力三次元映像信号が３−２プルダウンされた映像を含んでいることをフィルム情報が示す場合、ＩＰ変換部３２０は、フレーム情報を用いて出力すべきフレームとその枚数とを決定する。
【０１５０】
例えば、ＩＰ変換部３２０は、同一のフレームを２枚ずつ選択して出力することで、フレームレートが４８ｆｐｓの映像信号（ＡＡＢＢＣＣ…）を出力する。この映像信号には、同一のフレームが２枚ずつ含まれる。あるいは、ＩＰ変換部３２０は、同一のフレームを５枚ずつ選択して出力することで、フレームレートが１２０ｆｐｓの映像信号（ＡＡＡＡＡＢＢＢＢＢＣＣＣＣＣ…）を出力してもよい。この映像信号には、同一のフレームが５枚ずつ含まれる。
【０１５１】
変換処理部１３２は、右眼用映像データにＩＰ変換部３２０と同様の処理を行う。
【０１５２】
以上のようにして、プログレッシブ方式の入力三次元映像信号にフィルム検出を行ってもよい。この場合も、左眼用映像データと右眼用映像データとでは、フィルム検出結果が一致するので、一方のみにフィルム検出を行うことで、処理量の増大を抑制することができる。
【０１５３】
なお、ＩＰ変換部３２０は、走査方式の変換とフレームレートの変換との両方を行ってもよい。例えば、ＩＰ変換部３２０は、インターレース方式の映像信号（６０ｉの映像信号）をプログレッシブ方式の映像信号（６０ｐの映像信号）に変換するとともに、変換した映像信号のフレームレートを上述のように変換する。これにより、例えば、ＩＰ変換部３２０は、６０ｉの映像信号から４８ｐ又は１２０ｐの映像信号を生成することができる。
【０１５４】
また、フィルム検出では、入力三次元映像信号として３−２プルダウンされた映像信号について説明したが、２−２プルダウンされた映像信号であってもよい。例えば、隣接する２フィールドの差分を算出すると、２−２プルダウンされた映像信号の場合、差分が“大小大小…”を繰り返す。したがって、フィルム検出部３１０は、検出した差分の変化の傾向を判断することで、入力三次元映像信号が２−２プルダウンされた映像信号であることを検出することができる。
【０１５５】
なお、フィルム検出部３１０が行うフィルム検出は、上記の方法に限られず、他の方法であってもよい。
【０１５６】
また、本実施の形態に係る映像信号処理装置１００は、第１処理部１２０と第２処理部１３０とを用いて、左眼用映像データと右眼用映像データとを並列処理する構成について説明したが、２つの処理部のうちいずれか１つの処理部のみを備えていてもよい。例えば、入力選択部１１０は、左眼用映像データと右眼用映像データとの両方を第１処理部１２０に入力してもよい。
【０１５７】
第１処理部１２０が備える各処理部は、左眼用映像データと右眼用映像データとをそれぞれシーケンシャルに処理する。例えば、左眼用映像データを処理した後で、右眼用映像データを処理する（あるいは、逆でもよい）。このとき、左眼用映像データから取得されたフィルム情報及びＩＰ変換情報は、メモリなどに格納しておけばよい。
【０１５８】
また、本実施の形態では、左眼用画像にフィルム検出を行ったが、右眼用画像にフィルム検出を行い、検出結果を左眼用画像と右眼用画像との両方に利用してもよい。
【０１５９】
以上のように、実施の形態１に係る映像信号処理装置１００は、左眼用画像及び右眼用画像の一方から、ＩＰ変換などの所定の処理を行う際に用いられる情報を取得する情報取得部の一例であるフィルム検出部３１０を備える。また、映像信号処理装置１００は、情報取得部の一例であるフィルム検出部３１０によって取得された情報を用いて、左眼用画像及び右眼用画像の両方に、ＩＰ変換又はフレームレートの変換を行う画像処理部の一例であるＩＰ変換部３２０及び変換処理部１３２を備える。
【０１６０】
この構成により、実施の形態１に係る映像信号処理装置１００によれば、上記情報を取得するための処理の一例であるフィルム検出を左眼用画像及び右眼用画像の一方のみに行えばよく、処理の重複を避けることができる。したがって、処理量の増大を抑制することができる。
【０１６１】
（実施の形態２）
実施の形態２に係る映像信号処理装置は、実施の形態１と同様に、左眼用画像及び右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記処理を行う画像処理部とを備えることを特徴とする。より具体的には、実施の形態２では、情報取得部は、左眼用画像及び右眼用画像の一方に、輝度値が一定の特定画像が含まれているか否かを検出することで、特定画像が含まれている領域を示す特定画像情報を取得する。
【０１６２】
なお、以下では、実施の形態１と重複する説明は省略し、実施の形態１との相違点を中心に説明する。
【０１６３】
実施の形態２に係る映像信号処理装置は、実施の形態１の図３に示す映像信号処理装置１００とほぼ同じであり、入力選択部１１０の代わりに入力選択部４１０を備える点が異なっている。以下では、まず、実施の形態２に係る映像信号処理装置が備える入力選択部４１０の構成について説明する。
【０１６４】
図１０Ａ及び図１０Ｂは、実施の形態２に係る映像信号処理装置が備える入力選択部４１０の構成の一例を示すブロック図である。図１０Ａに示すように、入力選択部４１０は、分割部４１１と、特定画像検出部４１２と、ＡＰＬ算出部４１３及び４１４とを備える。
【０１６５】
分割部４１１は、入力三次元映像信号を左眼用画像と右眼用画像とに分割する。左眼用画像は特定画像検出部４１２に出力され、右眼用画像はＡＰＬ算出部４１４に出力される。なお、左眼用画像がＡＰＬ算出部４１４に出力され、右眼用画像が特定画像検出部４１２に出力されてもよい。
【０１６６】
また、入力三次元映像信号が予め左眼用画像と右眼用画像とに分割されている場合は、入力選択部４１０は、分割部４１１を備えていなくてもよい。この場合は、直接、左眼用画像が特定画像検出部４１２に入力され、右眼用画像がＡＰＬ算出部４１４に入力される。
【０１６７】
特定画像検出部４１２は、本発明に係る情報取得部の一例であり、左眼用画像及び右眼用画像の一方に輝度値が一定の特定画像が含まれているか否かを検出することで、当該特定画像が含まれている領域を示す特定画像情報を取得する。ここでは、左眼用画像が入力されるので、特定画像検出部４１２は、左眼用画像に特定画像が含まれているか否かを検出する。具体的には、特定画像検出部４１２は、サイドパネル検出及びレターボックス検出を行う。
【０１６８】
図１０Ａに示すように、特定画像検出部４１２は、サイドパネル検出部４１２ａと、レターボックス検出部４１２ｂとを備える。
【０１６９】
サイドパネル検出部４１２ａは、左眼用画像及び右眼用画像の一方について、画像の左側と右側とに特定画像が含まれているか否かを検出する（サイドパネル検出又はピラーボックス検出）。ここでは、左眼用画像が入力されるので、サイドパネル検出部４１２ａは、左眼用画像の左側と右側とに特定画像が含まれているか否かを検出する。なお、特定画像は、輝度値が一定の画像であり、例えば、黒色の画像である。
【０１７０】
サイドパネル検出部４１２ａは、サイドパネル検出を行うことで、特定画像が含まれている領域を示す特定画像情報を取得する。特定画像情報は、例えば、特定画像が含まれている領域が、画像の左側又は右側から何画素分であるかを示す情報である。
【０１７１】
レターボックス検出部４１２ｂは、左眼用画像及び右眼用画像の一方について、画像の上側と下側とに特定画像が含まれているか否かを検出する（レターボックス検出）。ここでは、左眼用画像が入力されるので、レターボックス検出部４１２ｂは、左眼用画像の上側と下側とに特定画像が含まれているか否かを検出する。
【０１７２】
レターボックス検出部４１２ｂは、レターボックス検出を行うことで、特定画像が含まれている領域を示す特定画像情報を取得する。特定画像情報は、例えば、特定画像が含まれている領域が、画像の上側又は下側から何画素分であるかを示す情報である。
【０１７３】
なお、特定画像検出部４１２は、サイドパネル検出とレターボックス検出とのいずれか一方のみを行ってもよい。両方の検出を行った場合は、特定画像検出部４１２は、サイドパネル検出部４１２ａによって取得された特定画像情報と、レターボックス検出部４１２ｂによって取得された特定画像情報とを合わせて、特定画像が含まれた領域を示す特定画像情報としてＡＰＬ算出部４１３及び４１４へ出力する。
【０１７４】
ＡＰＬ算出部４１３及び４１４は、本発明に係る画像処理部の一例であり、左眼用画像及び右眼用画像の両方について、特定画像情報が示す領域以外の有効画像領域の平均輝度値（Ａｖｅｒａｇｅ Ｐｉｃｔｕｒｅ Ｌｅｖｅｌ）を算出する。具体的には、ＡＰＬ算出部４１３は、左眼用画像のうち、特定画像情報が示す領域以外の有効画像領域の平均輝度値を算出する。また、ＡＰＬ算出部４１４は、右眼用画像のうち、特定画像情報が示す領域以外の有効画像領域の平均輝度値を算出する。なお、有効画像領域は、本来の画像が表示されている領域である。
【０１７５】
ここで、特定画像の例について説明する。
【０１７６】
図１１Ａは、サイドパネル画像５００の一例を示す図である。図１１Ｂは、レターボックス画像６００の一例を示す図である。
【０１７７】
サイドパネル画像５００は、本来の画像５１０の左側と右側とに特定画像５２０がそれぞれ付加されている。具体的には、アスペクト比が１６：９の画面にアスペクト比が４：３の本来の画像５１０を表示させるときに、特定画像５２０が本来の画像５１０に付加される。なお、サイドパネルは、ピラーボックスともいう。
【０１７８】
サイドパネル検出部４１２ａは、図１１Ａに示すような特定画像５２０が本来の画像５１０に付加されているか否かを検出する。例えば、サイドパネル検出部４１２ａは、入力された左眼用画像の左側の領域（数画素列分の領域）と右側の領域（数画素列分の領域）との双方に含まれる画素の輝度値が全て同じ所定の値（黒色）であるか否かを判定する。
【０１７９】
左側の領域と右側の領域とに含まれる画素の輝度値が全て同じ所定の値（黒色）であると判定した場合、サイドパネル検出部４１２ａは、入力された左眼用画像はサイドパネル画像５００であると判定する。そして、サイドパネル検出部４１２ａは、特定画像５２０の領域を示す特定画像情報をＡＰＬ算出部４１３に出力する。ＡＰＬ算出部４１３は、サイドパネル画像５００のうち特定画像５２０を除く領域（有効画像領域）、すなわち、本来の画像５１０の平均輝度値を算出する。
【０１８０】
サイドパネル画像５００の平均輝度値を算出した場合、輝度値が一定の特定画像５２０を含んだ平均輝度値が算出されてしまう。つまり、本来の画像５１０の平均輝度値とは異なる値が算出される。したがって、平均輝度値を用いて画像を補正する場合など、平均輝度値が異なっているので、正しく画像を補正することができなくなる。これに対して、本実施の形態では、サイドパネル検出を行い、特定画像の領域を特定することで、正確な補正処理などを行うことができる。
【０１８１】
レターボックス画像６００は、本来の画像６１０の上側と下側とに特定画像６２０がそれぞれ付加されている。具体的には、アスペクト比が４：３の画面にアスペクト比が１６：９の本来の画像６１０を表示させるときに、特定画像６２０が本来の画像６１０に付加される。
【０１８２】
レターボックス検出部４１２ｂは、図１１Ｂに示すような特定画像６２０が本来の画像６１０に付加されているか否かを検出する。例えば、レターボックス検出部４１２ｂは、入力された右眼用画像の上側の領域（数画素行分の領域）と下側の領域（数画素行分の領域）との双方に含まれる画素の輝度値が全て同じ所定の値（黒色）であるか否かを判定する。
【０１８３】
上側の領域と下側の領域とに含まれる画素の輝度値が全て同じ所定の値（黒色）であると判定した場合、レターボックス検出部４１２ｂは、入力された右眼用画像はレターボックス画像６００であると判定する。そして、レターボックス検出部４１２ｂは、特定画像５２０の領域を示す特定画像情報をＡＰＬ算出部４１３に出力する。ＡＰＬ算出部４１３は、レターボックス画像６００のうち特定画像６２０を除く領域（有効画像領域）、すなわち、本来の画像６１０の平均輝度値を算出する。これにより、サイドパネル検出と同様に、レターボックス検出を行い、特定画像の領域を特定することで、正確な補正処理などを行うことができる。
【０１８４】
なお、上記のアスペクト比は一例であって、他のアスペクト比の場合であっても同様である。
【０１８５】
以上のようにして左眼用画像から検出された特定画像情報を用いて、ＡＰＬ算出部４１４は、右眼用画像の平均輝度値を算出する。左眼用画像と右眼用画像とでは、通常、一方のみに特定画像が含まれている場合はなく、また、異なる領域に特定画像が含まれている場合もない。したがって、左眼用画像から検出された特定画像情報と、右眼用画像から検出した特定画像情報とはおおよそ一致する。
【０１８６】
このため、厳密な結果を必要としない場合は、左眼用画像と右眼用画像との両方から特定画像情報を取得する処理は冗長であり、本実施の形態のように、いずれか一方のみから特定画像情報を取得することで、処理量の増大を抑制することができる。なお、厳密な結果を必要とする場合は、サイドパネル検出部４１２ａ及びレターボックス検出部４１２ｂは、左眼用画像と右眼用画像とのそれぞれに、サイドパネル検出及びレターボックス検出を行えばよい。
【０１８７】
なお、図１０Ｂに示すように、入力選択部４１０は、ＡＰＬ算出部４１４を備えていなくてもよい。つまり、ＡＰＬ算出部４１３によって、左眼用画像から算出された平均輝度値を、右眼用画像の平均輝度値として利用してもよい。なぜなら、左眼用画像の平均輝度値と右眼用画像の平均輝度値とも同じ値になることが多いためである。なお、このときのＡＰＬ算出部４１３は、本発明に係る情報取得部の一例である。
【０１８８】
続いて、実施の形態２に係る映像信号処理装置の動作のうち、入力選択部４１０の動作について、図１２を用いて説明する。なお、実施の形態２に係る映像信号処理装置の動作は、実施の形態１に係る映像信号処理装置１００の動作（図４参照）とほぼ同じであり、入力選択部１１０の動作（Ｓ１１０）が異なっている。
【０１８９】
図１２は、実施の形態２に係る映像信号処理装置が備える入力選択部４１０の動作の一例を示すフローチャートである。図１２は、図４に示す入力選択部１１０の動作（Ｓ１１０）に相当する。
【０１９０】
まず、分割部４１１が、入力三次元映像信号を左眼用画像と右眼用画像とに分割する（Ｓ２１０）。左眼用画像は、特定画像検出部４１２に出力され、右眼用画像はＡＰＬ算出部４１４に出力される。
【０１９１】
次に、特定画像検出部４１２は、左眼用画像にサイドパネル検出とレターボックス検出とを行う（Ｓ２２０）。なお、サイドパネル検出とレターボックス検出とはいずれか一方のみが実行されてもよい。例えば、サイドパネル検出により特定画像が検出された場合は、レターボックス検出を行わなくてもよい。逆に、レターボックス検出により特定画像が検出された場合は、サイドパネル検出を行わなくてもよい。検出結果である特定画像情報は、ＡＰＬ算出部４１３とＡＰＬ算出部４１４との両方に出力される。
【０１９２】
次に、ＡＰＬ算出部４１３は、特定画像情報を用いて、左眼用画像の平均輝度値を算出し、ＡＰＬ算出部４１４は、特定画像情報を用いて、右眼用画像の平均輝度値を算出する（Ｓ２３０）。
【０１９３】
以上のように、実施の形態２に係る映像信号処理装置では、入力選択部４１０において、左眼用画像にサイドパネル検出及びレターボックス検出を行うことで、特定画像を検出し、検出した結果を用いて左眼用画像と右眼用画像との両方について、平均輝度値の算出を行う。
【０１９４】
これにより、実施の形態２に係る映像信号処理装置によれば、左眼用画像と右眼用画像とのいずれか一方のみから特定画像情報を取得することで、処理量の増大を抑制することができる。
【０１９５】
なお、実施の形態２では、入力選択部４１０がサイドパネル検出及びレターボックス検出を行ったが、実施の形態１と同様に、これらの検出を、変換処理部１２２が左眼用画像に行ってもよい。そして、変換処理部１２２は、得られた検出結果を変換処理部１３２に出力してもよい。
【０１９６】
また、平均輝度値の算出についても同様に、入力選択部４１０ではなく変換処理部１２２及び１３２が行ってもよい。あるいは、図示していない他の処理部によって実行してもよい。
【０１９７】
以上のように、本発明に係る映像信号処理装置は、左眼用画像と右眼用画像とを含む三次元映像信号処理装置であって、左眼用画像及び右眼用画像のいずれか一方から取得した情報を用いて、所定の処理を左眼用画像及び右眼用画像の両方に行う。これは、左眼用画像と右眼用画像とは通常、同じ被写体を異なる視点から撮影することにより得られた画像であって、互いに共通する点が多いことを利用する。
【０１９８】
例えば、上述のようにフィルム検出結果、サイドパネル検出結果、及びレターボックス検出結果などが、左眼用画像と右眼用画像とで共通する。したがって、共通の結果が得られる処理についてはいずれか一方にのみ行うことで、処理の重複を避けることができ、処理量の増大を抑制することができる。
【０１９９】
また、通常同じ結果が得られるはずのところ、異なる結果が得られた場合は、左眼用画像と右眼用画像とを合成する際に不自然な画像が生成されてしまう可能性がある。本発明に係る映像信号処理装置では、共通の結果を用いているため、このような不自然な画像の生成を防止することができる。
【０２００】
以上、映像信号処理装置及び映像信号処理方法について、実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を当該実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の範囲内に含まれる。
【０２０１】
例えば、左眼用画像及び右眼用画像の一方にＣＭ検出を行ってもよい。ＣＭ検出は、入力された左眼用画像又は右眼用画像が、映像に含まれる広告情報などのＣＭであるか、映画などのコンテンツであるかを判定する処理である。同一の表示時刻における左眼用画像と右眼用画像とのいずれか一方のみがＣＭであるということは通常ありえないため、ＣＭ検出結果も左眼用画像と右眼用画像とで同じである。
【０２０２】
したがって、左眼用画像と右眼用画像とのいずれか一方にＣＭ検出を行い、得られた結果を左眼用画像と右眼用画像との両方のＣＭ検出結果として用いることができる。なお、例えば、入力選択部１１０又は４１０がＣＭ検出を行う。例えば、画像がＣＭであることを示す識別子を検出する、あるいは、ＣＭとコンテンツとで解像度の違いを検出することで、入力された左眼用画像又は右眼用画像がＣＭであるか否かを判定する。
【０２０３】
左眼用画像がＣＭであると判定された場合は、例えば、第１水平リサイズ部１２１及び１３１が、左眼用画像及び右眼用画像を高い縮小率で縮小することで、以降の処理量を低減することができる。
【０２０４】
また、入力された三次元映像信号を符号化する場合に備えて、左眼用画像を含む左眼用映像データと、右眼用画像を含む右眼用映像データとの一方から動きを検出してもよい。また、同様にフレーム又はフィールドの参照関係を決定してもよい。これらの処理は、例えば、入力選択部１１０若しくは４１０、変換処理部１２２若しくは１３２、又は、他の処理部が行う。
【０２０５】
なお、本発明に係る映像信号処理装置１００は、図１３に示すようなデジタルビデオレコーダ２０及びデジタルテレビ３０に搭載される。
【０２０６】
なお、本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されないのは言うまでもない。以下のような場合も本発明の範囲に含まれる。
【０２０７】
上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。ＲＡＭ又はハードディスクユニットには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。
【０２０８】
上記の各装置を構成する構成要素の一部又は全部は、１個のシステムＬＳＩから構成されているとしてもよい。システムＬＳＩは、複数の構成要素を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。ＲＡＭには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、システムＬＳＩは、その機能を達成する。
【０２０９】
上記の各装置を構成する構成要素の一部又は全部は、各装置に脱着可能なＩＣカード又は単体のモジュールから構成されているとしてもよい。ＩＣカード又はモジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。ＩＣカード又はモジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、ＩＣカード又はモジュールは、その機能を達成する。このＩＣカード又はモジュールは、耐タンパ性を有するとしてもよい。
【０２１０】
また、本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、コンピュータプログラムからなるデジタル信号であるとしてもよい。
【０２１１】
また、本発明は、コンピュータプログラム又はデジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ Ｄｉｓｋ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ、半導体メモリなどに記録したものとしてもよい。また、これらの記録媒体に記録されているデジタル信号であるとしてもよい。
【０２１２】
また、本発明は、コンピュータプログラム又はデジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送などを経由して伝送するものとしてもよい。
【０２１３】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、メモリは、上記コンピュータプログラムを記憶しており、マイクロプロセッサは、コンピュータプログラムに従って動作するとしてもよい。
【０２１４】
また、プログラム又はデジタル信号を記録媒体に記録して移送することにより、あるいはプログラム又はデジタル信号を、ネットワークなどを経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
【産業上の利用可能性】
【０２１５】
本発明に係る映像信号処理装置及び映像信号処理方法は、処理量の増大を抑制することができるという効果を奏し、例えば、デジタルテレビ及びデジタルビデオレコーダなどに適用することができる。
【符号の説明】
【０２１６】
１０ 映像信号処理システム
２０ デジタルビデオレコーダ
２１、３１ 入力部
２２、３２ デコーダ
２３、３３ ＨＤＭＩ通信部
３０ デジタルテレビ
３４ 表示パネル
３５ トランスミッタ
４０ シャッタメガネ
４１ ＨＤＭＩケーブル
４２ 記録媒体
４３ 放送波
５１、５４ 三次元映像信号
５２、５５、５６ 入力三次元映像信号
５３、５７、５８ 出力三次元映像信号
５７Ｌ、５８Ｌ、２１０Ｌ、２２０Ｌ、２３０Ｌ、２４０Ｌ、２５０Ｌ 左眼用画像
５７Ｒ、５８Ｒ、２１０Ｒ、２２０Ｒ、２３０Ｒ、２４０Ｒ、２５０Ｒ 右眼用画像
１００ 映像信号処理装置
１１０、４１０ 入力選択部
１２０ 第１処理部
１２１、１３１ 第１水平リサイズ部
１２２、１３２ 変換処理部
１２３、１３３ 垂直リサイズ部
１２４、１３４ 第２水平リサイズ部
１３０ 第２処理部
１４０ 合成部
２１０Ｌｂ、２２０Ｌｂ 左眼用ボトムフィールド
２１０Ｌｔ、２２０Ｌｔ 左眼用トップフィールド
２１０Ｒｂ、２２０Ｒｂ 右眼用ボトムフィールド
２１０Ｒｔ、２２０Ｒｔ 右眼用トップフィールド
２６０ 合成画像
３１０ フィルム検出部
３２０ ＩＰ変換部
４１１ 分割部
４１２ 特定画像検出部
４１２ａ サイドパネル検出部
４１２ｂ レターボックス検出部
４１３、４１４ ＡＰＬ算出部
５００ サイドパネル画像
５１０、６１０ 本来の画像
５２０、６２０ 特定画像
６００ レターボックス画像
【特許請求の範囲】
【請求項１】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置であって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理部とを備える
映像信号処理装置。
【請求項２】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方にフィルム検出を行うことで、前記三次元映像信号がフィルム映像から生成された映像信号であるか否かを示すフィルム情報を取得する
請求項１記載の映像信号処理装置。
【請求項３】
前記情報取得部は、さらに、前記三次元映像信号がフィルム映像から生成された映像信号である場合に、前記フィルム映像に含まれる複数のフレームのうちの同一のフレームから生成されたピクチャを示すピクチャ情報を取得し、
前記画像処理部は、前記三次元映像信号がフィルム映像から生成された映像信号であることを前記フィルム情報が示す場合に、前記所定の処理として、前記左眼用画像及び前記右眼用画像の両方にそれぞれ、前記ピクチャ情報を用いて、走査方式の変換及びフレームレートの変換の少なくとも一方を行う
請求項１記載の映像信号処理装置。
【請求項４】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方に輝度値が一定の特定画像が含まれているか否かを検出することで、当該特定画像が含まれている領域を示す特定画像情報を取得する
請求項１記載の映像信号処理装置。
【請求項５】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の左側と右側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得する
請求項４記載の映像信号処理装置。
【請求項６】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の上側と下側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得する
請求項４記載の映像信号処理装置。
【請求項７】
前記画像処理部は、前記左眼用画像及び前記右眼用画像の両方について、前記特定画像情報が示す領域以外の有効画像領域の平均輝度値をそれぞれ算出する
請求項５又は６記載の映像信号処理装置。
【請求項８】
前記映像信号処理装置は、さらに、
前記三次元映像信号を前記左眼用画像と前記右眼用画像とに分割する分割部を備え、
前記画像処理部は、
前記左眼用画像に前記所定の処理を行う左眼用画像処理部と、
前記右眼用画像に前記所定の処理を行う右眼用画像処理部とを有し、
前記情報取得部は、前記分割部によって分割された前記左眼用画像及び前記右眼用画像の一方から前記情報を取得し、取得した情報を前記左眼用画像処理部と前記右眼用画像処理部とに出力する
請求項１記載の映像信号処理装置。
【請求項９】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理方法であって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得ステップと、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理ステップとを含む
映像信号処理方法。
【請求項１０】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する集積回路であって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理部とを備える
集積回路。
【請求項１１】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理方法をコンピュータに実行させるためのプログラムであって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得ステップと、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理ステップとを含む
プログラム。
【請求項１】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理装置であって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理部とを備える
映像信号処理装置。
【請求項２】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方にフィルム検出を行うことで、前記三次元映像信号がフィルム映像から生成された映像信号であるか否かを示すフィルム情報を取得する
請求項１記載の映像信号処理装置。
【請求項３】
前記情報取得部は、さらに、前記三次元映像信号がフィルム映像から生成された映像信号である場合に、前記フィルム映像に含まれる複数のフレームのうちの同一のフレームから生成されたピクチャを示すピクチャ情報を取得し、
前記画像処理部は、前記三次元映像信号がフィルム映像から生成された映像信号であることを前記フィルム情報が示す場合に、前記所定の処理として、前記左眼用画像及び前記右眼用画像の両方にそれぞれ、前記ピクチャ情報を用いて、走査方式の変換及びフレームレートの変換の少なくとも一方を行う
請求項１記載の映像信号処理装置。
【請求項４】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方に輝度値が一定の特定画像が含まれているか否かを検出することで、当該特定画像が含まれている領域を示す特定画像情報を取得する
請求項１記載の映像信号処理装置。
【請求項５】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の左側と右側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得する
請求項４記載の映像信号処理装置。
【請求項６】
前記情報取得部は、前記左眼用画像及び前記右眼用画像の一方について、画像の上側と下側とに前記特定画像が含まれているか否かを検出することで、前記特定画像情報を取得する
請求項４記載の映像信号処理装置。
【請求項７】
前記画像処理部は、前記左眼用画像及び前記右眼用画像の両方について、前記特定画像情報が示す領域以外の有効画像領域の平均輝度値をそれぞれ算出する
請求項５又は６記載の映像信号処理装置。
【請求項８】
前記映像信号処理装置は、さらに、
前記三次元映像信号を前記左眼用画像と前記右眼用画像とに分割する分割部を備え、
前記画像処理部は、
前記左眼用画像に前記所定の処理を行う左眼用画像処理部と、
前記右眼用画像に前記所定の処理を行う右眼用画像処理部とを有し、
前記情報取得部は、前記分割部によって分割された前記左眼用画像及び前記右眼用画像の一方から前記情報を取得し、取得した情報を前記左眼用画像処理部と前記右眼用画像処理部とに出力する
請求項１記載の映像信号処理装置。
【請求項９】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理方法であって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得ステップと、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理ステップとを含む
映像信号処理方法。
【請求項１０】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する集積回路であって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得部と、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理部とを備える
集積回路。
【請求項１１】
左眼用画像と右眼用画像とを含む三次元映像信号を処理する映像信号処理方法をコンピュータに実行させるためのプログラムであって、
前記左眼用画像及び前記右眼用画像の一方から、所定の処理を行う際に用いられる情報を取得する情報取得ステップと、
前記情報取得部によって取得された情報を用いて、前記左眼用画像及び前記右眼用画像の両方に前記所定の処理を行う画像処理ステップとを含む
プログラム。
【図１】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０Ａ】
【図１０Ｂ】
【図１１Ａ】
【図１１Ｂ】
【図１２】
【図１３】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０Ａ】
【図１０Ｂ】
【図１１Ａ】
【図１１Ｂ】
【図１２】
【図１３】
【公開番号】特開２０１１−６６７２５（Ｐ２０１１−６６７２５Ａ）
【公開日】平成２３年３月３１日（２０１１．３．３１）
【国際特許分類】
【出願番号】特願２００９−２１６２７３（Ｐ２００９−２１６２７３）
【出願日】平成２１年９月１７日（２００９．９．１７）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２３年３月３１日（２０１１．３．３１）
【国際特許分類】
【出願日】平成２１年９月１７日（２００９．９．１７）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]