立体画像撮像装置、立体画像表示装置、および立体画像撮像表示装置
【課題】インテグラル・フォトグラフィ方式において、高精細な立体画像を再現する。
【解決手段】被写体Ｏから到来する光束を２系統に分離するビームスプリッタ１２０と、分離した一方の光束を、視差画像群の光束に変換する撮像系レンズアレイ１３０と、視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子１４０と、分離した他方の光束を撮像して平面画像を得る平面画像撮像素子１５０と、視差画像群を表示する視差画像群表示素子２４０と、視差画像群の光束を立体像の光束に変換する表示系レンズアレイ２５０と、平面画像を表示する平面画像表示素子２６０と、立体像の光束と平面画像の光束とをあわせて出射するビームミキサ２７０とを備えた。
【解決手段】被写体Ｏから到来する光束を２系統に分離するビームスプリッタ１２０と、分離した一方の光束を、視差画像群の光束に変換する撮像系レンズアレイ１３０と、視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子１４０と、分離した他方の光束を撮像して平面画像を得る平面画像撮像素子１５０と、視差画像群を表示する視差画像群表示素子２４０と、視差画像群の光束を立体像の光束に変換する表示系レンズアレイ２５０と、平面画像を表示する平面画像表示素子２６０と、立体像の光束と平面画像の光束とをあわせて出射するビームミキサ２７０とを備えた。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体画像撮像装置、立体画像表示装置、および立体画像撮像表示装置に関する。
【背景技術】
【０００２】
多数の要素レンズを配列し構成したレンズアレイを撮影装置と表示装置との両方に用いて立体画像を撮影および再生するインテグラル・フォトグラフィ（Ｉｎｔｅｇｒａｌ Ｐｈｏｔｏｇｒａｐｈｙ）方式が知られている（例えば、特許文献１参照）。このインテグラル・フォトグラフィ方式では、撮影時においては、撮影装置が撮影系レンズアレイを介してとらえた被写体像を撮像する。撮影系レンズアレイを通して得られる撮像画像には、互いに視差がある多数の要素画像が含まれる。要素画像とは、要素レンズ単体を通して得られる画像である。そして、表示時においては、表示面側に表示系レンズアレイを配置した表示装置が、上記の撮像画像を表示する。これにより、観察者は、表示系レンズアレイを通して結像される多数の要素画像による被写体像を立体的に観察することができる。
【０００３】
インテグラル・フォトグラフィ方式では、撮影系レンズアレイから近距離にある被写体についての像の解像度は、撮影系レンズアレイの要素レンズの数（密度）に比例して変化する。すなわち、撮影系レンズアレイから近距離にある被写体についての像の解像度を高くするためには、要素レンズの配置密度が高い撮影系レンズアレイを用いる必要がある。
また、撮影系レンズアレイから遠距離にある被写体についての像の解像度は、各要素画像を構成する画素の画素数（要素画像における画素密度）に依存する。すなわち、撮影系レンズアレイから遠距離にある被写体についての像の解像度を高くするためには、各要素画像の画素密度が高くなるように撮像可能な高精細の撮像素子を用いる必要がある。
【０００４】
また、表示系レンズアレイから近距離の位置に結像する像の解像度は、表示系レンズアレイの要素レンズの数に比例して変化する。すなわち、表示系レンズアレイから近距離の位置に結像する像の解像度を高くするためには、要素レンズの配置密度が高い表示系レンズアレイを用いる必要がある。
また、表示系レンズアレイから遠距離の位置に結像する像の解像度は、各要素画像を構成する画素の画素数に依存する。すなわち、表示系レンズアレイから遠距離の位置に結像する像の解像度を高くするためには、各要素画像の画素密度が高くなるように表示可能な高精細の表示素子を用いる必要がある。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００２−２２８９７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
したがって、インテグラル・フォトグラフィ方式において、撮像解像度および表示解像度を高めようとすると、要素レンズの配置密度が高い撮影系レンズアレイおよび表示系レンズアレイを用い、且つ要素画像の解像度を高くすることが必要となる。しかしながら、その場合に、要求する撮像解像度および表示解像度に見合う画素密度の要素画像を得ることのできる撮像素子および表示素子は現状ではなく、従来のインテグラル・フォトグラフィ方式では、高精細な立体画像を再現することができていない。
そこで、本発明は、上記問題を解決するためになされたものであり、インテグラル・フォトグラフィ方式において、高精細な立体画像を撮影および表示することができる、立体画像撮像装置、立体画像表示装置、および立体画像撮像表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
［１］上記の課題を解決するため、本発明の一態様である立体画像撮像装置は、被写体から到来する光束を２系統に分離するビームスプリッタと、前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換するレンズアレイと、前記レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、を備えることを特徴とする。
［２］上記の課題を解決するため、本発明の一態様である立体画像表示装置は、それぞれ同一被写体の画像データであり、互いに視差がある視差画像群データと二次元の平面像である平面画像データとを取得する取得部と、前記取得部が取得した前記視差画像群データを表示する視差画像群表示素子と、前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換するレンズアレイと、前記取得部が取得した前記平面画像データを表示する平面画像表示素子と、前記レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、を備えることを特徴とする。
［３］上記［２］記載の立体画像表示装置において、前記視差画像群データのレベル値と前記平面画像データのレベル値との重みを変更する信号レベル変更部をさらに備えることを特徴する。
［４］上記の課題を解決するため、本発明の一態様である立体画像撮像表示装置は、被写体から到来する光束を２系統に分離するビームスプリッタと、前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換する撮像系レンズアレイと、前記撮像系レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、前記視差画像群撮像素子が得た前記視差画像群を表示する視差画像群表示素子と、前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換する表示系レンズアレイと、前記平面画像撮像素子が得た前記平面画像を表示する平面画像表示素子と、前記表示系レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、を備えることを特徴とする。
【発明の効果】
【０００８】
インテグラル・フォトグラフィ方式において、高精細な立体画像を撮影および表示することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の第１実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。
【図２】撮像系レンズアレイおよび表示系レンズアレイを光束の入射側から見たときの要素レンズの配列を模式的に表した図である。
【図３】屈折率分布レンズによる要素レンズの側面図であり、要素レンズ中の光路を模式的に表した図である。
【図４】本発明の第２実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。
【発明を実施するための形態】
【００１０】
以下、本発明を実施するための形態について、図面を参照して詳細に説明する。
［第１の実施の形態］
図１は、本発明の第１実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。同図に示すように、立体画像撮像表示装置１は、立体画像撮像装置１０と立体画像表示装置２０とを含んで構成される。
【００１１】
立体画像撮像装置１０は、被写体Ｏから到来する光束を２系統（第１系統の光束および第２系統の光束）に分離し、第１系統の光束を撮像して得られるインテグラル・フォトグラフィ方式による視差画像群データを記録するとともに、第２系統の光束を撮像して得られる平面画像データを記録する装置である。視差画像群データは、互いに視差がある視差画像群を有するフレーム画像データである。平面画像データは、単一の二次元的な画像（平面画像）を有するフレーム画像データである。
【００１２】
立体画像撮像装置１０は、例えば、動画像を撮像して記録するデジタルビデオカメラである。立体画像撮像装置１０は、例えば６０フレーム／秒または３０フレーム／秒の所望のフレームレートで視差画像群および平面画像をそれぞれ撮像し、一連の動画像ごとに、一群の視差画像群データおよび一群の平面画像データを記録する。
ここで、一群の視差画像群データは、複数の時系列の視差画像群データのことであり、一群の平面画像データは、複数の時系列の平面画像データのことである。
【００１３】
なお、立体画像撮像装置１０は、例えば、静止画像を撮像して記録するデジタルスチルカメラとして機能することもできる。この場合、立体画像撮像装置１０は、一静止画像ごとに、一対の視差画像群データおよび平面画像データを記録する。
本実施形態では、立体画像撮像装置１０が動画像を撮像して記録する例について具体的に説明する。
【００１４】
立体画像表示装置２０は、立体画像撮像装置１０に記録された視差画像群データと平面画像データとをそれぞれ読み込み、視差画像群データを視差画像群の光束に変換するとともに、平面画像データを平面画像の光束に変換し、これら視差画像群の光束と平面画像の光束とを１系統の光束にあわせて出力する装置である。立体画像表示装置２０が出力する光束によって再現される再現像Ｉは、インテグラル・フォトグラフィ方式による立体像と二次元の平面像との合成像であり、観察者には立体像として知覚される。知覚とは、観察者の眼球を通して網膜に結像した像が電気的信号に変換され、その信号が視神経を通して脳に到達し、脳の作用により立体像を認識することである。
【００１５】
立体画像表示装置２０は、例えば、立体動画像を再生して表示するディスプレイ装置である。立体画像表示装置２０は、立体画像撮像装置１０から一連の動画像ごとに一群の視差画像群データおよび一群の平面画像データを取得し、撮像の際のフレームレートと同一のフレームレートで再生して表示する。
ここでも、一群の視差画像群データは、複数の時系列の視差画像群データのことであり、一群の平面画像データは、複数の時系列の平面画像データのことである。
【００１６】
なお、立体画像表示装置２０は、例えば、立体静止画像を表示するディスプレイ装置として機能することもできる。この場合、立体画像表示装置２０は、立体画像撮像装置１０から一静止画像ごとに一対の視差画像群データおよび平面画像データを取得して表示する。
本実施形態では、立体画像表示装置２０が立体動画像を再生して表示する例について具体的に説明する。
【００１７】
次に、立体画像撮像装置１０の詳細な機能構成について説明する。
立体画像撮像装置１０は、撮像レンズ１１０と、ビームスプリッタ１２０と、撮像系レンズアレイ１３０と、視差画像群撮像素子１４０と、平面画像撮像素子１５０と、視差画像群記録制御部１６０と、平面画像記録制御部１７０と、記録部１８０とを備える。
ただし、図１において、撮像レンズ１１０とビームスプリッタ１２０と撮像系レンズアレイ１３０と視差画像群撮像素子１４０と平面画像撮像素子１５０とは、主に光路を説明するために模式的に配置して表したものである。
【００１８】
撮像レンズ１１０は、被写体Ｏから到来する光束を集光するレンズ光学系である。撮像レンズ１１０は、対物レンズや集束レンズにより構成される。撮像レンズ１１０が集光した光束は、ビームスプリッタ１２０に入射する。
【００１９】
ビームスプリッタ１２０は、撮像レンズ１１０からの入射光束を２系統（第１系統の光束および第２系統の光束）に分離して出射する光束分離器である。本実施形態におけるビームスプリッタ１２０は、二つの直角プリズムを貼り合わせてキューブ状に形成したキューブビームスプリッタである。キューブビームスプリッタを構成する二つの直角プリズムの接合面１２１には、例えば誘電体多層膜が蒸着されている。ビームスプリッタ１２０は、入射光束の一部を、接合面１２１を通して第１系統の光束として出射するとともに、入射光束の他の一部を、接合面１２１で反射させて第２系統の光束として出射する。
【００２０】
図１において、撮像レンズ１１０を通からビームスプリッタ１２０に入力されている一点鎖線の矢印は、撮像レンズ１１０の光軸上の入射光線を表している。ビームスプリッタ１２０の接合面１２１を通過して直進している破線の矢印は、前記光軸上の入射光線のうちの第１系統の光線（第１系統の光束の光線）を表している。また、ビームスプリッタ１２０の接合面１２１で進行方向が変わり、前記光軸上の入射光線に対して直角に進行している実線の矢印は、前記光軸上の入射光線のうちの第２系統の光線（第２系統の光束の光線）を表している。
【００２１】
なお、ビームスプリッタ１２０には、ハーフミラーや偏光ビームスプリッタを適用することもできる。
【００２２】
撮像系レンズアレイ１３０は、多数の要素レンズを、各要素レンズの光軸が平行となるように二次元状に配列して形成したレンズ板である。撮像系レンズアレイ１３０は、ビームスプリッタ１２０が出射する第１系統の光束を各要素レンズで集光して視差画像群撮像素子１４０に出射する。
【００２３】
視差画像群撮像素子１４０は、撮像面を有し、この撮像面に結像する光束を撮像して画像データに変換する光電変換素子である。具体的には、視差画像群撮像素子１４０は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサやＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサ等の固体撮像素子である。視差画像群撮像素子１４０は、撮像系レンズアレイ１３０の各要素レンズで集光された光束が撮像面に結像する位置に設けられる。視差画像群撮像素子１４０の撮像面に結像する像は、視差画像群である。視差画像群撮像素子１４０は、撮像系レンズアレイ１３０を通して得られる複数の光束を撮像し視差画像群データを出力する。
【００２４】
平面画像撮像素子１５０は、撮像面を有し、この撮像面に結像する光束を撮像して画像データに変換する光電変換素子である。具体的には、平面画像撮像素子１５０は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサやＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサ等の固体撮像素子である。平面画像撮像素子１５０は、ビームスプリッタ１２０が出射する第２系統の光束が撮像面に結像する位置に設けられる。平面画像撮像素子１５０の撮像面に結像する像は、平面画像である。平面画像撮像素子１５０は、第２系統の光束を撮像して平面画像データを出力する。
【００２５】
視差画像群記録制御部１６０は、視差画像群撮像素子１４０が出力する視差画像群データを取り込んで記録部１８０に記録させる。
平面画像記録制御部１７０は、平面画像撮像素子１５０が出力する平面画像データを取り込んで記録部１８０に記録させる。
視差画像群記録制御部１６０および平面画像記録制御部１７０は、一連の動画像ごとに、一群の視差画像群データおよび一群の平面画像データを記録部１８０に記録させる。このとき、視差画像群記録制御部１６０は、その動画像に含まれる視差画像群データをタイムスタンプ付の一群のフレーム画像データとして記録部１８０に記録し、平面画像記録制御部１７０は、その動画像に含まれる平面画像データをタイムスタンプ付の一群のフレーム画像データとして記録部１８０に記録する。これら一対のフレーム画像データはタイムスタンプによって互いに対応付けられているが、タイムスタンプ以外の手段でこれらを互いに対応付けるようにしてもよい。
【００２６】
記録部１８０は、上記のとおり視差画像群データおよび平面画像データを記録する、磁気ハードディスク装置やメモリカード等の記録装置である。
【００２７】
立体画像撮像装置１０において、光束を分離する接合面１２１上の一点から撮像系レンズアレイ１３０の中心面までの距離Ｌａと、上記一点から平面画像撮像素子１５０の撮像面までの距離Ｌｂとの比率をＡ＝Ｌａ／Ｌｂとすると、Ａが“１”となるように立体画像撮像装置１０は構成される。
【００２８】
次に、立体画像表示装置２０の詳細な機能構成について説明する。
立体画像表示装置２０は、取得部２１０と、視差画像群再生部２２０と、平面画像再生部２３０と、視差画像群表示素子２４０と、表示系レンズアレイ２５０と、平面画像表示素子２６０と、ビームミキサ２７０とを備える。
ただし、図１において、視差画像群表示素子２４０と表示系レンズアレイ２５０と平面画像表示素子２６０とビームミキサ２７０とは、主に光路を説明するために模式的に配置して表したものである。
【００２９】
取得部２１０は、立体画像撮像装置１０の記録部１８０から一連の動画像における一群の視差画像群データおよび一群の平面画像データを読み込んで取得し、これらのうち、一群の視差画像群データを視差画像群再生部２２０に供給するとともに、一群の平面画像データを平面画像再生部２３０に供給する。
【００３０】
なお、取得部２１０は、記録部１８０から一対の視差画像群データおよび平面画像データを順次取り込んで一時記憶（バッファリング）しながら、これら一時記憶された一対の視差画像群データおよび平面画像データをＦＩＦＯ（Ｆｉｒｓｔ−Ｉｎ Ｆｉｒｓｔ−Ｏｕｔ）形式で読み出して視差画像群再生部２２０と平面画像再生部２３０とのそれぞれに供給するようにしてもよい。言い換えると、取得部２１０が記録部１８０から読み込む速度と、取得部２１０が視差画像群再生部２２０および平面画像再生部２３０に供給する速度との差を、取得部２１０のバッファリングによって吸収するようにしてもよい。
【００３１】
視差画像群再生部２２０は、取得部２１０から供給される一群の視差画像群データを、視差画像群データごとに所定の周期的なタイミングで視差画像群表示素子２４０に供給する。この所定の周期的なタイミングは、立体画像撮像装置１０が撮像した際のフレームレートと同一のフレームレートに基づくタイミング（例えば、撮像時のフレームレートが６０フレーム／秒である場合は、１／６０秒ごと）である。
平面画像再生部２３０は、取得部２１０から供給される一群の平面画像データを、平面画像データごとに上記所定の周期的なタイミングと同一のタイミングで平面画像表示素子２６０に供給する。
つまり、視差画像群再生部２２０と平面画像再生部２３０とは、上記所定の周期的なタイミングで同期しながら、視差画像群再生部２２０が視差画像群データを視差画像群表示素子２４０に供給するとともに、平面画像再生部２３０が平面画像データを平面画像表示素子２６０に供給する。
【００３２】
視差画像群表示素子２４０は、表示面を有し、この表示面に視差画像群再生部２２０から供給される視差画像群データの視差画像群を表示する。具体的には、視差画像群表示素子２４０は、例えば液晶表示素子である。視差画像群表示素子２４０としては、反射型表示素子や透過型表示素子を適用することができる。
【００３３】
表示系レンズアレイ２５０は、多数の要素レンズを、各要素レンズの光軸が平行となるように二次元状に配列して形成したレンズ板である。表示系レンズアレイ２５０は、視差画像群表示素子２４０が表示する視差画像群の光束を各要素レンズで集光してビームミキサ２７０に出射する。
【００３４】
平面画像表示素子２６０は、表示面を有し、この表示面に平面画像再生部２３０から供給される平面画像データの平面画像を表示する。具体的には、平面画像表示素子２６０は、例えば液晶表示素子である。平面画像表示素子２６０としては、反射型表示素子や透過型表示素子を適用することができる。
【００３５】
ビームミキサ２７０は、表示系レンズアレイ２５０からの要素画像群の入射光束と、平面画像表示素子２６０の表示による平面画像の入射光束とを１系統の光束にあわせて出射する光束混合器である。本実施形態におけるビームミキサ２７０は、二つの直角プリズムを貼り合わせてキューブ状に形成したキューブビームミキサである。キューブビームミキサを構成する二つの直角プリズムの接合面２７１には、例えば誘電体多層膜が蒸着されている。ビームミキサ２７０は、表示系レンズアレイ２５０からの要素画像群の入射光束のうち接合面２７１を通過する第１光束と、平面画像表示素子２６０の表示による平面画像の入射光束のうち接合面２７１で反射する第２光束とを合成して出射する。
【００３６】
図１において、表示系レンズアレイ２５０からビームミキサ２７０に入力されている波線の矢印は、表示系レンズアレイ２５０の中心軸上の入射光線を表している。平面画像表示素子２６０からビームミキサ２７０に入力されている実線の矢印は、平面画像表示素子２６０の表示面の中心軸上の入射光線を表している。これら破線の矢印と実線の矢印との接点から進行している一点鎖線の矢印は、第１光線（第１光束の光線）と第２光線（第２光束の光線）とをあわせた光束を表している。
【００３７】
なお、ビームミキサ２７０には、ハーフミラーや偏光ビームスプリッタを適用することもできる。
【００３８】
立体画像表示装置２０において、表示系レンズアレイ２５０の中心面から２系統の光束を併せる接合面２７１上の一点までの距離Ｌｃと、上記一点から平面画像表示素子２６０の表示面から上記一点までの距離Ｌｄとの比率をＢ＝Ｌｃ／Ｌｄとすると、Ｂが“１”となるように立体画像表示装置２０は構成される。
【００３９】
なお、上記説明においては、立体画像撮像装置１０における比率Ａと、立体画像表示装置２０における比率Ｂとがともに“１”である場合について述べたが、比率Ａおよび比率Ｂは“１”でなくてもよく、比率Ａと比率Ｂとが一致していればよい。このように比率Ａと比率Ｂとを同一値とすることにより、再現像Ｉは正しく再現される。
比率Ａ＝比率Ｂ＞１である場合、要素画像群撮像素子１４０が撮像する各要素画像は、平面画像撮像素子１５０が撮像する平面画像と比べて被写体Ｏからの距離が相対的に長くなる。つまり、比率Ａ＝比率Ｂ＞１である場合、各要素画像の撮像位置は平面画像の撮像位置と比べて被写体Ｏから相対的に遠くなる。すなわち、比率Ａ＝比率Ｂ＞１である場合に、立体画像表示装置２０が表示する再現像Ｉの特に表示系レンズアレイ２５０上に位置する像は、平面像より遠くに位置する。よって、比率Ａ＝比率Ｂ＞１である場合は、観察者から見る奥行き方向における手前側の解像度が高い。
また、比率Ａ＝比率Ｂ＜１である場合、要素画像群撮像素子１４０が撮像する各要素画像は、平面画像撮像素子１５０が撮像する平面画像と比べて被写体Ｏからの距離が相対的に短くなる。つまり、比率Ａ＝比率Ｂ＜１である場合、各要素画像の撮像位置は平面画像の撮像位置と比べて被写体Ｏから相対的に近くなる。すなわち、比率Ａ＝比率Ｂ＜１である場合に、立体画像表示装置２０が表示する再現像Ｉの特に表示系レンズアレイ２５０上に位置する像は、平面像より近くに位置する。よって、比率Ａ＝比率Ｂ＜１である場合は、観察者から見る奥行き方向における奥側の解像度が高い。
【００４０】
次に、撮像系レンズアレイ１３０および表示系レンズアレイ２５０について説明する。撮像系レンズアレイ１３０および表示系レンズアレイ２５０は、主にデルタ配列または正方格子配列により要素レンズを配列する。
図２は、撮像系レンズアレイ１３０および表示系レンズアレイ２５０を光束の入射側から見たときの要素レンズの配列を模式的に表した図である。同図（ａ）はデルタ配列を表した図であり、同図（ｂ）は正方格子配列を表した図である。同図（ａ）のデルタ配列の場合、要素レンズのＸ軸方向のピッチをＲｘとすると、Ｘ軸に直交するＹ軸方向のピッチＲｙは、（√３）×Ｒｘ／２である。また、同図（ｂ）の正方格子配列の場合、要素レンズのＸ軸方向のピッチＲｘとＹ軸方向のピッチＲｙとは等しい。
【００４１】
撮像系レンズアレイ１３０の要素レンズは、屈折率分布レンズ（ＧＲＩＮ Ｌｅｎｓ；Ｇｒａｄｉｅｎｔ Ｉｎｄｅｘ Ｌｅｎｓ）を用いて構成してもよい。撮像系レンズアレイ１３０の要素レンズを屈折率分布レンズとすることにより、再生像である立体像の奥行きが被写体Ｏに対して反転する逆視現象を解消することができる。
下記の式（１）に示すように、屈折率分布レンズは、半径方向に屈折率が変化するラジアルタイプである。この屈折率分布レンズの屈折率ｎは、レンズの中心位置で最大となり、外側ほど減少する特性を有する。ただし、ｎ０は中心軸上の屈折率、Ａは要素レンズの材料によって定まる屈折率分布定数、ｒは中心からの半径方向の距離である。
【００４２】
【数１】
【００４３】
屈折率分布レンズの光軸方向の長さは、当該屈折率分布レンズの端面に無限遠物体の正立実像を結像させることのできる長さとする。この長さについて具体的に説明する。
図３は、屈折率分布レンズによる要素レンズの側面図であり、要素レンズ中の光路を模式的に表した図である。同図に示すように、屈折率分布レンズによる要素レンズ３の光軸方向の長さＬを、蛇行周期Ｔの４分の３倍（０．７５ピッチ）とすることにより、要素レンズ３は、十分遠方に位置する被写体Ｏに対して、出射端面に小さな正立実像Ｉを得ることができる。
【００４４】
よって、撮像用レンズアレイ１３０をラジアルタイプの屈折率分布レンズで構成する場合、撮像用レンズアレイ１３０の要素レンズ群の出射端面に要素画像群撮像素子１４０の撮像面を配置する。
なお、上記のように撮像系レンズアレイ１３０の直後に視差画像群撮像素子１４０を配置する構成においては、撮像系レンズアレイ１３０の隣り合う要素レンズの隙間に遮光部材を設けるのがよい。例えば、撮像系レンズアレイ１３０を構成する要素レンズ間に黒色の樹脂等を充填する。このように遮光部材を設けることにより、一の要素レンズを通した光束が隣り合う他の要素レンズを通した光束に漏れ入ることを防止するまたは少なくすることができる。これにより、要素画像群撮像素子１４０が撮像する要素画像群について黒浮き（フレア現象）による画質劣化を防止するまたは抑制することができる。
【００４５】
立体画像撮像装置１０は、被写体Ｏから到来する光束を２系統の光束に分離し、第１系統の光束をインテグラル・フォトグラフィ方式の視差画像群データとして記録するとともに、第２系統の光束を平面画像データとして記録する。すなわち、立体画像撮像装置１０は、被写体Ｏの立体感を表す奥行情報が含まれる視差画像群データを記録するとともに、被写体Ｏの高精細な解像度が含まれる平面画像データを記録する。
【００４６】
以上説明したように、立体画像表示装置２０は、立体画像撮像装置１０が記録した視差画像群データと平面画像データとを読み込み、視差画像群データから視差画像群の光束に変換するとともに、平面画像データから平面画像の光束に変換し、これら２系統の光束をあわせて出力する。すなわち、立体画像表示装置２０は、インテグラル・フォトグラフィ方式の立体像と高精細な平面像とを合成した再現像Ｉを表示する。
立体画像表示装置２０が表示する再現像Ｉは、奥行感があり且つ高精細な立体像である。ただし、再現像Ｉは立体像と平面像とが合成された像であるため、観察者が正面から再現像Ｉを観察した場合に得る立体感は、立体像における立体感と平面像における立体感の中間的なものとなる。また、観察者が再現像Ｉを観察する場合に得る高精細感は、立体像における高精細感と平面像における高精細感の中間的なものとなる。言い換えると、観察者が知覚する再現像Ｉは、立体感を保ちながら、従来のインテグラル・フォトグラフィ方式と比べて高精細な像とすることができる。
【００４７】
［第２の実施の形態］
本発明の第２実施形態は、再現像の奥行感を調整することのできる立体画像撮像表示装置である。
図４は、本実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。
なお、本実施形態において、第１実施形態と同一の構成については、同一の符号を付してその説明を省略する。
同図に示すように、立体画像撮像表示装置１ａは、立体画像撮像装置１０と立体画像表示装置２０ａとを含んで構成される。
【００４８】
立体画像表示装置２０ａは、立体画像撮像装置１０に記録された視差画像群データと平面画像データとをそれぞれ読み込み、視差画像群データに第１の重み付けをして視差画像群の光束に変換するとともに、平面画像データに第２の重み付けをして平面画像の光束に変換し、これら視差画像群の光束と平面画像の光束とを１系統の光束にあわせて出力する装置である。立体画像表示装置２０ａが出力する光束によって再現される再現像Ｉは、インテグラル・フォトグラフィ方式による立体像と二次元の平面像との合成像であり、観察者には立体像として知覚される。
立体画像表示装置２０ａは、第１および第２の重み付けによって、再現像Ｉの立体感と解像度とのトレードオフを調整するものである。
【００４９】
立体画像表示装置２０ａの機能構成について説明する。
立体画像表示装置２０ａは、第１実施形態における立体画像表示装置２０に対して、信号レベル変更制御部３１０が新たに追加されるとともに、視差画像群再生部２２０が視差画像群再生部２２０ａに変更され、平面画像生成部２３０が平面画像再生部２３０ａに変更されたものである。
【００５０】
信号レベル変更制御部３１０は、視差画像群データのレベル値を変化させるための変更重み係数Ｗ１と、平面画像データのレベル値を変化させるための変更重み係数Ｗ２とをそれぞれ計算し、変更重み係数Ｗ１を視差画像群再生部２２０ａに供給するとともに、変更重み係数Ｗ２を平面画像再生部２３０ａに供給する。
変更重み係数Ｗ１は、その値が大きいほど、視差画像群データのレベル値を大きくする係数である。変更重み係数Ｗ２は、その値が大きいほど、平面画像データのレベル値を大きくする係数である。例えば、信号レベル変更制御部３１０は、Ｗ１＝Ｓ，Ｗ２＝１−Ｓ，０≦Ｓ≦１を計算することにより、０≦Ｓ≦１の範囲において、Ｓが小さいほど変更重み係数Ｗ２が相対的に大きくなり、Ｓが大きいほど変更重み係数Ｗ１が相対的に大きくなる。
【００５１】
信号レベル変更制御部３１０は、表示されるシーンに応じて変更重み係数Ｗ１および変更重み係数Ｗ２を変更する。例えば、信号レベル変更制御部３１０は、立体画像表示装置２０ａの外部から供給されるシーンチェンジのタイミングを示す信号にしたがって、切り替わったシーンに適した新たな変更重み係数Ｗ１および変更重み係数Ｗ２の供給を外部から受けて取り込み、これらの新たな変更重み係数Ｗ１および変更重み係数Ｗ２で現在の変更重み係数Ｗ１および変更重み係数Ｗ２を更新する。シーンチェンジの検出は、フレーム画像全体の輝度変化の検出やオブジェクト検出等の従来技術を用いて、外部装置によって行われる。
【００５２】
視差画像群再生部２２０ａは、信号レベル変更制御部３１０から供給される変更重み係数Ｗ１に基づいて、取得部２１０から供給される視差画像群データのレベル値を変更する。具体的には、例えば、視差画像群再生部２２０ａは、変更重み係数Ｗ１と取得部２１０から供給される視差画像群データの輝度値とを掛け合わせる。そして、視差画像群再生部２２０ａは、変更後の視差画像群データを、第１実施形態と同様に所定の周期的なタイミングで視差画像群表示素子２４０に供給する。
【００５３】
平面画像再生部２３０ａは、信号レベル変更制御部３１０から供給される変更重み係数Ｗ２に基づいて、取得部２１０から供給される平面画像データのレベル値を変更する。具体的には、例えば、平面画像再生部２３０ａは、変更重み係数Ｗ２と取得部２１０から供給される平面画像データの輝度値とを掛け合わせる。そして、平面画像再生部２３０ａは、変更後の平面画像データを、上記所定の周期的なタイミングと同一のタイミングで平面画像表示素子２６０に供給する。
【００５４】
すなわち、信号レベル変更制御部３１０と視差画像群再生部２２０ａと平面画像再生部２３０ａとを併せた機能は、視差画像群データのレベル値と平面画像データのレベル値とを変更する信号レベル変更部の機能を含むものである。
【００５５】
立体画像表示装置２０ａが表示する再現像Ｉは、第１実施形態と同様に奥行感があり且つ高精細な立体像である。再現像Ｉは立体像と平面像とが合成された像であるため、観察者が正面から観察する場合に得る立体感と解像度感とは中間的なものとなる。しかし、変更重み係数Ｗ１および変更重み係数Ｗ２に基づく要素画像群データと平面画像データとのレベル値の調整によって、知覚する立体感と解像度感とは変化する。
【００５６】
具体的には、立体画像表示装置２０ａが変更重み係数Ｗ１を変更重み係数Ｗ２よりも大きくして、要素画像群データのレベル値を平面画像データのレベル値よりも大きくするにしたがって、観察者が知覚する立体感は強くなる。例えば、立体画像表示装置２０ａが変更重み係数Ｗ１を変更重み係数Ｗ２よりも大きくして、要素画像群データの輝度値を平面画像データの輝度値よりも大きくするにしたがって、立体像の輝度が平面像の輝度よりも高くなり、よって立体感が強くなる。
一方、立体画像表示装置２０ａが変更重み係数Ｗ２を変更重み係数Ｗ１よりも大きくして、平面画像データのレベル値を要素画像群データのレベル値よりも大きくするにしたがって、観察者が知覚する解像度は高くなる。例えば、立体画像表示装置２０ａが変更重み係数Ｗ２を変更重み係数Ｗ１よりも大きくして、平面画像データの輝度値を要素画像群データの輝度値よりも大きくするにしたがって、平面像の輝度が立体像の輝度よりも高くなり、よって解像度感が高くなる。
【００５７】
以上説明したように、立体画像表示装置２０ａは、立体画像撮像装置１０が記録した視差画像群データと平面画像データとを読み込み、視差画像群データに第１の重み付けをして視差画像群の光束に変換するとともに、平面画像データに第２の重み付けをして平面画像の光束に変換し、これら２系統の光束を合わせて出力する。立体画像表示装置２０ａは、表示するシーンに応じて第１および第２の重み付けを決定する。これにより、立体画像表示装置２０ａは、表示するシーンにしたがって、第１および第２の重み付けによって立体感と解像度とのトレードオフを任意に調整することができる。
【００５８】
なお、上述した第２実施形態において、信号レベル変更制御部３１０は、平面画像データの画像の複雑さに応じて変更重み係数Ｗ１および変更重み係数Ｗ２を変更してもよい。例えば、信号レベル変更制御部３１０は、平面画像データを解析し、この平面画像データが精細な画像、言い換えると、平面画像内で輝度および色またはいずれかの変化が大きな画像であると判定した場合は、変更重み係数Ｗ２を変更重み係数Ｗ１よりも大きくする。これにより、立体画像表示装置２０ａは、平面像の輝度を立体像の輝度よりも高くすることができ、解像度感の高い再現像Ｉを表示することができる。
また、信号レベル変更制御部３１０は、要素画像群データの奥行きの度合いに応じて変更重み係数Ｗ１および変更重み係数Ｗ２を変更してもよい。例えば、信号レベル変更制御部３１０は、要素画像群データから奥行き情報を抽出し、奥行きが大きな画像、言い換えると立体感の際立つ画像であると判定した場合は、変更重み係数Ｗ１を変更重み係数Ｗ２よりも大きくする。これにより、立体画像表示装置２０ａは、立体像の輝度を平面像の輝度よりも高くすることができ、立体感の強い再現像Ｉを表示することができる。
【００５９】
以上、本発明の実施の形態について図面を参照して詳述したが、具体的な構成はその実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計等も含まれる。
【符号の説明】
【００６０】
１，１ａ 立体画像撮像表示装置
１０ 立体画像撮像装置
２０，２０ａ 立体画像表示装置
１１０ 撮像レンズ
１２０ ビームスプリッタ
１２１ 接合面
１３０ 撮像系レンズアレイ
１４０ 視差画像群撮像素子
１５０ 平面画像撮像素子
１６０ 視差画像群記録制御部
１７０ 平面画像記録制御部
１８０ 記録部
２１０ 取得部
２２０，２２０ａ 視差画像群再生部
２３０，２３０ａ 平面画像再生部
２４０ 視差画像群表示素子
２５０ 表示系レンズアレイ
２６０ 平面画像表示素子
２７０ ビームミキサ
２７１ 接合面
３１０ 信号レベル変更制御部
【技術分野】
【０００１】
本発明は、立体画像撮像装置、立体画像表示装置、および立体画像撮像表示装置に関する。
【背景技術】
【０００２】
多数の要素レンズを配列し構成したレンズアレイを撮影装置と表示装置との両方に用いて立体画像を撮影および再生するインテグラル・フォトグラフィ（Ｉｎｔｅｇｒａｌ Ｐｈｏｔｏｇｒａｐｈｙ）方式が知られている（例えば、特許文献１参照）。このインテグラル・フォトグラフィ方式では、撮影時においては、撮影装置が撮影系レンズアレイを介してとらえた被写体像を撮像する。撮影系レンズアレイを通して得られる撮像画像には、互いに視差がある多数の要素画像が含まれる。要素画像とは、要素レンズ単体を通して得られる画像である。そして、表示時においては、表示面側に表示系レンズアレイを配置した表示装置が、上記の撮像画像を表示する。これにより、観察者は、表示系レンズアレイを通して結像される多数の要素画像による被写体像を立体的に観察することができる。
【０００３】
インテグラル・フォトグラフィ方式では、撮影系レンズアレイから近距離にある被写体についての像の解像度は、撮影系レンズアレイの要素レンズの数（密度）に比例して変化する。すなわち、撮影系レンズアレイから近距離にある被写体についての像の解像度を高くするためには、要素レンズの配置密度が高い撮影系レンズアレイを用いる必要がある。
また、撮影系レンズアレイから遠距離にある被写体についての像の解像度は、各要素画像を構成する画素の画素数（要素画像における画素密度）に依存する。すなわち、撮影系レンズアレイから遠距離にある被写体についての像の解像度を高くするためには、各要素画像の画素密度が高くなるように撮像可能な高精細の撮像素子を用いる必要がある。
【０００４】
また、表示系レンズアレイから近距離の位置に結像する像の解像度は、表示系レンズアレイの要素レンズの数に比例して変化する。すなわち、表示系レンズアレイから近距離の位置に結像する像の解像度を高くするためには、要素レンズの配置密度が高い表示系レンズアレイを用いる必要がある。
また、表示系レンズアレイから遠距離の位置に結像する像の解像度は、各要素画像を構成する画素の画素数に依存する。すなわち、表示系レンズアレイから遠距離の位置に結像する像の解像度を高くするためには、各要素画像の画素密度が高くなるように表示可能な高精細の表示素子を用いる必要がある。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００２−２２８９７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
したがって、インテグラル・フォトグラフィ方式において、撮像解像度および表示解像度を高めようとすると、要素レンズの配置密度が高い撮影系レンズアレイおよび表示系レンズアレイを用い、且つ要素画像の解像度を高くすることが必要となる。しかしながら、その場合に、要求する撮像解像度および表示解像度に見合う画素密度の要素画像を得ることのできる撮像素子および表示素子は現状ではなく、従来のインテグラル・フォトグラフィ方式では、高精細な立体画像を再現することができていない。
そこで、本発明は、上記問題を解決するためになされたものであり、インテグラル・フォトグラフィ方式において、高精細な立体画像を撮影および表示することができる、立体画像撮像装置、立体画像表示装置、および立体画像撮像表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
［１］上記の課題を解決するため、本発明の一態様である立体画像撮像装置は、被写体から到来する光束を２系統に分離するビームスプリッタと、前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換するレンズアレイと、前記レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、を備えることを特徴とする。
［２］上記の課題を解決するため、本発明の一態様である立体画像表示装置は、それぞれ同一被写体の画像データであり、互いに視差がある視差画像群データと二次元の平面像である平面画像データとを取得する取得部と、前記取得部が取得した前記視差画像群データを表示する視差画像群表示素子と、前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換するレンズアレイと、前記取得部が取得した前記平面画像データを表示する平面画像表示素子と、前記レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、を備えることを特徴とする。
［３］上記［２］記載の立体画像表示装置において、前記視差画像群データのレベル値と前記平面画像データのレベル値との重みを変更する信号レベル変更部をさらに備えることを特徴する。
［４］上記の課題を解決するため、本発明の一態様である立体画像撮像表示装置は、被写体から到来する光束を２系統に分離するビームスプリッタと、前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換する撮像系レンズアレイと、前記撮像系レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、前記視差画像群撮像素子が得た前記視差画像群を表示する視差画像群表示素子と、前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換する表示系レンズアレイと、前記平面画像撮像素子が得た前記平面画像を表示する平面画像表示素子と、前記表示系レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、を備えることを特徴とする。
【発明の効果】
【０００８】
インテグラル・フォトグラフィ方式において、高精細な立体画像を撮影および表示することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の第１実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。
【図２】撮像系レンズアレイおよび表示系レンズアレイを光束の入射側から見たときの要素レンズの配列を模式的に表した図である。
【図３】屈折率分布レンズによる要素レンズの側面図であり、要素レンズ中の光路を模式的に表した図である。
【図４】本発明の第２実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。
【発明を実施するための形態】
【００１０】
以下、本発明を実施するための形態について、図面を参照して詳細に説明する。
［第１の実施の形態］
図１は、本発明の第１実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。同図に示すように、立体画像撮像表示装置１は、立体画像撮像装置１０と立体画像表示装置２０とを含んで構成される。
【００１１】
立体画像撮像装置１０は、被写体Ｏから到来する光束を２系統（第１系統の光束および第２系統の光束）に分離し、第１系統の光束を撮像して得られるインテグラル・フォトグラフィ方式による視差画像群データを記録するとともに、第２系統の光束を撮像して得られる平面画像データを記録する装置である。視差画像群データは、互いに視差がある視差画像群を有するフレーム画像データである。平面画像データは、単一の二次元的な画像（平面画像）を有するフレーム画像データである。
【００１２】
立体画像撮像装置１０は、例えば、動画像を撮像して記録するデジタルビデオカメラである。立体画像撮像装置１０は、例えば６０フレーム／秒または３０フレーム／秒の所望のフレームレートで視差画像群および平面画像をそれぞれ撮像し、一連の動画像ごとに、一群の視差画像群データおよび一群の平面画像データを記録する。
ここで、一群の視差画像群データは、複数の時系列の視差画像群データのことであり、一群の平面画像データは、複数の時系列の平面画像データのことである。
【００１３】
なお、立体画像撮像装置１０は、例えば、静止画像を撮像して記録するデジタルスチルカメラとして機能することもできる。この場合、立体画像撮像装置１０は、一静止画像ごとに、一対の視差画像群データおよび平面画像データを記録する。
本実施形態では、立体画像撮像装置１０が動画像を撮像して記録する例について具体的に説明する。
【００１４】
立体画像表示装置２０は、立体画像撮像装置１０に記録された視差画像群データと平面画像データとをそれぞれ読み込み、視差画像群データを視差画像群の光束に変換するとともに、平面画像データを平面画像の光束に変換し、これら視差画像群の光束と平面画像の光束とを１系統の光束にあわせて出力する装置である。立体画像表示装置２０が出力する光束によって再現される再現像Ｉは、インテグラル・フォトグラフィ方式による立体像と二次元の平面像との合成像であり、観察者には立体像として知覚される。知覚とは、観察者の眼球を通して網膜に結像した像が電気的信号に変換され、その信号が視神経を通して脳に到達し、脳の作用により立体像を認識することである。
【００１５】
立体画像表示装置２０は、例えば、立体動画像を再生して表示するディスプレイ装置である。立体画像表示装置２０は、立体画像撮像装置１０から一連の動画像ごとに一群の視差画像群データおよび一群の平面画像データを取得し、撮像の際のフレームレートと同一のフレームレートで再生して表示する。
ここでも、一群の視差画像群データは、複数の時系列の視差画像群データのことであり、一群の平面画像データは、複数の時系列の平面画像データのことである。
【００１６】
なお、立体画像表示装置２０は、例えば、立体静止画像を表示するディスプレイ装置として機能することもできる。この場合、立体画像表示装置２０は、立体画像撮像装置１０から一静止画像ごとに一対の視差画像群データおよび平面画像データを取得して表示する。
本実施形態では、立体画像表示装置２０が立体動画像を再生して表示する例について具体的に説明する。
【００１７】
次に、立体画像撮像装置１０の詳細な機能構成について説明する。
立体画像撮像装置１０は、撮像レンズ１１０と、ビームスプリッタ１２０と、撮像系レンズアレイ１３０と、視差画像群撮像素子１４０と、平面画像撮像素子１５０と、視差画像群記録制御部１６０と、平面画像記録制御部１７０と、記録部１８０とを備える。
ただし、図１において、撮像レンズ１１０とビームスプリッタ１２０と撮像系レンズアレイ１３０と視差画像群撮像素子１４０と平面画像撮像素子１５０とは、主に光路を説明するために模式的に配置して表したものである。
【００１８】
撮像レンズ１１０は、被写体Ｏから到来する光束を集光するレンズ光学系である。撮像レンズ１１０は、対物レンズや集束レンズにより構成される。撮像レンズ１１０が集光した光束は、ビームスプリッタ１２０に入射する。
【００１９】
ビームスプリッタ１２０は、撮像レンズ１１０からの入射光束を２系統（第１系統の光束および第２系統の光束）に分離して出射する光束分離器である。本実施形態におけるビームスプリッタ１２０は、二つの直角プリズムを貼り合わせてキューブ状に形成したキューブビームスプリッタである。キューブビームスプリッタを構成する二つの直角プリズムの接合面１２１には、例えば誘電体多層膜が蒸着されている。ビームスプリッタ１２０は、入射光束の一部を、接合面１２１を通して第１系統の光束として出射するとともに、入射光束の他の一部を、接合面１２１で反射させて第２系統の光束として出射する。
【００２０】
図１において、撮像レンズ１１０を通からビームスプリッタ１２０に入力されている一点鎖線の矢印は、撮像レンズ１１０の光軸上の入射光線を表している。ビームスプリッタ１２０の接合面１２１を通過して直進している破線の矢印は、前記光軸上の入射光線のうちの第１系統の光線（第１系統の光束の光線）を表している。また、ビームスプリッタ１２０の接合面１２１で進行方向が変わり、前記光軸上の入射光線に対して直角に進行している実線の矢印は、前記光軸上の入射光線のうちの第２系統の光線（第２系統の光束の光線）を表している。
【００２１】
なお、ビームスプリッタ１２０には、ハーフミラーや偏光ビームスプリッタを適用することもできる。
【００２２】
撮像系レンズアレイ１３０は、多数の要素レンズを、各要素レンズの光軸が平行となるように二次元状に配列して形成したレンズ板である。撮像系レンズアレイ１３０は、ビームスプリッタ１２０が出射する第１系統の光束を各要素レンズで集光して視差画像群撮像素子１４０に出射する。
【００２３】
視差画像群撮像素子１４０は、撮像面を有し、この撮像面に結像する光束を撮像して画像データに変換する光電変換素子である。具体的には、視差画像群撮像素子１４０は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサやＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサ等の固体撮像素子である。視差画像群撮像素子１４０は、撮像系レンズアレイ１３０の各要素レンズで集光された光束が撮像面に結像する位置に設けられる。視差画像群撮像素子１４０の撮像面に結像する像は、視差画像群である。視差画像群撮像素子１４０は、撮像系レンズアレイ１３０を通して得られる複数の光束を撮像し視差画像群データを出力する。
【００２４】
平面画像撮像素子１５０は、撮像面を有し、この撮像面に結像する光束を撮像して画像データに変換する光電変換素子である。具体的には、平面画像撮像素子１５０は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサやＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサ等の固体撮像素子である。平面画像撮像素子１５０は、ビームスプリッタ１２０が出射する第２系統の光束が撮像面に結像する位置に設けられる。平面画像撮像素子１５０の撮像面に結像する像は、平面画像である。平面画像撮像素子１５０は、第２系統の光束を撮像して平面画像データを出力する。
【００２５】
視差画像群記録制御部１６０は、視差画像群撮像素子１４０が出力する視差画像群データを取り込んで記録部１８０に記録させる。
平面画像記録制御部１７０は、平面画像撮像素子１５０が出力する平面画像データを取り込んで記録部１８０に記録させる。
視差画像群記録制御部１６０および平面画像記録制御部１７０は、一連の動画像ごとに、一群の視差画像群データおよび一群の平面画像データを記録部１８０に記録させる。このとき、視差画像群記録制御部１６０は、その動画像に含まれる視差画像群データをタイムスタンプ付の一群のフレーム画像データとして記録部１８０に記録し、平面画像記録制御部１７０は、その動画像に含まれる平面画像データをタイムスタンプ付の一群のフレーム画像データとして記録部１８０に記録する。これら一対のフレーム画像データはタイムスタンプによって互いに対応付けられているが、タイムスタンプ以外の手段でこれらを互いに対応付けるようにしてもよい。
【００２６】
記録部１８０は、上記のとおり視差画像群データおよび平面画像データを記録する、磁気ハードディスク装置やメモリカード等の記録装置である。
【００２７】
立体画像撮像装置１０において、光束を分離する接合面１２１上の一点から撮像系レンズアレイ１３０の中心面までの距離Ｌａと、上記一点から平面画像撮像素子１５０の撮像面までの距離Ｌｂとの比率をＡ＝Ｌａ／Ｌｂとすると、Ａが“１”となるように立体画像撮像装置１０は構成される。
【００２８】
次に、立体画像表示装置２０の詳細な機能構成について説明する。
立体画像表示装置２０は、取得部２１０と、視差画像群再生部２２０と、平面画像再生部２３０と、視差画像群表示素子２４０と、表示系レンズアレイ２５０と、平面画像表示素子２６０と、ビームミキサ２７０とを備える。
ただし、図１において、視差画像群表示素子２４０と表示系レンズアレイ２５０と平面画像表示素子２６０とビームミキサ２７０とは、主に光路を説明するために模式的に配置して表したものである。
【００２９】
取得部２１０は、立体画像撮像装置１０の記録部１８０から一連の動画像における一群の視差画像群データおよび一群の平面画像データを読み込んで取得し、これらのうち、一群の視差画像群データを視差画像群再生部２２０に供給するとともに、一群の平面画像データを平面画像再生部２３０に供給する。
【００３０】
なお、取得部２１０は、記録部１８０から一対の視差画像群データおよび平面画像データを順次取り込んで一時記憶（バッファリング）しながら、これら一時記憶された一対の視差画像群データおよび平面画像データをＦＩＦＯ（Ｆｉｒｓｔ−Ｉｎ Ｆｉｒｓｔ−Ｏｕｔ）形式で読み出して視差画像群再生部２２０と平面画像再生部２３０とのそれぞれに供給するようにしてもよい。言い換えると、取得部２１０が記録部１８０から読み込む速度と、取得部２１０が視差画像群再生部２２０および平面画像再生部２３０に供給する速度との差を、取得部２１０のバッファリングによって吸収するようにしてもよい。
【００３１】
視差画像群再生部２２０は、取得部２１０から供給される一群の視差画像群データを、視差画像群データごとに所定の周期的なタイミングで視差画像群表示素子２４０に供給する。この所定の周期的なタイミングは、立体画像撮像装置１０が撮像した際のフレームレートと同一のフレームレートに基づくタイミング（例えば、撮像時のフレームレートが６０フレーム／秒である場合は、１／６０秒ごと）である。
平面画像再生部２３０は、取得部２１０から供給される一群の平面画像データを、平面画像データごとに上記所定の周期的なタイミングと同一のタイミングで平面画像表示素子２６０に供給する。
つまり、視差画像群再生部２２０と平面画像再生部２３０とは、上記所定の周期的なタイミングで同期しながら、視差画像群再生部２２０が視差画像群データを視差画像群表示素子２４０に供給するとともに、平面画像再生部２３０が平面画像データを平面画像表示素子２６０に供給する。
【００３２】
視差画像群表示素子２４０は、表示面を有し、この表示面に視差画像群再生部２２０から供給される視差画像群データの視差画像群を表示する。具体的には、視差画像群表示素子２４０は、例えば液晶表示素子である。視差画像群表示素子２４０としては、反射型表示素子や透過型表示素子を適用することができる。
【００３３】
表示系レンズアレイ２５０は、多数の要素レンズを、各要素レンズの光軸が平行となるように二次元状に配列して形成したレンズ板である。表示系レンズアレイ２５０は、視差画像群表示素子２４０が表示する視差画像群の光束を各要素レンズで集光してビームミキサ２７０に出射する。
【００３４】
平面画像表示素子２６０は、表示面を有し、この表示面に平面画像再生部２３０から供給される平面画像データの平面画像を表示する。具体的には、平面画像表示素子２６０は、例えば液晶表示素子である。平面画像表示素子２６０としては、反射型表示素子や透過型表示素子を適用することができる。
【００３５】
ビームミキサ２７０は、表示系レンズアレイ２５０からの要素画像群の入射光束と、平面画像表示素子２６０の表示による平面画像の入射光束とを１系統の光束にあわせて出射する光束混合器である。本実施形態におけるビームミキサ２７０は、二つの直角プリズムを貼り合わせてキューブ状に形成したキューブビームミキサである。キューブビームミキサを構成する二つの直角プリズムの接合面２７１には、例えば誘電体多層膜が蒸着されている。ビームミキサ２７０は、表示系レンズアレイ２５０からの要素画像群の入射光束のうち接合面２７１を通過する第１光束と、平面画像表示素子２６０の表示による平面画像の入射光束のうち接合面２７１で反射する第２光束とを合成して出射する。
【００３６】
図１において、表示系レンズアレイ２５０からビームミキサ２７０に入力されている波線の矢印は、表示系レンズアレイ２５０の中心軸上の入射光線を表している。平面画像表示素子２６０からビームミキサ２７０に入力されている実線の矢印は、平面画像表示素子２６０の表示面の中心軸上の入射光線を表している。これら破線の矢印と実線の矢印との接点から進行している一点鎖線の矢印は、第１光線（第１光束の光線）と第２光線（第２光束の光線）とをあわせた光束を表している。
【００３７】
なお、ビームミキサ２７０には、ハーフミラーや偏光ビームスプリッタを適用することもできる。
【００３８】
立体画像表示装置２０において、表示系レンズアレイ２５０の中心面から２系統の光束を併せる接合面２７１上の一点までの距離Ｌｃと、上記一点から平面画像表示素子２６０の表示面から上記一点までの距離Ｌｄとの比率をＢ＝Ｌｃ／Ｌｄとすると、Ｂが“１”となるように立体画像表示装置２０は構成される。
【００３９】
なお、上記説明においては、立体画像撮像装置１０における比率Ａと、立体画像表示装置２０における比率Ｂとがともに“１”である場合について述べたが、比率Ａおよび比率Ｂは“１”でなくてもよく、比率Ａと比率Ｂとが一致していればよい。このように比率Ａと比率Ｂとを同一値とすることにより、再現像Ｉは正しく再現される。
比率Ａ＝比率Ｂ＞１である場合、要素画像群撮像素子１４０が撮像する各要素画像は、平面画像撮像素子１５０が撮像する平面画像と比べて被写体Ｏからの距離が相対的に長くなる。つまり、比率Ａ＝比率Ｂ＞１である場合、各要素画像の撮像位置は平面画像の撮像位置と比べて被写体Ｏから相対的に遠くなる。すなわち、比率Ａ＝比率Ｂ＞１である場合に、立体画像表示装置２０が表示する再現像Ｉの特に表示系レンズアレイ２５０上に位置する像は、平面像より遠くに位置する。よって、比率Ａ＝比率Ｂ＞１である場合は、観察者から見る奥行き方向における手前側の解像度が高い。
また、比率Ａ＝比率Ｂ＜１である場合、要素画像群撮像素子１４０が撮像する各要素画像は、平面画像撮像素子１５０が撮像する平面画像と比べて被写体Ｏからの距離が相対的に短くなる。つまり、比率Ａ＝比率Ｂ＜１である場合、各要素画像の撮像位置は平面画像の撮像位置と比べて被写体Ｏから相対的に近くなる。すなわち、比率Ａ＝比率Ｂ＜１である場合に、立体画像表示装置２０が表示する再現像Ｉの特に表示系レンズアレイ２５０上に位置する像は、平面像より近くに位置する。よって、比率Ａ＝比率Ｂ＜１である場合は、観察者から見る奥行き方向における奥側の解像度が高い。
【００４０】
次に、撮像系レンズアレイ１３０および表示系レンズアレイ２５０について説明する。撮像系レンズアレイ１３０および表示系レンズアレイ２５０は、主にデルタ配列または正方格子配列により要素レンズを配列する。
図２は、撮像系レンズアレイ１３０および表示系レンズアレイ２５０を光束の入射側から見たときの要素レンズの配列を模式的に表した図である。同図（ａ）はデルタ配列を表した図であり、同図（ｂ）は正方格子配列を表した図である。同図（ａ）のデルタ配列の場合、要素レンズのＸ軸方向のピッチをＲｘとすると、Ｘ軸に直交するＹ軸方向のピッチＲｙは、（√３）×Ｒｘ／２である。また、同図（ｂ）の正方格子配列の場合、要素レンズのＸ軸方向のピッチＲｘとＹ軸方向のピッチＲｙとは等しい。
【００４１】
撮像系レンズアレイ１３０の要素レンズは、屈折率分布レンズ（ＧＲＩＮ Ｌｅｎｓ；Ｇｒａｄｉｅｎｔ Ｉｎｄｅｘ Ｌｅｎｓ）を用いて構成してもよい。撮像系レンズアレイ１３０の要素レンズを屈折率分布レンズとすることにより、再生像である立体像の奥行きが被写体Ｏに対して反転する逆視現象を解消することができる。
下記の式（１）に示すように、屈折率分布レンズは、半径方向に屈折率が変化するラジアルタイプである。この屈折率分布レンズの屈折率ｎは、レンズの中心位置で最大となり、外側ほど減少する特性を有する。ただし、ｎ０は中心軸上の屈折率、Ａは要素レンズの材料によって定まる屈折率分布定数、ｒは中心からの半径方向の距離である。
【００４２】
【数１】
【００４３】
屈折率分布レンズの光軸方向の長さは、当該屈折率分布レンズの端面に無限遠物体の正立実像を結像させることのできる長さとする。この長さについて具体的に説明する。
図３は、屈折率分布レンズによる要素レンズの側面図であり、要素レンズ中の光路を模式的に表した図である。同図に示すように、屈折率分布レンズによる要素レンズ３の光軸方向の長さＬを、蛇行周期Ｔの４分の３倍（０．７５ピッチ）とすることにより、要素レンズ３は、十分遠方に位置する被写体Ｏに対して、出射端面に小さな正立実像Ｉを得ることができる。
【００４４】
よって、撮像用レンズアレイ１３０をラジアルタイプの屈折率分布レンズで構成する場合、撮像用レンズアレイ１３０の要素レンズ群の出射端面に要素画像群撮像素子１４０の撮像面を配置する。
なお、上記のように撮像系レンズアレイ１３０の直後に視差画像群撮像素子１４０を配置する構成においては、撮像系レンズアレイ１３０の隣り合う要素レンズの隙間に遮光部材を設けるのがよい。例えば、撮像系レンズアレイ１３０を構成する要素レンズ間に黒色の樹脂等を充填する。このように遮光部材を設けることにより、一の要素レンズを通した光束が隣り合う他の要素レンズを通した光束に漏れ入ることを防止するまたは少なくすることができる。これにより、要素画像群撮像素子１４０が撮像する要素画像群について黒浮き（フレア現象）による画質劣化を防止するまたは抑制することができる。
【００４５】
立体画像撮像装置１０は、被写体Ｏから到来する光束を２系統の光束に分離し、第１系統の光束をインテグラル・フォトグラフィ方式の視差画像群データとして記録するとともに、第２系統の光束を平面画像データとして記録する。すなわち、立体画像撮像装置１０は、被写体Ｏの立体感を表す奥行情報が含まれる視差画像群データを記録するとともに、被写体Ｏの高精細な解像度が含まれる平面画像データを記録する。
【００４６】
以上説明したように、立体画像表示装置２０は、立体画像撮像装置１０が記録した視差画像群データと平面画像データとを読み込み、視差画像群データから視差画像群の光束に変換するとともに、平面画像データから平面画像の光束に変換し、これら２系統の光束をあわせて出力する。すなわち、立体画像表示装置２０は、インテグラル・フォトグラフィ方式の立体像と高精細な平面像とを合成した再現像Ｉを表示する。
立体画像表示装置２０が表示する再現像Ｉは、奥行感があり且つ高精細な立体像である。ただし、再現像Ｉは立体像と平面像とが合成された像であるため、観察者が正面から再現像Ｉを観察した場合に得る立体感は、立体像における立体感と平面像における立体感の中間的なものとなる。また、観察者が再現像Ｉを観察する場合に得る高精細感は、立体像における高精細感と平面像における高精細感の中間的なものとなる。言い換えると、観察者が知覚する再現像Ｉは、立体感を保ちながら、従来のインテグラル・フォトグラフィ方式と比べて高精細な像とすることができる。
【００４７】
［第２の実施の形態］
本発明の第２実施形態は、再現像の奥行感を調整することのできる立体画像撮像表示装置である。
図４は、本実施形態である立体画像撮像表示装置の機能構成を表すブロック図である。
なお、本実施形態において、第１実施形態と同一の構成については、同一の符号を付してその説明を省略する。
同図に示すように、立体画像撮像表示装置１ａは、立体画像撮像装置１０と立体画像表示装置２０ａとを含んで構成される。
【００４８】
立体画像表示装置２０ａは、立体画像撮像装置１０に記録された視差画像群データと平面画像データとをそれぞれ読み込み、視差画像群データに第１の重み付けをして視差画像群の光束に変換するとともに、平面画像データに第２の重み付けをして平面画像の光束に変換し、これら視差画像群の光束と平面画像の光束とを１系統の光束にあわせて出力する装置である。立体画像表示装置２０ａが出力する光束によって再現される再現像Ｉは、インテグラル・フォトグラフィ方式による立体像と二次元の平面像との合成像であり、観察者には立体像として知覚される。
立体画像表示装置２０ａは、第１および第２の重み付けによって、再現像Ｉの立体感と解像度とのトレードオフを調整するものである。
【００４９】
立体画像表示装置２０ａの機能構成について説明する。
立体画像表示装置２０ａは、第１実施形態における立体画像表示装置２０に対して、信号レベル変更制御部３１０が新たに追加されるとともに、視差画像群再生部２２０が視差画像群再生部２２０ａに変更され、平面画像生成部２３０が平面画像再生部２３０ａに変更されたものである。
【００５０】
信号レベル変更制御部３１０は、視差画像群データのレベル値を変化させるための変更重み係数Ｗ１と、平面画像データのレベル値を変化させるための変更重み係数Ｗ２とをそれぞれ計算し、変更重み係数Ｗ１を視差画像群再生部２２０ａに供給するとともに、変更重み係数Ｗ２を平面画像再生部２３０ａに供給する。
変更重み係数Ｗ１は、その値が大きいほど、視差画像群データのレベル値を大きくする係数である。変更重み係数Ｗ２は、その値が大きいほど、平面画像データのレベル値を大きくする係数である。例えば、信号レベル変更制御部３１０は、Ｗ１＝Ｓ，Ｗ２＝１−Ｓ，０≦Ｓ≦１を計算することにより、０≦Ｓ≦１の範囲において、Ｓが小さいほど変更重み係数Ｗ２が相対的に大きくなり、Ｓが大きいほど変更重み係数Ｗ１が相対的に大きくなる。
【００５１】
信号レベル変更制御部３１０は、表示されるシーンに応じて変更重み係数Ｗ１および変更重み係数Ｗ２を変更する。例えば、信号レベル変更制御部３１０は、立体画像表示装置２０ａの外部から供給されるシーンチェンジのタイミングを示す信号にしたがって、切り替わったシーンに適した新たな変更重み係数Ｗ１および変更重み係数Ｗ２の供給を外部から受けて取り込み、これらの新たな変更重み係数Ｗ１および変更重み係数Ｗ２で現在の変更重み係数Ｗ１および変更重み係数Ｗ２を更新する。シーンチェンジの検出は、フレーム画像全体の輝度変化の検出やオブジェクト検出等の従来技術を用いて、外部装置によって行われる。
【００５２】
視差画像群再生部２２０ａは、信号レベル変更制御部３１０から供給される変更重み係数Ｗ１に基づいて、取得部２１０から供給される視差画像群データのレベル値を変更する。具体的には、例えば、視差画像群再生部２２０ａは、変更重み係数Ｗ１と取得部２１０から供給される視差画像群データの輝度値とを掛け合わせる。そして、視差画像群再生部２２０ａは、変更後の視差画像群データを、第１実施形態と同様に所定の周期的なタイミングで視差画像群表示素子２４０に供給する。
【００５３】
平面画像再生部２３０ａは、信号レベル変更制御部３１０から供給される変更重み係数Ｗ２に基づいて、取得部２１０から供給される平面画像データのレベル値を変更する。具体的には、例えば、平面画像再生部２３０ａは、変更重み係数Ｗ２と取得部２１０から供給される平面画像データの輝度値とを掛け合わせる。そして、平面画像再生部２３０ａは、変更後の平面画像データを、上記所定の周期的なタイミングと同一のタイミングで平面画像表示素子２６０に供給する。
【００５４】
すなわち、信号レベル変更制御部３１０と視差画像群再生部２２０ａと平面画像再生部２３０ａとを併せた機能は、視差画像群データのレベル値と平面画像データのレベル値とを変更する信号レベル変更部の機能を含むものである。
【００５５】
立体画像表示装置２０ａが表示する再現像Ｉは、第１実施形態と同様に奥行感があり且つ高精細な立体像である。再現像Ｉは立体像と平面像とが合成された像であるため、観察者が正面から観察する場合に得る立体感と解像度感とは中間的なものとなる。しかし、変更重み係数Ｗ１および変更重み係数Ｗ２に基づく要素画像群データと平面画像データとのレベル値の調整によって、知覚する立体感と解像度感とは変化する。
【００５６】
具体的には、立体画像表示装置２０ａが変更重み係数Ｗ１を変更重み係数Ｗ２よりも大きくして、要素画像群データのレベル値を平面画像データのレベル値よりも大きくするにしたがって、観察者が知覚する立体感は強くなる。例えば、立体画像表示装置２０ａが変更重み係数Ｗ１を変更重み係数Ｗ２よりも大きくして、要素画像群データの輝度値を平面画像データの輝度値よりも大きくするにしたがって、立体像の輝度が平面像の輝度よりも高くなり、よって立体感が強くなる。
一方、立体画像表示装置２０ａが変更重み係数Ｗ２を変更重み係数Ｗ１よりも大きくして、平面画像データのレベル値を要素画像群データのレベル値よりも大きくするにしたがって、観察者が知覚する解像度は高くなる。例えば、立体画像表示装置２０ａが変更重み係数Ｗ２を変更重み係数Ｗ１よりも大きくして、平面画像データの輝度値を要素画像群データの輝度値よりも大きくするにしたがって、平面像の輝度が立体像の輝度よりも高くなり、よって解像度感が高くなる。
【００５７】
以上説明したように、立体画像表示装置２０ａは、立体画像撮像装置１０が記録した視差画像群データと平面画像データとを読み込み、視差画像群データに第１の重み付けをして視差画像群の光束に変換するとともに、平面画像データに第２の重み付けをして平面画像の光束に変換し、これら２系統の光束を合わせて出力する。立体画像表示装置２０ａは、表示するシーンに応じて第１および第２の重み付けを決定する。これにより、立体画像表示装置２０ａは、表示するシーンにしたがって、第１および第２の重み付けによって立体感と解像度とのトレードオフを任意に調整することができる。
【００５８】
なお、上述した第２実施形態において、信号レベル変更制御部３１０は、平面画像データの画像の複雑さに応じて変更重み係数Ｗ１および変更重み係数Ｗ２を変更してもよい。例えば、信号レベル変更制御部３１０は、平面画像データを解析し、この平面画像データが精細な画像、言い換えると、平面画像内で輝度および色またはいずれかの変化が大きな画像であると判定した場合は、変更重み係数Ｗ２を変更重み係数Ｗ１よりも大きくする。これにより、立体画像表示装置２０ａは、平面像の輝度を立体像の輝度よりも高くすることができ、解像度感の高い再現像Ｉを表示することができる。
また、信号レベル変更制御部３１０は、要素画像群データの奥行きの度合いに応じて変更重み係数Ｗ１および変更重み係数Ｗ２を変更してもよい。例えば、信号レベル変更制御部３１０は、要素画像群データから奥行き情報を抽出し、奥行きが大きな画像、言い換えると立体感の際立つ画像であると判定した場合は、変更重み係数Ｗ１を変更重み係数Ｗ２よりも大きくする。これにより、立体画像表示装置２０ａは、立体像の輝度を平面像の輝度よりも高くすることができ、立体感の強い再現像Ｉを表示することができる。
【００５９】
以上、本発明の実施の形態について図面を参照して詳述したが、具体的な構成はその実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計等も含まれる。
【符号の説明】
【００６０】
１，１ａ 立体画像撮像表示装置
１０ 立体画像撮像装置
２０，２０ａ 立体画像表示装置
１１０ 撮像レンズ
１２０ ビームスプリッタ
１２１ 接合面
１３０ 撮像系レンズアレイ
１４０ 視差画像群撮像素子
１５０ 平面画像撮像素子
１６０ 視差画像群記録制御部
１７０ 平面画像記録制御部
１８０ 記録部
２１０ 取得部
２２０，２２０ａ 視差画像群再生部
２３０，２３０ａ 平面画像再生部
２４０ 視差画像群表示素子
２５０ 表示系レンズアレイ
２６０ 平面画像表示素子
２７０ ビームミキサ
２７１ 接合面
３１０ 信号レベル変更制御部
【特許請求の範囲】
【請求項１】
被写体から到来する光束を２系統に分離するビームスプリッタと、
前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換するレンズアレイと、
前記レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、
前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、
を備えることを特徴とする立体画像撮像装置。
【請求項２】
それぞれ同一被写体の画像データであり、互いに視差がある視差画像群データと二次元の平面像である平面画像データとを取得する取得部と、
前記取得部が取得した前記視差画像群データを表示する視差画像群表示素子と、
前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換するレンズアレイと、
前記取得部が取得した前記平面画像データを表示する平面画像表示素子と、
前記レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、
を備えることを特徴とする立体画像表示装置。
【請求項３】
前記視差画像群データのレベル値と前記平面画像データのレベル値との重みを変更する信号レベル変更部を
さらに備えることを特徴する請求項２記載の立体画像表示装置。
【請求項４】
被写体から到来する光束を２系統に分離するビームスプリッタと、
前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換する撮像系レンズアレイと、
前記撮像系レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、
前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、
前記視差画像群撮像素子が得た前記視差画像群を表示する視差画像群表示素子と、
前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換する表示系レンズアレイと、
前記平面画像撮像素子が得た前記平面画像を表示する平面画像表示素子と、
前記表示系レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、
を備えることを特徴とする立体画像撮像表示装置。
【請求項１】
被写体から到来する光束を２系統に分離するビームスプリッタと、
前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換するレンズアレイと、
前記レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、
前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、
を備えることを特徴とする立体画像撮像装置。
【請求項２】
それぞれ同一被写体の画像データであり、互いに視差がある視差画像群データと二次元の平面像である平面画像データとを取得する取得部と、
前記取得部が取得した前記視差画像群データを表示する視差画像群表示素子と、
前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換するレンズアレイと、
前記取得部が取得した前記平面画像データを表示する平面画像表示素子と、
前記レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、
を備えることを特徴とする立体画像表示装置。
【請求項３】
前記視差画像群データのレベル値と前記平面画像データのレベル値との重みを変更する信号レベル変更部を
さらに備えることを特徴する請求項２記載の立体画像表示装置。
【請求項４】
被写体から到来する光束を２系統に分離するビームスプリッタと、
前記ビームスプリッタが分離した一方の光束を、互いに視差がある視差画像群の光束に変換する撮像系レンズアレイと、
前記撮像系レンズアレイを通して得られる前記視差画像群の光束を撮像して視差画像群を得る視差画像群撮像素子と、
前記ビームスプリッタが分離した他方の光束を撮像して平面画像を得る平面画像撮像素子と、
前記視差画像群撮像素子が得た前記視差画像群を表示する視差画像群表示素子と、
前記視差画像群表示素子が表示した視差画像群の光束を、立体像の光束に変換する表示系レンズアレイと、
前記平面画像撮像素子が得た前記平面画像を表示する平面画像表示素子と、
前記表示系レンズアレイを通して得られる前記立体像の光束と前記平面画像表示素子が表示した平面画像の光束とをあわせて出射するビームミキサと、
を備えることを特徴とする立体画像撮像表示装置。
【図１】
【図２】
【図３】
【図４】
【図２】
【図３】
【図４】
【公開番号】特開２０１２−８８５４９（Ｐ２０１２−８８５４９Ａ）
【公開日】平成２４年５月１０日（２０１２．５．１０）
【国際特許分類】
【出願番号】特願２０１０−２３５５０６（Ｐ２０１０−２３５５０６）
【出願日】平成２２年１０月２０日（２０１０．１０．２０）
【出願人】（０００００４３５２）日本放送協会 (2,206)
【出願人】（５９１０５３９２６）財団法人エヌエイチケイエンジニアリングサービス (169)
【Ｆターム（参考）】
【公開日】平成２４年５月１０日（２０１２．５．１０）
【国際特許分類】
【出願日】平成２２年１０月２０日（２０１０．１０．２０）
【出願人】（０００００４３５２）日本放送協会 (2,206)
【出願人】（５９１０５３９２６）財団法人エヌエイチケイエンジニアリングサービス (169)
【Ｆターム（参考）】
[ Back to top ]