画像記録装置、方法およびプログラム
【課題】ユーザが撮影画像の縮小画像の中から多視点画像の縮小画像を容易かつ直感的に識別できる画像記録を簡易な構成で実現する。
【解決手段】多視点画像サムネイル画像に３次元ＣＧ処理を施すことで３次元サムネイル画像を作成するとともに、通常画像からサムネイル画像を作成し、本画像と対応づけて記録する。３次元ＣＧサムネイル画像Ｘは、３次元ＣＧグラフィック処理が施され立体的効果が付与さているから、２次元の通常サムネイルＹとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、多視点画像の縮小画像であることを観者に容易に認識させることができる。
【解決手段】多視点画像サムネイル画像に３次元ＣＧ処理を施すことで３次元サムネイル画像を作成するとともに、通常画像からサムネイル画像を作成し、本画像と対応づけて記録する。３次元ＣＧサムネイル画像Ｘは、３次元ＣＧグラフィック処理が施され立体的効果が付与さているから、２次元の通常サムネイルＹとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、多視点画像の縮小画像であることを観者に容易に認識させることができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は多視点画像および単視点画像の縮小画像の記録に関する。
【背景技術】
【０００２】
一般的な立体画像表示システムでは、右眼に対しては右眼を視点として描かれた画像が、左眼に対しては左眼を視点として描かれた画像が個別に提示される。通常、このような右眼および左眼を視点とした２つの画像（以下、多視点画像と表記する）において、視点から遠い位置にあるオブジェクトは、両眼からの視線がほぼ平行であって見え方がほぼ同じであるので、ほぼ同じ位置に描画される。一方、視点から近い位置にあるオブジェクトは、両眼からの視線が非平行であって見え方が異なるので、互いにずれた位置に描画される。このような視差のある画像（以下、視差画像と表記する）を右眼および左眼それぞれで見るとき、観測者はオブジェクトに対して遠近感を知覚する。
【０００３】
視差画像の生成に関しては、左右２台のカメラを用いて被写体を撮影し、得られた視差画像を、眼の錯覚を利用して３次元的に見せる写実的手法と、コンピュータグラフィックス技術を用いて左右両眼を視点とするモデルデータの視野変換によって視差画像を生成する３次元コンピュータグラフィックス（３次元ＣＧ）表示がある。３次元コンピュータグラフィックス表示は、俗に仮想的３次元表示や擬似的３次元表示とも言われる。
【０００４】
写実的手法では、パララックスバリア式、あるいはレンチキュラーレンズ式の３Ｄモニタを用いて視差画像の立体表示を行う。パララックスバリア式では、パララックスバリア表示層に光透過部と光遮蔽部とが交互に所定のピッチで並んだパターンからなるパララックスバリアを発生させるとともに、その下層の画像表示面に左右の像を示す短冊状の画像断片を交互に配列して表示することで視差画像の立体視を可能にする。
【０００５】
あるいは、写実的手法では、レンチキュラーレンズシートを用いるレンチキュラー方式、マイクロレンズアレイシートを用いるインテグラルフォトグラフィ方式、干渉現象を用いるホログラフィー方式などが採用される。
【０００６】
一般的なコンピュータグラフィックスでは、３次元空間内に定義されたオブジェクトを複数のポリゴン（多角形）の集合によって表現する。ポリゴンとしては通常、最も簡単な三角形が用いられることが多い。オブジェクトを構成している各ポリゴンは、ベクトルや行列などの数学的手法を用いて、それ自身が持つオブジェクト座標から、観測者の視点の位置を基準とした３次元座標、すなわち視野座標へと座標変換が行われる。さらにディスプレイ装置へ表示するために、視野座標で表現されたポリゴンを２次元平面へ透視投影するための座標変換（透視変換）が行われる。これら一連の座標変換が行われた後の最終的なポリゴンの位置データは、ディスプレイに対して垂直な方向（Ｚ軸）への視点からの距離を表すＺ値と、ディスプレイ面内での位置座標を表すＸ値およびＹ値となる。
【０００７】
各ポリゴンを構成する画素の色値の決定方法に関しては、視野座標において仮想的な光源が配置され、この光源からポリゴンを構成する各頂点に照射される光の強度を物理的に計算し、さらにそれらの値からポリゴン内のラスタライズ過程において各画素位置における光の強度を線形補間によって求める方法がある。
【０００８】
あるいは、特許文献１に示すように、ポリゴン表面にテクスチャと呼ばれる、物体表面の質感や特殊な模様などを表す画像を貼り付ける方法がある。この場合には、座標変換前のオブジェクト座標の段階で、オブジェクトを構成するポリゴンの各頂点に対して位置座標の他にテクスチャ座標が与えられる。そして前述の光強度の場合と同様に、ポリゴンのラスタライズ過程において各画素位置ごとにテクスチャ座標が線形補間され、求められたテクスチャ座標に応じて画素の色値が決定される。
【０００９】
以上のような手続きによって、特定の視点から見たグラフィックス画像を生成することができるが、前述のような立体視のための視差画像を生成するためには、視点の位置を右眼および左眼のそれぞれの位置に置き換え、同一のオブジェクトを２回描画することによって、多視点画像を生成する。高価なシステムでは、上記のような写実的手法を実現可能な表示装置を備え、多視点画像を生成する。
【００１０】
一方、従来、多視点画像と、視差のない通常の画像とが混在して記憶装置に格納されている場合、これらの縮小画像を区別可能に表示する技術がある。特許文献２の電子機器は、写実的手法を実現可能な表示装置を備えており、サムネイル画像の平面的な一覧表示の際、３次元画像に対応するサムネイル画像については「３Ｄ」の記号を加え、また、円形または楕円形で表記し、２次元画像に対応するサムネイル画像については「２Ｄ」の記号を加え、三角形で表記し、２次元画像から作成したサムネイルと３次元画像から作成したサムネイルとを区別可能にしている。
【００１１】
また、従来、遠距離に被写体が存在する場合であっても、立体視効果を上げるような撮像方法が提案されている。例えば特許文献３によると、開いた筐体の両端にカメラ部を設け、遠距離でも立体画像の効果を上げている。
【特許文献１】特開２００２−２４８５０号公報
【特許文献２】特開２００４−１２０１６５号公報
【特許文献３】特開２００３−５１８７２号公報
【発明の開示】
【発明が解決しようとする課題】
【００１２】
特許文献２では、「３Ｄ」や「２Ｄ」という記号や、円形、楕円形、三角形という図形で２次元画像と３次元画像のサムネイルを表記しているが、これでは、両者が直感的に区別しにくい。
【００１３】
また、特許文献２では、写実的手法による３次元画像の表示を実現可能な表示装置の配備が必須であり、かつ、２次元画像と３次元画像の表示切替が必須であるため、システム全体のコストが高くなってしまうという欠点がある。
【００１４】
特に、デジタルカメラのような携帯型機器において、そのような特殊な表示装置の配置を強いることは、携帯性の確保や生産コスト抑制の点で非常に問題がある。
【００１５】
また、特許文献３では、無限遠の被写体に対しては立体視効果を付与できないという問題がある。
【００１６】
そこで本発明は、ユーザが撮影画像の縮小画像の中から多視点画像の縮小画像を容易かつ直感的に識別できる画像記録を簡易な構成で実現する。また本発明は、立体効果が生じないような無意味な多視点画像の記録を防止する。
【課題を解決するための手段】
【００１７】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、本画像を縮小した第１の縮小画像を作成した上、画像識別部が多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、画像識別部による多視点画像または単視点画像の識別に応じ、画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００１８】
この発明によると、多視点画像の縮小画像として３次元コンピュータグラフィック処理の施された縮小画像が、単視点画像の縮小画像として単なる縮小画像が、それぞれ本画像と対応づけて記録される。多視点画像の縮小画像は３次元コンピュータグラフィック処理されているから、単なる縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要がなく、装置構成が安価で済む。
【００１９】
画像識別部が多視点画像であると識別した本画像から、被写体顔領域の有無を検出する顔検出部をさらに備え、画像処理部は、第１の縮小画像に対し、顔検出部が検出した被写体顔領域に対応する領域を設定した上、設定された領域に３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成してもよい。
【００２０】
ここでは、顔という重要部分に限って３次元コンピュータグラフィック処理を施しており、少ない処理で実質的な擬似立体縮小画像を記録できる。
【００２１】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、画像識別部が多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するフラッシュ発光識別部と、画像識別部が単視点画像であると識別したかまたはフラッシュ発光識別部が撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成する画像処理部と、画像識別部が多視点画像と識別しかつフラッシュ発光識別部がフラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、画像識別部による多視点画像または単視点画像の識別とフラッシュ発光識別部による撮影時のフラッシュ発光の有無の識別とに応じ、画像処理部の作成した第１の縮小画像またはサンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００２２】
この発明によると、撮影時にフラッシュ発光があった多視点画像の縮小画像として３次元コンピュータグラフィック処理の施された所定のサンプル縮小画像が、単視点画像あるいは撮影時にフラッシュ発光がなかった多視点画像の縮小画像としては単なる通常の縮小画像が、本画像と対応づけて記録される。
【００２３】
撮影時にフラッシュ発光があった多視点画像のサンプル縮小画像は３次元コンピュータグラフィック処理されているから、単なる縮小画像あるいは撮影時にフラッシュ発光がなかった多視点画像の縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要も、撮影ごとに３次元コンピュータグラフィック処理を行う必要もなく、装置構成が安価で済む。
【００２４】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、画像識別部が多視点画像であると識別した画像について、被写体顔領域の有無を検出する顔検出部と、画像識別部が単視点画像であると識別したかまたは顔検出部が被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成する画像処理部と、画像識別部が多視点画像と識別しかつ顔検出部が被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、画像識別部による多視点画像または単視点画像の識別と顔検出部による被写体顔領域の検出の有無とに応じ、画像処理部の作成した第１の縮小画像またはサンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００２５】
この発明によると、被写体顔領域があった多視点画像の縮小画像として３次元コンピュータグラフィック処理の施された所定のサンプル縮小画像が、単視点画像あるいは被写体顔領域がなかった多視点画像の縮小画像としては単なる通常の縮小画像が、本画像と対応づけて記録される。
【００２６】
被写体顔領域があった多視点画像のサンプル縮小画像は３次元コンピュータグラフィック処理されているから、単なる縮小画像あるいは撮影時にフラッシュ発光がなかった多視点画像の縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要も、撮影ごとに３次元コンピュータグラフィック処理を行う必要もなく、装置構成が安価で済む。
【００２７】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、画像識別部が多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別する距離識別部と、本画像を縮小した第１の縮小画像を作成した上、画像識別部が多視点画像であると識別しかつ距離識別部が被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、画像識別部による多視点画像または単視点画像の識別と距離識別部による被写体の距離の識別とに応じ、画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００２８】
この発明によると、近距離に被写体がある多視点画像に対してのみ３次元コンピュータグラフィック処理を施すから、被写体が遠距離にあり当該処理を施しても無意味な画像には当該処理を行わなくて済む。
【００２９】
記録部は、画像識別部が多視点画像であると識別した本画像については、距離識別部が被写体が近距離にあると識別した本画像についてのみ記録するとよい。
【００３０】
こうすると、被写体が所定距離以上の遠距離にあり、立体効果が生じにくい多視点画像、あるいは立体効果が全く生じない多視点画像を記録しなくて済み、無意味な画像記録を防止できる。
【００３１】
画像識別部が多視点画像であると識別しかつ距離識別部が被写体が遠距離にあると識別した本画像は記録しない旨の警告を通知する通知部をさらに備えてもよい。
【００３２】
こうすると、被写体が遠距離にあり立体効果が生じにくい多視点画像が記録されないことをユーザが認識できる。
【００３３】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、本画像を縮小した第１の縮小画像を作成した上、多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、多視点画像または単視点画像の識別に応じ、作成した第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３４】
この画像記録方法は、多視点画像であると識別した本画像から、被写体顔領域の有無を検出するステップと、第１の縮小画像に対し、検出した被写体顔領域に対応する領域を設定した上、設定された領域に３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、をさらに含んでもよい。
【００３５】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するなステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するステップと、単視点画像であると識別したかまたは撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成するステップと、多視点画像と識別しかつフラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、多視点画像または単視点画像の識別と撮影時のフラッシュ発光の有無の識別とに応じ、第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３６】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、多視点画像であると識別した画像について、被写体顔領域の有無を検出するステップと、単視点画像であると識別したかまたは被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成するステップと、多視点画像と識別しかつ被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、多視点画像または単視点画像の識別と被写体顔領域の検出の有無とに応じ、第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３７】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別するステップと、本画像を縮小した第１の縮小画像を作成した上、多視点画像であると識別しかつ被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、多視点画像または単視点画像の識別と被写体の距離の識別とに応じ、第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３８】
この画像記録方法は、多視点画像であると識別した本画像については、被写体が近距離にあると識別した本画像についてのみ記録することが好ましい。
【００３９】
また、多視点画像であると識別しかつ被写体が遠距離にあると識別した本画像は記録しない旨の警告を表示するステップをさらに含むことが好ましい。
【００４０】
上記の画像記録方法をコンピュータに実行させるプログラムも本発明に含まれる。
【発明の効果】
【００４１】
本発明によると、多視点画像の縮小画像として、３次元コンピュータグラフィック処理の施された縮小画像、より好適には被写体顔領域に３次元コンピュータグラフィック処理の施された縮小画像が、本画像と対応づけて記録される。一方、単視点画像、顔の検出されない多視点画像、あるいは被写体が遠距離にある多視点画像の縮小画像として、単なる縮小画像が、本画像と対応づけて記録される。多視点画像の縮小画像は３次元コンピュータグラフィック処理されているから、多視点画像の縮小画像と単視点画像の縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要がなく、装置構成が安価で済む。
【発明を実施するための最良の形態】
【００４２】
＜第１実施形態＞
図１は、複眼カメラ１の電気的構成を示す。第１および第２撮像部２ａ、２ｂのレンズ光軸Ｌ１、Ｌ２は、平行となるように、あるいは所定角度をなすように並設されている。
【００４３】
第１撮像部２ａは、レンズ光軸Ｌ１に沿って配列された第１ズームレンズ１１ａ、第１絞り１２ａ、第１フォーカスレンズ１３ａ、および第１イメージセンサ１４ａによって構成されている。第１絞り１２ａには絞り制御部１６ａが接続されており、また、第１イメージセンサ１４ａにはタイミングジェネレータ（ＴＧ）１８ａが接続されている。第１絞り１２ａ、第１フォーカスレンズ１３ａの動作は測光測距ＣＰＵ１９ａによって制御される。ＴＧ１８ａの動作はメインＣＰＵ６２によって制御される。
【００４４】
カメラ１にはユーザがこのカメラ１を使用するときに種々の操作を行うための操作部７０が設けられている。この操作部７０には、カメラ１を作動させるための電源投入用の電源スイッチ、立体（３Ｄ）撮影、平面（２Ｄ）撮影、オート撮影やマニュアル撮影等を選択するためのモードダイヤル、各種のメニューの設定や選択あるいはズームを行うための十字キー、閃光発光用スイッチ、および十字キーで選択されたメニューの実行やキャンセル等を行うための情報位置指定キーが備えられている。操作部７０への適宜操作により、電源のオン／オフ、各種モード（撮影モード、再生モード等）の切り替え、ズーミングなどが行われる。
【００４５】
また、カメラ１には、メインＣＰＵ６２と、ＥＥＰＲＯＭ１４６と、ＹＣ／ＲＧＢ変換部１４７と、表示用のドライバ１４８とが備えられている。メインＣＰＵ６２は、このカメラ１全体の制御を行う。ＥＥＰＲＯＭ１４６には、このカメラ１固有の固体データやプログラム等が格納されている。
【００４６】
ＹＣ／ＲＧＢ変換部１４７は、ＹＣ処理部３５ａ・３５ｂで生成されたカラー映像信号ＹＣを３色のＲＧＢ信号に変換して表示用のドライバ１４８を経由して画像表示ＬＣＤ１０に出力する。
【００４７】
入力操作部９からのズーム操作に応じて、第１ズームレンズ１１ａは、レンズ光軸Ｌ１に沿ってＮＥＡＲ側（繰り出し側）、あるいはＩＮＦ側（繰り込み側）に移動し、ズーム倍率を変化させる。この移動は図示しないモータで駆動される。絞り１２ａは、ＡＥ（Auto Exposure）動作時に開口値（絞り値）を変化させて光束を制限し、露出調整を行う。フォーカスレンズ１３ａは、ＡＦ（Auto Focus）動作時にレンズ光軸Ｌ１に沿ってＮＥＡＲ側、あるいはＩＮＦ側に移動されて合焦位置を変え、ピント調整を行う。この移動は図示しないモータで駆動される。
【００４８】
静止画用レリーズスイッチ５ａの半押し状態が検出されたとき、メインＣＰＵ６２は距離用撮像素子５１ａ・５１ｂからそれぞれ測距データを得る。メインＣＰＵ６２は得られた測距データに基づいて、ピント、絞りなどの調整を行う。
【００４９】
第１イメージセンサ１４ａは、第１ズームレンズ１１ａ、第１絞り１２ａ、および第１フォーカスレンズ１３ａによって結像された被写体光を受光し、受光素子に受光量に応じた光電荷を蓄積する。第１イメージセンサ１４ａの光電荷蓄積・転送動作は、ＴＧ１８ａによって制御され、ＴＧ１８ａから入力されるタイミング信号（クロックパルス）により、電子シャッタ速度（光電荷蓄積時間）が決定される。第１イメージセンサ１４ａは、撮影モード時には、１画面分の画像信号を所定周期ごとに取得する。
【００５０】
第２撮像部２ｂは、第１撮像部２ａと同一の構成であり、第２ズームレンズ１１ｂ、第２絞り１２ｂ、第２フォーカスレンズ１３ｂ、およびタイミングジェネレータ（ＴＧ）１４ｂが接続された第２イメージセンサ１４ｂによって構成されている。これらの動作はメインＣＰＵ６２によって制御される。第１撮像部２ａと第２撮像部２ｂとは、基本的に連動して動作を行うが、各々個別に動作させることも可能となっている。なお、第１および第２イメージセンサ１４ａ・１４ｂとして、ＣＣＤ型やＣＭＯＳ型のイメージセンサが用いられる。
【００５１】
第１および第２イメージセンサ１４ａ・１４ｂから出力された撮像信号は、それぞれＡ／Ｄ変換器３０ａ・３０ｂに入力される。Ａ／Ｄ変換器３０ａ・３０ｂは、入力された画像データをアナログからデジタルに変換する。Ａ／Ｄ変換器３０ａ・３０ｂを通して、第１イメージセンサ１４ａの撮像信号は第１画像データ（右眼用画像データ）として、第２イメージセンサ１４ｂの撮像信号は第２画像データ（左眼用画像データ）として出力される。
【００５２】
画像信号処理回路３１ａ・３１ｂは、それぞれ、階調変換、ホワイトバランス補正、γ補正処理などの各種画像処理をＡ／Ｄ変換器３０ａ・３１ｂから入力された第１および第２画像データに施す。バッファメモリ３２ａ・３２ｂは、画像信号処理回路３１ａ・３１ｂで各種画像処理が施された第１および第２画像データを一時的に格納する。
【００５３】
測光・測距ＣＰＵ１９ａ・１９ｂは、それぞれ、バッファメモリ３２ａ・３２ｂに格納された第１および第２画像データの各々からＡＦ評価値およびＡＥ評価値を算出する。ＡＦ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値の高周波成分を積算することにより算出され、画像の鮮鋭度を表す。輝度値の高周波成分とは、隣接する画素間の輝度差（コントラスト）を所定領域内について足し合わせたものである。また、ＡＥ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値を積算することにより算出され、画像の明るさを表す。ＡＦ評価値およびＡＥ評価値は、後述する撮影準備処理時に実行されるＡＦ動作およびＡＥ動作においてそれぞれ使用される。
【００５４】
バッファメモリ３２ａ・３２ｂに記憶された画像データは、それぞれＹＣ処理部３５ａ・３５ｂにより輝度信号（Ｙ信号）及び色差信号（Ｃr,Ｃb 信号）に変換されるとともに、ガンマ補正等の所定の処理が施される。処理されたＹＣ信号はそれぞれワークメモリ１２８ａ・１２８ｂに格納される。
【００５５】
ワークメモリ１２８ａ・１２８ｂに記憶された第１および第２画像データのＹＣ信号は、それぞれコントローラ３４によってＹＣ／ＲＧＢ変換部１４７に読み出される。ＹＣ／ＲＧＢ変換部１４７は、第１および第２画像データのＹＣ信号を所定方式の映像信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換した上で、画像表示ＬＣＤ１０での立体表示を行うための立体画像データに合成する。撮影モード時にＬＣＤ１０が電子ビューファインダとして使用される際には、ＹＣ／ＲＧＢ変換部１４７によって合成された立体画像データが、ＬＣＤドライバ１４８を介してＬＣＤ１０にスルー画として表示される。
【００５６】
圧縮伸張処理回路３６ａ・３６ｂは、それぞれワークメモリ１２８ａ・１２８ｂに記憶された第１および第２画像データに対して、静止画ではＪＰＥＧ、動画ではＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４方式等の所定の圧縮形式に従って圧縮処理を施す。メディアコントローラ３７は、圧縮伸張処理回路３６ａ・３６によって圧縮処理された各画像データを、Ｉ／Ｆ３９経由で接続されたメモリカード３８その他の記録メディアに記録させる。
【００５７】
このようにしてメモリカード３８に記録された第１および第２画像データをＬＣＤ１０に再生表示する場合、メモリカード３８の各画像データは、メディアコントローラ３７によって読み出され、圧縮伸張処理回路３６ａ・３６によって伸張処理が行われ、ＹＣ／ＲＧＢ変換部１４７によって立体画像データに変換された後、ＬＣＤドライバ１４８を介してＬＣＤ１０に再生画像として表示される。
【００５８】
ＬＣＤ１０は、写実的手法を採用していない通常の平面モニタであり、画像撮影時には電子ビューファインダとして使用され、画像再生時には撮影によって得られた画像データの表示を行う。
【００５９】
メインＣＰＵ６２は、複眼カメラ１の全体の動作を統括的に制御する。メインＣＰＵ６２には、レリーズスイッチ５ａ・５ｂ、操作部７０のほか、不揮発性メモリであるＥＥＰＲＯＭ１４６が接続されている。ＥＥＰＲＯＭ１４６は、各種制御用のプログラムや設定情報などを格納している。メインＣＰＵ６２は、このプログラムや設定情報に基づいて各種処理を実行する。
【００６０】
また、メインＣＰＵ６２には、光学系制御指示部１２７が接続されており、光学系制御指示部１２７へのズーム操作に応じて第１撮像部２ａ・第２撮像部２ｂの撮影倍率が変更される。
【００６１】
レリーズスイッチ５ａ・５ｂは２段押しのスイッチ構造となっている。撮影モード中に、レリーズスイッチ５ａ・５ｂが軽く押圧（半押し）されると、ＡＦ動作およびＡＥ動作が行われ撮影準備処理がなされる。この状態でさらにレリーズスイッチ５ａ・５ｂが強く押圧（全押し）されると、撮影処理が行われ、１画面分の第１および第２画像データがフレームメモリ３２からメモリカード３８に転送されて記録される。
【００６２】
ＡＦ動作は、メインＣＰＵ６２が第１および第２フォーカスレンズ１３ａ・１３ｂを制御してそれぞれ所定方向に移動させながら、順次に得られる第１および第２画像データの各々から算出されたＡＦ評価値の最大値を求めることによりなされる。ＡＥ動作は、ＡＦ動作が完了した後、算出されたＡＥ評価値に基づいて、第１および第２絞り１２ａ・１２ｂの開口値、および第１および第２イメージセンサ１４ａ・１４ｂの電子シャッタ速度を設定することによりなされる。
【００６３】
また、カメラ１には、操作の手助けを行うための操作ＬＣＤ表示１０３が備えられている。
【００６４】
また、カメラ１は、電源電池６８が着脱可能な構成となっている。電源電池６８は充電可能な二次電池、例えばニカド電池、ニッケル水素電池、リチウムイオン電池で構成される。電源電池６８は使い切り型の一次電池、例えばリチウム電池、アルカリ電池で構成してもよい。電源電池６８は図示しない電池収納室に装填することにより、カメラ１の各回路と電気的に接続される。
【００６５】
第１撮像部２ａ、第２撮像部２ｂには、それぞれ、第１撮像部２ａと第２撮像部２ｂのなす間隔／輻輳角を検出する間隔／輻輳角検出回路４ａ・４ｂと、間隔／輻輳角検出回路４ａ・４ｂの検出した輻輳角を記憶するレンズ間隔／輻輳角記憶回路６、基線長の伸縮と光軸を駆動モータなどで回転させ輻輳を変化させる間隔／輻輳角駆動回路３ａ・３ｂとが備えられている。
【００６６】
また、カメラ１には、間隔／輻輳角検出回路４ａ・４ｂの検出した間隔／輻輳角に基づいて間隔／輻輳角駆動回路３ａ・３ｂの輻輳角の変化を制御する間隔／輻輳角制御回路５が備えられている。
【００６７】
充電・発光制御部１３８ａ・１３８ｂは、それぞれストロボ４４ａ・４４ｂを発光させるために電源電池６８からの電力の供給を受けて図示しない閃光発光用のコンデンサを充電したり、ストロボ４４ａ・４４ｂの発光を制御する。
【００６８】
充電・発光制御部１３８ａ・１３８ｂは、レリーズスイッチ５ａ・５ｂの半押し・全押し操作信号等の各種の信号や、発光量、発光タイミングを示す信号をメインＣＰＵ６２や測光・測距ＣＰＵ１９ａ・１９ｂから取り込んだことに応じ、ストロボ４４ａ・４４ｂへの電流供給制御を行い、所望の発光量が所望のタイミングで得られるように制御する。
【００６９】
縦撮り／横撮り切替ボタン４０は、縦撮りまたは横撮りのいずれで撮影を行うかを指示するためのボタンである。縦撮り／横撮り検出回路１６６は、このボタンの状態により、縦撮りまたは横撮りのいずれで撮影を行うかを検出する。
【００７０】
２Ｄ／３Ｄモード切替フラグ１６８には、３Ｄ撮影モード／２Ｄ撮影モードの設定操作に応じて、２Ｄモードであることまたは３Ｄモードであることを表すフラグが設定される。
【００７１】
距離用発光素子５２ａ、５２ｂは、それぞれ、第１撮像部２ａおよび第２撮像部２ｂの捉えた同一被写体へ投光スポットを照射するための発光ダイオード（ＬＥＤ）からなる。
【００７２】
距離用撮像素子５１ａ、５１ｂは、それぞれ、距離用発光素子５２ａ、５２ｂにより投光スポットの照射された被写体像を取得する測距専用の撮像素子である。
【００７３】
距離用駆動／制御回路５４は、距離用発光素子５２ａ、５２ｂの発光タイミングと距離用撮像素子５３ａ、５３ｂとを同期させる制御を行う。
【００７４】
距離用撮像素子５３ａ、５３ｂの撮像動作で得られたアナログ画像信号はそれぞれ測距用Ａ／Ｄ変換部５５ａ、５５ｂでデジタル画像データに変換され、距離情報処理回路５７に出力される。
【００７５】
距離情報処理回路５７は、入力されたデジタル画像データから、第１撮像部２ａおよび第２撮像部２ｂの捉えた被写体までの距離を算出する。これはいわゆる三角測距の原理に基づく。距離情報処理回路５７が算出した距離情報は距離情報記憶回路５８に記憶される。
【００７６】
顔検出部１５０は、バッファメモリ３２ａあるいはバッファメモリ３２ｂに格納された画像データや、バッファメモリ４２に格納された画像データから被写体となった人物の顔部分を含む領域である顔領域を検出する。
【００７７】
顔領域の検出方法は特に限定されず、各種のものを採用できるが、例えば本出願人による特開平９−１０１５７９号公報において開示された技術を適用することができる。この技術は、撮影した画像の各画素の色相が肌色の範囲に含まれるか否かを判定して肌色領域と非肌色領域とに分割すると共に、画像中のエッジを検出して画像中の各箇所をエッジ部分又は非エッジ部分に分類する。そして、肌色領域内に位置し非エッジ部分に分類された画素からなり、かつエッジ部分と判定された画素で囲まれた領域を顔候補領域として抽出し、抽出した顔候補領域が人物の顔に相当する領域かを判定し、この判定結果に基づき顔領域として検出するものである。また、この他に、特開２００３−２０９６８３号公報や特開２００２−１９９２２１号公報に記載される方法で顔領域を検出することもできる。
【００７８】
なお、多視点画像は、上述のような複眼カメラ１で取得する必然性はなく、単眼カメラを用いたモーションステレオ法による連続撮影で取得してもよい。
【００７９】
以下、図２のフローチャートを参照し、カメラ１で実行される画像記録処理の流れを説明する。この処理を規定するプログラムはＥＥＰＲＯＭ１４６に格納されており、メインＣＰＵ６２がこのプログラムを実行する。操作部７０からの「サムネイル画像一覧表示」の指示に応じ、メモリカード３８に格納されている全ての多視点画像に対して一括して行われる。
【００８０】
Ｓ１では、静止画用レリーズスイッチ５ａが全押しされたか否かを判断する。静止画用レリーズスイッチ５ａが全押しされた場合はＳ２に進む。
【００８１】
Ｓ２では、記録用静止画データの取り込みを開始する。取り込まれた画像データ（本画像）はバッファメモリ４２に確保された本画像バッファに一旦格納される。
【００８２】
Ｓ３では、２Ｄ／３Ｄモード切替フラグ１６８のフラグを判断する。３Ｄモードのフラグが立っている場合はＳ４に進む。２Ｄモードのフラグが立っている場合はＳ７に進む。
【００８３】
Ｓ４では、本画像バッファに格納されている多視点画像から、サムネイル画像を作成する。その具体的手法は特許文献２の段落００４０と同様、左目用画像のみ、右目用画像のみ、あるいはその両方を間引いて作成すればよい。
【００８４】
Ｓ５では、作成されたサムネイル画像に３次元ＣＧ処理を施すことで３次元サムネイル画像を作成する。例えば図３に示すように、画像中に存在する主要被写体その他の各種の物体（図３はマグカップを示しているが、人物などでもよい）に対応した３次元形状モデルのポリゴンＰＧに、サムネイル画像ｔｈの対応領域を貼り付けるテクスチャマッピングを行い、３次元ＣＧサムネイル画像Ｘを得る。この具体的手法は特許文献１と同様である。あるいは、元の多視点画像について３次元ＣＧ処理を施し、それを間引くことで３次元ＣＧサムネイル画像を作成してもよいが、処理の負荷の点では、先にサムネイルを作成する方が優れている。
【００８５】
なお、その他の３Ｄコンピュータグラフィック手法をサムネイル画像に適用し３次元ＣＧサムネイル画像を作成してもよい。
【００８６】
Ｓ６では、作成した３次元ＣＧサムネイル画像を、バッファメモリ４１に確保されたサムネイルバッファに格納する。
【００８７】
Ｓ７では、画像ファイルに格納されている単視点の通常画像から、サムネイル画像を作成する。その具体的手法は通常のサムネイル画像と同様、単視点画像を間引いて作成すればよい。このサムネイルを通常サムネイル画像と呼ぶ。
【００８８】
Ｓ８では、作成した通常サムネイル画像を、バッファメモリ４２に確保されたサムネイルバッファに格納する。
【００８９】
Ｓ９では、バッファメモリ４２のサムネイルバッファに格納されたサムネイル画像と、本画像バッファに格納された本画像とを関連付けてメモリカード３８に記録する。両画像の関連付けは、例えば、両者を同一のＥｘｉｆ（Exchangeable image file format）ファイルに格納し、メモリカード３８に記録することで行うことができる。
【００９０】
なお、Ｓ３〜Ｓ９の処理は、記録用静止画が新たに取得されるごとに行ってもよいし、静止画を一定数撮り溜めてから行ってもよい。要するに、本画像と縮小画像とを関連付けて記録できれば、３次元ＣＧサムネイル画像の作成のタイミングはいつでもよい。
【００９１】
図４は、上記処理によりメモリカード３８に記録された画像ファイルから取り込まれＬＣＤ１０その他の表示装置に一覧表示された３次元ＣＧサムネイル画像Ｘおよび通常サムネイル画像Ｙの一例を示す。３次元ＣＧサムネイル画像Ｘは、上記ステップＳ４〜６で作成されたものであり、３次元ＣＧグラフィック処理が施され立体的効果が付与さているから、上記ステップＳ７〜８で作成された通常サムネイルＹとの違いが一見して明らかであり、写実的手法を実現する特殊な表示装置を用いなくとも、多視点画像の縮小画像であることを観者に容易に認識させることができる。
【００９２】
＜第２実施形態＞
図５は、画像記録処理の他の例を示す。ここでは、顔の写っている多視点画像のサムネイル画像を、当該多視点画像の顔領域についてのみ３次元ＣＧ処理を施したサムネイル画像に置き換える。
【００９３】
Ｓ１１〜Ｓ１３は、Ｓ１〜Ｓ３と同様である。
【００９４】
Ｓ１４では、顔検出部１５０に対し、多視点画像の一方または双方から顔を抽出するよう指令する。顔検出部１５０はメインＣＰＵ６２からの指令に応じ、画像ファイルに格納された左目用画像あるいは右目用画像から、顔領域の検出を試みる。
【００９５】
Ｓ１５では、顔検出部１５０が顔領域を検出できたか否かを判断する。顔領域を検出できた場合はＳ１６、検出できなかった場合はＳ１８に進む。
【００９６】
Ｓ１６では、顔が写っている多視点画像から、顔領域を抽出し、その顔領域に３次元ＣＧ処理を施す。これは例えば、顔が写っている多視点画像から顔領域を抽出するとともに、当該多視点画像を所定の間引き率で間引く。間引き後の縮小画像に、元多視点画像から抽出された顔領域に相当する領域を設定する。両視点画像から顔検出を試みた場合、検出精度の高い方の視点画像に顔領域を設定するとさらによい。そして、その設定領域中の顔に特有のポリゴンを作成し、当該ポリゴンに間引き後顔領域を貼り付けるテクスチャマッピングを行い、顔領域のみに３次元ＣＧ処理の施されたサムネイル画像を得る。この方式は、間引き画像の作成後に３次元ＣＧ処理を行う。
【００９７】
あるいは、その検出した顔自体から、その人物の顔に特有のポリゴンを作成し、当該ポリゴンに顔領域を貼り付けるテクスチャマッピングを行い、多視点画像に顔領域のみに３次元ＣＧ処理を施した仮のＣＧ画像を作る。そして、この仮のＣＧ画像を所定の間引き率で間引き、顔領域のみに３次元ＣＧ処理の施されたサムネイル画像を得る。この方式は、３次元ＣＧ処理の後に間引き画像を作成する。
【００９８】
上記のテクスチャマッピング方式はポリゴンの作成から始める必要があり、精密なポリゴンを作成すると処理負荷が大きい。ポリゴンの簡易な作成方法としては、次のようなものが挙げられる。まず、検出された顔領域から、顔の輪郭、目、鼻、口などの顔の構成部分を検出し、検出された顔の構成部分の位置に応じてポリゴン分割線を決める。例えば、両目の中央部分（眉間）から出発し鼻筋に沿って鼻先端に達する線と、両目を周回する線と、口を周回する線と、顔の輪郭とをポリゴン分割線とする。このポリゴンにテクスチャマッピングすると、口と鼻の部分が隆起し、目の周囲が窪んだような簡易な３次元ＣＧサムネイル画像が得られる。
【００９９】
Ｓ１７では、作成した３次元ＣＧサムネイル画像をサムネイルバッファに格納する。
【０１００】
Ｓ１８では、本画像バッファに格納されている多視点画像から、サムネイル画像を作成する。その具体的手法は特許文献２の段落００４０と同様、左目用画像のみ、右目用画像のみ、あるいはその両方を間引いて作成すればよい。
【０１０１】
Ｓ２０〜Ｓ２２は、上述のＳ７〜Ｓ９と同様である。
【０１０２】
図６は、ＬＣＤ１０に一覧表示された、顔の検出された多視点画像に対応する３次元サムネイル画像Ｓ、通常サムネイル画像Ｙ、顔の検出されなかった多視点画像に対応するサムネイル画像Ｚの一例を示す。
【０１０３】
サンプルサムネイル画像Ｕは、ステップＳ４〜Ｓ６で作成されたものであり、顔領域についてのみ３次元ＣＧグラフィック処理が施されているから、ステップＳ２０〜Ｓ２１で作成された通常サムネイルＹや、ステップＳ１８〜Ｓ１９で作成された単なる視点画像の縮小画像Ｚとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、顔を被写体とする立体画像の識別が容易である。しかも、元画像を用いて顔領域に３次元ＣＧグラフィック処理が施されているから、元画像の顔の概要も立体的に分かる。
【０１０４】
＜第３実施形態＞
図７は、メインＣＰＵ６２で実行される画像記録処理の他の例を示す。ここでは、フラッシュ撮影された多視点画像のサムネイル画像を、特別なサンプルに置き換える。
【０１０５】
Ｓ３１〜Ｓ３３は、Ｓ１〜Ｓ３と同様である。
【０１０６】
Ｓ３４では、測光測距ＣＰＵ１９ａ・１９ｂからフラッシュ発光情報を取得し、画像記録時のストロボ４４ａ・４４ｂのオンまたはオフの状況を識別する。なお、フラッシュ発光情報は、例えば、Ｅｘｉｆファイルの「Flash」タグに格納される。
【０１０７】
Ｓ３５では、フラッシュ発光情報に基づき、撮影時におけるストロボ４４ａ・４４ｂのオンまたはオフを判断する。撮影時にストロボ４４ａ・４４ｂがオンであった場合はＳ３６、オフであった場合はＳ３８に進む。
【０１０８】
Ｓ３６では、多視点画像であることを表象するサンプルの３次元サムネイル画像をＥＥＰＲＯＭ１４６から取り出す。このサンプルは第２実施形態と同様３次元ＣＧ処理により立体効果が付与されており、ＥＥＰＲＯＭ１４６に予め格納されている。なおこのサンプルは実際の被写体である必要はない。
【０１０９】
Ｓ３７では、取り出したサンプルの３次元サムネイル画像をサムネイルバッファに格納する。サンプルの３次元サムネイル画像は、実際の被写体と同一である必要はなく、ただ、多視点画像であることを３Ｄグラフィックで示すためのサムネイル画像である。
【０１１０】
Ｓ３８〜Ｓ４２は、上述のＳ１８〜Ｓ２２と同様である。
【０１１１】
図８は、ＬＣＤ１０に一覧表示されたサンプルの３次元サムネイル画像Ｗ、通常サムネイル画像Ｙ、立体画像の縮小画像Ｚの一例を示す。
【０１１２】
ステップＳ３７でＥＥＰＲＯＭ１４６から取り出されたサンプルサムネイル画像Ｗは、３次元ＣＧ処理が施されているから、通常サムネイルＹや単なる立体画像の縮小画像Ｚとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、顔を被写体とする立体画像の識別が容易である。
【０１１３】
しかも、多視点画像としての有効利用が困難な、フラッシュ非発光条件下での暗い多視点画像にまで一律にサンプルを対応づけて記録しなくて済み、処理が効率化する。
【０１１４】
＜第４実施形態＞
図９は、画像記録処理の他の例を示す。ここでは、顔の写っている多視点画像のサムネイル画像を、特別なサンプルに置き換える。
【０１１５】
Ｓ５１〜Ｓ５３は、Ｓ１〜Ｓ３と同様である。
【０１１６】
Ｓ５４〜Ｓ５５は、Ｓ１４〜Ｓ１５と同様である。ただし、Ｓ５５では、顔があると判断した場合はＳ５６、顔がないと判断した場合はＳ５８に進む。
【０１１７】
Ｓ５６では、顔が写っている多視点画像であることを表象するサンプルの３次元サムネイル画像をＥＥＰＲＯＭ１４６から取り出す。
【０１１８】
Ｓ５７では、取り出したサンプルをサムネイルバッファに格納する。サンプルの３次元サムネイル画像は、実際の被写体の顔と同一である必要はなく、サンプルの人物の顔であればよく、かつその顔や身体などには、３Ｄグラフィックによる立体効果が予め付与されている。
【０１１９】
Ｓ５８〜Ｓ６２は、上述のＳ１８〜Ｓ２２と同様である。
【０１２０】
図１０は、ＬＣＤ１０に一覧表示されたサンプルの３次元サムネイル画像Ｕ、通常サムネイル画像Ｙ、立体画像の縮小画像Ｚの一例を示す。
【０１２１】
サンプルサムネイル画像Ｕは、３次元ＣＧグラフィック処理が施されているから、通常サムネイルＹや立体画像縮小画像Ｚとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、顔を被写体とする立体画像の識別が容易である。
【０１２２】
＜第５実施形態＞
図１１は、画像記録処理の他の例を示す。ここでは、近距離の被写体を撮影した多視点画像のサムネイル画像のみを、３次元ＣＧ処理する。
【０１２３】
Ｓ７１〜Ｓ７３は、Ｓ１〜Ｓ３と同様である。
【０１２４】
Ｓ７４では、距離情報記憶回路５８から距離情報を取得し、撮影時のカメラ１から被写体までの距離を識別する。なお、距離情報は、例えば、Ｅｘｉｆファイルの「SubjectDistance」タグに格納される。距離情報記憶回路５８の距離情報は、距離用撮像素子５１ａから得られたものあるいは距離用撮像素子５１ｂから得られたものの２種類が存在するが、どちらを用いてもよく、例えば、距離の短い方の距離情報を用いる。
【０１２５】
Ｓ７５では、距離情報Ｄに基づき、被写体が所定の距離よりも遠い位置（例えばＤ＞１０ｍ）にあったか否かを判断する。被写体が遠距離でない場合すなわち近距離にいる場合はＳ７６に進み、被写体が遠距離であった場合はＳ７８に進む。
【０１２６】
Ｓ７６では、Ｓ５と同様、３次元ＣＧサムネイル画像を作成する。
【０１２７】
Ｓ７７では、作成した３次元ＣＧサムネイル画像を、バッファメモリ４２に確保されたサムネイルバッファに格納する。
【０１２８】
Ｓ７８〜Ｓ８２は、上述のＳ１８〜Ｓ２２と同様である。
【０１２９】
図１２は、ＬＣＤ１０に一覧表示された３次元サムネイル画像Ｔ、通常サムネイル画像Ｙ、３次元ＣＧ処理の施されなかった被写体が遠いサムネイル画像Ｖの一例を示す。
【０１３０】
被写体が近距離にあるサンプルサムネイル画像Ｔは、３次元ＣＧ処理が施されているから、写実的手法を実現する特殊な装置を用いなくとも、通常サムネイルＹや被写体が遠い画像のサムネイル画像Ｖとの違いが一見して明らかである。
【０１３１】
しかも、撮影時に被写体が近距離にいた多視点画像についてのみ３次元ＣＧ処理を施すから、当該処理を施しても無意味な、被写体が遠い画像にまで一律に３次元ＣＧ処理をしなくて済み、処理が効率化する。
【０１３２】
＜第６実施形態＞
図１３は、画像記録処理の他の例を示す。ここでは、多視点画像として遠距離の被写体を撮影した場合、警告を発し、多視点画像の記録そのものを行わない。一方、近距離で撮影された多視点画像のサムネイル画像のみを、３次元ＣＧ処理し、本画像と対応づけて記録する。
【０１３３】
Ｓ９１〜Ｓ９５は、Ｓ７１〜Ｓ７５と同様である。ただし、Ｓ９５では、被写体が遠距離と判断した場合はＳ９６、被写体が近距離と判断した場合はＳ９７に進む。
【０１３４】
Ｓ９６では、被写体が遠距離であり多視点画像を記録しない旨の警告をＬＣＤ１０に表示する。そしてＳ１０１の画像記録には進まず、処理を終える。
【０１３５】
Ｓ９７〜Ｓ９８は、Ｓ７６〜Ｓ７７と同様である。また、Ｓ９９〜Ｓ１０１は、Ｓ８０〜Ｓ８２と同様である。
【０１３６】
この処理では、撮影時に被写体が近距離にいた多視点画像についてのみ３次元ＣＧ処理を施し、本画像と対応づけて記録するから、当該処理を施しても無意味な、被写体が遠い画像にまで一律に３次元ＣＧ処理をしなくて済み、処理が効率化する。
【０１３７】
また、この処理では、撮影時に被写体が遠距離にいた多視点画像については、警告表示を行い、本画像の記録は行わない。つまり、被写体が遠く、立体視効果の生じない多視点画像を記録しなくて済み、処理が効率化する。
【０１３８】
＜その他の実施形態＞
上記第１〜６実施形態の一部または全部の組み合わせも可能である。例えば、顔が検出され、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施した縮小画像を本画像と関連づけて記録することもできる。あるいは、顔が検出され、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施したサンプル縮小画像を本画像と関連づけて記録することもできる。
【０１３９】
あるいは、被写体距離が近距離であり、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施した縮小画像を本画像と関連づけて記録することもできる。あるいは、被写体距離が近距離であり、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施したサンプル縮小画像を本画像と関連づけて記録することもできる。
【０１４０】
なお、顔検出があった場合は、被写体距離は近距離と想定されるため、顔検出があった場合、被写体距離が近距離または遠距離にある判定を省略してもよい。
【図面の簡単な説明】
【０１４１】
【図１】カメラのブロック図
【図２】第１実施形態に係る画像記録処理のフローチャート
【図３】テクスチャマッピングの一例を示す図
【図４】第１実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図５】第２実施形態に係る画像記録処理のフローチャート
【図６】第２実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図７】第３実施形態に係る画像記録処理のフローチャート
【図８】第３実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図９】第４実施形態に係る画像記録処理のフローチャート
【図１０】第４実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図１１】第５実施形態に係る画像記録処理のフローチャート
【図１２】第５実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図１３】第６実施形態に係る画像記録処理のフローチャート
【符号の説明】
【０１４２】
１：カメラ、２ａ：第１撮像部、２ｂ：第２撮像部、１０：ＬＣＤ、６２：メインＣＰＵ、３８：メモリカード
【技術分野】
【０００１】
本発明は多視点画像および単視点画像の縮小画像の記録に関する。
【背景技術】
【０００２】
一般的な立体画像表示システムでは、右眼に対しては右眼を視点として描かれた画像が、左眼に対しては左眼を視点として描かれた画像が個別に提示される。通常、このような右眼および左眼を視点とした２つの画像（以下、多視点画像と表記する）において、視点から遠い位置にあるオブジェクトは、両眼からの視線がほぼ平行であって見え方がほぼ同じであるので、ほぼ同じ位置に描画される。一方、視点から近い位置にあるオブジェクトは、両眼からの視線が非平行であって見え方が異なるので、互いにずれた位置に描画される。このような視差のある画像（以下、視差画像と表記する）を右眼および左眼それぞれで見るとき、観測者はオブジェクトに対して遠近感を知覚する。
【０００３】
視差画像の生成に関しては、左右２台のカメラを用いて被写体を撮影し、得られた視差画像を、眼の錯覚を利用して３次元的に見せる写実的手法と、コンピュータグラフィックス技術を用いて左右両眼を視点とするモデルデータの視野変換によって視差画像を生成する３次元コンピュータグラフィックス（３次元ＣＧ）表示がある。３次元コンピュータグラフィックス表示は、俗に仮想的３次元表示や擬似的３次元表示とも言われる。
【０００４】
写実的手法では、パララックスバリア式、あるいはレンチキュラーレンズ式の３Ｄモニタを用いて視差画像の立体表示を行う。パララックスバリア式では、パララックスバリア表示層に光透過部と光遮蔽部とが交互に所定のピッチで並んだパターンからなるパララックスバリアを発生させるとともに、その下層の画像表示面に左右の像を示す短冊状の画像断片を交互に配列して表示することで視差画像の立体視を可能にする。
【０００５】
あるいは、写実的手法では、レンチキュラーレンズシートを用いるレンチキュラー方式、マイクロレンズアレイシートを用いるインテグラルフォトグラフィ方式、干渉現象を用いるホログラフィー方式などが採用される。
【０００６】
一般的なコンピュータグラフィックスでは、３次元空間内に定義されたオブジェクトを複数のポリゴン（多角形）の集合によって表現する。ポリゴンとしては通常、最も簡単な三角形が用いられることが多い。オブジェクトを構成している各ポリゴンは、ベクトルや行列などの数学的手法を用いて、それ自身が持つオブジェクト座標から、観測者の視点の位置を基準とした３次元座標、すなわち視野座標へと座標変換が行われる。さらにディスプレイ装置へ表示するために、視野座標で表現されたポリゴンを２次元平面へ透視投影するための座標変換（透視変換）が行われる。これら一連の座標変換が行われた後の最終的なポリゴンの位置データは、ディスプレイに対して垂直な方向（Ｚ軸）への視点からの距離を表すＺ値と、ディスプレイ面内での位置座標を表すＸ値およびＹ値となる。
【０００７】
各ポリゴンを構成する画素の色値の決定方法に関しては、視野座標において仮想的な光源が配置され、この光源からポリゴンを構成する各頂点に照射される光の強度を物理的に計算し、さらにそれらの値からポリゴン内のラスタライズ過程において各画素位置における光の強度を線形補間によって求める方法がある。
【０００８】
あるいは、特許文献１に示すように、ポリゴン表面にテクスチャと呼ばれる、物体表面の質感や特殊な模様などを表す画像を貼り付ける方法がある。この場合には、座標変換前のオブジェクト座標の段階で、オブジェクトを構成するポリゴンの各頂点に対して位置座標の他にテクスチャ座標が与えられる。そして前述の光強度の場合と同様に、ポリゴンのラスタライズ過程において各画素位置ごとにテクスチャ座標が線形補間され、求められたテクスチャ座標に応じて画素の色値が決定される。
【０００９】
以上のような手続きによって、特定の視点から見たグラフィックス画像を生成することができるが、前述のような立体視のための視差画像を生成するためには、視点の位置を右眼および左眼のそれぞれの位置に置き換え、同一のオブジェクトを２回描画することによって、多視点画像を生成する。高価なシステムでは、上記のような写実的手法を実現可能な表示装置を備え、多視点画像を生成する。
【００１０】
一方、従来、多視点画像と、視差のない通常の画像とが混在して記憶装置に格納されている場合、これらの縮小画像を区別可能に表示する技術がある。特許文献２の電子機器は、写実的手法を実現可能な表示装置を備えており、サムネイル画像の平面的な一覧表示の際、３次元画像に対応するサムネイル画像については「３Ｄ」の記号を加え、また、円形または楕円形で表記し、２次元画像に対応するサムネイル画像については「２Ｄ」の記号を加え、三角形で表記し、２次元画像から作成したサムネイルと３次元画像から作成したサムネイルとを区別可能にしている。
【００１１】
また、従来、遠距離に被写体が存在する場合であっても、立体視効果を上げるような撮像方法が提案されている。例えば特許文献３によると、開いた筐体の両端にカメラ部を設け、遠距離でも立体画像の効果を上げている。
【特許文献１】特開２００２−２４８５０号公報
【特許文献２】特開２００４−１２０１６５号公報
【特許文献３】特開２００３−５１８７２号公報
【発明の開示】
【発明が解決しようとする課題】
【００１２】
特許文献２では、「３Ｄ」や「２Ｄ」という記号や、円形、楕円形、三角形という図形で２次元画像と３次元画像のサムネイルを表記しているが、これでは、両者が直感的に区別しにくい。
【００１３】
また、特許文献２では、写実的手法による３次元画像の表示を実現可能な表示装置の配備が必須であり、かつ、２次元画像と３次元画像の表示切替が必須であるため、システム全体のコストが高くなってしまうという欠点がある。
【００１４】
特に、デジタルカメラのような携帯型機器において、そのような特殊な表示装置の配置を強いることは、携帯性の確保や生産コスト抑制の点で非常に問題がある。
【００１５】
また、特許文献３では、無限遠の被写体に対しては立体視効果を付与できないという問題がある。
【００１６】
そこで本発明は、ユーザが撮影画像の縮小画像の中から多視点画像の縮小画像を容易かつ直感的に識別できる画像記録を簡易な構成で実現する。また本発明は、立体効果が生じないような無意味な多視点画像の記録を防止する。
【課題を解決するための手段】
【００１７】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、本画像を縮小した第１の縮小画像を作成した上、画像識別部が多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、画像識別部による多視点画像または単視点画像の識別に応じ、画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００１８】
この発明によると、多視点画像の縮小画像として３次元コンピュータグラフィック処理の施された縮小画像が、単視点画像の縮小画像として単なる縮小画像が、それぞれ本画像と対応づけて記録される。多視点画像の縮小画像は３次元コンピュータグラフィック処理されているから、単なる縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要がなく、装置構成が安価で済む。
【００１９】
画像識別部が多視点画像であると識別した本画像から、被写体顔領域の有無を検出する顔検出部をさらに備え、画像処理部は、第１の縮小画像に対し、顔検出部が検出した被写体顔領域に対応する領域を設定した上、設定された領域に３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成してもよい。
【００２０】
ここでは、顔という重要部分に限って３次元コンピュータグラフィック処理を施しており、少ない処理で実質的な擬似立体縮小画像を記録できる。
【００２１】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、画像識別部が多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するフラッシュ発光識別部と、画像識別部が単視点画像であると識別したかまたはフラッシュ発光識別部が撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成する画像処理部と、画像識別部が多視点画像と識別しかつフラッシュ発光識別部がフラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、画像識別部による多視点画像または単視点画像の識別とフラッシュ発光識別部による撮影時のフラッシュ発光の有無の識別とに応じ、画像処理部の作成した第１の縮小画像またはサンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００２２】
この発明によると、撮影時にフラッシュ発光があった多視点画像の縮小画像として３次元コンピュータグラフィック処理の施された所定のサンプル縮小画像が、単視点画像あるいは撮影時にフラッシュ発光がなかった多視点画像の縮小画像としては単なる通常の縮小画像が、本画像と対応づけて記録される。
【００２３】
撮影時にフラッシュ発光があった多視点画像のサンプル縮小画像は３次元コンピュータグラフィック処理されているから、単なる縮小画像あるいは撮影時にフラッシュ発光がなかった多視点画像の縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要も、撮影ごとに３次元コンピュータグラフィック処理を行う必要もなく、装置構成が安価で済む。
【００２４】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、画像識別部が多視点画像であると識別した画像について、被写体顔領域の有無を検出する顔検出部と、画像識別部が単視点画像であると識別したかまたは顔検出部が被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成する画像処理部と、画像識別部が多視点画像と識別しかつ顔検出部が被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、画像識別部による多視点画像または単視点画像の識別と顔検出部による被写体顔領域の検出の有無とに応じ、画像処理部の作成した第１の縮小画像またはサンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００２５】
この発明によると、被写体顔領域があった多視点画像の縮小画像として３次元コンピュータグラフィック処理の施された所定のサンプル縮小画像が、単視点画像あるいは被写体顔領域がなかった多視点画像の縮小画像としては単なる通常の縮小画像が、本画像と対応づけて記録される。
【００２６】
被写体顔領域があった多視点画像のサンプル縮小画像は３次元コンピュータグラフィック処理されているから、単なる縮小画像あるいは撮影時にフラッシュ発光がなかった多視点画像の縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要も、撮影ごとに３次元コンピュータグラフィック処理を行う必要もなく、装置構成が安価で済む。
【００２７】
本発明に係る画像記録装置は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、画像識別部が多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別する距離識別部と、本画像を縮小した第１の縮小画像を作成した上、画像識別部が多視点画像であると識別しかつ距離識別部が被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、画像識別部による多視点画像または単視点画像の識別と距離識別部による被写体の距離の識別とに応じ、画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、を備える。
【００２８】
この発明によると、近距離に被写体がある多視点画像に対してのみ３次元コンピュータグラフィック処理を施すから、被写体が遠距離にあり当該処理を施しても無意味な画像には当該処理を行わなくて済む。
【００２９】
記録部は、画像識別部が多視点画像であると識別した本画像については、距離識別部が被写体が近距離にあると識別した本画像についてのみ記録するとよい。
【００３０】
こうすると、被写体が所定距離以上の遠距離にあり、立体効果が生じにくい多視点画像、あるいは立体効果が全く生じない多視点画像を記録しなくて済み、無意味な画像記録を防止できる。
【００３１】
画像識別部が多視点画像であると識別しかつ距離識別部が被写体が遠距離にあると識別した本画像は記録しない旨の警告を通知する通知部をさらに備えてもよい。
【００３２】
こうすると、被写体が遠距離にあり立体効果が生じにくい多視点画像が記録されないことをユーザが認識できる。
【００３３】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、本画像を縮小した第１の縮小画像を作成した上、多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、多視点画像または単視点画像の識別に応じ、作成した第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３４】
この画像記録方法は、多視点画像であると識別した本画像から、被写体顔領域の有無を検出するステップと、第１の縮小画像に対し、検出した被写体顔領域に対応する領域を設定した上、設定された領域に３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、をさらに含んでもよい。
【００３５】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するなステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するステップと、単視点画像であると識別したかまたは撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成するステップと、多視点画像と識別しかつフラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、多視点画像または単視点画像の識別と撮影時のフラッシュ発光の有無の識別とに応じ、第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３６】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、多視点画像であると識別した画像について、被写体顔領域の有無を検出するステップと、単視点画像であると識別したかまたは被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成するステップと、多視点画像と識別しかつ被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、多視点画像または単視点画像の識別と被写体顔領域の検出の有無とに応じ、第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３７】
本発明に係る画像記録方法は、２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、撮影した多視点画像または単視点画像である本画像を記憶するステップと、記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別するステップと、本画像を縮小した第１の縮小画像を作成した上、多視点画像であると識別しかつ被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、多視点画像または単視点画像の識別と被写体の距離の識別とに応じ、第１の縮小画像または第２の縮小画像を記憶するステップと、記憶された第１の縮小画像または第２の縮小画像と記憶された本画像とを対応づけて記録するステップと、を含む。
【００３８】
この画像記録方法は、多視点画像であると識別した本画像については、被写体が近距離にあると識別した本画像についてのみ記録することが好ましい。
【００３９】
また、多視点画像であると識別しかつ被写体が遠距離にあると識別した本画像は記録しない旨の警告を表示するステップをさらに含むことが好ましい。
【００４０】
上記の画像記録方法をコンピュータに実行させるプログラムも本発明に含まれる。
【発明の効果】
【００４１】
本発明によると、多視点画像の縮小画像として、３次元コンピュータグラフィック処理の施された縮小画像、より好適には被写体顔領域に３次元コンピュータグラフィック処理の施された縮小画像が、本画像と対応づけて記録される。一方、単視点画像、顔の検出されない多視点画像、あるいは被写体が遠距離にある多視点画像の縮小画像として、単なる縮小画像が、本画像と対応づけて記録される。多視点画像の縮小画像は３次元コンピュータグラフィック処理されているから、多視点画像の縮小画像と単視点画像の縮小画像との違いが一目瞭然で分かる。また、多視点画像の縮小画像の表示のために特殊な写実的手法を使う必要がなく、装置構成が安価で済む。
【発明を実施するための最良の形態】
【００４２】
＜第１実施形態＞
図１は、複眼カメラ１の電気的構成を示す。第１および第２撮像部２ａ、２ｂのレンズ光軸Ｌ１、Ｌ２は、平行となるように、あるいは所定角度をなすように並設されている。
【００４３】
第１撮像部２ａは、レンズ光軸Ｌ１に沿って配列された第１ズームレンズ１１ａ、第１絞り１２ａ、第１フォーカスレンズ１３ａ、および第１イメージセンサ１４ａによって構成されている。第１絞り１２ａには絞り制御部１６ａが接続されており、また、第１イメージセンサ１４ａにはタイミングジェネレータ（ＴＧ）１８ａが接続されている。第１絞り１２ａ、第１フォーカスレンズ１３ａの動作は測光測距ＣＰＵ１９ａによって制御される。ＴＧ１８ａの動作はメインＣＰＵ６２によって制御される。
【００４４】
カメラ１にはユーザがこのカメラ１を使用するときに種々の操作を行うための操作部７０が設けられている。この操作部７０には、カメラ１を作動させるための電源投入用の電源スイッチ、立体（３Ｄ）撮影、平面（２Ｄ）撮影、オート撮影やマニュアル撮影等を選択するためのモードダイヤル、各種のメニューの設定や選択あるいはズームを行うための十字キー、閃光発光用スイッチ、および十字キーで選択されたメニューの実行やキャンセル等を行うための情報位置指定キーが備えられている。操作部７０への適宜操作により、電源のオン／オフ、各種モード（撮影モード、再生モード等）の切り替え、ズーミングなどが行われる。
【００４５】
また、カメラ１には、メインＣＰＵ６２と、ＥＥＰＲＯＭ１４６と、ＹＣ／ＲＧＢ変換部１４７と、表示用のドライバ１４８とが備えられている。メインＣＰＵ６２は、このカメラ１全体の制御を行う。ＥＥＰＲＯＭ１４６には、このカメラ１固有の固体データやプログラム等が格納されている。
【００４６】
ＹＣ／ＲＧＢ変換部１４７は、ＹＣ処理部３５ａ・３５ｂで生成されたカラー映像信号ＹＣを３色のＲＧＢ信号に変換して表示用のドライバ１４８を経由して画像表示ＬＣＤ１０に出力する。
【００４７】
入力操作部９からのズーム操作に応じて、第１ズームレンズ１１ａは、レンズ光軸Ｌ１に沿ってＮＥＡＲ側（繰り出し側）、あるいはＩＮＦ側（繰り込み側）に移動し、ズーム倍率を変化させる。この移動は図示しないモータで駆動される。絞り１２ａは、ＡＥ（Auto Exposure）動作時に開口値（絞り値）を変化させて光束を制限し、露出調整を行う。フォーカスレンズ１３ａは、ＡＦ（Auto Focus）動作時にレンズ光軸Ｌ１に沿ってＮＥＡＲ側、あるいはＩＮＦ側に移動されて合焦位置を変え、ピント調整を行う。この移動は図示しないモータで駆動される。
【００４８】
静止画用レリーズスイッチ５ａの半押し状態が検出されたとき、メインＣＰＵ６２は距離用撮像素子５１ａ・５１ｂからそれぞれ測距データを得る。メインＣＰＵ６２は得られた測距データに基づいて、ピント、絞りなどの調整を行う。
【００４９】
第１イメージセンサ１４ａは、第１ズームレンズ１１ａ、第１絞り１２ａ、および第１フォーカスレンズ１３ａによって結像された被写体光を受光し、受光素子に受光量に応じた光電荷を蓄積する。第１イメージセンサ１４ａの光電荷蓄積・転送動作は、ＴＧ１８ａによって制御され、ＴＧ１８ａから入力されるタイミング信号（クロックパルス）により、電子シャッタ速度（光電荷蓄積時間）が決定される。第１イメージセンサ１４ａは、撮影モード時には、１画面分の画像信号を所定周期ごとに取得する。
【００５０】
第２撮像部２ｂは、第１撮像部２ａと同一の構成であり、第２ズームレンズ１１ｂ、第２絞り１２ｂ、第２フォーカスレンズ１３ｂ、およびタイミングジェネレータ（ＴＧ）１４ｂが接続された第２イメージセンサ１４ｂによって構成されている。これらの動作はメインＣＰＵ６２によって制御される。第１撮像部２ａと第２撮像部２ｂとは、基本的に連動して動作を行うが、各々個別に動作させることも可能となっている。なお、第１および第２イメージセンサ１４ａ・１４ｂとして、ＣＣＤ型やＣＭＯＳ型のイメージセンサが用いられる。
【００５１】
第１および第２イメージセンサ１４ａ・１４ｂから出力された撮像信号は、それぞれＡ／Ｄ変換器３０ａ・３０ｂに入力される。Ａ／Ｄ変換器３０ａ・３０ｂは、入力された画像データをアナログからデジタルに変換する。Ａ／Ｄ変換器３０ａ・３０ｂを通して、第１イメージセンサ１４ａの撮像信号は第１画像データ（右眼用画像データ）として、第２イメージセンサ１４ｂの撮像信号は第２画像データ（左眼用画像データ）として出力される。
【００５２】
画像信号処理回路３１ａ・３１ｂは、それぞれ、階調変換、ホワイトバランス補正、γ補正処理などの各種画像処理をＡ／Ｄ変換器３０ａ・３１ｂから入力された第１および第２画像データに施す。バッファメモリ３２ａ・３２ｂは、画像信号処理回路３１ａ・３１ｂで各種画像処理が施された第１および第２画像データを一時的に格納する。
【００５３】
測光・測距ＣＰＵ１９ａ・１９ｂは、それぞれ、バッファメモリ３２ａ・３２ｂに格納された第１および第２画像データの各々からＡＦ評価値およびＡＥ評価値を算出する。ＡＦ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値の高周波成分を積算することにより算出され、画像の鮮鋭度を表す。輝度値の高周波成分とは、隣接する画素間の輝度差（コントラスト）を所定領域内について足し合わせたものである。また、ＡＥ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値を積算することにより算出され、画像の明るさを表す。ＡＦ評価値およびＡＥ評価値は、後述する撮影準備処理時に実行されるＡＦ動作およびＡＥ動作においてそれぞれ使用される。
【００５４】
バッファメモリ３２ａ・３２ｂに記憶された画像データは、それぞれＹＣ処理部３５ａ・３５ｂにより輝度信号（Ｙ信号）及び色差信号（Ｃr,Ｃb 信号）に変換されるとともに、ガンマ補正等の所定の処理が施される。処理されたＹＣ信号はそれぞれワークメモリ１２８ａ・１２８ｂに格納される。
【００５５】
ワークメモリ１２８ａ・１２８ｂに記憶された第１および第２画像データのＹＣ信号は、それぞれコントローラ３４によってＹＣ／ＲＧＢ変換部１４７に読み出される。ＹＣ／ＲＧＢ変換部１４７は、第１および第２画像データのＹＣ信号を所定方式の映像信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換した上で、画像表示ＬＣＤ１０での立体表示を行うための立体画像データに合成する。撮影モード時にＬＣＤ１０が電子ビューファインダとして使用される際には、ＹＣ／ＲＧＢ変換部１４７によって合成された立体画像データが、ＬＣＤドライバ１４８を介してＬＣＤ１０にスルー画として表示される。
【００５６】
圧縮伸張処理回路３６ａ・３６ｂは、それぞれワークメモリ１２８ａ・１２８ｂに記憶された第１および第２画像データに対して、静止画ではＪＰＥＧ、動画ではＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４方式等の所定の圧縮形式に従って圧縮処理を施す。メディアコントローラ３７は、圧縮伸張処理回路３６ａ・３６によって圧縮処理された各画像データを、Ｉ／Ｆ３９経由で接続されたメモリカード３８その他の記録メディアに記録させる。
【００５７】
このようにしてメモリカード３８に記録された第１および第２画像データをＬＣＤ１０に再生表示する場合、メモリカード３８の各画像データは、メディアコントローラ３７によって読み出され、圧縮伸張処理回路３６ａ・３６によって伸張処理が行われ、ＹＣ／ＲＧＢ変換部１４７によって立体画像データに変換された後、ＬＣＤドライバ１４８を介してＬＣＤ１０に再生画像として表示される。
【００５８】
ＬＣＤ１０は、写実的手法を採用していない通常の平面モニタであり、画像撮影時には電子ビューファインダとして使用され、画像再生時には撮影によって得られた画像データの表示を行う。
【００５９】
メインＣＰＵ６２は、複眼カメラ１の全体の動作を統括的に制御する。メインＣＰＵ６２には、レリーズスイッチ５ａ・５ｂ、操作部７０のほか、不揮発性メモリであるＥＥＰＲＯＭ１４６が接続されている。ＥＥＰＲＯＭ１４６は、各種制御用のプログラムや設定情報などを格納している。メインＣＰＵ６２は、このプログラムや設定情報に基づいて各種処理を実行する。
【００６０】
また、メインＣＰＵ６２には、光学系制御指示部１２７が接続されており、光学系制御指示部１２７へのズーム操作に応じて第１撮像部２ａ・第２撮像部２ｂの撮影倍率が変更される。
【００６１】
レリーズスイッチ５ａ・５ｂは２段押しのスイッチ構造となっている。撮影モード中に、レリーズスイッチ５ａ・５ｂが軽く押圧（半押し）されると、ＡＦ動作およびＡＥ動作が行われ撮影準備処理がなされる。この状態でさらにレリーズスイッチ５ａ・５ｂが強く押圧（全押し）されると、撮影処理が行われ、１画面分の第１および第２画像データがフレームメモリ３２からメモリカード３８に転送されて記録される。
【００６２】
ＡＦ動作は、メインＣＰＵ６２が第１および第２フォーカスレンズ１３ａ・１３ｂを制御してそれぞれ所定方向に移動させながら、順次に得られる第１および第２画像データの各々から算出されたＡＦ評価値の最大値を求めることによりなされる。ＡＥ動作は、ＡＦ動作が完了した後、算出されたＡＥ評価値に基づいて、第１および第２絞り１２ａ・１２ｂの開口値、および第１および第２イメージセンサ１４ａ・１４ｂの電子シャッタ速度を設定することによりなされる。
【００６３】
また、カメラ１には、操作の手助けを行うための操作ＬＣＤ表示１０３が備えられている。
【００６４】
また、カメラ１は、電源電池６８が着脱可能な構成となっている。電源電池６８は充電可能な二次電池、例えばニカド電池、ニッケル水素電池、リチウムイオン電池で構成される。電源電池６８は使い切り型の一次電池、例えばリチウム電池、アルカリ電池で構成してもよい。電源電池６８は図示しない電池収納室に装填することにより、カメラ１の各回路と電気的に接続される。
【００６５】
第１撮像部２ａ、第２撮像部２ｂには、それぞれ、第１撮像部２ａと第２撮像部２ｂのなす間隔／輻輳角を検出する間隔／輻輳角検出回路４ａ・４ｂと、間隔／輻輳角検出回路４ａ・４ｂの検出した輻輳角を記憶するレンズ間隔／輻輳角記憶回路６、基線長の伸縮と光軸を駆動モータなどで回転させ輻輳を変化させる間隔／輻輳角駆動回路３ａ・３ｂとが備えられている。
【００６６】
また、カメラ１には、間隔／輻輳角検出回路４ａ・４ｂの検出した間隔／輻輳角に基づいて間隔／輻輳角駆動回路３ａ・３ｂの輻輳角の変化を制御する間隔／輻輳角制御回路５が備えられている。
【００６７】
充電・発光制御部１３８ａ・１３８ｂは、それぞれストロボ４４ａ・４４ｂを発光させるために電源電池６８からの電力の供給を受けて図示しない閃光発光用のコンデンサを充電したり、ストロボ４４ａ・４４ｂの発光を制御する。
【００６８】
充電・発光制御部１３８ａ・１３８ｂは、レリーズスイッチ５ａ・５ｂの半押し・全押し操作信号等の各種の信号や、発光量、発光タイミングを示す信号をメインＣＰＵ６２や測光・測距ＣＰＵ１９ａ・１９ｂから取り込んだことに応じ、ストロボ４４ａ・４４ｂへの電流供給制御を行い、所望の発光量が所望のタイミングで得られるように制御する。
【００６９】
縦撮り／横撮り切替ボタン４０は、縦撮りまたは横撮りのいずれで撮影を行うかを指示するためのボタンである。縦撮り／横撮り検出回路１６６は、このボタンの状態により、縦撮りまたは横撮りのいずれで撮影を行うかを検出する。
【００７０】
２Ｄ／３Ｄモード切替フラグ１６８には、３Ｄ撮影モード／２Ｄ撮影モードの設定操作に応じて、２Ｄモードであることまたは３Ｄモードであることを表すフラグが設定される。
【００７１】
距離用発光素子５２ａ、５２ｂは、それぞれ、第１撮像部２ａおよび第２撮像部２ｂの捉えた同一被写体へ投光スポットを照射するための発光ダイオード（ＬＥＤ）からなる。
【００７２】
距離用撮像素子５１ａ、５１ｂは、それぞれ、距離用発光素子５２ａ、５２ｂにより投光スポットの照射された被写体像を取得する測距専用の撮像素子である。
【００７３】
距離用駆動／制御回路５４は、距離用発光素子５２ａ、５２ｂの発光タイミングと距離用撮像素子５３ａ、５３ｂとを同期させる制御を行う。
【００７４】
距離用撮像素子５３ａ、５３ｂの撮像動作で得られたアナログ画像信号はそれぞれ測距用Ａ／Ｄ変換部５５ａ、５５ｂでデジタル画像データに変換され、距離情報処理回路５７に出力される。
【００７５】
距離情報処理回路５７は、入力されたデジタル画像データから、第１撮像部２ａおよび第２撮像部２ｂの捉えた被写体までの距離を算出する。これはいわゆる三角測距の原理に基づく。距離情報処理回路５７が算出した距離情報は距離情報記憶回路５８に記憶される。
【００７６】
顔検出部１５０は、バッファメモリ３２ａあるいはバッファメモリ３２ｂに格納された画像データや、バッファメモリ４２に格納された画像データから被写体となった人物の顔部分を含む領域である顔領域を検出する。
【００７７】
顔領域の検出方法は特に限定されず、各種のものを採用できるが、例えば本出願人による特開平９−１０１５７９号公報において開示された技術を適用することができる。この技術は、撮影した画像の各画素の色相が肌色の範囲に含まれるか否かを判定して肌色領域と非肌色領域とに分割すると共に、画像中のエッジを検出して画像中の各箇所をエッジ部分又は非エッジ部分に分類する。そして、肌色領域内に位置し非エッジ部分に分類された画素からなり、かつエッジ部分と判定された画素で囲まれた領域を顔候補領域として抽出し、抽出した顔候補領域が人物の顔に相当する領域かを判定し、この判定結果に基づき顔領域として検出するものである。また、この他に、特開２００３−２０９６８３号公報や特開２００２−１９９２２１号公報に記載される方法で顔領域を検出することもできる。
【００７８】
なお、多視点画像は、上述のような複眼カメラ１で取得する必然性はなく、単眼カメラを用いたモーションステレオ法による連続撮影で取得してもよい。
【００７９】
以下、図２のフローチャートを参照し、カメラ１で実行される画像記録処理の流れを説明する。この処理を規定するプログラムはＥＥＰＲＯＭ１４６に格納されており、メインＣＰＵ６２がこのプログラムを実行する。操作部７０からの「サムネイル画像一覧表示」の指示に応じ、メモリカード３８に格納されている全ての多視点画像に対して一括して行われる。
【００８０】
Ｓ１では、静止画用レリーズスイッチ５ａが全押しされたか否かを判断する。静止画用レリーズスイッチ５ａが全押しされた場合はＳ２に進む。
【００８１】
Ｓ２では、記録用静止画データの取り込みを開始する。取り込まれた画像データ（本画像）はバッファメモリ４２に確保された本画像バッファに一旦格納される。
【００８２】
Ｓ３では、２Ｄ／３Ｄモード切替フラグ１６８のフラグを判断する。３Ｄモードのフラグが立っている場合はＳ４に進む。２Ｄモードのフラグが立っている場合はＳ７に進む。
【００８３】
Ｓ４では、本画像バッファに格納されている多視点画像から、サムネイル画像を作成する。その具体的手法は特許文献２の段落００４０と同様、左目用画像のみ、右目用画像のみ、あるいはその両方を間引いて作成すればよい。
【００８４】
Ｓ５では、作成されたサムネイル画像に３次元ＣＧ処理を施すことで３次元サムネイル画像を作成する。例えば図３に示すように、画像中に存在する主要被写体その他の各種の物体（図３はマグカップを示しているが、人物などでもよい）に対応した３次元形状モデルのポリゴンＰＧに、サムネイル画像ｔｈの対応領域を貼り付けるテクスチャマッピングを行い、３次元ＣＧサムネイル画像Ｘを得る。この具体的手法は特許文献１と同様である。あるいは、元の多視点画像について３次元ＣＧ処理を施し、それを間引くことで３次元ＣＧサムネイル画像を作成してもよいが、処理の負荷の点では、先にサムネイルを作成する方が優れている。
【００８５】
なお、その他の３Ｄコンピュータグラフィック手法をサムネイル画像に適用し３次元ＣＧサムネイル画像を作成してもよい。
【００８６】
Ｓ６では、作成した３次元ＣＧサムネイル画像を、バッファメモリ４１に確保されたサムネイルバッファに格納する。
【００８７】
Ｓ７では、画像ファイルに格納されている単視点の通常画像から、サムネイル画像を作成する。その具体的手法は通常のサムネイル画像と同様、単視点画像を間引いて作成すればよい。このサムネイルを通常サムネイル画像と呼ぶ。
【００８８】
Ｓ８では、作成した通常サムネイル画像を、バッファメモリ４２に確保されたサムネイルバッファに格納する。
【００８９】
Ｓ９では、バッファメモリ４２のサムネイルバッファに格納されたサムネイル画像と、本画像バッファに格納された本画像とを関連付けてメモリカード３８に記録する。両画像の関連付けは、例えば、両者を同一のＥｘｉｆ（Exchangeable image file format）ファイルに格納し、メモリカード３８に記録することで行うことができる。
【００９０】
なお、Ｓ３〜Ｓ９の処理は、記録用静止画が新たに取得されるごとに行ってもよいし、静止画を一定数撮り溜めてから行ってもよい。要するに、本画像と縮小画像とを関連付けて記録できれば、３次元ＣＧサムネイル画像の作成のタイミングはいつでもよい。
【００９１】
図４は、上記処理によりメモリカード３８に記録された画像ファイルから取り込まれＬＣＤ１０その他の表示装置に一覧表示された３次元ＣＧサムネイル画像Ｘおよび通常サムネイル画像Ｙの一例を示す。３次元ＣＧサムネイル画像Ｘは、上記ステップＳ４〜６で作成されたものであり、３次元ＣＧグラフィック処理が施され立体的効果が付与さているから、上記ステップＳ７〜８で作成された通常サムネイルＹとの違いが一見して明らかであり、写実的手法を実現する特殊な表示装置を用いなくとも、多視点画像の縮小画像であることを観者に容易に認識させることができる。
【００９２】
＜第２実施形態＞
図５は、画像記録処理の他の例を示す。ここでは、顔の写っている多視点画像のサムネイル画像を、当該多視点画像の顔領域についてのみ３次元ＣＧ処理を施したサムネイル画像に置き換える。
【００９３】
Ｓ１１〜Ｓ１３は、Ｓ１〜Ｓ３と同様である。
【００９４】
Ｓ１４では、顔検出部１５０に対し、多視点画像の一方または双方から顔を抽出するよう指令する。顔検出部１５０はメインＣＰＵ６２からの指令に応じ、画像ファイルに格納された左目用画像あるいは右目用画像から、顔領域の検出を試みる。
【００９５】
Ｓ１５では、顔検出部１５０が顔領域を検出できたか否かを判断する。顔領域を検出できた場合はＳ１６、検出できなかった場合はＳ１８に進む。
【００９６】
Ｓ１６では、顔が写っている多視点画像から、顔領域を抽出し、その顔領域に３次元ＣＧ処理を施す。これは例えば、顔が写っている多視点画像から顔領域を抽出するとともに、当該多視点画像を所定の間引き率で間引く。間引き後の縮小画像に、元多視点画像から抽出された顔領域に相当する領域を設定する。両視点画像から顔検出を試みた場合、検出精度の高い方の視点画像に顔領域を設定するとさらによい。そして、その設定領域中の顔に特有のポリゴンを作成し、当該ポリゴンに間引き後顔領域を貼り付けるテクスチャマッピングを行い、顔領域のみに３次元ＣＧ処理の施されたサムネイル画像を得る。この方式は、間引き画像の作成後に３次元ＣＧ処理を行う。
【００９７】
あるいは、その検出した顔自体から、その人物の顔に特有のポリゴンを作成し、当該ポリゴンに顔領域を貼り付けるテクスチャマッピングを行い、多視点画像に顔領域のみに３次元ＣＧ処理を施した仮のＣＧ画像を作る。そして、この仮のＣＧ画像を所定の間引き率で間引き、顔領域のみに３次元ＣＧ処理の施されたサムネイル画像を得る。この方式は、３次元ＣＧ処理の後に間引き画像を作成する。
【００９８】
上記のテクスチャマッピング方式はポリゴンの作成から始める必要があり、精密なポリゴンを作成すると処理負荷が大きい。ポリゴンの簡易な作成方法としては、次のようなものが挙げられる。まず、検出された顔領域から、顔の輪郭、目、鼻、口などの顔の構成部分を検出し、検出された顔の構成部分の位置に応じてポリゴン分割線を決める。例えば、両目の中央部分（眉間）から出発し鼻筋に沿って鼻先端に達する線と、両目を周回する線と、口を周回する線と、顔の輪郭とをポリゴン分割線とする。このポリゴンにテクスチャマッピングすると、口と鼻の部分が隆起し、目の周囲が窪んだような簡易な３次元ＣＧサムネイル画像が得られる。
【００９９】
Ｓ１７では、作成した３次元ＣＧサムネイル画像をサムネイルバッファに格納する。
【０１００】
Ｓ１８では、本画像バッファに格納されている多視点画像から、サムネイル画像を作成する。その具体的手法は特許文献２の段落００４０と同様、左目用画像のみ、右目用画像のみ、あるいはその両方を間引いて作成すればよい。
【０１０１】
Ｓ２０〜Ｓ２２は、上述のＳ７〜Ｓ９と同様である。
【０１０２】
図６は、ＬＣＤ１０に一覧表示された、顔の検出された多視点画像に対応する３次元サムネイル画像Ｓ、通常サムネイル画像Ｙ、顔の検出されなかった多視点画像に対応するサムネイル画像Ｚの一例を示す。
【０１０３】
サンプルサムネイル画像Ｕは、ステップＳ４〜Ｓ６で作成されたものであり、顔領域についてのみ３次元ＣＧグラフィック処理が施されているから、ステップＳ２０〜Ｓ２１で作成された通常サムネイルＹや、ステップＳ１８〜Ｓ１９で作成された単なる視点画像の縮小画像Ｚとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、顔を被写体とする立体画像の識別が容易である。しかも、元画像を用いて顔領域に３次元ＣＧグラフィック処理が施されているから、元画像の顔の概要も立体的に分かる。
【０１０４】
＜第３実施形態＞
図７は、メインＣＰＵ６２で実行される画像記録処理の他の例を示す。ここでは、フラッシュ撮影された多視点画像のサムネイル画像を、特別なサンプルに置き換える。
【０１０５】
Ｓ３１〜Ｓ３３は、Ｓ１〜Ｓ３と同様である。
【０１０６】
Ｓ３４では、測光測距ＣＰＵ１９ａ・１９ｂからフラッシュ発光情報を取得し、画像記録時のストロボ４４ａ・４４ｂのオンまたはオフの状況を識別する。なお、フラッシュ発光情報は、例えば、Ｅｘｉｆファイルの「Flash」タグに格納される。
【０１０７】
Ｓ３５では、フラッシュ発光情報に基づき、撮影時におけるストロボ４４ａ・４４ｂのオンまたはオフを判断する。撮影時にストロボ４４ａ・４４ｂがオンであった場合はＳ３６、オフであった場合はＳ３８に進む。
【０１０８】
Ｓ３６では、多視点画像であることを表象するサンプルの３次元サムネイル画像をＥＥＰＲＯＭ１４６から取り出す。このサンプルは第２実施形態と同様３次元ＣＧ処理により立体効果が付与されており、ＥＥＰＲＯＭ１４６に予め格納されている。なおこのサンプルは実際の被写体である必要はない。
【０１０９】
Ｓ３７では、取り出したサンプルの３次元サムネイル画像をサムネイルバッファに格納する。サンプルの３次元サムネイル画像は、実際の被写体と同一である必要はなく、ただ、多視点画像であることを３Ｄグラフィックで示すためのサムネイル画像である。
【０１１０】
Ｓ３８〜Ｓ４２は、上述のＳ１８〜Ｓ２２と同様である。
【０１１１】
図８は、ＬＣＤ１０に一覧表示されたサンプルの３次元サムネイル画像Ｗ、通常サムネイル画像Ｙ、立体画像の縮小画像Ｚの一例を示す。
【０１１２】
ステップＳ３７でＥＥＰＲＯＭ１４６から取り出されたサンプルサムネイル画像Ｗは、３次元ＣＧ処理が施されているから、通常サムネイルＹや単なる立体画像の縮小画像Ｚとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、顔を被写体とする立体画像の識別が容易である。
【０１１３】
しかも、多視点画像としての有効利用が困難な、フラッシュ非発光条件下での暗い多視点画像にまで一律にサンプルを対応づけて記録しなくて済み、処理が効率化する。
【０１１４】
＜第４実施形態＞
図９は、画像記録処理の他の例を示す。ここでは、顔の写っている多視点画像のサムネイル画像を、特別なサンプルに置き換える。
【０１１５】
Ｓ５１〜Ｓ５３は、Ｓ１〜Ｓ３と同様である。
【０１１６】
Ｓ５４〜Ｓ５５は、Ｓ１４〜Ｓ１５と同様である。ただし、Ｓ５５では、顔があると判断した場合はＳ５６、顔がないと判断した場合はＳ５８に進む。
【０１１７】
Ｓ５６では、顔が写っている多視点画像であることを表象するサンプルの３次元サムネイル画像をＥＥＰＲＯＭ１４６から取り出す。
【０１１８】
Ｓ５７では、取り出したサンプルをサムネイルバッファに格納する。サンプルの３次元サムネイル画像は、実際の被写体の顔と同一である必要はなく、サンプルの人物の顔であればよく、かつその顔や身体などには、３Ｄグラフィックによる立体効果が予め付与されている。
【０１１９】
Ｓ５８〜Ｓ６２は、上述のＳ１８〜Ｓ２２と同様である。
【０１２０】
図１０は、ＬＣＤ１０に一覧表示されたサンプルの３次元サムネイル画像Ｕ、通常サムネイル画像Ｙ、立体画像の縮小画像Ｚの一例を示す。
【０１２１】
サンプルサムネイル画像Ｕは、３次元ＣＧグラフィック処理が施されているから、通常サムネイルＹや立体画像縮小画像Ｚとの違いが一見して明らかであり、写実的手法を実現する特殊な装置を用いなくとも、顔を被写体とする立体画像の識別が容易である。
【０１２２】
＜第５実施形態＞
図１１は、画像記録処理の他の例を示す。ここでは、近距離の被写体を撮影した多視点画像のサムネイル画像のみを、３次元ＣＧ処理する。
【０１２３】
Ｓ７１〜Ｓ７３は、Ｓ１〜Ｓ３と同様である。
【０１２４】
Ｓ７４では、距離情報記憶回路５８から距離情報を取得し、撮影時のカメラ１から被写体までの距離を識別する。なお、距離情報は、例えば、Ｅｘｉｆファイルの「SubjectDistance」タグに格納される。距離情報記憶回路５８の距離情報は、距離用撮像素子５１ａから得られたものあるいは距離用撮像素子５１ｂから得られたものの２種類が存在するが、どちらを用いてもよく、例えば、距離の短い方の距離情報を用いる。
【０１２５】
Ｓ７５では、距離情報Ｄに基づき、被写体が所定の距離よりも遠い位置（例えばＤ＞１０ｍ）にあったか否かを判断する。被写体が遠距離でない場合すなわち近距離にいる場合はＳ７６に進み、被写体が遠距離であった場合はＳ７８に進む。
【０１２６】
Ｓ７６では、Ｓ５と同様、３次元ＣＧサムネイル画像を作成する。
【０１２７】
Ｓ７７では、作成した３次元ＣＧサムネイル画像を、バッファメモリ４２に確保されたサムネイルバッファに格納する。
【０１２８】
Ｓ７８〜Ｓ８２は、上述のＳ１８〜Ｓ２２と同様である。
【０１２９】
図１２は、ＬＣＤ１０に一覧表示された３次元サムネイル画像Ｔ、通常サムネイル画像Ｙ、３次元ＣＧ処理の施されなかった被写体が遠いサムネイル画像Ｖの一例を示す。
【０１３０】
被写体が近距離にあるサンプルサムネイル画像Ｔは、３次元ＣＧ処理が施されているから、写実的手法を実現する特殊な装置を用いなくとも、通常サムネイルＹや被写体が遠い画像のサムネイル画像Ｖとの違いが一見して明らかである。
【０１３１】
しかも、撮影時に被写体が近距離にいた多視点画像についてのみ３次元ＣＧ処理を施すから、当該処理を施しても無意味な、被写体が遠い画像にまで一律に３次元ＣＧ処理をしなくて済み、処理が効率化する。
【０１３２】
＜第６実施形態＞
図１３は、画像記録処理の他の例を示す。ここでは、多視点画像として遠距離の被写体を撮影した場合、警告を発し、多視点画像の記録そのものを行わない。一方、近距離で撮影された多視点画像のサムネイル画像のみを、３次元ＣＧ処理し、本画像と対応づけて記録する。
【０１３３】
Ｓ９１〜Ｓ９５は、Ｓ７１〜Ｓ７５と同様である。ただし、Ｓ９５では、被写体が遠距離と判断した場合はＳ９６、被写体が近距離と判断した場合はＳ９７に進む。
【０１３４】
Ｓ９６では、被写体が遠距離であり多視点画像を記録しない旨の警告をＬＣＤ１０に表示する。そしてＳ１０１の画像記録には進まず、処理を終える。
【０１３５】
Ｓ９７〜Ｓ９８は、Ｓ７６〜Ｓ７７と同様である。また、Ｓ９９〜Ｓ１０１は、Ｓ８０〜Ｓ８２と同様である。
【０１３６】
この処理では、撮影時に被写体が近距離にいた多視点画像についてのみ３次元ＣＧ処理を施し、本画像と対応づけて記録するから、当該処理を施しても無意味な、被写体が遠い画像にまで一律に３次元ＣＧ処理をしなくて済み、処理が効率化する。
【０１３７】
また、この処理では、撮影時に被写体が遠距離にいた多視点画像については、警告表示を行い、本画像の記録は行わない。つまり、被写体が遠く、立体視効果の生じない多視点画像を記録しなくて済み、処理が効率化する。
【０１３８】
＜その他の実施形態＞
上記第１〜６実施形態の一部または全部の組み合わせも可能である。例えば、顔が検出され、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施した縮小画像を本画像と関連づけて記録することもできる。あるいは、顔が検出され、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施したサンプル縮小画像を本画像と関連づけて記録することもできる。
【０１３９】
あるいは、被写体距離が近距離であり、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施した縮小画像を本画像と関連づけて記録することもできる。あるいは、被写体距離が近距離であり、かつ撮影時のフラッシュ発光がオンである場合に限り、３次元ＣＧ処理を施したサンプル縮小画像を本画像と関連づけて記録することもできる。
【０１４０】
なお、顔検出があった場合は、被写体距離は近距離と想定されるため、顔検出があった場合、被写体距離が近距離または遠距離にある判定を省略してもよい。
【図面の簡単な説明】
【０１４１】
【図１】カメラのブロック図
【図２】第１実施形態に係る画像記録処理のフローチャート
【図３】テクスチャマッピングの一例を示す図
【図４】第１実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図５】第２実施形態に係る画像記録処理のフローチャート
【図６】第２実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図７】第３実施形態に係る画像記録処理のフローチャート
【図８】第３実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図９】第４実施形態に係る画像記録処理のフローチャート
【図１０】第４実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図１１】第５実施形態に係る画像記録処理のフローチャート
【図１２】第５実施形態に係る画像記録処理により記録されたサムネイルの一例を示す図
【図１３】第６実施形態に係る画像記録処理のフローチャート
【符号の説明】
【０１４２】
１：カメラ、２ａ：第１撮像部、２ｂ：第２撮像部、１０：ＬＣＤ、６２：メインＣＰＵ、３８：メモリカード
【特許請求の範囲】
【請求項１】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記本画像を縮小した第１の縮小画像を作成した上、前記画像識別部が多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別に応じ、前記画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項２】
前記画像識別部が多視点画像であると識別した本画像から、被写体顔領域の有無を検出する顔検出部をさらに備え、
前記画像処理部は、前記第１の縮小画像に対し、前記顔検出部が検出した被写体顔領域に対応する領域を設定した上、前記設定された領域に３次元コンピュータグラフィック処理を施すことで、前記第２の縮小画像を作成する請求項１に記載の画像記録装置。
【請求項３】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記画像識別部が多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するフラッシュ発光識別部と、
前記画像識別部が単視点画像であると識別したかまたは前記フラッシュ発光識別部が撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成する画像処理部と、
前記画像識別部が多視点画像と識別しかつ前記フラッシュ発光識別部がフラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別と前記フラッシュ発光識別部による前記撮影時のフラッシュ発光の有無の識別とに応じ、前記画像処理部の作成した第１の縮小画像または前記サンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項４】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記画像識別部が多視点画像であると識別した画像について、被写体顔領域の有無を検出する顔検出部と、
前記画像識別部が単視点画像であると識別したかまたは前記顔検出部が被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成する画像処理部と、
前記画像識別部が多視点画像と識別しかつ前記顔検出部が被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別と前記顔検出部による前記被写体顔領域の検出の有無とに応じ、前記画像処理部の作成した第１の縮小画像または前記サンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項５】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記画像識別部が多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別する距離識別部と、
前記本画像を縮小した第１の縮小画像を作成した上、前記画像識別部が多視点画像であると識別しかつ前記距離識別部が被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別と前記距離識別部による前記被写体の距離の識別とに応じ、前記画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項６】
前記記録部は、前記画像識別部が多視点画像であると識別した本画像については、前記距離識別部が被写体が近距離にあると識別した本画像についてのみ記録する請求項５に記載の画像記録装置。
【請求項７】
前記画像識別部が多視点画像であると識別しかつ前記距離識別部が被写体が遠距離にあると識別した本画像は記録しない旨の警告を通知する通知部をさらに備える請求項６に記載の画像記録装置。
【請求項８】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
前記本画像を縮小した第１の縮小画像を作成した上、前記多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、
前記多視点画像または前記単視点画像の識別に応じ、作成した第１の縮小画像または第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項９】
前記多視点画像であると識別した本画像から、被写体顔領域の有無を検出するステップと、
前記第１の縮小画像に対し、前記検出した被写体顔領域に対応する領域を設定した上、前記設定された領域に３次元コンピュータグラフィック処理を施すことで、前記第２の縮小画像を作成するステップと、
をさらに含む請求項８に記載の画像記録方法。
【請求項１０】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するなステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するステップと、
前記単視点画像であると識別したかまたは前記撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成するステップと、
前記多視点画像と識別しかつ前記フラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、
前記多視点画像または前記単視点画像の識別と前記撮影時のフラッシュ発光の有無の識別とに応じ、前記第１の縮小画像または前記第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項１１】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
前記多視点画像であると識別した画像について、被写体顔領域の有無を検出するステップと、
前記単視点画像であると識別したかまたは前記被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成するステップと、
前記多視点画像と識別しかつ前記被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、
前記多視点画像または前記単視点画像の識別と前記被写体顔領域の検出の有無とに応じ、前記第１の縮小画像または前記第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項１２】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
前記多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別するステップと、
前記本画像を縮小した第１の縮小画像を作成した上、前記多視点画像であると識別しかつ前記被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、
前記多視点画像または前記単視点画像の識別と前記被写体の距離の識別とに応じ、前記第１の縮小画像または第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項１３】
前記多視点画像であると識別した本画像については、前記被写体が近距離にあると識別した本画像についてのみ記録する請求項１２に記載の画像記録方法。
【請求項１４】
前記多視点画像であると識別しかつ前記被写体が遠距離にあると識別した本画像は記録しない旨の警告を通知するステップをさらに含む請求項１３に記載の画像記録方法。
【請求項１５】
請求項８〜１４のいずれかに記載の画像記録方法をコンピュータに実行させるプログラム。
【請求項１】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記本画像を縮小した第１の縮小画像を作成した上、前記画像識別部が多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別に応じ、前記画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項２】
前記画像識別部が多視点画像であると識別した本画像から、被写体顔領域の有無を検出する顔検出部をさらに備え、
前記画像処理部は、前記第１の縮小画像に対し、前記顔検出部が検出した被写体顔領域に対応する領域を設定した上、前記設定された領域に３次元コンピュータグラフィック処理を施すことで、前記第２の縮小画像を作成する請求項１に記載の画像記録装置。
【請求項３】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記画像識別部が多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するフラッシュ発光識別部と、
前記画像識別部が単視点画像であると識別したかまたは前記フラッシュ発光識別部が撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成する画像処理部と、
前記画像識別部が多視点画像と識別しかつ前記フラッシュ発光識別部がフラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別と前記フラッシュ発光識別部による前記撮影時のフラッシュ発光の有無の識別とに応じ、前記画像処理部の作成した第１の縮小画像または前記サンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項４】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記画像識別部が多視点画像であると識別した画像について、被写体顔領域の有無を検出する顔検出部と、
前記画像識別部が単視点画像であると識別したかまたは前記顔検出部が被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成する画像処理部と、
前記画像識別部が多視点画像と識別しかつ前記顔検出部が被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するサンプル縮小画像取得部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別と前記顔検出部による前記被写体顔領域の検出の有無とに応じ、前記画像処理部の作成した第１の縮小画像または前記サンプル縮小画像取得部の取得した第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項５】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影可能な撮影部と、
前記撮影部の撮影した多視点画像または単視点画像である本画像を記憶する本画像記憶部と、
前記本画像記憶部に記憶された本画像が多視点画像であるか単視点画像であるかを識別する画像識別部と、
前記画像識別部が多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別する距離識別部と、
前記本画像を縮小した第１の縮小画像を作成した上、前記画像識別部が多視点画像であると識別しかつ前記距離識別部が被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成する画像処理部と、
前記画像識別部による前記多視点画像または前記単視点画像の識別と前記距離識別部による前記被写体の距離の識別とに応じ、前記画像処理部の作成した第１の縮小画像または第２の縮小画像を記憶する縮小画像記憶部と、
前記縮小画像記憶部に記憶された第１の縮小画像または第２の縮小画像と前記本画像記憶部に記憶された本画像とを対応づけて記録する記録部と、
を備える画像記録装置。
【請求項６】
前記記録部は、前記画像識別部が多視点画像であると識別した本画像については、前記距離識別部が被写体が近距離にあると識別した本画像についてのみ記録する請求項５に記載の画像記録装置。
【請求項７】
前記画像識別部が多視点画像であると識別しかつ前記距離識別部が被写体が遠距離にあると識別した本画像は記録しない旨の警告を通知する通知部をさらに備える請求項６に記載の画像記録装置。
【請求項８】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
前記本画像を縮小した第１の縮小画像を作成した上、前記多視点画像であると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、
前記多視点画像または前記単視点画像の識別に応じ、作成した第１の縮小画像または第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項９】
前記多視点画像であると識別した本画像から、被写体顔領域の有無を検出するステップと、
前記第１の縮小画像に対し、前記検出した被写体顔領域に対応する領域を設定した上、前記設定された領域に３次元コンピュータグラフィック処理を施すことで、前記第２の縮小画像を作成するステップと、
をさらに含む請求項８に記載の画像記録方法。
【請求項１０】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するなステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
多視点画像であると識別した画像について、撮影時のフラッシュ発光の有無を識別するステップと、
前記単視点画像であると識別したかまたは前記撮影時のフラッシュ発光がなかったと識別した本画像を縮小した第１の縮小画像を作成するステップと、
前記多視点画像と識別しかつ前記フラッシュ発光があったと識別した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、
前記多視点画像または前記単視点画像の識別と前記撮影時のフラッシュ発光の有無の識別とに応じ、前記第１の縮小画像または前記第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項１１】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
前記多視点画像であると識別した画像について、被写体顔領域の有無を検出するステップと、
前記単視点画像であると識別したかまたは前記被写体顔領域を検出しなかった本画像を縮小した第１の縮小画像を作成するステップと、
前記多視点画像と識別しかつ前記被写体顔領域を検出した本画像に対応する第２の縮小画像として３次元コンピュータグラフィックの施された所定のサンプル縮小画像を取得するステップと、
前記多視点画像または前記単視点画像の識別と前記被写体顔領域の検出の有無とに応じ、前記第１の縮小画像または前記第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項１２】
２以上の視点から撮影された多視点画像および単一の視点から撮影された単視点画像を含む画像を撮影するステップと、
撮影した多視点画像または単視点画像である本画像を記憶するステップと、
記憶された本画像が多視点画像であるか単視点画像であるかを識別するステップと、
前記多視点画像と識別した画像中の被写体が遠距離または近距離にあるかを識別するステップと、
前記本画像を縮小した第１の縮小画像を作成した上、前記多視点画像であると識別しかつ前記被写体が近距離にあると識別した本画像から作成された第１の縮小画像に対し、３次元コンピュータグラフィック処理を施すことで、第２の縮小画像を作成するステップと、
前記多視点画像または前記単視点画像の識別と前記被写体の距離の識別とに応じ、前記第１の縮小画像または第２の縮小画像を記憶するステップと、
前記記憶された第１の縮小画像または第２の縮小画像と前記記憶された本画像とを対応づけて記録するステップと、
を含む画像記録方法。
【請求項１３】
前記多視点画像であると識別した本画像については、前記被写体が近距離にあると識別した本画像についてのみ記録する請求項１２に記載の画像記録方法。
【請求項１４】
前記多視点画像であると識別しかつ前記被写体が遠距離にあると識別した本画像は記録しない旨の警告を通知するステップをさらに含む請求項１３に記載の画像記録方法。
【請求項１５】
請求項８〜１４のいずれかに記載の画像記録方法をコンピュータに実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００８−２７８４２５（Ｐ２００８−２７８４２５Ａ）
【公開日】平成２０年１１月１３日（２００８．１１．１３）
【国際特許分類】
【出願番号】特願２００７−１２２６４２（Ｐ２００７−１２２６４２）
【出願日】平成１９年５月７日（２００７．５．７）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２０年１１月１３日（２００８．１１．１３）
【国際特許分類】
【出願日】平成１９年５月７日（２００７．５．７）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]