複眼撮像装置およびその動作制御方法
【目的】背景画像に顔が重ならないようにする。
【構成】視点の異なる位置から被写体を撮像し，複数の被写体像を得る。撮像により得られた被写体像から顔画像が検出され（ステップ42），死角領域が検出される（ステップ43）。死角領域が背景オブジェクトと重なっている場合には（ステップ45でＹＥＳ），顔の移動指示が与えられる（ステップ47）。死角領域か背景オブジェクトに重畳しなければ（ステップ45でＮＯ），撮像により得られた被写体像を表す画像データが記録される（ステップ50）。
【構成】視点の異なる位置から被写体を撮像し，複数の被写体像を得る。撮像により得られた被写体像から顔画像が検出され（ステップ42），死角領域が検出される（ステップ43）。死角領域が背景オブジェクトと重なっている場合には（ステップ45でＹＥＳ），顔の移動指示が与えられる（ステップ47）。死角領域か背景オブジェクトに重畳しなければ（ステップ45でＮＯ），撮像により得られた被写体像を表す画像データが記録される（ステップ50）。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は，複眼撮像装置およびその動作制御方法に関する。
【背景技術】
【０００２】
ディジタル・カメラの背面には，液晶表示装置が設けられている。その液晶表示装置の表示画面に撮像した被写体像が表示される。表示画面は，ディジタル・カメラの背面に形成されているから，撮影者が自分を撮像する場合には，表示画面を見ながら撮像することはできない。このために，重要な背景が自分自身に隠れてしまうことがある。このために，現実の建物や風景を背景として自分撮りにおいて背景に対する被撮影者の立ち位置を所望の関係にするものがある（特許文献１）。また，複数の顔とともに複数の顔枠を表示する場合に，立体視する観察者の立体感を阻害しないようにするもの（特許文献２），対象物を実際の大きさで知覚できるもの（特許文献３），少ない演算量で画像の位置合わせを行うもの（特許文献４）もある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開2011-19051号公報
【特許文献２】特開2011-77900号公報
【特許文献３】特開2010-147940号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載のものでは，人物が写っていない状態の背景画像に対して人物指標を事前に設定しなければならない。また，背景に自分自身を撮影することによる死角領域が重なってしまうと，その死角領域の部分は立体的に見えない。
【０００５】
この発明は，人物指標などの事前設定が不要であっても，撮影者が自分を撮像する場合に，重要な背景が自分自身に隠れてしまうことを未然に防止することを目的とする。また，この発明は，背景オブジェクトが，自分自身を撮影することにより生じる死角領域と重ならないようにすることを目的とする。
【課題を解決するための手段】
【０００６】
この発明は，異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置において，上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出する顔検出手段，複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定する死角領域判定手段，上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定する重畳判定手段，および上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知する第１の報知手段を備えていることを特徴とする。
【０００７】
この発明は，上記複眼撮像装置に適した動作制御方法も提供している。すなわち，この方法は，異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置の動作制御方法において，顔検出手段が，上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出し，死角領域判定手段が，複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定し，重畳判定手段が，上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定し，報知手段が，上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知するものである。
【０００８】
この発明によると，複数の撮像装置によって被写体を撮像して得られた，異なる視点から撮像された複数の被写体像から顔領域が検出される。検出された顔領域に隣接して死角領域が存在するかどうかが判定される。死角領域が存在すると判定されると，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかが判定される。死角領域がそのような背景オブジェクトの領域と重なると判定されると，顔または複眼撮像装置自体の移動指示が報知される。
【０００９】
異なる視点から撮像された複数の被写体像があると，立体画像が得られる。しかしながら，死角領域があると，その死角領域は立体的には見えない。死角領域が背景オブジェクトの領域と重なる場合には顔または複眼撮像装置自体を移動するように指示されるので，撮影者は顔が背景オブジェクトに重なってしまうことが分かる。顔を移動して撮像することにより，顔も背景オブジェクトも撮像できるようになる。とくに，背景オブジェクトに死角領域が重ならないようになるので，死角領域によって背景オブジェクトが立体的に見えないということを未然に防止できる。
【００１０】
上記顔検出手段によって検出された顔領域が，撮影可能な範囲よりも狭い画角である所定の画角に入っているかどうかを判定する画角判定手段をさらに備えてもよい。この場合，上記第１の報知手段は，たとえば，上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，顔または複眼撮像装置自体の移動指示を報知するものである。
【００１１】
上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なっていないと判定されたことに応じて，撮影許可を報知する第２の報知手段をさらに備えてもよい。
【００１２】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて撮影許可を報知する第３の報知手段をさらに備えることが好ましい。
【００１３】
上記重畳判定手段によって死角領域が背景オブジェクトの画像と重なっていないと判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第１の記録制御手段をさらに備えてもよい。
【００１４】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第２の記録制御手段をさらに備えてもよい。
【００１５】
上記顔画像によって表される顔と上記背景オブジェクトとの間にある物体との視差が０となるように上記複数の被写体像の視差量を調整する第１の視差量調整手段をさらに備えてもよい。
【００１６】
上記顔画像によって表される顔と上記背景オブジェクトとの距離を算出する距離算出手段，および上記距離算出手段によって算出された距離が所定距離以上であることに応じて，顔の画像部分の視差量が所定視差量以下となるように上記複数の被写体像の視差量を調整する第２の視差量調整手段をさらに備えてもよい。
【００１７】
上記背景オブジェクトの視差量を算出する背景オブジェクト視差量算出手段，および上記背景オブジェクト視差量算出手段によって算出された視差量が所定量以上であった場合に，２Ｄの画像データを記録媒体に記録する第３の記録制御手段をさらに備えてもよい。
【００１８】
上記背景オブジェクトの総面積を算出する第１の面積算出手段，上記背景オブジェクトが上記顔検出手段によって検出された顔によって隠されている部分を除く残りの部分の面積を算出する第２の面積算出手段，および上記第１の面積算出手段によって算出された面積と上記第２の面積算出手段によって算出された面積との面積比を報知する第４の報知手段をさらに備えてもよい。
【００１９】
上記背景オブジェクトは，たとえば，同一色の物体である。
【図面の簡単な説明】
【００２０】
【図１】ディジタル・カメラの電気的構成を示すブロック図である。
【図２】ディジタル・カメラの処理手順を示すフローチャートである。
【図３】（Ａ）は左視点画像の一例を，（Ｂ）は右視点画像の一例を示している。
【図４】（Ａ）は左視点画像の一例を，（Ｂ）は右視点画像の一例を示している。
【図５】（Ａ）は左視点画像の一例を，（Ｂ）は右視点画像の一例を示している。
【図６】（Ａ）から（Ｃ）は，撮像画像の一例である。
【図７】重畳判定処理手順を示すフローチャートである。
【図８】左視点画像重畳判定処理手順を示すフローチャートである。
【図９】（Ａ）は左視点色分割画像の一例を，（Ｂ）は右視点色分割画像の一例を示している。
【図１０】視差量調整処理手順を示すフローチャートである。
【図１１】被写体距離レンジと視差量との関係を示している。
【図１２】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１３】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１４】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１５】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１６】被写体距離レンジと視差量との関係を示している。
【図１７】撮像制御処理手順を示すフローチャートである。
【図１８】ディジタル・カメラの処理手順を示すフローチャートである。
【図１９】被写体像の一例である。
【実施例】
【００２１】
図１は，この発明の実施例を示すもので，いわゆる複眼ディジタル・カメラの電気的構成を示すブロック図である。
【００２２】
ディジタル・カメラ１の全体の動作は，ＣＰＵ10によって統括される。ディジタル・スチル・カメラ１には，立体画像生成用の立体撮像モード，通常の二次元撮像を行う撮像モード，二次元再生を行う二次元再生モード，立体画像表示を行う立体再生モード，設定モードなどのモードを設定するモード設定ボタン，二段ストローク・タイプのシャッタ・レリーズ・ボタンなどの各種ボタン類が含まれている操作装置（図示略）が設けられている。操作装置から出力される操作信号は，ＣＰＵ10に入力する。
【００２３】
ディジタル・スチル・カメラには，立体画像の閲覧者が左目で見る左視点画像を撮像する左視点撮像装置１および立体画像の閲覧者が右目で見る右視点画像を撮像する右視点撮像装置２が含まれている。
【００２４】
左視点撮像装置１には，被写体を撮像し，左視点画像を表わす左視点画像信号を出力するＣＣＤ４が含まれている。このＣＣＤ４の前方には，モータ・ドライバ５および６によってズーム量およびフォーカス量がそれぞれ制御されるズーム・レンズ２およびフォーカス・レンズ３が設けられている。
【００２５】
立体撮像モードが設定されると，シャッタ・レリーズ・ボタンの押し下げの前にプレ撮像（スルー画撮像）が行われ，一定周期でＣＣＤ４から左視点画像信号が出力される。ＣＣＤ４から出力された左視点画像信号は，アナログ／ディジタル変換回路７において左視点画像データに変換される。左視点画像データは，画像入力コントローラ８によってディジタル信号処理装置21に入力する。
【００２６】
右視点撮像装置11には，被写体を撮像し，右視点画像を表わす右視点画像信号を出力するＣＣＤ14が含まれている。このＣＣＤ14の前方には，モータ・ドライバ15および16によってそれぞれズーム量およびフォーカス量が制御されるズーム・レンズ12およびフォーカス・レンズ13が設けられている。
【００２７】
立体撮像モードでは，プレ撮像において，ＣＣＤ14からも右視点画像信号が出力される。ＣＣＤ14から出力された右視点画像信号は，アナログ／ディジタル変換回路17において右視点画像データに変換される。右視点画像データは，画像入力コントローラ18によってディジタル信号処理装置21に入力する。
【００２８】
ディジタル信号処理装置21において左視点画像データおよび右視点画像データに対して所定のディジタル信号処理が行われる。ディジタル信号処理装置21から出力された左視点画像データおよび右視点画像データは，表示制御装置26を介してディジタル・カメラの背面に表示画面が設けられている第１の表示装置27に与えられる。第１の表示装置27の表示画面に撮像により得られた画像が立体的な動画で表示される（スルー画表示）。第１の表示装置27に左視点像データおよび右視点画像データの両方の画像データを与え，被写体像を立体的に表示せずとも，左視点画像データまたは右視点画像データのいずれか一方の画像データを与え，被写体像を二次元的に表示するようにしてもよい。
【００２９】
ディジタル・カメラには，その前面に表示画面が形成されている第２の表示装置28も含まれている。
【００３０】
ディジタル信号処理装置21から出力された左視点画像データおよび右視点画像データは，視差量算出装置29および顔検出装置30にも与えられる。視差量算出装置29において左視点画像と右視点画像との視差量が算出される。また，顔検出装置30において，撮像された画像から顔の画像部分が検出される。
【００３１】
シャッタ・レリーズ・ボタンの半押しにより，被写体が撮像され，撮像により得られた左視点画像データおよび右視点画像データの少なくとも一方の画像データが積算装置23に入力する。積算装置23において高周波数成分の積算および輝度データの積算が行われる。高周波数成分の積算値にもとづいて，フォーカス・レンズ３および13のフォーカス量が決定される。輝度データの積算値にもとづいて，いわゆる電子シャッタのシャッタ速度が決定される。シャッタ・レリーズ・ボタンの全押しにより，被写体が撮像され，左視点撮像装置１の撮像により得られた左視点画像データおよび右視点撮像装置11の撮像により得られた右視点画像データは，メモリ制御装置19を介してメイン・メモリ20に与えられ，そのメイン・メモリ20に一時的に記憶される。左視点画像データおよび右視点画像データは，メイン・メモリ20から読み出されて圧縮伸張処理装置22に入力する。左視点画像データおよび右視点画像データは，圧縮伸張処理装置22において圧縮され，圧縮された左視点画像データおよび右視点画像データがメモリ制御装置24によってメモリ・カード25に記録される。
【００３２】
立体再生モードが設定されると，メモリ・カード25に記録されている左視点画像データと右視点画像データとが読み出される。読み出された左視点画像データおよび右視点画像データが圧縮伸張処理装置22において伸張される。伸張された左視点画像データおよび右視点画像データが表示装置26に与えられることにより，立体画像が表示される。
【００３３】
図２は，複眼ディジタル・カメラの処理手順を示すフローチャートである。
【００３４】
複眼ディジタル・カメラでは，撮像により得られた被写体像は，背面に形成されている表示画面（第１の表示装置27）に表示される。表示画面は，複眼ディジタル・カメラの背面に形成されているので，複眼ディジタル・カメラを持ってユーザが自分自身を撮像する場合，第１の表示装置27の表示画面を見ることはできないので，第１の表示装置27の表示画面に表示されている被写体像を見ながらカメラ・アングルを決定することはできない。このために，背景のうち重要と考えられるオブジェクト（背景オブジェクト）がユーザの陰に隠れてしまうことがある。この実施例では，複眼ディジタル・カメラを持って，ユーザが自分自身を撮像する場合に，背景オブジェクトがユーザの陰に隠れないようにするものである。
【００３５】
ユーザは，複眼ディジタル・カメラを持って，自分自身の方に向けて構える。左視点撮像装置および右視点撮像装置によって被写体であるユーザ自身が撮像される（ステップ41）。
【００３６】
図３（Ａ）は左視点撮像装置によって撮像された左視点画像60Ｌの一例，図３（Ｂ）は右視点撮像装置によって撮像された右視点画像60Ｒの一例を示している。
【００３７】
左視点画像60Ｌと右視点画像60Ｒとは異なる視点により撮像されているから，視差が生じている。視差が生じているので，左視点画像60Ｌと右視点画像60Ｒとから立体画像を生成できる。左視点画像60Ｌには，撮像者であるユーザの画像62Ｌとユーザの後にある自動車の画像61Ｌとが含まれている。同様に，右視点画像60Ｒには，左視点画像60Ｒに含まれているユーザの画像62Ｌと自動車の画像61Ｌとに対応しているユーザの画像62Ｒと自動車の画像61Ｒとが含まれている。
【００３８】
撮像により左視点画像60Ｌと右視点画像60Ｒとが得られると，得られた左視点画像60Ｌと右視点画像60Ｒのそれぞれにおいて顔検出処理が行われる（図３ステップ42）。顔検出処理は，テンプレート・マッチングなどを利用できる。
【００３９】
図４（Ａ）は左視点画像60Ｌの一例であり，図４（Ｂ）は右視点画像60Ｒの一例である。
【００４０】
左視点画像60Ｌおよび右視点画像60Ｒのそれぞれにおいて顔検出処理が行われることにより，顔画像63Ｌおよび顔画像63Ｒが検出される。
【００４１】
図４（Ａ）および図４（Ｂ）には，所定の画角で定められている顔存在規定領域64Ｌおよび64Ｒも規定されている。この実施例においては，背景オブジェクトがユーザ自身の顔によって隠れないようにするために，背景オブジェクトがユーザ自身の顔によって隠れている場合には顔を移動するようにユーザに報知される。但し，ユーザの顔が撮像可能範囲の端部にある場合に顔を移動させてしまうと，ユーザの顔が撮像されなくなってしまう。このために，顔を移動してもユーザの顔が撮像可能範囲内にあるような場合に，ユーザに顔を移動するように報知される。顔が顔存在規定領域64Ｌおよび64Ｒの中に入っている場合に，ユーザに顔を移動するように報知される。
【００４２】
顔が検出されると，左視点画像64Ｌおよび右視点画像64Ｒのそれぞれから死角領域が検出される（図２ステップ43）。
【００４３】
図５（Ａ）および図５（Ｂ）は，左視点画像60Ｌおよび右視点画像60Ｒを示している。これらの図において，図３（Ａ）および図３（Ｂ）に示すものと同一物には同一符号を付して説明を省略する。
【００４４】
上述したように，左視点画像60Ｌと右視点画像60Ｒとは異なる視点から撮像されているから，左視点画像60Ｌには，左視点画像60Ｌには含まれているが右視点画像60Ｒには含まれていない死角領域（右死角領域）63が含まれている。右死角領域63は，顔の画像62Ｌの左側にあり，自動車の画像61Ｌに重なっている。同様に，右視点画像60Ｒには，右視点画像60Ｒには含まれているが左視点画像60Ｌには含まれていない死角領域（左死角領域）64が含まれている。左死角領域64は，顔の画像62Ｒの右側にある。左視点画像60Ｌと右視点画像60Ｒとの各画素の対応を検出し，対応の画素が無いものを死角領域の検出となる。
【００４５】
死角領域63および64の部分は，左視点画像60Ｌと右視点画像60Ｒのうち，一方の画像には含まれているが他方の画像には含まれていないから，その死角領域63および64の部分は，立体的には見えない。この実施例では，図５（Ａ）に示すように顔の画像62Ｌに隣接する死角領域63または図５（Ｂ）に示すように顔の画像62Ｒに隣接する死角領域64が背景オブジェクトに重なっている場合には，その背景オブジェクトの一部が顔によって隠されているものと考えられる。このために，死角領域63または64が背景オブジェクトに重なっているかどうかの重畳判定処理が行われる（図２ステップ44）。この重畳判定処理について詳しくは，後述する。
【００４６】
右死角領域63または左死角領域64が背景オブジェクトに重畳していなければ（ステップ45でＮＯ），ユーザ自身の顔によって背景オブジェクトが隠れてしまっていないと考えられる。このために，記録許可がユーザに報知される（ステップ48）。例えば，ユーザは複眼ディジタル・カメラを自分でもって自分自身を撮像しているので，第１の表示装置27の表示画面は見えない。このために第１の表示装置27の表示画面に記録許可を表示してもユーザは分からないので，複眼ディジタル・カメラの前面に設けられている第２の表示装置28の表示画面（ＬＥＤでもよい）にユーザへの報知が行われよう。音声による報知でもよい。ユーザによってシャッタ・レリーズ・ボタンが押されると（ステップ49でＹＥＳ），被写体であるユーザ自身が撮像され，撮像により得られた左視点画像および右視点画像をそれぞれ表す画像データがメモリ・カード25に記録される（ステップ50）。死角領域が背景オブジェクトに重畳していない場合に（ステップ45でＮＯ），被写体であるユーザ自身が撮像され，撮像により得られた左視点画像および右視点画像をそれぞれ表す画像データがメモリ・カード25に記録されるときには背景オブジェクト61の総面積Ｓが算出され，その総面積Ｓを表わすデータもメモリ・カード25に記録されるようにするとよい。後述のように，背景オブジェクト61が顔62によって隠れている場合に，その隠れている割合をユーザに知らせることができる。
【００４７】
右死角領域63または左死角領域64が背景オブジェクトに重畳していると（ステップ45でＹＥＳ），ユーザ自身の顔によって背景オブジェクトが隠れてしまっていると考えられる。このために，顔を移動するようにユーザに報知される（ステップ47）（複眼ディジタル・カメラ自体を移動するようにユーザに報知してもよい）。
【００４８】
図６（Ａ）から図６（Ｃ）は，第１の表示装置27の表示画面に表示される立体画像（立体画像でなくともよい）の一例である。
【００４９】
図６（Ａ）を参照して，撮像画像60Ａに含まれている顔画像62によって背景オブジェクト61が隠れてしまっていると，上述のように顔を移動するようにユーザに報知される。その報知に応じてユーザは，自分の顔を移動する。すると，図６（Ｂ）に示すように，撮像画像60Ｂに含まれる顔画像62が水平方向に動くので，背景オブジェクト61の見える割合が多くなる。依然として，顔画像62によって背景オブジェクト61が隠れていると，再び，顔を移動するようにユーザに報知される。その報知に応じて，ユーザは，再び顔を移動する。図６（Ｃ）に示すように，顔画像62が水平方向に動き，背景オブジェクト61が見えるようになる。
【００５０】
このように，顔の移動指示に応じてユーザが顔を動かすことより，顔と背景オブジェクトとの重なりが少なくなっていくようになる。
【００５１】
但し，上述したように，顔の移動後の顔が撮像範囲内にあるように，顔が所定の規定領域64Ｌおよび64Ｒ内に入っている（所定の画角内に入っている）場合に（ステップ46でＹＥＳ），顔を移動するようにユーザに報知される（ステップ47）。例えば，複眼ディジタル・カメラの前面に設けられている第２の表示装置28の表示画面に，その旨が表示される。音声報知でもよい。顔が所定画角内に入っていない場合には（ステップ46でＮＯ），記録許可がユーザに報知される（ステップ48）。
【００５２】
上述の実施例では，ユーザに記録許可を報知したあとにユーザによるシャッタ・レリーズのオンがあったことに応じて被写体を撮像して得られた画像データがメモリ・カードに記録されているが，ユーザに記録許可を報知せずに自動撮像を行い，得られた画像データをメモリ・カードに記録するようにしてもよい。ユーザは，画角の設定に専念でき，撮影の手間が省ける。
【００５３】
図７は，重畳判定処理手順（図２ステップ44の処理手順）を示すフローチャートである。
【００５４】
重畳判定処理は，左視点画像60Ｌと右視点画像60Ｒとのそれぞれについて行われる。まず，左視点画像60Ｌについて重畳判定が行われ（ステップ71），つづいて右視点画像60Ｒについて重畳判定が行われる（ステップ72）。
【００５５】
得られた左視点画像の重畳判定処理と右視点画像の重畳判定処理とのそれぞれの判定結果が統合される（ステップ73）。たとえば，複眼ディジタル・カメラに近い背景オブジェクトが顔の陰とならないような処理が行われる。
【００５６】
図８は，左視点画像重畳判定処理手順（図７ステップ71の処理手順）を示すフローチャートである。左視点画像60Ｌについての重畳判定処理について述べる画，右視点画像60Ｒについても同様に行われる。
【００５７】
まず，左視点画像60Ｌの色領域分割処理が行われる（ステップ81）。色領域分割処理は，画像に含まれる対象物を色ごとの領域に分割する処理である。右視点画像60Ｒについても色領域分割処理が行われる。色領域分割処理は，たとえば，k-means法などを利用できる。
【００５８】
図９（Ａ）および図９（Ｂ）は，色分割処理が行われた右視点画像（右視点色分割画像）90Ｌおよび左視点画像（左視点色分割画像）90Ｒの一例である。
【００５９】
図９（Ａ）を参照して，左視点画像60Ｌについて色分割処理が行われることにより，自動車の色である赤色の領域91Ｌ，ユーザの髪の毛の色である黒色の領域92Ｌ，ユーザの顔の色である，うす茶色の領域93Ｌおよび背景の空の色である青色の領域94Ｌの各領域に分割される。右視点色分割画像90Ｌには，右死角領域63も図示されている。
【００６０】
同様に，図９（Ｂ）を参照して，右視点画像60Ｒについて色分割処理が行われることにより，自動車の色である赤色の領域91Ｒ，ユーザの髪の毛の色である黒色の領域92Ｒ，ユーザの顔の色である，うす茶色の領域93Ｒおよび背景の空の色である青色の領域94Ｒの各領域に分割される。左視点色分割画像90Ｒには，左死角領域64も図示されている。
【００６１】
右視点死角領域63の色領域が，隣接する色領域と同じ色領域であれば，右視点死角領域63は，右視点死角領域63に隣接する領域の一部であると考えられる。このために，右視点死角領域63の色領域が，隣接する色領域と同じ色領域かどうかが判定される（ステップ82）。但し，その色領域の大きさが所定の大きさ以上であると，空などのようにユーザ自身に隠れてもよい背景オブジェクトであると考えられる。このために，色領域の大きさが所定の大きさ以下かどうかも確認される（ステップ83）。
【００６２】
右視点死角領域63の色領域が，隣接する色領域と同じ色領域であると（ステップ82でＹＥＳ），上述のように，その色領域の大きさが所定の大きさ以下かどうかが確認される（ステップ83）。所定の大きさ以下であると（ステップ83でＹＥＳ），右視点死角領域63は，その色領域によって特定される背景オブジェクトの一部であると決定される（ステップ84）。これにより，右死角領域63が色領域91Ｌによって特定される背景オブジェクトに重畳していると判定される。図８（Ａ）に示すように，右死角領域63の色領域が，隣接する色領域91Ｌと同じ色領域と判断され，かつその色領域91Ｌの大きさが所定の大きさ以下であると，右死角領域63は，色領域91Ｌで特定される自動車の画像61Ｌに重なっていると判定される。
【００６３】
右視点死角領域63の色領域が，隣接する色領域と同じ色領域ではない場合には（ステップ82でＮＯ），右視点死角領域63は背景オブジェクトの一部ではないと決定される（ステップ85）。たとえば，右視点死角領域63の色が，右視点死角領域63の右側にある色領域93Ｌの色と異なると，右視点死角領域63は，色領域93によって特定される背景オブジェクトの一部ではないと判定される。また，右視点死角領域63に隣接する色領域の大きさが所定の大きさよりも大きいと，右視点死角領域63は，右視点死角領域63に隣接する色領域の一部とは決定されない（ステップ85）。
【００６４】
上述の処理と同様の処理が図９（Ｂ）に示す右視点色分割画像についても行われる。
【００６５】
上述の実施例において，左視点画像60Ｌまたは右視点画像60Ｒにおいて，顔画像の両側に背景オブジェクトと重畳している死角領域が存在する場合には，顔画像の左側にある背景オブジェクトと顔画像の右側にある背景オブジェクトとのどちらが顔画像に重畳しないようにすれば分からないので，顔の移動指示を報知することなく，撮像許可を報知するようにできる。もっとも，顔画像の両側にある背景オブジェクトのうち，複眼ディジタル・カメラに近い方の背景オブジェクトが顔画像と重畳しないように顔の移動指示を与えるようにしてもよい。顔の移動方向は，顔画像の位置と死角領域との位置関係にもとづいて決定できる。死角領域が顔画像の左側にある場合には，被写体像において顔画像が右側に移動するように報知させ，死角領域が顔画像の右側にある場合には，被写体像において顔画像が左側に移動するように報知させるようにしてもよい。また，背景オブジェクトは，たとえば，同一色の物体と考えられる。
【００６６】
図10から図15（Ａ）および図15（Ｂ）は，変形例を示している。
【００６７】
図10は，視差調整処理手順を示すフローチャートである。この視差調整は，たとえば，シャッタ・レリーズ・ボタンがオンされた（図２のステップ49でＹＥＳ）ことに応じて行われる。図11は，被写体距離レンジと顔の視差量との関係を示している。図12（Ａ），図13（Ａ），図14（Ａ）および図15（Ａ）は，被写体像（左視点画像または右視点画像）111，121，131および141の一例を示し，図12（Ｂ），図13（Ｂ），図14（Ｂ）および図15（Ｂ）は，被写体の位置を示している。
【００６８】
この変形例は，ユーザと背景オブジェクトとの距離とにもとづいて視差量を調整するものである。
【００６９】
まず，顔までの距離および背景オブジェクトまでの距離が算出される（ステップ101）。これらの距離はフォーカス・レンズの移動量などにより算出できる。つづいて，顔と背景オブジェクトとの距離（被写体距離レンジ）が算出される（ステップ102）。顔と背景オブジェクトとの距離にもとづいて視差量が算出される（ステップ103）。算出された視差量となるように，左視点画像60Ｌと右視点画像60Ｒとの視差量が調整される（ステップ104）。もっとも，顔と背景オブジェクトとの間にある物体の視差量が０となるように視差量調整処理が行われてもよい。
【００７０】
図11を参照して，被写体距離レンジが０のときは，視差量も０である。顔の位置がクロス・ポイントの位置となる。被写体距離レンジが所定の値Ｒ１までは，被写体距離レンジが大きくなるにつれて顔の視差量も序々に大きくなる。被写体距離レンジが所定の値Ｒ１を以上となると，あらかじめ定められている許容視差量となる。
【００７１】
顔の視差量が大きくなってしまうと，背景の視差量はそれ以上に大きくなってしまい，立体視しづらい状態となってしまう。顔の視差量が許容視差量に抑えられるので，背景の視差量が大きくなってしまうことを未然に防止できる。顔だけでなく，背景の被写体の破綻無く立体視できるようになる。
【００７２】
図12（Ａ）は，被写体が空以外はユーザのみの被写体像111の一例である。このように被写体が空以外はユーザのみの場合には，ユーザと背景オブジェクトとの距離が０となり，図12（Ｂ）に示すようにユーザの画像（顔画像）112がクロス・ポイントの位置となるように視差量調整が行われる。
【００７３】
図13（Ａ）は，被写体像121にユーザの画像122とバイクの画像123とが含まれている。図13（Ｂ）に示すように，ユーザとバイクとの距離が小さいとそれらの距離差に応じて視差量が調整される。
【００７４】
図14（Ａ）は，被写体像131にユーザの画像132と建物の画像132とが含まれている。図14（Ｂ）に示すように，ユーザと建物との距離が比較的近い場合も，それらの距離差に応じて視差量が調整される。
【００７５】
図15（Ａ）は，被写体像141にユーザの画像142と山の画像142とが含まれている。図15（Ｂ）に示すように，ユーザと山との距離が遠いと，これらの距離差に応じて視差量が調整されると，立体視しづらいことがある。このために，上述のように，ユーザの顔の視差量は許容視差量に抑えられる。
【００７６】
図16は，被写体距離レンジと顔の視差量との関係を示すもので，図11に対応している。
【００７７】
図11に示す関係では，被写体距離レンジが０の場合には，顔の視差量が０とされているが，図16に示す関係では，被写体距離レンジが０の場合には，顔の視差量は最適視差量となる。被写体距離レンジが所定の距離レンジＲ１までは顔の視差量は距離レンジが増加するにつれて増加される。所定の距離レンジＲ１以上となると顔の視差量は許容視差量に抑えられるのは上述したのと同様である。
【００７８】
顔の視差量における許容視差量，最適視差量は表示画面の大きさ，解像度などによって変える必要がある。たとえば，水平方向800画素垂直方向640画素の3.5型の表示画面に立体画像を表示する場合には，たとえば，許容視差量は56画素，最適視差量は24画素である。
【００７９】
図17は，他の変形例を示すもので，撮像制御処理手順を示すフローチャートである。ユーザによってシャッタ・レリーズ・ボタンが押されたことにより，図16に示す処理手順が行われる。
【００８０】
上述したように，顔までの距離と背景オブジェクトの距離とが算出され（ステップ101），顔までの距離と背景オブジェクトまでの距離との間の距離（距離レンジ）が算出される（ステップ102）。算出された距離レンジにもとづいて視差量が算出される（ステップ103）。
【００８１】
視差量が大きくなりすぎる背景オブジェクトがあれば（ステップ151でＹＥＳ），立体視が破綻されてしまうので，２Ｄ撮像が行われる（ステップ153）。視差量が大きくなりすぎる背景オブジェクトがなければ（ステップ151でＮＯ），３Ｄ撮像が行われる（ステップ152）。２Ｄ撮像は，左視点撮像装置および右視点撮像装置のうちの一方の撮像装置で撮像すればよいし，３Ｄ撮像は，左視点撮像装置および右視点撮像装置の両方の撮像装置で撮像すればよい。
【００８２】
図18は，他の実施例を示すもので，複眼ディジタル・カメラの処理手順を示すフローチャートである。この処理は，図２に示す処理につづいて行われるものである。図19は，第１の表示装置27の表示画面に表示される撮像画像60Ｄの一例である。図６（Ａ）から図６（Ｃ）の撮像画像60Ａから60Ｃに対応する。
【００８３】
この実施例は，背景オブジェクトと顔との重なりの程度をユーザに報知するものである。
【００８４】
上述したように，背景オブジェクトの総面積Ｓが記録されており，その総面積Ｓが利用される。画角が変わってしまうと，撮像範囲の中に含まれている背景オブジェクトが変わってしまうことがあるので，画角が変わっている場合には（ステップ162でＹＥＳ）,他の処理が行われる。
【００８５】
画角が変わっていない場合には（ステップ162でＮＯ），図19に示すように，被写体が撮像され，得られた撮像画像60Ｄから顔画像62が検出される（ステップ163）。
【００８６】
上述のように，撮像画像60Ｄの中から背景オブジェクト61が見つけ出され，見つけ出された背景オブジェクト61のうち，顔62によって表示されていない非表示領域と死角領域とが除かれた背景オブジェクトの面積Ａが算出される（ステップ164）。算出された面積Ａは，立体画像として見える面積を表わしていることとなる。
【００８７】
背景オブジェクトの表示割合Ｒ＝Ａ／Ｓが算出され（ステップ165），算出された表示割合がユーザに報知される（ステップ166）。複眼ディジタル・カメラの前面に表示画面か形成され，その表示画面に表示割合が表示される，あるいは表示割合が音声出力されることとなろう。たとえば，図19に示すものであれば，背景オブジェクト61の割合が80％であることが報知される。ユーザは，その割合を知ることにより，背景オブジェクト61の全体のうち，どの位の割合を立体視できるかが分る。その割合でよければシャッタ・レリーズ・ボタンがオンされ（ステップ167でＹＥＳ），撮像により得られた画像データ（左視点画像データおよび右視点画像データ）がメモリ・カード25に記録される（ステップ168）。ユーザは，顔と背景オブジェクトとの重なりの程度が分かるので，所望の重なりの程度のときに撮像できるようになる。
【００８８】
撮像される背景オブジェクト61の割合が所望の割合でなければ（ステップ167でＮＯ），ユーザは顔を動かし，再び背景オブジェクト61の全体のうち立体視できる割合が算出され，かつ表示される（ステップ163〜166）。この場合においても，立体視できる背景オブジェクト61の割合を変えるには顔を動かす旨をユーザに報知してもよい。
【符号の説明】
【００８９】
１，２ 撮像装置
10 ＣＰＵ
【技術分野】
【０００１】
この発明は，複眼撮像装置およびその動作制御方法に関する。
【背景技術】
【０００２】
ディジタル・カメラの背面には，液晶表示装置が設けられている。その液晶表示装置の表示画面に撮像した被写体像が表示される。表示画面は，ディジタル・カメラの背面に形成されているから，撮影者が自分を撮像する場合には，表示画面を見ながら撮像することはできない。このために，重要な背景が自分自身に隠れてしまうことがある。このために，現実の建物や風景を背景として自分撮りにおいて背景に対する被撮影者の立ち位置を所望の関係にするものがある（特許文献１）。また，複数の顔とともに複数の顔枠を表示する場合に，立体視する観察者の立体感を阻害しないようにするもの（特許文献２），対象物を実際の大きさで知覚できるもの（特許文献３），少ない演算量で画像の位置合わせを行うもの（特許文献４）もある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開2011-19051号公報
【特許文献２】特開2011-77900号公報
【特許文献３】特開2010-147940号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載のものでは，人物が写っていない状態の背景画像に対して人物指標を事前に設定しなければならない。また，背景に自分自身を撮影することによる死角領域が重なってしまうと，その死角領域の部分は立体的に見えない。
【０００５】
この発明は，人物指標などの事前設定が不要であっても，撮影者が自分を撮像する場合に，重要な背景が自分自身に隠れてしまうことを未然に防止することを目的とする。また，この発明は，背景オブジェクトが，自分自身を撮影することにより生じる死角領域と重ならないようにすることを目的とする。
【課題を解決するための手段】
【０００６】
この発明は，異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置において，上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出する顔検出手段，複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定する死角領域判定手段，上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定する重畳判定手段，および上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知する第１の報知手段を備えていることを特徴とする。
【０００７】
この発明は，上記複眼撮像装置に適した動作制御方法も提供している。すなわち，この方法は，異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置の動作制御方法において，顔検出手段が，上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出し，死角領域判定手段が，複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定し，重畳判定手段が，上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定し，報知手段が，上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知するものである。
【０００８】
この発明によると，複数の撮像装置によって被写体を撮像して得られた，異なる視点から撮像された複数の被写体像から顔領域が検出される。検出された顔領域に隣接して死角領域が存在するかどうかが判定される。死角領域が存在すると判定されると，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかが判定される。死角領域がそのような背景オブジェクトの領域と重なると判定されると，顔または複眼撮像装置自体の移動指示が報知される。
【０００９】
異なる視点から撮像された複数の被写体像があると，立体画像が得られる。しかしながら，死角領域があると，その死角領域は立体的には見えない。死角領域が背景オブジェクトの領域と重なる場合には顔または複眼撮像装置自体を移動するように指示されるので，撮影者は顔が背景オブジェクトに重なってしまうことが分かる。顔を移動して撮像することにより，顔も背景オブジェクトも撮像できるようになる。とくに，背景オブジェクトに死角領域が重ならないようになるので，死角領域によって背景オブジェクトが立体的に見えないということを未然に防止できる。
【００１０】
上記顔検出手段によって検出された顔領域が，撮影可能な範囲よりも狭い画角である所定の画角に入っているかどうかを判定する画角判定手段をさらに備えてもよい。この場合，上記第１の報知手段は，たとえば，上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，顔または複眼撮像装置自体の移動指示を報知するものである。
【００１１】
上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なっていないと判定されたことに応じて，撮影許可を報知する第２の報知手段をさらに備えてもよい。
【００１２】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて撮影許可を報知する第３の報知手段をさらに備えることが好ましい。
【００１３】
上記重畳判定手段によって死角領域が背景オブジェクトの画像と重なっていないと判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第１の記録制御手段をさらに備えてもよい。
【００１４】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第２の記録制御手段をさらに備えてもよい。
【００１５】
上記顔画像によって表される顔と上記背景オブジェクトとの間にある物体との視差が０となるように上記複数の被写体像の視差量を調整する第１の視差量調整手段をさらに備えてもよい。
【００１６】
上記顔画像によって表される顔と上記背景オブジェクトとの距離を算出する距離算出手段，および上記距離算出手段によって算出された距離が所定距離以上であることに応じて，顔の画像部分の視差量が所定視差量以下となるように上記複数の被写体像の視差量を調整する第２の視差量調整手段をさらに備えてもよい。
【００１７】
上記背景オブジェクトの視差量を算出する背景オブジェクト視差量算出手段，および上記背景オブジェクト視差量算出手段によって算出された視差量が所定量以上であった場合に，２Ｄの画像データを記録媒体に記録する第３の記録制御手段をさらに備えてもよい。
【００１８】
上記背景オブジェクトの総面積を算出する第１の面積算出手段，上記背景オブジェクトが上記顔検出手段によって検出された顔によって隠されている部分を除く残りの部分の面積を算出する第２の面積算出手段，および上記第１の面積算出手段によって算出された面積と上記第２の面積算出手段によって算出された面積との面積比を報知する第４の報知手段をさらに備えてもよい。
【００１９】
上記背景オブジェクトは，たとえば，同一色の物体である。
【図面の簡単な説明】
【００２０】
【図１】ディジタル・カメラの電気的構成を示すブロック図である。
【図２】ディジタル・カメラの処理手順を示すフローチャートである。
【図３】（Ａ）は左視点画像の一例を，（Ｂ）は右視点画像の一例を示している。
【図４】（Ａ）は左視点画像の一例を，（Ｂ）は右視点画像の一例を示している。
【図５】（Ａ）は左視点画像の一例を，（Ｂ）は右視点画像の一例を示している。
【図６】（Ａ）から（Ｃ）は，撮像画像の一例である。
【図７】重畳判定処理手順を示すフローチャートである。
【図８】左視点画像重畳判定処理手順を示すフローチャートである。
【図９】（Ａ）は左視点色分割画像の一例を，（Ｂ）は右視点色分割画像の一例を示している。
【図１０】視差量調整処理手順を示すフローチャートである。
【図１１】被写体距離レンジと視差量との関係を示している。
【図１２】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１３】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１４】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１５】（Ａ）は被写体像の一部を，（Ｂ）は被写体の位置を示している。
【図１６】被写体距離レンジと視差量との関係を示している。
【図１７】撮像制御処理手順を示すフローチャートである。
【図１８】ディジタル・カメラの処理手順を示すフローチャートである。
【図１９】被写体像の一例である。
【実施例】
【００２１】
図１は，この発明の実施例を示すもので，いわゆる複眼ディジタル・カメラの電気的構成を示すブロック図である。
【００２２】
ディジタル・カメラ１の全体の動作は，ＣＰＵ10によって統括される。ディジタル・スチル・カメラ１には，立体画像生成用の立体撮像モード，通常の二次元撮像を行う撮像モード，二次元再生を行う二次元再生モード，立体画像表示を行う立体再生モード，設定モードなどのモードを設定するモード設定ボタン，二段ストローク・タイプのシャッタ・レリーズ・ボタンなどの各種ボタン類が含まれている操作装置（図示略）が設けられている。操作装置から出力される操作信号は，ＣＰＵ10に入力する。
【００２３】
ディジタル・スチル・カメラには，立体画像の閲覧者が左目で見る左視点画像を撮像する左視点撮像装置１および立体画像の閲覧者が右目で見る右視点画像を撮像する右視点撮像装置２が含まれている。
【００２４】
左視点撮像装置１には，被写体を撮像し，左視点画像を表わす左視点画像信号を出力するＣＣＤ４が含まれている。このＣＣＤ４の前方には，モータ・ドライバ５および６によってズーム量およびフォーカス量がそれぞれ制御されるズーム・レンズ２およびフォーカス・レンズ３が設けられている。
【００２５】
立体撮像モードが設定されると，シャッタ・レリーズ・ボタンの押し下げの前にプレ撮像（スルー画撮像）が行われ，一定周期でＣＣＤ４から左視点画像信号が出力される。ＣＣＤ４から出力された左視点画像信号は，アナログ／ディジタル変換回路７において左視点画像データに変換される。左視点画像データは，画像入力コントローラ８によってディジタル信号処理装置21に入力する。
【００２６】
右視点撮像装置11には，被写体を撮像し，右視点画像を表わす右視点画像信号を出力するＣＣＤ14が含まれている。このＣＣＤ14の前方には，モータ・ドライバ15および16によってそれぞれズーム量およびフォーカス量が制御されるズーム・レンズ12およびフォーカス・レンズ13が設けられている。
【００２７】
立体撮像モードでは，プレ撮像において，ＣＣＤ14からも右視点画像信号が出力される。ＣＣＤ14から出力された右視点画像信号は，アナログ／ディジタル変換回路17において右視点画像データに変換される。右視点画像データは，画像入力コントローラ18によってディジタル信号処理装置21に入力する。
【００２８】
ディジタル信号処理装置21において左視点画像データおよび右視点画像データに対して所定のディジタル信号処理が行われる。ディジタル信号処理装置21から出力された左視点画像データおよび右視点画像データは，表示制御装置26を介してディジタル・カメラの背面に表示画面が設けられている第１の表示装置27に与えられる。第１の表示装置27の表示画面に撮像により得られた画像が立体的な動画で表示される（スルー画表示）。第１の表示装置27に左視点像データおよび右視点画像データの両方の画像データを与え，被写体像を立体的に表示せずとも，左視点画像データまたは右視点画像データのいずれか一方の画像データを与え，被写体像を二次元的に表示するようにしてもよい。
【００２９】
ディジタル・カメラには，その前面に表示画面が形成されている第２の表示装置28も含まれている。
【００３０】
ディジタル信号処理装置21から出力された左視点画像データおよび右視点画像データは，視差量算出装置29および顔検出装置30にも与えられる。視差量算出装置29において左視点画像と右視点画像との視差量が算出される。また，顔検出装置30において，撮像された画像から顔の画像部分が検出される。
【００３１】
シャッタ・レリーズ・ボタンの半押しにより，被写体が撮像され，撮像により得られた左視点画像データおよび右視点画像データの少なくとも一方の画像データが積算装置23に入力する。積算装置23において高周波数成分の積算および輝度データの積算が行われる。高周波数成分の積算値にもとづいて，フォーカス・レンズ３および13のフォーカス量が決定される。輝度データの積算値にもとづいて，いわゆる電子シャッタのシャッタ速度が決定される。シャッタ・レリーズ・ボタンの全押しにより，被写体が撮像され，左視点撮像装置１の撮像により得られた左視点画像データおよび右視点撮像装置11の撮像により得られた右視点画像データは，メモリ制御装置19を介してメイン・メモリ20に与えられ，そのメイン・メモリ20に一時的に記憶される。左視点画像データおよび右視点画像データは，メイン・メモリ20から読み出されて圧縮伸張処理装置22に入力する。左視点画像データおよび右視点画像データは，圧縮伸張処理装置22において圧縮され，圧縮された左視点画像データおよび右視点画像データがメモリ制御装置24によってメモリ・カード25に記録される。
【００３２】
立体再生モードが設定されると，メモリ・カード25に記録されている左視点画像データと右視点画像データとが読み出される。読み出された左視点画像データおよび右視点画像データが圧縮伸張処理装置22において伸張される。伸張された左視点画像データおよび右視点画像データが表示装置26に与えられることにより，立体画像が表示される。
【００３３】
図２は，複眼ディジタル・カメラの処理手順を示すフローチャートである。
【００３４】
複眼ディジタル・カメラでは，撮像により得られた被写体像は，背面に形成されている表示画面（第１の表示装置27）に表示される。表示画面は，複眼ディジタル・カメラの背面に形成されているので，複眼ディジタル・カメラを持ってユーザが自分自身を撮像する場合，第１の表示装置27の表示画面を見ることはできないので，第１の表示装置27の表示画面に表示されている被写体像を見ながらカメラ・アングルを決定することはできない。このために，背景のうち重要と考えられるオブジェクト（背景オブジェクト）がユーザの陰に隠れてしまうことがある。この実施例では，複眼ディジタル・カメラを持って，ユーザが自分自身を撮像する場合に，背景オブジェクトがユーザの陰に隠れないようにするものである。
【００３５】
ユーザは，複眼ディジタル・カメラを持って，自分自身の方に向けて構える。左視点撮像装置および右視点撮像装置によって被写体であるユーザ自身が撮像される（ステップ41）。
【００３６】
図３（Ａ）は左視点撮像装置によって撮像された左視点画像60Ｌの一例，図３（Ｂ）は右視点撮像装置によって撮像された右視点画像60Ｒの一例を示している。
【００３７】
左視点画像60Ｌと右視点画像60Ｒとは異なる視点により撮像されているから，視差が生じている。視差が生じているので，左視点画像60Ｌと右視点画像60Ｒとから立体画像を生成できる。左視点画像60Ｌには，撮像者であるユーザの画像62Ｌとユーザの後にある自動車の画像61Ｌとが含まれている。同様に，右視点画像60Ｒには，左視点画像60Ｒに含まれているユーザの画像62Ｌと自動車の画像61Ｌとに対応しているユーザの画像62Ｒと自動車の画像61Ｒとが含まれている。
【００３８】
撮像により左視点画像60Ｌと右視点画像60Ｒとが得られると，得られた左視点画像60Ｌと右視点画像60Ｒのそれぞれにおいて顔検出処理が行われる（図３ステップ42）。顔検出処理は，テンプレート・マッチングなどを利用できる。
【００３９】
図４（Ａ）は左視点画像60Ｌの一例であり，図４（Ｂ）は右視点画像60Ｒの一例である。
【００４０】
左視点画像60Ｌおよび右視点画像60Ｒのそれぞれにおいて顔検出処理が行われることにより，顔画像63Ｌおよび顔画像63Ｒが検出される。
【００４１】
図４（Ａ）および図４（Ｂ）には，所定の画角で定められている顔存在規定領域64Ｌおよび64Ｒも規定されている。この実施例においては，背景オブジェクトがユーザ自身の顔によって隠れないようにするために，背景オブジェクトがユーザ自身の顔によって隠れている場合には顔を移動するようにユーザに報知される。但し，ユーザの顔が撮像可能範囲の端部にある場合に顔を移動させてしまうと，ユーザの顔が撮像されなくなってしまう。このために，顔を移動してもユーザの顔が撮像可能範囲内にあるような場合に，ユーザに顔を移動するように報知される。顔が顔存在規定領域64Ｌおよび64Ｒの中に入っている場合に，ユーザに顔を移動するように報知される。
【００４２】
顔が検出されると，左視点画像64Ｌおよび右視点画像64Ｒのそれぞれから死角領域が検出される（図２ステップ43）。
【００４３】
図５（Ａ）および図５（Ｂ）は，左視点画像60Ｌおよび右視点画像60Ｒを示している。これらの図において，図３（Ａ）および図３（Ｂ）に示すものと同一物には同一符号を付して説明を省略する。
【００４４】
上述したように，左視点画像60Ｌと右視点画像60Ｒとは異なる視点から撮像されているから，左視点画像60Ｌには，左視点画像60Ｌには含まれているが右視点画像60Ｒには含まれていない死角領域（右死角領域）63が含まれている。右死角領域63は，顔の画像62Ｌの左側にあり，自動車の画像61Ｌに重なっている。同様に，右視点画像60Ｒには，右視点画像60Ｒには含まれているが左視点画像60Ｌには含まれていない死角領域（左死角領域）64が含まれている。左死角領域64は，顔の画像62Ｒの右側にある。左視点画像60Ｌと右視点画像60Ｒとの各画素の対応を検出し，対応の画素が無いものを死角領域の検出となる。
【００４５】
死角領域63および64の部分は，左視点画像60Ｌと右視点画像60Ｒのうち，一方の画像には含まれているが他方の画像には含まれていないから，その死角領域63および64の部分は，立体的には見えない。この実施例では，図５（Ａ）に示すように顔の画像62Ｌに隣接する死角領域63または図５（Ｂ）に示すように顔の画像62Ｒに隣接する死角領域64が背景オブジェクトに重なっている場合には，その背景オブジェクトの一部が顔によって隠されているものと考えられる。このために，死角領域63または64が背景オブジェクトに重なっているかどうかの重畳判定処理が行われる（図２ステップ44）。この重畳判定処理について詳しくは，後述する。
【００４６】
右死角領域63または左死角領域64が背景オブジェクトに重畳していなければ（ステップ45でＮＯ），ユーザ自身の顔によって背景オブジェクトが隠れてしまっていないと考えられる。このために，記録許可がユーザに報知される（ステップ48）。例えば，ユーザは複眼ディジタル・カメラを自分でもって自分自身を撮像しているので，第１の表示装置27の表示画面は見えない。このために第１の表示装置27の表示画面に記録許可を表示してもユーザは分からないので，複眼ディジタル・カメラの前面に設けられている第２の表示装置28の表示画面（ＬＥＤでもよい）にユーザへの報知が行われよう。音声による報知でもよい。ユーザによってシャッタ・レリーズ・ボタンが押されると（ステップ49でＹＥＳ），被写体であるユーザ自身が撮像され，撮像により得られた左視点画像および右視点画像をそれぞれ表す画像データがメモリ・カード25に記録される（ステップ50）。死角領域が背景オブジェクトに重畳していない場合に（ステップ45でＮＯ），被写体であるユーザ自身が撮像され，撮像により得られた左視点画像および右視点画像をそれぞれ表す画像データがメモリ・カード25に記録されるときには背景オブジェクト61の総面積Ｓが算出され，その総面積Ｓを表わすデータもメモリ・カード25に記録されるようにするとよい。後述のように，背景オブジェクト61が顔62によって隠れている場合に，その隠れている割合をユーザに知らせることができる。
【００４７】
右死角領域63または左死角領域64が背景オブジェクトに重畳していると（ステップ45でＹＥＳ），ユーザ自身の顔によって背景オブジェクトが隠れてしまっていると考えられる。このために，顔を移動するようにユーザに報知される（ステップ47）（複眼ディジタル・カメラ自体を移動するようにユーザに報知してもよい）。
【００４８】
図６（Ａ）から図６（Ｃ）は，第１の表示装置27の表示画面に表示される立体画像（立体画像でなくともよい）の一例である。
【００４９】
図６（Ａ）を参照して，撮像画像60Ａに含まれている顔画像62によって背景オブジェクト61が隠れてしまっていると，上述のように顔を移動するようにユーザに報知される。その報知に応じてユーザは，自分の顔を移動する。すると，図６（Ｂ）に示すように，撮像画像60Ｂに含まれる顔画像62が水平方向に動くので，背景オブジェクト61の見える割合が多くなる。依然として，顔画像62によって背景オブジェクト61が隠れていると，再び，顔を移動するようにユーザに報知される。その報知に応じて，ユーザは，再び顔を移動する。図６（Ｃ）に示すように，顔画像62が水平方向に動き，背景オブジェクト61が見えるようになる。
【００５０】
このように，顔の移動指示に応じてユーザが顔を動かすことより，顔と背景オブジェクトとの重なりが少なくなっていくようになる。
【００５１】
但し，上述したように，顔の移動後の顔が撮像範囲内にあるように，顔が所定の規定領域64Ｌおよび64Ｒ内に入っている（所定の画角内に入っている）場合に（ステップ46でＹＥＳ），顔を移動するようにユーザに報知される（ステップ47）。例えば，複眼ディジタル・カメラの前面に設けられている第２の表示装置28の表示画面に，その旨が表示される。音声報知でもよい。顔が所定画角内に入っていない場合には（ステップ46でＮＯ），記録許可がユーザに報知される（ステップ48）。
【００５２】
上述の実施例では，ユーザに記録許可を報知したあとにユーザによるシャッタ・レリーズのオンがあったことに応じて被写体を撮像して得られた画像データがメモリ・カードに記録されているが，ユーザに記録許可を報知せずに自動撮像を行い，得られた画像データをメモリ・カードに記録するようにしてもよい。ユーザは，画角の設定に専念でき，撮影の手間が省ける。
【００５３】
図７は，重畳判定処理手順（図２ステップ44の処理手順）を示すフローチャートである。
【００５４】
重畳判定処理は，左視点画像60Ｌと右視点画像60Ｒとのそれぞれについて行われる。まず，左視点画像60Ｌについて重畳判定が行われ（ステップ71），つづいて右視点画像60Ｒについて重畳判定が行われる（ステップ72）。
【００５５】
得られた左視点画像の重畳判定処理と右視点画像の重畳判定処理とのそれぞれの判定結果が統合される（ステップ73）。たとえば，複眼ディジタル・カメラに近い背景オブジェクトが顔の陰とならないような処理が行われる。
【００５６】
図８は，左視点画像重畳判定処理手順（図７ステップ71の処理手順）を示すフローチャートである。左視点画像60Ｌについての重畳判定処理について述べる画，右視点画像60Ｒについても同様に行われる。
【００５７】
まず，左視点画像60Ｌの色領域分割処理が行われる（ステップ81）。色領域分割処理は，画像に含まれる対象物を色ごとの領域に分割する処理である。右視点画像60Ｒについても色領域分割処理が行われる。色領域分割処理は，たとえば，k-means法などを利用できる。
【００５８】
図９（Ａ）および図９（Ｂ）は，色分割処理が行われた右視点画像（右視点色分割画像）90Ｌおよび左視点画像（左視点色分割画像）90Ｒの一例である。
【００５９】
図９（Ａ）を参照して，左視点画像60Ｌについて色分割処理が行われることにより，自動車の色である赤色の領域91Ｌ，ユーザの髪の毛の色である黒色の領域92Ｌ，ユーザの顔の色である，うす茶色の領域93Ｌおよび背景の空の色である青色の領域94Ｌの各領域に分割される。右視点色分割画像90Ｌには，右死角領域63も図示されている。
【００６０】
同様に，図９（Ｂ）を参照して，右視点画像60Ｒについて色分割処理が行われることにより，自動車の色である赤色の領域91Ｒ，ユーザの髪の毛の色である黒色の領域92Ｒ，ユーザの顔の色である，うす茶色の領域93Ｒおよび背景の空の色である青色の領域94Ｒの各領域に分割される。左視点色分割画像90Ｒには，左死角領域64も図示されている。
【００６１】
右視点死角領域63の色領域が，隣接する色領域と同じ色領域であれば，右視点死角領域63は，右視点死角領域63に隣接する領域の一部であると考えられる。このために，右視点死角領域63の色領域が，隣接する色領域と同じ色領域かどうかが判定される（ステップ82）。但し，その色領域の大きさが所定の大きさ以上であると，空などのようにユーザ自身に隠れてもよい背景オブジェクトであると考えられる。このために，色領域の大きさが所定の大きさ以下かどうかも確認される（ステップ83）。
【００６２】
右視点死角領域63の色領域が，隣接する色領域と同じ色領域であると（ステップ82でＹＥＳ），上述のように，その色領域の大きさが所定の大きさ以下かどうかが確認される（ステップ83）。所定の大きさ以下であると（ステップ83でＹＥＳ），右視点死角領域63は，その色領域によって特定される背景オブジェクトの一部であると決定される（ステップ84）。これにより，右死角領域63が色領域91Ｌによって特定される背景オブジェクトに重畳していると判定される。図８（Ａ）に示すように，右死角領域63の色領域が，隣接する色領域91Ｌと同じ色領域と判断され，かつその色領域91Ｌの大きさが所定の大きさ以下であると，右死角領域63は，色領域91Ｌで特定される自動車の画像61Ｌに重なっていると判定される。
【００６３】
右視点死角領域63の色領域が，隣接する色領域と同じ色領域ではない場合には（ステップ82でＮＯ），右視点死角領域63は背景オブジェクトの一部ではないと決定される（ステップ85）。たとえば，右視点死角領域63の色が，右視点死角領域63の右側にある色領域93Ｌの色と異なると，右視点死角領域63は，色領域93によって特定される背景オブジェクトの一部ではないと判定される。また，右視点死角領域63に隣接する色領域の大きさが所定の大きさよりも大きいと，右視点死角領域63は，右視点死角領域63に隣接する色領域の一部とは決定されない（ステップ85）。
【００６４】
上述の処理と同様の処理が図９（Ｂ）に示す右視点色分割画像についても行われる。
【００６５】
上述の実施例において，左視点画像60Ｌまたは右視点画像60Ｒにおいて，顔画像の両側に背景オブジェクトと重畳している死角領域が存在する場合には，顔画像の左側にある背景オブジェクトと顔画像の右側にある背景オブジェクトとのどちらが顔画像に重畳しないようにすれば分からないので，顔の移動指示を報知することなく，撮像許可を報知するようにできる。もっとも，顔画像の両側にある背景オブジェクトのうち，複眼ディジタル・カメラに近い方の背景オブジェクトが顔画像と重畳しないように顔の移動指示を与えるようにしてもよい。顔の移動方向は，顔画像の位置と死角領域との位置関係にもとづいて決定できる。死角領域が顔画像の左側にある場合には，被写体像において顔画像が右側に移動するように報知させ，死角領域が顔画像の右側にある場合には，被写体像において顔画像が左側に移動するように報知させるようにしてもよい。また，背景オブジェクトは，たとえば，同一色の物体と考えられる。
【００６６】
図10から図15（Ａ）および図15（Ｂ）は，変形例を示している。
【００６７】
図10は，視差調整処理手順を示すフローチャートである。この視差調整は，たとえば，シャッタ・レリーズ・ボタンがオンされた（図２のステップ49でＹＥＳ）ことに応じて行われる。図11は，被写体距離レンジと顔の視差量との関係を示している。図12（Ａ），図13（Ａ），図14（Ａ）および図15（Ａ）は，被写体像（左視点画像または右視点画像）111，121，131および141の一例を示し，図12（Ｂ），図13（Ｂ），図14（Ｂ）および図15（Ｂ）は，被写体の位置を示している。
【００６８】
この変形例は，ユーザと背景オブジェクトとの距離とにもとづいて視差量を調整するものである。
【００６９】
まず，顔までの距離および背景オブジェクトまでの距離が算出される（ステップ101）。これらの距離はフォーカス・レンズの移動量などにより算出できる。つづいて，顔と背景オブジェクトとの距離（被写体距離レンジ）が算出される（ステップ102）。顔と背景オブジェクトとの距離にもとづいて視差量が算出される（ステップ103）。算出された視差量となるように，左視点画像60Ｌと右視点画像60Ｒとの視差量が調整される（ステップ104）。もっとも，顔と背景オブジェクトとの間にある物体の視差量が０となるように視差量調整処理が行われてもよい。
【００７０】
図11を参照して，被写体距離レンジが０のときは，視差量も０である。顔の位置がクロス・ポイントの位置となる。被写体距離レンジが所定の値Ｒ１までは，被写体距離レンジが大きくなるにつれて顔の視差量も序々に大きくなる。被写体距離レンジが所定の値Ｒ１を以上となると，あらかじめ定められている許容視差量となる。
【００７１】
顔の視差量が大きくなってしまうと，背景の視差量はそれ以上に大きくなってしまい，立体視しづらい状態となってしまう。顔の視差量が許容視差量に抑えられるので，背景の視差量が大きくなってしまうことを未然に防止できる。顔だけでなく，背景の被写体の破綻無く立体視できるようになる。
【００７２】
図12（Ａ）は，被写体が空以外はユーザのみの被写体像111の一例である。このように被写体が空以外はユーザのみの場合には，ユーザと背景オブジェクトとの距離が０となり，図12（Ｂ）に示すようにユーザの画像（顔画像）112がクロス・ポイントの位置となるように視差量調整が行われる。
【００７３】
図13（Ａ）は，被写体像121にユーザの画像122とバイクの画像123とが含まれている。図13（Ｂ）に示すように，ユーザとバイクとの距離が小さいとそれらの距離差に応じて視差量が調整される。
【００７４】
図14（Ａ）は，被写体像131にユーザの画像132と建物の画像132とが含まれている。図14（Ｂ）に示すように，ユーザと建物との距離が比較的近い場合も，それらの距離差に応じて視差量が調整される。
【００７５】
図15（Ａ）は，被写体像141にユーザの画像142と山の画像142とが含まれている。図15（Ｂ）に示すように，ユーザと山との距離が遠いと，これらの距離差に応じて視差量が調整されると，立体視しづらいことがある。このために，上述のように，ユーザの顔の視差量は許容視差量に抑えられる。
【００７６】
図16は，被写体距離レンジと顔の視差量との関係を示すもので，図11に対応している。
【００７７】
図11に示す関係では，被写体距離レンジが０の場合には，顔の視差量が０とされているが，図16に示す関係では，被写体距離レンジが０の場合には，顔の視差量は最適視差量となる。被写体距離レンジが所定の距離レンジＲ１までは顔の視差量は距離レンジが増加するにつれて増加される。所定の距離レンジＲ１以上となると顔の視差量は許容視差量に抑えられるのは上述したのと同様である。
【００７８】
顔の視差量における許容視差量，最適視差量は表示画面の大きさ，解像度などによって変える必要がある。たとえば，水平方向800画素垂直方向640画素の3.5型の表示画面に立体画像を表示する場合には，たとえば，許容視差量は56画素，最適視差量は24画素である。
【００７９】
図17は，他の変形例を示すもので，撮像制御処理手順を示すフローチャートである。ユーザによってシャッタ・レリーズ・ボタンが押されたことにより，図16に示す処理手順が行われる。
【００８０】
上述したように，顔までの距離と背景オブジェクトの距離とが算出され（ステップ101），顔までの距離と背景オブジェクトまでの距離との間の距離（距離レンジ）が算出される（ステップ102）。算出された距離レンジにもとづいて視差量が算出される（ステップ103）。
【００８１】
視差量が大きくなりすぎる背景オブジェクトがあれば（ステップ151でＹＥＳ），立体視が破綻されてしまうので，２Ｄ撮像が行われる（ステップ153）。視差量が大きくなりすぎる背景オブジェクトがなければ（ステップ151でＮＯ），３Ｄ撮像が行われる（ステップ152）。２Ｄ撮像は，左視点撮像装置および右視点撮像装置のうちの一方の撮像装置で撮像すればよいし，３Ｄ撮像は，左視点撮像装置および右視点撮像装置の両方の撮像装置で撮像すればよい。
【００８２】
図18は，他の実施例を示すもので，複眼ディジタル・カメラの処理手順を示すフローチャートである。この処理は，図２に示す処理につづいて行われるものである。図19は，第１の表示装置27の表示画面に表示される撮像画像60Ｄの一例である。図６（Ａ）から図６（Ｃ）の撮像画像60Ａから60Ｃに対応する。
【００８３】
この実施例は，背景オブジェクトと顔との重なりの程度をユーザに報知するものである。
【００８４】
上述したように，背景オブジェクトの総面積Ｓが記録されており，その総面積Ｓが利用される。画角が変わってしまうと，撮像範囲の中に含まれている背景オブジェクトが変わってしまうことがあるので，画角が変わっている場合には（ステップ162でＹＥＳ）,他の処理が行われる。
【００８５】
画角が変わっていない場合には（ステップ162でＮＯ），図19に示すように，被写体が撮像され，得られた撮像画像60Ｄから顔画像62が検出される（ステップ163）。
【００８６】
上述のように，撮像画像60Ｄの中から背景オブジェクト61が見つけ出され，見つけ出された背景オブジェクト61のうち，顔62によって表示されていない非表示領域と死角領域とが除かれた背景オブジェクトの面積Ａが算出される（ステップ164）。算出された面積Ａは，立体画像として見える面積を表わしていることとなる。
【００８７】
背景オブジェクトの表示割合Ｒ＝Ａ／Ｓが算出され（ステップ165），算出された表示割合がユーザに報知される（ステップ166）。複眼ディジタル・カメラの前面に表示画面か形成され，その表示画面に表示割合が表示される，あるいは表示割合が音声出力されることとなろう。たとえば，図19に示すものであれば，背景オブジェクト61の割合が80％であることが報知される。ユーザは，その割合を知ることにより，背景オブジェクト61の全体のうち，どの位の割合を立体視できるかが分る。その割合でよければシャッタ・レリーズ・ボタンがオンされ（ステップ167でＹＥＳ），撮像により得られた画像データ（左視点画像データおよび右視点画像データ）がメモリ・カード25に記録される（ステップ168）。ユーザは，顔と背景オブジェクトとの重なりの程度が分かるので，所望の重なりの程度のときに撮像できるようになる。
【００８８】
撮像される背景オブジェクト61の割合が所望の割合でなければ（ステップ167でＮＯ），ユーザは顔を動かし，再び背景オブジェクト61の全体のうち立体視できる割合が算出され，かつ表示される（ステップ163〜166）。この場合においても，立体視できる背景オブジェクト61の割合を変えるには顔を動かす旨をユーザに報知してもよい。
【符号の説明】
【００８９】
１，２ 撮像装置
10 ＣＰＵ
【特許請求の範囲】
【請求項１】
異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置において，
上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出する顔検出手段，
複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定する死角領域判定手段，
上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定する重畳判定手段，および
上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知する第１の報知手段，
を備えた複眼撮像装置。
【請求項２】
上記顔検出手段によって検出された顔領域が，撮影可能な範囲よりも狭い画角である所定の画角に入っているかどうかを判定する画角判定手段をさらに備え，
上記第１の報知手段は，
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，顔または複眼撮像装置自体の移動指示を報知するものである，
請求項１に記載の複眼撮像装置。
【請求項３】
上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なっていないと判定されたことに応じて，撮影許可を報知する第２の報知手段，
をさらに備えた請求項１または２に記載の複眼撮像装置。
【請求項４】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて撮影許可を報知する第３の報知手段，
をさらに備えた請求項２または３に記載の複眼撮像装置。
【請求項５】
上記重畳判定手段によって死角領域が背景オブジェクトの画像と重なっていないと判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第１の記録制御手段，
をさらに備えた請求項１から４のうち，いずれか一項に記載の複眼撮像装置。
【請求項６】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第２の記録制御手段，
をさらに備えた請求項２から４のうち，いずれか一項に記載の複眼撮像装置。
【請求項７】
上記顔画像によって表される顔と上記背景オブジェクトとの間にある物体との視差が０となるように上記複数の被写体像の視差量を調整する第１の視差量調整手段，
をさらに備えた請求項１から６のうち，いずれか一項に記載の複眼撮像装置。
【請求項８】
上記顔画像によって表される顔と上記背景オブジェクトとの距離を算出する距離算出手段，および
上記距離算出手段によって算出された距離が所定距離以上であることに応じて，顔の画像部分の視差量が所定視差量以下となるように上記複数の被写体像の視差量を調整する第２の視差量調整手段，
をさらに備えた請求項１から７のうち，いずれか一項に記載の複眼撮像装置。
【請求項９】
上記背景オブジェクトの視差量を算出する背景オブジェクト視差量算出手段，および
上記背景オブジェクト視差量算出手段によって算出された視差量が所定量以上であった場合に，２Ｄの画像データを記録媒体に記録する第３の記録制御手段，
をさらに備えた請求項８に記載の複眼撮像装置。
【請求項１０】
上記背景オブジェクトの総面積を算出する第１の面積算出手段，
上記背景オブジェクトが上記顔検出手段によって検出された顔によって隠されている部分を除く残りの部分の面積を算出する第２の面積算出手段，および
上記第１の面積算出手段によって算出された面積と上記第２の面積算出手段によって算出された面積との面積比を報知する第４の報知手段，
をさらに備えた請求項１から９のうち，いずれか一項に記載の複眼撮像装置。
【請求項１１】
上記背景オブジェクトは同一色の物体である，請求項１から10のうち，いずれか一項に記載の複眼撮像装置。
【請求項１２】
異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置の動作制御方法において，
顔検出手段が，上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出し，
死角領域判定手段が，複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定し，
重畳判定手段が，上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定し，
報知手段が，上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知する，
複眼撮像装置の動作制御方法。
【請求項１】
異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置において，
上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出する顔検出手段，
複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定する死角領域判定手段，
上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定する重畳判定手段，および
上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知する第１の報知手段，
を備えた複眼撮像装置。
【請求項２】
上記顔検出手段によって検出された顔領域が，撮影可能な範囲よりも狭い画角である所定の画角に入っているかどうかを判定する画角判定手段をさらに備え，
上記第１の報知手段は，
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，顔または複眼撮像装置自体の移動指示を報知するものである，
請求項１に記載の複眼撮像装置。
【請求項３】
上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なっていないと判定されたことに応じて，撮影許可を報知する第２の報知手段，
をさらに備えた請求項１または２に記載の複眼撮像装置。
【請求項４】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて撮影許可を報知する第３の報知手段，
をさらに備えた請求項２または３に記載の複眼撮像装置。
【請求項５】
上記重畳判定手段によって死角領域が背景オブジェクトの画像と重なっていないと判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第１の記録制御手段，
をさらに備えた請求項１から４のうち，いずれか一項に記載の複眼撮像装置。
【請求項６】
上記画角判定手段によって顔が所定の画角に入っていると判定されたことに応じて，上記複数の撮像装置において撮像された被写体像を表す画像データを記録媒体に記録する第２の記録制御手段，
をさらに備えた請求項２から４のうち，いずれか一項に記載の複眼撮像装置。
【請求項７】
上記顔画像によって表される顔と上記背景オブジェクトとの間にある物体との視差が０となるように上記複数の被写体像の視差量を調整する第１の視差量調整手段，
をさらに備えた請求項１から６のうち，いずれか一項に記載の複眼撮像装置。
【請求項８】
上記顔画像によって表される顔と上記背景オブジェクトとの距離を算出する距離算出手段，および
上記距離算出手段によって算出された距離が所定距離以上であることに応じて，顔の画像部分の視差量が所定視差量以下となるように上記複数の被写体像の視差量を調整する第２の視差量調整手段，
をさらに備えた請求項１から７のうち，いずれか一項に記載の複眼撮像装置。
【請求項９】
上記背景オブジェクトの視差量を算出する背景オブジェクト視差量算出手段，および
上記背景オブジェクト視差量算出手段によって算出された視差量が所定量以上であった場合に，２Ｄの画像データを記録媒体に記録する第３の記録制御手段，
をさらに備えた請求項８に記載の複眼撮像装置。
【請求項１０】
上記背景オブジェクトの総面積を算出する第１の面積算出手段，
上記背景オブジェクトが上記顔検出手段によって検出された顔によって隠されている部分を除く残りの部分の面積を算出する第２の面積算出手段，および
上記第１の面積算出手段によって算出された面積と上記第２の面積算出手段によって算出された面積との面積比を報知する第４の報知手段，
をさらに備えた請求項１から９のうち，いずれか一項に記載の複眼撮像装置。
【請求項１１】
上記背景オブジェクトは同一色の物体である，請求項１から10のうち，いずれか一項に記載の複眼撮像装置。
【請求項１２】
異なる視点での撮像を繰り返す複数の撮像装置を備えた複眼撮像装置の動作制御方法において，
顔検出手段が，上記複数の撮像装置によって被写体を撮像して得られた複数の被写体像の少なくとも一方から顔領域を検出し，
死角領域判定手段が，複数の被写体像のうち一方の被写体像には含まれるが他方の被写体像には含まれない死角領域が，上記顔検出手段によって検出された顔領域に隣接して存在するかどうかを判定し，
重畳判定手段が，上記死角領域判定手段によって死角領域が存在すると判定されたことに応じて，その死角領域が顔領域の背景にある顔領域に隣接した背景オブジェクトの領域と重なるかどうかを判定し，
報知手段が，上記重畳判定手段によって死角領域が背景オブジェクトの領域と重なると判定されたことに応じて顔または複眼撮像装置自体の移動指示を報知する，
複眼撮像装置の動作制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【公開番号】特開２０１３−７０１５４（Ｐ２０１３−７０１５４Ａ）
【公開日】平成２５年４月１８日（２０１３．４．１８）
【国際特許分類】
【出願番号】特願２０１１−２０６０００（Ｐ２０１１−２０６０００）
【出願日】平成２３年９月２１日（２０１１．９．２１）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２５年４月１８日（２０１３．４．１８）
【国際特許分類】
【出願日】平成２３年９月２１日（２０１１．９．２１）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]