撮像装置及び撮像方法
【課題】操作者のジェスチャに応じた撮影制御を行う際に、操作者の存在位置の制約を減少させる。
【解決手段】画像データを取得する複数の撮像部と、複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して撮像範囲を変更する撮像範囲変更部と、いずれか１つの撮像部が取得した画像データから操作者のジェスチャを検出するジェスチャ検出部と、検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御及び複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部とを備え、撮像制御部は、記録すべき撮像範囲の変更制御に際して、撮影範囲変更手段を制御して、複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲をジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、本撮像部の撮像範囲から操作者が含まれなくなる場合は本撮像部以外の撮像部の撮像範囲の変更を操作者が含まれる範囲に制限する。
【解決手段】画像データを取得する複数の撮像部と、複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して撮像範囲を変更する撮像範囲変更部と、いずれか１つの撮像部が取得した画像データから操作者のジェスチャを検出するジェスチャ検出部と、検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御及び複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部とを備え、撮像制御部は、記録すべき撮像範囲の変更制御に際して、撮影範囲変更手段を制御して、複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲をジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、本撮像部の撮像範囲から操作者が含まれなくなる場合は本撮像部以外の撮像部の撮像範囲の変更を操作者が含まれる範囲に制限する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の撮像部を備えた撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
従来、撮像装置の撮像範囲に存在している被写体のジェスチャ動作を検出し、所定の撮像動作を自動で行う撮像装置が知られている（特許文献１、２参照）。
【０００３】
特許文献１には、撮像装置の撮像範囲に存在している被写体の顔の表情又はジェスチャを検出し、所定の顔の表情又はジェスチャを検出したときに自動的に撮影処理を行い、取得された撮影画像の記録を行う撮像装置が記載されている。
【０００４】
特許文献２には、予め設定された追尾エリア内において、被写体の位置とその被写体が任意の位置を指し示すジェスチャを検出し、検出した被写体の位置とジェスチャによって指し示された位置とに基づいて、撮影画像から自動的に画像切り出しを行う撮像装置が記載されている。
【０００５】
しかし、特許文献１，２に記載された撮像装置は、撮影対象（記録画像、表示画像等の最終的な出力画像に含まれる対象）である被写体のジェスチャに応じて所定の撮像動作を自動で行うものであり、ジェスチャを検出すべき人物等は、常に撮像装置の撮像範囲内に存在していることを前提としている。
【０００６】
また、特許文献３には、３次元画像の撮像が可能な複数の撮像部を備えた複眼の撮像装置が記載されている。複眼の撮像装置は、２つの撮像部で同一の被写体を撮像し、視差を有する２つの画像データを合成することで立体感のある３次元画像を生成する。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１０−３４６８５号公報
【特許文献２】特開２００７−１５８６８０号公報
【特許文献３】特開２００８−１２９４３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
ところで、操作者の意図的なジェスチャに応じて撮像装置を制御することを想定した場合、操作者が撮像範囲に含まれなくなるような画角での撮像指示も想定されるが、特許文献１、２に記載された撮像装置では、操作者が撮像範囲に含まれなくなる画角での撮像は不可能である。
【０００９】
特許文献３に記載された複眼の撮像装置において、ジェスチャに応じて撮像装置を制御することを想定した場合、複数の撮像部それぞれの撮像範囲は連動しているため、いずれの撮像部の撮像範囲に操作者が存在しない場合には、ジェスチャに応じたコントロールを行うことができない。
【００１０】
本発明は、操作者のジェスチャに応じた制御を行う際に、操作者の存在位置の制約を減少させた撮像装置及び撮像方法を提供する。
【課題を解決するための手段】
【００１１】
操作者のジェスチャに応じた撮像を行う撮像装置であって、
所定の撮像範囲の画像データを取得する複数の撮像部と、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を変更する撮像範囲変更部と、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャを検出するジェスチャ検出部と、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部と、を備え、
前記撮像制御部は、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限する撮像装置。
【００１２】
操作者のジェスチャに応じた撮像を行う撮像装置の撮像方法であって、
所定の撮像範囲の画像データを複数の撮像部から取得するステップと、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を撮像範囲変更部によって変更するステップと、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャをジェスチャ検出部によって検出するステップと、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を撮像制御部によって行うステップと、を含み、
前記撮像制御部によって、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの少なくとも１つの撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限し、
前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
【発明の効果】
【００１３】
本発明によれば、操作者のジェスチャに応じた制御を行う際に、操作者の存在位置の制約を減少させた撮像装置及び撮像方法を提供できる。
【図面の簡単な説明】
【００１４】
【図１】撮像装置の構成を示すブロック図である。
【図２】被写体を撮像している状態を示す図である。
【図３】取得した画像データに基づいて表示された画像の例を示す図である。
【図４】撮像の手順の一例を示すフローチャートである。
【図５】撮像の手順の一例を示すフローチャートである。
【図６】撮像の手順の一例を示すフローチャートである。
【図７】撮像の手順の一例を示すフローチャートである。
【図８】撮像の手順の一例を示すフローチャートである。
【図９】撮像の手順の一例を示すフローチャートである。
【図１０】撮像の手順の一例を示すフローチャートである。
【発明を実施するための形態】
【００１５】
図１は、複数の撮像系を備えた撮像装置の構成を示すブロック図である。なお、撮像装置として２つの撮像部を有するデジタルカメラを例に説明する。
【００１６】
この撮像装置において、２つの撮像部は、水平方向に人間の両眼の間隔以上の距離を隔てて設けられている。２つの撮像部は、右眼撮像系と左眼撮像系とを含む。右眼撮像系にはレンズ群１Ｒと、ＣＣＤ型又はＭＯＳ型の固体撮像素子５Ｒと、この両者の間に設けられた絞り２Ｒと、赤外線カットフィルタ３Ｒと、光学ローパスフィルタ４Ｒとが含まれる。左眼撮像系にはレンズ群１Ｌと、ＣＣＤ型又はＭＯＳ型の固体撮像素子５Ｌと、この両者の間に設けられた絞り２Ｌと、赤外線カットフィルタ３Ｌと、光学ローパスフィルタ４Ｌとが含まれる。撮像装置は、同一被写体を右眼撮像系及び左眼撮像系のそれぞれの視点から撮像可能である。
【００１７】
レンズ群１Ｒ，１Ｌには、それぞれ、ズーム位置を調整するためのズームレンズと、フォーカス位置を調整するためのフォーカスレンズ等が含まれている。このズームレンズとフォーカスレンズは、右眼撮像系と左眼撮像系とで同期して移動するようになっている。また、この撮像装置は、レンズ群１Ｒ，１Ｌは、いずれか一方のみを制御して、ズームレンズやフォーカスレンズを移動させることができる。又は、レンズ群１Ｒ，１Ｌそれぞれのズームレンズやフォーカスレンズを異なる位置となるように制御することができる。
【００１８】
撮像装置の電気制御系全体を統括制御するシステム制御部１１は、所定のプログラムによって動作するプロセッサを主体に構成されている。システム制御部１１は、レンズ駆動部８を制御してレンズ群１Ｒ，１Ｌのフォーカスレンズ位置やズームレンズ位置の調整を行ったり、絞り駆動部９を介し絞り２Ｒ，２Ｌの開口量を制御して露光量調整を行ったりする。
【００１９】
また、システム制御部１１は、撮像素子駆動部１０を介して固体撮像素子５Ｒ，５Ｌを駆動し、レンズ群１Ｒ，１Ｌを通して撮像した被写体画像を撮像信号として出力させる。システム制御部１１には、操作部１４を通してユーザからの指示信号が入力される。
【００２０】
撮像装置の電気制御系は、更に、固体撮像素子５Ｒの出力に接続された相関二重サンプリング処理等のアナログ信号処理を行うアナログ信号処理部６Ｒと、このアナログ信号処理部６Ｒから出力された撮像信号をデジタル信号に変換するＡ／Ｄ変換回路７Ｒと、固体撮像素子５Ｌの出力に接続された相関二重サンプリング処理等のアナログ信号処理を行うアナログ信号処理部６Ｌと、このアナログ信号処理部６Ｌから出力された撮像信号をデジタル信号に変換するＡ／Ｄ変換回路７Ｌとを備え、これらはシステム制御部１１によって制御される。
【００２１】
更に、このデジタルカメラの電気制御系は、メインメモリ１６と、メインメモリ１６に接続されたメモリ制御部１５と、Ａ／Ｄ変換回路７Ｒ，７Ｌから出力される撮像信号にそれぞれ所定のデジタル信号処理（補間演算やガンマ補正演算，ＲＧＢ／ＹＣ変換処理等）を行って画像データを生成するデジタル信号処理部１７と、デジタル信号処理部１７で生成された画像データをＪＰＥＧ形式に圧縮したり圧縮画像データを伸張したりする圧縮伸張処理部１８と、着脱自在の記録媒体２１が接続される外部メモリ制御部２０と、画像データに基づく画像を立体視可能に表示する表示部２３が接続される表示制御部２２とを備え、これらは、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
【００２２】
表示部２３は、撮影済み画像を表示するための画像表示部として利用されるとともに、各種設定時にＧＵＩとして利用される。また、撮影時には、表示部２３に固体撮像素子５Ｒ，５Ｌから取得した画像データがスルー画として連続的に表示され、電子ファインダ等として利用される。
【００２３】
立体視表示の仕組みとしては、表示部２３に表示される立体画像データは、右画像データと左画像データとから構成されている。右画像データ及び左画像データは、細長い短冊形状をしており、交互に並列される。
【００２４】
表示部２３は、表示方式として、例えば時分割視差画像方式を用いる。時分割視差画像方式とは、１つの液晶表示部に右画像データと左画像データを交互に表示すると共に、右画像データを表示したときには、液晶表示部のバックライトからの光を観察者の右目の方向に向けて照射し、左画像データを表示したときには、表示部に内蔵されたバックライトからの光を観察者の左目の方向に向けて照射することで、観察者に立体画像を認識させる方式である。
【００２５】
以下の例では、図１の２つの撮像部を備えた撮像装置の構成を例に説明する。
【００２６】
さらに、撮像装置には、画像認識部３１と、動作検出部３２と、撮像制御部３３と、を備える。画像認識部３１、動作検出部３２、撮像制御部３３は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。画像認識部３１と、動作検出部３２とは、ジェスチャ検出部として機能する。
【００２７】
画像認識部３１は、取得された画像データに基づいて顔画像を検出し、検出した顔画像に基づいて顔認識を行うことで操作者を認識する。
【００２８】
動作検出部３２は、画像認識部３１によって認識された操作者のジェスチャを検出する。撮像装置は、操作者のジェスチャを検出して自動で変更制御を行う。ここで、ジェスチャとは、操作者が行う動作（例えば、手を挙げる等の動作）をいう。ジェスチャには、撮像範囲の変更制御、及び撮像指示に関する所定の制御内容が設定されている。例えば、操作者の手をあげるというジェスチャに、光学ズームを駆動して複数の撮像部それぞれの撮像範囲を変更する制御が設定されている。撮像装置は、撮像範囲に含まれる操作者のジェスチャを検出し、該ジェスチャに応じて制御される。こうして、操作者は、撮像装置の操作部１４から手指等の直接入力を行うことなく、離れた位置から撮像装置に所望の制御を実行させることができる。
【００２９】
撮像制御部３３は、検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び撮像部に対する撮像指示を含む制御を行う。
【００３０】
次に、撮像装置を用いて、撮像を実行する例を説明する。
図２は、図１の撮像装置を用いて、操作者を含む複数の人物を撮像している状態を示している。図２では、４人の人物が存在し、図中矢印で示す人物が操作者である。操作者は撮像装置から離れた位置に立っている。この例では、撮像装置において、操作者が手をあげるジェスチャが検出され、検出したジェスチャに応じて光学ズームを実行する。操作者は、撮像装置の表示部で記録すべき撮像範囲に対応する画像を確認することができる。
【００３１】
図３は、図２の状態の撮像装置の表示部に表示される画像を示している。図３Ａは２つの撮像部のうち一方（ジェスチャ検出用撮像部）で取得された画像データに基づく画像を示している。図３Ｂは２つの撮像部のうち他方（本撮像部）で取得された画像データに基づく画像を示している。
【００３２】
図３Ａに示すように、ジェスチャ検出用撮像部は、その撮像範囲に操作者を含むように制御されている。ジェスチャ検出用撮像部で取得される画像データから操作者のジェスチャを検出することができる。図３Ｂに示すように、本撮像部は、ジェスチャに応じた光学ズームによって撮像範囲が変更制御されている。本撮像部は、ジェスチャに応じた撮像画角で画像データを取得でき、この画像データに基づいて記録すべき撮像範囲に対応する画像を得ることができる。一方で、本撮像部は、変更された撮像範囲に操作者を含まないため、操作者のジェスチャを検出することができない。仮に、操作者のジェスチャに応じて２つの撮像部の撮像範囲を光学ズームで変更制御すると、操作者が撮像範囲に含まれなくなり、その後、撮像装置をコントロールできなくなる。そこで、この撮像装置は、撮像制御部３３が、光学ズームで記録すべき撮像範囲の変更制御に際して、図３Ｂに示すように、光学ズームを制御して本撮像部の撮像範囲をジェスチャに応じて変更させる。また、図３Ａに示すように、撮像装置は、本撮像部の撮像範囲から操作者が含まれなくなる場合は、ジェスチャ検出用撮像部の撮像範囲の変更を操作者が含まれる範囲に制限する。
【００３３】
本撮像部とジェスチャ検出用撮像部それぞれで、異なる撮像範囲を撮像する場合には、本撮像部又はジェスチャ検出用撮像部のいずれかで取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示させる。
【００３４】
以下では、ジェスチャに応じた変更制御としては、画角を光学ズームによって変更する制御である場合を例に説明する。
【００３５】
この例では、光学ズームによって撮像部の撮像画角を変更して撮像部の撮像範囲を変更する手段を撮像範囲変更部とする。撮像範囲変更部は、撮像部の撮像方向を変更するものであってもよい。撮像範囲変更部は、２つの撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して撮像範囲を変更するものである。撮像範囲変更部は、撮像部の撮像方向を変更するものとしては、例えば、撮像装置を保持する雲台の移動を制御する手段、パン・チルト機構を制御する手段、画像データのトリミング処理を行う手段、を用いてもよい。
【００３６】
次に、操作者のジェスチャに応じて、所定の制御や撮像を実行する手順を説明する。以下の説明では、図１で示す撮像装置の構成を例に説明する。
【００３７】
図４は、撮像の手順の一例を示すフローチャートである。なお、以下で参照する図では、ジェスチャ検出用撮像部をジェスチャ用カメラともいう。
この例では、最初に、ステップＳ１において、画像認識部３１が、２つの撮像部のうち一方から取得された画像データから顔画像の検出を行い、検出した顔画像に基づいて顔認識を行う。そして、認識された被写体の人物を操作者として設定する。顔認識は、画像データから検出された顔画像と予め登録された登録画像データとを比較し、両者がどの程度一致するか判断し、一致する場合には顔画像の人物を操作者として認識する。この手順後、ステップＳ２へ進む。なお、２つの撮像部それぞれから取得された画像データで顔検出を用いて行ってもよい。
【００３８】
ステップＳ２において、動作検出部３２が認識された操作者のジェスチャを検出する。ジェスチャは、例えば、画像データにおいて操作者の領域を取得して特徴点を算出し、この特徴点の変化パターンが所定のパターンに一致するか否かに基づいて判別する。そして、ステップＳ３へ進む。
【００３９】
ステップＳ３において、動作検出部３２が、ジェスチャの有無を判別する。ジェスチャを検出した場合には、ジェスチャに予め関連付けられて設定された変更制御を設定し、ステップＳ４へ進む。ここでは、操作者の手を挙げるというジェスチャに予め関連つけられた光学ズームが行われる。一方、ジェスチャを検出しなかった場合にはステップＳ１０へ進む。
【００４０】
ステップＳ４において、撮像制御部３３は、光学ズームの実行によって２つの撮像部の撮像範囲を変更制御したとき、操作者が検出できなくならないかを判別する。操作者の検出が不可能である場合には、ステップＳ５へ進む。操作者の検出が可能である場合には、ステップＳ７へ進む。
【００４１】
ステップＳ５において、ジェスチャ検出用撮像部で操作者が撮像されるか否かを判断する。ジェスチャ検出用撮像部で、操作者を検出可能と判断した場合には、ステップＳ６へ進む。ジェスチャ検出用撮像部で操作者の検出が不可能であると判断した場合には、ステップＳ８へ進む。
【００４２】
ステップＳ６において、２つの撮像部のうち一方をジェスチャ検出用撮像部に設定し、実際にジェスチャ検出用撮像部で撮像を開始する。ジェスチャ検出用撮像部は、その撮像範囲が操作者を含む範囲となるように、撮像制御部３３によって制御される。一方、本撮像部は、ジェスチャによって指示された光学ズームによってその撮像範囲が変更制御される。このとき、表示部には、本撮像部で撮像した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示する。又は、表示部は、ジェスチャ検出用撮像部で撮像した画像データに基づく画像を表示してもよい。その後、ステップＳ１０へ進む。
【００４３】
ステップＳ７では、光学ズームを実行した際に、２つの撮像部のそれぞれの撮像範囲に操作者を含むと判断されたため、撮像制御部３３は、２つの撮像部それぞれの撮像範囲を光学ズームによって変更する。その後、ステップＳ１０へ進む。
【００４４】
ステップＳ８では、ステップＳ５で２つの撮像部のうちいずれの撮像範囲においても操作者が検出不可能と判断した結果をうけ、警告動作を実行する。警告動作としてはタリーを点滅させる方法や、表示部２３に表示を行う方法などがある。
【００４５】
ステップＳ１０において、撮像指示が行われた否かを判別する。撮像指示は、操作者がジェスチャによって行ってもよく、他の人物が撮像装置の操作部１４に直接入力したものであってもよい。撮像指示がある場合には、Ｓ１１へ進む。撮像指示がない場合には、ステップＳ１へ戻って、上記手順を繰り返す。
【００４６】
ステップＳ１１において、ジェスチャ検出用撮像部が本撮像部とは異なる撮像範囲で撮像して、操作者を検出する動作が設定されている状態であるか否かを判別する。ジェスチャ検出用撮像部が操作者を検出する動作を行っている場合には、ステップＳ１２へ進む。ジェスチャ検出用撮像部が操作者を検出する動作を行っていない場合には、ステップＳ１５へ進む。
【００４７】
ステップＳ１２において、撮像制御部３３は、ジェスチャ検出用撮像部による操作者を検出する動作を一時的に中断し、該ジェスチャ検出用撮像部の撮像範囲を、本撮像部と同じようにジェスチャに応じて変更制御された撮像範囲に切り換える。このとき、ジェスチャ検出用撮像部は、本撮像部と同じ動作状態、つまり、光学ズームによって撮像範囲が変更されている状態になる。また、中断されたジェスチャ検出用撮像部の動作状態を示すデータがメインメモリ１６に記録される。そして、ステップＳ１３へ進む。
【００４８】
ステップＳ１３において、記録のための画像データを取得する撮像制御が実行される。このとき、ジェスチャに応じて、変更制御された撮像範囲で２つの撮像部それぞれから画像データが取得される。取得された画像データに基づく画像は、２つの撮像部の配置に基づく視差を含む。取得した画像データをメインメモリ１６に記録する動作である。この手順の後、ステップＳ１４へ進む。
【００４９】
ステップＳ１４において、撮像制御を行った後で、ジェスチャ検出用撮像部の撮像範囲を操作者が含まれる範囲に変更する。このとき、撮像制御部３３は、メインメモリ１６から先のジェスチャ検出用撮像部の動作状態を示すデータを読み出し、ジェスチャ検出用撮像部の撮像範囲を、撮像制御に切り換える直前の撮像範囲（つまり、操作者を含むように制限された撮像範囲）に戻す制御を行う。本撮像部及びジェスチャ検出用撮像部のうちの１つの撮像部で取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示部２３に表示させる。その後、フローを終了する。
【００５０】
ステップＳ１５では、２つの撮像部は、いずれもジェスチャ検出用撮像部に設定されていないとする判断をうけ、特に２つの撮像部の撮像範囲を変更することなく、撮像を実行する。２つの撮像部それぞれから画像データを取得し、メインメモリ１６に記録する。その後、フローを終了する。
【００５１】
撮像装置は、取得した画像データを合成して３次元画像データを作成する。また、撮像装置は、取得した１つの画像データのみに基づいて２次元画像データを作成してもよい。２次元画像データ及び３次元画像データは、メインメモリ１６に記憶される。
【００５２】
こうすれば、操作者は、ジェスチャに応じた変更制御によって該操作者が検出できなくなる場合においても、記録すべき撮像範囲を表示部で確認できる。したがって、操作者は、撮像範囲に対する存在位置の制約をうけることなく、撮像装置をジェスチャで制御することができる。
【００５３】
また、撮像装置は、撮像指示があったとき、２つの撮像部をともにジェスチャに応じた変更制御に切り替えて、撮像を行う。こうすれば、視差を有する２つの画像データを取得し、これら画像データを合成することで３次元画像を得ることができる。
【００５４】
撮像制御を行った後で、ジェスチャ検出用撮像部の撮像範囲が操作者を含むように再度、制御される。こうすれば、撮像装置が操作者を認識できなくなることを防止できる。また、操作者は、撮像後に直ぐにジェスチャによって撮像装置をコントロールすることができる。
【００５５】
次に、上述した手順の一部を変形した例を説明する。この例では、認識した複数の被写体に登録画像データとして登録された人物を複数含むか否かを判別する場合を説明する。図５はこの例の手順を示すフローチャートである。図５ではジェスチャを検出する手順以降のフローについては、図４に記載したものと同じであるため、記載せず省略している。
【００５６】
先ず、ステップＳ２１において、画像認識部３１が、画像データに基づいて顔検出を検出する。そして、顔検出で検出された顔画像に基づいて人物を認識する顔認識を行う。その後、ステップＳ２２へ進む。なお、画像データは、２つの撮像部のうちいずれから取得したものでもよい。
【００５７】
ステップＳ２２において、顔認識を行い、検出された被写体の顔画像と予め登録された登録画像データとの一致があったかを判別する。登録画像データと一致する顔画像が１つでもあった場合にはステップＳ２３へ進む。登録画像データと一致する顔画像が１つもなかった場合には、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００５８】
ステップＳ２３において、登録画像データと一致する顔画像が複数であったか否かを判別する。登録画像データと一致する顔画像が複数であった場合には、ステップＳ２４へ進む。登録画像データと一致する顔画像が複数でなかった場合には、ステップＳ２５へ進む。
【００５９】
ステップＳ２４において、複数の被写体に対して操作者とすべき優先順位をつけ、これら複数の被写体のうち、最も操作者とすべき優先順位が高い人物を操作者に設定する。優先順位のつけ方としては、例えば、登録画像データに順位を予め設定する。その後、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００６０】
ステップＳ２５では、ステップＳ２３において登録画像データと一致する顔画像と判別された人物を操作者に設定する。その後、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００６１】
こうすれば、特定の人物のジェスチャのみを検出し、撮像装置を制御することができる。
【００６２】
また、撮像装置は、登録画像データに順位を予め設定することで、最も操作者とすべき優先順位が高い人物のジェスチャを最優先で検出し、この人物が検出できない場合に、次に操作者とすべき優先順位が高い人物のジェスチャを検出し、検出したジェスチャに応じた変更制御を実行してもよい。
【００６３】
次に、上述した手順の一部を変形した例を説明する。図６はこの例の手順を示すフローチャートである。図６では、図４に示したステップＳ１からステップＳ１０と同じ手順を先に行うものであるため、これらの手順については説明せずに省略する。
【００６４】
ステップＳ３１において、図４のステップＳ１１と同じように、撮像指示の後、ジェスチャ検出用撮像部が操作者を検出する動作を行っているか否かを判別する。ジェスチャ検出用撮像部が操作者を検出する動作を行っているか場合には、ステップＳ３２へ進む。ジェスチャ検出用撮像部が操作者を検出する動作を行っていない場合には、ステップＳ３４へ進む。
【００６５】
ステップＳ３２において、本撮像部の撮像範囲で取得された画像データに基づいて、ＡＥ（自動露出制御）、ＡＦ（自動焦点調節）、ＡＷＢ（オートホワイトバランス）のうち少なくとも１つを実行する。その後、撮像を実行するステップへ進む。
【００６６】
ステップＳ３４において、２つの撮像部それぞれの撮像範囲で取得された画像データに基づいて、ＡＥ（自動露出制御）、ＡＦ（自動焦点調節）、ＡＷＢ（オートホワイトバランス）のうち少なくとも１つを実行する。その後、本撮像を実行するステップへ進む。
【００６７】
こうすれば、取得される画像データを最適化することができる。また、ＡＥ、ＡＦ、ＡＷＢの値は、スルー画、撮像制御時の画像データのいずれに適用してもよい。
【００６８】
次に、上述した手順の一部を変形した例を説明する。図７はこの例の手順を示すフローチャートである。図７では、ジェスチャを検出する手順以降のフローについては、図４に記載したものと同じであるため、記載せず省略している。
【００６９】
先ず、ステップＳ４１において、上記例と同様にジェスチャ検出部によって操作者の検出を開始する。そして、ステップＳ４２へ進む。
【００７０】
ステップＳ４２において、顔検出によって検出された顔画像と予め登録された登録画像データと比較し、操作者として認識できるか否かを判別する。操作者として認識できる場合には、ステップＳ４３へ進む。操作者として認識できない場合には、撮像範囲には操作者が含まれていないと判断して、ステップＳ４４へ進む。操作者の認識に用いる画像データは、２つの撮像部のうちいずれで取得されたものでもよい。
【００７１】
ステップＳ４３において、登録画像データと一致する顔画像の人物を操作者に設定する。そして、ジェスチャを検出するステップ（図４のステップＳ２）へ進む。
【００７２】
ステップＳ４４では、ステップＳ４２で検出された被写体には操作者が含まれていないと判断された結果をうけ、現在の撮像範囲で取得した画像データより以前の画像データに操作者が検出されていたかを判別する。この例では、画像データを１コマとしたとき、過去の１００コマから操作者を検出したか否かを判別する。過去の画像データと、操作者の検出の有無とに関する情報は、メインメモリ１６に記録されたものを読み出す。過去の１００コマから操作者を検出した場合には、操作者が撮像範囲から外れたと判断し、ステップＳ４５へ進む。過去の１００コマから操作者を検出できなかった場合には、ステップＳ４２へ戻る。なお、コマ数ではなく、所定時間前から現時点までに撮像された画像データにおける操作者の検出の有無から、操作者が撮像範囲に含まれているか否かを判別してもよい。
【００７３】
ステップＳ４５において、警告動作を実行する。警告動作としてはタリーを点滅させる方法や、表示部２３に表示を行う方法などがある。警告動作は、操作者が検出不可能と判断してから所定時間経過後に行われることが望ましい。
【００７４】
図８は、図７の手順の一部を変形した例を示すフローチャートである。図８はこの例の手順を示すフローチャートである。この例においてステップＳ５１〜Ｓ５４は、図７の手順のステップＳ４１〜Ｓ４４と同じであるため、ここでは説明せずに省略する。
【００７５】
ステップＳ５５では、ステップＳ５４で現在の撮像範囲で取得した画像データより以前の画像データに操作者が検出されていたという判別の結果をうけ、操作者を探すカメラ動作を実行する。操作者を探すカメラ動作は、例えば、撮像範囲変更部によって２つ撮像部のうち少なくとも一方の撮像範囲を変更する。
【００７６】
こうすれば、撮像装置は、撮像範囲に操作者が含まれなくなったと判断したとき場合に、操作者を撮像範囲に含むように制御が行われる。
【００７７】
図９は、上記の手順の一部を変形した例を示すフローチャートである。
【００７８】
先ず、ステップＳ６１において、上述の例の手順と同様に操作者を検出する。そして、ステップＳ６２へ進む。
【００７９】
ステップＳ６２において、取得した画像データから、撮像範囲と認識された操作者との位置関係に応じて、検出した操作者が所定の位置にいるか判別する。画像データは、本撮像部とジェスチャ検出用撮像部とのいずれから取得されたものでもよい。撮像範囲が中央領域と該中央領域を囲むように端部領域が設定されている場合に、該端部領域を所定の位置として設定する。検出した操作者が撮像範囲の端部領域に含まれるときには、ステップＳ６３へ進む。検出した操作者が撮像範囲の中央領域に含まれるときには、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００８０】
ステップＳ６３において、操作者が撮像範囲の中央領域に含まれるように、撮像範囲変更部によって撮像部の撮像範囲を変更する。こうして、変更された撮像範囲に中央領域に操作者が含まれる。
【００８１】
こうすれば、操作者が撮像範囲に含まれなくなることを未然に防ぐことができる。
【００８２】
図１０は、上記の手順の一部を変形した例を示すフローチャートである。図１０では、図４に示したステップＳ１からステップＳ１０と同じ手順を先に行うものであるため、これらの手順については説明せずに省略する。この手順では、前提として、先に撮像指示があったものとする。
【００８３】
ステップ７１において、ジェスチャ検出用撮像部によって操作者を検出する動作が行われているか否かを判別する。ジェスチャ検出用撮像部によって操作者を検出する動作が行われている場合には、ステップＳ７２へ進む。ジェスチャ検出用撮像部によって操作者を検出する動作が行われていない場合には、ステップＳ７６へ進む。
【００８４】
ステップＳ７２において、ジェスチャ検出用撮像部で撮像を行い、画像データを取得し、記録する。その後、ステップＳ７３へ進む。
【００８５】
ステップＳ７３において、撮像制御部３３は、ジェスチャ検出用撮像部の撮像範囲を、本撮像部と同様にジェスチャに応じて変更する制御を行う。その後、ステップＳ７４へ進む。
【００８６】
ステップＳ７４において、２つの撮像部それぞれが、ジェスチャに応じて変更制御された撮像範囲で撮像する。そして、取得された画像データが記録される。その後、ステップＳ７５へ進む。
【００８７】
ステップＳ７５において、撮像制御を行った後で、ジェスチャ検出用撮像部の撮像範囲を操作者が含まれる範囲に変更する。そして、フローを終了する。
【００８８】
ステップＳ７６では、２つの撮像部のそれぞれの撮像範囲がジェスチャに応じた変更制御によって変更されたものであると判断し、撮像制御部３３の撮像制御によって２つの撮像部で撮像を行う。取得された２つ画像データは、それぞれ記録される。そして、フローを終了する。
【００８９】
こうすれば、ジェスチャ検出用撮像部で操作者を検出する動作をおこなっている状態と、２つの撮像部がともにジェスチャに応じて変更制御されている状態とで、それぞれ撮像を行い、画像データを取得、記録でき、撮像時の状況がわかりやすくなる。
【００９０】
次に、本発明の変形例を説明する。
上述の例では、撮像装置は、２つの撮像部のうち一方の撮像部で取得した画像データに基づく画像を表示する表示部を備えた構成としたが、表示部を備えていない構成とすることもできる。撮像装置に通知手段として機能するＬＥＤが設けられていれば、光学ズームを行った場合に２つ撮像部のいずれかの撮像範囲内に操作者が含まれなくなるときに、ＬＥＤを点滅させることで、操作者に撮像部の撮像範囲内に操作者が含まれなくなったことを通知することができる。
【００９１】
ＬＥＤを備えた撮像装置の動作例を説明する。
先ず、上述の例と同様に操作者のジェスチャを検出する。そして、ジェスチャに基づく光学ズームを行った場合に撮像部の撮像範囲内に操作者が含まれなくなるとき、複数の撮像部のうち少なくとも１つで電子ズームを実行して操作者の検出を継続する。このとき、ＬＥＤを点滅させるなどの手段によって、電子ズームを実行していることを操作者に通知する。
【００９２】
撮像装置は、外部表示装置（例えばテレビジョン）と接続可能なインターフェースを備え、撮像部で取得される画像データに基づく画像を、外部表示装置に表示可能であってもよい。複数の撮像部を備え、外部表示装置に接続された撮像装置では、通常時には複数の撮像部それぞれで操作者を撮像し、２つの撮像部のいずれか１つから取得される画像を外部表示装置に表示させることができる。光学ズームを行った場合に撮像部の撮像範囲内に操作者が含まれなくなるときには、２つの撮像部のうち一方の撮像部を電子ズームに切り替えることで操作者を撮像できる状態を維持する。このとき、外部表示装置には、記録される画像を表示させるか、又は、操作者を表示させることができる。例えば、撮像範囲に複数の人物が存在し、そのうち不特定の人物が操作者となる場合には、異なる撮像範囲の２つの撮像部のうち一方の撮像部を操作者のジェスチャを検出する電子ズームに切り換え、電子ズームに切り換えられた撮像部で撮像された画像を外部表示装置に表示させることができる。
【００９３】
本明細書は、以下の事項を開示する。
（１）操作者のジェスチャに応じた撮像を行う撮像装置であって、
所定の撮像範囲の画像データを取得する複数の撮像部と、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を変更する撮像範囲変更部と、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャを検出するジェスチャ検出部と、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部と、を備え、
前記撮像制御部は、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限する撮像装置。
（２）（１）に記載の撮像装置であって、
前記複数の撮像部のうちのいずれか１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を表示する表示部を備え、
前記複数の撮像部のうちの１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像装置。
（３）（１）又は（２）に記載の撮像装置であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像装置。
（４）（１）から（３）のいずれか１つに記載の撮像装置であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像装置。
（５）（１）から（４）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像装置。
（６）（１）から（５）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像装置。
（７）（１）から（６）のいずれか１つに記載の撮像装置であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像装置。
（８）（１）から（７）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像装置。
（９）（１）から（８）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像装置。
（１０）（１）から（９）のいずれか１つに記載の撮像装置であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像装置。
（１１）（１）から（１０）のいずれか１つに記載の撮像装置であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像装置。
（１２）操作者のジェスチャに応じた撮像を行う撮像装置の撮像方法であって、
所定の撮像範囲の画像データを複数の撮像部から取得するステップと、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を撮像範囲変更部によって変更するステップと、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャをジェスチャ検出部によって検出するステップと、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を撮像制御部によって行うステップと、を含み、
前記撮像制御部によって、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの少なくとも１つの撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限し、
前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
（１３）（１２）に記載の撮像方法であって、
前記複数の撮像部のうちの一部の撮像部で取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示部に表示するステップを含み、該ステップでは、前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
（１４）（１２）又は（１３）に記載の撮像方法であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像方法。
（１５）（１２）から（１４）のいずれか１つに記載の撮像方法であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像方法。
（１６）（１２）から（１５）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像方法。
（１７）（１２）から（１６）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像方法。
（１８）（１２）から（１７）のいずれか１つに記載の撮像方法であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像方法。
（１９）（１２）から（１８）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像方法。
（２０）（１２）から（１９）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像方法。
（２１）（１２）から（２０）のいずれか１つに記載の撮像方法であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像方法。
（２２）（１２）から（２１）のいずれか１項に記載の撮像方法であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像方法。
【符号の説明】
【００９４】
１１ システム制御部
３１ 画像認識部
３２ 動作検出部
３３ 撮像制御部
【技術分野】
【０００１】
本発明は、複数の撮像部を備えた撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
従来、撮像装置の撮像範囲に存在している被写体のジェスチャ動作を検出し、所定の撮像動作を自動で行う撮像装置が知られている（特許文献１、２参照）。
【０００３】
特許文献１には、撮像装置の撮像範囲に存在している被写体の顔の表情又はジェスチャを検出し、所定の顔の表情又はジェスチャを検出したときに自動的に撮影処理を行い、取得された撮影画像の記録を行う撮像装置が記載されている。
【０００４】
特許文献２には、予め設定された追尾エリア内において、被写体の位置とその被写体が任意の位置を指し示すジェスチャを検出し、検出した被写体の位置とジェスチャによって指し示された位置とに基づいて、撮影画像から自動的に画像切り出しを行う撮像装置が記載されている。
【０００５】
しかし、特許文献１，２に記載された撮像装置は、撮影対象（記録画像、表示画像等の最終的な出力画像に含まれる対象）である被写体のジェスチャに応じて所定の撮像動作を自動で行うものであり、ジェスチャを検出すべき人物等は、常に撮像装置の撮像範囲内に存在していることを前提としている。
【０００６】
また、特許文献３には、３次元画像の撮像が可能な複数の撮像部を備えた複眼の撮像装置が記載されている。複眼の撮像装置は、２つの撮像部で同一の被写体を撮像し、視差を有する２つの画像データを合成することで立体感のある３次元画像を生成する。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１０−３４６８５号公報
【特許文献２】特開２００７−１５８６８０号公報
【特許文献３】特開２００８−１２９４３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
ところで、操作者の意図的なジェスチャに応じて撮像装置を制御することを想定した場合、操作者が撮像範囲に含まれなくなるような画角での撮像指示も想定されるが、特許文献１、２に記載された撮像装置では、操作者が撮像範囲に含まれなくなる画角での撮像は不可能である。
【０００９】
特許文献３に記載された複眼の撮像装置において、ジェスチャに応じて撮像装置を制御することを想定した場合、複数の撮像部それぞれの撮像範囲は連動しているため、いずれの撮像部の撮像範囲に操作者が存在しない場合には、ジェスチャに応じたコントロールを行うことができない。
【００１０】
本発明は、操作者のジェスチャに応じた制御を行う際に、操作者の存在位置の制約を減少させた撮像装置及び撮像方法を提供する。
【課題を解決するための手段】
【００１１】
操作者のジェスチャに応じた撮像を行う撮像装置であって、
所定の撮像範囲の画像データを取得する複数の撮像部と、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を変更する撮像範囲変更部と、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャを検出するジェスチャ検出部と、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部と、を備え、
前記撮像制御部は、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限する撮像装置。
【００１２】
操作者のジェスチャに応じた撮像を行う撮像装置の撮像方法であって、
所定の撮像範囲の画像データを複数の撮像部から取得するステップと、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を撮像範囲変更部によって変更するステップと、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャをジェスチャ検出部によって検出するステップと、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を撮像制御部によって行うステップと、を含み、
前記撮像制御部によって、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの少なくとも１つの撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限し、
前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
【発明の効果】
【００１３】
本発明によれば、操作者のジェスチャに応じた制御を行う際に、操作者の存在位置の制約を減少させた撮像装置及び撮像方法を提供できる。
【図面の簡単な説明】
【００１４】
【図１】撮像装置の構成を示すブロック図である。
【図２】被写体を撮像している状態を示す図である。
【図３】取得した画像データに基づいて表示された画像の例を示す図である。
【図４】撮像の手順の一例を示すフローチャートである。
【図５】撮像の手順の一例を示すフローチャートである。
【図６】撮像の手順の一例を示すフローチャートである。
【図７】撮像の手順の一例を示すフローチャートである。
【図８】撮像の手順の一例を示すフローチャートである。
【図９】撮像の手順の一例を示すフローチャートである。
【図１０】撮像の手順の一例を示すフローチャートである。
【発明を実施するための形態】
【００１５】
図１は、複数の撮像系を備えた撮像装置の構成を示すブロック図である。なお、撮像装置として２つの撮像部を有するデジタルカメラを例に説明する。
【００１６】
この撮像装置において、２つの撮像部は、水平方向に人間の両眼の間隔以上の距離を隔てて設けられている。２つの撮像部は、右眼撮像系と左眼撮像系とを含む。右眼撮像系にはレンズ群１Ｒと、ＣＣＤ型又はＭＯＳ型の固体撮像素子５Ｒと、この両者の間に設けられた絞り２Ｒと、赤外線カットフィルタ３Ｒと、光学ローパスフィルタ４Ｒとが含まれる。左眼撮像系にはレンズ群１Ｌと、ＣＣＤ型又はＭＯＳ型の固体撮像素子５Ｌと、この両者の間に設けられた絞り２Ｌと、赤外線カットフィルタ３Ｌと、光学ローパスフィルタ４Ｌとが含まれる。撮像装置は、同一被写体を右眼撮像系及び左眼撮像系のそれぞれの視点から撮像可能である。
【００１７】
レンズ群１Ｒ，１Ｌには、それぞれ、ズーム位置を調整するためのズームレンズと、フォーカス位置を調整するためのフォーカスレンズ等が含まれている。このズームレンズとフォーカスレンズは、右眼撮像系と左眼撮像系とで同期して移動するようになっている。また、この撮像装置は、レンズ群１Ｒ，１Ｌは、いずれか一方のみを制御して、ズームレンズやフォーカスレンズを移動させることができる。又は、レンズ群１Ｒ，１Ｌそれぞれのズームレンズやフォーカスレンズを異なる位置となるように制御することができる。
【００１８】
撮像装置の電気制御系全体を統括制御するシステム制御部１１は、所定のプログラムによって動作するプロセッサを主体に構成されている。システム制御部１１は、レンズ駆動部８を制御してレンズ群１Ｒ，１Ｌのフォーカスレンズ位置やズームレンズ位置の調整を行ったり、絞り駆動部９を介し絞り２Ｒ，２Ｌの開口量を制御して露光量調整を行ったりする。
【００１９】
また、システム制御部１１は、撮像素子駆動部１０を介して固体撮像素子５Ｒ，５Ｌを駆動し、レンズ群１Ｒ，１Ｌを通して撮像した被写体画像を撮像信号として出力させる。システム制御部１１には、操作部１４を通してユーザからの指示信号が入力される。
【００２０】
撮像装置の電気制御系は、更に、固体撮像素子５Ｒの出力に接続された相関二重サンプリング処理等のアナログ信号処理を行うアナログ信号処理部６Ｒと、このアナログ信号処理部６Ｒから出力された撮像信号をデジタル信号に変換するＡ／Ｄ変換回路７Ｒと、固体撮像素子５Ｌの出力に接続された相関二重サンプリング処理等のアナログ信号処理を行うアナログ信号処理部６Ｌと、このアナログ信号処理部６Ｌから出力された撮像信号をデジタル信号に変換するＡ／Ｄ変換回路７Ｌとを備え、これらはシステム制御部１１によって制御される。
【００２１】
更に、このデジタルカメラの電気制御系は、メインメモリ１６と、メインメモリ１６に接続されたメモリ制御部１５と、Ａ／Ｄ変換回路７Ｒ，７Ｌから出力される撮像信号にそれぞれ所定のデジタル信号処理（補間演算やガンマ補正演算，ＲＧＢ／ＹＣ変換処理等）を行って画像データを生成するデジタル信号処理部１７と、デジタル信号処理部１７で生成された画像データをＪＰＥＧ形式に圧縮したり圧縮画像データを伸張したりする圧縮伸張処理部１８と、着脱自在の記録媒体２１が接続される外部メモリ制御部２０と、画像データに基づく画像を立体視可能に表示する表示部２３が接続される表示制御部２２とを備え、これらは、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
【００２２】
表示部２３は、撮影済み画像を表示するための画像表示部として利用されるとともに、各種設定時にＧＵＩとして利用される。また、撮影時には、表示部２３に固体撮像素子５Ｒ，５Ｌから取得した画像データがスルー画として連続的に表示され、電子ファインダ等として利用される。
【００２３】
立体視表示の仕組みとしては、表示部２３に表示される立体画像データは、右画像データと左画像データとから構成されている。右画像データ及び左画像データは、細長い短冊形状をしており、交互に並列される。
【００２４】
表示部２３は、表示方式として、例えば時分割視差画像方式を用いる。時分割視差画像方式とは、１つの液晶表示部に右画像データと左画像データを交互に表示すると共に、右画像データを表示したときには、液晶表示部のバックライトからの光を観察者の右目の方向に向けて照射し、左画像データを表示したときには、表示部に内蔵されたバックライトからの光を観察者の左目の方向に向けて照射することで、観察者に立体画像を認識させる方式である。
【００２５】
以下の例では、図１の２つの撮像部を備えた撮像装置の構成を例に説明する。
【００２６】
さらに、撮像装置には、画像認識部３１と、動作検出部３２と、撮像制御部３３と、を備える。画像認識部３１、動作検出部３２、撮像制御部３３は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。画像認識部３１と、動作検出部３２とは、ジェスチャ検出部として機能する。
【００２７】
画像認識部３１は、取得された画像データに基づいて顔画像を検出し、検出した顔画像に基づいて顔認識を行うことで操作者を認識する。
【００２８】
動作検出部３２は、画像認識部３１によって認識された操作者のジェスチャを検出する。撮像装置は、操作者のジェスチャを検出して自動で変更制御を行う。ここで、ジェスチャとは、操作者が行う動作（例えば、手を挙げる等の動作）をいう。ジェスチャには、撮像範囲の変更制御、及び撮像指示に関する所定の制御内容が設定されている。例えば、操作者の手をあげるというジェスチャに、光学ズームを駆動して複数の撮像部それぞれの撮像範囲を変更する制御が設定されている。撮像装置は、撮像範囲に含まれる操作者のジェスチャを検出し、該ジェスチャに応じて制御される。こうして、操作者は、撮像装置の操作部１４から手指等の直接入力を行うことなく、離れた位置から撮像装置に所望の制御を実行させることができる。
【００２９】
撮像制御部３３は、検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び撮像部に対する撮像指示を含む制御を行う。
【００３０】
次に、撮像装置を用いて、撮像を実行する例を説明する。
図２は、図１の撮像装置を用いて、操作者を含む複数の人物を撮像している状態を示している。図２では、４人の人物が存在し、図中矢印で示す人物が操作者である。操作者は撮像装置から離れた位置に立っている。この例では、撮像装置において、操作者が手をあげるジェスチャが検出され、検出したジェスチャに応じて光学ズームを実行する。操作者は、撮像装置の表示部で記録すべき撮像範囲に対応する画像を確認することができる。
【００３１】
図３は、図２の状態の撮像装置の表示部に表示される画像を示している。図３Ａは２つの撮像部のうち一方（ジェスチャ検出用撮像部）で取得された画像データに基づく画像を示している。図３Ｂは２つの撮像部のうち他方（本撮像部）で取得された画像データに基づく画像を示している。
【００３２】
図３Ａに示すように、ジェスチャ検出用撮像部は、その撮像範囲に操作者を含むように制御されている。ジェスチャ検出用撮像部で取得される画像データから操作者のジェスチャを検出することができる。図３Ｂに示すように、本撮像部は、ジェスチャに応じた光学ズームによって撮像範囲が変更制御されている。本撮像部は、ジェスチャに応じた撮像画角で画像データを取得でき、この画像データに基づいて記録すべき撮像範囲に対応する画像を得ることができる。一方で、本撮像部は、変更された撮像範囲に操作者を含まないため、操作者のジェスチャを検出することができない。仮に、操作者のジェスチャに応じて２つの撮像部の撮像範囲を光学ズームで変更制御すると、操作者が撮像範囲に含まれなくなり、その後、撮像装置をコントロールできなくなる。そこで、この撮像装置は、撮像制御部３３が、光学ズームで記録すべき撮像範囲の変更制御に際して、図３Ｂに示すように、光学ズームを制御して本撮像部の撮像範囲をジェスチャに応じて変更させる。また、図３Ａに示すように、撮像装置は、本撮像部の撮像範囲から操作者が含まれなくなる場合は、ジェスチャ検出用撮像部の撮像範囲の変更を操作者が含まれる範囲に制限する。
【００３３】
本撮像部とジェスチャ検出用撮像部それぞれで、異なる撮像範囲を撮像する場合には、本撮像部又はジェスチャ検出用撮像部のいずれかで取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示させる。
【００３４】
以下では、ジェスチャに応じた変更制御としては、画角を光学ズームによって変更する制御である場合を例に説明する。
【００３５】
この例では、光学ズームによって撮像部の撮像画角を変更して撮像部の撮像範囲を変更する手段を撮像範囲変更部とする。撮像範囲変更部は、撮像部の撮像方向を変更するものであってもよい。撮像範囲変更部は、２つの撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して撮像範囲を変更するものである。撮像範囲変更部は、撮像部の撮像方向を変更するものとしては、例えば、撮像装置を保持する雲台の移動を制御する手段、パン・チルト機構を制御する手段、画像データのトリミング処理を行う手段、を用いてもよい。
【００３６】
次に、操作者のジェスチャに応じて、所定の制御や撮像を実行する手順を説明する。以下の説明では、図１で示す撮像装置の構成を例に説明する。
【００３７】
図４は、撮像の手順の一例を示すフローチャートである。なお、以下で参照する図では、ジェスチャ検出用撮像部をジェスチャ用カメラともいう。
この例では、最初に、ステップＳ１において、画像認識部３１が、２つの撮像部のうち一方から取得された画像データから顔画像の検出を行い、検出した顔画像に基づいて顔認識を行う。そして、認識された被写体の人物を操作者として設定する。顔認識は、画像データから検出された顔画像と予め登録された登録画像データとを比較し、両者がどの程度一致するか判断し、一致する場合には顔画像の人物を操作者として認識する。この手順後、ステップＳ２へ進む。なお、２つの撮像部それぞれから取得された画像データで顔検出を用いて行ってもよい。
【００３８】
ステップＳ２において、動作検出部３２が認識された操作者のジェスチャを検出する。ジェスチャは、例えば、画像データにおいて操作者の領域を取得して特徴点を算出し、この特徴点の変化パターンが所定のパターンに一致するか否かに基づいて判別する。そして、ステップＳ３へ進む。
【００３９】
ステップＳ３において、動作検出部３２が、ジェスチャの有無を判別する。ジェスチャを検出した場合には、ジェスチャに予め関連付けられて設定された変更制御を設定し、ステップＳ４へ進む。ここでは、操作者の手を挙げるというジェスチャに予め関連つけられた光学ズームが行われる。一方、ジェスチャを検出しなかった場合にはステップＳ１０へ進む。
【００４０】
ステップＳ４において、撮像制御部３３は、光学ズームの実行によって２つの撮像部の撮像範囲を変更制御したとき、操作者が検出できなくならないかを判別する。操作者の検出が不可能である場合には、ステップＳ５へ進む。操作者の検出が可能である場合には、ステップＳ７へ進む。
【００４１】
ステップＳ５において、ジェスチャ検出用撮像部で操作者が撮像されるか否かを判断する。ジェスチャ検出用撮像部で、操作者を検出可能と判断した場合には、ステップＳ６へ進む。ジェスチャ検出用撮像部で操作者の検出が不可能であると判断した場合には、ステップＳ８へ進む。
【００４２】
ステップＳ６において、２つの撮像部のうち一方をジェスチャ検出用撮像部に設定し、実際にジェスチャ検出用撮像部で撮像を開始する。ジェスチャ検出用撮像部は、その撮像範囲が操作者を含む範囲となるように、撮像制御部３３によって制御される。一方、本撮像部は、ジェスチャによって指示された光学ズームによってその撮像範囲が変更制御される。このとき、表示部には、本撮像部で撮像した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示する。又は、表示部は、ジェスチャ検出用撮像部で撮像した画像データに基づく画像を表示してもよい。その後、ステップＳ１０へ進む。
【００４３】
ステップＳ７では、光学ズームを実行した際に、２つの撮像部のそれぞれの撮像範囲に操作者を含むと判断されたため、撮像制御部３３は、２つの撮像部それぞれの撮像範囲を光学ズームによって変更する。その後、ステップＳ１０へ進む。
【００４４】
ステップＳ８では、ステップＳ５で２つの撮像部のうちいずれの撮像範囲においても操作者が検出不可能と判断した結果をうけ、警告動作を実行する。警告動作としてはタリーを点滅させる方法や、表示部２３に表示を行う方法などがある。
【００４５】
ステップＳ１０において、撮像指示が行われた否かを判別する。撮像指示は、操作者がジェスチャによって行ってもよく、他の人物が撮像装置の操作部１４に直接入力したものであってもよい。撮像指示がある場合には、Ｓ１１へ進む。撮像指示がない場合には、ステップＳ１へ戻って、上記手順を繰り返す。
【００４６】
ステップＳ１１において、ジェスチャ検出用撮像部が本撮像部とは異なる撮像範囲で撮像して、操作者を検出する動作が設定されている状態であるか否かを判別する。ジェスチャ検出用撮像部が操作者を検出する動作を行っている場合には、ステップＳ１２へ進む。ジェスチャ検出用撮像部が操作者を検出する動作を行っていない場合には、ステップＳ１５へ進む。
【００４７】
ステップＳ１２において、撮像制御部３３は、ジェスチャ検出用撮像部による操作者を検出する動作を一時的に中断し、該ジェスチャ検出用撮像部の撮像範囲を、本撮像部と同じようにジェスチャに応じて変更制御された撮像範囲に切り換える。このとき、ジェスチャ検出用撮像部は、本撮像部と同じ動作状態、つまり、光学ズームによって撮像範囲が変更されている状態になる。また、中断されたジェスチャ検出用撮像部の動作状態を示すデータがメインメモリ１６に記録される。そして、ステップＳ１３へ進む。
【００４８】
ステップＳ１３において、記録のための画像データを取得する撮像制御が実行される。このとき、ジェスチャに応じて、変更制御された撮像範囲で２つの撮像部それぞれから画像データが取得される。取得された画像データに基づく画像は、２つの撮像部の配置に基づく視差を含む。取得した画像データをメインメモリ１６に記録する動作である。この手順の後、ステップＳ１４へ進む。
【００４９】
ステップＳ１４において、撮像制御を行った後で、ジェスチャ検出用撮像部の撮像範囲を操作者が含まれる範囲に変更する。このとき、撮像制御部３３は、メインメモリ１６から先のジェスチャ検出用撮像部の動作状態を示すデータを読み出し、ジェスチャ検出用撮像部の撮像範囲を、撮像制御に切り換える直前の撮像範囲（つまり、操作者を含むように制限された撮像範囲）に戻す制御を行う。本撮像部及びジェスチャ検出用撮像部のうちの１つの撮像部で取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示部２３に表示させる。その後、フローを終了する。
【００５０】
ステップＳ１５では、２つの撮像部は、いずれもジェスチャ検出用撮像部に設定されていないとする判断をうけ、特に２つの撮像部の撮像範囲を変更することなく、撮像を実行する。２つの撮像部それぞれから画像データを取得し、メインメモリ１６に記録する。その後、フローを終了する。
【００５１】
撮像装置は、取得した画像データを合成して３次元画像データを作成する。また、撮像装置は、取得した１つの画像データのみに基づいて２次元画像データを作成してもよい。２次元画像データ及び３次元画像データは、メインメモリ１６に記憶される。
【００５２】
こうすれば、操作者は、ジェスチャに応じた変更制御によって該操作者が検出できなくなる場合においても、記録すべき撮像範囲を表示部で確認できる。したがって、操作者は、撮像範囲に対する存在位置の制約をうけることなく、撮像装置をジェスチャで制御することができる。
【００５３】
また、撮像装置は、撮像指示があったとき、２つの撮像部をともにジェスチャに応じた変更制御に切り替えて、撮像を行う。こうすれば、視差を有する２つの画像データを取得し、これら画像データを合成することで３次元画像を得ることができる。
【００５４】
撮像制御を行った後で、ジェスチャ検出用撮像部の撮像範囲が操作者を含むように再度、制御される。こうすれば、撮像装置が操作者を認識できなくなることを防止できる。また、操作者は、撮像後に直ぐにジェスチャによって撮像装置をコントロールすることができる。
【００５５】
次に、上述した手順の一部を変形した例を説明する。この例では、認識した複数の被写体に登録画像データとして登録された人物を複数含むか否かを判別する場合を説明する。図５はこの例の手順を示すフローチャートである。図５ではジェスチャを検出する手順以降のフローについては、図４に記載したものと同じであるため、記載せず省略している。
【００５６】
先ず、ステップＳ２１において、画像認識部３１が、画像データに基づいて顔検出を検出する。そして、顔検出で検出された顔画像に基づいて人物を認識する顔認識を行う。その後、ステップＳ２２へ進む。なお、画像データは、２つの撮像部のうちいずれから取得したものでもよい。
【００５７】
ステップＳ２２において、顔認識を行い、検出された被写体の顔画像と予め登録された登録画像データとの一致があったかを判別する。登録画像データと一致する顔画像が１つでもあった場合にはステップＳ２３へ進む。登録画像データと一致する顔画像が１つもなかった場合には、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００５８】
ステップＳ２３において、登録画像データと一致する顔画像が複数であったか否かを判別する。登録画像データと一致する顔画像が複数であった場合には、ステップＳ２４へ進む。登録画像データと一致する顔画像が複数でなかった場合には、ステップＳ２５へ進む。
【００５９】
ステップＳ２４において、複数の被写体に対して操作者とすべき優先順位をつけ、これら複数の被写体のうち、最も操作者とすべき優先順位が高い人物を操作者に設定する。優先順位のつけ方としては、例えば、登録画像データに順位を予め設定する。その後、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００６０】
ステップＳ２５では、ステップＳ２３において登録画像データと一致する顔画像と判別された人物を操作者に設定する。その後、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００６１】
こうすれば、特定の人物のジェスチャのみを検出し、撮像装置を制御することができる。
【００６２】
また、撮像装置は、登録画像データに順位を予め設定することで、最も操作者とすべき優先順位が高い人物のジェスチャを最優先で検出し、この人物が検出できない場合に、次に操作者とすべき優先順位が高い人物のジェスチャを検出し、検出したジェスチャに応じた変更制御を実行してもよい。
【００６３】
次に、上述した手順の一部を変形した例を説明する。図６はこの例の手順を示すフローチャートである。図６では、図４に示したステップＳ１からステップＳ１０と同じ手順を先に行うものであるため、これらの手順については説明せずに省略する。
【００６４】
ステップＳ３１において、図４のステップＳ１１と同じように、撮像指示の後、ジェスチャ検出用撮像部が操作者を検出する動作を行っているか否かを判別する。ジェスチャ検出用撮像部が操作者を検出する動作を行っているか場合には、ステップＳ３２へ進む。ジェスチャ検出用撮像部が操作者を検出する動作を行っていない場合には、ステップＳ３４へ進む。
【００６５】
ステップＳ３２において、本撮像部の撮像範囲で取得された画像データに基づいて、ＡＥ（自動露出制御）、ＡＦ（自動焦点調節）、ＡＷＢ（オートホワイトバランス）のうち少なくとも１つを実行する。その後、撮像を実行するステップへ進む。
【００６６】
ステップＳ３４において、２つの撮像部それぞれの撮像範囲で取得された画像データに基づいて、ＡＥ（自動露出制御）、ＡＦ（自動焦点調節）、ＡＷＢ（オートホワイトバランス）のうち少なくとも１つを実行する。その後、本撮像を実行するステップへ進む。
【００６７】
こうすれば、取得される画像データを最適化することができる。また、ＡＥ、ＡＦ、ＡＷＢの値は、スルー画、撮像制御時の画像データのいずれに適用してもよい。
【００６８】
次に、上述した手順の一部を変形した例を説明する。図７はこの例の手順を示すフローチャートである。図７では、ジェスチャを検出する手順以降のフローについては、図４に記載したものと同じであるため、記載せず省略している。
【００６９】
先ず、ステップＳ４１において、上記例と同様にジェスチャ検出部によって操作者の検出を開始する。そして、ステップＳ４２へ進む。
【００７０】
ステップＳ４２において、顔検出によって検出された顔画像と予め登録された登録画像データと比較し、操作者として認識できるか否かを判別する。操作者として認識できる場合には、ステップＳ４３へ進む。操作者として認識できない場合には、撮像範囲には操作者が含まれていないと判断して、ステップＳ４４へ進む。操作者の認識に用いる画像データは、２つの撮像部のうちいずれで取得されたものでもよい。
【００７１】
ステップＳ４３において、登録画像データと一致する顔画像の人物を操作者に設定する。そして、ジェスチャを検出するステップ（図４のステップＳ２）へ進む。
【００７２】
ステップＳ４４では、ステップＳ４２で検出された被写体には操作者が含まれていないと判断された結果をうけ、現在の撮像範囲で取得した画像データより以前の画像データに操作者が検出されていたかを判別する。この例では、画像データを１コマとしたとき、過去の１００コマから操作者を検出したか否かを判別する。過去の画像データと、操作者の検出の有無とに関する情報は、メインメモリ１６に記録されたものを読み出す。過去の１００コマから操作者を検出した場合には、操作者が撮像範囲から外れたと判断し、ステップＳ４５へ進む。過去の１００コマから操作者を検出できなかった場合には、ステップＳ４２へ戻る。なお、コマ数ではなく、所定時間前から現時点までに撮像された画像データにおける操作者の検出の有無から、操作者が撮像範囲に含まれているか否かを判別してもよい。
【００７３】
ステップＳ４５において、警告動作を実行する。警告動作としてはタリーを点滅させる方法や、表示部２３に表示を行う方法などがある。警告動作は、操作者が検出不可能と判断してから所定時間経過後に行われることが望ましい。
【００７４】
図８は、図７の手順の一部を変形した例を示すフローチャートである。図８はこの例の手順を示すフローチャートである。この例においてステップＳ５１〜Ｓ５４は、図７の手順のステップＳ４１〜Ｓ４４と同じであるため、ここでは説明せずに省略する。
【００７５】
ステップＳ５５では、ステップＳ５４で現在の撮像範囲で取得した画像データより以前の画像データに操作者が検出されていたという判別の結果をうけ、操作者を探すカメラ動作を実行する。操作者を探すカメラ動作は、例えば、撮像範囲変更部によって２つ撮像部のうち少なくとも一方の撮像範囲を変更する。
【００７６】
こうすれば、撮像装置は、撮像範囲に操作者が含まれなくなったと判断したとき場合に、操作者を撮像範囲に含むように制御が行われる。
【００７７】
図９は、上記の手順の一部を変形した例を示すフローチャートである。
【００７８】
先ず、ステップＳ６１において、上述の例の手順と同様に操作者を検出する。そして、ステップＳ６２へ進む。
【００７９】
ステップＳ６２において、取得した画像データから、撮像範囲と認識された操作者との位置関係に応じて、検出した操作者が所定の位置にいるか判別する。画像データは、本撮像部とジェスチャ検出用撮像部とのいずれから取得されたものでもよい。撮像範囲が中央領域と該中央領域を囲むように端部領域が設定されている場合に、該端部領域を所定の位置として設定する。検出した操作者が撮像範囲の端部領域に含まれるときには、ステップＳ６３へ進む。検出した操作者が撮像範囲の中央領域に含まれるときには、ジェスチャを検出する手順（図４のステップＳ３参照）へ進む。
【００８０】
ステップＳ６３において、操作者が撮像範囲の中央領域に含まれるように、撮像範囲変更部によって撮像部の撮像範囲を変更する。こうして、変更された撮像範囲に中央領域に操作者が含まれる。
【００８１】
こうすれば、操作者が撮像範囲に含まれなくなることを未然に防ぐことができる。
【００８２】
図１０は、上記の手順の一部を変形した例を示すフローチャートである。図１０では、図４に示したステップＳ１からステップＳ１０と同じ手順を先に行うものであるため、これらの手順については説明せずに省略する。この手順では、前提として、先に撮像指示があったものとする。
【００８３】
ステップ７１において、ジェスチャ検出用撮像部によって操作者を検出する動作が行われているか否かを判別する。ジェスチャ検出用撮像部によって操作者を検出する動作が行われている場合には、ステップＳ７２へ進む。ジェスチャ検出用撮像部によって操作者を検出する動作が行われていない場合には、ステップＳ７６へ進む。
【００８４】
ステップＳ７２において、ジェスチャ検出用撮像部で撮像を行い、画像データを取得し、記録する。その後、ステップＳ７３へ進む。
【００８５】
ステップＳ７３において、撮像制御部３３は、ジェスチャ検出用撮像部の撮像範囲を、本撮像部と同様にジェスチャに応じて変更する制御を行う。その後、ステップＳ７４へ進む。
【００８６】
ステップＳ７４において、２つの撮像部それぞれが、ジェスチャに応じて変更制御された撮像範囲で撮像する。そして、取得された画像データが記録される。その後、ステップＳ７５へ進む。
【００８７】
ステップＳ７５において、撮像制御を行った後で、ジェスチャ検出用撮像部の撮像範囲を操作者が含まれる範囲に変更する。そして、フローを終了する。
【００８８】
ステップＳ７６では、２つの撮像部のそれぞれの撮像範囲がジェスチャに応じた変更制御によって変更されたものであると判断し、撮像制御部３３の撮像制御によって２つの撮像部で撮像を行う。取得された２つ画像データは、それぞれ記録される。そして、フローを終了する。
【００８９】
こうすれば、ジェスチャ検出用撮像部で操作者を検出する動作をおこなっている状態と、２つの撮像部がともにジェスチャに応じて変更制御されている状態とで、それぞれ撮像を行い、画像データを取得、記録でき、撮像時の状況がわかりやすくなる。
【００９０】
次に、本発明の変形例を説明する。
上述の例では、撮像装置は、２つの撮像部のうち一方の撮像部で取得した画像データに基づく画像を表示する表示部を備えた構成としたが、表示部を備えていない構成とすることもできる。撮像装置に通知手段として機能するＬＥＤが設けられていれば、光学ズームを行った場合に２つ撮像部のいずれかの撮像範囲内に操作者が含まれなくなるときに、ＬＥＤを点滅させることで、操作者に撮像部の撮像範囲内に操作者が含まれなくなったことを通知することができる。
【００９１】
ＬＥＤを備えた撮像装置の動作例を説明する。
先ず、上述の例と同様に操作者のジェスチャを検出する。そして、ジェスチャに基づく光学ズームを行った場合に撮像部の撮像範囲内に操作者が含まれなくなるとき、複数の撮像部のうち少なくとも１つで電子ズームを実行して操作者の検出を継続する。このとき、ＬＥＤを点滅させるなどの手段によって、電子ズームを実行していることを操作者に通知する。
【００９２】
撮像装置は、外部表示装置（例えばテレビジョン）と接続可能なインターフェースを備え、撮像部で取得される画像データに基づく画像を、外部表示装置に表示可能であってもよい。複数の撮像部を備え、外部表示装置に接続された撮像装置では、通常時には複数の撮像部それぞれで操作者を撮像し、２つの撮像部のいずれか１つから取得される画像を外部表示装置に表示させることができる。光学ズームを行った場合に撮像部の撮像範囲内に操作者が含まれなくなるときには、２つの撮像部のうち一方の撮像部を電子ズームに切り替えることで操作者を撮像できる状態を維持する。このとき、外部表示装置には、記録される画像を表示させるか、又は、操作者を表示させることができる。例えば、撮像範囲に複数の人物が存在し、そのうち不特定の人物が操作者となる場合には、異なる撮像範囲の２つの撮像部のうち一方の撮像部を操作者のジェスチャを検出する電子ズームに切り換え、電子ズームに切り換えられた撮像部で撮像された画像を外部表示装置に表示させることができる。
【００９３】
本明細書は、以下の事項を開示する。
（１）操作者のジェスチャに応じた撮像を行う撮像装置であって、
所定の撮像範囲の画像データを取得する複数の撮像部と、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を変更する撮像範囲変更部と、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャを検出するジェスチャ検出部と、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部と、を備え、
前記撮像制御部は、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限する撮像装置。
（２）（１）に記載の撮像装置であって、
前記複数の撮像部のうちのいずれか１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を表示する表示部を備え、
前記複数の撮像部のうちの１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像装置。
（３）（１）又は（２）に記載の撮像装置であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像装置。
（４）（１）から（３）のいずれか１つに記載の撮像装置であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像装置。
（５）（１）から（４）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像装置。
（６）（１）から（５）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像装置。
（７）（１）から（６）のいずれか１つに記載の撮像装置であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像装置。
（８）（１）から（７）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像装置。
（９）（１）から（８）のいずれか１つに記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像装置。
（１０）（１）から（９）のいずれか１つに記載の撮像装置であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像装置。
（１１）（１）から（１０）のいずれか１つに記載の撮像装置であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像装置。
（１２）操作者のジェスチャに応じた撮像を行う撮像装置の撮像方法であって、
所定の撮像範囲の画像データを複数の撮像部から取得するステップと、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を撮像範囲変更部によって変更するステップと、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャをジェスチャ検出部によって検出するステップと、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を撮像制御部によって行うステップと、を含み、
前記撮像制御部によって、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの少なくとも１つの撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限し、
前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
（１３）（１２）に記載の撮像方法であって、
前記複数の撮像部のうちの一部の撮像部で取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示部に表示するステップを含み、該ステップでは、前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
（１４）（１２）又は（１３）に記載の撮像方法であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像方法。
（１５）（１２）から（１４）のいずれか１つに記載の撮像方法であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像方法。
（１６）（１２）から（１５）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像方法。
（１７）（１２）から（１６）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像方法。
（１８）（１２）から（１７）のいずれか１つに記載の撮像方法であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像方法。
（１９）（１２）から（１８）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像方法。
（２０）（１２）から（１９）のいずれか１つに記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像方法。
（２１）（１２）から（２０）のいずれか１つに記載の撮像方法であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像方法。
（２２）（１２）から（２１）のいずれか１項に記載の撮像方法であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像方法。
【符号の説明】
【００９４】
１１ システム制御部
３１ 画像認識部
３２ 動作検出部
３３ 撮像制御部
【特許請求の範囲】
【請求項１】
操作者のジェスチャに応じた撮像を行う撮像装置であって、
所定の撮像範囲の画像データを取得する複数の撮像部と、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を変更する撮像範囲変更部と、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャを検出するジェスチャ検出部と、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部と、を備え、
前記撮像制御部は、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限する撮像装置。
【請求項２】
請求項１に記載の撮像装置であって、
前記複数の撮像部のうちのいずれか１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を表示する表示部を備え、
前記複数の撮像部のうちの１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像装置。
【請求項３】
請求項１又は２に記載の撮像装置であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像装置。
【請求項４】
請求項１から３のいずれか１項に記載の撮像装置であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像装置。
【請求項５】
請求項１から４のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像装置。
【請求項６】
請求項１から５のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像装置。
【請求項７】
請求項１から６のいずれか１項に記載の撮像装置であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像装置。
【請求項８】
請求項１から７のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像装置。
【請求項９】
請求項１から８のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像装置。
【請求項１０】
請求項１から９のいずれか１項に記載の撮像装置であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像装置。
【請求項１１】
請求項１から１０のいずれか１項に記載の撮像装置であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像装置。
【請求項１２】
操作者のジェスチャに応じた撮像を行う撮像装置の撮像方法であって、
所定の撮像範囲の画像データを複数の撮像部から取得するステップと、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を撮像範囲変更部によって変更するステップと、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャをジェスチャ検出部によって検出するステップと、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を撮像制御部によって行うステップと、を含み、
前記撮像制御部によって、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの少なくとも１つの撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限し、
前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
【請求項１３】
請求項１２に記載の撮像方法であって、
前記複数の撮像部のうちの一部の撮像部で取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示部に表示するステップを含み、該ステップでは、前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
【請求項１４】
請求項１２又は１３に記載の撮像方法であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像方法。
【請求項１５】
請求項１２から１４のいずれか１項に記載の撮像方法であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像方法。
【請求項１６】
請求項１２から１５のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像方法。
【請求項１７】
請求項１２から１６のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像方法。
【請求項１８】
請求項１２から１７のいずれか１項に記載の撮像方法であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像方法。
【請求項１９】
請求項１２から１８のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像方法。
【請求項２０】
請求項１２から１９のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像方法。
【請求項２１】
請求項１２から２０のいずれか１項に記載の撮像方法であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像方法。
【請求項２２】
請求項１２から２１のいずれか１項に記載の撮像方法であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像方法。
【請求項１】
操作者のジェスチャに応じた撮像を行う撮像装置であって、
所定の撮像範囲の画像データを取得する複数の撮像部と、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を変更する撮像範囲変更部と、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャを検出するジェスチャ検出部と、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を行う撮像制御部と、を備え、
前記撮像制御部は、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの一部の撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限する撮像装置。
【請求項２】
請求項１に記載の撮像装置であって、
前記複数の撮像部のうちのいずれか１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を表示する表示部を備え、
前記複数の撮像部のうちの１つの撮像部で取得した前記画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像装置。
【請求項３】
請求項１又は２に記載の撮像装置であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像装置。
【請求項４】
請求項１から３のいずれか１項に記載の撮像装置であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像装置。
【請求項５】
請求項１から４のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像装置。
【請求項６】
請求項１から５のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像装置。
【請求項７】
請求項１から６のいずれか１項に記載の撮像装置であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像装置。
【請求項８】
請求項１から７のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像装置。
【請求項９】
請求項１から８のいずれか１項に記載の撮像装置であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像装置。
【請求項１０】
請求項１から９のいずれか１項に記載の撮像装置であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像装置。
【請求項１１】
請求項１から１０のいずれか１項に記載の撮像装置であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像装置。
【請求項１２】
操作者のジェスチャに応じた撮像を行う撮像装置の撮像方法であって、
所定の撮像範囲の画像データを複数の撮像部から取得するステップと、
前記複数の撮像部のそれぞれの撮像方向と撮像画角の少なくとも一方を個別に変更して前記撮像範囲を撮像範囲変更部によって変更するステップと、
前記複数の撮像部のうちのいずれか１つの撮像部が取得した前記画像データから、前記操作者のジェスチャをジェスチャ検出部によって検出するステップと、
検出されたジェスチャに応じて、記録すべき撮像範囲の変更制御、及び前記複数の撮像部に対する撮影指示を含む撮像制御を撮像制御部によって行うステップと、を含み、
前記撮像制御部によって、前記記録すべき撮像範囲の変更制御に際して、前記撮影範囲変更手段を制御して、前記複数の撮像部のうちの少なくとも１つの撮像部である本撮像部の撮影範囲を、前記ジェスチャ検出部で検出したジェスチャに応じて変更させるとともに、前記本撮像部の撮像範囲から前記操作者が含まれなくなる場合は、当該本撮像部以外の撮像部の撮像範囲の変更を前記操作者が含まれる範囲に制限し、
前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
【請求項１３】
請求項１２に記載の撮像方法であって、
前記複数の撮像部のうちの一部の撮像部で取得した画像データに基づいて、記録すべき撮像範囲に対応する画像を表示部に表示するステップを含み、該ステップでは、前記本撮像部のうちの１つの撮像部で取得した画像データに基づいて、前記記録すべき撮像範囲に対応する画像を前記表示部に表示させる撮像方法。
【請求項１４】
請求項１２又は１３に記載の撮像方法であって、
前記撮像制御部は、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記撮像制御を行う撮像方法。
【請求項１５】
請求項１２から１４のいずれか１項に記載の撮像方法であって、
前記撮像制御部は、前記撮像制御を行った後で、前記本撮像部以外の前記撮像部の撮像範囲を前記操作者が含まれる範囲に変更する撮像方法。
【請求項１６】
請求項１２から１５のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データに顔検出及び顔認識を行うことで前記操作者を決定する撮像方法。
【請求項１７】
請求項１２から１６のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部は、取得した前記画像データから複数の被写体を検出し、前記複数の被写体と予め登録された登録画像データとを比較して前記操作者とすべき優先順位を決定し、該優先順位に基づいて前記操作者を設定する撮像方法。
【請求項１８】
請求項１２から１７のいずれか１項に記載の撮像方法であって、
前記本撮像部で取得された前記画像データに基づいて、自動露出制御、自動焦点調節、オートホワイトバランスのうち少なくとも１つを行う撮像方法。
【請求項１９】
請求項１２から１８のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、警告を行う撮像方法。
【請求項２０】
請求項１２から１９のいずれか１項に記載の撮像方法であって、
前記ジェスチャ検出部において前記画像データから前記操作者が検出されない場合に、前記本撮像部以外の撮像部の前記撮像範囲を変更する撮像方法。
【請求項２１】
請求項１２から２０のいずれか１項に記載の撮像方法であって、
取得した前記画像データから、撮像範囲と認識された前記操作者との位置関係に応じて、前記撮像範囲を変更する撮像方法。
【請求項２２】
請求項１２から２１のいずれか１項に記載の撮像方法であって、
前記撮像制御部は、撮像指示に応じて、前記本撮像部及び前記本撮像部以外の撮像部のみによる撮像と、前記本撮像部以外の前記撮像部の撮像範囲を前記ジェスチャに応じて変更して前記複数の撮像部で行う撮像と、を制御する撮像方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１２−１５６６１（Ｐ２０１２−１５６６１Ａ）
【公開日】平成２４年１月１９日（２０１２．１．１９）
【国際特許分類】
【出願番号】特願２０１０−１４８３８９（Ｐ２０１０−１４８３８９）
【出願日】平成２２年６月２９日（２０１０．６．２９）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２４年１月１９日（２０１２．１．１９）
【国際特許分類】
【出願日】平成２２年６月２９日（２０１０．６．２９）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]