複眼撮像装置及びその撮影方法
【課題】パノラマ画像とパノラマ画像中の主要被写体のズームアップ画像とを同時に撮影する。
【解決手段】本撮影でスイングされたとき所定時間間隔で被写体画像を撮影する第１の撮像部と、スイングされている最中に被写体画像の中の主要被写体のズームアップ画像を撮影する第２の撮像部とを備え、本撮影時に第１の撮像部が撮像した複数の連続する被写体画像を合成してパノラマ画像を生成する複眼撮像装置であって、本撮影の直前の準備段階でスイングされたときに撮影された被写体画像から主要被写体の位置を求め、該位置から本撮影が行われるときの主要被写体の位置を予測し（Ｓ５）、該予測位置に基づいて第２の撮像部を制御し主要被写体のズームアップ画像を撮影させる（Ｓ９）。
【解決手段】本撮影でスイングされたとき所定時間間隔で被写体画像を撮影する第１の撮像部と、スイングされている最中に被写体画像の中の主要被写体のズームアップ画像を撮影する第２の撮像部とを備え、本撮影時に第１の撮像部が撮像した複数の連続する被写体画像を合成してパノラマ画像を生成する複眼撮像装置であって、本撮影の直前の準備段階でスイングされたときに撮影された被写体画像から主要被写体の位置を求め、該位置から本撮影が行われるときの主要被写体の位置を予測し（Ｓ５）、該予測位置に基づいて第２の撮像部を制御し主要被写体のズームアップ画像を撮影させる（Ｓ９）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複眼撮像装置及びその撮影方法に係り、特に、複眼撮像装置を手持ちでスイングさせ一つの撮影部でパノラマ画像を撮影すると共に同時に別の撮影部でパノラマ画像中の主要被写体の高解像度画像（ズームアップ画像）を撮影する撮影方法に関する。
【背景技術】
【０００２】
並列に設けられた２台の撮像部を持つステレオカメラが市販されるようになり、誰でも手軽に被写体の立体画像を撮影できる様になってきている。この様な複数の撮像部を備える複眼撮像装置が普及すると、１つの撮像部でパノラマ画像を撮影し、別の撮像部でパノラマ画像中の主要被写体のズームアップ画像を撮影したいという要望が出てくる。
【０００３】
広角画像とズームアップ画像とを両方撮影できるカメラとして、例えば下記の特許文献１，２に記載のものが知られている。特許文献１記載のカメラは、監視カメラであり、全周囲画像を撮影できる全方位カメラとズームアップカメラとを連動させ、全周囲画像中に動体が存在したときその動体のズームアップ画像を撮影できるようにしている。
【０００４】
特許文献２記載のテレビ会議用のカメラも、広角画像撮影用のカメラとズームアップカメラとを備え、広角画像中の任意被写体を遠隔操作によりズームアップカメラで撮影できる様にしている。
【０００５】
しかしながら、特許文献１，２に記載のカメラは、広角画像を撮影するカメラは固定設置されたカメラであるため、広角画像中の主要被写体の位置の算出を容易に行うことができ、この主要被写体をズームアップすることも容易である。
【０００６】
一方、手持ち可能な携帯型の複眼撮像装置で撮影を行う場合、複眼撮像装置を固定して撮影したのでは、複数の撮像部のうちの１つの撮像部で広角画像（パノラマ画像）を撮影することはできない。
【０００７】
パノラマ画像を撮影するには、複眼撮像装置をユーザが手で持ってスイングさせ、このスイング中に複数枚の連続画像を取得し、これらを貼り合わせることでパノラマ画像を得ることができる。
【０００８】
この様にしてパノラマ画像を撮影するときに、パノラマ画像中の主要被写体のズームアップ画像を他の撮像部で撮影するのであるが、パノラマ画像中の主要被写体の位置を算出するのはスイング中であるため、ズームアップ用の撮像部による主要被写体の撮影（ズーム動作やＡＦ動作）が間に合わない。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００７―３６７５６号公報
【特許文献２】特開２０００―３２３１９号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
本発明の目的は、携帯型の複眼撮像装置をスイング（水平方向に回転）させて１つの撮像部でパノラマ画像を撮影し、別の撮像部でパノラマ画像中の主要被写体のズームアップ画像を撮影できる撮影方法及びこの撮影方法を実施する複眼撮像装置を提供することにある。
【課題を解決するための手段】
【００１１】
本発明の複眼撮像装置は、第１の撮像部及び第２の撮像部と、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させる制御手段と、
前記本撮影時に前記第１の撮像部が撮像した複数枚の連続する画像を合成してパノラマ画像を生成するパノラマ画像合成手段と
を備えることを特徴とする。
【００１２】
本発明の複眼撮像装置の撮影方法は、第１の撮像部及び第２の撮像部を備え、いずれか一方の撮像部が撮影した連続する複数枚の画像を合成してパノラマ画像を生成する複眼撮像装置の撮影方法であって、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させることを特徴とする。
【発明の効果】
【００１３】
本発明によれば、パノラマ画像と該パノラマ画像中の主要被写体のズームアップ画像との両方を同時に撮影することが可能となる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施形態に係る複眼撮像装置の外観斜視図である。
【図２】図１に示す複眼撮像装置の機能ブロック図である。
【図３】本発明の一実施形態に係る撮影方法の処理手順を示すフローチャートである。
【図４】パノラマ画像撮影用のスイング撮影の説明図である。
【図５】図４のスイング撮影された一連の画像を例示する図である。
【図６】図５に示す各画像中の主要被写体の座標位置を示す図である。
【図７】図５に示す主要被写体の顔のズームアップ画像である。
【図８】スイング撮影を行うときのガイド表示の一例を示す図である。
【図９】本発明の別実施形態の説明図である。
【図１０】本発明の更に別実施形態の撮影方法の処理手順を示すフローチャートである。
【図１１】本発明の更に別実施形態の説明図である。
【図１２】図１１の実施形態で撮影された主要被写体のクローズアップ画像を示す図である。
【図１３】本発明の更に別実施形態の説明図である。
【図１４】本発明の更に別実施形態の撮影方法の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下、本発明の一実施形態について、図面を参照して説明する。
【００１６】
図１は、複眼撮像装置（本実施形態ではステレオカメラ）の外観斜視図である。このステレオカメラ１０は、箱状のハウジング１１と、ハウジング１１の前部に並んで設けられた右眼用の撮像部１２Ｒ及び左眼用の撮像部１２Ｌと、ハウジング１１の前面左肩部に設けられたフラッシュライト１３と、ハウジング１１の上面の適宜箇所に設けられた電源スイッチ１４，シャッタボタン１５，モード選択ダイヤル１６とを備える。
【００１７】
ハウジング１１の背面側には、図２に示す液晶表示画面（モニタ）２９を備え、スルー画像やモード選択画面，メニュー画面，後述のガイド表示等が表示される。
【００１８】
撮像部１２Ｒは前部に撮影レンズ２１Ｒを備え、撮像部１２Ｌは前部に撮影レンズ２１Ｌを備える。撮影レンズ２１Ｒの光軸２２Ｒと、撮影レンズ２１Ｌの光軸２２Ｌとが交差する角度を輻輳角といい、輻輳角が目標値となるように各撮像部１２Ｒ，１２Ｌの向く方向を制御するアクチュエータ（後述のレンズ制御部３０Ｌ，３０Ｒ）がステレオカメラ１０に内蔵されている。
【００１９】
撮影レンズ２１Ｒ，２１Ｌは、夫々独立に焦点位置合わせ，ズーム倍率が調整可能となっているが、ステレオ撮影モード時には、これら撮影レンズ２１Ｒ，２１Ｌは、上記のアクチュエータによって連動制御され、被写体の立体画像が撮影できる様になっている。
【００２０】
以下、本実施形態では、立体画像ではなく、撮影レンズ２１Ｌを通して被写体のパノラマ画像を撮影し、撮影レンズ２１Ｒを通してパノラマ画像中の主要被写体のズームアップ画像を撮影するときの撮影方法について説明する。
【００２１】
図２は、図１に示すステレオカメラ１０の内部機能図である。撮影レンズ２１Ｌの背部には固体撮像素子２３Ｌが配置され、撮影レンズ２１Ｒの背部には固体撮像素子２３Ｒが配置される。固体撮像素子２３Ｌ，２３Ｒの各出力信号は夫々ＡＦＥ（アナログフロントエンド）回路２４Ｌ，２４Ｒに接続され、ＡＦＥ回路２４Ｌ，２４Ｒの出力はバス２５に接続される。
【００２２】
バス２５には、ＣＰＵ（システム制御部）２６と、メモリ２７と、角速度センサ２８と、液晶表示画面２９とが接続されている。ＣＰＵ２６は、オフセット処理やガンマ補正処理，ＲＧＢ／ＹＣ変換処理，同時化処理等の周知の画像処理を行うＤＳＰ（デジタルシグナルプロセッサ）機能を内蔵すると共に、時計機能２６ａを内蔵している。
【００２３】
ＣＰＵ２６には、レンズ制御部３０Ｌ，３０Ｒが接続され、レンズ制御部３０Ｌは、ＣＰＵ２６からの指示により撮影レンズ２１Ｌの焦点位置制御，ズーム倍率制御，光軸２２Ｌの向きの制御を行い、レンズ制御部３０Ｒは、ＣＰＵ２６からの指示により撮影レンズ２１Ｒの焦点位置制御，ズーム倍率制御，光軸２２Ｒの向きの制御を撮影レンズ２１Ｌとは独立に行う。ステレオ撮影時には、各レンズ制御部３０Ｌ，３０Ｒは、ＣＰＵ２６から指示により撮影レンズ２１Ｌ，２１Ｒを同一倍率同一焦点位置に連動制御すると共に、光軸２２Ｌ，２２Ｒの輻輳角制御を行う。
【００２４】
図３は、図１に示すステレオカメラ１０を用い、主要被写体（この例では人物）を含むパノラマ画像をスイング撮影すると共に同時にパノラマ画像中の主要被写体のズームアップ画像（この例では人物の顔のズームアップ画像）を撮影するときの撮影方法を示すフローチャートである。
【００２５】
本実施形態では、本撮影を行う直前の準備段階で準備撮影を行う。この準備撮影では、一方の撮像部（この例では、撮影レンズ２１Ｌ，固体撮像素子２３Ｌ）を用いて広角画角にてスイング撮影（所定時間間隔での連続撮影）を行う。ここで、「スイング」とは、例えば撮影するユーザが自身を中心にして手に持った複眼撮像装置を水平方向に円弧を描くように回転させることをいう。
【００２６】
そこで、先ずステップＳ１で準備撮影の準備（撮影レンズの広角設定，ＡＦ設定など）を行い、ステップＳ２で、準備撮影が開始されたか否かを判定し、開始されない場合にはステップＳ１に戻り、開始された場合にはステップＳ３に進む。ステップＳ３では、撮影された複数枚の連続画像を内部メモリ２７に保存する。
【００２７】
図４は、準備撮影の説明図である。人物３５を含む被写体画像の撮影を行うとき、カメラユーザは、ステレオカメラ１０をスイング３６させ、連写モード（あるいは動画撮影モード）で撮影を行う。このスイング撮影により、連続する複数枚の画像が所定時間間隔で撮影される。
【００２８】
図５は、この連続する複数枚の画像を例示する図である。１枚目３７，２枚目３８，３枚目３９，４枚目４０，…と連続する複数枚の画像が撮影され、図２の内部メモリ２７に保存される。各画像中の人物画像３５ａの座標位置は、徐々に変化して行くことになる。
【００２９】
図６は、人物画像３５ａにおける顔画像（この例におけるズームアップ対象画像）の位置座標を示す図であり、１枚目では座標（ｘ１，ｙ１）、２枚目では座標（ｘ２，ｙ２）と算出される。スイングするときの角速度をφ（複数方向を含む）、撮影時間間隔をｔとすると、顔の動き予測と、顔が検出された位置（スイング方向）と、準備撮影からの経過時間とから、顔のリアルタイム位置（本撮影時の位置）の予測を行うことができる。
【００３０】
水平方向Ｘ１，Ｘ２，…，Ｘ（Ｎ−１）に対しての各評価値を、
Ｘ１＝ｆ（ｘ２−ｘ１）／ｇ（ｔ，φ２−φ１）
Ｘ２＝ｆ（ｘ３−ｘ２）／ｇ（ｔ，φ３−φ１）
…
として取得し、「移動速度＝距離／時間」として顔位置の動き予測を行うことができる。
【００３１】
顔までの距離Ｚについては、顔の面積ｍから算出できる。距離Ｚはフォーカス制御に使用できる。垂直方向の評価値Ｙ１，Ｙ２，…，Ｙ（Ｎ−１）も同様に取得し、ｍとＹとから顔画像をズームアップしたときに顔画像が切れない範囲でズーム倍率を決定する。評価値Ｙをズームアップ倍率の決定に用いるのは、顔画像を画面の上下真ん中に捕らえるのが難しいためである。
【００３２】
図３に戻り、ステップＳ３の次のステップＳ４では、撮影画像中に顔画像が検出されたか否かを判定する。顔画像が検出されない場合には、スイングしたときの光軸２２Ｌの向く方向が悪く、顔画像が撮影画像中に入らなかったと判断できるため、ユーザに再度準備撮影を行う必要があることを音声あるいは画面表示により警告報知し、ステップＳ１に戻る。
【００３３】
ステップＳ４の判定の結果、顔画像が検出された場合には、ステップＳ５に進み、検出した顔画像の位置，大きさ、及び主要被写体が動いている可能性もあるため動き予測を行い、同一画角で撮影した場合（後における本撮影）の顔画像の位置を予測演算する。この予測演算は、本撮影が終了するまで継続して繰り返し行い、準備撮影を行った時刻からの経過時間を考慮して顔画像の位置を予測する。
【００３４】
次のステップＳ６では、液晶表示画面２９に、スタート画角をガイド表示する。例えば、画面２９の右半分に本撮影開始時のスルー画像（広角画像）を表示し、画面２９の左半分に、準備撮影開示時（スイング開始時）の広角画像を表示し、本撮影を準備撮影と同じ場所からスイング開始させる。
【００３５】
ガイド表示は、この例に限らず、別形態でも可能である。例えば、準備撮影開始時の画像を半透明状態で画面２９に表示し、本撮影開始時のスルー画像も半透明状態で表示させ、ユーザが両画像を一致させる様に位置合わせできる様にしても良い。スイングさせる方向を示す矢印を表示しても良い。
【００３６】
次のステップＳ７では、本撮影を開始したか否かを判定し、開始していない場合にはステップＳ６に戻る。本撮影が開始した場合にはステップＳ８に進み、一方の撮像部（この例では撮影レンズ２１Ｌ，固体撮像素子２３Ｌ）は広角設定としてパノラマ画像スイング撮影を行う。
【００３７】
そして、他方の撮像部（撮影レンズ２１Ｒ，固体撮像素子２３Ｒ）は主要被写体の顔位置，顔の大きさに合わせたＡＦ設定，ズーム設定を行っておき、角速度センサ２８の検出結果によって、光軸２２Ｒの向く位置が顔画像の予測位置に来たタイミングで、顔が画角から外にはみ出ないギリギリまでズームアップした撮影を行い（ステップＳ９）、この処理を終了する。
【００３８】
この結果、図７に示す様に、主要被写体３５のズームアップ画像を他方の撮像部で撮影することができる。ＣＰＵ２６は、このズームアップ画像データを画像処理して図２には図示省略した外部の記録メディアに保存すると共に、一連の連続する広角画像データを貼り合わせてパノラマ画像を合成し、記録メディアに保存する。
【００３９】
なお、上述した実施形態では、「顔」の画像をズームアップ画像として取得したが、顔に限るものではなく、予め登録してある個人やオブジェクトでも良い。また、移動物体を検出したときこの移動物体のズームアップ画像を撮影することでも良い。
【００４０】
図８は、ステップＳ６におけるガイド表示の別実施形態を説明する図である。例えば、準備撮影時に得られた画像から特異点を抽出してガイドを行うことでも良い。例えば、準備撮影時に或る星画像４２を抽出したとき、これをガイド画面に表示し、本撮影時にこの特異点画像の星画像４３を画面に表示することで、ユーザは本撮影時のスイング開始位置を知ることができる。
【００４１】
図９は、本発明の別実施形態の説明図である。図３で説明した実施形態では、準備撮影時のスイング方向と、本撮影時のスイング撮影方向とを同じ方向とした。しかし、図９に示す様に、準備撮影時にスイングさせた方向に対し、このスイング終了時点から本撮影時のスイング方向を逆方向に行うことで、準備撮影から本撮影までのタイムラグを短くすることができ、顔画像の位置予測のズレを小さくすることが可能となる。
【００４２】
この図１０の方法で撮影を行うか否かは、ユーザによる設定で決めても良く、また、ステレオカメラ１０が自動的に決めその指示を表示画面２９に表示する様にしてもよい。
【００４３】
図１０は、本発明の別実施形態の撮影方法の処理手順を示すフローチャートである。本実施形態は、基本的に図３の実施形態と同じであり、図３のステップＳ１の代わりにステップＳ１ａを行う点だけが異なる。図３のステップＳ１では、単眼で広角画像を撮影する様に設定したが、本実施形態のステップＳ１ａでは、複眼の各々の撮像部を広角設定し、準備撮影のスイング撮影を複眼で行い立体画像を撮影する点が異なる。
【００４４】
準備撮影を立体画像の撮影とするため、主要被写体の位置，動作の予測を３Ｄ的に行うことができ、位置予測や距離の予測精度を高めることができる。
【００４５】
図１１は、本発明の更に別実施形態の説明図である。パノラマ画像中に複数の主要被写体４５，４６，４７が存在した場合、各々の主要被写体４５，４６，４７が所定範囲内に含まれお互いの位置が近いと、個々の高解像度撮影（ズームアップ撮影）時における主要被写体毎の最適なピント合わせが間に合わなくなることがある。
【００４６】
この様な場合には、主要被写体４５，４６，４７の平均的なピント位置４８に合わせて、主要被写体４５，４６，４７の夫々のズームアップ画像４５ａ，４６ａ，４７ａを、図１２に示す様に撮像する。これにより、ズームアップ画像のピンボケを軽減することが可能となる。同様に、ズームアップの倍率を変更する時間が足りない場合もある。この場合には、同一ズームアップ倍率で各主要被写体夫々のズームアップ画像を撮像する。
【００４７】
図１３は、本発明の更に別実施形態の説明図である。図１１の実施形態では、主要被写体４５，４６，４７の平均的なピント位置４８を用いて３つの主要被写体４５，４６，４７の夫々のズームアップ画像を撮影した。しかし、夫々のズームアップ動作が間に合わない場合もある。この様な場合には、主要被写体４５，４６，４７のうち、一番大きなサイズの顔画像を持つ主要被写体４６についてだけズームアップ画像を撮像する。
【００４８】
これにより、主要被写体４６の高解像度画像を、ピントが合う最適条件で撮像することが可能となる。なお、ズームアップ画像を撮影する主要被写体をサイズで決めても良いが、例えば、予めカメラ１０に登録してある物や人物，オブジェクトを優先してズームアップ画像を撮影する様にしても良い。
【００４９】
図１４は、本発明の更に別実施形態に係る撮影方法の処理手順を示すフローチャートである。本実施形態の処理手順は、図３に示す実施形態の処理手順と基本的に同じであり、異なるのは、ステップＳ９の代わりにステップＳ９ａを行う点にある。
【００５０】
主要被写体のズームアップ画像を撮像する場合、フラッシュ発光の必要性をカメラが自動的に判断し実行する場合がある。しかし、一方の撮像部がフラッシュ発光を行ってズームアップ画像を撮影している最中でも、他方撮像部はパノラマ画像を広角レンズを用いてスイング撮影している。
【００５１】
つまり、フラッシュ発光を行ったときにスイング撮影した広角画像はフラッシュ発光した画像となっており、その前後に繋がる広角画像はフラッシュ発光無しの画像となっている。このため、フラッシュ発光した画像を使ってパノラマ画像を合成すると、パノラマ画像の一部だけ露出異常な画像となり、違和感が生じてしまう。
【００５２】
そこで、本実施形態のステップＳ９ａでは、フラッシュ発光時に取得した広角画像は、パノラマ合成には用いずに、その前後のフラッシュ発光無しの広角画像を用いてパノラマ合成を行う。これにより、違和感のないパノラマ画像と主要被写体のズームアップ画像とが得られることになる。
【００５３】
以上述べた実施形態の複眼撮像装置及びその撮影方法は、第１の撮像部及び第２の撮像部を備え、いずれか一方の撮像部が撮影した連続する複数枚の画像を合成してパノラマ画像を生成する複眼撮像装置であって、
本撮影の前の準備段階で複眼撮像装置がスイングされたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置がスイングされたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させることを特徴とする。
【００５４】
また、実施形態の複眼撮像装置及びその撮影方法は、前記準備段階の前記スイングと同じスイング開始位置，スイング方向を前記本撮影でなぞることを指示することを特徴とする。
【００５５】
また、実施形態の複眼撮像装置及びその撮影方法は、前記準備段階の前記スイングと逆方向に前記本撮影の前記スイングを行わせる指示を行うことを特徴とする。
【００５６】
また、実施形態の複眼撮像装置及びその撮影方法は、前記準備段階で撮影を行うとき前記第１の撮像部及び前記第２の撮像部で立体画像を撮影し、該立体画像から前記主要被写体の位置を予測することを特徴とする。
【００５７】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の平均的位置に焦点位置を合わせ該焦点位置で各々の前記主要被写体のズームアップ画像を撮影することを特徴とする。
【００５８】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の夫々を同一倍率のズームアップ画像として撮影することを特徴とする。
【００５９】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体が所定範囲内に複数存在する場合には、そのうちの１つの主要被写体を選択してズームアップ画像を撮影することを特徴とする。
【００６０】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体のズームアップ撮影時にフラッシュ発光が行われた場合には該フラッシュ発光時に前記第１の撮像部で撮影された画像を用いずに前記パノラマ画像を合成することを特徴とする。
【００６１】
実施形態の複眼撮像装置及びその撮影方法によれば、パノラマ画像と、該パノラマ画像中の主要被写体のピントの合ったズームアップ画像とを同時に撮影することができ、複眼撮像装置の使い勝手が向上する。
【産業上の利用可能性】
【００６２】
本発明に係る複眼撮像装置及びその撮影方法によれば、パノラマ画像と主要被写体のズームアップ画像とを同時に取得できるため、使い勝手の良い複眼撮像装置を提供可能となり、ステレオカメラ等の使用形態の多様化を図ることができ、有用である。
【符号の説明】
【００６３】
１０ 複眼撮像装置
１５ レリーズボタン
２１Ｌ，２１Ｒ 撮影レンズ
２３Ｌ，２３Ｒ 固体撮像素子
２６ システム制御部（ＣＰＵ）
２６ａ 時計機能
２７ メモリ
２８ 角速度センサ
２９ 表示画面
３０Ｌ，３０Ｒ レンズ制御部
３５，４５，４６，４７ 主要被写体
３５ａ，４５ａ，４６ａ，４７ａ 主要被写体画像
【技術分野】
【０００１】
本発明は、複眼撮像装置及びその撮影方法に係り、特に、複眼撮像装置を手持ちでスイングさせ一つの撮影部でパノラマ画像を撮影すると共に同時に別の撮影部でパノラマ画像中の主要被写体の高解像度画像（ズームアップ画像）を撮影する撮影方法に関する。
【背景技術】
【０００２】
並列に設けられた２台の撮像部を持つステレオカメラが市販されるようになり、誰でも手軽に被写体の立体画像を撮影できる様になってきている。この様な複数の撮像部を備える複眼撮像装置が普及すると、１つの撮像部でパノラマ画像を撮影し、別の撮像部でパノラマ画像中の主要被写体のズームアップ画像を撮影したいという要望が出てくる。
【０００３】
広角画像とズームアップ画像とを両方撮影できるカメラとして、例えば下記の特許文献１，２に記載のものが知られている。特許文献１記載のカメラは、監視カメラであり、全周囲画像を撮影できる全方位カメラとズームアップカメラとを連動させ、全周囲画像中に動体が存在したときその動体のズームアップ画像を撮影できるようにしている。
【０００４】
特許文献２記載のテレビ会議用のカメラも、広角画像撮影用のカメラとズームアップカメラとを備え、広角画像中の任意被写体を遠隔操作によりズームアップカメラで撮影できる様にしている。
【０００５】
しかしながら、特許文献１，２に記載のカメラは、広角画像を撮影するカメラは固定設置されたカメラであるため、広角画像中の主要被写体の位置の算出を容易に行うことができ、この主要被写体をズームアップすることも容易である。
【０００６】
一方、手持ち可能な携帯型の複眼撮像装置で撮影を行う場合、複眼撮像装置を固定して撮影したのでは、複数の撮像部のうちの１つの撮像部で広角画像（パノラマ画像）を撮影することはできない。
【０００７】
パノラマ画像を撮影するには、複眼撮像装置をユーザが手で持ってスイングさせ、このスイング中に複数枚の連続画像を取得し、これらを貼り合わせることでパノラマ画像を得ることができる。
【０００８】
この様にしてパノラマ画像を撮影するときに、パノラマ画像中の主要被写体のズームアップ画像を他の撮像部で撮影するのであるが、パノラマ画像中の主要被写体の位置を算出するのはスイング中であるため、ズームアップ用の撮像部による主要被写体の撮影（ズーム動作やＡＦ動作）が間に合わない。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００７―３６７５６号公報
【特許文献２】特開２０００―３２３１９号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
本発明の目的は、携帯型の複眼撮像装置をスイング（水平方向に回転）させて１つの撮像部でパノラマ画像を撮影し、別の撮像部でパノラマ画像中の主要被写体のズームアップ画像を撮影できる撮影方法及びこの撮影方法を実施する複眼撮像装置を提供することにある。
【課題を解決するための手段】
【００１１】
本発明の複眼撮像装置は、第１の撮像部及び第２の撮像部と、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させる制御手段と、
前記本撮影時に前記第１の撮像部が撮像した複数枚の連続する画像を合成してパノラマ画像を生成するパノラマ画像合成手段と
を備えることを特徴とする。
【００１２】
本発明の複眼撮像装置の撮影方法は、第１の撮像部及び第２の撮像部を備え、いずれか一方の撮像部が撮影した連続する複数枚の画像を合成してパノラマ画像を生成する複眼撮像装置の撮影方法であって、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させることを特徴とする。
【発明の効果】
【００１３】
本発明によれば、パノラマ画像と該パノラマ画像中の主要被写体のズームアップ画像との両方を同時に撮影することが可能となる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施形態に係る複眼撮像装置の外観斜視図である。
【図２】図１に示す複眼撮像装置の機能ブロック図である。
【図３】本発明の一実施形態に係る撮影方法の処理手順を示すフローチャートである。
【図４】パノラマ画像撮影用のスイング撮影の説明図である。
【図５】図４のスイング撮影された一連の画像を例示する図である。
【図６】図５に示す各画像中の主要被写体の座標位置を示す図である。
【図７】図５に示す主要被写体の顔のズームアップ画像である。
【図８】スイング撮影を行うときのガイド表示の一例を示す図である。
【図９】本発明の別実施形態の説明図である。
【図１０】本発明の更に別実施形態の撮影方法の処理手順を示すフローチャートである。
【図１１】本発明の更に別実施形態の説明図である。
【図１２】図１１の実施形態で撮影された主要被写体のクローズアップ画像を示す図である。
【図１３】本発明の更に別実施形態の説明図である。
【図１４】本発明の更に別実施形態の撮影方法の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下、本発明の一実施形態について、図面を参照して説明する。
【００１６】
図１は、複眼撮像装置（本実施形態ではステレオカメラ）の外観斜視図である。このステレオカメラ１０は、箱状のハウジング１１と、ハウジング１１の前部に並んで設けられた右眼用の撮像部１２Ｒ及び左眼用の撮像部１２Ｌと、ハウジング１１の前面左肩部に設けられたフラッシュライト１３と、ハウジング１１の上面の適宜箇所に設けられた電源スイッチ１４，シャッタボタン１５，モード選択ダイヤル１６とを備える。
【００１７】
ハウジング１１の背面側には、図２に示す液晶表示画面（モニタ）２９を備え、スルー画像やモード選択画面，メニュー画面，後述のガイド表示等が表示される。
【００１８】
撮像部１２Ｒは前部に撮影レンズ２１Ｒを備え、撮像部１２Ｌは前部に撮影レンズ２１Ｌを備える。撮影レンズ２１Ｒの光軸２２Ｒと、撮影レンズ２１Ｌの光軸２２Ｌとが交差する角度を輻輳角といい、輻輳角が目標値となるように各撮像部１２Ｒ，１２Ｌの向く方向を制御するアクチュエータ（後述のレンズ制御部３０Ｌ，３０Ｒ）がステレオカメラ１０に内蔵されている。
【００１９】
撮影レンズ２１Ｒ，２１Ｌは、夫々独立に焦点位置合わせ，ズーム倍率が調整可能となっているが、ステレオ撮影モード時には、これら撮影レンズ２１Ｒ，２１Ｌは、上記のアクチュエータによって連動制御され、被写体の立体画像が撮影できる様になっている。
【００２０】
以下、本実施形態では、立体画像ではなく、撮影レンズ２１Ｌを通して被写体のパノラマ画像を撮影し、撮影レンズ２１Ｒを通してパノラマ画像中の主要被写体のズームアップ画像を撮影するときの撮影方法について説明する。
【００２１】
図２は、図１に示すステレオカメラ１０の内部機能図である。撮影レンズ２１Ｌの背部には固体撮像素子２３Ｌが配置され、撮影レンズ２１Ｒの背部には固体撮像素子２３Ｒが配置される。固体撮像素子２３Ｌ，２３Ｒの各出力信号は夫々ＡＦＥ（アナログフロントエンド）回路２４Ｌ，２４Ｒに接続され、ＡＦＥ回路２４Ｌ，２４Ｒの出力はバス２５に接続される。
【００２２】
バス２５には、ＣＰＵ（システム制御部）２６と、メモリ２７と、角速度センサ２８と、液晶表示画面２９とが接続されている。ＣＰＵ２６は、オフセット処理やガンマ補正処理，ＲＧＢ／ＹＣ変換処理，同時化処理等の周知の画像処理を行うＤＳＰ（デジタルシグナルプロセッサ）機能を内蔵すると共に、時計機能２６ａを内蔵している。
【００２３】
ＣＰＵ２６には、レンズ制御部３０Ｌ，３０Ｒが接続され、レンズ制御部３０Ｌは、ＣＰＵ２６からの指示により撮影レンズ２１Ｌの焦点位置制御，ズーム倍率制御，光軸２２Ｌの向きの制御を行い、レンズ制御部３０Ｒは、ＣＰＵ２６からの指示により撮影レンズ２１Ｒの焦点位置制御，ズーム倍率制御，光軸２２Ｒの向きの制御を撮影レンズ２１Ｌとは独立に行う。ステレオ撮影時には、各レンズ制御部３０Ｌ，３０Ｒは、ＣＰＵ２６から指示により撮影レンズ２１Ｌ，２１Ｒを同一倍率同一焦点位置に連動制御すると共に、光軸２２Ｌ，２２Ｒの輻輳角制御を行う。
【００２４】
図３は、図１に示すステレオカメラ１０を用い、主要被写体（この例では人物）を含むパノラマ画像をスイング撮影すると共に同時にパノラマ画像中の主要被写体のズームアップ画像（この例では人物の顔のズームアップ画像）を撮影するときの撮影方法を示すフローチャートである。
【００２５】
本実施形態では、本撮影を行う直前の準備段階で準備撮影を行う。この準備撮影では、一方の撮像部（この例では、撮影レンズ２１Ｌ，固体撮像素子２３Ｌ）を用いて広角画角にてスイング撮影（所定時間間隔での連続撮影）を行う。ここで、「スイング」とは、例えば撮影するユーザが自身を中心にして手に持った複眼撮像装置を水平方向に円弧を描くように回転させることをいう。
【００２６】
そこで、先ずステップＳ１で準備撮影の準備（撮影レンズの広角設定，ＡＦ設定など）を行い、ステップＳ２で、準備撮影が開始されたか否かを判定し、開始されない場合にはステップＳ１に戻り、開始された場合にはステップＳ３に進む。ステップＳ３では、撮影された複数枚の連続画像を内部メモリ２７に保存する。
【００２７】
図４は、準備撮影の説明図である。人物３５を含む被写体画像の撮影を行うとき、カメラユーザは、ステレオカメラ１０をスイング３６させ、連写モード（あるいは動画撮影モード）で撮影を行う。このスイング撮影により、連続する複数枚の画像が所定時間間隔で撮影される。
【００２８】
図５は、この連続する複数枚の画像を例示する図である。１枚目３７，２枚目３８，３枚目３９，４枚目４０，…と連続する複数枚の画像が撮影され、図２の内部メモリ２７に保存される。各画像中の人物画像３５ａの座標位置は、徐々に変化して行くことになる。
【００２９】
図６は、人物画像３５ａにおける顔画像（この例におけるズームアップ対象画像）の位置座標を示す図であり、１枚目では座標（ｘ１，ｙ１）、２枚目では座標（ｘ２，ｙ２）と算出される。スイングするときの角速度をφ（複数方向を含む）、撮影時間間隔をｔとすると、顔の動き予測と、顔が検出された位置（スイング方向）と、準備撮影からの経過時間とから、顔のリアルタイム位置（本撮影時の位置）の予測を行うことができる。
【００３０】
水平方向Ｘ１，Ｘ２，…，Ｘ（Ｎ−１）に対しての各評価値を、
Ｘ１＝ｆ（ｘ２−ｘ１）／ｇ（ｔ，φ２−φ１）
Ｘ２＝ｆ（ｘ３−ｘ２）／ｇ（ｔ，φ３−φ１）
…
として取得し、「移動速度＝距離／時間」として顔位置の動き予測を行うことができる。
【００３１】
顔までの距離Ｚについては、顔の面積ｍから算出できる。距離Ｚはフォーカス制御に使用できる。垂直方向の評価値Ｙ１，Ｙ２，…，Ｙ（Ｎ−１）も同様に取得し、ｍとＹとから顔画像をズームアップしたときに顔画像が切れない範囲でズーム倍率を決定する。評価値Ｙをズームアップ倍率の決定に用いるのは、顔画像を画面の上下真ん中に捕らえるのが難しいためである。
【００３２】
図３に戻り、ステップＳ３の次のステップＳ４では、撮影画像中に顔画像が検出されたか否かを判定する。顔画像が検出されない場合には、スイングしたときの光軸２２Ｌの向く方向が悪く、顔画像が撮影画像中に入らなかったと判断できるため、ユーザに再度準備撮影を行う必要があることを音声あるいは画面表示により警告報知し、ステップＳ１に戻る。
【００３３】
ステップＳ４の判定の結果、顔画像が検出された場合には、ステップＳ５に進み、検出した顔画像の位置，大きさ、及び主要被写体が動いている可能性もあるため動き予測を行い、同一画角で撮影した場合（後における本撮影）の顔画像の位置を予測演算する。この予測演算は、本撮影が終了するまで継続して繰り返し行い、準備撮影を行った時刻からの経過時間を考慮して顔画像の位置を予測する。
【００３４】
次のステップＳ６では、液晶表示画面２９に、スタート画角をガイド表示する。例えば、画面２９の右半分に本撮影開始時のスルー画像（広角画像）を表示し、画面２９の左半分に、準備撮影開示時（スイング開始時）の広角画像を表示し、本撮影を準備撮影と同じ場所からスイング開始させる。
【００３５】
ガイド表示は、この例に限らず、別形態でも可能である。例えば、準備撮影開始時の画像を半透明状態で画面２９に表示し、本撮影開始時のスルー画像も半透明状態で表示させ、ユーザが両画像を一致させる様に位置合わせできる様にしても良い。スイングさせる方向を示す矢印を表示しても良い。
【００３６】
次のステップＳ７では、本撮影を開始したか否かを判定し、開始していない場合にはステップＳ６に戻る。本撮影が開始した場合にはステップＳ８に進み、一方の撮像部（この例では撮影レンズ２１Ｌ，固体撮像素子２３Ｌ）は広角設定としてパノラマ画像スイング撮影を行う。
【００３７】
そして、他方の撮像部（撮影レンズ２１Ｒ，固体撮像素子２３Ｒ）は主要被写体の顔位置，顔の大きさに合わせたＡＦ設定，ズーム設定を行っておき、角速度センサ２８の検出結果によって、光軸２２Ｒの向く位置が顔画像の予測位置に来たタイミングで、顔が画角から外にはみ出ないギリギリまでズームアップした撮影を行い（ステップＳ９）、この処理を終了する。
【００３８】
この結果、図７に示す様に、主要被写体３５のズームアップ画像を他方の撮像部で撮影することができる。ＣＰＵ２６は、このズームアップ画像データを画像処理して図２には図示省略した外部の記録メディアに保存すると共に、一連の連続する広角画像データを貼り合わせてパノラマ画像を合成し、記録メディアに保存する。
【００３９】
なお、上述した実施形態では、「顔」の画像をズームアップ画像として取得したが、顔に限るものではなく、予め登録してある個人やオブジェクトでも良い。また、移動物体を検出したときこの移動物体のズームアップ画像を撮影することでも良い。
【００４０】
図８は、ステップＳ６におけるガイド表示の別実施形態を説明する図である。例えば、準備撮影時に得られた画像から特異点を抽出してガイドを行うことでも良い。例えば、準備撮影時に或る星画像４２を抽出したとき、これをガイド画面に表示し、本撮影時にこの特異点画像の星画像４３を画面に表示することで、ユーザは本撮影時のスイング開始位置を知ることができる。
【００４１】
図９は、本発明の別実施形態の説明図である。図３で説明した実施形態では、準備撮影時のスイング方向と、本撮影時のスイング撮影方向とを同じ方向とした。しかし、図９に示す様に、準備撮影時にスイングさせた方向に対し、このスイング終了時点から本撮影時のスイング方向を逆方向に行うことで、準備撮影から本撮影までのタイムラグを短くすることができ、顔画像の位置予測のズレを小さくすることが可能となる。
【００４２】
この図１０の方法で撮影を行うか否かは、ユーザによる設定で決めても良く、また、ステレオカメラ１０が自動的に決めその指示を表示画面２９に表示する様にしてもよい。
【００４３】
図１０は、本発明の別実施形態の撮影方法の処理手順を示すフローチャートである。本実施形態は、基本的に図３の実施形態と同じであり、図３のステップＳ１の代わりにステップＳ１ａを行う点だけが異なる。図３のステップＳ１では、単眼で広角画像を撮影する様に設定したが、本実施形態のステップＳ１ａでは、複眼の各々の撮像部を広角設定し、準備撮影のスイング撮影を複眼で行い立体画像を撮影する点が異なる。
【００４４】
準備撮影を立体画像の撮影とするため、主要被写体の位置，動作の予測を３Ｄ的に行うことができ、位置予測や距離の予測精度を高めることができる。
【００４５】
図１１は、本発明の更に別実施形態の説明図である。パノラマ画像中に複数の主要被写体４５，４６，４７が存在した場合、各々の主要被写体４５，４６，４７が所定範囲内に含まれお互いの位置が近いと、個々の高解像度撮影（ズームアップ撮影）時における主要被写体毎の最適なピント合わせが間に合わなくなることがある。
【００４６】
この様な場合には、主要被写体４５，４６，４７の平均的なピント位置４８に合わせて、主要被写体４５，４６，４７の夫々のズームアップ画像４５ａ，４６ａ，４７ａを、図１２に示す様に撮像する。これにより、ズームアップ画像のピンボケを軽減することが可能となる。同様に、ズームアップの倍率を変更する時間が足りない場合もある。この場合には、同一ズームアップ倍率で各主要被写体夫々のズームアップ画像を撮像する。
【００４７】
図１３は、本発明の更に別実施形態の説明図である。図１１の実施形態では、主要被写体４５，４６，４７の平均的なピント位置４８を用いて３つの主要被写体４５，４６，４７の夫々のズームアップ画像を撮影した。しかし、夫々のズームアップ動作が間に合わない場合もある。この様な場合には、主要被写体４５，４６，４７のうち、一番大きなサイズの顔画像を持つ主要被写体４６についてだけズームアップ画像を撮像する。
【００４８】
これにより、主要被写体４６の高解像度画像を、ピントが合う最適条件で撮像することが可能となる。なお、ズームアップ画像を撮影する主要被写体をサイズで決めても良いが、例えば、予めカメラ１０に登録してある物や人物，オブジェクトを優先してズームアップ画像を撮影する様にしても良い。
【００４９】
図１４は、本発明の更に別実施形態に係る撮影方法の処理手順を示すフローチャートである。本実施形態の処理手順は、図３に示す実施形態の処理手順と基本的に同じであり、異なるのは、ステップＳ９の代わりにステップＳ９ａを行う点にある。
【００５０】
主要被写体のズームアップ画像を撮像する場合、フラッシュ発光の必要性をカメラが自動的に判断し実行する場合がある。しかし、一方の撮像部がフラッシュ発光を行ってズームアップ画像を撮影している最中でも、他方撮像部はパノラマ画像を広角レンズを用いてスイング撮影している。
【００５１】
つまり、フラッシュ発光を行ったときにスイング撮影した広角画像はフラッシュ発光した画像となっており、その前後に繋がる広角画像はフラッシュ発光無しの画像となっている。このため、フラッシュ発光した画像を使ってパノラマ画像を合成すると、パノラマ画像の一部だけ露出異常な画像となり、違和感が生じてしまう。
【００５２】
そこで、本実施形態のステップＳ９ａでは、フラッシュ発光時に取得した広角画像は、パノラマ合成には用いずに、その前後のフラッシュ発光無しの広角画像を用いてパノラマ合成を行う。これにより、違和感のないパノラマ画像と主要被写体のズームアップ画像とが得られることになる。
【００５３】
以上述べた実施形態の複眼撮像装置及びその撮影方法は、第１の撮像部及び第２の撮像部を備え、いずれか一方の撮像部が撮影した連続する複数枚の画像を合成してパノラマ画像を生成する複眼撮像装置であって、
本撮影の前の準備段階で複眼撮像装置がスイングされたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置がスイングされたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させることを特徴とする。
【００５４】
また、実施形態の複眼撮像装置及びその撮影方法は、前記準備段階の前記スイングと同じスイング開始位置，スイング方向を前記本撮影でなぞることを指示することを特徴とする。
【００５５】
また、実施形態の複眼撮像装置及びその撮影方法は、前記準備段階の前記スイングと逆方向に前記本撮影の前記スイングを行わせる指示を行うことを特徴とする。
【００５６】
また、実施形態の複眼撮像装置及びその撮影方法は、前記準備段階で撮影を行うとき前記第１の撮像部及び前記第２の撮像部で立体画像を撮影し、該立体画像から前記主要被写体の位置を予測することを特徴とする。
【００５７】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の平均的位置に焦点位置を合わせ該焦点位置で各々の前記主要被写体のズームアップ画像を撮影することを特徴とする。
【００５８】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の夫々を同一倍率のズームアップ画像として撮影することを特徴とする。
【００５９】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体が所定範囲内に複数存在する場合には、そのうちの１つの主要被写体を選択してズームアップ画像を撮影することを特徴とする。
【００６０】
また、実施形態の複眼撮像装置及びその撮影方法は、前記主要被写体のズームアップ撮影時にフラッシュ発光が行われた場合には該フラッシュ発光時に前記第１の撮像部で撮影された画像を用いずに前記パノラマ画像を合成することを特徴とする。
【００６１】
実施形態の複眼撮像装置及びその撮影方法によれば、パノラマ画像と、該パノラマ画像中の主要被写体のピントの合ったズームアップ画像とを同時に撮影することができ、複眼撮像装置の使い勝手が向上する。
【産業上の利用可能性】
【００６２】
本発明に係る複眼撮像装置及びその撮影方法によれば、パノラマ画像と主要被写体のズームアップ画像とを同時に取得できるため、使い勝手の良い複眼撮像装置を提供可能となり、ステレオカメラ等の使用形態の多様化を図ることができ、有用である。
【符号の説明】
【００６３】
１０ 複眼撮像装置
１５ レリーズボタン
２１Ｌ，２１Ｒ 撮影レンズ
２３Ｌ，２３Ｒ 固体撮像素子
２６ システム制御部（ＣＰＵ）
２６ａ 時計機能
２７ メモリ
２８ 角速度センサ
２９ 表示画面
３０Ｌ，３０Ｒ レンズ制御部
３５，４５，４６，４７ 主要被写体
３５ａ，４５ａ，４６ａ，４７ａ 主要被写体画像
【特許請求の範囲】
【請求項１】
第１の撮像部及び第２の撮像部と、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させる制御手段と、
前記本撮影時に前記第１の撮像部が撮像した複数枚の連続する画像を合成してパノラマ画像を生成するパノラマ画像合成手段と
を備える複眼撮像装置。
【請求項２】
請求項１に記載の複眼撮像装置であって、前記準備段階の前記水平方向の回転と同じ回転開始位置，回転方向を前記本撮影でなぞることを指示するガイド表示手段を備える複眼撮像装置。
【請求項３】
請求項１に記載の複眼撮像装置であって、前記準備段階の前記水平方向の回転と逆方向に前記本撮影の前記回転を行わせる指示を行う複眼撮像装置。
【請求項４】
請求項１乃至請求項３のいずれか１項に記載の複眼撮像装置であって、前記準備段階で撮影を行うとき前記第１の撮像部及び前記第２の撮像部で立体画像を撮影し、該立体画像から前記主要被写体の位置を予測する複眼撮像装置。
【請求項５】
請求項１乃至請求項４のいずれか１項に記載の複眼撮像装置であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の平均的位置に焦点位置を合わせ該焦点位置で各々の前記主要被写体のズームアップ画像を撮影する複眼撮像装置。
【請求項６】
請求項１乃至請求項５のいずれか１項に記載の複眼撮像装置であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の夫々を同一倍率のズームアップ画像として撮影する複眼撮像装置。
【請求項７】
請求項１乃至請求項４のいずれか１項に記載の複眼撮像装置であって、前記主要被写体が所定範囲内に複数存在する場合には、そのうちの１つの主要被写体を選択してズームアップ画像を撮影する複眼撮像装置。
【請求項８】
請求項１乃至請求項７のいずれか１項に記載の複眼撮像装置であって、前記主要被写体のズームアップ撮影時にフラッシュ発光が行われた場合には該フラッシュ発光時に前記第１の撮像部で撮影された画像を用いずに前記パノラマ画像を合成する複眼撮像装置。
【請求項９】
第１の撮像部及び第２の撮像部を備え、いずれか一方の撮像部が撮影した連続する複数枚の画像を合成してパノラマ画像を生成する複眼撮像装置の撮影方法であって、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させる複眼撮像装置の撮影方法。
【請求項１０】
請求項９に記載の複眼撮像装置の撮影方法であって、前記準備段階の前記水平方向の回転と同じ回転開始位置，回転方向を前記本撮影でなぞることを指示する複眼撮像装置の撮影方法。
【請求項１１】
請求項９に記載の複眼撮像装置の撮影方法であって、前記準備段階の前記水平方向の回転と逆方向に前記本撮影の前記水平方向の回転を行わせる指示を行う複眼撮像装置の撮影方法。
【請求項１２】
請求項９乃至請求項１１のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記準備段階で撮影を行うとき前記第１の撮像部及び前記第２の撮像部で立体画像を撮影し、該立体画像から前記主要被写体の位置を予測する複眼撮像装置の撮影方法。
【請求項１３】
請求項９乃至請求項１２のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の平均的位置に焦点位置を合わせ該焦点位置で各々の前記主要被写体のズームアップ画像を撮影する複眼撮像装置の撮影方法。
【請求項１４】
請求項９乃至請求項１３のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の夫々を同一倍率のズームアップ画像として撮影する複眼撮像装置の撮影方法。
【請求項１５】
請求項９乃至請求項１２のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体が所定範囲内に複数存在する場合には、そのうちの１つの主要被写体を選択してズームアップ画像を撮影する複眼撮像装置の撮影方法。
【請求項１６】
請求項９乃至請求項１５のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体のズームアップ撮影時にフラッシュ発光が行われた場合には該フラッシュ発光時に前記第１の撮像部で撮影された画像を用いずに前記パノラマ画像を合成する複眼撮像装置の撮影方法。
【請求項１】
第１の撮像部及び第２の撮像部と、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させる制御手段と、
前記本撮影時に前記第１の撮像部が撮像した複数枚の連続する画像を合成してパノラマ画像を生成するパノラマ画像合成手段と
を備える複眼撮像装置。
【請求項２】
請求項１に記載の複眼撮像装置であって、前記準備段階の前記水平方向の回転と同じ回転開始位置，回転方向を前記本撮影でなぞることを指示するガイド表示手段を備える複眼撮像装置。
【請求項３】
請求項１に記載の複眼撮像装置であって、前記準備段階の前記水平方向の回転と逆方向に前記本撮影の前記回転を行わせる指示を行う複眼撮像装置。
【請求項４】
請求項１乃至請求項３のいずれか１項に記載の複眼撮像装置であって、前記準備段階で撮影を行うとき前記第１の撮像部及び前記第２の撮像部で立体画像を撮影し、該立体画像から前記主要被写体の位置を予測する複眼撮像装置。
【請求項５】
請求項１乃至請求項４のいずれか１項に記載の複眼撮像装置であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の平均的位置に焦点位置を合わせ該焦点位置で各々の前記主要被写体のズームアップ画像を撮影する複眼撮像装置。
【請求項６】
請求項１乃至請求項５のいずれか１項に記載の複眼撮像装置であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の夫々を同一倍率のズームアップ画像として撮影する複眼撮像装置。
【請求項７】
請求項１乃至請求項４のいずれか１項に記載の複眼撮像装置であって、前記主要被写体が所定範囲内に複数存在する場合には、そのうちの１つの主要被写体を選択してズームアップ画像を撮影する複眼撮像装置。
【請求項８】
請求項１乃至請求項７のいずれか１項に記載の複眼撮像装置であって、前記主要被写体のズームアップ撮影時にフラッシュ発光が行われた場合には該フラッシュ発光時に前記第１の撮像部で撮影された画像を用いずに前記パノラマ画像を合成する複眼撮像装置。
【請求項９】
第１の撮像部及び第２の撮像部を備え、いずれか一方の撮像部が撮影した連続する複数枚の画像を合成してパノラマ画像を生成する複眼撮像装置の撮影方法であって、
本撮影の前の準備段階で複眼撮像装置が水平方向に回転されたときに前記第１の撮像部によって撮影された連続する複数枚の画像から該複数枚の画像中の主要被写体の位置を求め、該位置から前記本撮影が行われるときの前記主要被写体の位置を予測し、前記本撮影を行う時に前記複眼撮像装置が水平方向に回転されたとき前記第１の撮像部に連続する複数枚の画像を撮影させると共に前記予測した位置に基づいて前記第２の撮像部を制御し前記主要被写体のズームアップ画像を該第２の撮像部に撮影させる複眼撮像装置の撮影方法。
【請求項１０】
請求項９に記載の複眼撮像装置の撮影方法であって、前記準備段階の前記水平方向の回転と同じ回転開始位置，回転方向を前記本撮影でなぞることを指示する複眼撮像装置の撮影方法。
【請求項１１】
請求項９に記載の複眼撮像装置の撮影方法であって、前記準備段階の前記水平方向の回転と逆方向に前記本撮影の前記水平方向の回転を行わせる指示を行う複眼撮像装置の撮影方法。
【請求項１２】
請求項９乃至請求項１１のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記準備段階で撮影を行うとき前記第１の撮像部及び前記第２の撮像部で立体画像を撮影し、該立体画像から前記主要被写体の位置を予測する複眼撮像装置の撮影方法。
【請求項１３】
請求項９乃至請求項１２のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の平均的位置に焦点位置を合わせ該焦点位置で各々の前記主要被写体のズームアップ画像を撮影する複眼撮像装置の撮影方法。
【請求項１４】
請求項９乃至請求項１３のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体が所定範囲内に複数存在する場合には、各主要被写体の夫々を同一倍率のズームアップ画像として撮影する複眼撮像装置の撮影方法。
【請求項１５】
請求項９乃至請求項１２のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体が所定範囲内に複数存在する場合には、そのうちの１つの主要被写体を選択してズームアップ画像を撮影する複眼撮像装置の撮影方法。
【請求項１６】
請求項９乃至請求項１５のいずれか１項に記載の複眼撮像装置の撮影方法であって、前記主要被写体のズームアップ撮影時にフラッシュ発光が行われた場合には該フラッシュ発光時に前記第１の撮像部で撮影された画像を用いずに前記パノラマ画像を合成する複眼撮像装置の撮影方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１１−２３８９７９（Ｐ２０１１−２３８９７９Ａ）
【公開日】平成２３年１１月２４日（２０１１．１１．２４）
【国際特許分類】
【出願番号】特願２０１０−１０５９１８（Ｐ２０１０−１０５９１８）
【出願日】平成２２年４月３０日（２０１０．４．３０）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２３年１１月２４日（２０１１．１１．２４）
【国際特許分類】
【出願日】平成２２年４月３０日（２０１０．４．３０）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]