画像撮影装置、及び画像撮影方法
【課題】パノラマ撮影において撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域との間の撮影の時間差を短縮して、合成画像の写真品質や情報精度を高めることができる画像撮影装置を提供する。
【解決手段】最初にファーストカメラスキャンを実行して各撮影領域内の撮影対象物の距離情報を取得する。その後、すべての撮影領域の距離情報に基づいて撮影範囲全体の総合距離ヒストグラムを作成し、総合距離ヒストグラムに基づいて本番撮影でレンズに設定する複数種類の焦点位置を設定する。その後、複数種類の焦点位置から選択した焦点位置を撮影領域ごとにレンズに設定して本番撮影を連続的に行うセカンドカメラスキャンを実行する。
【解決手段】最初にファーストカメラスキャンを実行して各撮影領域内の撮影対象物の距離情報を取得する。その後、すべての撮影領域の距離情報に基づいて撮影範囲全体の総合距離ヒストグラムを作成し、総合距離ヒストグラムに基づいて本番撮影でレンズに設定する複数種類の焦点位置を設定する。その後、複数種類の焦点位置から選択した焦点位置を撮影領域ごとにレンズに設定して本番撮影を連続的に行うセカンドカメラスキャンを実行する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影範囲を分割して設定したそれぞれの撮影領域でレンズの焦点位置を異ならせた複数枚の写真画像を撮影する画像撮影装置に関する。
【背景技術】
【０００２】
パノラマ風景写真、医療用高解像度写真、山岳航空写真等の分野において、撮影範囲を分割して設定したそれぞれの撮影領域でレンズの焦点位置を異ならせた複数枚の写真画像を撮影する画像撮影装置が実用化されている。
【０００３】
特許文献１には、パノラマ風景写真を自動撮影する画像撮影装置が示される。ここでは、撮影範囲を分割して複数の撮影領域を予め設定すると、デジタルカメラの支持機構がデジタルカメラの画角をそれぞれの撮影領域に自動的に位置決めて連続的に写真撮影する。
【０００４】
特許文献２には、医療用高解像度写真の撮影範囲を自動撮影する画像撮影装置が示される。ここでは、撮影領域を分割して設定した撮影領域で写真撮影が行われるごとに撮影した写真を順次合成して表示装置に画像表示している。
【０００５】
ところで、写真画像をつなぎ合わせて得られる合成写真の解像度を上げるために、焦点距離の長いレンズを用いて視野角を狭くし、それぞれの領域をより拡大して撮影するという方法がある。しかし、焦点距離の長いレンズでは、焦点距離の短いレンズに比べ、撮影距離、絞り値、焦点位置等の撮影条件が同じであれば、被写界深度が浅くなる。このため撮影領域内に様々な距離の被写体が混在すると、焦点位置付近の被写体にはピントが合うものの、焦点位置から距離が離れた被写体ではピントがぼけて解像度が低下した画像となってしまい、撮影領域全体を高解像度に撮影することができない。
【０００６】
このため、１つの撮影領域でレンズの焦点位置を複数段階に変化させて複数枚の写真画像を取り込み、それぞれの写真画像のピントの合った部分だけをつなぎ合わせて隅々までピントが合った画像を合成する技術が実用化されている。
【０００７】
特許文献３には、分割されていない１枚の写真撮影において、自動的にレンズの焦点位置を複数段階に変化させて複数枚の写真画像を取り込む制御が示される。ここでは、写真撮影に先立たせて、レンズの焦点位置を複数段階に異ならせて、撮影領域の予備撮影を行って撮影画像内の合焦点を判断し、本番撮影でレンズに設定する複数段階の焦点位置を設定している。
【０００８】
特許文献４には、撮影前に被写体（撮影対象物）が存在する位置と距離を事前に把握し、被写体が存在しない焦点位置は撮影しないという制御が提案されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０００−３２４３８０号公報
【特許文献２】特開平９−１７３２９８号公報
【特許文献３】特開２００９−９２８９２号公報
【特許文献４】特開平１０−１０８０５７号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
これら従来技術の組み合わせで、パノラマ撮影装置を構成した場合、各領域の撮影直前に、毎回被写体状況を取得し、撮影に使用する焦点位置を決定するという前処理を行うため、２つの撮影領域の撮影間隔が広がることになる。
【００１１】
撮影領域が２〜５枚程度であれば、前記前処理に要する時間はそれほど問題にならない。しかし、広範囲な撮影領域を長時間かけて多数枚の分割撮影を行う場合、前処理に要する時間も累積的に大きくなり、無視できなくなってくる。その結果、撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域とでは大きな時間差が発生して、明るさや被写体状況（影の方向、人通り等）が大幅に異なる場合がある。そして、そのような撮影領域の画像を合成して得られた合成写真は、きわめて不自然なものとなり、写真品質や情報精度が低いと評価されてしまう。
【００１２】
本発明は、パノラマ撮影において撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域との間の撮影の時間差を短縮して、合成画像の写真品質や情報精度を高めることができる画像撮影装置を提供することを目的としている。
【課題を解決するための手段】
【００１３】
本発明の画像撮影装置は、撮影範囲を分割した個別の撮影領域を撮影可能であって、レンズの焦点位置を変化させて撮影領域内の合焦点情報を出力可能な撮影手段と、前記撮影手段を移動させて異なる前記撮影領域を前記撮影手段に設定可能な移動手段と、前記撮影手段と前記移動手段を制御して、それぞれの撮影領域について撮影画像を取得させる制御手段とを備えるものである。そして、前記制御手段は、前記複数の撮影領域でレンズの焦点位置を変化させて被写体までの距離を測定し、前記複数の撮影領域での測定結果に基いて撮影領域ごとに焦点位置を定めた後に、前記撮影手段と前記移動手段を制御して、撮影領域ごとに定めた焦点位置をレンズに設定して前記複数の撮影領域について連続撮影を実行する。
【発明の効果】
【００１４】
本発明の画像撮影装置では、移動手段を用いて複数の撮影領域を次々に撮影手段に設定してレンズの焦点位置の決定に必要な情報をまとめて取得する。そして、取得した情報に基づいて個別の撮影領域で用いるレンズの焦点位置を決定した後に、複数の撮影領域の本番撮影を連続的に実行する。
【００１５】
従って、撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域との間の撮影の時間差を短縮できる。また、すべての撮影領域で取得した情報に基づいてレンズの焦点位置の選択肢を設定できるため、撮影領域ごとにばらばらなレンズの焦点位置で撮影が行われることを回避できる。これにより、合成画像の写真品質や情報精度を高めることができる。
【図面の簡単な説明】
【００１６】
【図１】パノラマ撮影システムの構成の説明図である。
【図２】手動撮影画面の説明図である。
【図３】設定画面の説明図である。
【図４】自動撮影画面の説明図である。
【図５】パノラマ自動撮影モードのフローチャートである。
【図６】マルチエリアフォーカスセンサによる合焦点検出位置の説明図である。
【図７】ヒストグラムを用いた基本焦点位置の設定の説明図である。
【図８】撮影時間短縮効果の説明図である。
【図９】実施例１におけるパノラマ撮影範囲の説明図である。
【図１０】撮影領域の設定の説明図である。
【図１１】取得した距離情報の説明図である。
【図１２】撮影領域ごとの基本焦点位置の選択の説明図である。
【図１３】合焦点の水準の違いによる焦点位置の違いの説明図である。
【図１４】実施例２における基本焦点位置の設定の説明図である。
【図１５】実施例２における撮影領域ごとの基本焦点位置の選択の説明図である。
【発明を実施するための形態】
【００１７】
以下、本発明の実施形態を、図面を参照して詳細に説明する。本発明は、情報取得のカメラスキャンに続いて写真撮影のカメラスキャンを行う限りにおいて、実施形態の構成の一部又は全部を、その代替的な構成で置き換えた別の実施形態でも実施できる。
【００１８】
本実施形態では、パノラマ風景写真の撮影システムを説明するが、本発明は、医療用高解像度写真、山岳航空写真等の分野でも利用できる。
【００１９】
なお、特許文献１〜４に示される画像撮影装置の構成やカメラ制御、写真画像のパノラマ合成処理等に関する一般的な事項については、図示を省略して重複する説明を省略する。
【００２０】
＜比較例＞
近年、デジタルスチルカメラ用撮像素子の高解像度化が進み、高解像度の写真が誰にでも手軽に撮影できるようになった。また、カメラ単体での撮影では得られなかった広範囲を１枚に再現するパノラマ写真も、カメラ内蔵のパノラマ撮影アシスト機能等を利用することで、簡単に得られるようになっている。パノラマ撮影では、カメラの方向を一定角度ずつ移動させながら複数枚の写真を撮影し、撮影後にパソコンのスティッチングソフトを使用して合成処理を行う。
【００２１】
カメラ内蔵のパノラマ撮影アシスト機能を利用して風景等のパノラマ撮影を行う場合には、カメラ単体での広角域の撮影可能範囲を補い、より広画角の画像を得ることが目的となる。このため、撮影は広角系のレンズで行われ、分割する枚数も、せいぜい２〜５枚程度である。これに対して業務用途では、望遠系のレンズを使用し、分割する１コマ（撮影領域）の撮影範囲を狭めて高解像度に撮影する高精細多分割パノラマ撮影が、イベントや文化財の保存を目的に行われている。
【００２２】
また、風景のパノラマ撮影においては、撮影範囲に含まれる撮影対象物の距離が、近距離から遠距離まで広範囲にわたることがある。このため、高解像度を目的に望遠系のレンズを使用して撮影すると、広角系レンズを使用する場合には問題とならなかった被写界深度の浅さが問題となってくる。
【００２３】
被写界深度の浅さを補うために、レンズの焦点位置を複数段階に異ならせて同じ撮影領域を複数枚撮影し、撮影後に複数枚の画像を合成処理して被写界深度を稼ぐ、焦点合成という方法があり、単体の専用ソフトウエアとしても市販され広く利用されている。
【００２４】
しかし、高精細パノラマ撮影では、分割枚数が多いことに加え、撮影領域毎に焦点合成用の焦点位置を異ならせた複数枚の画像を撮影する必要があり、トータルの撮影枚数は膨大となる。また、これに伴い撮影時間も長くなり、条件次第では数時間に及ぶこともある。
【００２５】
野外で行う高精細パノラマ撮影においては、撮影時間が長くなると、撮影開始時と撮影終了時で環境が大きく変化し、大きな問題を引き起す。一例としては、「太陽の位置による影の向きの変化」、「天候による明るさの変化」、「風による雲の変化」が挙げられる。これらの環境変化があまりにも大きいと、撮影後に行うスティッチング処理で、きれいに繋がらないという不具合を生じ、長時間かけて撮影した写真が使えず無駄になることがある。また、トータルの撮影枚数の多さから、撮影後に行う画像のスティッチングや各焦点位置の画像の合成処理への負担も大きい。
【００２６】
また、高精細パノラマ撮影においては、撮影後に行う各焦点位置で撮影した画像の合成やスティッチング合成処理が画質に大きな影響を与える。そのため、できるだけコマ間の撮影条件を一致させておくことが、撮影時間の短縮と並び重要である。
【００２７】
ここで、特許文献４に示される制御をパノラマ撮影に応用した場合、被写体が存在しない距離での余分な撮影はしないので、トータルの撮影枚数の削減は行える。しかし、純粋な撮影動作よりも時間のかかる被写体状況の取得を、コマ毎の撮影前に単独で毎回行うことになるので、全てのコマを撮影する時間については長くなる（図８参照）。また、各コマは、そのコマの単独の状況だけを基に独立して撮影されるため、パノラマ撮影の各コマ間の相関を考慮した撮影を行うことは難しい。
【００２８】
特許文献３では、被写界状況に応じて各被写体に合焦点した画像を効率良く取得しているが、パノラマ撮影に適用した場合には、特許文献４と同様、各コマ独立での撮影となるため、コマ間の撮影条件を統一することが難しい。
【００２９】
＜実施の形態＞
これに対して、本実施例では、撮影時間の短縮とコマ毎の相関を考慮した撮影が可能な、高精細画像のパノラマ撮影システムが提供される。本実施例のパノラマ画像の撮影方法は、レンズの焦点位置を変化させて撮影領域の合焦点情報を出力可能なカメラを用いて、撮影範囲に設定した複数の撮影領域の画像を撮影する。
【００３０】
第１工程の一例であるファーストカメラスキャンでは、個別の撮影領域でレンズの焦点位置を変化させて、撮影領域内の複数の検出位置について所定水準の合焦点が得られる焦点位置を測定する操作を、複数の撮影領域で連続的に実行する。
【００３１】
続く第２工程の一例である撮影条件設定では、ファーストカメラスキャンでの測定結果に基いて、複数の撮影領域のすべての検出位置について所定水準の合焦点が得られる複数種類の基本焦点位置を定める。
【００３２】
さらに、第３工程の一例であるセカンドカメラスキャンでは、複数の撮影領域の撮影を連続的に実行する。撮影条件設定で設定した複数種類の基本焦点位置から選択した個別の焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を行う。
【００３３】
そして、第２工程の一例である撮影条件設定では、すべてのコマの距離情報に基づいて撮影範囲全体の総合距離ヒストグラムを作成し、総合距離ヒストグラムに基づいて撮影に使用する複数の基本焦点位置を設定する。
【００３４】
＜画像撮影装置＞
図１はパノラマ撮影システムの構成の説明図である。図２は手動撮影画面の説明図である。図３は設定画面の説明図である。図４は自動撮影画面の説明図である。
【００３５】
図１の（ａ）、（ｂ）に示すように、パノラマ撮影システム２００は、カメラ２０１を自動雲台２０２に取り付けており、カメラ２０１及び自動雲台２０２は、表示部２０４を有する制御装置２０３によって総合的に制御される。制御装置２０３は、入力部２０５を通じて撮影条件等が入力操作され、演算処理した各種情報を表示部２０４に表示する。
【００３６】
自動雲台２０２のパン機構２０６は、カメラ２０１を垂直な軸の周りで回転させて水平方向に画角を移動させる。自動雲台２０２のチルト機構２０７はカメラ２０１を水平な軸の周りで回転させて垂直方向に画角を移動させる。自動雲台２０２のモータコントローラ２０８は、制御装置２０３からの指令信号に応じてパン機構２０６及びチルト機構２０７を作動させる。
【００３７】
パノラマ撮影システム２００を起動すると、制御装置２０３の表示部２０４に、図２に示すように、手動撮影画面４００が表示される。図１を参照して示すように、パノラマ撮影システム２００は、手動撮影画面４００を表示した状態で手動撮影モードの撮影を実行可能である。手動撮影画面４００は、表示部２０４に撮影範囲を表示し、撮影範囲の中に設定された複数のコマ（撮影領域）４０１を一覧表示する。そして、個別のコマを撮影するごとに、制御装置２０３は、撮影範囲の対応するコマ位置に撮影画像の縮小画像を表示する。
【００３８】
表示部２０４に撮影範囲を表示して、撮影範囲内のコマ４０１を指定してボタン４０２を操作すると、自動雲台２０２が作動して、カメラ２０１の画角を実際の撮影範囲の指定されたコマ４０１に位置決める。そして、ボタン４０４を押すと、指定されたコマ４０１の写真撮影が実行される。
【００３９】
手動撮影画面４００のボタン４０６を押すと、図３に示すように、パノラマ撮影条件に関する設定画面３００が表示される。図１を参照して示すように、パノラマ撮影システム２００は、表示部２０４を通じてパノラマ撮影条件の設定を行うことで、その設定内容に応じたパノラマ自動撮影モードを実行可能である。パノラマ自動撮影モードでは、撮影範囲を分割したそれぞれのコマ（撮影領域）でカメラ２０１のレンズの焦点位置を段階的に変化させて、撮影対象物までの距離を測定する。すべての撮影領域で測定を実行し終わると、制御装置２０３は、測定結果に基いて複数段階の基本焦点位置を求めた後、コマ毎の撮影に使用する焦点位置を、基本焦点位置の中から選択する。
【００４０】
そして、その結果を図４に示すように、距離ヒストグラムと共に距離情報取得結果表示画面１６００に表示する。そして、撮影者が焦点位置の確認を行った後、撮影開始ボタン１６０３を押すと、制御部２０３は、パノラマ撮影条件の設定画面３００で設定された条件を用いて複数のコマの連続撮影を一気に実行する。
【００４１】
図３に示すように、設定画面３００には、設定項目ごとの現在の設定状況が表示され、それぞれの設定項目を選択すると、各設定項目に対する選択肢３０１の設定画面が追加表示される。図３の例では、絞り値にＦ１６を設定する時の様子を表している。
【００４２】
設定できる項目は、パノラマ撮影条件に関するものであり、表１に一覧として示す。ここに挙げた項目は代表的なものであり、撮影目的等により、さらに細かな設定項目を追加してもよいし、不要な項目を省いてシステムを簡略化してもよい。
【００４３】
【表１】
【００４４】
表１中、最低限、手動で設定が必要な項目としては、全体の撮影範囲を指定する「撮影画角範囲」のみである。他の項目については、撮影者に設定させることも可能であるし、制御装置２０３による推奨値での自動設定とすることも可能である。
【００４５】
表１の各項目の他に、カメラ２０１の基本設定として、一般的に設定する必要がある項目、例えば、記録画質やＩＳＯ感度等は、設定画面３００の項目に追加することも可能であるが、システムの動作説明においては必須ではない。よって、カメラ本体で別途設定されているものとし、説明からは省略する。
【００４６】
＜パノラマ自動撮影モード＞
図５はパノラマ自動撮影モードのフローチャートである。図６はマルチエリアフォーカスセンサによる合焦点検出位置の説明図である。図７はヒストグラムを用いた撮影基本焦点位置の設定の説明図である。図８は撮影時間短縮効果の説明図である。
【００４７】
図１を参照して図５に示すように、撮影者が設定画面３００を通じてパノラマ撮影条件を設定し（Ｓ１０１）、その後、図２の設定画面３００の下部にある「距離情報取得開始」ボタン３０２が押される（Ｓ１０２）。
【００４８】
すると、制御装置２０３は、自動雲台２０２を作動させて、設定された最初のコマ（撮影領域）へ向けてカメラ２０１の画角を位置決める（Ｓ１０３）。続いて、カメラ２０１のレンズのフォーカスリング２１１を無限遠（∞）へ移動させ、撮影対象物の距離情報の取得を開始する（Ｓ１０４）。
【００４９】
図６に示すように、マルチエリアフォーカスセンサ５００は、カメラ２０１の撮影領域全体を等間隔に区切って８×８のフォーカスポイント５０１を配置している。なお、マルチエリアフォーカスセンサの分割数や配置分布位置については、分割数を増やして複雑な距離情報を持つ被写体に対応する等、撮影目的に応じて変更してもよい。
【００５０】
制御装置２０３は、レンズのフォーカスリング２１１を回転しながら、マルチエリアフォーカスセンサ５００により、８×８のフォーカスポイント５０１における撮影対象物の合焦点を検出する（Ｓ１０５）。最初の距離、すなわち∞で合焦点が検出できなかった場合（Ｓ１０５のＮ）、焦点位置が予め設定された位置まで到達していなければ（Ｓ１０８のＮ）、レンズのフォーカスリング２１１を至近側へ１ステップ移動させる（Ｓ１０６）。そして、再び合焦点検出を行う（Ｓ１０５）。
【００５１】
一方、マルチエリアフォーカスセンサ５００が、どこかのフォーカスポイント５０１で合焦点を検出できた場合（Ｓ１０５のＹ）、制御装置２０３は、検出した距離とフォーカスポイントの数をメモリに記録する。
【００５２】
その後、焦点位置が、予め設定された位置まで到達していなければ（Ｓ１０８のＮ）、レンズのフォーカスリング２１１を１ステップ至近側へ移動させて（Ｓ１０６）、再び合焦点検出を行う（Ｓ１０５）。
【００５３】
そして、最終的に、焦点位置が、予め設定された位置まで到達したら（Ｓ１０８のＹ）、そのコマ（撮影領域）の合焦点検出は終了となる。
【００５４】
次に、全コマの距離情報取得が終了していなければ（Ｓ１０９のＮ）、自動雲台２０２を次のコマ位置に移動する（Ｓ１０３）。そして、１コマ目と同様に、レンズのフォーカスリング２１１を移動させて、マルチエリアフォーカスセンサ５００を用いた合焦点検出を行って距離情報を取得する。このようにして、撮影範囲に予め設定された全コマ（全撮影領域）について距離情報の取得を繰り返す。
【００５５】
なお、距離情報取得において、撮影対象物が青空等の場合、合焦点の判断が難しく、どの距離においても合焦点を検出できないことがある。その場合、距離情報が得られず、そのコマは全く撮影されないこととなる。そうなると、後で繋げてパノラマ合成画像を形成する時に不具合が生じる。これを避けるため、どの距離においても合焦点を検出できないフォーカスポイントは青空とみなして、∞で合焦点を検出したものとして扱う。
【００５６】
制御装置２０３は、全コマの距離情報が取得できたら、全てのコマで共通な焦点位置の選択肢である撮影基本焦点位置（基本焦点位置）を決定する（Ｓ１１０〜Ｓ１１２）。隣接する２つの撮影領域にわたる撮影対象物の画像では、撮影時の焦点位置を揃えないと、つなぎ目が不自然になるからである。
【００５７】
制御装置２０３は、まず、各コマの情報を全て合計した総合の合焦点数を算出する（Ｓ１１０）。そして、算出した合焦点数を基に、図７に示すように、距離の刻みごとの合焦点検出フォーカスポイント数を現わす総合距離ヒストグラム１３００を作成する（Ｓ１１１）。そして、作成した総合距離ヒストグラム１３００を被写界深度Ａ〜Ｄで分割して、撮影範囲全体に渡って撮影対象物が存在する全距離で合焦点が得られる最小段階数の基本焦点位置１３０１〜１３０４を設定する（Ｓ１１２）。また、設定した複数の基本焦点位置１３０１〜１３０４の中から、個別のコマで撮影対象物が存在する全距離で合焦点が得られる基本焦点位置を選択する（Ｓ１１３、Ｓ１１４）。
【００５８】
制御装置２０３は、基本焦点位置の演算が終了すると、表示部２０４に、図４に示すように距離情報取得結果表示画面１６００を表示する（Ｓ１１５）。ここでは、撮影範囲全体に渡る総合距離ヒストグラム１６０１と設定された基本焦点位置、並びにコマ毎の距離ヒストグラム１６０２と選択された基本焦点位置が表示される。
【００５９】
撮影者は、表示部２０３に表示された基本焦点位置等の設定に問題がなければ、距離情報取得結果表示画面１６００の下部にある「撮影開始」ボタン１６０３を押す（Ｓ１１６）。すると、制御装置２０３は、自動雲台２０２を最初のコマに移動させ、カメラ２０１を最初に撮影するコマ方向へ向ける（Ｓ１１７）。そして、レンズのフォーカスリング２１１を、コマごとに設定された基本焦点位置の内で最遠方の値に移動させて（Ｓ１１８）撮影を行う（Ｓ１１９）。
【００６０】
現在撮影中のコマに、基本焦点位置が複数選択されている場合は、設定した基本焦点位置の全てで撮影が終了するまで（Ｓ１２０のＮ）、次の基本焦点位置へレンズのフォーカスリング２１１を移動させて（Ｓ１１８）撮影を繰り返す（Ｓ１１９）。
【００６１】
１コマ目の撮影が全て終了したら（Ｓ１２０のＹ）、自動雲台２０２を作動させてカメラ２０１の画角を次のコマ位置へ移動して（Ｓ１１７）同様な撮影手順（Ｓ１１７〜Ｓ１２０）を実行する。これを撮影範囲の全コマの撮影が終了するまで（Ｓ１２０のＹ）繰り返す。
【００６２】
図８に示すように、本実施例による方法でパノラマ撮影を行った場合の時間短縮効果を、コマ毎に距離情報を取得する比較例と対比して示した。本実施例では、撮影範囲全体の距離ヒストグラムから撮影に使用する基本焦点位置を事前に設定しておく。そして、各コマの撮影には、その基本焦点位置の中から当該コマの距離ヒストグラムに応じて撮影する基本焦点位置を選択する。
【００６３】
これにより、異なるコマ間においても、同じ距離域にある撮影対象物は、共通の基本焦点位置で撮影されるため、合焦点具合を一致させることができ、見た目にもばらつきのない自然な画像を得ることができる。
【００６４】
また、情報取得とは別に、後からまとめて純粋な撮影だけを行うことで、短時間で全コマをそれぞれ複数段階の焦点位置で撮影できる。これにより、環境変化に対する影響を最小限にする。
【００６５】
このため、コマ毎の撮影の度に情報取得を行う従来例での撮影時間１７０１に対し、本実施例による方法では、事前にまとめて情報取得を行っているので大幅に撮影時間１７０２が短縮できている。
【００６６】
＜実施例１＞
図９は実施例１におけるパノラマ撮影範囲の説明図である。図１０は撮影領域の設定の説明図である。図１１は取得した距離情報の説明図である。図１２は撮影領域ごとの基本焦点位置の選択の説明図である。
【００６７】
実施例１では、取得した距離情報から割り当てまでの方法について、具体的な撮影例を挙げて詳細に説明する。
【００６８】
図９の（ａ）に示すように、パノラマ撮影したい撮影範囲６００には、（ｂ）に示す各距離に撮影対象物が存在する。遠距離物６０１として山があり、中距離物６０２として木があり、近距離物６０３として家がある。図９の（ｂ）は、同じ撮影対象範囲を横から眺めたイメージで、各撮影対象物の距離を表している。遠距離物７０１は４０ｍより後方に、中距離物７０２は１５ｍ付近に、近距離物７０３は１０ｍ付近に位置する。
【００６９】
図１０に示すように、撮影範囲は、４分割パノラマ撮影される。ここでは、説明を簡単にするため、撮影範囲全体を縦２枚、横２枚に４分割して４つのコマ（撮影領域）８０１を撮影する場合を想定した。コマ８０１の撮影に使用するレンズは、焦点距離２００ｍｍ、絞りはＦ１６を使用する。
【００７０】
撮影範囲を４分割パノラマ撮影する時、一コマ８０１分の撮影範囲は、全体の撮影範囲の１／４の面積より少し広い範囲を撮影している。これは、撮影後に画像処理によるつなぎ合わせ（スティッチング）を行うため、各コマ間で重複撮影される範囲８０２、８０３、８０４を含むためである。
【００７１】
上述したように、図６に示すマルチフォーカスエリアセンサ５００をコマ８０１に重ねて撮影領域内の８×８のフォーカスポイント５０１で合焦点検出が行われて、距離情報取得が実行される。４つのコマ８０１で合焦点検出が行われた結果が、図１１に示すように、フォーカスポイント（５０１：図６）ごとに距離（ｍ）を書き入れて表される。上述したように、空や距離検出不能箇所は∞として扱っている。
【００７２】
表２は、コマ番号１〜４の各コマ８０１で距離別に検出されたフォーカスポイント数の集計結果である。右側の列に各コマの情報を全て合計した総合の合焦点点数を算出して示している。これらの数値が距離情報として制御装置２０３に記憶される。なお、重複撮影される範囲８０２，８０３，８０４については、いずれかのコマの距離情報だけをカウントする、または、重複コマ間の平均値を取る等の方法により、重複カウントがないようにして集計される。
【００７３】
【表２】
【００７４】
制御装置２０３は、表２の距離情報を用いて、図７に示すように、距離別の頻度をグラフ化した総合距離ヒストグラム１３００を作成する。そして、総合距離ヒストグラム１３００に基づいて基本焦点位置１３０１〜１３０４の設定を行う。基本焦点位置１３０１、１３０２、１３０３、１３０４は、被写界深度内に撮影対象物が存在する距離が入るよう、無限遠から順番に並べて、被写界深度Ａ、Ｂ、Ｃ、Ｄがお互いに繋がるようにする。ただし、途中に撮影対象物が存在しない距離域があれば、そこは飛び越すように設定して、最終的に用いる基本焦点位置の数をなるべく減らすようにしている。
【００７５】
図７は、総合距離ヒストグラム１３００に４つの基本焦点位置１３０１、１３０２、１３０３、１３０４を設定した結果を表している。作成した総合距離ヒストグラム１３００を基に、使用するレンズの絞り値と焦点位置によって決まる被写界深度Ａ、Ｂ、Ｃ、Ｄで総合距離ヒストグラム１３００を距離方向に分割する。そして、撮影対象物が存在する全距離を被写界深度Ａ、Ｂ、Ｃ、Ｄがカバーするように基本焦点位置１３０１、１３０２、１３０３、１３０４を設定している。
【００７６】
撮影範囲の全体を通じて撮影対象物が存在しない距離範囲を除いて、撮影対象物が存在する全距離を被写界深度Ａ、Ｂ、Ｃ、Ｄが４分割している。これにより、各コマ８０１の撮影領域における８×８のフォーカスポイント５０１がいずれかの撮影画像で所定水準の合焦点となる。
【００７７】
ここで、合焦点の品質は、許容錯乱円径で表される。許容錯乱円径とは、点の撮影対象物に合焦点させた時、本来なら点として撮像されるものが、焦点位置がずれていくにつれ点ではなく、ぼけた円形状に撮像される。これを錯乱円と呼び、この錯乱円が人の眼に点としてみえる許容限界が許容錯乱円径である。例えば、フルサイズと呼ばれる３５ｍｍカメラでは、Ｅサイズのプリントを想定して、許容錯乱円径を１／３０ｍｍ＝０．０３３ｍｍとして、被写界深度を計算するのが一般的である。
【００７８】
図７では、許容錯乱円径が１／３０ｍｍ＝０．０３３ｍｍ以下となるように、基本焦点位置１３０１、１３０２、１３０３、１３０４が被写界深度Ａ、Ｂ、Ｃ、Ｄを接続している。人が眼で見た時に合焦点であると感じる被写界深度Ａ、Ｂ、Ｃ、Ｄの限界を、許容錯乱円径＝０．０３３ｍｍまでと想定して、その幅で隣り合う被写界深度幅を順番に繋いでいる。
【００７９】
なお、人が眼で見た時に合焦点であると感じる許容錯乱円径の値は、最終的な引き伸ばしサイズや画像の種類等によっては、０．０３３ｍｍが最適な値とは限らない。そのため、目的に応じて許容錯乱円径の値は変えても良い。
【００８０】
具体的には、まず、１つ目の基本焦点位置１３０１を、無限遠が被写界深度の後端ぎりぎりに入る距離である過焦点距離に設定する。レンズ焦点距離ｆ、絞り値Ｎ、許容錯乱円径ｃとした時、過焦点距離Ｈは以下の式で求められる。
【００８１】
【数１】
【００８２】
また、表３に代表的なレンズの焦点距離と絞り値による過焦点距離の一覧を示した。
【００８３】
【表３】
【００８４】
表３に示すように、実施例１では、レンズ焦点距離２００ｍｍ、絞り値Ｆ１６なので、基本焦点位置１３０１の被写界深度Ａにおける長距離側の過焦点距離は７５．８ｍとなる。従って、７５．８ｍに基本焦点位置を設定すると、そこから後方は全て被写界深度内に入る。
【００８５】
これに対して、短距離側の過焦点距離の場合は、その１／２の距離、すなわち約３８ｍまで被写界深度に入る。このため、基本焦点位置１３０１は、３８ｍから無限遠の範囲をカバーできる。
【００８６】
次に、２つ目の基本焦点位置１３０２の設定を行う。総合距離ヒストグラム１３００を見ると、約２０ｍから４０ｍの間には何も撮影物が存在していない。このため、その間は飛ばして、２つ目の基本焦点位置１３０２は、次に撮影対象物が存在する２０ｍ付近から割り当てていく。
【００８７】
撮影対象物までの距離ｓ、被写界深度前端距離ＤＮ、被写界深度後端距離ＤＦとした時、被写界深度は以下の式で求められる。
【００８８】
【数２】
【００８９】
ここで求めた被写界深度幅を基に、さらに基本焦点位置１３０２の被写界深度Ｂの前端に、３つ目の基本焦点位置１３０３の被写界深度Ｃの後端をつなぎ、同じように４つ目の基本焦点位置１３０４の被写界深度Ｄをつなぐ。
【００９０】
このようにして、撮影対象物が存在する距離範囲の全てをカバーできるまで被写界深度Ａ、Ｂ、Ｃ、Ｄを連結できたら、基本焦点位置１３０１〜１３０４の設定が終了となる。実施例１では、４つの基本焦点位置１３０１〜１３０４を設定することで、存在する撮影対象物までの全ての距離をカバーできる。
【００９１】
次に、制御装置２０３は、図１２に示すように、コマ番号１〜４のコマ８０１毎の合焦点分布ヒストグラムを作成する。
【００９２】
その後、４つの基本焦点位置１３０１〜１３０４の中から、コマ８０１毎の合焦点分布ヒストグラムに、それぞれのコマに存在する撮影対象物全てをカバーできる基本焦点位置を各々選択して割り当てる。
【００９３】
実施例１では、コマ番号１の撮影領域では、基本焦点位置１３０１が選択される。コマ番号２の撮影領域でも基本焦点位置１３０１が選択される。コマ番号３の撮影領域では、基本焦点位置１３０１、１３０２が選択される。コマ番号４の撮影領域では、基本焦点位置１３０１、１３０３、１３０４が選択される。その結果、撮影範囲全体での撮影枚数は７枚となる。
【００９４】
実施例１の方法では、予めパノラマ撮影範囲全体の総合距離ヒストグラムを作成し、各コマの距離ヒストグラムに対応した基本焦点位置を選択し、最後にまとめて全体の撮影を行う。これにより、無駄な撮影をなくして、撮影時間短縮と、撮影画像の後処理の負荷軽減が図れる。また、隣接コマ間の撮影条件が統一されているので、画像合成した時につながりが良く、見た目にも自然で違和感の少ないパノラマ写真画像が得られる。
【００９５】
＜実施例１の効果＞
実施例１のパノラマ撮影システム２００では、撮影手段の一例であるカメラ２０１は、撮影範囲を分割した個別の撮影領域を撮影可能であって、レンズの焦点位置を変化させて撮影領域内の合焦点情報を出力可能である。移動手段の一例である自動雲台２０２は、カメラ２０１を移動させて異なる撮影領域をカメラ２０１に設定可能である。制御手段の一例である制御装置２０３は、カメラ２０１と自動雲台２０２を制御して、それぞれの撮影領域について撮影画像を取得させる。
【００９６】
制御装置２０３は、複数の撮影領域でレンズの焦点位置を変化させて被写体までの距離を測定する。そして、複数の撮影領域での測定結果に基いて、撮影領域ごとに焦点位置を定めた後に、カメラ２０１と自動雲台２０２を制御して、撮影領域ごとに定めた焦点位置をレンズに設定して複数の撮影領域について連続撮影を実行する。
【００９７】
このため、被写体までの距離を測定して焦点位置を定めて撮影画像を取得するサイクルを撮影領域ごとに繰り返す場合よりも、カメラ２０１の撮影開始から撮影終了までの時間を短縮できる。
【００９８】
表示手段の一例である表示部２０４は、レンズの焦点位置を変化させて合焦点と判断した検出位置の数の焦点位置に対する分布を示すヒストグラムを表示する。このため、撮影開始前に、使用する焦点位置が適正か否かをユーザーが的確に判断できる。
【００９９】
制御装置２０３は、複数の撮影領域について共通に設定された複数種類の焦点位置から選択した焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を実行可能である。このため、複数の焦点位置の画像を合成した高品質なパノラマ画像が得られる。撮影領域ごとの焦点位置の検出に時間がかかる分、カメラ２０１の撮影開始から撮影終了までの時間短縮効果はさらに顕著になる。
【０１００】
カメラ２０１は、撮影領域に分散して設定された複数の検出位置の合焦点情報を出力可能であって、制御装置２０３は、複数の撮影領域に含まれるすべての検出位置について所定水準の合焦点が得られるように複数種類の焦点位置を設定する。このため、画面の隅々までピントの合った撮影領域の画像を合成できる。各コマでばらばらの焦点位置を用いる場合よりもパノラマ合成された画像の品質が高まる。
【０１０１】
カメラ２０１は、個別の撮影領域の撮影に際しては、その撮影領域に含まれるすべての検出位置について所定水準の合焦点が得られるように複数種類の焦点位置の中から選択した焦点位置をレンズに設定する。このため、画面の隅々までピントの合った撮影領域の画像を合成できる。複数種類の焦点位置をすべて設定して撮影領域の撮影を行う場合よりも撮影画像の枚数を削減して、カメラ２０１の撮影開始から撮影終了までの時間短縮効果はさらに顕著になる。
【０１０２】
＜実施例２＞
図１３は合焦点の水準の違いによる焦点位置の違いの説明図である。図１４は実施例２における基本焦点位置の設定の説明図である。図１５は実施例２における撮影領域ごとの基本焦点位置の選択の説明図である。
【０１０３】
実施例２では、パノラマ撮影の基本的な制御の流れは実施例１と共通である。また、図１〜図６を参照して説明したパノラマ撮影システムの構成及び制御についても実施例１と同様である。
【０１０４】
実施例１との違いは、基本焦点位置の設定に際して前提とする合焦点の水準にある。実施例１では、合焦点とみなす被写界深度の限界は、許容錯乱円径＝０．０３３ｍｍで固定として、その幅で隣り合う焦点域を繋いでいた。しかし、実施例１で説明したように、許容錯乱円径の値をどこまで被写界深度とみなすかは、最終的な画像の鑑賞サイズと視聴距離により変化する。
【０１０５】
完成した画像を大きく引き伸ばして展示するケースでは、２つの基本焦点位置の合焦点領域のつなぎ目付近の焦点が甘いと感じる可能性もある。そこで、許容錯乱円径を小さくして、全体的によりシャープな仕上がりとすることが提案された。しかし、許容錯乱円径を小さくすると、それぞれの基本焦点位置に割り当てる被写界深度が狭くなり、基本焦点位置の数が増えて本番撮影の撮影回数が増えてしまう。結果として、撮影枚数が大幅に増えて、それに伴い撮影時間も延びてしまう。
【０１０６】
図１３に示すように、焦点距離２００ｍｍのレンズを使用して絞り値Ｆ１６で撮影する場合の、許容錯乱円径＝０．０３３ｍｍと、０．０２５ｍｍの場合の、基本焦点位置の数の比較を示した。
【０１０７】
これによると、許容錯乱円径＝０．０３３ｍｍでの割り当て例１８０１では、７ｍから無限遠までの距離を６分割でカバーしている。これに対して、許容錯乱円径＝０．０２５ｍｍでの割り当て例１８０２では、７．４ｍから無限遠までの距離を７分割でカバーしている。
【０１０８】
そこで、実施例２では、撮影範囲の中で目に付き易い面積の大きな距離範囲について、合焦点の水準を高くしている。撮影範囲に占める面積の小さな距離範囲は、目立たないので合焦点の水準を低くしている。
【０１０９】
図１４に示すように、総合距離ヒストグラムに閾値を設け、閾値を境にして、その上と下で総合距離ヒストグラムの高さに応じて２段階の許容錯乱円径を設定し、許容する被写界深度の幅を変えている。
【０１１０】
総合距離ヒストグラムの高い部分は、同じ距離域の撮影対象物の面積が広いことを表しており、この部分に関して許容錯乱円径＝０．０２５ｍｍを設定して被写界深度を狭く割り当てて、撮影対象物がシャープに写るようにする。
【０１１１】
図１４は、実施例１での撮影例と同じ撮影範囲に実施例２の基本焦点位置を適用した場合の撮影範囲全体における基本焦点位置の割り当て結果である。実施例１の許容錯乱円０．０３３ｍｍ固定による方法では、４分割だったものが、実施例２では５分割（１９０１〜１９０５）になっている。なお、許容錯乱円径の設定、閾値の設定は、図３の設定画面の項目に追加しても良いし、システムによる推奨値での自動設定としても良い。
【０１１２】
図１５に示すように、コマ番号１〜４の撮影領域に割り当てる基本焦点位置が、コマ毎のヒストグラムに基づいて選択される。コマ番号１の撮影領域では、基本焦点位置１９０１のみを割り当てて被写界深度ａの撮影が１回だけ実行される。コマ番号２の撮影領域では、基本焦点位置１９０１のみを割り当てて被写界深度ａの撮影が１回だけ実行される。コマ番号３の撮影領域では、基本焦点位置１９０１、１９０２、１９０３を割り当てて３つの被写界深度ａ、ｂ、ｃを繋いだ３回の撮影が実行される。最後に、コマ番号４の撮影領域では、基本焦点位置１９０１、１９０２、１９０４、１９０５を割り当てて４つの被写界深度ａ、ｂ、ｄ、ｅを繋いだ４回の撮影が実行される。
【０１１３】
これにより、撮影範囲全体での撮影枚数は、実施例１では７枚だったものが２枚増えて９枚となっている。しかし、これにより、図９の（ａ）に示す撮影領域の中で目立つ撮影対象物６０１の見かけの解像度、明瞭度、自然さが高められている。
【０１１４】
実施例２でも、基本焦点位置の設定は、実施例１と同じように、無限遠側から順番に全焦点域を網羅していくように並べていく。まず、１つ目の基本焦点位置を無限遠が被写界深度の後端ぎりぎりに入る距離である、過焦点距離に設定する。ただし、この時、割り当てようとする距離領域の距離ヒストグラムが閾値より高ければ、許容錯乱円径＝０．０２５ｍｍとし、通常よりやや狭い被写界深度範囲を使用して基本焦点位置を設定する。
【０１１５】
また、逆に割り当てようとする距離領域の距離ヒストグラムが閾値より低い場合は、通常の許容錯乱円径＝０．０３３ｍｍの被写界深度範囲を使用する。２つ目以降の基本焦点位置設定についても同様に、引き始めの距離ヒストグラムの高さが閾値より高いか低いかにより、いずれかの被写界深度幅を選択して繋いでいく。これにより、距離ヒストグラムが閾値より高い範囲では、許容錯乱円径＝０．０２５ｍｍの被写界深度範囲を使用することになり、焦点合成したつなぎ目の画質が向上する。
【０１１６】
以上のようにして、実施例２では、距離ヒストグラムの高さに応じて被写界深度の許容幅を変更する。面積の大きい距離域の被写界深度に対する許容値を厳しくし、全体的な撮影枚数増加を抑えつつ、最終的な仕上がりの改善、特に焦点のつなぎ目の画質向上を図っている。
【０１１７】
実施例２のパノラマ撮影システム２００では、複数の撮影領域に含まれるすべての検出位置について複数種類の焦点位置のそれぞれで合焦点とみなせる検出位置の数を求めている。そして、それぞれの焦点位置で合焦点とみなす検出位置の数の差が少なくなるように、複数種類の焦点位置のそれぞれにおける合焦点の水準を異ならせている。すなわち、それぞれの焦点位置の焦点深度範囲における総合距離ヒストグラム下の面積差が小さくなるように実施例１とは、焦点深度範囲を変更する。合焦点の検出数が多い（ヒストグラム下面積が大きい）焦点位置範囲では、焦点位置の刻みを小さくして、各焦点位置に割り当てるヒストグラム面積差を小さくする。許容錯乱円を小さく選択することで、合焦点の水準を高くする。
【符号の説明】
【０１１８】
２０１ カメラ、２０２ 自動雲台、２０３ 制御装置
２０４ 表示部、２０５ 入力部、２０６ パン機構
２０７ チルト機構、２０８ モータコントローラ
３００ 設定画面、５００ マルチエリアフォーカスセンサ
６０１、６０２ 撮影対象物、１３００ 総合距離ヒストグラム
１３０１、１３０２、１３０３、１３０４ 基本焦点位置
１６００ 距離情報取得結果表示画面
１６０１ 総合距離ヒストグラム、１６０２ コマ毎の距離ヒストグラム
１６０３ 撮影開始ボタン
【技術分野】
【０００１】
本発明は、撮影範囲を分割して設定したそれぞれの撮影領域でレンズの焦点位置を異ならせた複数枚の写真画像を撮影する画像撮影装置に関する。
【背景技術】
【０００２】
パノラマ風景写真、医療用高解像度写真、山岳航空写真等の分野において、撮影範囲を分割して設定したそれぞれの撮影領域でレンズの焦点位置を異ならせた複数枚の写真画像を撮影する画像撮影装置が実用化されている。
【０００３】
特許文献１には、パノラマ風景写真を自動撮影する画像撮影装置が示される。ここでは、撮影範囲を分割して複数の撮影領域を予め設定すると、デジタルカメラの支持機構がデジタルカメラの画角をそれぞれの撮影領域に自動的に位置決めて連続的に写真撮影する。
【０００４】
特許文献２には、医療用高解像度写真の撮影範囲を自動撮影する画像撮影装置が示される。ここでは、撮影領域を分割して設定した撮影領域で写真撮影が行われるごとに撮影した写真を順次合成して表示装置に画像表示している。
【０００５】
ところで、写真画像をつなぎ合わせて得られる合成写真の解像度を上げるために、焦点距離の長いレンズを用いて視野角を狭くし、それぞれの領域をより拡大して撮影するという方法がある。しかし、焦点距離の長いレンズでは、焦点距離の短いレンズに比べ、撮影距離、絞り値、焦点位置等の撮影条件が同じであれば、被写界深度が浅くなる。このため撮影領域内に様々な距離の被写体が混在すると、焦点位置付近の被写体にはピントが合うものの、焦点位置から距離が離れた被写体ではピントがぼけて解像度が低下した画像となってしまい、撮影領域全体を高解像度に撮影することができない。
【０００６】
このため、１つの撮影領域でレンズの焦点位置を複数段階に変化させて複数枚の写真画像を取り込み、それぞれの写真画像のピントの合った部分だけをつなぎ合わせて隅々までピントが合った画像を合成する技術が実用化されている。
【０００７】
特許文献３には、分割されていない１枚の写真撮影において、自動的にレンズの焦点位置を複数段階に変化させて複数枚の写真画像を取り込む制御が示される。ここでは、写真撮影に先立たせて、レンズの焦点位置を複数段階に異ならせて、撮影領域の予備撮影を行って撮影画像内の合焦点を判断し、本番撮影でレンズに設定する複数段階の焦点位置を設定している。
【０００８】
特許文献４には、撮影前に被写体（撮影対象物）が存在する位置と距離を事前に把握し、被写体が存在しない焦点位置は撮影しないという制御が提案されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０００−３２４３８０号公報
【特許文献２】特開平９−１７３２９８号公報
【特許文献３】特開２００９−９２８９２号公報
【特許文献４】特開平１０−１０８０５７号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
これら従来技術の組み合わせで、パノラマ撮影装置を構成した場合、各領域の撮影直前に、毎回被写体状況を取得し、撮影に使用する焦点位置を決定するという前処理を行うため、２つの撮影領域の撮影間隔が広がることになる。
【００１１】
撮影領域が２〜５枚程度であれば、前記前処理に要する時間はそれほど問題にならない。しかし、広範囲な撮影領域を長時間かけて多数枚の分割撮影を行う場合、前処理に要する時間も累積的に大きくなり、無視できなくなってくる。その結果、撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域とでは大きな時間差が発生して、明るさや被写体状況（影の方向、人通り等）が大幅に異なる場合がある。そして、そのような撮影領域の画像を合成して得られた合成写真は、きわめて不自然なものとなり、写真品質や情報精度が低いと評価されてしまう。
【００１２】
本発明は、パノラマ撮影において撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域との間の撮影の時間差を短縮して、合成画像の写真品質や情報精度を高めることができる画像撮影装置を提供することを目的としている。
【課題を解決するための手段】
【００１３】
本発明の画像撮影装置は、撮影範囲を分割した個別の撮影領域を撮影可能であって、レンズの焦点位置を変化させて撮影領域内の合焦点情報を出力可能な撮影手段と、前記撮影手段を移動させて異なる前記撮影領域を前記撮影手段に設定可能な移動手段と、前記撮影手段と前記移動手段を制御して、それぞれの撮影領域について撮影画像を取得させる制御手段とを備えるものである。そして、前記制御手段は、前記複数の撮影領域でレンズの焦点位置を変化させて被写体までの距離を測定し、前記複数の撮影領域での測定結果に基いて撮影領域ごとに焦点位置を定めた後に、前記撮影手段と前記移動手段を制御して、撮影領域ごとに定めた焦点位置をレンズに設定して前記複数の撮影領域について連続撮影を実行する。
【発明の効果】
【００１４】
本発明の画像撮影装置では、移動手段を用いて複数の撮影領域を次々に撮影手段に設定してレンズの焦点位置の決定に必要な情報をまとめて取得する。そして、取得した情報に基づいて個別の撮影領域で用いるレンズの焦点位置を決定した後に、複数の撮影領域の本番撮影を連続的に実行する。
【００１５】
従って、撮影範囲の中で最初に撮影した撮影領域と最後に撮影した撮影領域との間の撮影の時間差を短縮できる。また、すべての撮影領域で取得した情報に基づいてレンズの焦点位置の選択肢を設定できるため、撮影領域ごとにばらばらなレンズの焦点位置で撮影が行われることを回避できる。これにより、合成画像の写真品質や情報精度を高めることができる。
【図面の簡単な説明】
【００１６】
【図１】パノラマ撮影システムの構成の説明図である。
【図２】手動撮影画面の説明図である。
【図３】設定画面の説明図である。
【図４】自動撮影画面の説明図である。
【図５】パノラマ自動撮影モードのフローチャートである。
【図６】マルチエリアフォーカスセンサによる合焦点検出位置の説明図である。
【図７】ヒストグラムを用いた基本焦点位置の設定の説明図である。
【図８】撮影時間短縮効果の説明図である。
【図９】実施例１におけるパノラマ撮影範囲の説明図である。
【図１０】撮影領域の設定の説明図である。
【図１１】取得した距離情報の説明図である。
【図１２】撮影領域ごとの基本焦点位置の選択の説明図である。
【図１３】合焦点の水準の違いによる焦点位置の違いの説明図である。
【図１４】実施例２における基本焦点位置の設定の説明図である。
【図１５】実施例２における撮影領域ごとの基本焦点位置の選択の説明図である。
【発明を実施するための形態】
【００１７】
以下、本発明の実施形態を、図面を参照して詳細に説明する。本発明は、情報取得のカメラスキャンに続いて写真撮影のカメラスキャンを行う限りにおいて、実施形態の構成の一部又は全部を、その代替的な構成で置き換えた別の実施形態でも実施できる。
【００１８】
本実施形態では、パノラマ風景写真の撮影システムを説明するが、本発明は、医療用高解像度写真、山岳航空写真等の分野でも利用できる。
【００１９】
なお、特許文献１〜４に示される画像撮影装置の構成やカメラ制御、写真画像のパノラマ合成処理等に関する一般的な事項については、図示を省略して重複する説明を省略する。
【００２０】
＜比較例＞
近年、デジタルスチルカメラ用撮像素子の高解像度化が進み、高解像度の写真が誰にでも手軽に撮影できるようになった。また、カメラ単体での撮影では得られなかった広範囲を１枚に再現するパノラマ写真も、カメラ内蔵のパノラマ撮影アシスト機能等を利用することで、簡単に得られるようになっている。パノラマ撮影では、カメラの方向を一定角度ずつ移動させながら複数枚の写真を撮影し、撮影後にパソコンのスティッチングソフトを使用して合成処理を行う。
【００２１】
カメラ内蔵のパノラマ撮影アシスト機能を利用して風景等のパノラマ撮影を行う場合には、カメラ単体での広角域の撮影可能範囲を補い、より広画角の画像を得ることが目的となる。このため、撮影は広角系のレンズで行われ、分割する枚数も、せいぜい２〜５枚程度である。これに対して業務用途では、望遠系のレンズを使用し、分割する１コマ（撮影領域）の撮影範囲を狭めて高解像度に撮影する高精細多分割パノラマ撮影が、イベントや文化財の保存を目的に行われている。
【００２２】
また、風景のパノラマ撮影においては、撮影範囲に含まれる撮影対象物の距離が、近距離から遠距離まで広範囲にわたることがある。このため、高解像度を目的に望遠系のレンズを使用して撮影すると、広角系レンズを使用する場合には問題とならなかった被写界深度の浅さが問題となってくる。
【００２３】
被写界深度の浅さを補うために、レンズの焦点位置を複数段階に異ならせて同じ撮影領域を複数枚撮影し、撮影後に複数枚の画像を合成処理して被写界深度を稼ぐ、焦点合成という方法があり、単体の専用ソフトウエアとしても市販され広く利用されている。
【００２４】
しかし、高精細パノラマ撮影では、分割枚数が多いことに加え、撮影領域毎に焦点合成用の焦点位置を異ならせた複数枚の画像を撮影する必要があり、トータルの撮影枚数は膨大となる。また、これに伴い撮影時間も長くなり、条件次第では数時間に及ぶこともある。
【００２５】
野外で行う高精細パノラマ撮影においては、撮影時間が長くなると、撮影開始時と撮影終了時で環境が大きく変化し、大きな問題を引き起す。一例としては、「太陽の位置による影の向きの変化」、「天候による明るさの変化」、「風による雲の変化」が挙げられる。これらの環境変化があまりにも大きいと、撮影後に行うスティッチング処理で、きれいに繋がらないという不具合を生じ、長時間かけて撮影した写真が使えず無駄になることがある。また、トータルの撮影枚数の多さから、撮影後に行う画像のスティッチングや各焦点位置の画像の合成処理への負担も大きい。
【００２６】
また、高精細パノラマ撮影においては、撮影後に行う各焦点位置で撮影した画像の合成やスティッチング合成処理が画質に大きな影響を与える。そのため、できるだけコマ間の撮影条件を一致させておくことが、撮影時間の短縮と並び重要である。
【００２７】
ここで、特許文献４に示される制御をパノラマ撮影に応用した場合、被写体が存在しない距離での余分な撮影はしないので、トータルの撮影枚数の削減は行える。しかし、純粋な撮影動作よりも時間のかかる被写体状況の取得を、コマ毎の撮影前に単独で毎回行うことになるので、全てのコマを撮影する時間については長くなる（図８参照）。また、各コマは、そのコマの単独の状況だけを基に独立して撮影されるため、パノラマ撮影の各コマ間の相関を考慮した撮影を行うことは難しい。
【００２８】
特許文献３では、被写界状況に応じて各被写体に合焦点した画像を効率良く取得しているが、パノラマ撮影に適用した場合には、特許文献４と同様、各コマ独立での撮影となるため、コマ間の撮影条件を統一することが難しい。
【００２９】
＜実施の形態＞
これに対して、本実施例では、撮影時間の短縮とコマ毎の相関を考慮した撮影が可能な、高精細画像のパノラマ撮影システムが提供される。本実施例のパノラマ画像の撮影方法は、レンズの焦点位置を変化させて撮影領域の合焦点情報を出力可能なカメラを用いて、撮影範囲に設定した複数の撮影領域の画像を撮影する。
【００３０】
第１工程の一例であるファーストカメラスキャンでは、個別の撮影領域でレンズの焦点位置を変化させて、撮影領域内の複数の検出位置について所定水準の合焦点が得られる焦点位置を測定する操作を、複数の撮影領域で連続的に実行する。
【００３１】
続く第２工程の一例である撮影条件設定では、ファーストカメラスキャンでの測定結果に基いて、複数の撮影領域のすべての検出位置について所定水準の合焦点が得られる複数種類の基本焦点位置を定める。
【００３２】
さらに、第３工程の一例であるセカンドカメラスキャンでは、複数の撮影領域の撮影を連続的に実行する。撮影条件設定で設定した複数種類の基本焦点位置から選択した個別の焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を行う。
【００３３】
そして、第２工程の一例である撮影条件設定では、すべてのコマの距離情報に基づいて撮影範囲全体の総合距離ヒストグラムを作成し、総合距離ヒストグラムに基づいて撮影に使用する複数の基本焦点位置を設定する。
【００３４】
＜画像撮影装置＞
図１はパノラマ撮影システムの構成の説明図である。図２は手動撮影画面の説明図である。図３は設定画面の説明図である。図４は自動撮影画面の説明図である。
【００３５】
図１の（ａ）、（ｂ）に示すように、パノラマ撮影システム２００は、カメラ２０１を自動雲台２０２に取り付けており、カメラ２０１及び自動雲台２０２は、表示部２０４を有する制御装置２０３によって総合的に制御される。制御装置２０３は、入力部２０５を通じて撮影条件等が入力操作され、演算処理した各種情報を表示部２０４に表示する。
【００３６】
自動雲台２０２のパン機構２０６は、カメラ２０１を垂直な軸の周りで回転させて水平方向に画角を移動させる。自動雲台２０２のチルト機構２０７はカメラ２０１を水平な軸の周りで回転させて垂直方向に画角を移動させる。自動雲台２０２のモータコントローラ２０８は、制御装置２０３からの指令信号に応じてパン機構２０６及びチルト機構２０７を作動させる。
【００３７】
パノラマ撮影システム２００を起動すると、制御装置２０３の表示部２０４に、図２に示すように、手動撮影画面４００が表示される。図１を参照して示すように、パノラマ撮影システム２００は、手動撮影画面４００を表示した状態で手動撮影モードの撮影を実行可能である。手動撮影画面４００は、表示部２０４に撮影範囲を表示し、撮影範囲の中に設定された複数のコマ（撮影領域）４０１を一覧表示する。そして、個別のコマを撮影するごとに、制御装置２０３は、撮影範囲の対応するコマ位置に撮影画像の縮小画像を表示する。
【００３８】
表示部２０４に撮影範囲を表示して、撮影範囲内のコマ４０１を指定してボタン４０２を操作すると、自動雲台２０２が作動して、カメラ２０１の画角を実際の撮影範囲の指定されたコマ４０１に位置決める。そして、ボタン４０４を押すと、指定されたコマ４０１の写真撮影が実行される。
【００３９】
手動撮影画面４００のボタン４０６を押すと、図３に示すように、パノラマ撮影条件に関する設定画面３００が表示される。図１を参照して示すように、パノラマ撮影システム２００は、表示部２０４を通じてパノラマ撮影条件の設定を行うことで、その設定内容に応じたパノラマ自動撮影モードを実行可能である。パノラマ自動撮影モードでは、撮影範囲を分割したそれぞれのコマ（撮影領域）でカメラ２０１のレンズの焦点位置を段階的に変化させて、撮影対象物までの距離を測定する。すべての撮影領域で測定を実行し終わると、制御装置２０３は、測定結果に基いて複数段階の基本焦点位置を求めた後、コマ毎の撮影に使用する焦点位置を、基本焦点位置の中から選択する。
【００４０】
そして、その結果を図４に示すように、距離ヒストグラムと共に距離情報取得結果表示画面１６００に表示する。そして、撮影者が焦点位置の確認を行った後、撮影開始ボタン１６０３を押すと、制御部２０３は、パノラマ撮影条件の設定画面３００で設定された条件を用いて複数のコマの連続撮影を一気に実行する。
【００４１】
図３に示すように、設定画面３００には、設定項目ごとの現在の設定状況が表示され、それぞれの設定項目を選択すると、各設定項目に対する選択肢３０１の設定画面が追加表示される。図３の例では、絞り値にＦ１６を設定する時の様子を表している。
【００４２】
設定できる項目は、パノラマ撮影条件に関するものであり、表１に一覧として示す。ここに挙げた項目は代表的なものであり、撮影目的等により、さらに細かな設定項目を追加してもよいし、不要な項目を省いてシステムを簡略化してもよい。
【００４３】
【表１】
【００４４】
表１中、最低限、手動で設定が必要な項目としては、全体の撮影範囲を指定する「撮影画角範囲」のみである。他の項目については、撮影者に設定させることも可能であるし、制御装置２０３による推奨値での自動設定とすることも可能である。
【００４５】
表１の各項目の他に、カメラ２０１の基本設定として、一般的に設定する必要がある項目、例えば、記録画質やＩＳＯ感度等は、設定画面３００の項目に追加することも可能であるが、システムの動作説明においては必須ではない。よって、カメラ本体で別途設定されているものとし、説明からは省略する。
【００４６】
＜パノラマ自動撮影モード＞
図５はパノラマ自動撮影モードのフローチャートである。図６はマルチエリアフォーカスセンサによる合焦点検出位置の説明図である。図７はヒストグラムを用いた撮影基本焦点位置の設定の説明図である。図８は撮影時間短縮効果の説明図である。
【００４７】
図１を参照して図５に示すように、撮影者が設定画面３００を通じてパノラマ撮影条件を設定し（Ｓ１０１）、その後、図２の設定画面３００の下部にある「距離情報取得開始」ボタン３０２が押される（Ｓ１０２）。
【００４８】
すると、制御装置２０３は、自動雲台２０２を作動させて、設定された最初のコマ（撮影領域）へ向けてカメラ２０１の画角を位置決める（Ｓ１０３）。続いて、カメラ２０１のレンズのフォーカスリング２１１を無限遠（∞）へ移動させ、撮影対象物の距離情報の取得を開始する（Ｓ１０４）。
【００４９】
図６に示すように、マルチエリアフォーカスセンサ５００は、カメラ２０１の撮影領域全体を等間隔に区切って８×８のフォーカスポイント５０１を配置している。なお、マルチエリアフォーカスセンサの分割数や配置分布位置については、分割数を増やして複雑な距離情報を持つ被写体に対応する等、撮影目的に応じて変更してもよい。
【００５０】
制御装置２０３は、レンズのフォーカスリング２１１を回転しながら、マルチエリアフォーカスセンサ５００により、８×８のフォーカスポイント５０１における撮影対象物の合焦点を検出する（Ｓ１０５）。最初の距離、すなわち∞で合焦点が検出できなかった場合（Ｓ１０５のＮ）、焦点位置が予め設定された位置まで到達していなければ（Ｓ１０８のＮ）、レンズのフォーカスリング２１１を至近側へ１ステップ移動させる（Ｓ１０６）。そして、再び合焦点検出を行う（Ｓ１０５）。
【００５１】
一方、マルチエリアフォーカスセンサ５００が、どこかのフォーカスポイント５０１で合焦点を検出できた場合（Ｓ１０５のＹ）、制御装置２０３は、検出した距離とフォーカスポイントの数をメモリに記録する。
【００５２】
その後、焦点位置が、予め設定された位置まで到達していなければ（Ｓ１０８のＮ）、レンズのフォーカスリング２１１を１ステップ至近側へ移動させて（Ｓ１０６）、再び合焦点検出を行う（Ｓ１０５）。
【００５３】
そして、最終的に、焦点位置が、予め設定された位置まで到達したら（Ｓ１０８のＹ）、そのコマ（撮影領域）の合焦点検出は終了となる。
【００５４】
次に、全コマの距離情報取得が終了していなければ（Ｓ１０９のＮ）、自動雲台２０２を次のコマ位置に移動する（Ｓ１０３）。そして、１コマ目と同様に、レンズのフォーカスリング２１１を移動させて、マルチエリアフォーカスセンサ５００を用いた合焦点検出を行って距離情報を取得する。このようにして、撮影範囲に予め設定された全コマ（全撮影領域）について距離情報の取得を繰り返す。
【００５５】
なお、距離情報取得において、撮影対象物が青空等の場合、合焦点の判断が難しく、どの距離においても合焦点を検出できないことがある。その場合、距離情報が得られず、そのコマは全く撮影されないこととなる。そうなると、後で繋げてパノラマ合成画像を形成する時に不具合が生じる。これを避けるため、どの距離においても合焦点を検出できないフォーカスポイントは青空とみなして、∞で合焦点を検出したものとして扱う。
【００５６】
制御装置２０３は、全コマの距離情報が取得できたら、全てのコマで共通な焦点位置の選択肢である撮影基本焦点位置（基本焦点位置）を決定する（Ｓ１１０〜Ｓ１１２）。隣接する２つの撮影領域にわたる撮影対象物の画像では、撮影時の焦点位置を揃えないと、つなぎ目が不自然になるからである。
【００５７】
制御装置２０３は、まず、各コマの情報を全て合計した総合の合焦点数を算出する（Ｓ１１０）。そして、算出した合焦点数を基に、図７に示すように、距離の刻みごとの合焦点検出フォーカスポイント数を現わす総合距離ヒストグラム１３００を作成する（Ｓ１１１）。そして、作成した総合距離ヒストグラム１３００を被写界深度Ａ〜Ｄで分割して、撮影範囲全体に渡って撮影対象物が存在する全距離で合焦点が得られる最小段階数の基本焦点位置１３０１〜１３０４を設定する（Ｓ１１２）。また、設定した複数の基本焦点位置１３０１〜１３０４の中から、個別のコマで撮影対象物が存在する全距離で合焦点が得られる基本焦点位置を選択する（Ｓ１１３、Ｓ１１４）。
【００５８】
制御装置２０３は、基本焦点位置の演算が終了すると、表示部２０４に、図４に示すように距離情報取得結果表示画面１６００を表示する（Ｓ１１５）。ここでは、撮影範囲全体に渡る総合距離ヒストグラム１６０１と設定された基本焦点位置、並びにコマ毎の距離ヒストグラム１６０２と選択された基本焦点位置が表示される。
【００５９】
撮影者は、表示部２０３に表示された基本焦点位置等の設定に問題がなければ、距離情報取得結果表示画面１６００の下部にある「撮影開始」ボタン１６０３を押す（Ｓ１１６）。すると、制御装置２０３は、自動雲台２０２を最初のコマに移動させ、カメラ２０１を最初に撮影するコマ方向へ向ける（Ｓ１１７）。そして、レンズのフォーカスリング２１１を、コマごとに設定された基本焦点位置の内で最遠方の値に移動させて（Ｓ１１８）撮影を行う（Ｓ１１９）。
【００６０】
現在撮影中のコマに、基本焦点位置が複数選択されている場合は、設定した基本焦点位置の全てで撮影が終了するまで（Ｓ１２０のＮ）、次の基本焦点位置へレンズのフォーカスリング２１１を移動させて（Ｓ１１８）撮影を繰り返す（Ｓ１１９）。
【００６１】
１コマ目の撮影が全て終了したら（Ｓ１２０のＹ）、自動雲台２０２を作動させてカメラ２０１の画角を次のコマ位置へ移動して（Ｓ１１７）同様な撮影手順（Ｓ１１７〜Ｓ１２０）を実行する。これを撮影範囲の全コマの撮影が終了するまで（Ｓ１２０のＹ）繰り返す。
【００６２】
図８に示すように、本実施例による方法でパノラマ撮影を行った場合の時間短縮効果を、コマ毎に距離情報を取得する比較例と対比して示した。本実施例では、撮影範囲全体の距離ヒストグラムから撮影に使用する基本焦点位置を事前に設定しておく。そして、各コマの撮影には、その基本焦点位置の中から当該コマの距離ヒストグラムに応じて撮影する基本焦点位置を選択する。
【００６３】
これにより、異なるコマ間においても、同じ距離域にある撮影対象物は、共通の基本焦点位置で撮影されるため、合焦点具合を一致させることができ、見た目にもばらつきのない自然な画像を得ることができる。
【００６４】
また、情報取得とは別に、後からまとめて純粋な撮影だけを行うことで、短時間で全コマをそれぞれ複数段階の焦点位置で撮影できる。これにより、環境変化に対する影響を最小限にする。
【００６５】
このため、コマ毎の撮影の度に情報取得を行う従来例での撮影時間１７０１に対し、本実施例による方法では、事前にまとめて情報取得を行っているので大幅に撮影時間１７０２が短縮できている。
【００６６】
＜実施例１＞
図９は実施例１におけるパノラマ撮影範囲の説明図である。図１０は撮影領域の設定の説明図である。図１１は取得した距離情報の説明図である。図１２は撮影領域ごとの基本焦点位置の選択の説明図である。
【００６７】
実施例１では、取得した距離情報から割り当てまでの方法について、具体的な撮影例を挙げて詳細に説明する。
【００６８】
図９の（ａ）に示すように、パノラマ撮影したい撮影範囲６００には、（ｂ）に示す各距離に撮影対象物が存在する。遠距離物６０１として山があり、中距離物６０２として木があり、近距離物６０３として家がある。図９の（ｂ）は、同じ撮影対象範囲を横から眺めたイメージで、各撮影対象物の距離を表している。遠距離物７０１は４０ｍより後方に、中距離物７０２は１５ｍ付近に、近距離物７０３は１０ｍ付近に位置する。
【００６９】
図１０に示すように、撮影範囲は、４分割パノラマ撮影される。ここでは、説明を簡単にするため、撮影範囲全体を縦２枚、横２枚に４分割して４つのコマ（撮影領域）８０１を撮影する場合を想定した。コマ８０１の撮影に使用するレンズは、焦点距離２００ｍｍ、絞りはＦ１６を使用する。
【００７０】
撮影範囲を４分割パノラマ撮影する時、一コマ８０１分の撮影範囲は、全体の撮影範囲の１／４の面積より少し広い範囲を撮影している。これは、撮影後に画像処理によるつなぎ合わせ（スティッチング）を行うため、各コマ間で重複撮影される範囲８０２、８０３、８０４を含むためである。
【００７１】
上述したように、図６に示すマルチフォーカスエリアセンサ５００をコマ８０１に重ねて撮影領域内の８×８のフォーカスポイント５０１で合焦点検出が行われて、距離情報取得が実行される。４つのコマ８０１で合焦点検出が行われた結果が、図１１に示すように、フォーカスポイント（５０１：図６）ごとに距離（ｍ）を書き入れて表される。上述したように、空や距離検出不能箇所は∞として扱っている。
【００７２】
表２は、コマ番号１〜４の各コマ８０１で距離別に検出されたフォーカスポイント数の集計結果である。右側の列に各コマの情報を全て合計した総合の合焦点点数を算出して示している。これらの数値が距離情報として制御装置２０３に記憶される。なお、重複撮影される範囲８０２，８０３，８０４については、いずれかのコマの距離情報だけをカウントする、または、重複コマ間の平均値を取る等の方法により、重複カウントがないようにして集計される。
【００７３】
【表２】
【００７４】
制御装置２０３は、表２の距離情報を用いて、図７に示すように、距離別の頻度をグラフ化した総合距離ヒストグラム１３００を作成する。そして、総合距離ヒストグラム１３００に基づいて基本焦点位置１３０１〜１３０４の設定を行う。基本焦点位置１３０１、１３０２、１３０３、１３０４は、被写界深度内に撮影対象物が存在する距離が入るよう、無限遠から順番に並べて、被写界深度Ａ、Ｂ、Ｃ、Ｄがお互いに繋がるようにする。ただし、途中に撮影対象物が存在しない距離域があれば、そこは飛び越すように設定して、最終的に用いる基本焦点位置の数をなるべく減らすようにしている。
【００７５】
図７は、総合距離ヒストグラム１３００に４つの基本焦点位置１３０１、１３０２、１３０３、１３０４を設定した結果を表している。作成した総合距離ヒストグラム１３００を基に、使用するレンズの絞り値と焦点位置によって決まる被写界深度Ａ、Ｂ、Ｃ、Ｄで総合距離ヒストグラム１３００を距離方向に分割する。そして、撮影対象物が存在する全距離を被写界深度Ａ、Ｂ、Ｃ、Ｄがカバーするように基本焦点位置１３０１、１３０２、１３０３、１３０４を設定している。
【００７６】
撮影範囲の全体を通じて撮影対象物が存在しない距離範囲を除いて、撮影対象物が存在する全距離を被写界深度Ａ、Ｂ、Ｃ、Ｄが４分割している。これにより、各コマ８０１の撮影領域における８×８のフォーカスポイント５０１がいずれかの撮影画像で所定水準の合焦点となる。
【００７７】
ここで、合焦点の品質は、許容錯乱円径で表される。許容錯乱円径とは、点の撮影対象物に合焦点させた時、本来なら点として撮像されるものが、焦点位置がずれていくにつれ点ではなく、ぼけた円形状に撮像される。これを錯乱円と呼び、この錯乱円が人の眼に点としてみえる許容限界が許容錯乱円径である。例えば、フルサイズと呼ばれる３５ｍｍカメラでは、Ｅサイズのプリントを想定して、許容錯乱円径を１／３０ｍｍ＝０．０３３ｍｍとして、被写界深度を計算するのが一般的である。
【００７８】
図７では、許容錯乱円径が１／３０ｍｍ＝０．０３３ｍｍ以下となるように、基本焦点位置１３０１、１３０２、１３０３、１３０４が被写界深度Ａ、Ｂ、Ｃ、Ｄを接続している。人が眼で見た時に合焦点であると感じる被写界深度Ａ、Ｂ、Ｃ、Ｄの限界を、許容錯乱円径＝０．０３３ｍｍまでと想定して、その幅で隣り合う被写界深度幅を順番に繋いでいる。
【００７９】
なお、人が眼で見た時に合焦点であると感じる許容錯乱円径の値は、最終的な引き伸ばしサイズや画像の種類等によっては、０．０３３ｍｍが最適な値とは限らない。そのため、目的に応じて許容錯乱円径の値は変えても良い。
【００８０】
具体的には、まず、１つ目の基本焦点位置１３０１を、無限遠が被写界深度の後端ぎりぎりに入る距離である過焦点距離に設定する。レンズ焦点距離ｆ、絞り値Ｎ、許容錯乱円径ｃとした時、過焦点距離Ｈは以下の式で求められる。
【００８１】
【数１】
【００８２】
また、表３に代表的なレンズの焦点距離と絞り値による過焦点距離の一覧を示した。
【００８３】
【表３】
【００８４】
表３に示すように、実施例１では、レンズ焦点距離２００ｍｍ、絞り値Ｆ１６なので、基本焦点位置１３０１の被写界深度Ａにおける長距離側の過焦点距離は７５．８ｍとなる。従って、７５．８ｍに基本焦点位置を設定すると、そこから後方は全て被写界深度内に入る。
【００８５】
これに対して、短距離側の過焦点距離の場合は、その１／２の距離、すなわち約３８ｍまで被写界深度に入る。このため、基本焦点位置１３０１は、３８ｍから無限遠の範囲をカバーできる。
【００８６】
次に、２つ目の基本焦点位置１３０２の設定を行う。総合距離ヒストグラム１３００を見ると、約２０ｍから４０ｍの間には何も撮影物が存在していない。このため、その間は飛ばして、２つ目の基本焦点位置１３０２は、次に撮影対象物が存在する２０ｍ付近から割り当てていく。
【００８７】
撮影対象物までの距離ｓ、被写界深度前端距離ＤＮ、被写界深度後端距離ＤＦとした時、被写界深度は以下の式で求められる。
【００８８】
【数２】
【００８９】
ここで求めた被写界深度幅を基に、さらに基本焦点位置１３０２の被写界深度Ｂの前端に、３つ目の基本焦点位置１３０３の被写界深度Ｃの後端をつなぎ、同じように４つ目の基本焦点位置１３０４の被写界深度Ｄをつなぐ。
【００９０】
このようにして、撮影対象物が存在する距離範囲の全てをカバーできるまで被写界深度Ａ、Ｂ、Ｃ、Ｄを連結できたら、基本焦点位置１３０１〜１３０４の設定が終了となる。実施例１では、４つの基本焦点位置１３０１〜１３０４を設定することで、存在する撮影対象物までの全ての距離をカバーできる。
【００９１】
次に、制御装置２０３は、図１２に示すように、コマ番号１〜４のコマ８０１毎の合焦点分布ヒストグラムを作成する。
【００９２】
その後、４つの基本焦点位置１３０１〜１３０４の中から、コマ８０１毎の合焦点分布ヒストグラムに、それぞれのコマに存在する撮影対象物全てをカバーできる基本焦点位置を各々選択して割り当てる。
【００９３】
実施例１では、コマ番号１の撮影領域では、基本焦点位置１３０１が選択される。コマ番号２の撮影領域でも基本焦点位置１３０１が選択される。コマ番号３の撮影領域では、基本焦点位置１３０１、１３０２が選択される。コマ番号４の撮影領域では、基本焦点位置１３０１、１３０３、１３０４が選択される。その結果、撮影範囲全体での撮影枚数は７枚となる。
【００９４】
実施例１の方法では、予めパノラマ撮影範囲全体の総合距離ヒストグラムを作成し、各コマの距離ヒストグラムに対応した基本焦点位置を選択し、最後にまとめて全体の撮影を行う。これにより、無駄な撮影をなくして、撮影時間短縮と、撮影画像の後処理の負荷軽減が図れる。また、隣接コマ間の撮影条件が統一されているので、画像合成した時につながりが良く、見た目にも自然で違和感の少ないパノラマ写真画像が得られる。
【００９５】
＜実施例１の効果＞
実施例１のパノラマ撮影システム２００では、撮影手段の一例であるカメラ２０１は、撮影範囲を分割した個別の撮影領域を撮影可能であって、レンズの焦点位置を変化させて撮影領域内の合焦点情報を出力可能である。移動手段の一例である自動雲台２０２は、カメラ２０１を移動させて異なる撮影領域をカメラ２０１に設定可能である。制御手段の一例である制御装置２０３は、カメラ２０１と自動雲台２０２を制御して、それぞれの撮影領域について撮影画像を取得させる。
【００９６】
制御装置２０３は、複数の撮影領域でレンズの焦点位置を変化させて被写体までの距離を測定する。そして、複数の撮影領域での測定結果に基いて、撮影領域ごとに焦点位置を定めた後に、カメラ２０１と自動雲台２０２を制御して、撮影領域ごとに定めた焦点位置をレンズに設定して複数の撮影領域について連続撮影を実行する。
【００９７】
このため、被写体までの距離を測定して焦点位置を定めて撮影画像を取得するサイクルを撮影領域ごとに繰り返す場合よりも、カメラ２０１の撮影開始から撮影終了までの時間を短縮できる。
【００９８】
表示手段の一例である表示部２０４は、レンズの焦点位置を変化させて合焦点と判断した検出位置の数の焦点位置に対する分布を示すヒストグラムを表示する。このため、撮影開始前に、使用する焦点位置が適正か否かをユーザーが的確に判断できる。
【００９９】
制御装置２０３は、複数の撮影領域について共通に設定された複数種類の焦点位置から選択した焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を実行可能である。このため、複数の焦点位置の画像を合成した高品質なパノラマ画像が得られる。撮影領域ごとの焦点位置の検出に時間がかかる分、カメラ２０１の撮影開始から撮影終了までの時間短縮効果はさらに顕著になる。
【０１００】
カメラ２０１は、撮影領域に分散して設定された複数の検出位置の合焦点情報を出力可能であって、制御装置２０３は、複数の撮影領域に含まれるすべての検出位置について所定水準の合焦点が得られるように複数種類の焦点位置を設定する。このため、画面の隅々までピントの合った撮影領域の画像を合成できる。各コマでばらばらの焦点位置を用いる場合よりもパノラマ合成された画像の品質が高まる。
【０１０１】
カメラ２０１は、個別の撮影領域の撮影に際しては、その撮影領域に含まれるすべての検出位置について所定水準の合焦点が得られるように複数種類の焦点位置の中から選択した焦点位置をレンズに設定する。このため、画面の隅々までピントの合った撮影領域の画像を合成できる。複数種類の焦点位置をすべて設定して撮影領域の撮影を行う場合よりも撮影画像の枚数を削減して、カメラ２０１の撮影開始から撮影終了までの時間短縮効果はさらに顕著になる。
【０１０２】
＜実施例２＞
図１３は合焦点の水準の違いによる焦点位置の違いの説明図である。図１４は実施例２における基本焦点位置の設定の説明図である。図１５は実施例２における撮影領域ごとの基本焦点位置の選択の説明図である。
【０１０３】
実施例２では、パノラマ撮影の基本的な制御の流れは実施例１と共通である。また、図１〜図６を参照して説明したパノラマ撮影システムの構成及び制御についても実施例１と同様である。
【０１０４】
実施例１との違いは、基本焦点位置の設定に際して前提とする合焦点の水準にある。実施例１では、合焦点とみなす被写界深度の限界は、許容錯乱円径＝０．０３３ｍｍで固定として、その幅で隣り合う焦点域を繋いでいた。しかし、実施例１で説明したように、許容錯乱円径の値をどこまで被写界深度とみなすかは、最終的な画像の鑑賞サイズと視聴距離により変化する。
【０１０５】
完成した画像を大きく引き伸ばして展示するケースでは、２つの基本焦点位置の合焦点領域のつなぎ目付近の焦点が甘いと感じる可能性もある。そこで、許容錯乱円径を小さくして、全体的によりシャープな仕上がりとすることが提案された。しかし、許容錯乱円径を小さくすると、それぞれの基本焦点位置に割り当てる被写界深度が狭くなり、基本焦点位置の数が増えて本番撮影の撮影回数が増えてしまう。結果として、撮影枚数が大幅に増えて、それに伴い撮影時間も延びてしまう。
【０１０６】
図１３に示すように、焦点距離２００ｍｍのレンズを使用して絞り値Ｆ１６で撮影する場合の、許容錯乱円径＝０．０３３ｍｍと、０．０２５ｍｍの場合の、基本焦点位置の数の比較を示した。
【０１０７】
これによると、許容錯乱円径＝０．０３３ｍｍでの割り当て例１８０１では、７ｍから無限遠までの距離を６分割でカバーしている。これに対して、許容錯乱円径＝０．０２５ｍｍでの割り当て例１８０２では、７．４ｍから無限遠までの距離を７分割でカバーしている。
【０１０８】
そこで、実施例２では、撮影範囲の中で目に付き易い面積の大きな距離範囲について、合焦点の水準を高くしている。撮影範囲に占める面積の小さな距離範囲は、目立たないので合焦点の水準を低くしている。
【０１０９】
図１４に示すように、総合距離ヒストグラムに閾値を設け、閾値を境にして、その上と下で総合距離ヒストグラムの高さに応じて２段階の許容錯乱円径を設定し、許容する被写界深度の幅を変えている。
【０１１０】
総合距離ヒストグラムの高い部分は、同じ距離域の撮影対象物の面積が広いことを表しており、この部分に関して許容錯乱円径＝０．０２５ｍｍを設定して被写界深度を狭く割り当てて、撮影対象物がシャープに写るようにする。
【０１１１】
図１４は、実施例１での撮影例と同じ撮影範囲に実施例２の基本焦点位置を適用した場合の撮影範囲全体における基本焦点位置の割り当て結果である。実施例１の許容錯乱円０．０３３ｍｍ固定による方法では、４分割だったものが、実施例２では５分割（１９０１〜１９０５）になっている。なお、許容錯乱円径の設定、閾値の設定は、図３の設定画面の項目に追加しても良いし、システムによる推奨値での自動設定としても良い。
【０１１２】
図１５に示すように、コマ番号１〜４の撮影領域に割り当てる基本焦点位置が、コマ毎のヒストグラムに基づいて選択される。コマ番号１の撮影領域では、基本焦点位置１９０１のみを割り当てて被写界深度ａの撮影が１回だけ実行される。コマ番号２の撮影領域では、基本焦点位置１９０１のみを割り当てて被写界深度ａの撮影が１回だけ実行される。コマ番号３の撮影領域では、基本焦点位置１９０１、１９０２、１９０３を割り当てて３つの被写界深度ａ、ｂ、ｃを繋いだ３回の撮影が実行される。最後に、コマ番号４の撮影領域では、基本焦点位置１９０１、１９０２、１９０４、１９０５を割り当てて４つの被写界深度ａ、ｂ、ｄ、ｅを繋いだ４回の撮影が実行される。
【０１１３】
これにより、撮影範囲全体での撮影枚数は、実施例１では７枚だったものが２枚増えて９枚となっている。しかし、これにより、図９の（ａ）に示す撮影領域の中で目立つ撮影対象物６０１の見かけの解像度、明瞭度、自然さが高められている。
【０１１４】
実施例２でも、基本焦点位置の設定は、実施例１と同じように、無限遠側から順番に全焦点域を網羅していくように並べていく。まず、１つ目の基本焦点位置を無限遠が被写界深度の後端ぎりぎりに入る距離である、過焦点距離に設定する。ただし、この時、割り当てようとする距離領域の距離ヒストグラムが閾値より高ければ、許容錯乱円径＝０．０２５ｍｍとし、通常よりやや狭い被写界深度範囲を使用して基本焦点位置を設定する。
【０１１５】
また、逆に割り当てようとする距離領域の距離ヒストグラムが閾値より低い場合は、通常の許容錯乱円径＝０．０３３ｍｍの被写界深度範囲を使用する。２つ目以降の基本焦点位置設定についても同様に、引き始めの距離ヒストグラムの高さが閾値より高いか低いかにより、いずれかの被写界深度幅を選択して繋いでいく。これにより、距離ヒストグラムが閾値より高い範囲では、許容錯乱円径＝０．０２５ｍｍの被写界深度範囲を使用することになり、焦点合成したつなぎ目の画質が向上する。
【０１１６】
以上のようにして、実施例２では、距離ヒストグラムの高さに応じて被写界深度の許容幅を変更する。面積の大きい距離域の被写界深度に対する許容値を厳しくし、全体的な撮影枚数増加を抑えつつ、最終的な仕上がりの改善、特に焦点のつなぎ目の画質向上を図っている。
【０１１７】
実施例２のパノラマ撮影システム２００では、複数の撮影領域に含まれるすべての検出位置について複数種類の焦点位置のそれぞれで合焦点とみなせる検出位置の数を求めている。そして、それぞれの焦点位置で合焦点とみなす検出位置の数の差が少なくなるように、複数種類の焦点位置のそれぞれにおける合焦点の水準を異ならせている。すなわち、それぞれの焦点位置の焦点深度範囲における総合距離ヒストグラム下の面積差が小さくなるように実施例１とは、焦点深度範囲を変更する。合焦点の検出数が多い（ヒストグラム下面積が大きい）焦点位置範囲では、焦点位置の刻みを小さくして、各焦点位置に割り当てるヒストグラム面積差を小さくする。許容錯乱円を小さく選択することで、合焦点の水準を高くする。
【符号の説明】
【０１１８】
２０１ カメラ、２０２ 自動雲台、２０３ 制御装置
２０４ 表示部、２０５ 入力部、２０６ パン機構
２０７ チルト機構、２０８ モータコントローラ
３００ 設定画面、５００ マルチエリアフォーカスセンサ
６０１、６０２ 撮影対象物、１３００ 総合距離ヒストグラム
１３０１、１３０２、１３０３、１３０４ 基本焦点位置
１６００ 距離情報取得結果表示画面
１６０１ 総合距離ヒストグラム、１６０２ コマ毎の距離ヒストグラム
１６０３ 撮影開始ボタン
【特許請求の範囲】
【請求項１】
撮影範囲を分割した個別の撮影領域を撮影可能であって、レンズの焦点位置を変化させて撮影領域内の合焦点情報を出力可能な撮影手段と、
前記撮影手段を移動させて異なる前記撮影領域を前記撮影手段に設定可能な移動手段と、
前記撮影手段と前記移動手段を制御して、それぞれの撮影領域について撮影画像を取得させる制御手段とを備える画像撮影装置において、
前記制御手段は、前記複数の撮影領域でレンズの焦点位置を変化させて被写体までの距離を測定し、前記複数の撮影領域での測定結果に基いて撮影領域ごとに焦点位置を定めた後に、前記撮影手段と前記移動手段を制御して、撮影領域ごとに定めた焦点位置をレンズに設定して前記複数の撮影領域について連続撮影を実行することを特徴とする画像撮影装置。
【請求項２】
前記制御手段は、前記複数の撮影領域について共通に設定された複数種類の焦点位置から選択した焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を実行可能であることを特徴とする請求項１に記載の画像撮影装置。
【請求項３】
前記撮影手段は、撮影領域に分散して設定された複数の検出位置の合焦点情報を出力可能であって、
前記制御手段は、前記複数の撮影領域に含まれるすべての前記検出位置について所定水準の合焦点が得られるように前記複数種類の焦点位置を設定することを特徴とする請求項２に記載の画像撮影装置。
【請求項４】
前記撮影手段は、個別の撮影領域の撮影に際しては、その撮影領域に含まれるすべての前記検出位置について所定水準の合焦点が得られるように前記複数種類の焦点位置の中から選択した焦点位置をレンズに設定することを特徴とする請求項３に記載の画像撮影装置。
【請求項５】
前記複数の撮影領域に含まれるすべての前記検出位置について前記複数種類の焦点位置のそれぞれで合焦点とみなせる前記検出位置の数を求めたとき、それぞれの焦点位置で合焦点とみなす前記検出位置の数の差が少なくなるように、前記複数種類の焦点位置のそれぞれにおける合焦点の水準を異ならせていることを特徴とする請求項４に記載の画像撮影装置。
【請求項６】
レンズの焦点位置を変化させて合焦点と判断した前記検出位置の数の焦点位置に対する分布を示すヒストグラムを表示する表示手段を備えたことを特徴とする請求項３乃至５のいずれか１項に記載の画像撮影装置。
【請求項７】
レンズの焦点位置を変化させて撮影領域の合焦点情報を出力可能な撮影手段を用いて、撮影範囲に設定した複数の撮影領域の画像を撮影するパノラマ画像の撮影方法において、
個別の撮影領域でレンズの焦点位置を変化させて撮影領域内の複数の検出位置について所定水準の合焦点が得られる焦点位置を測定する操作を、複数の撮影領域で連続的に実行する第１工程と、
前記第１工程の測定結果に基いて、前記複数の撮影領域のすべての前記検出位置について所定水準の合焦点が得られる複数種類の焦点位置を定める第２工程と、
前記複数の撮影領域の撮影を連続的に実行する第３工程と、を有し、
前記第３工程では、前記複数種類の焦点位置から選択した焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を行うことを特徴とするパノラマ画像の撮影方法。
【請求項１】
撮影範囲を分割した個別の撮影領域を撮影可能であって、レンズの焦点位置を変化させて撮影領域内の合焦点情報を出力可能な撮影手段と、
前記撮影手段を移動させて異なる前記撮影領域を前記撮影手段に設定可能な移動手段と、
前記撮影手段と前記移動手段を制御して、それぞれの撮影領域について撮影画像を取得させる制御手段とを備える画像撮影装置において、
前記制御手段は、前記複数の撮影領域でレンズの焦点位置を変化させて被写体までの距離を測定し、前記複数の撮影領域での測定結果に基いて撮影領域ごとに焦点位置を定めた後に、前記撮影手段と前記移動手段を制御して、撮影領域ごとに定めた焦点位置をレンズに設定して前記複数の撮影領域について連続撮影を実行することを特徴とする画像撮影装置。
【請求項２】
前記制御手段は、前記複数の撮影領域について共通に設定された複数種類の焦点位置から選択した焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を実行可能であることを特徴とする請求項１に記載の画像撮影装置。
【請求項３】
前記撮影手段は、撮影領域に分散して設定された複数の検出位置の合焦点情報を出力可能であって、
前記制御手段は、前記複数の撮影領域に含まれるすべての前記検出位置について所定水準の合焦点が得られるように前記複数種類の焦点位置を設定することを特徴とする請求項２に記載の画像撮影装置。
【請求項４】
前記撮影手段は、個別の撮影領域の撮影に際しては、その撮影領域に含まれるすべての前記検出位置について所定水準の合焦点が得られるように前記複数種類の焦点位置の中から選択した焦点位置をレンズに設定することを特徴とする請求項３に記載の画像撮影装置。
【請求項５】
前記複数の撮影領域に含まれるすべての前記検出位置について前記複数種類の焦点位置のそれぞれで合焦点とみなせる前記検出位置の数を求めたとき、それぞれの焦点位置で合焦点とみなす前記検出位置の数の差が少なくなるように、前記複数種類の焦点位置のそれぞれにおける合焦点の水準を異ならせていることを特徴とする請求項４に記載の画像撮影装置。
【請求項６】
レンズの焦点位置を変化させて合焦点と判断した前記検出位置の数の焦点位置に対する分布を示すヒストグラムを表示する表示手段を備えたことを特徴とする請求項３乃至５のいずれか１項に記載の画像撮影装置。
【請求項７】
レンズの焦点位置を変化させて撮影領域の合焦点情報を出力可能な撮影手段を用いて、撮影範囲に設定した複数の撮影領域の画像を撮影するパノラマ画像の撮影方法において、
個別の撮影領域でレンズの焦点位置を変化させて撮影領域内の複数の検出位置について所定水準の合焦点が得られる焦点位置を測定する操作を、複数の撮影領域で連続的に実行する第１工程と、
前記第１工程の測定結果に基いて、前記複数の撮影領域のすべての前記検出位置について所定水準の合焦点が得られる複数種類の焦点位置を定める第２工程と、
前記複数の撮影領域の撮影を連続的に実行する第３工程と、を有し、
前記第３工程では、前記複数種類の焦点位置から選択した焦点位置をレンズに設定して、それぞれの撮影領域でレンズの焦点位置を異ならせた複数回の撮影を行うことを特徴とするパノラマ画像の撮影方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２０１１−２３７７１３（Ｐ２０１１−２３７７１３Ａ）
【公開日】平成２３年１１月２４日（２０１１．１１．２４）
【国際特許分類】
【出願番号】特願２０１０−１１０８８７（Ｐ２０１０−１１０８８７）
【出願日】平成２２年５月１３日（２０１０．５．１３）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２３年１１月２４日（２０１１．１１．２４）
【国際特許分類】
【出願日】平成２２年５月１３日（２０１０．５．１３）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]