撮像装置、プログラムおよび撮像方法
【課題】撮像画像に重畳表示される複数の補助的な情報の干渉を抑制する。
【解決手段】撮像装置１００は、撮像のための補助的な情報を提供する第１の補助画像２１０および第２の補助画像２２０を合成して合成補助画像２５０を生成するときに、第２の補助画像２２０に設定された透明な背景領域２２３において第１の補助画像２１０の表示領域２１１の透明度を変更する補助画像合成部１１７と、撮像画像３００に合成補助画像２５０を重畳して表示部１２１に表示させる表示制御部１１９とを備える。
【解決手段】撮像装置１００は、撮像のための補助的な情報を提供する第１の補助画像２１０および第２の補助画像２２０を合成して合成補助画像２５０を生成するときに、第２の補助画像２２０に設定された透明な背景領域２２３において第１の補助画像２１０の表示領域２１１の透明度を変更する補助画像合成部１１７と、撮像画像３００に合成補助画像２５０を重畳して表示部１２１に表示させる表示制御部１１９とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、プログラムおよび撮像方法に関する。
【背景技術】
【０００２】
デジタルカメラなどの撮像装置においては、例えばＬＣＤ（Liquid Crystal Display）などを用いた背面パネルや電子ファインダなどの表示部が設けられることが一般的である。この表示部では、撮像素子が出力する撮像画像がライブビュー表示されるとともに、例えば撮影モードやズーム倍率など、撮像のための補助的な情報を撮像画像に重畳して表示することが可能である。
【０００３】
このような表示部を用いて、例えばユーザによる撮像の構図の決定を補助する情報をユーザに提供する技術が開発されている。例えば、特許文献１には、電子ファインダにおいてグリッドパターンなどの補助線を撮像画像に重畳表示する技術が記載されている。特許文献２には、ユーザが任意に作成した格子線などの図形画像を同様に重畳表示する技術が記載されている。また、特許文献３には、レンズ交換可能なデジタルカメラにおいて、各レンズに応じた目盛線や格子線などを撮像画像に合成表示する技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２７９７６７号公報
【特許文献２】特開２００９−３３５０７号公報
【特許文献３】特開２００７−３６９８３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記のような技術によって複数の種類の補助的な情報を撮像画像に重畳して表示する場合、複数の情報が重複してしまい、却ってユーザによる撮像の構図の決定などを阻害してしまうという問題があった。例えば、特許文献１に記載されているようなグリッド線と、オートフォーカスによる合焦の対象となる領域を示すオートフォーカス枠とが撮像画像に重畳表示される場合、オートフォーカス枠の内部にグリッド線が表示されて、オートフォーカス枠内の部分の撮像画像が視認しにくい場合がある。
【０００６】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、撮像画像に重畳表示される複数の補助的な情報の干渉を抑制することが可能な、新規かつ改良された撮像装置、プログラムおよび撮像方法を提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明のある観点によれば、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、上記第２の補助画像に設定された透明な背景領域において上記第１の補助画像の表示領域の透明度を変更する補助画像合成部と、撮像画像に上記合成補助画像を重畳して表示部に表示させる表示制御部とを備える撮像装置が提供される。
【０００８】
上記補助画像合成部は、少なくとも上記第２の補助画像に付加された合成モード情報に基づいて、上記透明度を変更してもよい。
【０００９】
上記補助画像合成部は、上記背景領域において上記第１の補助画像の表示領域を完全に透明にしてもよい。
【００１０】
上記背景領域は、上記第２の補助画像の表示領域を包含する領域であってもよい。
【００１１】
上記第１の補助画像は、上記撮像画像の基準線画像であり、上記第２の補助画像は、上記撮像画像の領域線画像であってもよい。
【００１２】
上記基準線画像は、グリッド線画像であり、上記領域線画像は、オートフォーカス枠画像であってもよい。
【００１３】
上記オートフォーカス枠画像は、複数のオートフォーカス枠を含んでもよい。
【００１４】
上記基準線画像は、グリッド線画像であり、上記領域線画像は、顔検出枠画像であってもよい。
【００１５】
上記撮像装置は、上記変更後の透明度を、操作部によって取得されたユーザの操作に応じて設定する制御部をさらに備えてもよい。
【００１６】
上記撮像装置は、上記変更後の透明度を撮像処理の状態に応じて自動的に設定する制御部をさらに備えてもよい。
【００１７】
また、上記課題を解決するために、本発明の別の観点によれば、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、上記第２の補助画像に設定された透明な背景領域において上記第１の補助画像の表示領域の透明度を変更する処理と、撮像画像に上記合成補助画像を重畳して表示部に表示させる処理とをコンピュータに実行させるためのプログラムが提供される。
【００１８】
また、上記課題を解決するために、本発明のさらに別の観点によれば、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、上記第２の補助画像に設定された透明な背景領域において上記第１の補助画像の表示領域の透明度を変更するステップと、撮像画像に上記合成補助画像を重畳して表示部に表示させるステップとを含む撮像方法が提供される。
【発明の効果】
【００１９】
以上説明したように本発明によれば、撮像画像に重畳表示される複数の補助的な情報の干渉を抑制することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の第１の実施形態に係る撮像装置の機能構成を示すブロック図である。
【図２】同実施形態に係る基準線画像の例を示す図である。
【図３】同実施形態に係る領域線画像の例を示す図である。
【図４】同実施形態に係る補助画像の合成処理の一例について説明するための図である。
【図５】同実施形態において表示される画像の例について説明するための図である。
【図６】同実施形態に係る補助画像の合成処理を示すフローチャートである。
【図７】本発明の第２の実施形態に係る表示モード設定画面を示す図である。
【図８】本発明の第３の実施形態に係る領域線画像の例を示す図である。
【図９】同実施形態に係る領域線画像の例を示す図である。
【図１０】同実施形態に係る領域線画像の例を示す図である。
【図１１】同実施形態に係る領域線画像の例を示す図である。
【発明を実施するための形態】
【００２１】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２２】
なお、説明は以下の順序で行うものとする。
１．第１の実施形態
１−１．撮像装置の機能構成
１−２．補助画像の構成
１−３．補助画像の合成
２．第２の実施形態
３．第３の実施形態
４．まとめ
【００２３】
＜１．第１の実施形態＞
（１−１．撮像装置の機能構成）
まず、図１を参照して、本発明の第１の実施形態に係る撮像装置の機能構成について説明する。図１は、本発明の第１の実施形態に係る撮像装置１００の機能構成を示すブロック図である。
【００２４】
撮像装置１００は、被写体を撮像して、撮像によって得られた静止画または動画をデジタル方式の画像データとして記録媒体に記録する。この撮像装置１００は、例えばデジタルカメラとして実現されるほか、上記のような撮像機能を有する任意の電子機器として実現されうる。
【００２５】
図１を参照すると、撮像装置１００は、撮像部１０１、撮像画像処理部１０３、撮像画像記録部１０５、記憶部１０７、操作部１０９、制御部１１１、オートフォーカス部１１３、顔検出部１１５、補助画像合成部１１７、表示制御部１１９、および表示部１２１を含む。
【００２６】
撮像部１０１は、被写体を撮像して、撮像画像を出力する。撮像部１０１は、例えば、撮像光学系、撮像素子、タイミングジェネレータ、および光学部品駆動部などを含む。ここで、撮像光学系は、フォーカスレンズ、ズームレンズ等の各種レンズ、不要な波長を除去する光学フィルタ、および絞りなどの光学部品からなる。被写体から入射された光学像（被写体像）は、撮像光学系における各光学部品を介して、撮像素子の露光面に結像される。撮像素子（イメージセンサ）は、例えば、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像素子で構成される。この撮像素子は、撮像光学系から導かれた光学像を光電変換し、撮像画像を表す画像信号（アナログ画像信号）を撮像画像処理部１０３に出力する。
【００２７】
撮像画像処理部１０３は、撮像部１０１から出力される撮像画像を表す画像信号に対して所定の信号処理を実行し、信号処理後の画像信号を出力する。撮像画像処理部１０３は、例えばＤＳＰ（Digital Signal Processor）を用いて実現されうる。この撮像画像処理部１０３は、例えば、アナログ信号処理部、アナログ／デジタル変換部、およびデジタル信号処理部などを含む。ここで、アナログ信号処理部は、画像信号を前処理するいわゆるアナログフロントエンドである。アナログ信号処理部は、例えば、撮像部１０１から出力される画像信号に対して、ＣＤＳ（Correlated Double Sampling：相関２重サンプリング）処理、ＰＧＡ（Programmable Gain Amplifier）によるゲイン処理などを実行する。アナログ／デジタル変換部は、アナログ信号処理部から入力されたアナログ画像信号をデジタル画像信号に変換して、デジタル信号処理部に出力する。デジタル信号処理部は、入力されたデジタル画像信号に対して、例えば、ノイズ除去、ホワイトバランス調整、色補正、エッジ強調、ガンマ補正などのデジタル信号処理を実行し、デジタル信号処理後の画像信号を撮像画像記録部１０５および表示制御部１１９に出力する。なお、撮像画像処理部１０３は、必ずしもアナログおよびデジタル信号処理を実行しなくてもよい。例えば、撮像部１０１がデジタル画像信号を出力し、撮像画像処理部１０３がデジタル信号処理だけを実行してもよい。
【００２８】
撮像画像記録部１０５は、撮像画像記録部１０５は、撮像画像処理部１０３から出力される信号処理後の画像信号を、例えばＪＰＥＧ（Joint Photographic Experts Group）などの所定の圧縮符号化様式で圧縮し、画像データとして記憶部１０７に格納する。撮像画像記録部１０５は、さらに、画像データに対する付加的な情報を示すメタデータを記憶部１０７に格納してもよい。撮像画像記録部１０５は、撮像画像処理部１０３と同様に、例えばＤＳＰを用いて実現されうる。
【００２９】
記憶部１０７には、撮像装置１００の処理に関するデータが格納される。記憶部１０７は、例えば、フラッシュＲＯＭ（Read Only Memory）、もしくはＤＲＡＭ（Dynamic Random Access Memory）などの半導体メモリ、ＢＤ（Blu-ray Disc）、ＤＶＤ（Digital Versatile Disc）、もしくはＣＤ（Compact Disc）などの光ディスク、またはハードディスクなどでありうる。記憶部１０７は、撮像装置１００に内蔵される記憶装置であってもよく、メモリカードなど、撮像装置１００に着脱可能なリムーバブルメディアであってもよい。また、記憶部１０７は、複数の種類の記憶装置またはリムーバブルメディアを含んでもよい。記憶部１０７には、撮像画像記録部１０５によって画像データが格納されるほか、制御部１１１が用いるプログラム、および後述する補助画像のデータなどが格納されうる。
【００３０】
操作部１０９は、撮像装置１００を操作するためのユーザインターフェースとして機能する、操作部１０９は、例えば、撮像装置１００の外装に設けられたシャッターボタン、十字ボタン、またはメニューボタンなど各種の操作ボタン、タッチパネル、またはリモートコントローラなどであり、ユーザ操作に応じた操作信号を制御部１１１に出力する。操作部１０９は、例えば、撮像装置１００の起動および停止、静止画像の撮影、動画像の撮影開始および終了、または撮像装置１００の各種機能の設定などのユーザ操作に応じた操作信号を制御部１１１に出力する。
【００３１】
制御部１１１は、撮像装置１００の各部の動作を制御する。制御部１１１は、例えばＤＳＰに設けられたマイクロコントローラなどの演算処理装置を用いて実現されうる。制御部１１１は、例えば記憶部１０７に含まれるフラッシュＲＯＭなどに格納されたプログラムに基づいて動作することによって、制御のために必要な各種の演算処理を実行する。演算処理には、記憶部１０７に含まれるＤＲＡＭが用いられてもよい。なお、上記のプログラムは、ディスク状記録媒体、またはメモリカードなどのリムーバブル記憶媒体に格納されて撮像装置１００に提供されるものであってもよく、またＬＡＮ（Local Area Network）、インターネット等のネットワークを介して撮像装置１００にダウンロードされるものであってもよい。
【００３２】
オートフォーカス部１１３は、制御部１１１を介して、撮像部１０１に含まれる撮像光学系のフォーカスレンズを移動させ、特定の被写体に対して撮像光学系の焦点を自動的に合わせる。オートフォーカス部１１３は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。オートフォーカス部１１３は、後述するオートフォーカス枠またはオートフォーカス領域についての情報を出力してもよい。オートフォーカス部１１３は、例えば、位相差検出方式によって動作してもよい。この場合、まず、オートフォーカス部１１３は、図示しないラインセンサなどの測光センサを用いて、撮像画像に予め設定されたオートフォーカス枠内の位相差を検出する。次に、オートフォーカス部１１３は、この位相差に基づいて撮像光学系の焦点がオートフォーカス枠内の特定の被写体に合焦するような焦点位置（フォーカスポジション）を計算する。さらに、オートフォーカス部１１３は、制御部１１１を介して撮像部１０１の光学部品駆動部を制御してフォーカスレンズを移動させ、撮像光学系の焦点を上記の特定の被写体に合焦させる。ここで、オートフォーカス部１１３は、予め設定された複数のオートフォーカス枠の中から、操作部１０９を介したユーザ操作によって、または自動的に抽出した１または複数のオートフォーカス枠に対して、上記の合焦の処理を行ってもよい。また、オートフォーカス部１１３は、コントラスト検出方式によって動作してもよい。この場合、まず、オートフォーカス部１１３は、制御部１１１を介して撮像部１０１の光学部品駆動部を制御してフォーカスレンズを移動させる。次に、オートフォーカス部１１３は、撮像画像の被写体を含む特定のオートフォーカス領域におけるコントラストを検出し、コントラストが最大になる位置をフォーカスポジションとして特定する。上記のオートフォーカス領域は、撮像画像の中の任意の領域でありえ、例えば、後述する顔検出部１１５によって検出された顔の領域であってもよい。
【００３３】
顔検出部１１５は、撮像画像に含まれる１または複数の顔を検出する。顔検出部１１５は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。顔検出部１１５は、撮像画像から、例えばウェーブレット変換やＨａａｒ特徴検出などのアルゴリズムを用いて顔の領域を算出する。顔の領域とは、例えば、あご、耳、および眉が含まれる最小矩形の座標値でありうる。なお、顔の領域は、必ずしも矩形でなくてもよく、三角形または楕円などの形であってもよい。また、顔検出部１１５は、撮像画像に含まれるすべての顔を検出するように設定されていてもよく、また顔の領域の大きさなどの順位によって数を限定して顔を検出するように設定されていてもよい。顔検出部１１５は、算出した顔の領域の情報を出力してもよい。
【００３４】
補助画像合成部１１７は、撮像画像に重畳表示するための複数の補助画像を合成して合成補助画像を生成し、表示制御部１１９に出力する。補助画像合成部１１７は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。補助画像は、撮像のための補助的な情報を提供する画像であり、具体的には、オートフォーカス部１１３による合焦の対象になるオートフォーカス枠を示す画像、顔検出部１１５によって検出された顔の領域の画像、ユーザによる撮像の構図の決定を補助するグリッド線の画像、撮影モードやズーム倍率などの設定値を示す画像、または、撮像装置１００がタッチパネルを有する場合に操作ボタンの画像などでありうる。この補助画像は、記憶部１０７に予め格納された画像データによるものであってもよく、また、オートフォーカス部１１３または顔検出部１１５の出力に基づいて生成されるものであってもよい。補助画像合成部１１７は、例えば、複数の補助画像のそれぞれをレイヤとして合成し、１つの合成補助画像を生成する。このとき、補助画像合成部１１７は、補助画像の特定の部分の透明度を変化させうる。補助画像合成部１１７は、透明度を変化させるために、補助画像に付加されている後述の合成モード情報を参照してもよい。なお、補助画像合成部１１７の処理については後述する。
【００３５】
表示制御部１１９は、表示部１２１に各種データを表示させるための表示制御を行う。表示制御部１１９は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。表示制御部１１９は、例えば、撮像画像処理部１０３からリアルタイムで入力される撮像中の撮像画像（スルー画像）に、補助画像合成部１１７から出力される合成補助画像を重畳した画像データを、表示部１２１に出力する。表示部１２１は、例えば、ＬＣＤ、または有機ＥＬ（Electro-Luminescence）ディスプレイなどで構成され、表示制御部１１９から入力される画像データを表示する。上記の場合、表示部１２１には、撮像中の撮像画像に、撮像のための補助的な情報が重畳表示された画像が表示される。これによって、ユーザは、撮像中の画像、および撮像中の画像に対する補助的な情報を同時に見ながら、撮像装置１００を操作することが可能である。
【００３６】
ここで、表示制御部１１９から表示部１２１に出力される画像データは、定期的に更新される。補助画像合成部１１７は、この画像データの更新に合わせて定期的に補助画像を合成して合成補助画像を生成し、表示制御部１１９に出力してもよい。また、補助画像合成部１１７は、合成される補助画像が更新された場合に補助画像を合成して合成補助画像を生成し、表示制御部１１９に出力してもよい。この場合、合成補助画像は記憶部１０７に格納され、次の合成補助画像が補助画像合成部１１７によって出力されるまで、表示制御部１１９によって繰り返し用いられてもよい。
【００３７】
（１−２．補助画像の構成）
次に、図２および図３を参照して、本発明の第１の実施形態に係る補助画像の構成について説明する。図２は、本発明の第１の実施形態に係る第１の補助画像である基準線画像２１０の例を示す図である。図３は、本発明の第１の実施形態に係る第２の補助画像である領域線画像２２０の例を示す図である。ここでは、基準線画像２１０および領域線画像２２０という２つの補助画像を例として説明するが、例えば、撮影モードやズーム倍率などの設定値を示す画像、または、撮像装置１００がタッチパネルを有する場合に操作ボタンの画像などの他の補助画像が、上記の２つの補助画像に代えて、または上記の２つの補助画像と共に用いられてもよい。
【００３８】
（１）基準線画像
図２には、第１の補助画像である基準線画像２１０について、（ａ）〜（ｃ）の３つの例が示されている。基準線画像２１０は、例えばユーザが構図を決定するときの目安または目印として表示され、具体的には、水平線、垂直線、水平線と垂直線とを組み合わせたグリッド線、または画面２００の中心を表す中心マークなどでありうる。基準線画像２１０は、撮像装置１００の記憶部１０７に画像データとして予め格納されているものであってもよい。それぞれの基準線画像２１０において、表示領域２１１以外の部分は透明領域である。基準線画像２１０を撮像画像などの他の画像に重畳した場合、透明領域では重畳された他の画像が透過して表示される。
【００３９】
図２（ａ）に示される基準線画像２１０ａにおいて、表示領域２１１ａは、画面２００を縦横それぞれに３分割するグリッド線である。図２（ｂ）に示される基準線画像２１０ｂにおいて表示領域２１１ｂは、画面２００を縦に４分割、横に６分割する、図２（ａ）に示されるものよりも細かいグリッド線である。図２（ｃ）に示される基準線画像２１０ｃにおいて、表示領域２１１ｃは、画面２００を縦横それぞれに４分割するグリッド線、および画面２００の対角線である。
【００４０】
上記の３つの例以外にも、ユーザの用途や嗜好に応じて様々なパターンの基準線画像２１０が存在しうる。撮像装置１００では、これらの基準線画像２１０のうちのいずれかを表示するように予め設定されてもよく、また、ユーザの操作に応じて、表示する基準線画像２１０を選択可能であってもよい。さらに、撮像装置１００では、撮像画像の内容を認識して自動的に表示する基準線画像２１０が選択されてもよい。
【００４１】
（２）領域線画像
図３には、第２の補助画像である領域線画像２２０について、（ａ）および（ｂ）の２つの例が示されている。領域線画像２２０は、例えば撮像装置１００においてオートフォーカス部１１３の処理で使用されるオートフォーカス枠や、顔検出部１１５によって検出された顔の領域などでありうる。領域線画像２２０は、例えばオートフォーカス部１１３が位相差検出方式で動作する場合のオートフォーカス枠のように、撮像装置１００の記憶部１０７に画像データとして予め格納されているものであってもよい。また、領域線画像２２０は、例えばオートフォーカス部１１３がコントラスト検出方式で動作する場合のオートフォーカス枠、または顔検出部１１５によって検出された顔の領域のように、撮像装置１００の各部によって生成されて記憶部１０７に格納された画像であってもよい。それぞれの領域線画像２２０において、表示領域２２１以外の部分は透明領域である。領域線画像２２０を基準線画像２１０、または撮像画像などの他の画像に重畳した場合、透明領域では重畳された他の画像が透過して表示される。
【００４２】
領域線画像２２０には、さらに、背景領域２２３が設定される。背景領域２２３は、表示領域２２１を包含する領域である。背景領域２２３は、具体的には、図示されているように、領域線画像２２０において表示領域２２１によって囲まれる領域の内側を示す領域でありうる。背景領域２２３は、さらに、表示領域２２１の近傍の領域を含んでもよい。領域線画像２２０を基準線画像２１０などの他の補助画像に重畳した場合、背景領域２２３では、重畳された基準線画像２１０などの他の補助画像の透明度が変更されうる。この透明度変更の処理については後述する。
【００４３】
図３（ａ）に示される領域線画像２２０ａは、オートフォーカス部１１３が位相差検出方式によって動作する場合に、画面２００に設定されうる複数のオートフォーカス枠の画像である。図では９つのオートフォーカス枠が示されているが、オートフォーカス枠の数はこれには限らず、１または任意の複数のオートフォーカス枠が表示されうる。さらに、図３（ａ）では、複数のオートフォーカス枠のうちの１つについて拡大した図が示されている。表示領域２２１ａは、略矩形の領域であり、この略矩形がオートフォーカス枠を示す。背景領域２２３ａは、上記の略矩形の内部の領域と、その近傍とを含む領域である。
【００４４】
図３（ｂ）に示される領域線画像２２０ｂは、オートフォーカス部１１３がコントラスト検出方式によって動作する場合に、画面２００に設定されうる複数のオートフォーカス領域の画像である。図では９つのオートフォーカス領域が示されているが、オートフォーカス領域の数はこれには限られず、１または任意の複数のオートフォーカス領域が表示されうる。さらに、図３（ｂ）では、複数のオートフォーカス領域のうち１つについて拡大した図が示されている。表示領域２２１ｂは、オートフォーカス領域として表示される４つのかぎ状の図形が、略矩形をなすように組み合わされた形状の領域であり、この略矩形がオートフォーカス領域を示す。背景領域２２３ｂは、上記の略矩形の内部と、その近傍とを含む領域である。
【００４５】
（１−３．補助画像の合成）
次に、図４〜図６を参照して、本発明の第１の実施形態に係る補助画像の合成について説明する。図４は、本実施形態に係る補助画像の合成処理の一例について説明するための図である。図５は、本実施形態において表示される画像の例について説明するための図である。図６は、本実施形態に係る補助画像の合成処理を示すフローチャートである。
【００４６】
（１）処理の概略的な説明
図４には、本実施形態に係る撮像装置１００における補助画像の合成処理の一例が概略的に示されている。補助画像合成部１１７は、第１の補助画像である基準線画像２１０ｂと、第２の補助画像である領域線画像２２０ｂとを含む複数の補助画像を合成して、合成補助画像２５０を生成する。合成される補助画像には、さらに、他の補助画像２１５，２２５が含まれてもよい。他の補助画像２１５，２２５は、例えば、上述のように、撮影モードやズーム倍率などの設定値を示す画像、または、撮像装置１００がタッチパネルを有する場合に操作ボタンの画像などでありうる。
【００４７】
なお、図示された例において合成される補助画像の組み合わせは一例である。従って、例えば、基準線画像２１０ｂは、図２において説明された基準線画像２１０ａ，２１０ｃなど、他の種類の基準線画像であってもよい。領域線画像２２０ｂも、図３において説明された領域線画像２２０ａなど、他の種類の領域線画像であってもよい。また、第１の補助画像は必ずしも基準線画像２１０でなくてもよく、第２の補助画像は必ずしも領域線画像２２０でなくてもよい。補助画像合成部１１７によって合成される複数の補助画像には、少なくとも第１の補助画像および第２の補助画像が含まれればよく、他の補助画像２１５，２２５は存在しなくてもよいし、より多く存在してもよい。
【００４８】
ここで、補助画像合成部１１７によって合成される複数の補助画像には、表示優先順位が設定される。図示された例では、順位が低い方から、第１の補助画像である基準線画像２１０ｂ、他の補助画像２１５、第２の補助画像である領域線画像２２０ｂ、他の補助画像２２５の順に表示優先順位が設定されている。補助画像合成部１１７は、表示優先順位がより低い補助画像を下位のレイヤ、表示優先順位がより高い画像を上位のレイヤとするレイヤ構造として各補助画像データを扱い、下位レイヤから順に重ね合わせていくことによって、各補助画像を合成して合成補助画像２５０を生成する。
【００４９】
なお、図示された例において設定される表示優先順位は一例である。従って、例えば、第１の補助画像である基準線画像２１０ｂは、必ずしも最下位のレイヤでなくてもよく、他の補助画像２１５がさらに下位のレイヤに設定されていてもよい。また、領域線画像２２０ｂより上位にはレイヤが存在せず、領域線画像２２０ｂが最上位のレイヤであってもよい。表示優先順位は、第１の補助画像よりも第２の補助画像が高いように設定されればよく、他の補助画像２１５，２２５の表示優先順位はどのように設定されてもよい。
【００５０】
図示された例において、まず、補助画像合成部１１７は、最下位のレイヤとして、第１の補助画像である基準線画像２１０ｂを合成する。基準線画像２１０ｂは、画面２００を縦に４分割、横に６分割するグリッド線である表示領域２１１ｂを含む。次に、補助画像合成部１１７は、１つ上位のレイヤとして、他の補助画像２１５を合成する。次に、補助画像合成部１１７は、さらに上位のレイヤとして、第２の補助画像である領域線画像２２０ｂを合成する。領域線画像２２０ｂは、オートフォーカス領域として表示される４つのかぎ状の図形が略矩形をなすように組み合わされた形状の領域である表示領域２２１ｂと、この略矩形の内部およびその近傍を含む領域である背景領域２２３ｂとを含む。次に、補助画像合成部１１７は、最上位のレイヤとして、他の補助画像２２５を合成して、合成補助画像２５０を完成させる。
【００５１】
合成補助画像２５０においては、基準線画像２１０ｂの表示領域２１１ｂと、領域線画像２２０ｂの表示領域２２１ｂとが表示される。なお、簡単のため、他の補助画像２１５，２２５の表示領域は図示されていない。ここで、第１の補助画像である基準線画像２１０ｂの表示領域２１１ｂであるグリッド線は、第２の補助画像である領域線画像２２０ｂに設定された背景領域２２３ｂにおいて透明になっている。つまり、領域線画像２２０ｂの背景領域２２３ｂにおいては、基準線画像２１０ｂの表示領域２１１ｂは表示されていない。これは、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂの透明度が変更され、基準線画像２１０ｂの表示領域２１１ｂが完全に透明にされたことによるものである。なお、基準線画像２１０ｂの表示領域２１１ｂは、完全に透明にされなくてもよく、半透明にされてもよい。また、図示されていない他の補助画像２１５の表示領域も同様に、領域線画像２２０ｂに設定された背景領域２２３ｂにおいて透明または半透明になってもよい。基準線画像２１０ｂの表示領域２１１ｂの透明度を変更する補助画像合成部１１７の処理については後述する。
【００５２】
（２）表示される画像の例
図５には、本実施形態において撮像装置１００の表示制御部１１９によって表示部１２１に表示されうる画像の例が示されている。図４において説明したような処理によって生成された合成補助画像２５０は、表示制御部１１９によって撮像画像３００に重畳されて、表示部１２１に表示される。ここでは、合成補助画像２５０に含まれる基準線画像２１０ｂの表示領域２１１ｂ、および領域線画像２２０ｂの表示領域２２１ｂが図示されている。なお、簡単のため、他の補助画像２１５，２２５の表示領域は図示されていない。
【００５３】
図５（ａ）には、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂであるグリッド線が完全に透明にされた例が示されている。これによって、撮像画像３００のうち、領域線画像２２０ｂの表示領域２２１ｂによって示される略矩形の領域の内部に表示される部分へのグリッド線の干渉をなくし、この部分の視認性を最大化することが可能である。ユーザは、画面２００の背景領域２２３ｂ以外の部分では、表示領域２１１ｂが表示されていることによってグリッド線を利用することが可能である。撮像画像３００のうち上記の略矩形の領域の内部に表示される部分は、例えばオートフォーカス部１１３による合焦の対象になるオートフォーカス枠、または顔検出部１１５によって検出された顔の領域を示す顔検出枠でありうる。
【００５４】
図５（ｂ）には、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂであるグリッド線が半透明にされた例が示されている。これによって、撮像画像３００のうち、領域線画像２２０ｂの表示領域２２１ｂによって示される略矩形の領域の内部に表示される部分へのグリッド線の干渉を軽減し、この部分の視認性を高めつつ、この部分のグリッド線についてもある程度の視認性を確保することが可能である。撮像画像３００のうち上記の略矩形の領域の内部に表示される部分は、図５（ａ）の場合と同様に、オートフォーカス枠、または顔検出枠でありうる。
【００５５】
図５（ｃ）には、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂであるグリッド線がそのまま表示された例が示されている。この場合、撮像画像３００のうち、領域線画像２２０ｂの表示領域２２１ｂによって示される略矩形の領域の内部に表示される部分にも、他の部分と同様にグリッド線が表示される。例えばグリッド線を優先して表示させたい場合などのために、撮像装置１００は、背景領域２２３において表示領域２１１の透明度を変更するか否かを切り換え可能であってもよい。
【００５６】
（３）処理の詳細な説明
本実施形態において、各補助画像は、ＲＧＢＡカラーモデルによって表現される。ＲＧＢＡカラーモデルとは、例えば画素ごとに、Ｒ（Red）、Ｇ（Green）、およびＢ（Blue）の各色の情報と、画像データにおける透明度を指定するアルファ値Ａ（Alpha）の情報とを設定して、画像の色を表現する手法である。アルファ値Ａは、０〜１の範囲であり、０で画像が完全に透明になり、１で画像が完全に不透明になる値として設定されうる。なお、色の表現手法は必ずしもＲＧＢＡカラーモデルには限られず、画像の透明度を変更することが可能であれば、どのような手法が用いられてもよい。
【００５７】
以下で、ＲＧＢＡカラーモデルが用いられる場合の、補助画像の基本的な合成処理について説明する。簡単のために、ここでは上位レイヤと下位レイヤの２つのレイヤを合成する場合について説明するが、３つ以上のレイヤを合成する場合も同様である。下位レイヤの任意の画素のＲＧＢＡの値は、式（１）のように設定される。
【００５８】
【数１】
【００５９】
また、上位レイヤの対応する画素のＲＧＢＡの値は、式（２）のように設定される。
【００６０】
【数２】
【００６１】
この場合、合成後の画素のＲＧＢＡの値は、式（３）のようになる。
【００６２】
【数３】
【００６３】
ここで、例えば、上位レイヤのアルファ値ｓＡが１に近い値であれば、下位レイヤのＲ，Ｇ，Ｂは、上位レイヤのＲ，Ｇ，Ｂによって遮蔽され、合成後の画素にはほとんど反映されない。一方、上位レイヤのアルファ値ｓＡが０に近い値であれば、下位レイヤのＲ，Ｇ，Ｂは、上位レイヤのＲ，Ｇ，Ｂを透過して、合成後の画素に反映される。
【００６４】
また、本実施形態において、各補助画像には、合成モード情報が付加されている。合成モード情報は、撮像装置１００の記憶部１０７に格納された補助画像の画像データに予め付加されたものであってもよく、また、制御部１１１によって付加または更新されたものであってもよい。補助画像合成部１１７は、合成モード情報に基づいて、第１の補助画像である基準線画像２１０の表示領域２１１の透明度を変更する。合成モード情報は、例えば表１に示されるような数値情報でありうる。
【００６５】
【表１】
【００６６】
ここで、「通常合成モード」は、上位レイヤにあたる補助画像を、下位レイヤにあたる補助画像の透明度を変更せずにそのまま合成するモードである。「上書きモード」は、上位レイヤにあたる補助画像の背景領域で、下位レイヤにあたる補助画像を完全に透明にして合成するモードである。「透明度変更モード」は、上位レイヤにあたる補助画像の背景領域で、下位レイヤにあたる補助画像の透明度を変更して合成するモードである。「透明度変更モード」では、変更後の透明度の値を設定することが可能であり、この値を調整することによって、下位レイヤにあたる補助画像を半透明にする度合いを調整することが可能である。
【００６７】
なお、合成モード情報は、必ずしもすべての補助画像に付加されていなくてもよい。例えば、合成モード情報は、下位レイヤにあたる補助画像の透明度を変更する、第２の補助画像である領域線画像２２０にだけ付加されていてもよい。この場合、補助画像合成部１１７は、合成モード情報が付加されていない他の補助画像を、合成モード「通常合成モード」であるものとみなして処理してもよい。
【００６８】
図６には、本実施形態に係る撮像装置１００の補助画像合成部１１７における処理を示すフローチャートが示されている。この処理は、補助画像のレイヤ単位のループ処理になっており、下位レイヤから順にこの処理が実行されることによって、複数の補助画像から１つの合成補助画像が生成される。
【００６９】
まず、補助画像合成部１１７は、合成するレイヤの合成モードが「上書きモード」であるか否かを判定する（ステップＳ１０１）。ここで、合成モードが「上書きモード」である場合に、補助画像合成部１１７は、このレイヤを下位レイヤに上書きして合成する（ステップＳ１０３）。
【００７０】
ここで、上位レイヤを下位レイヤに上書きして合成する場合の処理について説明する。例として、上位レイヤが、第２の補助画像である領域線画像２２０であり、下位レイヤが、第１の補助画像である基準線画像２１０である場合について説明する。このとき、領域線画像２２０の背景領域２２３にあたる部分以外では、上述の基本的な合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（３）のようになる。一方、領域線画像２２０の背景領域２２３にあたる部分では、上述の基本的な合成処理とは異なる合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（４）のようになる。
【００７１】
【数４】
【００７２】
これによって、合成補助画像２５０には、領域線画像２２０のＲＧＢＡの値だけが反映される。つまり、第２の補助画像である領域線画像２２０に設定された背景領域２２３において、第１の補助画像である基準線画像２１０は完全に透明になっている。従って、背景領域２２３において、領域線画像２２０の画素が完全に透明（ｓＡ＝０）である部分では、合成補助画像２５０は透明になり、合成補助画像２５０と撮像画像３００との合成後の画像では、撮像画像３００が完全に透過して表示される。
【００７３】
再び図６を参照して、ステップＳ１０１において、合成するレイヤの合成モードが「上書きモード」ではないと判定された場合、次に、補助画像合成部１１７は、合成するレイヤの合成モードが「透明度変更モード」であるか否かを判定する（ステップＳ１０５）。ここで、合成モードが「透明度変更モード」である場合に、補助画像合成部１１７は、このレイヤを下位レイヤの透明度を変更して合成する（ステップＳ１０７）。
【００７４】
ここで、上位レイヤを下位レイヤの透明度を変更して合成する場合の処理について説明する。例として、上位レイヤが、第２の補助画像である領域線画像２２０であり、下位レイヤが、第１の補助画像である基準線画像２１０である場合について説明する。このとき、領域線画像２２０の背景領域２２３にあたる部分以外では、上述の基本的な合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（３）のようになる。一方、領域線画像２２０の背景領域２２３にあたる部分では、上述の基本的な合成処理とは異なる合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（５）のようになる。なお、ｖＡは、表１に示された合成モード情報において、「透明度変更モード」の場合に設定される１〜１００の数値を１００で割った、０．０１〜１の範囲の値である。
【００７５】
【数５】
【００７６】
これによって、合成補助画像２５０には、領域線画像２２０のＲＧＢＡの値と、ｖＡの値に応じて透明度が変更された基準線画像２１０のＲＧＢＡの値とが反映される。上記の式（５）は、式（３）において、ｄＡをｄＡ×ｖＡにしたものである。つまり、第２の補助画像である領域線画像２２０に設定された背景領域２２３において、第１の補助画像である基準線画像２１０の透明度が変更され、基準線画像２１０は半透明になっている。半透明の度合いは、上記の合成モード情報において設定される値によって変化し、値がより小さいほど、基準線画像２１０はより透明に近くなる。従って、背景領域２２３において、領域線画像２２０の画素が完全に透明（ｓＡ＝０）である部分では、合成補助画像２５０に基準線画像２１０が表示されるが、そのアルファ値ｄＡは、基準線画像２１０の元のアルファ値ｄＡよりも小さく（∵ｖＡは０．０１〜１の範囲）、基準線画像２１０の表示領域２１１は半透明になって表示される。このため、合成補助画像２５０と撮像画像３００との合成後の画像では、撮像画像３００がある程度透過して表示される。
【００７７】
再び図６を参照して、ステップＳ１０５において、合成するレイヤの合成モードが「透明度変更モード」ではないと判定された場合、補助画像合成部１１７は、合成するレイヤの合成モードが「通常合成モード」であると判断する。次に、補助画像合成部１１７は、このレイヤを下位レイヤにそのまま合成する（ステップＳ１０９）。この場合、領域線画像２２０の背景領域２２３にあたる部分を含めた領域で、上述の基本的な合成処理が実行され、合成後の画素のＲＧＢＡの値は式（３）のようになる。
【００７８】
ステップＳ１０３、ステップＳ１０７、またはステップＳ１０９における合成処理の後、補助画像合成部１１７は、合成するレイヤが最上位レイヤであるか否かを判定する（ステップＳ１１１）。ここで、合成するレイヤが最上位レイヤである場合、補助画像合成部１１７は、処理を終了する。一方、ステップＳ１１１において、合成するレイヤが最上位レイヤではない場合、補助画像合成部１１７は、１つ上位のレイヤの処理に移り（ステップＳ１１３）、ステップＳ１０１に戻る。
【００７９】
＜２．第２の実施形態＞
次に、図７を参照して、本発明の第２の実施形態について説明する。なお、本発明の第２の実施形態は、第１の実施形態と比べて、撮像装置が表示モード設定機能を有する点において相違するが、その他の機能構成は第１の実施形態と略同一であるため、詳細説明を省略する。
【００８０】
本実施形態において、制御部１１１は、操作部１０９によって取得されたユーザの操作に応じて、第２の補助画像である領域線画像２２０に設定される合成モード情報を変更し、これによって、第１の補助画像である基準線画像２１０の、補助画像合成部１１７による変更後の透明度を設定する。具体的には、制御部１１１は、領域線画像２２０に設定される合成モードが、「通常合成モード」、「上書きモード」、または「透明度変更モード」のいずれであるかを変更する。また、制御部１１１は、合成モードが「透明度変更モード」である場合に、変更後の基準線画像２１０の透明度を示す値を変更してもよい。なお、制御部１１１が合成モード情報を変更する補助画像は、領域線画像２２０には限られず、他の補助画像であってもよい。
【００８１】
図７には、本発明の第２の実施形態に係る撮像装置１００において、表示制御部１１９によって表示される表示モード設定画面４００が示されている。表示モード設定画面４００は、例えば撮像装置１００の操作部１０９に含まれるメニューボタンの押下によって表示部１２１に表示される。図示された例においては、表示モード設定画面４００には、上書きモードボタン４１０、透明度変更モードボタン４２０、通常合成モードボタン４３０が含まれる。制御部１１１は、例えば操作部１０９に含まれる十字ボタンまたはタッチパネルなどを用いた、これらのボタンに対する操作によって、基準線画像２１０の変更後の透明度を設定するためのユーザの操作を取得する。これによって、例えば、ユーザが上書きモードボタン４１０を押下した場合、制御部１１１は、記憶部１０７に格納される領域線画像２２０に付加する合成モード情報の合成モードを「上書きモード」にする。
【００８２】
なお、表示モード設定画面４００は、必ずしも図示されているような画面でなくてもよい。例えば、表示モード設定画面４００は、上書きモードボタン４１０と、通常合成モードボタン４３０だけを含んでいてもよい。また、表示モード設定画面４００は、基準線画像２１０の変更後の透明度を直接設定するスライドバーなど調節用の操作子を含んでいてもよい。
【００８３】
また、本発明の第２の実施形態の変形例として、制御部１１１は、撮像処理の状態に応じて、第２の補助画像である領域線画像２２０に設定される合成モード情報を自動的に変更し、これによって、第１の補助画像である基準線画像２１０の、補助画像合成部１１７による変更後の透明度を設定してもよい。例えば、制御部１１１は、オートフォーカス部１１３による合焦をトリガーとして、オートフォーカス枠の画像である領域線画像２２０の背景領域２２３において基準線画像２１０の透明度を変更し、基準線画像２１０を完全に透明に、または半透明にしてもよい。また、制御部１１１は、顔検出部１１５による下位の領域の検出をトリガーとして、顔検出枠の画像である領域線画像２２０の背景領域２２３において基準線画像２１０の透明度を変更し、基準線画像２１０を完全に透明に、または半透明にしてもよい。
【００８４】
＜３．第３の実施形態＞
次に、図８〜図１１を参照して、本発明の第３の実施形態について説明する。なお、本発明の第３の実施形態は、第１の実施形態と比べて、第２の補助画像である領域線画像２２０の構成において相違するが、その他の機能構成は第１の実施形態と略同一であるため、詳細説明を省略する。なお、以下の説明における領域線画像２２０は、表示の状態を理解しやすくするために、撮像画像３００に重畳された状態で図示されている。
【００８５】
図８には、本実施形態に係る領域線画像２２０の第１の例として、領域線画像２２０ｃが示されている。領域線画像２２０ｃにおける表示領域２２１ｃは、画面２００に１つ設定されたオートフォーカス枠である。表示領域２２１ｃは、例えば、ユーザの設定によって、撮像装置１００のオートフォーカス部１１３によるオートフォーカスの対象となる領域、または、オートフォーカス部１１３の処理によって合焦された領域を示すものでありうる。
【００８６】
図９には、本実施形態に係る領域線画像２２０の第２の例として、領域線画像２２０ｄが示されている。領域線画像２２０ｄにおける表示領域２２１ｄは、画面２００に複数設定されたオートフォーカス枠である。表示領域２２１ｄに含まれる複数のオートフォーカス枠は、互いに透明度が異なるものであってもよい。図示された例において、表示領域２２１ｄは、１５個のオートフォーカス枠であり、不透明に近い１つのオートフォーカス枠と、半透明の１４個のオートフォーカス枠を含む。このうち、半透明なオートフォーカス枠は、例えば、撮像装置１００のオートフォーカス部１１３がオートフォーカスの対象とすることが可能な領域を示すものでありうる。また、不透明に近いオートフォーカス枠は、例えば、１５個のオートフォーカス枠の中からユーザによって選択によって、オートフォーカス部１１３によるオートフォーカスの対象となる領域、または、１５個のオートフォーカス枠の中で、オートフォーカス部１１３の処理によって合焦された領域を示すものでありうる。
【００８７】
図１０には、本実施形態に係る領域線画像２２０の第３の例として、領域線画像２２０ｅが示されている。領域線画像２２０ｅにおける表示領域２２１ｅは、画面２００に複数設定されたオートフォーカス枠である。表示領域２２１ｅに含まれる複数のオートフォーカス枠は、いずれも半透明で表示されている。図示された例において、表示領域２２１ｅは、半透明で表示された１５個のオートフォーカス枠である。これらのオートフォーカス枠は、例えば、撮像装置１００のオートフォーカス部１１３がオートフォーカスの対象とすることが可能な領域を示すものでありうる。
【００８８】
図１１には、本実施形態に係る領域線画像２２０の第４の例として、領域線画像２２０ｆが示されている。領域線画像２２０ｆにおける表示領域２２１ｆは、画面２００に複数設定されたオートフォーカス枠である。表示領域２２１ｆに含まれる複数のオートフォーカス枠は、いずれも不透明に近い。図示された例において、表示領域２２１ｆは、５つのオートフォーカス枠である。なお、オートフォーカス枠の数は５つには限られない。これらのオートフォーカス枠は、例えば、撮像装置１００のオートフォーカス部１１３の処理によって合焦された領域を示すものでありうる。
【００８９】
以上の４種類の領域線画像２２０ｃ〜２２０ｆを用いた撮像装置１００の動作例について説明する。この動作例において、撮像装置１００は、複数のオートフォーカス枠から、合焦可能なオートフォーカス枠を自動的に抽出する。まず、補助画像合成部１１７は、図１０において示された領域線画像２２０ｅを含む合成補助画像２５０を生成する。この合成補助画像２５０が撮像画像３００に重畳させることによって、ユーザは、オートフォーカス部１１３がオートフォーカスの対象とすることが可能な領域を認識する。この状態で、ユーザが、例えば操作部１０９に含まれるシャッターボタンの操作によって、合焦の指示を示す操作信号を制御部１１１に与えた場合、制御部１１１は、オートフォーカス部１１３に合焦の動作をさせる。その結果、合焦された領域が複数であれば、制御部１１１は、図１１において示された領域線画像２２０ｆを生成して補助画像合成部１１７に提供する。また、合焦された領域が１つであれば、制御部１１１は、図８において示された領域線画像２２０ｃを生成して補助画像合成部１１７に提供する。補助画像合成部１１７は、領域線画像２２０ｆまたは領域線画像２２０ｃを含む合成補助画像２５０を生成する。この合成補助画像２５０が撮像画像３００に重畳されることによって、ユーザは、オートフォーカス部１１３によって合焦された領域を認識する。
【００９０】
さらに、４種類の領域線画像２２０ｃ〜２２０ｆを用いた撮像装置１００の別の動作例について説明する。この動作例において、撮像装置１００は、複数のオートフォーカス枠から、ユーザの操作に基づいて合焦するオートフォーカス枠を選択する。まず、補助画像合成部１１７は、図９において示された領域線画像２２０ｄを含む合成補助画像２５０を生成する。ここで、領域線画像２２０ｄにおいて不透明に近い色で示されたオートフォーカス枠は、現在選択されているオートフォーカス枠を示す。この状態で、ユーザは、例えば操作部１０９に含まれる十字キーの操作によって、選択されているオートフォーカス枠を移動する。制御部１１１は、ユーザの操作に応じて、領域線画像２２０ｄにおいて不透明に近い色で示されるオートフォーカス枠の位置を更新し、更新された領域線画像２２０ｄを補助画像合成部１１７に提供する。さらに、ユーザが、例えば操作部１０９に含まれるシャッターボタンの操作によって、合焦の指示を示す操作信号を制御部１１１に与えた場合、制御部１１１は、オートフォーカス部１１３に合焦の動作をさせる。このとき、制御部１１１は、図８において示された領域線画像２２０ｃを生成して補助画像合成部１１７に提供する。補助画像合成部１１７は、領域線画像２２０ｃを含む合成補助画像２５０を生成する。この合成補助画像２５０が撮像画像３００に重畳されることによって、ユーザは、選択されたオートフォーカス枠によって示される領域について合焦されたことを認識する。
【００９１】
以上で説明された本発明の第３の実施形態では、領域線画像２２０の背景領域２２３においてグリッド線などの基準線画像の透明度が変更されることによって、例えば領域線画像２２０ｃ〜２２０ｆを用いた上記のような撮像装置１００の動作において、ユーザがオートフォーカス枠に含まれる画像を認識することが容易になる。
【００９２】
＜４．まとめ＞
上記の本発明の実施形態において、撮像装置は、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、第２の補助画像に設定された透明な背景領域において第１の補助画像の表示領域の透明度を変更する補助画像合成部と、撮像画像に合成補助画像を重畳して表示部に表示させる表示制御部とを備える。このような構成によれば、第１の補助画像と第２の補助画像とが重複して表示される場合に、第２の補助画像の背景領域における第１の補助画像の透明度が変更されて表示されるため、第２の補助画像に対する第１の補助画像の干渉を抑制することができる。
【００９３】
また、補助画像合成部は、少なくとも第２の補助画像に付加された合成モード情報に基づいて、透明度を変更してもよい。このような構成によれば、複数の補助画像において、第１の補助画像と第２の補助画像に相当する組み合わせを複数設定した場合に、それぞれの組み合わせごとに、透明度の変更の仕方を設定することができる。
【００９４】
また、補助画像合成部は、背景領域において第１の補助画像の表示領域を完全に透明にしてもよい。このような構成によれば、合成補助画像において、第２の補助画像の背景領域では、第２の補助画像だけが表示され、ユーザは、第２の補助画像によって示される内容を明確に把握することができる。
【００９５】
また、背景領域は、第２の補助画像の表示領域を包含する領域であってもよい。このような構成によれば、第２の補助画像の表示領域の近傍にある程度のマージンが確保され、第１の補助画像の表示領域と第２の補助画像の表示領域とが連続しないため、ユーザは、第１の補助画像と第２の補助画像とを容易に区別して視認することができる。
【００９６】
また、第１の補助画像は、撮像画像の基準線画像であり、第２の補助画像は、撮像画像の領域線画像であってもよい。このような構成によれば、画面の全体に表示される基準線画像に、画面の特定の部分に表示される領域線画像が重複した場合に、領域線画像によって示される領域への基準線画像の干渉を抑制することができる。
【００９７】
また、基準線画像は、グリッド線画像であり、領域線画像は、オートフォーカス枠画像であってもよい。このような構成によれば、オートフォーカス枠の内部でのグリッド線の表示を透明または半透明にして、オートフォーカス枠に含まれる被写体を容易に確認することができる。
【００９８】
また、オートフォーカス枠画像は、複数のオートフォーカス枠を含んでもよい。このような構成によれば、撮像画像に対して複数設定されたオートフォーカス枠を、領域線画像と容易に区別して視認し、またオートフォーカス枠に含まれる被写体を容易に確認することができる。
【００９９】
また、基準線画像は、グリッド線画像であり、領域線画像は、顔検出枠画像であってもよい。このような構成によれば、顔検出枠の内部でのグリッド線の表示を透明または半透明にして、顔検出枠に含まれる顔を容易に確認することができる。
【０１００】
また、撮像装置は、変更後の透明度を、操作部によって取得されたユーザの操作に応じて設定する制御部をさらに備えてもよい。このような構成によれば、第２の補助画像の背景領域における第１の補助画像の透明度をどの程度変更するかを、撮像の被写体やユーザの嗜好に合わせて随意に設定することができる。
【０１０１】
また、撮像装置は、変更後の透明度を撮像処理の状態に応じて自動的に設定する制御部をさらに備えてもよい。このような構成によれば、オートフォーカスの合焦、または顔の領域の検出のような、撮像処理の状態の変化に応じて、ユーザにとってより適切な透明度を設定することができる。
【０１０２】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【０１０３】
１００ 撮像装置
１０１ 撮像部
１０９ 操作部
１１１ 制御部
１１７ 補助画像合成部
１１９ 表示制御部
１２１ 表示部
２００ 画面
２１０ 基準線画像
２１１ 表示領域
２２０ 領域線画像
２２１ 表示領域
２２３ 背景領域
２５０ 合成補助画像
３００ 撮像画像
４００ 表示モード設定画面
【技術分野】
【０００１】
本発明は、撮像装置、プログラムおよび撮像方法に関する。
【背景技術】
【０００２】
デジタルカメラなどの撮像装置においては、例えばＬＣＤ（Liquid Crystal Display）などを用いた背面パネルや電子ファインダなどの表示部が設けられることが一般的である。この表示部では、撮像素子が出力する撮像画像がライブビュー表示されるとともに、例えば撮影モードやズーム倍率など、撮像のための補助的な情報を撮像画像に重畳して表示することが可能である。
【０００３】
このような表示部を用いて、例えばユーザによる撮像の構図の決定を補助する情報をユーザに提供する技術が開発されている。例えば、特許文献１には、電子ファインダにおいてグリッドパターンなどの補助線を撮像画像に重畳表示する技術が記載されている。特許文献２には、ユーザが任意に作成した格子線などの図形画像を同様に重畳表示する技術が記載されている。また、特許文献３には、レンズ交換可能なデジタルカメラにおいて、各レンズに応じた目盛線や格子線などを撮像画像に合成表示する技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２７９７６７号公報
【特許文献２】特開２００９−３３５０７号公報
【特許文献３】特開２００７−３６９８３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記のような技術によって複数の種類の補助的な情報を撮像画像に重畳して表示する場合、複数の情報が重複してしまい、却ってユーザによる撮像の構図の決定などを阻害してしまうという問題があった。例えば、特許文献１に記載されているようなグリッド線と、オートフォーカスによる合焦の対象となる領域を示すオートフォーカス枠とが撮像画像に重畳表示される場合、オートフォーカス枠の内部にグリッド線が表示されて、オートフォーカス枠内の部分の撮像画像が視認しにくい場合がある。
【０００６】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、撮像画像に重畳表示される複数の補助的な情報の干渉を抑制することが可能な、新規かつ改良された撮像装置、プログラムおよび撮像方法を提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明のある観点によれば、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、上記第２の補助画像に設定された透明な背景領域において上記第１の補助画像の表示領域の透明度を変更する補助画像合成部と、撮像画像に上記合成補助画像を重畳して表示部に表示させる表示制御部とを備える撮像装置が提供される。
【０００８】
上記補助画像合成部は、少なくとも上記第２の補助画像に付加された合成モード情報に基づいて、上記透明度を変更してもよい。
【０００９】
上記補助画像合成部は、上記背景領域において上記第１の補助画像の表示領域を完全に透明にしてもよい。
【００１０】
上記背景領域は、上記第２の補助画像の表示領域を包含する領域であってもよい。
【００１１】
上記第１の補助画像は、上記撮像画像の基準線画像であり、上記第２の補助画像は、上記撮像画像の領域線画像であってもよい。
【００１２】
上記基準線画像は、グリッド線画像であり、上記領域線画像は、オートフォーカス枠画像であってもよい。
【００１３】
上記オートフォーカス枠画像は、複数のオートフォーカス枠を含んでもよい。
【００１４】
上記基準線画像は、グリッド線画像であり、上記領域線画像は、顔検出枠画像であってもよい。
【００１５】
上記撮像装置は、上記変更後の透明度を、操作部によって取得されたユーザの操作に応じて設定する制御部をさらに備えてもよい。
【００１６】
上記撮像装置は、上記変更後の透明度を撮像処理の状態に応じて自動的に設定する制御部をさらに備えてもよい。
【００１７】
また、上記課題を解決するために、本発明の別の観点によれば、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、上記第２の補助画像に設定された透明な背景領域において上記第１の補助画像の表示領域の透明度を変更する処理と、撮像画像に上記合成補助画像を重畳して表示部に表示させる処理とをコンピュータに実行させるためのプログラムが提供される。
【００１８】
また、上記課題を解決するために、本発明のさらに別の観点によれば、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、上記第２の補助画像に設定された透明な背景領域において上記第１の補助画像の表示領域の透明度を変更するステップと、撮像画像に上記合成補助画像を重畳して表示部に表示させるステップとを含む撮像方法が提供される。
【発明の効果】
【００１９】
以上説明したように本発明によれば、撮像画像に重畳表示される複数の補助的な情報の干渉を抑制することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の第１の実施形態に係る撮像装置の機能構成を示すブロック図である。
【図２】同実施形態に係る基準線画像の例を示す図である。
【図３】同実施形態に係る領域線画像の例を示す図である。
【図４】同実施形態に係る補助画像の合成処理の一例について説明するための図である。
【図５】同実施形態において表示される画像の例について説明するための図である。
【図６】同実施形態に係る補助画像の合成処理を示すフローチャートである。
【図７】本発明の第２の実施形態に係る表示モード設定画面を示す図である。
【図８】本発明の第３の実施形態に係る領域線画像の例を示す図である。
【図９】同実施形態に係る領域線画像の例を示す図である。
【図１０】同実施形態に係る領域線画像の例を示す図である。
【図１１】同実施形態に係る領域線画像の例を示す図である。
【発明を実施するための形態】
【００２１】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２２】
なお、説明は以下の順序で行うものとする。
１．第１の実施形態
１−１．撮像装置の機能構成
１−２．補助画像の構成
１−３．補助画像の合成
２．第２の実施形態
３．第３の実施形態
４．まとめ
【００２３】
＜１．第１の実施形態＞
（１−１．撮像装置の機能構成）
まず、図１を参照して、本発明の第１の実施形態に係る撮像装置の機能構成について説明する。図１は、本発明の第１の実施形態に係る撮像装置１００の機能構成を示すブロック図である。
【００２４】
撮像装置１００は、被写体を撮像して、撮像によって得られた静止画または動画をデジタル方式の画像データとして記録媒体に記録する。この撮像装置１００は、例えばデジタルカメラとして実現されるほか、上記のような撮像機能を有する任意の電子機器として実現されうる。
【００２５】
図１を参照すると、撮像装置１００は、撮像部１０１、撮像画像処理部１０３、撮像画像記録部１０５、記憶部１０７、操作部１０９、制御部１１１、オートフォーカス部１１３、顔検出部１１５、補助画像合成部１１７、表示制御部１１９、および表示部１２１を含む。
【００２６】
撮像部１０１は、被写体を撮像して、撮像画像を出力する。撮像部１０１は、例えば、撮像光学系、撮像素子、タイミングジェネレータ、および光学部品駆動部などを含む。ここで、撮像光学系は、フォーカスレンズ、ズームレンズ等の各種レンズ、不要な波長を除去する光学フィルタ、および絞りなどの光学部品からなる。被写体から入射された光学像（被写体像）は、撮像光学系における各光学部品を介して、撮像素子の露光面に結像される。撮像素子（イメージセンサ）は、例えば、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像素子で構成される。この撮像素子は、撮像光学系から導かれた光学像を光電変換し、撮像画像を表す画像信号（アナログ画像信号）を撮像画像処理部１０３に出力する。
【００２７】
撮像画像処理部１０３は、撮像部１０１から出力される撮像画像を表す画像信号に対して所定の信号処理を実行し、信号処理後の画像信号を出力する。撮像画像処理部１０３は、例えばＤＳＰ（Digital Signal Processor）を用いて実現されうる。この撮像画像処理部１０３は、例えば、アナログ信号処理部、アナログ／デジタル変換部、およびデジタル信号処理部などを含む。ここで、アナログ信号処理部は、画像信号を前処理するいわゆるアナログフロントエンドである。アナログ信号処理部は、例えば、撮像部１０１から出力される画像信号に対して、ＣＤＳ（Correlated Double Sampling：相関２重サンプリング）処理、ＰＧＡ（Programmable Gain Amplifier）によるゲイン処理などを実行する。アナログ／デジタル変換部は、アナログ信号処理部から入力されたアナログ画像信号をデジタル画像信号に変換して、デジタル信号処理部に出力する。デジタル信号処理部は、入力されたデジタル画像信号に対して、例えば、ノイズ除去、ホワイトバランス調整、色補正、エッジ強調、ガンマ補正などのデジタル信号処理を実行し、デジタル信号処理後の画像信号を撮像画像記録部１０５および表示制御部１１９に出力する。なお、撮像画像処理部１０３は、必ずしもアナログおよびデジタル信号処理を実行しなくてもよい。例えば、撮像部１０１がデジタル画像信号を出力し、撮像画像処理部１０３がデジタル信号処理だけを実行してもよい。
【００２８】
撮像画像記録部１０５は、撮像画像記録部１０５は、撮像画像処理部１０３から出力される信号処理後の画像信号を、例えばＪＰＥＧ（Joint Photographic Experts Group）などの所定の圧縮符号化様式で圧縮し、画像データとして記憶部１０７に格納する。撮像画像記録部１０５は、さらに、画像データに対する付加的な情報を示すメタデータを記憶部１０７に格納してもよい。撮像画像記録部１０５は、撮像画像処理部１０３と同様に、例えばＤＳＰを用いて実現されうる。
【００２９】
記憶部１０７には、撮像装置１００の処理に関するデータが格納される。記憶部１０７は、例えば、フラッシュＲＯＭ（Read Only Memory）、もしくはＤＲＡＭ（Dynamic Random Access Memory）などの半導体メモリ、ＢＤ（Blu-ray Disc）、ＤＶＤ（Digital Versatile Disc）、もしくはＣＤ（Compact Disc）などの光ディスク、またはハードディスクなどでありうる。記憶部１０７は、撮像装置１００に内蔵される記憶装置であってもよく、メモリカードなど、撮像装置１００に着脱可能なリムーバブルメディアであってもよい。また、記憶部１０７は、複数の種類の記憶装置またはリムーバブルメディアを含んでもよい。記憶部１０７には、撮像画像記録部１０５によって画像データが格納されるほか、制御部１１１が用いるプログラム、および後述する補助画像のデータなどが格納されうる。
【００３０】
操作部１０９は、撮像装置１００を操作するためのユーザインターフェースとして機能する、操作部１０９は、例えば、撮像装置１００の外装に設けられたシャッターボタン、十字ボタン、またはメニューボタンなど各種の操作ボタン、タッチパネル、またはリモートコントローラなどであり、ユーザ操作に応じた操作信号を制御部１１１に出力する。操作部１０９は、例えば、撮像装置１００の起動および停止、静止画像の撮影、動画像の撮影開始および終了、または撮像装置１００の各種機能の設定などのユーザ操作に応じた操作信号を制御部１１１に出力する。
【００３１】
制御部１１１は、撮像装置１００の各部の動作を制御する。制御部１１１は、例えばＤＳＰに設けられたマイクロコントローラなどの演算処理装置を用いて実現されうる。制御部１１１は、例えば記憶部１０７に含まれるフラッシュＲＯＭなどに格納されたプログラムに基づいて動作することによって、制御のために必要な各種の演算処理を実行する。演算処理には、記憶部１０７に含まれるＤＲＡＭが用いられてもよい。なお、上記のプログラムは、ディスク状記録媒体、またはメモリカードなどのリムーバブル記憶媒体に格納されて撮像装置１００に提供されるものであってもよく、またＬＡＮ（Local Area Network）、インターネット等のネットワークを介して撮像装置１００にダウンロードされるものであってもよい。
【００３２】
オートフォーカス部１１３は、制御部１１１を介して、撮像部１０１に含まれる撮像光学系のフォーカスレンズを移動させ、特定の被写体に対して撮像光学系の焦点を自動的に合わせる。オートフォーカス部１１３は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。オートフォーカス部１１３は、後述するオートフォーカス枠またはオートフォーカス領域についての情報を出力してもよい。オートフォーカス部１１３は、例えば、位相差検出方式によって動作してもよい。この場合、まず、オートフォーカス部１１３は、図示しないラインセンサなどの測光センサを用いて、撮像画像に予め設定されたオートフォーカス枠内の位相差を検出する。次に、オートフォーカス部１１３は、この位相差に基づいて撮像光学系の焦点がオートフォーカス枠内の特定の被写体に合焦するような焦点位置（フォーカスポジション）を計算する。さらに、オートフォーカス部１１３は、制御部１１１を介して撮像部１０１の光学部品駆動部を制御してフォーカスレンズを移動させ、撮像光学系の焦点を上記の特定の被写体に合焦させる。ここで、オートフォーカス部１１３は、予め設定された複数のオートフォーカス枠の中から、操作部１０９を介したユーザ操作によって、または自動的に抽出した１または複数のオートフォーカス枠に対して、上記の合焦の処理を行ってもよい。また、オートフォーカス部１１３は、コントラスト検出方式によって動作してもよい。この場合、まず、オートフォーカス部１１３は、制御部１１１を介して撮像部１０１の光学部品駆動部を制御してフォーカスレンズを移動させる。次に、オートフォーカス部１１３は、撮像画像の被写体を含む特定のオートフォーカス領域におけるコントラストを検出し、コントラストが最大になる位置をフォーカスポジションとして特定する。上記のオートフォーカス領域は、撮像画像の中の任意の領域でありえ、例えば、後述する顔検出部１１５によって検出された顔の領域であってもよい。
【００３３】
顔検出部１１５は、撮像画像に含まれる１または複数の顔を検出する。顔検出部１１５は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。顔検出部１１５は、撮像画像から、例えばウェーブレット変換やＨａａｒ特徴検出などのアルゴリズムを用いて顔の領域を算出する。顔の領域とは、例えば、あご、耳、および眉が含まれる最小矩形の座標値でありうる。なお、顔の領域は、必ずしも矩形でなくてもよく、三角形または楕円などの形であってもよい。また、顔検出部１１５は、撮像画像に含まれるすべての顔を検出するように設定されていてもよく、また顔の領域の大きさなどの順位によって数を限定して顔を検出するように設定されていてもよい。顔検出部１１５は、算出した顔の領域の情報を出力してもよい。
【００３４】
補助画像合成部１１７は、撮像画像に重畳表示するための複数の補助画像を合成して合成補助画像を生成し、表示制御部１１９に出力する。補助画像合成部１１７は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。補助画像は、撮像のための補助的な情報を提供する画像であり、具体的には、オートフォーカス部１１３による合焦の対象になるオートフォーカス枠を示す画像、顔検出部１１５によって検出された顔の領域の画像、ユーザによる撮像の構図の決定を補助するグリッド線の画像、撮影モードやズーム倍率などの設定値を示す画像、または、撮像装置１００がタッチパネルを有する場合に操作ボタンの画像などでありうる。この補助画像は、記憶部１０７に予め格納された画像データによるものであってもよく、また、オートフォーカス部１１３または顔検出部１１５の出力に基づいて生成されるものであってもよい。補助画像合成部１１７は、例えば、複数の補助画像のそれぞれをレイヤとして合成し、１つの合成補助画像を生成する。このとき、補助画像合成部１１７は、補助画像の特定の部分の透明度を変化させうる。補助画像合成部１１７は、透明度を変化させるために、補助画像に付加されている後述の合成モード情報を参照してもよい。なお、補助画像合成部１１７の処理については後述する。
【００３５】
表示制御部１１９は、表示部１２１に各種データを表示させるための表示制御を行う。表示制御部１１９は、撮像画像処理部１０３などと同様に、例えばＤＳＰを用いて実現されうる。表示制御部１１９は、例えば、撮像画像処理部１０３からリアルタイムで入力される撮像中の撮像画像（スルー画像）に、補助画像合成部１１７から出力される合成補助画像を重畳した画像データを、表示部１２１に出力する。表示部１２１は、例えば、ＬＣＤ、または有機ＥＬ（Electro-Luminescence）ディスプレイなどで構成され、表示制御部１１９から入力される画像データを表示する。上記の場合、表示部１２１には、撮像中の撮像画像に、撮像のための補助的な情報が重畳表示された画像が表示される。これによって、ユーザは、撮像中の画像、および撮像中の画像に対する補助的な情報を同時に見ながら、撮像装置１００を操作することが可能である。
【００３６】
ここで、表示制御部１１９から表示部１２１に出力される画像データは、定期的に更新される。補助画像合成部１１７は、この画像データの更新に合わせて定期的に補助画像を合成して合成補助画像を生成し、表示制御部１１９に出力してもよい。また、補助画像合成部１１７は、合成される補助画像が更新された場合に補助画像を合成して合成補助画像を生成し、表示制御部１１９に出力してもよい。この場合、合成補助画像は記憶部１０７に格納され、次の合成補助画像が補助画像合成部１１７によって出力されるまで、表示制御部１１９によって繰り返し用いられてもよい。
【００３７】
（１−２．補助画像の構成）
次に、図２および図３を参照して、本発明の第１の実施形態に係る補助画像の構成について説明する。図２は、本発明の第１の実施形態に係る第１の補助画像である基準線画像２１０の例を示す図である。図３は、本発明の第１の実施形態に係る第２の補助画像である領域線画像２２０の例を示す図である。ここでは、基準線画像２１０および領域線画像２２０という２つの補助画像を例として説明するが、例えば、撮影モードやズーム倍率などの設定値を示す画像、または、撮像装置１００がタッチパネルを有する場合に操作ボタンの画像などの他の補助画像が、上記の２つの補助画像に代えて、または上記の２つの補助画像と共に用いられてもよい。
【００３８】
（１）基準線画像
図２には、第１の補助画像である基準線画像２１０について、（ａ）〜（ｃ）の３つの例が示されている。基準線画像２１０は、例えばユーザが構図を決定するときの目安または目印として表示され、具体的には、水平線、垂直線、水平線と垂直線とを組み合わせたグリッド線、または画面２００の中心を表す中心マークなどでありうる。基準線画像２１０は、撮像装置１００の記憶部１０７に画像データとして予め格納されているものであってもよい。それぞれの基準線画像２１０において、表示領域２１１以外の部分は透明領域である。基準線画像２１０を撮像画像などの他の画像に重畳した場合、透明領域では重畳された他の画像が透過して表示される。
【００３９】
図２（ａ）に示される基準線画像２１０ａにおいて、表示領域２１１ａは、画面２００を縦横それぞれに３分割するグリッド線である。図２（ｂ）に示される基準線画像２１０ｂにおいて表示領域２１１ｂは、画面２００を縦に４分割、横に６分割する、図２（ａ）に示されるものよりも細かいグリッド線である。図２（ｃ）に示される基準線画像２１０ｃにおいて、表示領域２１１ｃは、画面２００を縦横それぞれに４分割するグリッド線、および画面２００の対角線である。
【００４０】
上記の３つの例以外にも、ユーザの用途や嗜好に応じて様々なパターンの基準線画像２１０が存在しうる。撮像装置１００では、これらの基準線画像２１０のうちのいずれかを表示するように予め設定されてもよく、また、ユーザの操作に応じて、表示する基準線画像２１０を選択可能であってもよい。さらに、撮像装置１００では、撮像画像の内容を認識して自動的に表示する基準線画像２１０が選択されてもよい。
【００４１】
（２）領域線画像
図３には、第２の補助画像である領域線画像２２０について、（ａ）および（ｂ）の２つの例が示されている。領域線画像２２０は、例えば撮像装置１００においてオートフォーカス部１１３の処理で使用されるオートフォーカス枠や、顔検出部１１５によって検出された顔の領域などでありうる。領域線画像２２０は、例えばオートフォーカス部１１３が位相差検出方式で動作する場合のオートフォーカス枠のように、撮像装置１００の記憶部１０７に画像データとして予め格納されているものであってもよい。また、領域線画像２２０は、例えばオートフォーカス部１１３がコントラスト検出方式で動作する場合のオートフォーカス枠、または顔検出部１１５によって検出された顔の領域のように、撮像装置１００の各部によって生成されて記憶部１０７に格納された画像であってもよい。それぞれの領域線画像２２０において、表示領域２２１以外の部分は透明領域である。領域線画像２２０を基準線画像２１０、または撮像画像などの他の画像に重畳した場合、透明領域では重畳された他の画像が透過して表示される。
【００４２】
領域線画像２２０には、さらに、背景領域２２３が設定される。背景領域２２３は、表示領域２２１を包含する領域である。背景領域２２３は、具体的には、図示されているように、領域線画像２２０において表示領域２２１によって囲まれる領域の内側を示す領域でありうる。背景領域２２３は、さらに、表示領域２２１の近傍の領域を含んでもよい。領域線画像２２０を基準線画像２１０などの他の補助画像に重畳した場合、背景領域２２３では、重畳された基準線画像２１０などの他の補助画像の透明度が変更されうる。この透明度変更の処理については後述する。
【００４３】
図３（ａ）に示される領域線画像２２０ａは、オートフォーカス部１１３が位相差検出方式によって動作する場合に、画面２００に設定されうる複数のオートフォーカス枠の画像である。図では９つのオートフォーカス枠が示されているが、オートフォーカス枠の数はこれには限らず、１または任意の複数のオートフォーカス枠が表示されうる。さらに、図３（ａ）では、複数のオートフォーカス枠のうちの１つについて拡大した図が示されている。表示領域２２１ａは、略矩形の領域であり、この略矩形がオートフォーカス枠を示す。背景領域２２３ａは、上記の略矩形の内部の領域と、その近傍とを含む領域である。
【００４４】
図３（ｂ）に示される領域線画像２２０ｂは、オートフォーカス部１１３がコントラスト検出方式によって動作する場合に、画面２００に設定されうる複数のオートフォーカス領域の画像である。図では９つのオートフォーカス領域が示されているが、オートフォーカス領域の数はこれには限られず、１または任意の複数のオートフォーカス領域が表示されうる。さらに、図３（ｂ）では、複数のオートフォーカス領域のうち１つについて拡大した図が示されている。表示領域２２１ｂは、オートフォーカス領域として表示される４つのかぎ状の図形が、略矩形をなすように組み合わされた形状の領域であり、この略矩形がオートフォーカス領域を示す。背景領域２２３ｂは、上記の略矩形の内部と、その近傍とを含む領域である。
【００４５】
（１−３．補助画像の合成）
次に、図４〜図６を参照して、本発明の第１の実施形態に係る補助画像の合成について説明する。図４は、本実施形態に係る補助画像の合成処理の一例について説明するための図である。図５は、本実施形態において表示される画像の例について説明するための図である。図６は、本実施形態に係る補助画像の合成処理を示すフローチャートである。
【００４６】
（１）処理の概略的な説明
図４には、本実施形態に係る撮像装置１００における補助画像の合成処理の一例が概略的に示されている。補助画像合成部１１７は、第１の補助画像である基準線画像２１０ｂと、第２の補助画像である領域線画像２２０ｂとを含む複数の補助画像を合成して、合成補助画像２５０を生成する。合成される補助画像には、さらに、他の補助画像２１５，２２５が含まれてもよい。他の補助画像２１５，２２５は、例えば、上述のように、撮影モードやズーム倍率などの設定値を示す画像、または、撮像装置１００がタッチパネルを有する場合に操作ボタンの画像などでありうる。
【００４７】
なお、図示された例において合成される補助画像の組み合わせは一例である。従って、例えば、基準線画像２１０ｂは、図２において説明された基準線画像２１０ａ，２１０ｃなど、他の種類の基準線画像であってもよい。領域線画像２２０ｂも、図３において説明された領域線画像２２０ａなど、他の種類の領域線画像であってもよい。また、第１の補助画像は必ずしも基準線画像２１０でなくてもよく、第２の補助画像は必ずしも領域線画像２２０でなくてもよい。補助画像合成部１１７によって合成される複数の補助画像には、少なくとも第１の補助画像および第２の補助画像が含まれればよく、他の補助画像２１５，２２５は存在しなくてもよいし、より多く存在してもよい。
【００４８】
ここで、補助画像合成部１１７によって合成される複数の補助画像には、表示優先順位が設定される。図示された例では、順位が低い方から、第１の補助画像である基準線画像２１０ｂ、他の補助画像２１５、第２の補助画像である領域線画像２２０ｂ、他の補助画像２２５の順に表示優先順位が設定されている。補助画像合成部１１７は、表示優先順位がより低い補助画像を下位のレイヤ、表示優先順位がより高い画像を上位のレイヤとするレイヤ構造として各補助画像データを扱い、下位レイヤから順に重ね合わせていくことによって、各補助画像を合成して合成補助画像２５０を生成する。
【００４９】
なお、図示された例において設定される表示優先順位は一例である。従って、例えば、第１の補助画像である基準線画像２１０ｂは、必ずしも最下位のレイヤでなくてもよく、他の補助画像２１５がさらに下位のレイヤに設定されていてもよい。また、領域線画像２２０ｂより上位にはレイヤが存在せず、領域線画像２２０ｂが最上位のレイヤであってもよい。表示優先順位は、第１の補助画像よりも第２の補助画像が高いように設定されればよく、他の補助画像２１５，２２５の表示優先順位はどのように設定されてもよい。
【００５０】
図示された例において、まず、補助画像合成部１１７は、最下位のレイヤとして、第１の補助画像である基準線画像２１０ｂを合成する。基準線画像２１０ｂは、画面２００を縦に４分割、横に６分割するグリッド線である表示領域２１１ｂを含む。次に、補助画像合成部１１７は、１つ上位のレイヤとして、他の補助画像２１５を合成する。次に、補助画像合成部１１７は、さらに上位のレイヤとして、第２の補助画像である領域線画像２２０ｂを合成する。領域線画像２２０ｂは、オートフォーカス領域として表示される４つのかぎ状の図形が略矩形をなすように組み合わされた形状の領域である表示領域２２１ｂと、この略矩形の内部およびその近傍を含む領域である背景領域２２３ｂとを含む。次に、補助画像合成部１１７は、最上位のレイヤとして、他の補助画像２２５を合成して、合成補助画像２５０を完成させる。
【００５１】
合成補助画像２５０においては、基準線画像２１０ｂの表示領域２１１ｂと、領域線画像２２０ｂの表示領域２２１ｂとが表示される。なお、簡単のため、他の補助画像２１５，２２５の表示領域は図示されていない。ここで、第１の補助画像である基準線画像２１０ｂの表示領域２１１ｂであるグリッド線は、第２の補助画像である領域線画像２２０ｂに設定された背景領域２２３ｂにおいて透明になっている。つまり、領域線画像２２０ｂの背景領域２２３ｂにおいては、基準線画像２１０ｂの表示領域２１１ｂは表示されていない。これは、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂの透明度が変更され、基準線画像２１０ｂの表示領域２１１ｂが完全に透明にされたことによるものである。なお、基準線画像２１０ｂの表示領域２１１ｂは、完全に透明にされなくてもよく、半透明にされてもよい。また、図示されていない他の補助画像２１５の表示領域も同様に、領域線画像２２０ｂに設定された背景領域２２３ｂにおいて透明または半透明になってもよい。基準線画像２１０ｂの表示領域２１１ｂの透明度を変更する補助画像合成部１１７の処理については後述する。
【００５２】
（２）表示される画像の例
図５には、本実施形態において撮像装置１００の表示制御部１１９によって表示部１２１に表示されうる画像の例が示されている。図４において説明したような処理によって生成された合成補助画像２５０は、表示制御部１１９によって撮像画像３００に重畳されて、表示部１２１に表示される。ここでは、合成補助画像２５０に含まれる基準線画像２１０ｂの表示領域２１１ｂ、および領域線画像２２０ｂの表示領域２２１ｂが図示されている。なお、簡単のため、他の補助画像２１５，２２５の表示領域は図示されていない。
【００５３】
図５（ａ）には、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂであるグリッド線が完全に透明にされた例が示されている。これによって、撮像画像３００のうち、領域線画像２２０ｂの表示領域２２１ｂによって示される略矩形の領域の内部に表示される部分へのグリッド線の干渉をなくし、この部分の視認性を最大化することが可能である。ユーザは、画面２００の背景領域２２３ｂ以外の部分では、表示領域２１１ｂが表示されていることによってグリッド線を利用することが可能である。撮像画像３００のうち上記の略矩形の領域の内部に表示される部分は、例えばオートフォーカス部１１３による合焦の対象になるオートフォーカス枠、または顔検出部１１５によって検出された顔の領域を示す顔検出枠でありうる。
【００５４】
図５（ｂ）には、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂであるグリッド線が半透明にされた例が示されている。これによって、撮像画像３００のうち、領域線画像２２０ｂの表示領域２２１ｂによって示される略矩形の領域の内部に表示される部分へのグリッド線の干渉を軽減し、この部分の視認性を高めつつ、この部分のグリッド線についてもある程度の視認性を確保することが可能である。撮像画像３００のうち上記の略矩形の領域の内部に表示される部分は、図５（ａ）の場合と同様に、オートフォーカス枠、または顔検出枠でありうる。
【００５５】
図５（ｃ）には、領域線画像２２０ｂの背景領域２２３ｂにおいて、基準線画像２１０ｂの表示領域２１１ｂであるグリッド線がそのまま表示された例が示されている。この場合、撮像画像３００のうち、領域線画像２２０ｂの表示領域２２１ｂによって示される略矩形の領域の内部に表示される部分にも、他の部分と同様にグリッド線が表示される。例えばグリッド線を優先して表示させたい場合などのために、撮像装置１００は、背景領域２２３において表示領域２１１の透明度を変更するか否かを切り換え可能であってもよい。
【００５６】
（３）処理の詳細な説明
本実施形態において、各補助画像は、ＲＧＢＡカラーモデルによって表現される。ＲＧＢＡカラーモデルとは、例えば画素ごとに、Ｒ（Red）、Ｇ（Green）、およびＢ（Blue）の各色の情報と、画像データにおける透明度を指定するアルファ値Ａ（Alpha）の情報とを設定して、画像の色を表現する手法である。アルファ値Ａは、０〜１の範囲であり、０で画像が完全に透明になり、１で画像が完全に不透明になる値として設定されうる。なお、色の表現手法は必ずしもＲＧＢＡカラーモデルには限られず、画像の透明度を変更することが可能であれば、どのような手法が用いられてもよい。
【００５７】
以下で、ＲＧＢＡカラーモデルが用いられる場合の、補助画像の基本的な合成処理について説明する。簡単のために、ここでは上位レイヤと下位レイヤの２つのレイヤを合成する場合について説明するが、３つ以上のレイヤを合成する場合も同様である。下位レイヤの任意の画素のＲＧＢＡの値は、式（１）のように設定される。
【００５８】
【数１】
【００５９】
また、上位レイヤの対応する画素のＲＧＢＡの値は、式（２）のように設定される。
【００６０】
【数２】
【００６１】
この場合、合成後の画素のＲＧＢＡの値は、式（３）のようになる。
【００６２】
【数３】
【００６３】
ここで、例えば、上位レイヤのアルファ値ｓＡが１に近い値であれば、下位レイヤのＲ，Ｇ，Ｂは、上位レイヤのＲ，Ｇ，Ｂによって遮蔽され、合成後の画素にはほとんど反映されない。一方、上位レイヤのアルファ値ｓＡが０に近い値であれば、下位レイヤのＲ，Ｇ，Ｂは、上位レイヤのＲ，Ｇ，Ｂを透過して、合成後の画素に反映される。
【００６４】
また、本実施形態において、各補助画像には、合成モード情報が付加されている。合成モード情報は、撮像装置１００の記憶部１０７に格納された補助画像の画像データに予め付加されたものであってもよく、また、制御部１１１によって付加または更新されたものであってもよい。補助画像合成部１１７は、合成モード情報に基づいて、第１の補助画像である基準線画像２１０の表示領域２１１の透明度を変更する。合成モード情報は、例えば表１に示されるような数値情報でありうる。
【００６５】
【表１】
【００６６】
ここで、「通常合成モード」は、上位レイヤにあたる補助画像を、下位レイヤにあたる補助画像の透明度を変更せずにそのまま合成するモードである。「上書きモード」は、上位レイヤにあたる補助画像の背景領域で、下位レイヤにあたる補助画像を完全に透明にして合成するモードである。「透明度変更モード」は、上位レイヤにあたる補助画像の背景領域で、下位レイヤにあたる補助画像の透明度を変更して合成するモードである。「透明度変更モード」では、変更後の透明度の値を設定することが可能であり、この値を調整することによって、下位レイヤにあたる補助画像を半透明にする度合いを調整することが可能である。
【００６７】
なお、合成モード情報は、必ずしもすべての補助画像に付加されていなくてもよい。例えば、合成モード情報は、下位レイヤにあたる補助画像の透明度を変更する、第２の補助画像である領域線画像２２０にだけ付加されていてもよい。この場合、補助画像合成部１１７は、合成モード情報が付加されていない他の補助画像を、合成モード「通常合成モード」であるものとみなして処理してもよい。
【００６８】
図６には、本実施形態に係る撮像装置１００の補助画像合成部１１７における処理を示すフローチャートが示されている。この処理は、補助画像のレイヤ単位のループ処理になっており、下位レイヤから順にこの処理が実行されることによって、複数の補助画像から１つの合成補助画像が生成される。
【００６９】
まず、補助画像合成部１１７は、合成するレイヤの合成モードが「上書きモード」であるか否かを判定する（ステップＳ１０１）。ここで、合成モードが「上書きモード」である場合に、補助画像合成部１１７は、このレイヤを下位レイヤに上書きして合成する（ステップＳ１０３）。
【００７０】
ここで、上位レイヤを下位レイヤに上書きして合成する場合の処理について説明する。例として、上位レイヤが、第２の補助画像である領域線画像２２０であり、下位レイヤが、第１の補助画像である基準線画像２１０である場合について説明する。このとき、領域線画像２２０の背景領域２２３にあたる部分以外では、上述の基本的な合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（３）のようになる。一方、領域線画像２２０の背景領域２２３にあたる部分では、上述の基本的な合成処理とは異なる合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（４）のようになる。
【００７１】
【数４】
【００７２】
これによって、合成補助画像２５０には、領域線画像２２０のＲＧＢＡの値だけが反映される。つまり、第２の補助画像である領域線画像２２０に設定された背景領域２２３において、第１の補助画像である基準線画像２１０は完全に透明になっている。従って、背景領域２２３において、領域線画像２２０の画素が完全に透明（ｓＡ＝０）である部分では、合成補助画像２５０は透明になり、合成補助画像２５０と撮像画像３００との合成後の画像では、撮像画像３００が完全に透過して表示される。
【００７３】
再び図６を参照して、ステップＳ１０１において、合成するレイヤの合成モードが「上書きモード」ではないと判定された場合、次に、補助画像合成部１１７は、合成するレイヤの合成モードが「透明度変更モード」であるか否かを判定する（ステップＳ１０５）。ここで、合成モードが「透明度変更モード」である場合に、補助画像合成部１１７は、このレイヤを下位レイヤの透明度を変更して合成する（ステップＳ１０７）。
【００７４】
ここで、上位レイヤを下位レイヤの透明度を変更して合成する場合の処理について説明する。例として、上位レイヤが、第２の補助画像である領域線画像２２０であり、下位レイヤが、第１の補助画像である基準線画像２１０である場合について説明する。このとき、領域線画像２２０の背景領域２２３にあたる部分以外では、上述の基本的な合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（３）のようになる。一方、領域線画像２２０の背景領域２２３にあたる部分では、上述の基本的な合成処理とは異なる合成処理が実行され、合成後の画素のＲＧＢＡの値は、式（５）のようになる。なお、ｖＡは、表１に示された合成モード情報において、「透明度変更モード」の場合に設定される１〜１００の数値を１００で割った、０．０１〜１の範囲の値である。
【００７５】
【数５】
【００７６】
これによって、合成補助画像２５０には、領域線画像２２０のＲＧＢＡの値と、ｖＡの値に応じて透明度が変更された基準線画像２１０のＲＧＢＡの値とが反映される。上記の式（５）は、式（３）において、ｄＡをｄＡ×ｖＡにしたものである。つまり、第２の補助画像である領域線画像２２０に設定された背景領域２２３において、第１の補助画像である基準線画像２１０の透明度が変更され、基準線画像２１０は半透明になっている。半透明の度合いは、上記の合成モード情報において設定される値によって変化し、値がより小さいほど、基準線画像２１０はより透明に近くなる。従って、背景領域２２３において、領域線画像２２０の画素が完全に透明（ｓＡ＝０）である部分では、合成補助画像２５０に基準線画像２１０が表示されるが、そのアルファ値ｄＡは、基準線画像２１０の元のアルファ値ｄＡよりも小さく（∵ｖＡは０．０１〜１の範囲）、基準線画像２１０の表示領域２１１は半透明になって表示される。このため、合成補助画像２５０と撮像画像３００との合成後の画像では、撮像画像３００がある程度透過して表示される。
【００７７】
再び図６を参照して、ステップＳ１０５において、合成するレイヤの合成モードが「透明度変更モード」ではないと判定された場合、補助画像合成部１１７は、合成するレイヤの合成モードが「通常合成モード」であると判断する。次に、補助画像合成部１１７は、このレイヤを下位レイヤにそのまま合成する（ステップＳ１０９）。この場合、領域線画像２２０の背景領域２２３にあたる部分を含めた領域で、上述の基本的な合成処理が実行され、合成後の画素のＲＧＢＡの値は式（３）のようになる。
【００７８】
ステップＳ１０３、ステップＳ１０７、またはステップＳ１０９における合成処理の後、補助画像合成部１１７は、合成するレイヤが最上位レイヤであるか否かを判定する（ステップＳ１１１）。ここで、合成するレイヤが最上位レイヤである場合、補助画像合成部１１７は、処理を終了する。一方、ステップＳ１１１において、合成するレイヤが最上位レイヤではない場合、補助画像合成部１１７は、１つ上位のレイヤの処理に移り（ステップＳ１１３）、ステップＳ１０１に戻る。
【００７９】
＜２．第２の実施形態＞
次に、図７を参照して、本発明の第２の実施形態について説明する。なお、本発明の第２の実施形態は、第１の実施形態と比べて、撮像装置が表示モード設定機能を有する点において相違するが、その他の機能構成は第１の実施形態と略同一であるため、詳細説明を省略する。
【００８０】
本実施形態において、制御部１１１は、操作部１０９によって取得されたユーザの操作に応じて、第２の補助画像である領域線画像２２０に設定される合成モード情報を変更し、これによって、第１の補助画像である基準線画像２１０の、補助画像合成部１１７による変更後の透明度を設定する。具体的には、制御部１１１は、領域線画像２２０に設定される合成モードが、「通常合成モード」、「上書きモード」、または「透明度変更モード」のいずれであるかを変更する。また、制御部１１１は、合成モードが「透明度変更モード」である場合に、変更後の基準線画像２１０の透明度を示す値を変更してもよい。なお、制御部１１１が合成モード情報を変更する補助画像は、領域線画像２２０には限られず、他の補助画像であってもよい。
【００８１】
図７には、本発明の第２の実施形態に係る撮像装置１００において、表示制御部１１９によって表示される表示モード設定画面４００が示されている。表示モード設定画面４００は、例えば撮像装置１００の操作部１０９に含まれるメニューボタンの押下によって表示部１２１に表示される。図示された例においては、表示モード設定画面４００には、上書きモードボタン４１０、透明度変更モードボタン４２０、通常合成モードボタン４３０が含まれる。制御部１１１は、例えば操作部１０９に含まれる十字ボタンまたはタッチパネルなどを用いた、これらのボタンに対する操作によって、基準線画像２１０の変更後の透明度を設定するためのユーザの操作を取得する。これによって、例えば、ユーザが上書きモードボタン４１０を押下した場合、制御部１１１は、記憶部１０７に格納される領域線画像２２０に付加する合成モード情報の合成モードを「上書きモード」にする。
【００８２】
なお、表示モード設定画面４００は、必ずしも図示されているような画面でなくてもよい。例えば、表示モード設定画面４００は、上書きモードボタン４１０と、通常合成モードボタン４３０だけを含んでいてもよい。また、表示モード設定画面４００は、基準線画像２１０の変更後の透明度を直接設定するスライドバーなど調節用の操作子を含んでいてもよい。
【００８３】
また、本発明の第２の実施形態の変形例として、制御部１１１は、撮像処理の状態に応じて、第２の補助画像である領域線画像２２０に設定される合成モード情報を自動的に変更し、これによって、第１の補助画像である基準線画像２１０の、補助画像合成部１１７による変更後の透明度を設定してもよい。例えば、制御部１１１は、オートフォーカス部１１３による合焦をトリガーとして、オートフォーカス枠の画像である領域線画像２２０の背景領域２２３において基準線画像２１０の透明度を変更し、基準線画像２１０を完全に透明に、または半透明にしてもよい。また、制御部１１１は、顔検出部１１５による下位の領域の検出をトリガーとして、顔検出枠の画像である領域線画像２２０の背景領域２２３において基準線画像２１０の透明度を変更し、基準線画像２１０を完全に透明に、または半透明にしてもよい。
【００８４】
＜３．第３の実施形態＞
次に、図８〜図１１を参照して、本発明の第３の実施形態について説明する。なお、本発明の第３の実施形態は、第１の実施形態と比べて、第２の補助画像である領域線画像２２０の構成において相違するが、その他の機能構成は第１の実施形態と略同一であるため、詳細説明を省略する。なお、以下の説明における領域線画像２２０は、表示の状態を理解しやすくするために、撮像画像３００に重畳された状態で図示されている。
【００８５】
図８には、本実施形態に係る領域線画像２２０の第１の例として、領域線画像２２０ｃが示されている。領域線画像２２０ｃにおける表示領域２２１ｃは、画面２００に１つ設定されたオートフォーカス枠である。表示領域２２１ｃは、例えば、ユーザの設定によって、撮像装置１００のオートフォーカス部１１３によるオートフォーカスの対象となる領域、または、オートフォーカス部１１３の処理によって合焦された領域を示すものでありうる。
【００８６】
図９には、本実施形態に係る領域線画像２２０の第２の例として、領域線画像２２０ｄが示されている。領域線画像２２０ｄにおける表示領域２２１ｄは、画面２００に複数設定されたオートフォーカス枠である。表示領域２２１ｄに含まれる複数のオートフォーカス枠は、互いに透明度が異なるものであってもよい。図示された例において、表示領域２２１ｄは、１５個のオートフォーカス枠であり、不透明に近い１つのオートフォーカス枠と、半透明の１４個のオートフォーカス枠を含む。このうち、半透明なオートフォーカス枠は、例えば、撮像装置１００のオートフォーカス部１１３がオートフォーカスの対象とすることが可能な領域を示すものでありうる。また、不透明に近いオートフォーカス枠は、例えば、１５個のオートフォーカス枠の中からユーザによって選択によって、オートフォーカス部１１３によるオートフォーカスの対象となる領域、または、１５個のオートフォーカス枠の中で、オートフォーカス部１１３の処理によって合焦された領域を示すものでありうる。
【００８７】
図１０には、本実施形態に係る領域線画像２２０の第３の例として、領域線画像２２０ｅが示されている。領域線画像２２０ｅにおける表示領域２２１ｅは、画面２００に複数設定されたオートフォーカス枠である。表示領域２２１ｅに含まれる複数のオートフォーカス枠は、いずれも半透明で表示されている。図示された例において、表示領域２２１ｅは、半透明で表示された１５個のオートフォーカス枠である。これらのオートフォーカス枠は、例えば、撮像装置１００のオートフォーカス部１１３がオートフォーカスの対象とすることが可能な領域を示すものでありうる。
【００８８】
図１１には、本実施形態に係る領域線画像２２０の第４の例として、領域線画像２２０ｆが示されている。領域線画像２２０ｆにおける表示領域２２１ｆは、画面２００に複数設定されたオートフォーカス枠である。表示領域２２１ｆに含まれる複数のオートフォーカス枠は、いずれも不透明に近い。図示された例において、表示領域２２１ｆは、５つのオートフォーカス枠である。なお、オートフォーカス枠の数は５つには限られない。これらのオートフォーカス枠は、例えば、撮像装置１００のオートフォーカス部１１３の処理によって合焦された領域を示すものでありうる。
【００８９】
以上の４種類の領域線画像２２０ｃ〜２２０ｆを用いた撮像装置１００の動作例について説明する。この動作例において、撮像装置１００は、複数のオートフォーカス枠から、合焦可能なオートフォーカス枠を自動的に抽出する。まず、補助画像合成部１１７は、図１０において示された領域線画像２２０ｅを含む合成補助画像２５０を生成する。この合成補助画像２５０が撮像画像３００に重畳させることによって、ユーザは、オートフォーカス部１１３がオートフォーカスの対象とすることが可能な領域を認識する。この状態で、ユーザが、例えば操作部１０９に含まれるシャッターボタンの操作によって、合焦の指示を示す操作信号を制御部１１１に与えた場合、制御部１１１は、オートフォーカス部１１３に合焦の動作をさせる。その結果、合焦された領域が複数であれば、制御部１１１は、図１１において示された領域線画像２２０ｆを生成して補助画像合成部１１７に提供する。また、合焦された領域が１つであれば、制御部１１１は、図８において示された領域線画像２２０ｃを生成して補助画像合成部１１７に提供する。補助画像合成部１１７は、領域線画像２２０ｆまたは領域線画像２２０ｃを含む合成補助画像２５０を生成する。この合成補助画像２５０が撮像画像３００に重畳されることによって、ユーザは、オートフォーカス部１１３によって合焦された領域を認識する。
【００９０】
さらに、４種類の領域線画像２２０ｃ〜２２０ｆを用いた撮像装置１００の別の動作例について説明する。この動作例において、撮像装置１００は、複数のオートフォーカス枠から、ユーザの操作に基づいて合焦するオートフォーカス枠を選択する。まず、補助画像合成部１１７は、図９において示された領域線画像２２０ｄを含む合成補助画像２５０を生成する。ここで、領域線画像２２０ｄにおいて不透明に近い色で示されたオートフォーカス枠は、現在選択されているオートフォーカス枠を示す。この状態で、ユーザは、例えば操作部１０９に含まれる十字キーの操作によって、選択されているオートフォーカス枠を移動する。制御部１１１は、ユーザの操作に応じて、領域線画像２２０ｄにおいて不透明に近い色で示されるオートフォーカス枠の位置を更新し、更新された領域線画像２２０ｄを補助画像合成部１１７に提供する。さらに、ユーザが、例えば操作部１０９に含まれるシャッターボタンの操作によって、合焦の指示を示す操作信号を制御部１１１に与えた場合、制御部１１１は、オートフォーカス部１１３に合焦の動作をさせる。このとき、制御部１１１は、図８において示された領域線画像２２０ｃを生成して補助画像合成部１１７に提供する。補助画像合成部１１７は、領域線画像２２０ｃを含む合成補助画像２５０を生成する。この合成補助画像２５０が撮像画像３００に重畳されることによって、ユーザは、選択されたオートフォーカス枠によって示される領域について合焦されたことを認識する。
【００９１】
以上で説明された本発明の第３の実施形態では、領域線画像２２０の背景領域２２３においてグリッド線などの基準線画像の透明度が変更されることによって、例えば領域線画像２２０ｃ〜２２０ｆを用いた上記のような撮像装置１００の動作において、ユーザがオートフォーカス枠に含まれる画像を認識することが容易になる。
【００９２】
＜４．まとめ＞
上記の本発明の実施形態において、撮像装置は、撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、第２の補助画像に設定された透明な背景領域において第１の補助画像の表示領域の透明度を変更する補助画像合成部と、撮像画像に合成補助画像を重畳して表示部に表示させる表示制御部とを備える。このような構成によれば、第１の補助画像と第２の補助画像とが重複して表示される場合に、第２の補助画像の背景領域における第１の補助画像の透明度が変更されて表示されるため、第２の補助画像に対する第１の補助画像の干渉を抑制することができる。
【００９３】
また、補助画像合成部は、少なくとも第２の補助画像に付加された合成モード情報に基づいて、透明度を変更してもよい。このような構成によれば、複数の補助画像において、第１の補助画像と第２の補助画像に相当する組み合わせを複数設定した場合に、それぞれの組み合わせごとに、透明度の変更の仕方を設定することができる。
【００９４】
また、補助画像合成部は、背景領域において第１の補助画像の表示領域を完全に透明にしてもよい。このような構成によれば、合成補助画像において、第２の補助画像の背景領域では、第２の補助画像だけが表示され、ユーザは、第２の補助画像によって示される内容を明確に把握することができる。
【００９５】
また、背景領域は、第２の補助画像の表示領域を包含する領域であってもよい。このような構成によれば、第２の補助画像の表示領域の近傍にある程度のマージンが確保され、第１の補助画像の表示領域と第２の補助画像の表示領域とが連続しないため、ユーザは、第１の補助画像と第２の補助画像とを容易に区別して視認することができる。
【００９６】
また、第１の補助画像は、撮像画像の基準線画像であり、第２の補助画像は、撮像画像の領域線画像であってもよい。このような構成によれば、画面の全体に表示される基準線画像に、画面の特定の部分に表示される領域線画像が重複した場合に、領域線画像によって示される領域への基準線画像の干渉を抑制することができる。
【００９７】
また、基準線画像は、グリッド線画像であり、領域線画像は、オートフォーカス枠画像であってもよい。このような構成によれば、オートフォーカス枠の内部でのグリッド線の表示を透明または半透明にして、オートフォーカス枠に含まれる被写体を容易に確認することができる。
【００９８】
また、オートフォーカス枠画像は、複数のオートフォーカス枠を含んでもよい。このような構成によれば、撮像画像に対して複数設定されたオートフォーカス枠を、領域線画像と容易に区別して視認し、またオートフォーカス枠に含まれる被写体を容易に確認することができる。
【００９９】
また、基準線画像は、グリッド線画像であり、領域線画像は、顔検出枠画像であってもよい。このような構成によれば、顔検出枠の内部でのグリッド線の表示を透明または半透明にして、顔検出枠に含まれる顔を容易に確認することができる。
【０１００】
また、撮像装置は、変更後の透明度を、操作部によって取得されたユーザの操作に応じて設定する制御部をさらに備えてもよい。このような構成によれば、第２の補助画像の背景領域における第１の補助画像の透明度をどの程度変更するかを、撮像の被写体やユーザの嗜好に合わせて随意に設定することができる。
【０１０１】
また、撮像装置は、変更後の透明度を撮像処理の状態に応じて自動的に設定する制御部をさらに備えてもよい。このような構成によれば、オートフォーカスの合焦、または顔の領域の検出のような、撮像処理の状態の変化に応じて、ユーザにとってより適切な透明度を設定することができる。
【０１０２】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【０１０３】
１００ 撮像装置
１０１ 撮像部
１０９ 操作部
１１１ 制御部
１１７ 補助画像合成部
１１９ 表示制御部
１２１ 表示部
２００ 画面
２１０ 基準線画像
２１１ 表示領域
２２０ 領域線画像
２２１ 表示領域
２２３ 背景領域
２５０ 合成補助画像
３００ 撮像画像
４００ 表示モード設定画面
【特許請求の範囲】
【請求項１】
撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、前記第２の補助画像に設定された透明な背景領域において前記第１の補助画像の透明度を変更する補助画像合成部と、
撮像画像に前記合成補助画像を重畳して表示部に表示させる表示制御部と、
を備える撮像装置。
【請求項２】
前記補助画像合成部は、少なくとも前記第２の補助画像に付加された合成モード情報に基づいて、前記透明度を変更する、
請求項１に記載の撮像装置。
【請求項３】
前記補助画像合成部は、前記背景領域において前記第１の補助画像を完全に透明にする、
請求項１に記載の撮像装置。
【請求項４】
前記背景領域は、前記第２の補助画像の表示領域を包含する領域である、
請求項１に記載の撮像装置。
【請求項５】
前記第１の補助画像は、前記撮像画像の基準線画像であり、
前記第２の補助画像は、前記撮像画像の領域線画像である、
請求項１に記載の撮像装置。
【請求項６】
前記基準線画像は、グリッド線画像であり、
前記領域線画像は、オートフォーカス枠画像である、
請求項５に記載の撮像装置。
【請求項７】
前記オートフォーカス枠画像は、複数のオートフォーカス枠を含む、
請求項６に記載の撮像装置。
【請求項８】
前記基準線画像は、グリッド線画像であり、
前記領域線画像は、顔検出枠画像である、
請求項５に記載の撮像装置。
【請求項９】
前記変更後の透明度を、操作部によって取得されたユーザの操作に応じて設定する制御部をさらに備える、
請求項１に記載の撮像装置。
【請求項１０】
前記変更後の透明度を、撮像処理の状態に応じて自動的に設定する制御部をさらに備える、
請求項１に記載の撮像装置。
【請求項１１】
撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、前記第２の補助画像に設定された透明な背景領域において前記第１の補助画像の透明度を変更する処理と、
撮像画像に前記合成補助画像を重畳して表示部に表示させる処理と、
をコンピュータに実行させるためのプログラム。
【請求項１２】
撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、前記第２の補助画像に設定された透明な背景領域において前記第１の補助画像の透明度を変更するステップと、
撮像画像に前記合成補助画像を重畳して表示部に表示させるステップと、
を含む撮像方法。
【請求項１】
撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、前記第２の補助画像に設定された透明な背景領域において前記第１の補助画像の透明度を変更する補助画像合成部と、
撮像画像に前記合成補助画像を重畳して表示部に表示させる表示制御部と、
を備える撮像装置。
【請求項２】
前記補助画像合成部は、少なくとも前記第２の補助画像に付加された合成モード情報に基づいて、前記透明度を変更する、
請求項１に記載の撮像装置。
【請求項３】
前記補助画像合成部は、前記背景領域において前記第１の補助画像を完全に透明にする、
請求項１に記載の撮像装置。
【請求項４】
前記背景領域は、前記第２の補助画像の表示領域を包含する領域である、
請求項１に記載の撮像装置。
【請求項５】
前記第１の補助画像は、前記撮像画像の基準線画像であり、
前記第２の補助画像は、前記撮像画像の領域線画像である、
請求項１に記載の撮像装置。
【請求項６】
前記基準線画像は、グリッド線画像であり、
前記領域線画像は、オートフォーカス枠画像である、
請求項５に記載の撮像装置。
【請求項７】
前記オートフォーカス枠画像は、複数のオートフォーカス枠を含む、
請求項６に記載の撮像装置。
【請求項８】
前記基準線画像は、グリッド線画像であり、
前記領域線画像は、顔検出枠画像である、
請求項５に記載の撮像装置。
【請求項９】
前記変更後の透明度を、操作部によって取得されたユーザの操作に応じて設定する制御部をさらに備える、
請求項１に記載の撮像装置。
【請求項１０】
前記変更後の透明度を、撮像処理の状態に応じて自動的に設定する制御部をさらに備える、
請求項１に記載の撮像装置。
【請求項１１】
撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、前記第２の補助画像に設定された透明な背景領域において前記第１の補助画像の透明度を変更する処理と、
撮像画像に前記合成補助画像を重畳して表示部に表示させる処理と、
をコンピュータに実行させるためのプログラム。
【請求項１２】
撮像のための補助的な情報を提供する第１および第２の補助画像を合成して合成補助画像を生成するときに、前記第２の補助画像に設定された透明な背景領域において前記第１の補助画像の透明度を変更するステップと、
撮像画像に前記合成補助画像を重畳して表示部に表示させるステップと、
を含む撮像方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−４４６０４（Ｐ２０１２−４４６０４Ａ）
【公開日】平成２４年３月１日（２０１２．３．１）
【国際特許分類】
【出願番号】特願２０１０−１８６２９４（Ｐ２０１０−１８６２９４）
【出願日】平成２２年８月２３日（２０１０．８．２３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年３月１日（２０１２．３．１）
【国際特許分類】
【出願日】平成２２年８月２３日（２０１０．８．２３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]