撮影装置
【課題】撮影時におけるユーザの撮影意図を把握し易くすることが可能な撮影装置を提供する。
【解決手段】本発明の撮影装置は、複数の被写体を含む画像を撮影可能な撮像部と、撮像部により得られた画像に基づいてメイン画像を生成するメイン画像生成部と、撮像部により得られた画像に対し、複数の被写体の中から選択された所望の被写体をズームする処理を行うことによりサブ画像を生成するサブ画像生成部と、メイン画像生成部により生成されたメイン画像に対し、サブ画像生成部により生成されたサブ画像を重畳する処理を行うことにより重畳画像を生成する重畳処理部と、重畳画像のメイン画像に相当する領域の画質と、重畳画像のサブ画像に相当する領域の画質と、を個別に調整する画質調整部と、を有する。
【解決手段】本発明の撮影装置は、複数の被写体を含む画像を撮影可能な撮像部と、撮像部により得られた画像に基づいてメイン画像を生成するメイン画像生成部と、撮像部により得られた画像に対し、複数の被写体の中から選択された所望の被写体をズームする処理を行うことによりサブ画像を生成するサブ画像生成部と、メイン画像生成部により生成されたメイン画像に対し、サブ画像生成部により生成されたサブ画像を重畳する処理を行うことにより重畳画像を生成する重畳処理部と、重畳画像のメイン画像に相当する領域の画質と、重畳画像のサブ画像に相当する領域の画質と、を個別に調整する画質調整部と、を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影装置に関し、特に、複数の画像データを同時撮影することが可能な撮影装置に関するものである。
【背景技術】
【０００２】
デジタルカメラ等の撮影装置において、一度の撮影で視野の異なる複数の画像データを取得し、当該取得した複数の画像データを個別に記録可能な技術が従来知られている。
【０００３】
具体的には、例えば、特許文献１には、撮影光学系からの被写体像を光電変換を用いて撮像する撮像素子における第１エリアに対応する画像データに基づいて、前記第１エリアの一部のエリアを第２エリアとして決定し、前記第１エリアに対応する画像データと前記第２エリアに対応する画像データとを前記撮像素子から交互に読み出し、前記第１エリアに対応する画像データと前記第２エリアに対応する画像データとを個別に（別個の画像ファイルとして）記録する、という構成を備えたデジタルカメラが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】日本国特開２００４−１８７１２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、特許文献１に開示された構成によれば、例えば、前述の第１エリアに対応する画像データ及び第２エリアに対応する画像データとして個別に記録された２つの異なる視野の画像データのうち、一方の視野の画像データを再生して見ただけでは、撮影時におけるユーザの撮影意図を把握し辛い場合がある、という課題が生じている。
【０００６】
本発明は、前述した事情に鑑みてなされたものであり、撮影時におけるユーザの撮影意図を把握し易くすることが可能な撮影装置を提供することを目的としている。
【課題を解決するための手段】
【０００７】
本発明の一態様の撮影装置は、複数の被写体を含む画像を撮影可能な撮像部と、前記撮像部により得られた前記画像に基づいてメイン画像を生成するメイン画像生成部と、前記撮像部により得られた前記画像に対し、前記複数の被写体の中から選択された所望の被写体をズームする処理を行うことによりサブ画像を生成するサブ画像生成部と、前記メイン画像生成部により生成された前記メイン画像に対し、前記サブ画像生成部により生成された前記サブ画像を重畳する処理を行うことにより重畳画像を生成する重畳処理部と、前記重畳画像の前記メイン画像に相当する領域の画質と、前記重畳画像の前記サブ画像に相当する領域の画質と、を個別に調整する画質調整部と、を有する。
【発明の効果】
【０００８】
本発明における撮影装置によれば、撮影時におけるユーザの撮影意図を把握し易くすることができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施例に係る撮影装置の要部の構成を示すブロック図。
【図２】本実施例に係る撮影装置において行われる処理等の一例を示すフローチャート。
【図３】重畳領域の設定に係る処理を説明するための説明図。
【図４】重畳枠の表示態様の一例を示す図。
【図５】追尾枠の生成に係る処理を説明するための説明図。
【図６】追尾枠の表示態様の一例を示す図。
【図７】重畳画像データの生成に係る処理等の一例を示すフローチャート。
【図８】メイン画像データに適用されるゲインマップの一例を示す図。
【図９】サブ画像データに適用されるゲインマップの一例を示す図。
【図１０】図７の処理等により生成される重畳画像データの一例を示す図。
【図１１】重畳画像データの画質調整に用いられるＧＵＩの表示態様の一例を示す図。
【図１２】本実施例に係る撮影装置を用いて撮影を行った際に記録される重畳画像データの一例を示す図。
【図１３】本実施例に係る撮影装置において行われる処理等の、図２とは異なる例を示すフローチャート。
【図１４】重畳領域の再設定に係る処理を説明するための説明図。
【図１５】再設定された重畳領域の一例を示す図。
【発明を実施するための形態】
【００１０】
以下、本発明の実施の形態について、図面を参照しつつ説明を行う。
【００１１】
図１から図１５は、本発明の実施例に係るものである。
【００１２】
図１は、本発明の実施例に係る撮影装置の要部の構成を示すブロック図である。
【００１３】
撮影装置１は、例えばデジタルカメラとして構成されており、撮像部１１と、画像処理部１２と、追尾部１３と、重畳処理部１４と、重畳領域設定部１５と、タッチパネル部１６と、記録部１７と、表示部１８と、を有している。
【００１４】
撮像部１１は、例えば、レンズ、絞り機構、シャッター機構、焦点調整機構、及び、撮像素子等からなる撮像系を具備して構成されている。また、撮像部１１は、前述の撮像系におけるレンズの視野内に位置する１つ以上の被写体を撮影して画像データを得ることができるように構成されている。
【００１５】
画像処理部１２は、メイン画像生成部１２ａと、サブ画像生成部１２ｂと、を有して構成されている。
【００１６】
メイン画像生成部１２ａは、撮像部１１により得られた画像データに対し、ホワイトバランス及びダイナミックレンジ調整等の画像処理を施すことにより、メイン画像データを生成する。
【００１７】
サブ画像生成部１２ｂは、撮像部１１により得られた画像データに対し、ホワイトバランス及びダイナミックレンジ調整等の画像処理を施す。また、サブ画像生成部１２ｂは、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、前述の画像処理を施した画像データの中から、追尾部１３の追尾対象となっている被写体を含む追尾枠内の領域を抽出する。そして、サブ画像生成部１２ｂは、前述のように抽出した追尾枠内の領域の画像データが重畳領域設定部１５により設定された重畳領域に適合するようなズーム倍率を算出し、当該ズーム倍率で前述の画像処理を施した画像データをデジタルズームすることによりサブ画像データを生成する。
【００１８】
追尾部１３は、撮像部１１により得られた画像データに含まれる所望の被写体を追尾可能な機能を具備して構成されている。また、追尾部１３は、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、タッチパネル部１６から出力される指示に基づき、表示部１８に表示されている各被写体の中から当該指示に応じた１つの被写体を追尾対象の被写体として選択し、さらに、当該選択した追尾対象の被写体を示す追尾枠を生成する処理を行う。なお、このような追尾部１３の処理の具体例については、後程説明する。
【００１９】
重畳処理部１４は、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、メイン画像生成部１２ａにより生成されたメイン画像データと、サブ画像生成部１２ｂにより生成されたサブ画像データと、重畳領域設定部１５により設定された重畳領域と、に基づいて後述の処理等を行うことにより重畳画像データを生成し、さらに、当該生成した重畳画像データの画質調整に係る処理を行う。なお、このような重畳処理部１４の処理の具体例については、後程説明する。
【００２０】
重畳領域設定部１５は、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、タッチパネル部１６から出力される指示に基づいて検出したタッチパネル部１６の座標位置に対応する重畳領域を設定し、当該設定した重畳領域に応じた重畳枠を表示部１８に表示させるような処理を行う。なお、このような重畳領域設定部１５の処理の具体例については、後程説明する。
【００２１】
タッチパネル部１６は、ユーザが指等を接触させて操作を行うことにより、追尾部１３及び重畳領域設定部１５に対する指示を行うことができるように構成されている。
【００２２】
記録部１７は、例えば、撮影装置１に設けられた不揮発性メモリまたは撮影装置１に対して着脱可能なメモリカード等を具備し、重畳処理部１４により生成された重畳画像データ等の様々な画像データを記録（保存）することができるように構成されている。
【００２３】
表示部１８は、例えば、ＬＣＤ（液晶ディスプレイ）及びディスプレイ駆動回路等を具備し、重畳処理部１４により生成された重畳画像データ等を表示することができるように構成されている。
【００２４】
なお、本実施例の撮影装置１には、図１に示した各部の他に、例えば、撮影装置１の動作モードの設定の切替に係る指示を行うことが可能なモード切替スイッチ、撮影装置１の電源のオンオフに係る指示を行うことが可能な電源スイッチ、静止画像データの記録に係るレリーズ指示を行うことが可能なレリーズボタン、及び、撮影装置１の各部の基本的な動作に係る制御等を行うＣＰＵというような、不図示の様々な装置が設けられているものとする。
【００２５】
ここで、本実施例の撮影装置１において行われる処理等について、レリーズ指示がなされた際に取得される静止画像データを用いて重畳画像データが生成される場合を例に挙げて説明を行う。図２は、本実施例に係る撮影装置において行われる処理等の一例を示すフローチャートである。
【００２６】
まず、撮影装置１の電源がオンされるに伴い、撮像部１１による画像データの取得が開始され、さらに、当該画像データが表示部１８にライブビュー表示される（図２のステップＳ１）。
【００２７】
なお、図２のステップＳ１のライブビュー表示の際には、サブ画像生成部１２ｂ、追尾部１３、及び、重畳領域設定部１５の各部における処理が行われず、さらに、重畳処理部１４がメイン画像生成部１２ａにより生成されたメイン画像データをスルー出力するものとする。すなわち、図２のステップＳ１において表示部１８にライブビュー表示される画像データは、撮像部１１により取得された画像データに対し、メイン画像生成部１２ａによるホワイトバランス及びダイナミックレンジ調整等の画像処理が施されたものに略一致する。
【００２８】
一方、撮影装置１のＣＰＵは、図２のステップＳ１によるライブビュー表示の最中に、モード切替スイッチの操作により撮影装置１の動作モードが重畳撮影モードに設定されたか否かを判定する（図２のステップＳ２）。
【００２９】
そして、図２のステップＳ２において、撮影装置１の動作モードが重畳撮影モードに設定されなかった場合には、撮影装置１の動作モードが通常撮影モードに設定される。
【００３０】
なお、前述の通常撮影モードは、例えば、図２のステップＳ１により表示部１８にライブビュー表示されている画像データの撮影及び記録等を実施するための公知の処理等を利用して実現することが可能な動作モードである。そのため、以降においては、簡単のため、前述の通常撮影モードに関する説明を省略する。
【００３１】
また、図２のステップＳ２において、撮影装置１の動作モードが重畳撮影モードに設定されると、重畳領域設定部１５は、重畳領域の設定及び重畳枠の表示に係る処理を行う（図２のステップＳ３）。
【００３２】
図３は、重畳領域の設定に係る処理を説明するための説明図である。図４は、重畳枠の表示態様の一例を示す図である。
【００３３】
具体的には、撮影装置１の動作モードが重畳撮影モードに設定されると、重畳領域設定部１５は、左上隅の座標位置を原点（０，０）としてＸＹ座標系（Ｘ軸方向及びＹ軸方向）を規定したタッチパネル部１６から出力される指示に基づき、タッチパネル部１６におけるタッチ入力操作のタッチ開始位置に相当する座標位置Ａ（Ｘａ，Ｙａ）と、タッチパネル部１６におけるタッチ入力操作のタッチ終了位置に相当する座標位置Ｂ（Ｘｂ，Ｙｂ）と、を検出する（図３参照）。なお、本実施例においては、Ｘｂ＞Ｘａ及びＹｂ＞Ｙａの大小関係が成り立つものとして説明を行う。
【００３４】
重畳領域設定部１５は、タッチパネル部１６における座標位置Ａ（Ｘａ，Ｙａ）と座標位置Ｂ（Ｘｂ，Ｙｂ）とを結ぶ対角線を備えた矩形領域を重畳領域として設定する（図３参照）。
【００３５】
重畳領域設定部１５は、タッチパネル部１６の座標位置を表示部１８の位置に変換する処理等を行うことにより、前述のように設定した重畳領域に相当する領域を示す重畳枠と、ライブビュー表示されている画像データと、を併せて表示部１８に表示させる（図４参照）。
【００３６】
また、重畳領域設定部１５は、図２のステップＳ３の処理により得られた重畳領域に係る情報を、サブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。具体的には、重畳領域設定部１５は、例えば、座標位置Ａ（Ｘａ，Ｙａ）と、座標位置Ｂ（Ｘｂ，Ｙｂ）と、タッチパネル部１６における重畳領域の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。
【００３７】
一方、追尾部１３は、重畳領域設定部１５から出力される重畳領域に係る情報に基づき、追尾対象の被写体の選択及び追尾枠の生成に係る処理を行う（図２のステップＳ４）。
【００３８】
具体的には、追尾部１３は、タッチパネル部１６から出力される指示に基づき、当該指示により指定されたタッチパネル部１６の座標位置に対応する表示部１８の画面内の位置を検出し、さらに、当該検出した表示部１８の位置に表示されている１つの被写体を追尾対象の被写体として選択する。
【００３９】
さらに、追尾部１３は、追尾対象の被写体として選択した１つの被写体を示すための矩形形状の追尾枠を生成する処理を行う。
【００４０】
ここで、前述の追尾枠の生成に係る処理について、追尾対象の被写体が（１人の）人物である場合を例に挙げて説明する。なお、本実施例によれば、追尾対象が人物以外の他の被写体であってもよい。図５は、追尾枠の生成に係る処理を説明するための説明図である。図６は、追尾枠の表示態様の一例を示す図である。
【００４１】
まず、追尾部１３は、顔器官検出等の処理を行うことにより、追尾対象の被写体として選択した人物の目及び口の位置を検出する。
【００４２】
次に、追尾部１３は、追尾対象の被写体として選択した人物の目及び口の位置の検出結果に基づき、追尾枠の縦方向の辺の長さを、（目の位置から上の部分の長さ）：（目の位置から口の位置までの部分の長さ）：（口の位置から下の部分の長さ）＝１：１：３の比率になるような長さＬＶとして設定する（図５参照）。
【００４３】
さらに、追尾部１３は、重畳領域設定部１５から出力される重畳領域の座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）の各座標値を以下の数式（１）に適用することにより、アスペクト比ＡＲの値を算出する。
【００４４】
ＡＲ＝（Ｙｂ−Ｙａ＋１）／（Ｘｂ−Ｘａ＋１） …（１）
追尾部１３は、上記の数式（１）を用いて算出したアスペクト比ＡＲを、前述のように設定された縦方向の辺の長さＬＶに対して乗算することにより、追尾枠の横方向の辺の長さＨＶを算出する。
【００４５】
なお、本実施例においては、前述した方法とは異なる他の方法により追尾枠の縦方向及び横方向の辺の長さを設定するようにしてもよい。
【００４６】
その後、追尾部１３は、以上のような手順により算出した縦方向の辺の長さＬＶ及び横方向の辺の長さＨＶを具備する矩形形状の追尾枠を生成し、さらに、図３のようにＸＹ座標系が規定されたタッチパネル部１６における、矩形形状の追尾枠の左上隅の座標位置Ｃ（Ｘｃ，Ｙｃ）と右下隅の座標位置Ｄ（Ｘｄ，Ｙｄ）とを取得する（図５参照）。なお、本実施例においては、Ｘｄ＞Ｘｃ及びＹｄ＞Ｙｃの大小関係が成り立つものとして説明を行う。
【００４７】
そして、追尾部１３は、タッチパネル部１６の座標位置を表示部１８の位置に変換する処理等を行うことにより、前述の重畳枠及び追尾枠と、ライブビュー表示されている画像データと、を併せて表示部１８の画面内に表示させる（図６参照）。
【００４８】
また、追尾部１３は、図２のステップＳ４の処理により生成した追尾枠に係る情報をサブ画像生成部１２ｂへ出力する。具体的には、追尾部１３は、例えば、座標位置Ｃ（Ｘｃ，Ｙｃ）と、座標位置Ｄ（Ｘｄ，Ｙｄ）と、タッチパネル部１６における追尾枠の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂへ出力する。
【００４９】
一方、撮影装置１のＣＰＵは、重畳枠及び追尾枠の表示に係る処理を継続させながら、レリーズボタンの操作待ちの状態へ移行する（図２のステップＳ５）。
【００５０】
その後、撮影装置１のＣＰＵは、レリーズボタンの操作によりレリーズ指示が行われたことを検出すると（図２のステップＳ５）、当該レリーズ指示の検出タイミングに応じた静止画像データを撮影してメイン画像生成部１２ａ及びサブ画像生成部１２ｂへ出力させるための制御を行う。
【００５１】
そして、メイン画像生成部１２ａ、サブ画像生成部１２ｂ、及び、重畳処理部１４は、レリーズ指示に応じて撮像部１１から出力される静止画像データに対して種々の処理を施すことにより重畳画像データを生成する（図２のステップＳ６）。
【００５２】
ここで、図２のステップＳ６において行われる処理等の具体例について、主に図７のフローチャートを参照しながら説明する。図７は、重畳画像データの生成に係る処理等の一例を示すフローチャートである。
【００５３】
メイン画像生成部１２ａは、図２のステップＳ５のレリーズ指示に応じて撮像部１１から出力される静止画像データに対してホワイトバランス及びダイナミックレンジ調整等の画像処理を施すことによりメイン画像データを生成し、当該生成したメイン画像データを重畳処理部１４へ出力する（図７のステップＳ２１）。
【００５４】
一方、サブ画像生成部１２ｂは、図２のステップＳ５のレリーズ指示に応じて撮像部１１から出力される静止画像データに対してホワイトバランス及びダイナミックレンジ調整等の画像処理を施し、当該画像処理を施した画像データを用いてサブ画像データを生成し、当該生成したサブ画像データを重畳処理部１４へ出力する（図７のステップＳ２２）。
【００５５】
ここで、図７のステップＳ２２において行われる処理の具体例について説明する。
【００５６】
サブ画像生成部１２ｂは、追尾部１３から出力される情報に基づき、ホワイトバランス及びダイナミックレンジ調整等の画像処理を施した静止画像データの中から、追尾部１３の追尾対象となっている被写体を含む追尾枠内の領域を抽出する。
【００５７】
さらに、サブ画像生成部１２ｂは、重畳領域設定部１５から出力される座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）の情報と、追尾部１３から出力される座標位置Ｃ（Ｘｃ，Ｙｃ）及び座標位置Ｄ（Ｘｄ，Ｙｄ）の情報と、に基づいて以下の数式（２）を用いた演算を行うことにより、ズーム倍率ＺＲを算出する。
【００５８】
ＺＲ＝（Ｙｂ−Ｙａ＋１）／（Ｙｄ−Ｙｃ＋１） …（２）
そして、サブ画像生成部１２ｂは、前述の画像処理を施した静止画像データを上記数式（２）の演算結果として得られたズーム倍率ＺＲでデジタルズームすることによりサブ画像データを生成し、当該生成したサブ画像データを重畳処理部１４へ出力する。
【００５９】
なお、サブ画像生成部１２ｂは、前述のような処理を図７のステップＳ２２において行うものに限らず、例えば、ズーム倍率ＺＲでデジタルズームした画像データに対し、当該ズーム倍率ＺＲに応じた画素補間処理を施したものをサブ画像データとして重畳処理部１４へ出力してもよい。
【００６０】
一方、重畳処理部１４は、重畳領域設定部１５から出力される情報に基づき、図７のステップＳ２１により生成されたメイン画像データに対して適用するゲインマップと、図７のステップＳ２２により生成されたサブ画像データに対して適用するゲインマップと、をそれぞれ生成する（図７のステップＳ２３）。
【００６１】
図８は、メイン画像データに適用されるゲインマップの一例を示す図である。図９は、サブ画像データに適用されるゲインマップの一例を示す図である。
【００６２】
具体的には、重畳処理部１４は、メイン画像データに適用するゲインマップとして、例えば図８に示すように、メイン画像データのフレームの垂直方向及び水平方向において、重畳領域以外の領域の画素のゲインを１倍とし、かつ、重畳領域の端部の画素から中心部の画素へ向かうにつれてゲインが１倍から０へ漸次変化してゆくようなゲインマップを生成する。
【００６３】
また、重畳処理部１４は、サブ画像データに適用するゲインマップとして、例えば図９に示すように、サブ画像データのフレームの垂直方向及び水平方向において、重畳領域以外の領域の画素のゲインを０とし、かつ、重畳領域の端部の画素から中心部の画素へ向かうにつれてゲインが０から１倍へ漸次変化してゆくようなゲインマップを生成する。
【００６４】
なお、メイン画像データ及びサブ画像データに適用するゲインマップは、例えば、両方のゲインマップを加算した際に、フレーム全域の各画素のゲイン値が１となるように生成される限りにおいては、図８及び図９に示したものと異なっていてもよい。
【００６５】
重畳処理部１４は、図７のステップＳ２３により生成したゲインマップをメイン画像データ及びサブ画像データにそれぞれ適用し、さらに、ゲインマップを適用したメイン画像データ及びサブ画像データを加算処理することにより、例えば図１０に示すような、重畳枠を含む重畳画像データを生成する（図７のステップＳ２４）。図１０は、図７の処理等により生成される重畳画像データの一例を示す図である。
【００６６】
そして、図７のステップＳ２４の処理が完了するに伴い、図２のステップＳ７の処理が続けて行われる。
【００６７】
画質調整部としての機能を具備する重畳処理部１４は、図２のステップＳ６により生成された重畳画像データの画質調整に係る処理を行う（図２のステップＳ７）。図１１は、重畳画像データの画質調整に用いられるＧＵＩの表示態様の一例を示す図である。
【００６８】
具体的には、重畳処理部１４は、例えば図１１に示すように、図２のステップＳ６の処理により生成された重畳画像データと、メイン画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０１と、サブ画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０２と、を併せて表示部１８に表示させる。そして、重畳処理部１４は、図２のステップＳ６の処理により生成された重畳画像データに対し、画質調整用スライダー１０１及び１０２の操作に応じた画質調整を個別に施す。
【００６９】
画質調整用スライダー１０１は、例えば、彩度の高低、明度の高低、または、コントラストの強弱等のような、メイン画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータを変化させることが可能なＧＵＩとして構成されている。また、画質調整用スライダー１０１は、タッチパネル部１６の操作に応じて（例えば表示部１８の上下方向に沿って）移動し、メイン画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータの増減に係る指示を行うことが可能なＧＵＩとしてのつまみ部１０１ａを具備して構成されている。そして、このような画質調整用スライダー１０１が表示部１８に表示される構成によれば、重畳処理部１４は、タッチパネル部１６から出力される指示に基づき、つまみ部１０１ａの現在位置に応じた色調またはコントラストを具備するように、重畳画像データにおけるメイン画像データに相当する領域の画質に係るパラメータを調整（変更）する。
【００７０】
画質調整用スライダー１０２は、例えば、彩度の高低、明度の高低、または、コントラストの強弱等のような、サブ画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータを変化させることが可能なＧＵＩとして構成されている。また、画質調整用スライダー１０２は、タッチパネル部１６の操作に応じて（例えば表示部１８の上下方向に沿って）移動し、メイン画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータの増減に係る指示を行うことが可能なＧＵＩとしてのつまみ部１０２ａを具備して構成されている。そして、このような画質調整用スライダー１０２が表示部１８に表示される構成によれば、重畳処理部１４は、タッチパネル部１６から出力される指示に基づき、つまみ部１０２ａの現在位置に応じた色調またはコントラストを具備するように、重畳画像データにおけるサブ画像データに相当する領域の画質に係るパラメータを調整（変更）する。
【００７１】
一方、撮影装置１のＣＰＵは、図２のステップＳ７による画質調整が完了したことを検出すると、図１１に例示したような重畳画像データから、重畳枠と、画質調整用スライダー１０１と、画質調整用スライダー１０２と、がそれぞれ消去された、図１２に示すような重畳画像データを表示部１８にレックビュー表示させて記録部１７に記録させるように制御を行う（図２のステップＳ８及びステップＳ９）。図１２は、本実施例に係る撮影装置を用いて撮影を行った際に記録される重畳画像データの一例を示す図である。
【００７２】
続いて、本実施例の撮影装置１において行われる処理等について、レリーズ指示がなされる前に取得される動画像データを用いて重畳画像データが生成される場合を例に挙げて説明を行う。図１３は、本実施例に係る撮影装置において行われる処理等の、図２とは異なる例を示すフローチャートである。なお、以降においては、簡単のため、既に述べたものと同様の処理等を適用可能な部分を適宜省略しながら説明を行うものとする。
【００７３】
まず、撮影装置１の電源がオンされるに伴い、撮像部１１による画像データの取得が開始され、さらに、当該画像データが表示部１８にライブビュー表示される（図１３のステップＳ３１）。
【００７４】
なお、図１３のステップＳ３１のライブビュー表示の際には、サブ画像生成部１２ｂ、追尾部１３、及び、重畳領域設定部１５の各部における処理が行われず、さらに、重畳処理部１４がメイン画像生成部１２ａにより生成されたメイン画像データをスルー出力するものとする。すなわち、図１３のステップＳ３１において表示部１８にライブビュー表示される画像データは、撮像部１１により取得された画像データに対し、メイン画像生成部１２ａによるホワイトバランス及びダイナミックレンジ調整等の画像処理が施されたものに略一致する。
【００７５】
一方、撮影装置１のＣＰＵは、図１３のステップＳ３１によるライブビュー表示の最中に、モード切替スイッチの操作により撮影装置１の動作モードが重畳撮影モードに設定されたか否かを判定する（図１３のステップＳ３２）。
【００７６】
そして、図１３のステップＳ３２において、撮影装置１の動作モードが重畳撮影モードに設定されなかった場合には、撮影装置１の動作モードが通常撮影モードに設定される。
【００７７】
また、図１３のステップＳ３２において、撮影装置１の動作モードが重畳撮影モードに設定されると、重畳領域設定部１５は、重畳領域の設定及び重畳枠の表示に係る処理として、図２のステップＳ３の説明において述べたものと同様の処理を行う（図１３のステップＳ３３）。そして、図１３のステップＳ３３の処理が重畳領域設定部１５において行われることにより、重畳領域に相当する領域を示す重畳枠と、ライブビュー表示されている画像データと、が併せて表示部１８に表示される（図４参照）。
【００７８】
また、重畳領域設定部１５は、図１３のステップＳ３３の処理により得られた重畳領域に係る情報を、サブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。具体的には、重畳領域設定部１５は、例えば、座標位置Ａ（Ｘａ，Ｙａ）と、座標位置Ｂ（Ｘｂ，Ｙｂ）と、タッチパネル部１６における重畳領域の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。
【００７９】
一方、追尾部１３は、重畳領域設定部１５から出力される重畳領域に係る情報に基づき、追尾対象の被写体の選択及び追尾枠の生成に係る処理として、図２のステップＳ４の説明において述べたものと同様の処理を行う（図１３のステップＳ３４）。そして、図１３のステップＳ３４の処理が追尾部１３において行われることにより、前述の重畳枠及び追尾枠と、ライブビュー表示されている画像データと、が併せて表示部１８の画面内に表示される（図６参照）。
【００８０】
また、追尾部１３は、図１３のステップＳ３４の処理により生成した追尾枠に係る情報をサブ画像生成部１２ｂへ出力する。具体的には、追尾部１３は、例えば、座標位置Ｃ（Ｘｃ，Ｙｃ）と、座標位置Ｄ（Ｘｄ，Ｙｄ）と、タッチパネル部１６における追尾枠の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂへ出力する。
【００８１】
そして、メイン画像生成部１２ａ、サブ画像生成部１２ｂ、及び、重畳処理部１４は、前述の図７の一連の処理（図２のステップＳ６の処理）と略同様の処理を行うことにより、図１０に例示したような、重畳枠を含む重畳画像データを撮像部１１から出力される動画像データの各フレーム毎に生成する（図１３のステップＳ３５）。
【００８２】
さらに、重畳処理部１４は、図１３のステップＳ３５により生成された重畳画像データの画質調整に係る処理として、図２のステップＳ７の説明において述べたものと同様の処理を行う（図１３のステップＳ３６）。
【００８３】
すなわち、図１３のステップＳ３５及びステップＳ３６の処理を経ることにより、図１１に例示したような、重畳枠と、メイン画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０１と、サブ画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０２と、を含む重畳画像データが表示部１８にライブビュー表示される。そして、このような重畳画像データが表示部１８にライブビュー表示される構成によれば、重畳処理部１４は、タッチパネル部１６から出力される指示に基づき、つまみ部１０１ａの現在位置に応じた色調またはコントラストを具備するように、メイン画像データに相当する領域の画質に係るパラメータを略リアルタイムに調整（変更）し、さらに、つまみ部１０２ａの現在位置に応じた色調またはコントラストを具備するように、サブ画像データに相当する領域の画質に係るパラメータを略リアルタイムに調整（変更）する。
【００８４】
一方、重畳領域設定部１５は、図１３のステップＳ３６の処理を経た重畳画像データが表示部１８にライブビュー表示されている際に、タッチパネル部１６において重畳領域の調整に係る指示がなされたか否かを判定する（図１３のステップＳ３７）。
【００８５】
具体的には、重畳領域設定部１５は、図１３のステップＳ３６の処理を経た重畳画像データが表示部１８にライブビュー表示されている際に、例えば、矩形の重畳領域（重畳枠）を構成する４つの辺のうちのいずれか１つを跨ぐようなタッチ入力操作がタッチパネル部１６において行われたか否かに基づき、重畳領域の調整に係る指示がなされたか否かを判定する。
【００８６】
そして、重畳領域設定部１５は、図１３のステップＳ３７において、重畳領域の調整に係る指示がなされていないとの判定結果を得た場合には、後述の図１３のステップＳ３９の処理を続けて行う。
【００８７】
また、重畳領域設定部１５は、図１３のステップＳ３７において、重畳領域の調整に係る指示がなされたとの判定結果を得た場合には、重畳領域の再設定及び重畳枠の表示に係る処理を行う（図１３のステップＳ３８）。
【００８８】
ここで、図１３のステップＳ３８において行われる処理について、前述の座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）を結ぶ対角線を具備する、図１４に示すような矩形の重畳領域が現在の重畳領域として設定されている場合を例に挙げて説明する。図１４は、重畳領域の再設定に係る処理を説明するための説明図である。
【００８９】
座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）を結ぶ対角線を具備する矩形の重畳領域を構成する４つの辺のうちのいずれか１つを跨ぐようなタッチ入力操作が行われたことを検出すると、重畳領域設定部１５は、左上隅の座標位置を原点（０，０）としてＸＹ座標系（Ｘ軸方向及びＹ軸方向）を規定したタッチパネル部１６から出力される指示に基づき、タッチパネル部１６におけるタッチ入力操作のタッチ開始位置に相当する座標位置Ｅ（Ｘｅ，Ｙｅ）と、タッチパネル部１６におけるタッチ入力操作のタッチ終了位置に相当する座標位置Ｆ（Ｘｆ，Ｙｆ）と、を検出する（図１４参照）。なお、本実施例においては、Ｘｆ＞Ｘｅ及びＹｅ＞Ｙｆの大小関係が成り立つものとして説明を行う。
【００９０】
その後、重畳領域設定部１５は、矩形の重畳領域（重畳枠）を構成する４つの辺のうち、前述のタッチ開始位置に相当する座標位置Ｅ（Ｘｅ，Ｙｅ）に最も近い位置にある１つの辺を調整対象の辺として設定する。
【００９１】
すなわち、図１４に示すような座標位置Ｅ（Ｘｅ，Ｙｅ）が検出された場合においては、矩形の重畳領域（重畳枠）を構成する右辺が調整対象の辺として設定される。
【００９２】
一方、重畳領域設定部１５は、矩形の重畳領域（重畳枠）を構成する４つの辺のうち、右辺または左辺を調整対象の辺として設定した場合において、座標値Ｘｆから座標値Ｘｅを減じて得られる値を、当該調整対象の辺の移動量として設定する。
【００９３】
また、重畳領域設定部１５は、矩形の重畳領域（重畳枠）を構成する４つの辺のうち、上辺または下辺を調整対象の辺として設定した場合において、座標値Ｙｅから座標値Ｙｆを減じて得られる値を、当該調整対象の辺の移動量として設定する。
【００９４】
そして、重畳領域設定部１５は、座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）に含まれる各座標値のうち、調整対象の辺に対応する１つの座標値に対して移動量の値を加えることにより、移動先の座標位置を取得する。
【００９５】
具体的には、重畳領域設定部１５は、矩形の重畳領域（重畳枠）の左辺を調整対象の辺として設定した場合においては、座標位置Ａ（Ｘａ，Ｙａ）に対応する移動先の座標位置Ｇ（Ｘａ＋（Ｘｆ−Ｘｅ），Ｙａ）を取得する。
【００９６】
重畳領域設定部１５は、矩形の重畳領域（重畳枠）の上辺を調整対象の辺として設定した場合においては、座標位置Ａ（Ｘａ，Ｙａ）に対応する移動先の座標位置Ｈ（Ｘａ，Ｙａ＋（Ｙｅ−Ｙｆ））を取得する。
【００９７】
重畳領域設定部１５は、矩形の重畳領域（重畳枠）の右辺を調整対象の辺として設定した場合においては、座標位置Ｂ（Ｘｂ，Ｙｂ）に対応する移動先の座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）を取得する。
【００９８】
重畳領域設定部１５は、矩形の重畳領域（重畳枠）の下辺を調整対象の辺として設定した場合においては、座標位置Ｂ（Ｘｂ，Ｙｂ）に対応する移動先の座標位置Ｊ（Ｘｂ，Ｙｂ＋（Ｙｅ−Ｙｆ））を取得する。
【００９９】
すなわち、図１４に示すような座標位置Ｅ（Ｘｅ，Ｙｅ）が検出されることにより、矩形の重畳領域（重畳枠）を構成する右辺が調整対象の辺として設定された場合においては、座標位置Ｂ（Ｘｂ，Ｙｂ）に対応する移動先の座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）が取得される。
【０１００】
そして、重畳領域設定部１５は、図１４のように現在設定されている重畳領域を、座標位置Ａ（Ｘａ，Ｙａ）と座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）とを結ぶ対角線を備えた、図１５に示すような矩形領域の重畳領域として再設定する。図１５は、再設定された重畳領域の一例を示す図である。
【０１０１】
重畳領域設定部１５は、タッチパネル部１６の座標位置を表示部１８の位置に変換する処理等を行うことにより、前述のように再設定した重畳領域に相当する領域を示す重畳枠と、ライブビュー表示されている画像データと、を併せて表示部１８に表示させる。
【０１０２】
また、重畳領域設定部１５は、以上に述べたような図１３のステップＳ３８の処理により再設定された重畳領域に係る情報を、サブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。具体的には、重畳領域設定部１５は、例えば、座標位置Ａ（Ｘａ，Ｙａ）と、座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）と、タッチパネル部１６における重畳領域の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。
【０１０３】
そして、図１３のステップＳ３８の処理により再設定された重畳領域に係る情報に基づく処理が図１３のステップＳ３４及びステップＳ３５において行われることにより、追尾枠及び重畳画像データがそれぞれ更新される。すなわち、図１３のステップＳ３８の処理により重畳領域が再設定されるに伴い、重畳枠及び追尾枠の矩形の大きさがそれぞれ変更され、当該変更された重畳枠及び追尾枠の大きさに応じた新たなズーム倍率ＺＲが算出され、当該算出された新たなズーム倍率ＺＲでデジタルズームされたサブ画像データが生成される。
【０１０４】
なお、本実施例においては、図１３のステップＳ３８の処理により重畳領域が再設定された際の処理として、前述の処理が行われるものに限らない。具体的には、例えば、図１３のステップＳ３８の処理により重畳領域が再設定されるに伴い、重畳枠及び追尾枠の矩形の大きさがそれぞれ変更され、さらに、重畳領域が再設定される以前のズーム倍率ＺＲを保持したまま、当該変更された重畳枠及び追尾枠の大きさに応じたサブ画像データが生成されるようにしてもよい。
【０１０５】
一方、撮影装置１のＣＰＵは、レリーズボタンの操作によりレリーズ指示がなされたか否かを判定する（図１３のステップＳ３９）。
【０１０６】
そして、撮影装置１のＣＰＵは、図１３のステップＳ３９において、レリーズ指示がなされていないとの判定結果を得た場合には、図１３のステップＳ３５の処理を再度行う。
【０１０７】
また、撮影装置１のＣＰＵは、図１３のステップＳ３９において、レリーズ指示がなされたとの判定結果を得た場合には、当該レリーズ指示の検出タイミングに応じたフレームの重畳画像データとして、重畳枠と、画質調整用スライダー１０１と、画質調整用スライダー１０２と、がそれぞれ消去された重畳画像データを表示部１８にレックビュー表示させて記録部１７に記録させるように制御を行う（図１３のステップＳ４０及びステップＳ４１）。
【０１０８】
以上に述べた本実施例によれば、ユーザの撮影対象となる主たる被写体と、当該主たる被写体に関連する被写体として当該ユーザにより選択された従たる被写体と、の関連性を強調するような重畳画像データを生成し、当該生成した重畳画像データを記録部１７に記録可能な構成を具備している。すなわち、以上に述べた本実施例によれば、例えば、記録部１７に記録された重畳画像データを再生して閲覧することにより、撮影時におけるユーザの撮影意図を容易に把握することができる。
【０１０９】
なお、以上に述べた本実施例によれば、重畳画像データの生成に用いられるメイン画像データ及びサブ画像データを、同じ撮影条件で撮影された１つの画像データに基づいて生成するものに限らず、相互に異なる撮影条件で撮影された２つの画像データに基づいて生成するものであってもよい。具体的には、例えば、露出補正、絞り、シャッタースピード及び感度等の種々のパラメータを組み合わせた２種類の撮影条件を予め設定しておくとともに、当該２種類の撮影条件のうちの一方で撮影された第１の画像データに基づいて生成したメイン画像データと、当該２種類の撮影条件のうちの他方で撮影された第２の画像データに基づいて生成したサブ画像データと、を重畳画像データの生成に用いてもよい。
【０１１０】
また、以上に述べた本実施例によれば、図７に示したような処理を経て重畳画像データを生成するものに限らず、例えば、重畳領域を半透明化する処理を施したメイン画像データを生成し、ズーム倍率ＺＲでデジタルズームした追尾枠内の領域のみを抜き出す（切り抜く）処理を施したサブ画像データを生成し、当該メイン画像データの重畳領域に当該サブ画像データを合成する（はめ込む）ことにより重畳画像データを生成してもよい。
【０１１１】
なお、本発明は、上述した各実施例に限定されるものではなく、発明の趣旨を逸脱しない範囲内において種々の変更や応用が可能であることは勿論である。
【符号の説明】
【０１１２】
１ 撮影装置
１１ 撮像部
１２ 画像処理部
１２ａ メイン画像生成部
１２ｂ サブ画像生成部
１３ 追尾部
１４ 重畳処理部
１５ 重畳領域設定部
１６ タッチパネル部
１７ 記録部
１８ 表示部
【技術分野】
【０００１】
本発明は、撮影装置に関し、特に、複数の画像データを同時撮影することが可能な撮影装置に関するものである。
【背景技術】
【０００２】
デジタルカメラ等の撮影装置において、一度の撮影で視野の異なる複数の画像データを取得し、当該取得した複数の画像データを個別に記録可能な技術が従来知られている。
【０００３】
具体的には、例えば、特許文献１には、撮影光学系からの被写体像を光電変換を用いて撮像する撮像素子における第１エリアに対応する画像データに基づいて、前記第１エリアの一部のエリアを第２エリアとして決定し、前記第１エリアに対応する画像データと前記第２エリアに対応する画像データとを前記撮像素子から交互に読み出し、前記第１エリアに対応する画像データと前記第２エリアに対応する画像データとを個別に（別個の画像ファイルとして）記録する、という構成を備えたデジタルカメラが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】日本国特開２００４−１８７１２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、特許文献１に開示された構成によれば、例えば、前述の第１エリアに対応する画像データ及び第２エリアに対応する画像データとして個別に記録された２つの異なる視野の画像データのうち、一方の視野の画像データを再生して見ただけでは、撮影時におけるユーザの撮影意図を把握し辛い場合がある、という課題が生じている。
【０００６】
本発明は、前述した事情に鑑みてなされたものであり、撮影時におけるユーザの撮影意図を把握し易くすることが可能な撮影装置を提供することを目的としている。
【課題を解決するための手段】
【０００７】
本発明の一態様の撮影装置は、複数の被写体を含む画像を撮影可能な撮像部と、前記撮像部により得られた前記画像に基づいてメイン画像を生成するメイン画像生成部と、前記撮像部により得られた前記画像に対し、前記複数の被写体の中から選択された所望の被写体をズームする処理を行うことによりサブ画像を生成するサブ画像生成部と、前記メイン画像生成部により生成された前記メイン画像に対し、前記サブ画像生成部により生成された前記サブ画像を重畳する処理を行うことにより重畳画像を生成する重畳処理部と、前記重畳画像の前記メイン画像に相当する領域の画質と、前記重畳画像の前記サブ画像に相当する領域の画質と、を個別に調整する画質調整部と、を有する。
【発明の効果】
【０００８】
本発明における撮影装置によれば、撮影時におけるユーザの撮影意図を把握し易くすることができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施例に係る撮影装置の要部の構成を示すブロック図。
【図２】本実施例に係る撮影装置において行われる処理等の一例を示すフローチャート。
【図３】重畳領域の設定に係る処理を説明するための説明図。
【図４】重畳枠の表示態様の一例を示す図。
【図５】追尾枠の生成に係る処理を説明するための説明図。
【図６】追尾枠の表示態様の一例を示す図。
【図７】重畳画像データの生成に係る処理等の一例を示すフローチャート。
【図８】メイン画像データに適用されるゲインマップの一例を示す図。
【図９】サブ画像データに適用されるゲインマップの一例を示す図。
【図１０】図７の処理等により生成される重畳画像データの一例を示す図。
【図１１】重畳画像データの画質調整に用いられるＧＵＩの表示態様の一例を示す図。
【図１２】本実施例に係る撮影装置を用いて撮影を行った際に記録される重畳画像データの一例を示す図。
【図１３】本実施例に係る撮影装置において行われる処理等の、図２とは異なる例を示すフローチャート。
【図１４】重畳領域の再設定に係る処理を説明するための説明図。
【図１５】再設定された重畳領域の一例を示す図。
【発明を実施するための形態】
【００１０】
以下、本発明の実施の形態について、図面を参照しつつ説明を行う。
【００１１】
図１から図１５は、本発明の実施例に係るものである。
【００１２】
図１は、本発明の実施例に係る撮影装置の要部の構成を示すブロック図である。
【００１３】
撮影装置１は、例えばデジタルカメラとして構成されており、撮像部１１と、画像処理部１２と、追尾部１３と、重畳処理部１４と、重畳領域設定部１５と、タッチパネル部１６と、記録部１７と、表示部１８と、を有している。
【００１４】
撮像部１１は、例えば、レンズ、絞り機構、シャッター機構、焦点調整機構、及び、撮像素子等からなる撮像系を具備して構成されている。また、撮像部１１は、前述の撮像系におけるレンズの視野内に位置する１つ以上の被写体を撮影して画像データを得ることができるように構成されている。
【００１５】
画像処理部１２は、メイン画像生成部１２ａと、サブ画像生成部１２ｂと、を有して構成されている。
【００１６】
メイン画像生成部１２ａは、撮像部１１により得られた画像データに対し、ホワイトバランス及びダイナミックレンジ調整等の画像処理を施すことにより、メイン画像データを生成する。
【００１７】
サブ画像生成部１２ｂは、撮像部１１により得られた画像データに対し、ホワイトバランス及びダイナミックレンジ調整等の画像処理を施す。また、サブ画像生成部１２ｂは、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、前述の画像処理を施した画像データの中から、追尾部１３の追尾対象となっている被写体を含む追尾枠内の領域を抽出する。そして、サブ画像生成部１２ｂは、前述のように抽出した追尾枠内の領域の画像データが重畳領域設定部１５により設定された重畳領域に適合するようなズーム倍率を算出し、当該ズーム倍率で前述の画像処理を施した画像データをデジタルズームすることによりサブ画像データを生成する。
【００１８】
追尾部１３は、撮像部１１により得られた画像データに含まれる所望の被写体を追尾可能な機能を具備して構成されている。また、追尾部１３は、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、タッチパネル部１６から出力される指示に基づき、表示部１８に表示されている各被写体の中から当該指示に応じた１つの被写体を追尾対象の被写体として選択し、さらに、当該選択した追尾対象の被写体を示す追尾枠を生成する処理を行う。なお、このような追尾部１３の処理の具体例については、後程説明する。
【００１９】
重畳処理部１４は、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、メイン画像生成部１２ａにより生成されたメイン画像データと、サブ画像生成部１２ｂにより生成されたサブ画像データと、重畳領域設定部１５により設定された重畳領域と、に基づいて後述の処理等を行うことにより重畳画像データを生成し、さらに、当該生成した重畳画像データの画質調整に係る処理を行う。なお、このような重畳処理部１４の処理の具体例については、後程説明する。
【００２０】
重畳領域設定部１５は、撮影装置１の動作モードが後述の重畳撮影モードに設定された際に、タッチパネル部１６から出力される指示に基づいて検出したタッチパネル部１６の座標位置に対応する重畳領域を設定し、当該設定した重畳領域に応じた重畳枠を表示部１８に表示させるような処理を行う。なお、このような重畳領域設定部１５の処理の具体例については、後程説明する。
【００２１】
タッチパネル部１６は、ユーザが指等を接触させて操作を行うことにより、追尾部１３及び重畳領域設定部１５に対する指示を行うことができるように構成されている。
【００２２】
記録部１７は、例えば、撮影装置１に設けられた不揮発性メモリまたは撮影装置１に対して着脱可能なメモリカード等を具備し、重畳処理部１４により生成された重畳画像データ等の様々な画像データを記録（保存）することができるように構成されている。
【００２３】
表示部１８は、例えば、ＬＣＤ（液晶ディスプレイ）及びディスプレイ駆動回路等を具備し、重畳処理部１４により生成された重畳画像データ等を表示することができるように構成されている。
【００２４】
なお、本実施例の撮影装置１には、図１に示した各部の他に、例えば、撮影装置１の動作モードの設定の切替に係る指示を行うことが可能なモード切替スイッチ、撮影装置１の電源のオンオフに係る指示を行うことが可能な電源スイッチ、静止画像データの記録に係るレリーズ指示を行うことが可能なレリーズボタン、及び、撮影装置１の各部の基本的な動作に係る制御等を行うＣＰＵというような、不図示の様々な装置が設けられているものとする。
【００２５】
ここで、本実施例の撮影装置１において行われる処理等について、レリーズ指示がなされた際に取得される静止画像データを用いて重畳画像データが生成される場合を例に挙げて説明を行う。図２は、本実施例に係る撮影装置において行われる処理等の一例を示すフローチャートである。
【００２６】
まず、撮影装置１の電源がオンされるに伴い、撮像部１１による画像データの取得が開始され、さらに、当該画像データが表示部１８にライブビュー表示される（図２のステップＳ１）。
【００２７】
なお、図２のステップＳ１のライブビュー表示の際には、サブ画像生成部１２ｂ、追尾部１３、及び、重畳領域設定部１５の各部における処理が行われず、さらに、重畳処理部１４がメイン画像生成部１２ａにより生成されたメイン画像データをスルー出力するものとする。すなわち、図２のステップＳ１において表示部１８にライブビュー表示される画像データは、撮像部１１により取得された画像データに対し、メイン画像生成部１２ａによるホワイトバランス及びダイナミックレンジ調整等の画像処理が施されたものに略一致する。
【００２８】
一方、撮影装置１のＣＰＵは、図２のステップＳ１によるライブビュー表示の最中に、モード切替スイッチの操作により撮影装置１の動作モードが重畳撮影モードに設定されたか否かを判定する（図２のステップＳ２）。
【００２９】
そして、図２のステップＳ２において、撮影装置１の動作モードが重畳撮影モードに設定されなかった場合には、撮影装置１の動作モードが通常撮影モードに設定される。
【００３０】
なお、前述の通常撮影モードは、例えば、図２のステップＳ１により表示部１８にライブビュー表示されている画像データの撮影及び記録等を実施するための公知の処理等を利用して実現することが可能な動作モードである。そのため、以降においては、簡単のため、前述の通常撮影モードに関する説明を省略する。
【００３１】
また、図２のステップＳ２において、撮影装置１の動作モードが重畳撮影モードに設定されると、重畳領域設定部１５は、重畳領域の設定及び重畳枠の表示に係る処理を行う（図２のステップＳ３）。
【００３２】
図３は、重畳領域の設定に係る処理を説明するための説明図である。図４は、重畳枠の表示態様の一例を示す図である。
【００３３】
具体的には、撮影装置１の動作モードが重畳撮影モードに設定されると、重畳領域設定部１５は、左上隅の座標位置を原点（０，０）としてＸＹ座標系（Ｘ軸方向及びＹ軸方向）を規定したタッチパネル部１６から出力される指示に基づき、タッチパネル部１６におけるタッチ入力操作のタッチ開始位置に相当する座標位置Ａ（Ｘａ，Ｙａ）と、タッチパネル部１６におけるタッチ入力操作のタッチ終了位置に相当する座標位置Ｂ（Ｘｂ，Ｙｂ）と、を検出する（図３参照）。なお、本実施例においては、Ｘｂ＞Ｘａ及びＹｂ＞Ｙａの大小関係が成り立つものとして説明を行う。
【００３４】
重畳領域設定部１５は、タッチパネル部１６における座標位置Ａ（Ｘａ，Ｙａ）と座標位置Ｂ（Ｘｂ，Ｙｂ）とを結ぶ対角線を備えた矩形領域を重畳領域として設定する（図３参照）。
【００３５】
重畳領域設定部１５は、タッチパネル部１６の座標位置を表示部１８の位置に変換する処理等を行うことにより、前述のように設定した重畳領域に相当する領域を示す重畳枠と、ライブビュー表示されている画像データと、を併せて表示部１８に表示させる（図４参照）。
【００３６】
また、重畳領域設定部１５は、図２のステップＳ３の処理により得られた重畳領域に係る情報を、サブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。具体的には、重畳領域設定部１５は、例えば、座標位置Ａ（Ｘａ，Ｙａ）と、座標位置Ｂ（Ｘｂ，Ｙｂ）と、タッチパネル部１６における重畳領域の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。
【００３７】
一方、追尾部１３は、重畳領域設定部１５から出力される重畳領域に係る情報に基づき、追尾対象の被写体の選択及び追尾枠の生成に係る処理を行う（図２のステップＳ４）。
【００３８】
具体的には、追尾部１３は、タッチパネル部１６から出力される指示に基づき、当該指示により指定されたタッチパネル部１６の座標位置に対応する表示部１８の画面内の位置を検出し、さらに、当該検出した表示部１８の位置に表示されている１つの被写体を追尾対象の被写体として選択する。
【００３９】
さらに、追尾部１３は、追尾対象の被写体として選択した１つの被写体を示すための矩形形状の追尾枠を生成する処理を行う。
【００４０】
ここで、前述の追尾枠の生成に係る処理について、追尾対象の被写体が（１人の）人物である場合を例に挙げて説明する。なお、本実施例によれば、追尾対象が人物以外の他の被写体であってもよい。図５は、追尾枠の生成に係る処理を説明するための説明図である。図６は、追尾枠の表示態様の一例を示す図である。
【００４１】
まず、追尾部１３は、顔器官検出等の処理を行うことにより、追尾対象の被写体として選択した人物の目及び口の位置を検出する。
【００４２】
次に、追尾部１３は、追尾対象の被写体として選択した人物の目及び口の位置の検出結果に基づき、追尾枠の縦方向の辺の長さを、（目の位置から上の部分の長さ）：（目の位置から口の位置までの部分の長さ）：（口の位置から下の部分の長さ）＝１：１：３の比率になるような長さＬＶとして設定する（図５参照）。
【００４３】
さらに、追尾部１３は、重畳領域設定部１５から出力される重畳領域の座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）の各座標値を以下の数式（１）に適用することにより、アスペクト比ＡＲの値を算出する。
【００４４】
ＡＲ＝（Ｙｂ−Ｙａ＋１）／（Ｘｂ−Ｘａ＋１） …（１）
追尾部１３は、上記の数式（１）を用いて算出したアスペクト比ＡＲを、前述のように設定された縦方向の辺の長さＬＶに対して乗算することにより、追尾枠の横方向の辺の長さＨＶを算出する。
【００４５】
なお、本実施例においては、前述した方法とは異なる他の方法により追尾枠の縦方向及び横方向の辺の長さを設定するようにしてもよい。
【００４６】
その後、追尾部１３は、以上のような手順により算出した縦方向の辺の長さＬＶ及び横方向の辺の長さＨＶを具備する矩形形状の追尾枠を生成し、さらに、図３のようにＸＹ座標系が規定されたタッチパネル部１６における、矩形形状の追尾枠の左上隅の座標位置Ｃ（Ｘｃ，Ｙｃ）と右下隅の座標位置Ｄ（Ｘｄ，Ｙｄ）とを取得する（図５参照）。なお、本実施例においては、Ｘｄ＞Ｘｃ及びＹｄ＞Ｙｃの大小関係が成り立つものとして説明を行う。
【００４７】
そして、追尾部１３は、タッチパネル部１６の座標位置を表示部１８の位置に変換する処理等を行うことにより、前述の重畳枠及び追尾枠と、ライブビュー表示されている画像データと、を併せて表示部１８の画面内に表示させる（図６参照）。
【００４８】
また、追尾部１３は、図２のステップＳ４の処理により生成した追尾枠に係る情報をサブ画像生成部１２ｂへ出力する。具体的には、追尾部１３は、例えば、座標位置Ｃ（Ｘｃ，Ｙｃ）と、座標位置Ｄ（Ｘｄ，Ｙｄ）と、タッチパネル部１６における追尾枠の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂへ出力する。
【００４９】
一方、撮影装置１のＣＰＵは、重畳枠及び追尾枠の表示に係る処理を継続させながら、レリーズボタンの操作待ちの状態へ移行する（図２のステップＳ５）。
【００５０】
その後、撮影装置１のＣＰＵは、レリーズボタンの操作によりレリーズ指示が行われたことを検出すると（図２のステップＳ５）、当該レリーズ指示の検出タイミングに応じた静止画像データを撮影してメイン画像生成部１２ａ及びサブ画像生成部１２ｂへ出力させるための制御を行う。
【００５１】
そして、メイン画像生成部１２ａ、サブ画像生成部１２ｂ、及び、重畳処理部１４は、レリーズ指示に応じて撮像部１１から出力される静止画像データに対して種々の処理を施すことにより重畳画像データを生成する（図２のステップＳ６）。
【００５２】
ここで、図２のステップＳ６において行われる処理等の具体例について、主に図７のフローチャートを参照しながら説明する。図７は、重畳画像データの生成に係る処理等の一例を示すフローチャートである。
【００５３】
メイン画像生成部１２ａは、図２のステップＳ５のレリーズ指示に応じて撮像部１１から出力される静止画像データに対してホワイトバランス及びダイナミックレンジ調整等の画像処理を施すことによりメイン画像データを生成し、当該生成したメイン画像データを重畳処理部１４へ出力する（図７のステップＳ２１）。
【００５４】
一方、サブ画像生成部１２ｂは、図２のステップＳ５のレリーズ指示に応じて撮像部１１から出力される静止画像データに対してホワイトバランス及びダイナミックレンジ調整等の画像処理を施し、当該画像処理を施した画像データを用いてサブ画像データを生成し、当該生成したサブ画像データを重畳処理部１４へ出力する（図７のステップＳ２２）。
【００５５】
ここで、図７のステップＳ２２において行われる処理の具体例について説明する。
【００５６】
サブ画像生成部１２ｂは、追尾部１３から出力される情報に基づき、ホワイトバランス及びダイナミックレンジ調整等の画像処理を施した静止画像データの中から、追尾部１３の追尾対象となっている被写体を含む追尾枠内の領域を抽出する。
【００５７】
さらに、サブ画像生成部１２ｂは、重畳領域設定部１５から出力される座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）の情報と、追尾部１３から出力される座標位置Ｃ（Ｘｃ，Ｙｃ）及び座標位置Ｄ（Ｘｄ，Ｙｄ）の情報と、に基づいて以下の数式（２）を用いた演算を行うことにより、ズーム倍率ＺＲを算出する。
【００５８】
ＺＲ＝（Ｙｂ−Ｙａ＋１）／（Ｙｄ−Ｙｃ＋１） …（２）
そして、サブ画像生成部１２ｂは、前述の画像処理を施した静止画像データを上記数式（２）の演算結果として得られたズーム倍率ＺＲでデジタルズームすることによりサブ画像データを生成し、当該生成したサブ画像データを重畳処理部１４へ出力する。
【００５９】
なお、サブ画像生成部１２ｂは、前述のような処理を図７のステップＳ２２において行うものに限らず、例えば、ズーム倍率ＺＲでデジタルズームした画像データに対し、当該ズーム倍率ＺＲに応じた画素補間処理を施したものをサブ画像データとして重畳処理部１４へ出力してもよい。
【００６０】
一方、重畳処理部１４は、重畳領域設定部１５から出力される情報に基づき、図７のステップＳ２１により生成されたメイン画像データに対して適用するゲインマップと、図７のステップＳ２２により生成されたサブ画像データに対して適用するゲインマップと、をそれぞれ生成する（図７のステップＳ２３）。
【００６１】
図８は、メイン画像データに適用されるゲインマップの一例を示す図である。図９は、サブ画像データに適用されるゲインマップの一例を示す図である。
【００６２】
具体的には、重畳処理部１４は、メイン画像データに適用するゲインマップとして、例えば図８に示すように、メイン画像データのフレームの垂直方向及び水平方向において、重畳領域以外の領域の画素のゲインを１倍とし、かつ、重畳領域の端部の画素から中心部の画素へ向かうにつれてゲインが１倍から０へ漸次変化してゆくようなゲインマップを生成する。
【００６３】
また、重畳処理部１４は、サブ画像データに適用するゲインマップとして、例えば図９に示すように、サブ画像データのフレームの垂直方向及び水平方向において、重畳領域以外の領域の画素のゲインを０とし、かつ、重畳領域の端部の画素から中心部の画素へ向かうにつれてゲインが０から１倍へ漸次変化してゆくようなゲインマップを生成する。
【００６４】
なお、メイン画像データ及びサブ画像データに適用するゲインマップは、例えば、両方のゲインマップを加算した際に、フレーム全域の各画素のゲイン値が１となるように生成される限りにおいては、図８及び図９に示したものと異なっていてもよい。
【００６５】
重畳処理部１４は、図７のステップＳ２３により生成したゲインマップをメイン画像データ及びサブ画像データにそれぞれ適用し、さらに、ゲインマップを適用したメイン画像データ及びサブ画像データを加算処理することにより、例えば図１０に示すような、重畳枠を含む重畳画像データを生成する（図７のステップＳ２４）。図１０は、図７の処理等により生成される重畳画像データの一例を示す図である。
【００６６】
そして、図７のステップＳ２４の処理が完了するに伴い、図２のステップＳ７の処理が続けて行われる。
【００６７】
画質調整部としての機能を具備する重畳処理部１４は、図２のステップＳ６により生成された重畳画像データの画質調整に係る処理を行う（図２のステップＳ７）。図１１は、重畳画像データの画質調整に用いられるＧＵＩの表示態様の一例を示す図である。
【００６８】
具体的には、重畳処理部１４は、例えば図１１に示すように、図２のステップＳ６の処理により生成された重畳画像データと、メイン画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０１と、サブ画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０２と、を併せて表示部１８に表示させる。そして、重畳処理部１４は、図２のステップＳ６の処理により生成された重畳画像データに対し、画質調整用スライダー１０１及び１０２の操作に応じた画質調整を個別に施す。
【００６９】
画質調整用スライダー１０１は、例えば、彩度の高低、明度の高低、または、コントラストの強弱等のような、メイン画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータを変化させることが可能なＧＵＩとして構成されている。また、画質調整用スライダー１０１は、タッチパネル部１６の操作に応じて（例えば表示部１８の上下方向に沿って）移動し、メイン画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータの増減に係る指示を行うことが可能なＧＵＩとしてのつまみ部１０１ａを具備して構成されている。そして、このような画質調整用スライダー１０１が表示部１８に表示される構成によれば、重畳処理部１４は、タッチパネル部１６から出力される指示に基づき、つまみ部１０１ａの現在位置に応じた色調またはコントラストを具備するように、重畳画像データにおけるメイン画像データに相当する領域の画質に係るパラメータを調整（変更）する。
【００７０】
画質調整用スライダー１０２は、例えば、彩度の高低、明度の高低、または、コントラストの強弱等のような、サブ画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータを変化させることが可能なＧＵＩとして構成されている。また、画質調整用スライダー１０２は、タッチパネル部１６の操作に応じて（例えば表示部１８の上下方向に沿って）移動し、メイン画像データの画質調整に係る各パラメータの中から択一的に選択されたパラメータの増減に係る指示を行うことが可能なＧＵＩとしてのつまみ部１０２ａを具備して構成されている。そして、このような画質調整用スライダー１０２が表示部１８に表示される構成によれば、重畳処理部１４は、タッチパネル部１６から出力される指示に基づき、つまみ部１０２ａの現在位置に応じた色調またはコントラストを具備するように、重畳画像データにおけるサブ画像データに相当する領域の画質に係るパラメータを調整（変更）する。
【００７１】
一方、撮影装置１のＣＰＵは、図２のステップＳ７による画質調整が完了したことを検出すると、図１１に例示したような重畳画像データから、重畳枠と、画質調整用スライダー１０１と、画質調整用スライダー１０２と、がそれぞれ消去された、図１２に示すような重畳画像データを表示部１８にレックビュー表示させて記録部１７に記録させるように制御を行う（図２のステップＳ８及びステップＳ９）。図１２は、本実施例に係る撮影装置を用いて撮影を行った際に記録される重畳画像データの一例を示す図である。
【００７２】
続いて、本実施例の撮影装置１において行われる処理等について、レリーズ指示がなされる前に取得される動画像データを用いて重畳画像データが生成される場合を例に挙げて説明を行う。図１３は、本実施例に係る撮影装置において行われる処理等の、図２とは異なる例を示すフローチャートである。なお、以降においては、簡単のため、既に述べたものと同様の処理等を適用可能な部分を適宜省略しながら説明を行うものとする。
【００７３】
まず、撮影装置１の電源がオンされるに伴い、撮像部１１による画像データの取得が開始され、さらに、当該画像データが表示部１８にライブビュー表示される（図１３のステップＳ３１）。
【００７４】
なお、図１３のステップＳ３１のライブビュー表示の際には、サブ画像生成部１２ｂ、追尾部１３、及び、重畳領域設定部１５の各部における処理が行われず、さらに、重畳処理部１４がメイン画像生成部１２ａにより生成されたメイン画像データをスルー出力するものとする。すなわち、図１３のステップＳ３１において表示部１８にライブビュー表示される画像データは、撮像部１１により取得された画像データに対し、メイン画像生成部１２ａによるホワイトバランス及びダイナミックレンジ調整等の画像処理が施されたものに略一致する。
【００７５】
一方、撮影装置１のＣＰＵは、図１３のステップＳ３１によるライブビュー表示の最中に、モード切替スイッチの操作により撮影装置１の動作モードが重畳撮影モードに設定されたか否かを判定する（図１３のステップＳ３２）。
【００７６】
そして、図１３のステップＳ３２において、撮影装置１の動作モードが重畳撮影モードに設定されなかった場合には、撮影装置１の動作モードが通常撮影モードに設定される。
【００７７】
また、図１３のステップＳ３２において、撮影装置１の動作モードが重畳撮影モードに設定されると、重畳領域設定部１５は、重畳領域の設定及び重畳枠の表示に係る処理として、図２のステップＳ３の説明において述べたものと同様の処理を行う（図１３のステップＳ３３）。そして、図１３のステップＳ３３の処理が重畳領域設定部１５において行われることにより、重畳領域に相当する領域を示す重畳枠と、ライブビュー表示されている画像データと、が併せて表示部１８に表示される（図４参照）。
【００７８】
また、重畳領域設定部１５は、図１３のステップＳ３３の処理により得られた重畳領域に係る情報を、サブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。具体的には、重畳領域設定部１５は、例えば、座標位置Ａ（Ｘａ，Ｙａ）と、座標位置Ｂ（Ｘｂ，Ｙｂ）と、タッチパネル部１６における重畳領域の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。
【００７９】
一方、追尾部１３は、重畳領域設定部１５から出力される重畳領域に係る情報に基づき、追尾対象の被写体の選択及び追尾枠の生成に係る処理として、図２のステップＳ４の説明において述べたものと同様の処理を行う（図１３のステップＳ３４）。そして、図１３のステップＳ３４の処理が追尾部１３において行われることにより、前述の重畳枠及び追尾枠と、ライブビュー表示されている画像データと、が併せて表示部１８の画面内に表示される（図６参照）。
【００８０】
また、追尾部１３は、図１３のステップＳ３４の処理により生成した追尾枠に係る情報をサブ画像生成部１２ｂへ出力する。具体的には、追尾部１３は、例えば、座標位置Ｃ（Ｘｃ，Ｙｃ）と、座標位置Ｄ（Ｘｄ，Ｙｄ）と、タッチパネル部１６における追尾枠の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂへ出力する。
【００８１】
そして、メイン画像生成部１２ａ、サブ画像生成部１２ｂ、及び、重畳処理部１４は、前述の図７の一連の処理（図２のステップＳ６の処理）と略同様の処理を行うことにより、図１０に例示したような、重畳枠を含む重畳画像データを撮像部１１から出力される動画像データの各フレーム毎に生成する（図１３のステップＳ３５）。
【００８２】
さらに、重畳処理部１４は、図１３のステップＳ３５により生成された重畳画像データの画質調整に係る処理として、図２のステップＳ７の説明において述べたものと同様の処理を行う（図１３のステップＳ３６）。
【００８３】
すなわち、図１３のステップＳ３５及びステップＳ３６の処理を経ることにより、図１１に例示したような、重畳枠と、メイン画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０１と、サブ画像データに相当する領域の画質の調整を実施可能なＧＵＩとしての画質調整用スライダー１０２と、を含む重畳画像データが表示部１８にライブビュー表示される。そして、このような重畳画像データが表示部１８にライブビュー表示される構成によれば、重畳処理部１４は、タッチパネル部１６から出力される指示に基づき、つまみ部１０１ａの現在位置に応じた色調またはコントラストを具備するように、メイン画像データに相当する領域の画質に係るパラメータを略リアルタイムに調整（変更）し、さらに、つまみ部１０２ａの現在位置に応じた色調またはコントラストを具備するように、サブ画像データに相当する領域の画質に係るパラメータを略リアルタイムに調整（変更）する。
【００８４】
一方、重畳領域設定部１５は、図１３のステップＳ３６の処理を経た重畳画像データが表示部１８にライブビュー表示されている際に、タッチパネル部１６において重畳領域の調整に係る指示がなされたか否かを判定する（図１３のステップＳ３７）。
【００８５】
具体的には、重畳領域設定部１５は、図１３のステップＳ３６の処理を経た重畳画像データが表示部１８にライブビュー表示されている際に、例えば、矩形の重畳領域（重畳枠）を構成する４つの辺のうちのいずれか１つを跨ぐようなタッチ入力操作がタッチパネル部１６において行われたか否かに基づき、重畳領域の調整に係る指示がなされたか否かを判定する。
【００８６】
そして、重畳領域設定部１５は、図１３のステップＳ３７において、重畳領域の調整に係る指示がなされていないとの判定結果を得た場合には、後述の図１３のステップＳ３９の処理を続けて行う。
【００８７】
また、重畳領域設定部１５は、図１３のステップＳ３７において、重畳領域の調整に係る指示がなされたとの判定結果を得た場合には、重畳領域の再設定及び重畳枠の表示に係る処理を行う（図１３のステップＳ３８）。
【００８８】
ここで、図１３のステップＳ３８において行われる処理について、前述の座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）を結ぶ対角線を具備する、図１４に示すような矩形の重畳領域が現在の重畳領域として設定されている場合を例に挙げて説明する。図１４は、重畳領域の再設定に係る処理を説明するための説明図である。
【００８９】
座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）を結ぶ対角線を具備する矩形の重畳領域を構成する４つの辺のうちのいずれか１つを跨ぐようなタッチ入力操作が行われたことを検出すると、重畳領域設定部１５は、左上隅の座標位置を原点（０，０）としてＸＹ座標系（Ｘ軸方向及びＹ軸方向）を規定したタッチパネル部１６から出力される指示に基づき、タッチパネル部１６におけるタッチ入力操作のタッチ開始位置に相当する座標位置Ｅ（Ｘｅ，Ｙｅ）と、タッチパネル部１６におけるタッチ入力操作のタッチ終了位置に相当する座標位置Ｆ（Ｘｆ，Ｙｆ）と、を検出する（図１４参照）。なお、本実施例においては、Ｘｆ＞Ｘｅ及びＹｅ＞Ｙｆの大小関係が成り立つものとして説明を行う。
【００９０】
その後、重畳領域設定部１５は、矩形の重畳領域（重畳枠）を構成する４つの辺のうち、前述のタッチ開始位置に相当する座標位置Ｅ（Ｘｅ，Ｙｅ）に最も近い位置にある１つの辺を調整対象の辺として設定する。
【００９１】
すなわち、図１４に示すような座標位置Ｅ（Ｘｅ，Ｙｅ）が検出された場合においては、矩形の重畳領域（重畳枠）を構成する右辺が調整対象の辺として設定される。
【００９２】
一方、重畳領域設定部１５は、矩形の重畳領域（重畳枠）を構成する４つの辺のうち、右辺または左辺を調整対象の辺として設定した場合において、座標値Ｘｆから座標値Ｘｅを減じて得られる値を、当該調整対象の辺の移動量として設定する。
【００９３】
また、重畳領域設定部１５は、矩形の重畳領域（重畳枠）を構成する４つの辺のうち、上辺または下辺を調整対象の辺として設定した場合において、座標値Ｙｅから座標値Ｙｆを減じて得られる値を、当該調整対象の辺の移動量として設定する。
【００９４】
そして、重畳領域設定部１５は、座標位置Ａ（Ｘａ，Ｙａ）及び座標位置Ｂ（Ｘｂ，Ｙｂ）に含まれる各座標値のうち、調整対象の辺に対応する１つの座標値に対して移動量の値を加えることにより、移動先の座標位置を取得する。
【００９５】
具体的には、重畳領域設定部１５は、矩形の重畳領域（重畳枠）の左辺を調整対象の辺として設定した場合においては、座標位置Ａ（Ｘａ，Ｙａ）に対応する移動先の座標位置Ｇ（Ｘａ＋（Ｘｆ−Ｘｅ），Ｙａ）を取得する。
【００９６】
重畳領域設定部１５は、矩形の重畳領域（重畳枠）の上辺を調整対象の辺として設定した場合においては、座標位置Ａ（Ｘａ，Ｙａ）に対応する移動先の座標位置Ｈ（Ｘａ，Ｙａ＋（Ｙｅ−Ｙｆ））を取得する。
【００９７】
重畳領域設定部１５は、矩形の重畳領域（重畳枠）の右辺を調整対象の辺として設定した場合においては、座標位置Ｂ（Ｘｂ，Ｙｂ）に対応する移動先の座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）を取得する。
【００９８】
重畳領域設定部１５は、矩形の重畳領域（重畳枠）の下辺を調整対象の辺として設定した場合においては、座標位置Ｂ（Ｘｂ，Ｙｂ）に対応する移動先の座標位置Ｊ（Ｘｂ，Ｙｂ＋（Ｙｅ−Ｙｆ））を取得する。
【００９９】
すなわち、図１４に示すような座標位置Ｅ（Ｘｅ，Ｙｅ）が検出されることにより、矩形の重畳領域（重畳枠）を構成する右辺が調整対象の辺として設定された場合においては、座標位置Ｂ（Ｘｂ，Ｙｂ）に対応する移動先の座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）が取得される。
【０１００】
そして、重畳領域設定部１５は、図１４のように現在設定されている重畳領域を、座標位置Ａ（Ｘａ，Ｙａ）と座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）とを結ぶ対角線を備えた、図１５に示すような矩形領域の重畳領域として再設定する。図１５は、再設定された重畳領域の一例を示す図である。
【０１０１】
重畳領域設定部１５は、タッチパネル部１６の座標位置を表示部１８の位置に変換する処理等を行うことにより、前述のように再設定した重畳領域に相当する領域を示す重畳枠と、ライブビュー表示されている画像データと、を併せて表示部１８に表示させる。
【０１０２】
また、重畳領域設定部１５は、以上に述べたような図１３のステップＳ３８の処理により再設定された重畳領域に係る情報を、サブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。具体的には、重畳領域設定部１５は、例えば、座標位置Ａ（Ｘａ，Ｙａ）と、座標位置Ｉ（Ｘｂ＋（Ｘｆ−Ｘｅ），Ｙｂ）と、タッチパネル部１６における重畳領域の矩形の大きさ（面積）と、を含む情報をサブ画像生成部１２ｂ、追尾部１３、及び、重畳処理部１４へ出力する。
【０１０３】
そして、図１３のステップＳ３８の処理により再設定された重畳領域に係る情報に基づく処理が図１３のステップＳ３４及びステップＳ３５において行われることにより、追尾枠及び重畳画像データがそれぞれ更新される。すなわち、図１３のステップＳ３８の処理により重畳領域が再設定されるに伴い、重畳枠及び追尾枠の矩形の大きさがそれぞれ変更され、当該変更された重畳枠及び追尾枠の大きさに応じた新たなズーム倍率ＺＲが算出され、当該算出された新たなズーム倍率ＺＲでデジタルズームされたサブ画像データが生成される。
【０１０４】
なお、本実施例においては、図１３のステップＳ３８の処理により重畳領域が再設定された際の処理として、前述の処理が行われるものに限らない。具体的には、例えば、図１３のステップＳ３８の処理により重畳領域が再設定されるに伴い、重畳枠及び追尾枠の矩形の大きさがそれぞれ変更され、さらに、重畳領域が再設定される以前のズーム倍率ＺＲを保持したまま、当該変更された重畳枠及び追尾枠の大きさに応じたサブ画像データが生成されるようにしてもよい。
【０１０５】
一方、撮影装置１のＣＰＵは、レリーズボタンの操作によりレリーズ指示がなされたか否かを判定する（図１３のステップＳ３９）。
【０１０６】
そして、撮影装置１のＣＰＵは、図１３のステップＳ３９において、レリーズ指示がなされていないとの判定結果を得た場合には、図１３のステップＳ３５の処理を再度行う。
【０１０７】
また、撮影装置１のＣＰＵは、図１３のステップＳ３９において、レリーズ指示がなされたとの判定結果を得た場合には、当該レリーズ指示の検出タイミングに応じたフレームの重畳画像データとして、重畳枠と、画質調整用スライダー１０１と、画質調整用スライダー１０２と、がそれぞれ消去された重畳画像データを表示部１８にレックビュー表示させて記録部１７に記録させるように制御を行う（図１３のステップＳ４０及びステップＳ４１）。
【０１０８】
以上に述べた本実施例によれば、ユーザの撮影対象となる主たる被写体と、当該主たる被写体に関連する被写体として当該ユーザにより選択された従たる被写体と、の関連性を強調するような重畳画像データを生成し、当該生成した重畳画像データを記録部１７に記録可能な構成を具備している。すなわち、以上に述べた本実施例によれば、例えば、記録部１７に記録された重畳画像データを再生して閲覧することにより、撮影時におけるユーザの撮影意図を容易に把握することができる。
【０１０９】
なお、以上に述べた本実施例によれば、重畳画像データの生成に用いられるメイン画像データ及びサブ画像データを、同じ撮影条件で撮影された１つの画像データに基づいて生成するものに限らず、相互に異なる撮影条件で撮影された２つの画像データに基づいて生成するものであってもよい。具体的には、例えば、露出補正、絞り、シャッタースピード及び感度等の種々のパラメータを組み合わせた２種類の撮影条件を予め設定しておくとともに、当該２種類の撮影条件のうちの一方で撮影された第１の画像データに基づいて生成したメイン画像データと、当該２種類の撮影条件のうちの他方で撮影された第２の画像データに基づいて生成したサブ画像データと、を重畳画像データの生成に用いてもよい。
【０１１０】
また、以上に述べた本実施例によれば、図７に示したような処理を経て重畳画像データを生成するものに限らず、例えば、重畳領域を半透明化する処理を施したメイン画像データを生成し、ズーム倍率ＺＲでデジタルズームした追尾枠内の領域のみを抜き出す（切り抜く）処理を施したサブ画像データを生成し、当該メイン画像データの重畳領域に当該サブ画像データを合成する（はめ込む）ことにより重畳画像データを生成してもよい。
【０１１１】
なお、本発明は、上述した各実施例に限定されるものではなく、発明の趣旨を逸脱しない範囲内において種々の変更や応用が可能であることは勿論である。
【符号の説明】
【０１１２】
１ 撮影装置
１１ 撮像部
１２ 画像処理部
１２ａ メイン画像生成部
１２ｂ サブ画像生成部
１３ 追尾部
１４ 重畳処理部
１５ 重畳領域設定部
１６ タッチパネル部
１７ 記録部
１８ 表示部
【特許請求の範囲】
【請求項１】
複数の被写体を含む画像を撮影可能な撮像部と、
前記撮像部により得られた前記画像に基づいてメイン画像を生成するメイン画像生成部と、
前記撮像部により得られた前記画像に対し、前記複数の被写体の中から選択された所望の被写体をズームする処理を行うことによりサブ画像を生成するサブ画像生成部と、
前記メイン画像生成部により生成された前記メイン画像に対し、前記サブ画像生成部により生成された前記サブ画像を重畳する処理を行うことにより重畳画像を生成する重畳処理部と、
前記重畳画像の前記メイン画像に相当する領域の画質と、前記重畳画像の前記サブ画像に相当する領域の画質と、を個別に調整する画質調整部と、
を有することを特徴とする撮影装置。
【請求項２】
前記サブ画像が重畳される重畳領域を前記メイン画像内の所望の領域に設定可能な重畳領域設定部をさらに有し、
前記サブ画像生成部は、前記重畳領域設定部により設定された前記重畳領域に応じたズーム倍率を算出し、当該算出したズーム倍率で前記所望の被写体をズームする処理を行うことにより前記サブ画像を生成することを特徴とする請求項１に記載の撮影装置。
【請求項３】
前記重畳処理部は、前記所望の被写体が前記ズーム倍率でズームされた前記サブ画像を、前記メイン画像内に設定された前記重畳領域に重畳することにより、前記重畳画像を生成することを特徴とする請求項２に記載の撮影装置。
【請求項４】
前記画質調整部による画質の調整が施された前記重畳画像を表示可能な表示部、及び、前記画質調整部による画質の調整が施された前記重畳画像を記録可能な記録部のうちの少なくとも一方をさらに有することを特徴とする請求項１乃至３のいずれか一項に記載の撮影装置。
【請求項１】
複数の被写体を含む画像を撮影可能な撮像部と、
前記撮像部により得られた前記画像に基づいてメイン画像を生成するメイン画像生成部と、
前記撮像部により得られた前記画像に対し、前記複数の被写体の中から選択された所望の被写体をズームする処理を行うことによりサブ画像を生成するサブ画像生成部と、
前記メイン画像生成部により生成された前記メイン画像に対し、前記サブ画像生成部により生成された前記サブ画像を重畳する処理を行うことにより重畳画像を生成する重畳処理部と、
前記重畳画像の前記メイン画像に相当する領域の画質と、前記重畳画像の前記サブ画像に相当する領域の画質と、を個別に調整する画質調整部と、
を有することを特徴とする撮影装置。
【請求項２】
前記サブ画像が重畳される重畳領域を前記メイン画像内の所望の領域に設定可能な重畳領域設定部をさらに有し、
前記サブ画像生成部は、前記重畳領域設定部により設定された前記重畳領域に応じたズーム倍率を算出し、当該算出したズーム倍率で前記所望の被写体をズームする処理を行うことにより前記サブ画像を生成することを特徴とする請求項１に記載の撮影装置。
【請求項３】
前記重畳処理部は、前記所望の被写体が前記ズーム倍率でズームされた前記サブ画像を、前記メイン画像内に設定された前記重畳領域に重畳することにより、前記重畳画像を生成することを特徴とする請求項２に記載の撮影装置。
【請求項４】
前記画質調整部による画質の調整が施された前記重畳画像を表示可能な表示部、及び、前記画質調整部による画質の調整が施された前記重畳画像を記録可能な記録部のうちの少なくとも一方をさらに有することを特徴とする請求項１乃至３のいずれか一項に記載の撮影装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２０１３−９０１５４（Ｐ２０１３−９０１５４Ａ）
【公開日】平成２５年５月１３日（２０１３．５．１３）
【国際特許分類】
【出願番号】特願２０１１−２２９１２２（Ｐ２０１１−２２９１２２）
【出願日】平成２３年１０月１８日（２０１１．１０．１８）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２５年５月１３日（２０１３．５．１３）
【国際特許分類】
【出願日】平成２３年１０月１８日（２０１１．１０．１８）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]