撮像装置、表示方法およびプログラム
【課題】撮影時のライブビュー画像に写る被写体の顔を用いて新規な表示を行うことができる撮像装置、表示方法およびプログラムを提供する。
【解決手段】被写体を撮像して該被写体の画像データを連続的に生成する撮像部２と、撮像部２が生成した画像データに対応するライブビュー画像を生成順に表示する表示部６と、を備えた撮像装置１であって、ライブビュー画像に含まれる被写体の顔を検出する顔検出部９２と、顔検出部９２が検出した被写体の顔を含む顔領域を、画像から切出して顔画像を生成するトリミング部９３と、表示部６の表示領域において指定された表示位置に、トリミング部９３が生成した顔画像を表示部６に表示させる表示制御部９６と、を備える。
【解決手段】被写体を撮像して該被写体の画像データを連続的に生成する撮像部２と、撮像部２が生成した画像データに対応するライブビュー画像を生成順に表示する表示部６と、を備えた撮像装置１であって、ライブビュー画像に含まれる被写体の顔を検出する顔検出部９２と、顔検出部９２が検出した被写体の顔を含む顔領域を、画像から切出して顔画像を生成するトリミング部９３と、表示部６の表示領域において指定された表示位置に、トリミング部９３が生成した顔画像を表示部６に表示させる表示制御部９６と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮像して電子的な画像データを生成する撮像装置、表示方法およびプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置は、２つの撮像手段を備えたものが知られている。たとえば、第１の撮像手段で被写体に面する前方側を撮影する一方、第２の撮影手段で撮影者に面する背面側を撮影することができる技術が知られている（特許文献１参照）。この技術では、第１の撮影手段で撮影した前方側画像に、第２の撮影手段で撮影した背面側の背面画像を一つの表示モニタで表示させることで、前方側画像と背面画像とを選択的に撮影することができるようにしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１４７０４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、従来の撮像装置では、表示モニタが撮像手段によって連続的に生成された画像内に写る被写体の顔を検出することができる。しかしながら、撮影画像内に写る被写体の顔を検出した場合であっても、主として撮影時におけるピントの確認にしか用いられていなかった。このため、被写体の顔を用いたエンターテインメント性が溢れる新規な表示技術が求められていた。
【０００５】
本発明は、上記に鑑みてなされたものであって、撮影時のライブビュー画像に写る被写体の顔を用いて新規な表示を行うことができる撮像装置、表示方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明にかかる撮像装置は、被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置であって、前記ライブビュー画像に含まれる被写体の顔を検出する顔検出部と、前記顔検出部が検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミング部と、前記表示部の表示領域において指定された表示位置に、前記トリミング部が生成した前記顔画像を表示させる表示制御部と、を備えたことを特徴とする。
【０００７】
また、本発明にかかる撮像装置は、上記発明において、前記顔検出部によって検出された前記被写体の顔の前記ライブビュー画像上における表示位置を検出する表示位置検出部をさらに備え、前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域に、前記顔画像を表示させることを特徴とする。
【０００８】
また、本発明にかかる撮像装置は、上記発明において、前記表示部が表示している前記顔画像の表示位置を、前記表示領域内において移動させる指示信号の入力を受け付ける入力部をさらに備え、前記表示制御部は、前記入力部が入力を受け付けた前記指示信号に応じて、前記顔画像を移動させて前記表示部に表示させることを特徴とする。
【０００９】
また、本発明にかかる撮像装置は、上記発明において、前記入力部は、前記顔画像の大きさの変更を指示する変更指示信号の入力をさらに受け付け可能であり、前記表示制御部は、前記入力部が受け付けた前記変更指示信号に応じて、前記顔画像の大きさを変更して前記表示部に表示させることを特徴とする。
【００１０】
また、本発明にかかる撮像装置は、上記発明において、前記顔検出部は、前記ライブビュー画像に含まれる複数の被写体の顔を検出可能であり、前記入力部は、前記顔検出部が検出した前記複数の顔の中から表示対象とする顔の選択する選択信号の入力をさらに受け付け可能であることを特徴とする。
【００１１】
また、本発明にかかる撮像装置は、上記発明において、前記トリミング部が生成した前記顔画像を、予め設定された設定画像の前記表示位置に合成して合成画像を生成する画像合成部をさらに備え、前記表示制御部は、前記画像合成部が生成した前記合成画像を前記表示部に表示させることを特徴とする。
【００１２】
また、本発明にかかる撮像装置は、上記発明において、前記顔領域を含む前記被写体以外の領域を背景領域として検出する背景領域検出部をさらに備え、前記トリミング部は、前記背景領域検出部が検出した前記背景領域を前記画像から切出して背景画像を生成し、前記画像合成部は、前記背景画像を前記設定画像として前記顔画像に合成することを特徴とする。
【００１３】
また、本発明にかかる撮像装置は、上記発明において、前記撮像部と異なる位置に設けられ、所定の視野領域から光を集光して光電変換を行うことによって第２の画像データを生成する第２の撮像部をさらに備え、前記顔検出部は、前記第２の画像データに対応する第２の画像に含まれる被写体の顔を検出し、前記トリミング部は、前記顔検出部が前記第２の画像から検出した顔を含む顔領域を前記第２の画像から切出して第２の顔画像を生成し、前記画像合成部は、前記第２の顔画像を前記背景画像に合成することを特徴とする。
【００１４】
また、本発明にかかる撮像装置は、上記発明において、前記画像合成部は、前記第２の顔画像の表示位置を左右反転にして前記背景画像に合成することを特徴とする。
【００１５】
また、本発明にかかる撮像装置は、上記発明において、当該撮像装置の姿勢を検出する姿勢検出部をさらに備え、前記画像合成部は、前記姿勢検出部の検出結果に応じて、前記第２の顔画像を前記背景画像に合成することを特徴とする。
【００１６】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域を識別可能な表示態様で表示させることを特徴とする。
【００１７】
また、本発明にかかる表示方法は、被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置が撮影時に実行する表示方法であって、前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、を含むことを特徴とする。
【００１８】
また、本発明にかかるプログラムは、被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置の撮影時に実行するプログラムであって、前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、を実行させることを特徴とする。
【発明の効果】
【００１９】
本発明によれば、表示制御部が、表示部の表示領域において指定された表示位置に、トリミング部によって生成された顔画像を表示させる。これにより、簡易な操作で撮影時に所望の被写体の顔を画像内に写すことができるという効果を奏する。
【図面の簡単な説明】
【００２０】
【図１】図１は、本発明の実施の形態１にかかる撮像装置の被写体に面する側の構成を示す図である。
【図２】図２は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側の構成を示す図である。
【図３】図３は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【図４】図４は、本発明の実施の形態１にかかる撮像装置が行う処理の概要を示すフローチャートである。
【図５】図５は、撮影者が撮像装置を用いて撮影する際の状況を示す図である。
【図６】図６は、図５に示す状況下で表示部が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す図である。
【図７】図７は、図４のコラージュモード処理の概要を示すフローチャートである。
【図８】図８は、表示部６が表示するライブビュー画像の一例を示す図である。
【図９】図９は、表示部６が表示するライブビュー画像の一例を示す図である。
【図１０】図１０は、表示部６が表示するライブビュー画像の一例を示す図である。
【図１１】図１１は、表示部６が表示するライブビュー画像の一例を示す図である。
【図１２】図１２は、画像合成部が生成する合成画像の一例を示す図である。
【図１３】図１３は、顔画像を移動させるスライド操作を模式的に説明する図である。
【図１４】図１４は、顔画像の拡大させる拡大操作を模式的に説明する図である。
【図１５】図１５は、本発明の実施の形態２にかかる撮像装置の構成を示すブロック図である。
【図１６】図１６は、本発明の実施の形態２にかかる撮像装置が行うコラージュ処理の概要を示すフローチャートである。
【図１７】図１７は、図１６の背景枠表示処理の概要を示すフローチャートである。
【図１８】図１８は、背景検出部が判定する背景領域の判定方法の概要を説明する図である。
【図１９】図１９は、表示部６が表示するライブビュー画像の一例を示す図である。
【図２０】図２０は、図１６のコラージュ表示処理の概要を示すフローチャートである。
【図２１】図２１は、画像合成部が生成する合成画像の一例を示す図である。
【図２２】図２２は、整列アイコンが選択された際に表示部６が表示する画像の一例を示す図である。
【図２３】図２３は、本発明の実施の形態３にかかる撮影者に面する側の撮像装置の構成を示す斜視図である。
【図２４】図２４は、本発明の実施の形態３にかかる撮像装置の構成を示すブロック図である。
【図２５】図２５は、本発明の実施の形態３にかかる撮像装置が行うコラージュモード処理の概要を示すフローチャートである。
【図２６】図２６は、撮影者が撮像装置を用いて撮影する際の状況を示す図である。
【図２７】図２７は、図２６に示す状況下で表示部が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す図である。
【図２８】図２８は、図２５の撮影者顔枠表示処理の概要を示すフローチャートである。
【図２９】図２９は、表示制御部がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図である。
【図３０】図３０は、表示制御部がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図である。
【図３１】図３１は、撮影者とこの撮影者が写る画像内の位置との関係を説明する図である。
【図３２】図３２は、撮影者が表示部によって表示されるライブビュー画像を見ながら撮影者自身の顔枠の位置を調整する際の状況を模式的に示す図である。
【図３３】図３３は、撮影者が表示部によって表示されるライブビュー画像を見ながら撮影者自身の顔枠の位置を調整する際の状況を模式的に示す図である。
【図３４】図３４は、コラージュモードで理想とする画像の一例を示す図である。
【図３５】図３５は、撮影者、被写体および撮像装置を含む位置関係を模式的に説明する図である。
【図３６】図３６は、本発明の実施の形態３にかかる撮像装置が行うコラージュ表示処理で表示される画像の一例を示す図である。
【発明を実施するための形態】
【００２１】
以下、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。また、図面の記載において、同一の部分には同一の符号を付している。
【００２２】
（実施の形態１）
図１は、本発明の実施の形態１にかかる撮像装置の被写体に面する側（前面側）の構成を示す図である。図２は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側（背面側）の構成を示す図である。図３は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【００２３】
図１〜図３に示すように、撮像装置１は、撮像部２と、姿勢検出部３と、タイマー４と、操作入力部５と、表示部６と、タッチパネル７と、記憶部８と、制御部９と、を備える。
【００２４】
撮像部２は、被写体を撮像してこの被写体の画像データを生成する。撮像部２は、レンズ部２１と、レンズ駆動部２２と、絞り２３と、絞り駆動部２４と、シャッタ２５と、シャッタ駆動部２６と、撮像素子２７と、撮像駆動部２８と、信号処理部２９と、を有する。
【００２５】
レンズ部２１は、フォーカスおよびズーム可能な複数のレンズ群によって構成され、所定の視野領域から光を集光する。レンズ駆動部２２は、ステッピングモータまたはＤＣモータを用いて構成され、レンズ部２１のレンズ群を光軸Ｌ１上に沿って移動させることにより、レンズ部２１のピント位置や焦点距離等の変更を行う。
【００２６】
絞り２３は、レンズ部２１が集光した光の入射量を制限することにより露出の調整を行う。絞り駆動部２４は、ステッピングモータ等によって構成され、絞り２３を駆動する。
【００２７】
シャッタ２５は、撮像素子２７の状態を露光状態または遮光状態に設定する。シャッタ駆動部２６は、ステッピングモータ等によって構成され、レリーズ信号に応じてシャッタ２５を駆動する。
【００２８】
撮像素子２７は、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によって構成される。撮像素子２７は、レンズ部２１が集光した光を受光して光電変換を行うことによって、光を電気信号（アナログ信号）に変換する。撮像駆動部２８は、撮像素子２７を駆動するタイミングパルスを生成し、撮像素子２７が光電変換した電気信号を信号処理部２９に出力させる。
【００２９】
信号処理部２９は、アナログアンプやＡ／Ｄ変換器等によって構成される。信号処理部２９は、撮像素子２７から出力される電気信号に増幅（ゲイン調整）等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの画像データに変換して制御部９に出力する。
【００３０】
姿勢検出部３は、加速度センサを用いて構成される。姿勢検出部３は、撮像装置１の加速度を検出することにより、撮像装置１の姿勢状態を検出する。具体的には、姿勢検出部３は、水平面を基準としたときの撮像装置１の姿勢（傾斜角度）を検出する。
【００３１】
タイマー４は、計時機能および撮影日時の判定機能を有する。タイマー４は、撮像された画像データに日時データを付加させるため、制御部９に日時データを出力する。
【００３２】
操作入力部５は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ５１と、撮影の指示を与えるレリーズ信号の入力を受け付けるレリーズスイッチ５２と、撮像装置１に設定された各種撮影モードを切換える撮影モード切換スイッチ５３と、を有する。
【００３３】
表示部６は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて実現される。表示部６は、撮像部２が生成する画像データに対応する画像を表示する。表示部６は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。
【００３４】
タッチパネル７は、表示部６の表示画面上に重ねて設けられる。タッチパネル７は、ユーザが表示部６に表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた指示信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態１では、いずれの方式のタッチパネルであっても適用可能である。なお、本実施の形態１では、タッチパネル７が入力部として機能する。
【００３５】
記憶部８は、撮像装置１の内部に固定的に設けられるフラッシュメモリおよびＲＡＭ（Random Access Memory）等の半導体メモリを用いて実現される。記憶部８は、制御部９が実行中のデータを記憶する。記憶部８は、撮像部２が撮像した画像データを記憶する画像データ記憶部８１と、撮像装置１が実行する各種プログラムを記憶するプログラム記憶部８２と、被写体の顔の検出を行う際に参照する顔画像情報およびユーザによって予め登録された被写体の顔の特徴を記憶する特徴情報を記憶する顔情報記憶部８３と、を有する。なお、記憶部８は、外部から装着されるメモリカード等のコンピュータで読取可能な記憶媒体を含むものであってもよい。
【００３６】
制御部９は、ＣＰＵ（Central Processing Unit）等を用いて構成される。制御部９は、操作入力部５やタッチパネル７からの指示信号や切換信号等に応じて撮像装置１を構成する各部に対応する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。
【００３７】
制御部９の詳細な構成について説明する。制御部９は、画像処理部９１と、顔検出部９２と、トリミング部９３と、表示位置検出部９４と、画像合成部９５と、表示制御部９６と、を有する。
【００３８】
画像処理部９１は、信号処理部２９から入力される画像デー対して各種の画像処理を施す。具体的には、画像処理部９１は、画像データ（ＲＡＷデータ）に対して、エッジ強調処理、ホワイトバランス処理およびγ補正を含む画像処理を行う。画像処理部９１は、ＪＰＥＧ（Joint Photographic Experts Group）方式等に基づいて、画像データの圧縮処理や伸長処理を行う。
【００３９】
顔検出部９２は、画像データに対応する画像に含まれる被写体の顔を検出する。具体的には、顔検出部９２は、画像に含まれる人物の顔をパターンマッチングによって検出する。なお、顔検出部９２は、人物の顔だけでなく、犬や猫等の顔を検出してもよい。さらに、顔検出部９２は、パターンマッチング以外の周知技術を用いて人物の顔を検出してもよい。
【００４０】
トリミング部９３は、顔検出部９２が検出した被写体の顔を含む顔領域を画像から切出して顔画像を生成する。トリミング部９３は、顔検出部９２が画像内から被写体の顔を複数検出した場合、画像から各顔領域をそれぞれ切出して顔画像を生成する。
【００４１】
表示位置検出部９４は、顔検出部９２が検出した被写体の顔における画像上の表示位置を検出する。具体的には、表示位置検出部９４は、表示部６の表示画面における左下（図２を参照）を原点とし、表示部６の横方向をＸ軸とし、縦方向をＹ軸とする座標系として考えた場合において、顔検出部９２が検出する被写体の顔の表示位置としての座標を検出する。
【００４２】
画像合成部９５は、トリミング部９３が生成した顔画像を、予め設定された設定画像の指定位置に合成して合成画像を生成する。具体的には、画像合成部９５は、トリミング部９３が生成した顔画像を、画像データ記憶部８１が記憶する画像データに対応する設定画像の指定位置に合成して合成画像を生成する。
【００４３】
表示制御部９６は、表示部６の表示領域において指定された表示位置に、トリミング部９３が生成した顔画像を表示部６に表示させる。表示制御部９６は、タッチパネル７が入力を受け付けた指示信号に応じて、顔画像を表示する表示位置を移動させて表示部６に表示させる。表示制御部９６は、タッチパネル７が入力を受け付けた顔画像の大きさを変更する変更信号に応じて、顔画像の大きさを変更して表示部６に表示させる。
【００４４】
以上の構成を有する撮像装置１に電子ビューファインダ、フラッシュおよび外部処理装置と双方向に通信可能な通信部等を設けてもよい。
【００４５】
つぎに、本実施の形態１にかかる撮像装置１が行う処理について説明する。図４は、撮像装置１が行う処理の概要を示すフローチャートである。
【００４６】
図４において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０１：Ｙｅｓ）について説明する。この場合、表示制御部９６は、撮像部２が微小な時間間隔で連続的に生成する画像データに対応するライブビュー画像を表示部６に表示させる（ステップＳ１０２）。
【００４７】
図５は、撮影者が撮像装置１を用いて撮影する際の状況を示す図である。図６は、図５に示す状況下で表示部６が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像Ｗ１を示す。図５および図６に示すように、撮影者は、たとえば図６のライブビュー画像Ｗ１を見ながら被写体を撮影する際の構図を決定する。
【００４８】
続いて、制御部９は、撮像装置１にコラージュモードが設定されているか否かを判断する（ステップＳ１０３）。具体的には、図６に示すように、制御部９は、タッチパネル７から入力される指示信号に応じて、表示部６が表示するライブビュー画像Ｗ１上に重畳されるコラージュモードを設定するコラージュアイコンＡ１が選択されたから否かを判断する。撮像装置１にコラージュモードが選択されたと制御部９が判断した場合（ステップＳ１０３：Ｙｅｓ）、撮像装置１は、顔検出部９２が検出した被写体の顔を一部に含む顔領域を切出して顔画像を生成し、この顔画像を表示部６の表示領域において予め指定された表示位置に表示させるコラージュモード処理を実行する（ステップＳ１０４）。なお、コラージュモード処理の詳細については後述する。
【００４９】
これに対して、撮像装置１にコラージュモード処理が選択されていないと制御部９が判断した場合（ステップＳ１０３：Ｎｏ）、撮像装置１は、後述するステップＳ１０５へ移行する。
【００５０】
ステップＳ１０５において、レリーズスイッチ５２が操作されることにより、レリーズ信号が入力された場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は、制御部９の制御のもと、画像データを取得する（ステップＳ１０６）。なお、撮像装置１が取得する画像データには、コラージュモード処理が実行された画像データも含まれる。
【００５１】
続いて、制御部９は、画像データに日時やデータサイズを含むヘッダ情報を関連付けて画像データ記憶部８１に記憶させる（ステップＳ１０７）。
【００５２】
その後、表示制御部９６は、撮像した画像データに対応する画像を所定時間（たとえば２秒）だけ表示部６にレックビュー表示させる（ステップＳ１０８）。
【００５３】
続いて、制御部９は、電源スイッチ５１が操作されることにより、撮像装置１の電源がオフ状態になったか否かを判断する（ステップＳ１０９）。撮像装置１の電源がオフ状態になったと制御部９が判断した場合（ステップＳ１０９：Ｙｅｓ）、撮像装置１は、本処理を終了する。一方、撮像装置１の電源がオフ状態になっていないと制御部９が判断した場合（ステップＳ１０９：Ｎｏ）、撮像装置１は、ステップＳ１１０へ移行する。
【００５４】
ステップＳ１１０において、制御部９は、撮影モード切換スイッチ５３からモード切換信号が入力された場合、モード切換信号に応じて撮影・再生モードの変更操作を受け付ける一方、撮影モード切換スイッチ５３を介してモード切換信号が入力されていない場合、現在のモードを維持する。その後、撮像装置１は、ステップＳ１０１へ戻る。
【００５５】
ステップＳ１０５において、所定時間（たとえば２秒）内にレリーズスイッチ５２を介してレリーズ信号が入力されていない場合（ステップＳ１０５：Ｎｏ）、撮像装置１は、ステップＳ１０９へ移行する。
【００５６】
つぎに、撮像装置１が撮影モードに設定されておらず（ステップＳ１０１：Ｎｏ）、再生モードに設定されている場合（ステップＳ１１１：Ｙｅｓ）について説明する。この場合、表示制御部９６は、画像データ記憶部８１が記憶する画像データに対応する画像を縮小した縮小画像（サムネイル画像）の一覧を表示部６に表示させる（ステップＳ１１２）。
【００５７】
続いて、操作入力部５またはタッチパネル７を介して拡大して表示する縮小画像が選択された場合（ステップＳ１１３：Ｙｅｓ）、表示制御部９６は、選択された縮小画像を所定時間（たとえば３秒）だけ表示部６に全画面に拡大して表示させる（ステップＳ１１４）。その後、撮像装置１は、ステップＳ１１１へ戻る。
【００５８】
これに対して、操作入力部５またはタッチパネル７を介して拡大して表示する縮小画像が選択されていない場合（ステップＳ１１３：Ｎｏ）、制御部９は、縮小画像の一覧表示を行ってから所定時間（たとえば５秒）経過したか否かを判断する（ステップＳ１１５）。縮小画像の一覧表示を行ってから所定時間経過したと制御部９が判断した場合（ステップＳ１１５：Ｙｅｓ）、撮像装置１は、ステップＳ１０９へ移行する。一方、縮小画像の一覧表示を行ってから所定時間経過していないと制御部９が判断した場合（ステップＳ１１５：Ｎｏ）、撮像装置１は、ステップＳ１１２へ戻る。
【００５９】
ステップＳ１１１において、撮像装置１に再生モードが設定されていない場合（ステップＳ１１１：Ｎｏ）、撮像装置１は、ステップＳ１０９へ移行する。
【００６０】
つぎに、図４のステップＳ１０３のコラージュモード処理について説明する。図７は、コラージュモード処理の概要を示すフローチャートである。
【００６１】
図７において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出したと制御部９が判断した場合（ステップＳ２０１：Ｙｅｓ）について説明する。この場合、制御部９は、コラージュ表示で表示対象とする被写体の選択が適用済みであるか否かを判断する（ステップＳ２０２）。コラージュ表示で表示対象とする被写体の選択が適用済みであると制御部９が判断した場合（ステップＳ２０２：Ｙｅｓ）、撮像装置１は、後述するステップＳ２０９へ移行する。一方、コラージュ表示で表示対象とする被写体の選択が適用済みでない場合（ステップＳ２０２：Ｎｏ）、撮像装置１は、後述するステップＳ２０３へ移行する。
【００６２】
ステップＳ２０３において、表示制御部９６は、顔検出部９２が検出した被写体の顔を含む顔領域に対応する顔枠（ウィンドウ）を表示部６に表示させる。具体的には、図８に示すように、表示制御部９６は、ライブビュー画像Ｗ２上に顔検出部９２が検出した複数の被写体それぞれの顔領域に対応する矩形状の顔枠Ｆ１〜Ｆ４を表示部６に表示させる。さらに、表示制御部９６は、コラージュモードで表示対象としない被写体の削除を指示する指示信号の入力を受け付ける削除アイコンＡ１１と、コラージュ表示を適用する指示信号の入力を受け付ける適用アイコンＡ１２と、を表示部６に表示させる。なお、図８では、表示制御部９６が顔枠を矩形状で表示部６に表示させていたが、たとえば円形状で表示部６に表示させてもよい。
【００６３】
続いて、制御部９は、削除アイコンＡ１１が選択され、被写体の顔領域に対応する顔枠の領域内がタッチされたか否かを判断する（ステップＳ２０４）。具体的には、図９に示すように、制御部９は、タッチパネル７から入力される指示信号に応じて、ユーザが表示部６によって表示されているライブビュー画像Ｗ２の削除アイコンＡ１１をタッチし（図９（ａ））、被写体の顔領域に対応する顔枠Ｆ１〜Ｆ４の領域内のいずれか、たとえば顔枠Ｆ１の領域内をタッチしたか否かを判断する（図９（ｂ））。削除アイコンＡ１１が選択され、被写体の顔領域に対応する顔枠Ｆ１〜Ｆ４の領域内のいずれかがタッチされたと制御部９が判断した場合（ステップＳ２０４：Ｙｅｓ）、撮像装置１は、後述するステップＳ２０５へ移行する。一方、削除アイコンＡ１１が選択されず、被写体の顔領域に対応する顔枠Ｆ１〜Ｆ４の領域内のいずれもタッチされていないと制御部９が判断した場合（ステップＳ２０４：Ｎｏ）、撮像装置１は、後述するステップＳ２０８へ移行する。
【００６４】
ステップＳ２０５において、制御部９は、タッチされた被写体の顔領域に対応する顔枠がコラージュ表示の表示対象であるか否かを判断する。タッチされた被写体の顔領域に対応する顔枠がコラージュ表示の表示対象であると制御部９が判断した場合（ステップＳ２０５：Ｙｅｓ）、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠内を識別可能な表示態様で表示部６に表示させる（ステップＳ２０６）。たとえば、図１０に示すように、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠Ｆ１および顔枠Ｆ４の内部を黒く塗りつぶした状態（非表示状態）で表示部６に表示させる。なお、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠内を、白抜きで表示したり、顔枠を太くする表示等を行って識別可能な表示態様で表示部６に表示させてもよい。
【００６５】
これに対して、タッチされた被写体の顔領域に対応する顔枠がコラージュ表示の表示対象でないと制御部９が判断した場合（ステップＳ２０５：Ｎｏ）、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠内を黒く塗りつぶされた状態から元の状態に戻して表示部６に表示させる（ステップＳ２０７）。
【００６６】
ステップＳ２０８において、制御部９は、タッチパネル７から入力される指示信号に応じて、適用アイコンＡ１２が選択されたか否かを判断する。具体的には、図１１に示すように、制御部９は、タッチパネル７から入力される指示信号に応じて、ライブビュー画像Ｗ３の適用アイコンＡ１２が選択されたか否かを判断する。適用アイコンＡ１２が選択されたと制御部９が判断した場合（ステップＳ２０８：Ｙｅｓ）、撮像装置１は、後述するステップＳ２０９へ移行する。一方、所定時間（たとえば３秒）に適用アイコンＡ１２が選択されていないと制御部９が判断した場合（ステップＳ２０８：Ｎｏ）、撮像装置１は、図４のメインルーチンへ戻る。
【００６７】
ステップＳ２０９において、表示位置検出部９４は、ライブビュー画像上において表示対象とする被写体の顔が写る表示位置を検出する。具体的には、図１１に示す状況下において、表示位置検出部９４は、ライブビュー画像Ｗ３において表示対象とする顔枠Ｆ２およびＦ３それぞれの表示位置を検出する。
【００６８】
続いて、トリミング部９３は、顔検出部９２によって検出された複数の顔うちコラージュ表示で適用された表示対象とする顔を一部に含む顔領域を画像から切出して顔画像を生成する（ステップＳ２１０）。具体的には、トリミング部９３は、図１１に示した顔枠Ｆ２および顔枠Ｆ３それぞれの被写体の顔を一部に含む顔領域をライブビュー画像Ｗ３から切出して顔画像を生成する。この場合、トリミング部９３は、顔の頭部を含むように円形に切取ってもよい。さらに、トリミング部９３は、顔枠の周辺におけるコントラスト変化に基づいて、被写体の頭部の輪郭を検出し、検出した輪郭に沿って切出して顔画像を生成してもよい。
【００６９】
続いて、画像合成部９５は、トリミング部９３が生成した顔画像を、予め設定された設定画像の指定位置に合成して合成画像を生成する（ステップＳ２１１）。具体的には、図１２に示すように、画像合成部９５は、トリミング部９３が生成した顔画像Ｍ１および顔画像Ｍ２を、画像データ記憶部８１が記憶する複数の画像データから予めユーザが設定した画像データを取得し、この取得した画像データに対応する画像の指定位置である白抜き部Ｎ１および白抜き部Ｎ２に合成することによって合成画像Ｗ４を生成する。指定位置としては、表示位置検出部９４が検出した顔の表示位置に対応する画像内の位置である。さらに、表示制御部９６は、指定位置を含む領域を識別可能な表示態様、たとえば白くくり抜いた白抜き部Ｎ１および白抜き部Ｎ２で表示する。これにより、合成される顔画像Ｍ１および顔画像Ｍ２の周辺が他の画像に比して強調されるので、コラージュ手法のような画像にすることができる。なお、図１２では、白抜き部Ｎ１，Ｎ２を表現するため、ハッチングを施して表現した。また、顔画像に合成する設定画像は、ユーザが予め設定する必要はなく、たとえば、画像データ記憶部８１に記憶された複数の画像データのうち日付等が最新の画像データに対応する画像を設定するようにしてもよい。
【００７０】
その後、表示制御部９６は、画像合成部９５が生成した合成画像を表示部６に表示させる（ステップＳ２１２）。具体的には、表示制御部９６は、図１２に示した合成画像Ｗ４を表示部６に表示させる。
【００７１】
続いて、制御部９は、タッチパネル７から入力される指示信号に応じて、表示部６が表示している合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたか否かを判断する（ステップＳ２１３）。合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたと制御部９が判断した場合（ステップＳ２１３：Ｙｅｓ）、撮像装置１は、ステップＳ２１４へ移行する。一方、所定時間（３秒）内に合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われていないと制御部９が判断した場合（ステップＳ２１３：Ｎｏ）、撮像装置１は、図４に示したメインルーチンへ戻る。
【００７２】
ステップＳ２１４において、表示制御部９６は、ユーザのスライド操作の軌跡に応じて、顔画像の表示位置を移動させて表示部６に表示させる。具体的には、図１３に示すように、表示制御部９６は、ユーザのスライド操作に応じて（図１３（ａ）→図１３（ｂ））、顔画像Ｍ１の表示位置を移動させて表示部６に表示させる。その後、撮像装置１は、図４に示したメインルーチンへ戻る。
【００７３】
ステップＳ２０１において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出していないと制御部９が判断した場合（ステップＳ２０１：Ｎｏ）について説明する。この場合、表示制御部９６は、表示部６が表示しているライブビュー画像上に、コラージュモードを実行することができない旨の警告を表示部６に表示させる（ステップＳ２１５）。その後、撮像装置１は、図４に示したメインルーチンへ戻る。
【００７４】
以上説明した本発明の実施の形態１によれば、表示制御部９６が、表示部６の表示領域において予め指定された表示位置に、トリミング部９３によって生成された各顔画像を表示部６に表示させる。これにより、簡易な操作で撮影時に写る所望の被写体を画像内に写すことができるとともに、コラージュ表現を用いた作風の画像を撮影することができる。
【００７５】
さらに、本発明の実施の形態１によれば、被写体が混み合った状況下であっても、ユーザが所望する被写体のみを撮影することができる。
【００７６】
また、本発明の実施の形態１によれば、表示制御部９６が表示位置検出部９３の検出結果に応じて、ライブビュー画像の白抜き部の位置を変更する。これにより、被写体が撮像装置１の視野領域において動き回る毎に、コラージュ表示による白抜き部の位置が変わるので、撮影者や被写体の工夫を面白く反映することできる。さらに、撮影者が撮影の構図を決定する際に被写体の位置に応じて直感的に表示位置を把握しながら撮影を行うことできる。
【００７７】
なお、上述した実施の形態１では、撮影者が削除アイコンＡ１１をタッチし、非表示対象とする被写体を選択していたが、たとえば顔情報記憶部８３に予め所望の被写体の顔の特徴を記憶させ、この特徴に応じて表示制御部９６が自動的に表示対象とする被写体の顔を選択するようにしてもよい。
【００７８】
また、上述した実施の形態１では、ユーザがスライド操作で顔画像を移動させていたが、図１４に示すように、表示部６が表示する合成画像Ｗ４内の顔画像Ｍ１内において、２点間の距離を引き伸ばす操作が行われた場合（図１４（ａ）→（図１４（ｂ））、表示制御部９６は、顔画像Ｍ１の縦横比を一定に維持しながら拡大して表示部６に表示させるようにしてもよい。
【００７９】
（実施の形態２）
つぎに、本発明の実施の形態２について説明する。本発明の実施の形態２にかかる撮像装置は、制御部の構成が上述した撮像装置と異なる。さらに、本発明の実施の形態２にかかる撮像装置が行う動作は、コラージュモード処理が上述した実施の形態１と異なる。このため、以下においては、上述した実施の形態１と異なる構成を説明後、本発明の実施の形態２にかかる撮像装置による動作のコラージュモード処理を説明する。なお、図面の記載において、同一の部分には同一の符号を付している。
【００８０】
図１５は、本発明の実施の形態２にかかる撮像装置１００の構成を示すブロック図である。図１５に示すように、撮像装置１００の制御部１０１は、画像処理部９１と、顔検出部９２と、トリミング部９３と、表示位置検出部９４と、画像合成部９５と、表示制御部９６と、背景検出部１０２と、を有する。
【００８１】
背景検出部１０２は、撮像部２が生成した画像データに対応する画像から被写体の顔領域を含む人物以外の領域を背景領域として検出する。具体的には、背景検出部１０２は、撮像部２が生成した画像データに対応する画像を複数（たとえば９分割）の領域毎に分割し、この分割した各領域に顔検出部９２によって検出された顔が含まれているか否かを判定し、顔が含まれていない領域を背景領域として検出する。
【００８２】
つぎに、本実施の形態２にかかる撮像装置１００が行うコラージュモード処理について説明する。図１６は、本実施の形態２にかかる撮像装置１００が行うコラージュモード処理（図４のステップＳ１０４）の概要を示すフローチャートである。
【００８３】
図１６において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出したと制御部１０１が判断した場合（ステップＳ３０１：Ｙｅｓ）について説明する。この場合、制御部１０１は、コラージュ表示で表示対象とする被写体の選択が適用済みであるか否かを判断する（ステップＳ３０２）。コラージュ表示で表示対象とする被写体の選択が適用済みであると制御部１０１が判断した場合（ステップＳ３０２：Ｙｅｓ）、撮像装置１００は、後述するステップＳ３１０へ移行する。一方、コラージュ表示で表示対象とする被写体の選択が適用済みでないと制御部１０１が判断した場合（ステップＳ３０２：Ｎｏ）、撮像装置１００は、後述するステップＳ３０３へ移行する。
【００８４】
ステップＳ３０３において、表示制御部９６は、顔検出部９２が検出した被写体の顔を一部に含む顔領域に対応する顔枠を表示部６に表示させる。
【００８５】
続いて、撮像装置１００は、コラージュ表示で顔画像に合成する背景画像を、ライブビュー画像上に背景枠として表示する背景枠表示処理を実行する（ステップＳ３０４）。なお、背景枠表示処理の詳細については後述する。
【００８６】
ステップＳ３０５〜ステップＳ３０９は、図７で説明したステップＳ２０５〜２０８それぞれに対応するため、説明を省略する。
【００８７】
ステップＳ３１０において、撮像装置１００は、顔検出部９２が検出した被写体の顔を一部に含む顔領域を切出して顔画像を生成し、この顔画像を背景画像に合成して合成画像を表示部６に表示させるコラージュ表示処理を実行する。なお、コラージュ表示処理の詳細については後述する。ステップＳ３１０の後、撮像装置１００は、図４に示したメインルーチンへ戻る。
【００８８】
ステップＳ３０１において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出していないと制御部１０１が判断した場合（ステップＳ３０１：Ｎｏ）について説明する。この場合、表示制御部９６は、表示部６が表示しているライブビュー画像上に、コラージュモードを実行することができない旨の警告を表示部６に表示させる（ステップＳ３１１）。その後、撮像装置１００は、図４に示したメインルーチンへ戻る。
【００８９】
つぎに、図１６のステップＳ３０４の背景枠表示処理について説明する。図１７は、背景枠表示処理の概要を示すフローチャートである。
【００９０】
図１７に示すように、背景検出部１０２は、ライブビュー画像の中央領域に、顔検出部９２が検出した被写体の顔があるか否かを判定する（ステップＳ４０１）。
【００９１】
図１８は、背景検出部１０２が判定する背景領域の判定方法の概要を説明する図である。図１８に示すように、背景検出部１０２は、ライブビュー画像Ｗ５を所定の領域毎、たとえば９分割し（Ｄ1〜Ｄ9）、まず、９分割の中央の領域（Ｄ1）に対して、顔検出部９２が検出した被写体の顔があるか否かを判定する。図１８に示す状態では、背景検出部１０２は、ライブビュー画像Ｗ５の中央領域Ｄ1に、二人の被写体の顔が写っているため、顔があると判定する。このように、背景検出部１０２は、各領域毎に顔検出部９２が検出した被写体の顔があるか否かを判定する。なお、図１８においては、ライブビュー画像を９分割しているが、たとえば１６分割であってもよい。また、分割する領域の画素数が１００万画素以上であれば、撮像素子２７の画像数に応じて適宜変更できるようにしてもよい。
【００９２】
ステップＳ４０１において、ライブビュー画像の中央領域に顔があると背景検出部１０２が判定した場合（ステップＳ４０１：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４０６へ移行する。一方、ライブビュー画像の中央領域に顔がないと背景検出部１０２が判定した場合（ステップＳ４０１：Ｎｏ）、撮像装置１００は、後述するステップＳ４０２へ移行する。
【００９３】
ステップＳ４０２において、背景検出部１０２は、ライブビュー画像Ｗ５の中央領域を背景領域として検出する。
【００９４】
続いて、表示制御部９６は、表示部６が表示するライブビュー画像上に、背景検出部１０２が検出した背景領域に対応する背景枠を表示させる（ステップＳ４０３）。具体的には、図１９に示すように、表示制御部９６は、表示部６が表示するライブビュー画像Ｗ５上に、背景検出部１０２が検出した背景領域に対応する背景枠Ｆ１１を表示部６に表示させる。
【００９５】
続いて、制御部１０１は、タッチパネル７から入力される指示信号に応じて、表示部６が表示している背景枠Ｆ１１を移動させるスライド操作が行われたか否かを判断する（ステップＳ４０４）。背景枠Ｆ１１を移動させるスライド操作が行われたと制御部１０１が判断した場合（ステップＳ４０４：Ｙｅｓ）、撮像装置１００は、ステップＳ４０５へ移行する。一方、背景枠Ｆ１１を移動させるスライド操作が行われていないと制御部１０１が判断した場合（ステップＳ４０４：Ｎｏ）、撮像装置１００は、図１６のコラージュモード処理へ戻る。
【００９６】
ステップＳ４０５において、表示制御部９６は、ユーザのスライド操作の軌跡に応じて、背景枠Ｆ１１の表示移動を移動させて表示部６に表示させる。その後、撮像装置１００は、図１６のコラージュモード処理へ戻る。
【００９７】
ステップＳ４０６において、背景検出部１０２は、ライブビュー画像Ｗ５の左右領域に顔検出部９２が検出した顔があるか否かを判定する。具体的には、図１８に示すように、ライブビュー画像Ｗ５の左右領域Ｄ2，Ｄ3に、顔検出部９２が検出した被写体の顔があるか否かを判定する。ライブビュー画像の左右領域に顔検出部９２が検出した顔があると背景検出部１０２が判定した場合（ステップＳ４０６：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４０８へ移行する。一方、ライブビュー画像の左右領域に顔検出部９２が検出した顔がないと背景検出部１０２が判定した場合（ステップＳ４０６：Ｎｏ）、撮像装置１００は、後述するステップＳ４０７へ移行する。
【００９８】
ステップＳ４０７において、背景検出部１０２は、ライブビュー画像の左右領域における色変化およびコントラスト変化に基づいて、ライブビュー画像の左右領域のどちらかを背景領域として検出する。具体的には、背景検出部１０２は、左右領域における色変化およびコントラスト変化それぞれを比較し、変化率が大きい方を背景領域として検出する。その後、撮像装置１００は、ステップＳ４０３へ移行する。
【００９９】
ステップＳ４０８において、背景検出部１０２は、ライブビュー画像の上領域に、顔検出部９２が検出した顔があるか否かを判定する。具体的には、図１８に示すように、背景検出部１０２は、ライブビュー画像Ｗ５の上領域Ｄ4〜Ｄ6に、顔検出部９２によって検出された被写体の顔が検出されているか否かを判定する。ライブビュー画像の上領域に顔検出部９２によって検出された被写体の顔があると背景検出部１０２が判定した場合（ステップＳ４０８：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４１０へ移行する。一方、ライブビュー画像の上領域に顔検出部９２によって被写体の顔が検出されていないと背景検出部１０２が判定した場合（ステップＳ４０８：Ｎｏ）、撮像装置１００は、後述するステップＳ４０９へ移行する。
【０１００】
ステップＳ４０９において、背景検出部１０２は、ライブビュー画像の上領域における色変化およびコントラスト変化に基づいて、ライブビュー画像の上領域のいずれかを背景領域として検出する。具体的には、図１８に示す状況では、背景検出部１０２は、上領域Ｄ6を背景領域として検出する。その後、撮像装置１００は、ステップＳ４０３へ移行する。
【０１０１】
ステップＳ４１０において、背景検出部１０２は、ライブビュー画像の下領域に、顔検出部９２が検出した被写体の顔があるか否かを判断する。具体的には、図１８に示すように、背景検出部１０２は、ライブビュー画像の下領域Ｄ7〜Ｄ9に、顔検出部９２によって検出された被写体の顔があるか否かを判定する。ライブビュー画像の下領域に顔検出部９２によって検出された被写体の顔があると背景検出部１０２が判定した場合（ステップＳ４１０：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４１２へ移行する。一方、ライブビュー画像の下領域に顔検出部９２によって検出された被写体の顔がないと判定した場合（ステップＳ４１０：Ｎｏ）、撮像装置１００は、後述するステップＳ４１１へ移行する。
【０１０２】
ステップＳ４１１において、背景検出部１０２は、ライブビュー画像の下領域における色変化およびコントラスト変化に基づいて、ライブビュー画像の下領域のいずれかを背景領域として検出する。その後、撮像装置１００は、ステップＳ４０３へ移行する。
【０１０３】
ステップＳ４１２において、表示制御部９６は、表示部が表示するライブビュー画像上に、背景検出部１０２が背景を検出できなかったことを示す警告を表示させる。その後、撮像装置１００は、図１６のコラージュモード処理へ戻る。
【０１０４】
つぎに、図１６のステップＳ３１０のコラージュ表示処理について説明する。図２０は、コラージュ表示処理の概要を示すフローチャートである。
【０１０５】
図２０に示すように、表示位置検出部９４は、表示部６が表示するライブビュー画像における表示対象とする被写体の顔を含む顔の表示位置を検出する（ステップＳ５０１）。
【０１０６】
続いて、トリミング部９３は、表示制御部９６がライブビュー画像に表示している背景枠に対応する領域をライブビュー画像から切出して背景画像を生成する（ステップＳ５０２）。
【０１０７】
その後、表示制御部９６は、トリミング部９３が生成した背景画像を表示部６に全画面表示させ、（ステップＳ５０３）、表示部６が表示している背景画像に対して、表示位置検出部９４によって検出された表示対象とする被写体の顔の表示位置（座標位置）を中心に含む所定の大きさの領域を、白くして抜き出した白抜き部で表示部６に表示させる（ステップＳ５０４）。
【０１０８】
続いて、トリミング部９３は、顔検出部９２が検出した顔を一部に含む顔領域に対応する顔画像を生成する（ステップＳ５０５）。
【０１０９】
その後、表示制御部９６は、背景画像の白抜き部の表示位置に、トリミング部９３が生成した顔画像を画像合成部９５に合成させた合成画像を表示部６に表示させる（ステップＳ５０６）。具体的には、図２１に示すように、表示制御部９６は、画像合成部９５が背景画像の白抜き部Ｎ１および白抜き部Ｎ２それぞれに顔画像Ｍ１およびＭ２を合成した合成画像Ｗ６を表示部６に表示させる。この際、表示制御部９６は、合成画像Ｗ６上に、複数の顔画像それぞれを等間隔に整列させて表示させる指示信号の入力を受け付ける整列アイコンＡ２１を表示部６に表示させる。
【０１１０】
続いて、制御部１０１は、整列アイコンＡ２１がタッチされたか否かを判断する（ステップＳ５０７）。具体的には、制御部１０１は、タッチパネル７がタッチされることにより、タッチパネル７から入力される指示信号に応じて、整列アイコンＡ２１がタッチされたか否かを判断する。整列アイコンＡ２１がタッチされたと制御部１０１が判定した場合（ステップＳ５０７：Ｙｅｓ）、撮像装置１００は、後述するステップＳ５０８へ移行する。一方、所定時間（たとえば２秒）内に整列アイコンＡ２１がタッチされていないと制御部１０１が判断した場合（ステップＳ５０７：Ｎｏ）、撮像装置１００は、後述するステップＳ５１０へ移行する。
【０１１１】
ステップＳ５０８において、表示制御部９６は、複数の顔画像それぞれを背景画像上において等間隔に表示されるように整列して表示部６に表示させ、顔画像の大きさをどちらか一方の大きさに統一して表示部６に表示させる（ステップＳ５０９）。たとえば、図２２に示すように、表示制御部９６は、顔画像が２つの場合、表示部６の表示領域の表示領域において均等に配置されるように各顔画像を配置する。具体的には、表示制御部９６は、表示部６の表示領域において縦方向と横方向との表示間隔が同じになるように各画像を表示する。さらに、表示制御部９６は、顔画像の大きさが大きい方（Ｍ１）に合わせて、他方の顔画像（Ｍ２）の大きさを拡大して表示部６に表示させる。
【０１１２】
続いて、制御部１０１は、タッチパネル７から入力される指示信号に応じて、表示部６が表示している合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたか否かを判断する（ステップＳ５１０）。合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたと制御部１０１が判断した場合（ステップＳ５１０：Ｙｅｓ）、撮像装置１００は、後述するステップＳ５１１へ移行する。一方、所定時間（３秒）内に合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われていないと制御部１０１が判断した場合（ステップＳ５１０：Ｎｏ）、撮像装置１００は、図１３のコラージュモード処理へ戻る。
【０１１３】
ステップＳ５１１において、表示制御部９６は、ユーザのスライド操作の軌跡に応じて、顔画像の表示位置を移動させて表示部６に表示させる。その後、撮像装置１００は、図１３のコラージュモード処理へ戻る。
【０１１４】
以上説明した本発明の実施の形態２によれば、背景検出部１０２が表示部６によって表示されているライブビュー画像から表示対象とする被写体の顔を含まない領域を背景領域として検出し、トリミング部９３が背景検出部１０２によって検出された背景領域およびユーザによって選択された表示対象とする顔領域をそれぞれライブビュー画像から切出して背景画像および顔画像を生成し、画像合成部９５が背景画像の指定画像に顔画像を合成して合成画像を生成し、表示制御部９６が画像合成部９５によって生成された合成画像を表示部６に表示させる。これにより、撮影時にいた複数の人物の中から所定する人物のみを写しこめた画像を撮影することができる。
【０１１５】
（実施の形態３）
つぎに、本発明の実施の形態３について説明する。本発明の実施の形態３にかかる撮像装置は、背面側に撮影者を撮影する背面撮像部を備える。さらに、本発明の実施の形態３にかかる撮像装置が行う動作は、コラージュモード処理が上述した実施の形態と異なる。このため、以下においては、上述した実施の形態と異なる構成を説明後、本発明の実施の形態３にかかる撮像装置による動作のコラージュモード処理を説明する。なお、図面の記載において、同一の部分には同一の符号を付している。
【０１１６】
図２３は、本発明の実施の形態３にかかる撮像装置２００の撮影者に面する側（背面側）の構成を示す斜視図である。図２４は、本発明の実施の形態３にかかる撮像装置２００の構成を示すブロック図である。
【０１１７】
図２３〜図２４に示すように、撮像装置２００は、背面撮像部２０１をさらに備える。背面撮像部２０１は、撮像部２と同一の構成によって実現され、レンズ部２１と、レンズ駆動部２２と、絞り２３と、絞り駆動部２４と、シャッタ２５と、シャッタ駆動部２６と、撮像素子２７と、撮像駆動部２８と、信号処理部２９と、を有する。背面撮像部２０１は、背面側の視野領域から光を集光して光電変換を行うことによって背面画像データを生成する。
【０１１８】
つぎに、本実施の形態３にかかる撮像装置２００が行うコラージュモード処理について説明する。図２５は、本実施の形態３にかかる撮像装置２００が行うコラージュモード処理（図４のステップＳ１０４）の概要を示すフローチャートである。
【０１１９】
図２５において、撮像装置２００は、制御部１０１の制御のもと、背面撮像部２０１を駆動することにより、撮像装置２００の背面を撮影する（ステップＳ６０１）。
【０１２０】
図２６は、撮影者が撮像装置２００を用いて撮影する際の状況を示す図である。図２７は、図２６に示す状況下で表示部６が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す。図２６および図２７に示すように、撮影者Ｋ１は、たとえば図２７のようなライブビュー画像Ｗ８を見ながら被写体Ｋ２（お母さん）被写体Ｋ３（子供）を撮影する際の構図を決定する。さらに、背面撮像部２０１は、撮影者Ｋ１（お父さん）を含む背面側を撮影する。
【０１２１】
続いて、制御部１０１は、顔検出部９２が背面画像の中央領域付近で被写体である撮影者の顔を検出したか否かを判断する（ステップＳ６０２）。顔検出部９２が背面画像の中央領域（正面）付近で被写体である撮影者の顔を検出したと制御部１０１が判断した場合（ステップＳ６０２：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６０３へ移行する。一方、顔検出部９２が背面画像の中央領域付近で被写体である撮影者の顔を検出していないと制御部１０１が判断した場合（ステップＳ６０２：Ｎｏ）、撮像装置２００は、後述するステップＳ６１４へ移行する。
【０１２２】
ステップＳ６０３において、制御部１０１は、顔検出部９２が背面画像から検出した撮影者の顔を一部に含む顔領域を顔枠の大きさを設定する。具体的には、制御部１０１は、顔検出部９２が背面画像から検出した撮影者の顔を一部に含む顔領域に対応する顔枠の大きさを、背面画像を９等分にした際の中央領域の大きさに設定する。
【０１２３】
続いて、撮像装置２００は、コラージュ表示で台紙として用いる背景画像の背景枠をライブビュー画像に表示する上述した背景枠表示処理（図１７を参照）を実行する（ステップＳ６０４）。
【０１２４】
その後、制御部１０１は、撮影者の顔を表示する表示位置が指定されているか否かを判断する（ステップＳ６０５）。撮影者の顔を表示する表示位置が指定されていると制御部１０１が判断した場合（ステップＳ６０５：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６１５へ移行する。一方、撮像者の顔を表示する表示位置が指定されていないと制御部１０１が判断した場合（ステップＳ６０５；Ｎｏ）、撮像装置２００は、後述するステップＳ６０６へ移行する。
【０１２５】
ステップＳ６０６において、撮像装置２００は、背面画像に写る撮影者の位置に応じて、ライブビュー画像上に撮影者の顔枠の表示位置を設定する撮影者顔枠表示処理を実行する。
【０１２６】
図２８は、図２５のステップＳ６０６の撮影者顔枠表示処理の概要を示すフローチャートである。
【０１２７】
図２８に示すように、表示位置検出部９４は、背景画像における撮影者の顔の位置を検出する（ステップＳ７０１）。
【０１２８】
続いて、表示制御部９６は、表示位置検出部９４によって検出された背面画像における撮影者の顔の位置に応じて、表示部６が表示するライブビュー画像上に白抜き部を表示部６に表示させる（ステップＳ７０２）。その後、撮像装置２００は、図２５のコラージュモード処理へ戻る。
【０１２９】
図２９は、表示制御部９６がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図であり、撮影者が背面撮像部２０１の光軸Ｌ２に対して左寄りに位置する状況を示す。図３０は、表示制御部９６がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図であり、撮影者が背面撮像部２０１の光軸Ｌ２に対して右寄りに位置する状況を示す。また、図２９および図３０において、背面撮像部２０１の撮影領域を２０１ａとする。
【０１３０】
図２９（ｄ）および図３０（ｄ）に示すように、本実施の形態３では、表示制御部９６は、表示部６に対して、背面画像２０１ａに写る撮影者の位置に対応したライブビュー画像の位置に白抜き部を表示させるとともに、白抜き部に合成する撮影者の顔画像を反転させて表示部６に表示させる（図２９（ｄ），図３０（ｄ））。これにより、図３２および図３３に示すように、撮影者は、ライブビュー画像の色抜き部を見ながら、撮像装置２００の位置を調整することで、撮影者自身が画像に写りこめる位置を調整することができる。これに対して、図２９（ａ）および図３０（ａ）に示すように、従来の撮像装置は、背面撮像部２０１で撮影した画像を表示部６に表示する場合、撮影者Ｋ１に対して撮影した画像を認識し易くするため、前面側の撮像部２で撮影した画像の位置で表されるように撮影者Ｋ１の位置を反転（座標変換）させて表示させる（図２９（ｂ）→図２９（ｃ），図３０（ｂ）→図３０（ｃ））。また、図３１に示すように、単に、背面画像に写る撮影者の顔の位置に応じて、前面側で撮影される画像に撮影者の顔画像を合成しても、撮影者の顔が左右逆（図３１（ｂ）になるため、前面側の撮像部２で撮影した画像に合成する際に不自然な状態で合成されてしまう場合があった。
【０１３１】
ここで、表示制御部９６が表示部６に表示させるライブビュー画像上の白抜き部の位置について説明する。具体的には、図２９（ｃ）において、背面画像２０１ａの左下を原点Ｐ1とし、背面画像２０１ａの横方向をＸ軸とし、背面画像２０１ａの縦方向をＹ軸とする座標系として考える。また、図２９（ｄ）において、表示部６の左下を原点Ｐ11として、表示部６の横方向をＸ軸とし、表示部６の縦方向をＹ軸とする座標系として考える。
【０１３２】
図２９（ｃ）および図２９（ｄ）に示すように、表示制御部９６は、背面画像２０１ａの右下の点Ｐ2の座標を（Ｘ1，０）、背面画像２０１ａにおける撮影者Ｋ１の点Ｐ3の座標を（Ｘf，Ｙf）、表示部６の右下の点Ｐ12の座標を（Ｘ2，０）、表示部６における撮影者Ｋ１の点Ｐ13の座標を（Ｘa，Ｙa）としたとき、以下の式によって表示部６における撮影者Ｋ１の点Ｐ13の座標が算出される。
Ｘa：Ｘ2＝Ｘ1−Ｘf：Ｘ1 ・・・（１）
したがって、
Ｘa＝（Ｘ1−Ｘf）Ｘ2／Ｘ1 ・・・（２）
になる。同様に、背面画像２０１ａの左上の点Ｐ4の座標を（０，Ｙ１）、表示部６の左上の点Ｐ14の座標を（０，Ｙ2）、としたとき
Ｙa：Ｙ2＝Ｙf：Ｙ１ ・・・（３）
したがって、
Ｙa＝Ｙ2Ｙf／Ｙ１ ・・・（４）
になる。このように、表示制御部９６は、式（２）および式（４）を用いて、表示部６における撮影者Ｋ１の座標を算出し、この算出した座標を一部に含む領域を白抜き部として
表示部６が表示するライブビュー画像上に表示させる。なお、表示制御部９６は、座標変換等を行わず、単に背面画像２０１ａにおける撮影者の顔の位置に応じて、白抜き部を表示部６が表示するライブビュー画像上に表示させてもよい。
【０１３３】
図２５に戻り、ステップＳ６０７以降の説明を続ける。ステップＳ６０７において、制御部１０１は、姿勢検出部３の検出結果に基づいて、撮像装置１の光軸Ｌ２が水平であるか否かを判断する。撮像装置２００の光軸Ｌ１および光軸Ｌ２が水平状態である場合（ステップＳ６０７：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６０８へ移行する。一方、撮像装置２００の光軸Ｌ１および光軸Ｌ２が水平状態でない場合（ステップＳ６０７：Ｎｏ）、撮像装置２００は、後述するステップＳ６１６へ移行する。
【０１３４】
ここで、水平状態を判断する理由について説明する。図３４に示すように、撮影者の顔画像Ｍ１１を合成する場合、撮影者の顔画像Ｍ１１の位置を背面撮像部２０１で得られた顔の高さと撮像部２に写る被写体の顔の高さとの関係を反映した状態で合成すること好ましい。たとえば、撮影者であるお父さんＫ１の顔の表示位置が子供のＫ３の顔の表示位置より低くなると不自然である。このため、図３５に示すように、制御部１０１は、姿勢検出部３の検出結果に基づいて、撮像装置２００の光軸Ｌ１およびＬ２が水平状態であるか否かを判断する。
【０１３５】
ステップＳ６０８において、制御部１０１は、顔検出部９２によって背面画像から撮影者の顔が検出されているか否かを判断する。顔検出部９２によって背面画像から撮影者の顔が検出されていると制御部１０１が判断した場合（ステップＳ６０８：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６０９へ移行する。一方、顔検出部９２によって背面画像から撮影者の顔が検出されていないと制御部１０１が判断した場合（ステップＳ６０８：Ｎｏ）、撮像装置２００は、後述するステップＳ６１７へ移行する。
【０１３６】
ステップＳ６０９において、画像合成部９５は、トリミング部９３が生成した撮影者の顔画像の左右を反転させてライブビュー画像上の白抜き部に合成して合成画像を生成する。
【０１３７】
続いて、表示制御部９６は、画像合成部９５がライブビュー画像上の白抜き部に撮影者の顔画像の左右を反転させて合成した合成画像を表示部６に表示させる（ステップＳ６１０）。
【０１３８】
続いて、制御部１０１は、タッチパネル７から入力される指示信号に応じて、適用アイコンＡ１２が選択されたか否かを判断する（ステップＳ６１１）。適用アイコンＡ１２が選択されたと制御部１０１が判断した場合（ステップＳ６１１：Ｙｅｓ）、撮像装置２００は、上述したコラージュ表示処理（図２０を参照）を実行する（ステップＳ６１２）。この際、図３６に示すように、表示制御部９６は、コラージュ表示処理を行った画像Ｗ２０を表示部６に表示させる。これにより、家族撮影を行う際に家族Ｍ１２，Ｍ１３と一緒にお父さんＭ１１も写り込んだ家族写真を撮影することができ、再生する場合に撮影時の思い出を共有することができる。
【０１３９】
その後、制御部１０１は、タッチパネル７から入力される指示信号に応じて、コラージュ表示解除アイコン（図示せず）が選択されたか否かを判断する（ステップＳ６１３）。コラージュ表示解除アイコンが選択されたと制御部１０１が判断した場合（ステップＳ６１３：Ｙｅｓ）、撮像装置２００は、ステップＳ６０７へ戻る。一方、所定時間（たとえば２秒）以内にコラージュ表示解除アイコンが選択されていない場合（ステップＳ６１３：Ｎｏ）、撮像装置２００は、図４のメインルーチンへ戻る。
【０１４０】
ステップＳ６１１において、所定時間（たとえば３秒）内に適用アイコンＡ１２が選択されていないと制御部１０１が判断した場合（ステップＳ６１１：Ｎｏ）、撮像装置２００は、図４のメインルーチンへ戻る。
【０１４１】
ステップＳ６１４において、制御部１０１は、顔検出部９２が背面画像から検出した撮影者の顔領域に基づいて、表示部６が表示するライブビュー画像上の顔枠の大きさを設定する。その後、撮像装置２００は、ステップＳ６０５へ移行する。
【０１４２】
ステップＳ６１５において、表示制御部９６は、表示部６が表示するライブビュー画像上において、ユーザによって予め指定された表示位置に撮影者の顔枠を表示部６に表示させる。その後、撮像装置２００は、ステップＳ６０７へ移行する。
【０１４３】
ステップＳ６１６において、制御部１０１は、表示部６が表示するライブビュー画像上において、撮影者の顔枠の表示位置が指定されているか否かを判断する。撮影者の顔枠の表示位置が指定されていると制御部１０１が判断した場合（ステップＳ６１６：Ｙｅｓ）、撮像装置２００は、ステップＳ６０８へ移行する。一方、撮影者の顔枠の表示位置が指定されていないと制御部１０１が判断した場合（ステップＳ６１６：Ｎｏ）、撮像装置２００は、ステップＳ６１７へ移行する。
【０１４４】
ステップＳ６１７において、表示制御部９６は、撮影者の顔を合成することができない旨の警告を表示部６に表示させる。その後、撮像装置２００は、図４のメインルーチンへ戻る。
【０１４５】
以上説明した本発明の実施の形態３によれば、撮影者を撮影する背面撮像部２０１を設け、背面撮像部２０１が生成した背面画像に写る撮影者の顔画像を、撮像部２によって生成された画像に合成して表示部６に表示させる。これにより、撮影者が撮影時の同じ構図内に入れなくても、仮想的に入れるので、たとえば家族写真のように、撮影時の思い出を共有することができる画像を撮影することができる。
【０１４６】
なお、上述した実施の形態３では、撮像装置２００の背面に背面撮像部２０１を設けていたが、たとえば、撮像装置２００の側面に設けてもよい。
【０１４７】
また、上述した実施の形態３では、撮像装置２００の前面および背面それぞれに撮像部２および背面撮像部２０１を設けていたが、撮像装置２００の両側面それぞれに撮像部をさらに設けてもよい。
【０１４８】
（その他の実施の形態）
【０１４９】
また、上述した実施の形態では、特許請求の範囲、明細書および図面中の動作フローに関して、便宜上「まず、」や「つぎに、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【０１５０】
また、上述した実施の形態では、撮像装置としてデジタルカメラとして説明していたが、たとえばデジタル一眼レフカメラ、デジタルビデオカメラおよび２つの撮影機能を有する携帯電話やタブレット型携帯機器等の電子機器にも適用することができる。
【符号の説明】
【０１５１】
１，１００，２００ 撮像装置
２ 撮像部
３ 姿勢検出部
４ タイマー
５ 操作入力部
６ 表示部
７ タッチパネル
８ 記憶部
９，１０１ 制御部
２１ レンズ部
２２ レンズ駆動部
２３ 絞り
２４ 絞り駆動部
２５ シャッタ
２６ シャッタ駆動部
２７ 撮像素子
２８ 撮像駆動部
２９ 信号処理部
５１ 電源スイッチ
５２ レリーズスイッチ
５３ 撮影モード切換スイッチ
８１ 画像データ記憶部
８２ プログラム記憶部
８３ 顔情報記憶部
９１ 画像処理部
９２ 顔検出部
９３ トリミング部
９４ 表示位置検出部
９５ 画像合成部
９６ 表示制御部
１０１ 背景検出部
２０１ 背面撮像部
【技術分野】
【０００１】
本発明は、被写体を撮像して電子的な画像データを生成する撮像装置、表示方法およびプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置は、２つの撮像手段を備えたものが知られている。たとえば、第１の撮像手段で被写体に面する前方側を撮影する一方、第２の撮影手段で撮影者に面する背面側を撮影することができる技術が知られている（特許文献１参照）。この技術では、第１の撮影手段で撮影した前方側画像に、第２の撮影手段で撮影した背面側の背面画像を一つの表示モニタで表示させることで、前方側画像と背面画像とを選択的に撮影することができるようにしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１４７０４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、従来の撮像装置では、表示モニタが撮像手段によって連続的に生成された画像内に写る被写体の顔を検出することができる。しかしながら、撮影画像内に写る被写体の顔を検出した場合であっても、主として撮影時におけるピントの確認にしか用いられていなかった。このため、被写体の顔を用いたエンターテインメント性が溢れる新規な表示技術が求められていた。
【０００５】
本発明は、上記に鑑みてなされたものであって、撮影時のライブビュー画像に写る被写体の顔を用いて新規な表示を行うことができる撮像装置、表示方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明にかかる撮像装置は、被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置であって、前記ライブビュー画像に含まれる被写体の顔を検出する顔検出部と、前記顔検出部が検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミング部と、前記表示部の表示領域において指定された表示位置に、前記トリミング部が生成した前記顔画像を表示させる表示制御部と、を備えたことを特徴とする。
【０００７】
また、本発明にかかる撮像装置は、上記発明において、前記顔検出部によって検出された前記被写体の顔の前記ライブビュー画像上における表示位置を検出する表示位置検出部をさらに備え、前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域に、前記顔画像を表示させることを特徴とする。
【０００８】
また、本発明にかかる撮像装置は、上記発明において、前記表示部が表示している前記顔画像の表示位置を、前記表示領域内において移動させる指示信号の入力を受け付ける入力部をさらに備え、前記表示制御部は、前記入力部が入力を受け付けた前記指示信号に応じて、前記顔画像を移動させて前記表示部に表示させることを特徴とする。
【０００９】
また、本発明にかかる撮像装置は、上記発明において、前記入力部は、前記顔画像の大きさの変更を指示する変更指示信号の入力をさらに受け付け可能であり、前記表示制御部は、前記入力部が受け付けた前記変更指示信号に応じて、前記顔画像の大きさを変更して前記表示部に表示させることを特徴とする。
【００１０】
また、本発明にかかる撮像装置は、上記発明において、前記顔検出部は、前記ライブビュー画像に含まれる複数の被写体の顔を検出可能であり、前記入力部は、前記顔検出部が検出した前記複数の顔の中から表示対象とする顔の選択する選択信号の入力をさらに受け付け可能であることを特徴とする。
【００１１】
また、本発明にかかる撮像装置は、上記発明において、前記トリミング部が生成した前記顔画像を、予め設定された設定画像の前記表示位置に合成して合成画像を生成する画像合成部をさらに備え、前記表示制御部は、前記画像合成部が生成した前記合成画像を前記表示部に表示させることを特徴とする。
【００１２】
また、本発明にかかる撮像装置は、上記発明において、前記顔領域を含む前記被写体以外の領域を背景領域として検出する背景領域検出部をさらに備え、前記トリミング部は、前記背景領域検出部が検出した前記背景領域を前記画像から切出して背景画像を生成し、前記画像合成部は、前記背景画像を前記設定画像として前記顔画像に合成することを特徴とする。
【００１３】
また、本発明にかかる撮像装置は、上記発明において、前記撮像部と異なる位置に設けられ、所定の視野領域から光を集光して光電変換を行うことによって第２の画像データを生成する第２の撮像部をさらに備え、前記顔検出部は、前記第２の画像データに対応する第２の画像に含まれる被写体の顔を検出し、前記トリミング部は、前記顔検出部が前記第２の画像から検出した顔を含む顔領域を前記第２の画像から切出して第２の顔画像を生成し、前記画像合成部は、前記第２の顔画像を前記背景画像に合成することを特徴とする。
【００１４】
また、本発明にかかる撮像装置は、上記発明において、前記画像合成部は、前記第２の顔画像の表示位置を左右反転にして前記背景画像に合成することを特徴とする。
【００１５】
また、本発明にかかる撮像装置は、上記発明において、当該撮像装置の姿勢を検出する姿勢検出部をさらに備え、前記画像合成部は、前記姿勢検出部の検出結果に応じて、前記第２の顔画像を前記背景画像に合成することを特徴とする。
【００１６】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域を識別可能な表示態様で表示させることを特徴とする。
【００１７】
また、本発明にかかる表示方法は、被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置が撮影時に実行する表示方法であって、前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、を含むことを特徴とする。
【００１８】
また、本発明にかかるプログラムは、被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置の撮影時に実行するプログラムであって、前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、を実行させることを特徴とする。
【発明の効果】
【００１９】
本発明によれば、表示制御部が、表示部の表示領域において指定された表示位置に、トリミング部によって生成された顔画像を表示させる。これにより、簡易な操作で撮影時に所望の被写体の顔を画像内に写すことができるという効果を奏する。
【図面の簡単な説明】
【００２０】
【図１】図１は、本発明の実施の形態１にかかる撮像装置の被写体に面する側の構成を示す図である。
【図２】図２は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側の構成を示す図である。
【図３】図３は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【図４】図４は、本発明の実施の形態１にかかる撮像装置が行う処理の概要を示すフローチャートである。
【図５】図５は、撮影者が撮像装置を用いて撮影する際の状況を示す図である。
【図６】図６は、図５に示す状況下で表示部が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す図である。
【図７】図７は、図４のコラージュモード処理の概要を示すフローチャートである。
【図８】図８は、表示部６が表示するライブビュー画像の一例を示す図である。
【図９】図９は、表示部６が表示するライブビュー画像の一例を示す図である。
【図１０】図１０は、表示部６が表示するライブビュー画像の一例を示す図である。
【図１１】図１１は、表示部６が表示するライブビュー画像の一例を示す図である。
【図１２】図１２は、画像合成部が生成する合成画像の一例を示す図である。
【図１３】図１３は、顔画像を移動させるスライド操作を模式的に説明する図である。
【図１４】図１４は、顔画像の拡大させる拡大操作を模式的に説明する図である。
【図１５】図１５は、本発明の実施の形態２にかかる撮像装置の構成を示すブロック図である。
【図１６】図１６は、本発明の実施の形態２にかかる撮像装置が行うコラージュ処理の概要を示すフローチャートである。
【図１７】図１７は、図１６の背景枠表示処理の概要を示すフローチャートである。
【図１８】図１８は、背景検出部が判定する背景領域の判定方法の概要を説明する図である。
【図１９】図１９は、表示部６が表示するライブビュー画像の一例を示す図である。
【図２０】図２０は、図１６のコラージュ表示処理の概要を示すフローチャートである。
【図２１】図２１は、画像合成部が生成する合成画像の一例を示す図である。
【図２２】図２２は、整列アイコンが選択された際に表示部６が表示する画像の一例を示す図である。
【図２３】図２３は、本発明の実施の形態３にかかる撮影者に面する側の撮像装置の構成を示す斜視図である。
【図２４】図２４は、本発明の実施の形態３にかかる撮像装置の構成を示すブロック図である。
【図２５】図２５は、本発明の実施の形態３にかかる撮像装置が行うコラージュモード処理の概要を示すフローチャートである。
【図２６】図２６は、撮影者が撮像装置を用いて撮影する際の状況を示す図である。
【図２７】図２７は、図２６に示す状況下で表示部が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す図である。
【図２８】図２８は、図２５の撮影者顔枠表示処理の概要を示すフローチャートである。
【図２９】図２９は、表示制御部がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図である。
【図３０】図３０は、表示制御部がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図である。
【図３１】図３１は、撮影者とこの撮影者が写る画像内の位置との関係を説明する図である。
【図３２】図３２は、撮影者が表示部によって表示されるライブビュー画像を見ながら撮影者自身の顔枠の位置を調整する際の状況を模式的に示す図である。
【図３３】図３３は、撮影者が表示部によって表示されるライブビュー画像を見ながら撮影者自身の顔枠の位置を調整する際の状況を模式的に示す図である。
【図３４】図３４は、コラージュモードで理想とする画像の一例を示す図である。
【図３５】図３５は、撮影者、被写体および撮像装置を含む位置関係を模式的に説明する図である。
【図３６】図３６は、本発明の実施の形態３にかかる撮像装置が行うコラージュ表示処理で表示される画像の一例を示す図である。
【発明を実施するための形態】
【００２１】
以下、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。また、図面の記載において、同一の部分には同一の符号を付している。
【００２２】
（実施の形態１）
図１は、本発明の実施の形態１にかかる撮像装置の被写体に面する側（前面側）の構成を示す図である。図２は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側（背面側）の構成を示す図である。図３は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【００２３】
図１〜図３に示すように、撮像装置１は、撮像部２と、姿勢検出部３と、タイマー４と、操作入力部５と、表示部６と、タッチパネル７と、記憶部８と、制御部９と、を備える。
【００２４】
撮像部２は、被写体を撮像してこの被写体の画像データを生成する。撮像部２は、レンズ部２１と、レンズ駆動部２２と、絞り２３と、絞り駆動部２４と、シャッタ２５と、シャッタ駆動部２６と、撮像素子２７と、撮像駆動部２８と、信号処理部２９と、を有する。
【００２５】
レンズ部２１は、フォーカスおよびズーム可能な複数のレンズ群によって構成され、所定の視野領域から光を集光する。レンズ駆動部２２は、ステッピングモータまたはＤＣモータを用いて構成され、レンズ部２１のレンズ群を光軸Ｌ１上に沿って移動させることにより、レンズ部２１のピント位置や焦点距離等の変更を行う。
【００２６】
絞り２３は、レンズ部２１が集光した光の入射量を制限することにより露出の調整を行う。絞り駆動部２４は、ステッピングモータ等によって構成され、絞り２３を駆動する。
【００２７】
シャッタ２５は、撮像素子２７の状態を露光状態または遮光状態に設定する。シャッタ駆動部２６は、ステッピングモータ等によって構成され、レリーズ信号に応じてシャッタ２５を駆動する。
【００２８】
撮像素子２７は、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によって構成される。撮像素子２７は、レンズ部２１が集光した光を受光して光電変換を行うことによって、光を電気信号（アナログ信号）に変換する。撮像駆動部２８は、撮像素子２７を駆動するタイミングパルスを生成し、撮像素子２７が光電変換した電気信号を信号処理部２９に出力させる。
【００２９】
信号処理部２９は、アナログアンプやＡ／Ｄ変換器等によって構成される。信号処理部２９は、撮像素子２７から出力される電気信号に増幅（ゲイン調整）等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの画像データに変換して制御部９に出力する。
【００３０】
姿勢検出部３は、加速度センサを用いて構成される。姿勢検出部３は、撮像装置１の加速度を検出することにより、撮像装置１の姿勢状態を検出する。具体的には、姿勢検出部３は、水平面を基準としたときの撮像装置１の姿勢（傾斜角度）を検出する。
【００３１】
タイマー４は、計時機能および撮影日時の判定機能を有する。タイマー４は、撮像された画像データに日時データを付加させるため、制御部９に日時データを出力する。
【００３２】
操作入力部５は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ５１と、撮影の指示を与えるレリーズ信号の入力を受け付けるレリーズスイッチ５２と、撮像装置１に設定された各種撮影モードを切換える撮影モード切換スイッチ５３と、を有する。
【００３３】
表示部６は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて実現される。表示部６は、撮像部２が生成する画像データに対応する画像を表示する。表示部６は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。
【００３４】
タッチパネル７は、表示部６の表示画面上に重ねて設けられる。タッチパネル７は、ユーザが表示部６に表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた指示信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態１では、いずれの方式のタッチパネルであっても適用可能である。なお、本実施の形態１では、タッチパネル７が入力部として機能する。
【００３５】
記憶部８は、撮像装置１の内部に固定的に設けられるフラッシュメモリおよびＲＡＭ（Random Access Memory）等の半導体メモリを用いて実現される。記憶部８は、制御部９が実行中のデータを記憶する。記憶部８は、撮像部２が撮像した画像データを記憶する画像データ記憶部８１と、撮像装置１が実行する各種プログラムを記憶するプログラム記憶部８２と、被写体の顔の検出を行う際に参照する顔画像情報およびユーザによって予め登録された被写体の顔の特徴を記憶する特徴情報を記憶する顔情報記憶部８３と、を有する。なお、記憶部８は、外部から装着されるメモリカード等のコンピュータで読取可能な記憶媒体を含むものであってもよい。
【００３６】
制御部９は、ＣＰＵ（Central Processing Unit）等を用いて構成される。制御部９は、操作入力部５やタッチパネル７からの指示信号や切換信号等に応じて撮像装置１を構成する各部に対応する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。
【００３７】
制御部９の詳細な構成について説明する。制御部９は、画像処理部９１と、顔検出部９２と、トリミング部９３と、表示位置検出部９４と、画像合成部９５と、表示制御部９６と、を有する。
【００３８】
画像処理部９１は、信号処理部２９から入力される画像デー対して各種の画像処理を施す。具体的には、画像処理部９１は、画像データ（ＲＡＷデータ）に対して、エッジ強調処理、ホワイトバランス処理およびγ補正を含む画像処理を行う。画像処理部９１は、ＪＰＥＧ（Joint Photographic Experts Group）方式等に基づいて、画像データの圧縮処理や伸長処理を行う。
【００３９】
顔検出部９２は、画像データに対応する画像に含まれる被写体の顔を検出する。具体的には、顔検出部９２は、画像に含まれる人物の顔をパターンマッチングによって検出する。なお、顔検出部９２は、人物の顔だけでなく、犬や猫等の顔を検出してもよい。さらに、顔検出部９２は、パターンマッチング以外の周知技術を用いて人物の顔を検出してもよい。
【００４０】
トリミング部９３は、顔検出部９２が検出した被写体の顔を含む顔領域を画像から切出して顔画像を生成する。トリミング部９３は、顔検出部９２が画像内から被写体の顔を複数検出した場合、画像から各顔領域をそれぞれ切出して顔画像を生成する。
【００４１】
表示位置検出部９４は、顔検出部９２が検出した被写体の顔における画像上の表示位置を検出する。具体的には、表示位置検出部９４は、表示部６の表示画面における左下（図２を参照）を原点とし、表示部６の横方向をＸ軸とし、縦方向をＹ軸とする座標系として考えた場合において、顔検出部９２が検出する被写体の顔の表示位置としての座標を検出する。
【００４２】
画像合成部９５は、トリミング部９３が生成した顔画像を、予め設定された設定画像の指定位置に合成して合成画像を生成する。具体的には、画像合成部９５は、トリミング部９３が生成した顔画像を、画像データ記憶部８１が記憶する画像データに対応する設定画像の指定位置に合成して合成画像を生成する。
【００４３】
表示制御部９６は、表示部６の表示領域において指定された表示位置に、トリミング部９３が生成した顔画像を表示部６に表示させる。表示制御部９６は、タッチパネル７が入力を受け付けた指示信号に応じて、顔画像を表示する表示位置を移動させて表示部６に表示させる。表示制御部９６は、タッチパネル７が入力を受け付けた顔画像の大きさを変更する変更信号に応じて、顔画像の大きさを変更して表示部６に表示させる。
【００４４】
以上の構成を有する撮像装置１に電子ビューファインダ、フラッシュおよび外部処理装置と双方向に通信可能な通信部等を設けてもよい。
【００４５】
つぎに、本実施の形態１にかかる撮像装置１が行う処理について説明する。図４は、撮像装置１が行う処理の概要を示すフローチャートである。
【００４６】
図４において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０１：Ｙｅｓ）について説明する。この場合、表示制御部９６は、撮像部２が微小な時間間隔で連続的に生成する画像データに対応するライブビュー画像を表示部６に表示させる（ステップＳ１０２）。
【００４７】
図５は、撮影者が撮像装置１を用いて撮影する際の状況を示す図である。図６は、図５に示す状況下で表示部６が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像Ｗ１を示す。図５および図６に示すように、撮影者は、たとえば図６のライブビュー画像Ｗ１を見ながら被写体を撮影する際の構図を決定する。
【００４８】
続いて、制御部９は、撮像装置１にコラージュモードが設定されているか否かを判断する（ステップＳ１０３）。具体的には、図６に示すように、制御部９は、タッチパネル７から入力される指示信号に応じて、表示部６が表示するライブビュー画像Ｗ１上に重畳されるコラージュモードを設定するコラージュアイコンＡ１が選択されたから否かを判断する。撮像装置１にコラージュモードが選択されたと制御部９が判断した場合（ステップＳ１０３：Ｙｅｓ）、撮像装置１は、顔検出部９２が検出した被写体の顔を一部に含む顔領域を切出して顔画像を生成し、この顔画像を表示部６の表示領域において予め指定された表示位置に表示させるコラージュモード処理を実行する（ステップＳ１０４）。なお、コラージュモード処理の詳細については後述する。
【００４９】
これに対して、撮像装置１にコラージュモード処理が選択されていないと制御部９が判断した場合（ステップＳ１０３：Ｎｏ）、撮像装置１は、後述するステップＳ１０５へ移行する。
【００５０】
ステップＳ１０５において、レリーズスイッチ５２が操作されることにより、レリーズ信号が入力された場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は、制御部９の制御のもと、画像データを取得する（ステップＳ１０６）。なお、撮像装置１が取得する画像データには、コラージュモード処理が実行された画像データも含まれる。
【００５１】
続いて、制御部９は、画像データに日時やデータサイズを含むヘッダ情報を関連付けて画像データ記憶部８１に記憶させる（ステップＳ１０７）。
【００５２】
その後、表示制御部９６は、撮像した画像データに対応する画像を所定時間（たとえば２秒）だけ表示部６にレックビュー表示させる（ステップＳ１０８）。
【００５３】
続いて、制御部９は、電源スイッチ５１が操作されることにより、撮像装置１の電源がオフ状態になったか否かを判断する（ステップＳ１０９）。撮像装置１の電源がオフ状態になったと制御部９が判断した場合（ステップＳ１０９：Ｙｅｓ）、撮像装置１は、本処理を終了する。一方、撮像装置１の電源がオフ状態になっていないと制御部９が判断した場合（ステップＳ１０９：Ｎｏ）、撮像装置１は、ステップＳ１１０へ移行する。
【００５４】
ステップＳ１１０において、制御部９は、撮影モード切換スイッチ５３からモード切換信号が入力された場合、モード切換信号に応じて撮影・再生モードの変更操作を受け付ける一方、撮影モード切換スイッチ５３を介してモード切換信号が入力されていない場合、現在のモードを維持する。その後、撮像装置１は、ステップＳ１０１へ戻る。
【００５５】
ステップＳ１０５において、所定時間（たとえば２秒）内にレリーズスイッチ５２を介してレリーズ信号が入力されていない場合（ステップＳ１０５：Ｎｏ）、撮像装置１は、ステップＳ１０９へ移行する。
【００５６】
つぎに、撮像装置１が撮影モードに設定されておらず（ステップＳ１０１：Ｎｏ）、再生モードに設定されている場合（ステップＳ１１１：Ｙｅｓ）について説明する。この場合、表示制御部９６は、画像データ記憶部８１が記憶する画像データに対応する画像を縮小した縮小画像（サムネイル画像）の一覧を表示部６に表示させる（ステップＳ１１２）。
【００５７】
続いて、操作入力部５またはタッチパネル７を介して拡大して表示する縮小画像が選択された場合（ステップＳ１１３：Ｙｅｓ）、表示制御部９６は、選択された縮小画像を所定時間（たとえば３秒）だけ表示部６に全画面に拡大して表示させる（ステップＳ１１４）。その後、撮像装置１は、ステップＳ１１１へ戻る。
【００５８】
これに対して、操作入力部５またはタッチパネル７を介して拡大して表示する縮小画像が選択されていない場合（ステップＳ１１３：Ｎｏ）、制御部９は、縮小画像の一覧表示を行ってから所定時間（たとえば５秒）経過したか否かを判断する（ステップＳ１１５）。縮小画像の一覧表示を行ってから所定時間経過したと制御部９が判断した場合（ステップＳ１１５：Ｙｅｓ）、撮像装置１は、ステップＳ１０９へ移行する。一方、縮小画像の一覧表示を行ってから所定時間経過していないと制御部９が判断した場合（ステップＳ１１５：Ｎｏ）、撮像装置１は、ステップＳ１１２へ戻る。
【００５９】
ステップＳ１１１において、撮像装置１に再生モードが設定されていない場合（ステップＳ１１１：Ｎｏ）、撮像装置１は、ステップＳ１０９へ移行する。
【００６０】
つぎに、図４のステップＳ１０３のコラージュモード処理について説明する。図７は、コラージュモード処理の概要を示すフローチャートである。
【００６１】
図７において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出したと制御部９が判断した場合（ステップＳ２０１：Ｙｅｓ）について説明する。この場合、制御部９は、コラージュ表示で表示対象とする被写体の選択が適用済みであるか否かを判断する（ステップＳ２０２）。コラージュ表示で表示対象とする被写体の選択が適用済みであると制御部９が判断した場合（ステップＳ２０２：Ｙｅｓ）、撮像装置１は、後述するステップＳ２０９へ移行する。一方、コラージュ表示で表示対象とする被写体の選択が適用済みでない場合（ステップＳ２０２：Ｎｏ）、撮像装置１は、後述するステップＳ２０３へ移行する。
【００６２】
ステップＳ２０３において、表示制御部９６は、顔検出部９２が検出した被写体の顔を含む顔領域に対応する顔枠（ウィンドウ）を表示部６に表示させる。具体的には、図８に示すように、表示制御部９６は、ライブビュー画像Ｗ２上に顔検出部９２が検出した複数の被写体それぞれの顔領域に対応する矩形状の顔枠Ｆ１〜Ｆ４を表示部６に表示させる。さらに、表示制御部９６は、コラージュモードで表示対象としない被写体の削除を指示する指示信号の入力を受け付ける削除アイコンＡ１１と、コラージュ表示を適用する指示信号の入力を受け付ける適用アイコンＡ１２と、を表示部６に表示させる。なお、図８では、表示制御部９６が顔枠を矩形状で表示部６に表示させていたが、たとえば円形状で表示部６に表示させてもよい。
【００６３】
続いて、制御部９は、削除アイコンＡ１１が選択され、被写体の顔領域に対応する顔枠の領域内がタッチされたか否かを判断する（ステップＳ２０４）。具体的には、図９に示すように、制御部９は、タッチパネル７から入力される指示信号に応じて、ユーザが表示部６によって表示されているライブビュー画像Ｗ２の削除アイコンＡ１１をタッチし（図９（ａ））、被写体の顔領域に対応する顔枠Ｆ１〜Ｆ４の領域内のいずれか、たとえば顔枠Ｆ１の領域内をタッチしたか否かを判断する（図９（ｂ））。削除アイコンＡ１１が選択され、被写体の顔領域に対応する顔枠Ｆ１〜Ｆ４の領域内のいずれかがタッチされたと制御部９が判断した場合（ステップＳ２０４：Ｙｅｓ）、撮像装置１は、後述するステップＳ２０５へ移行する。一方、削除アイコンＡ１１が選択されず、被写体の顔領域に対応する顔枠Ｆ１〜Ｆ４の領域内のいずれもタッチされていないと制御部９が判断した場合（ステップＳ２０４：Ｎｏ）、撮像装置１は、後述するステップＳ２０８へ移行する。
【００６４】
ステップＳ２０５において、制御部９は、タッチされた被写体の顔領域に対応する顔枠がコラージュ表示の表示対象であるか否かを判断する。タッチされた被写体の顔領域に対応する顔枠がコラージュ表示の表示対象であると制御部９が判断した場合（ステップＳ２０５：Ｙｅｓ）、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠内を識別可能な表示態様で表示部６に表示させる（ステップＳ２０６）。たとえば、図１０に示すように、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠Ｆ１および顔枠Ｆ４の内部を黒く塗りつぶした状態（非表示状態）で表示部６に表示させる。なお、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠内を、白抜きで表示したり、顔枠を太くする表示等を行って識別可能な表示態様で表示部６に表示させてもよい。
【００６５】
これに対して、タッチされた被写体の顔領域に対応する顔枠がコラージュ表示の表示対象でないと制御部９が判断した場合（ステップＳ２０５：Ｎｏ）、表示制御部９６は、タッチされた被写体の顔領域に対応する顔枠内を黒く塗りつぶされた状態から元の状態に戻して表示部６に表示させる（ステップＳ２０７）。
【００６６】
ステップＳ２０８において、制御部９は、タッチパネル７から入力される指示信号に応じて、適用アイコンＡ１２が選択されたか否かを判断する。具体的には、図１１に示すように、制御部９は、タッチパネル７から入力される指示信号に応じて、ライブビュー画像Ｗ３の適用アイコンＡ１２が選択されたか否かを判断する。適用アイコンＡ１２が選択されたと制御部９が判断した場合（ステップＳ２０８：Ｙｅｓ）、撮像装置１は、後述するステップＳ２０９へ移行する。一方、所定時間（たとえば３秒）に適用アイコンＡ１２が選択されていないと制御部９が判断した場合（ステップＳ２０８：Ｎｏ）、撮像装置１は、図４のメインルーチンへ戻る。
【００６７】
ステップＳ２０９において、表示位置検出部９４は、ライブビュー画像上において表示対象とする被写体の顔が写る表示位置を検出する。具体的には、図１１に示す状況下において、表示位置検出部９４は、ライブビュー画像Ｗ３において表示対象とする顔枠Ｆ２およびＦ３それぞれの表示位置を検出する。
【００６８】
続いて、トリミング部９３は、顔検出部９２によって検出された複数の顔うちコラージュ表示で適用された表示対象とする顔を一部に含む顔領域を画像から切出して顔画像を生成する（ステップＳ２１０）。具体的には、トリミング部９３は、図１１に示した顔枠Ｆ２および顔枠Ｆ３それぞれの被写体の顔を一部に含む顔領域をライブビュー画像Ｗ３から切出して顔画像を生成する。この場合、トリミング部９３は、顔の頭部を含むように円形に切取ってもよい。さらに、トリミング部９３は、顔枠の周辺におけるコントラスト変化に基づいて、被写体の頭部の輪郭を検出し、検出した輪郭に沿って切出して顔画像を生成してもよい。
【００６９】
続いて、画像合成部９５は、トリミング部９３が生成した顔画像を、予め設定された設定画像の指定位置に合成して合成画像を生成する（ステップＳ２１１）。具体的には、図１２に示すように、画像合成部９５は、トリミング部９３が生成した顔画像Ｍ１および顔画像Ｍ２を、画像データ記憶部８１が記憶する複数の画像データから予めユーザが設定した画像データを取得し、この取得した画像データに対応する画像の指定位置である白抜き部Ｎ１および白抜き部Ｎ２に合成することによって合成画像Ｗ４を生成する。指定位置としては、表示位置検出部９４が検出した顔の表示位置に対応する画像内の位置である。さらに、表示制御部９６は、指定位置を含む領域を識別可能な表示態様、たとえば白くくり抜いた白抜き部Ｎ１および白抜き部Ｎ２で表示する。これにより、合成される顔画像Ｍ１および顔画像Ｍ２の周辺が他の画像に比して強調されるので、コラージュ手法のような画像にすることができる。なお、図１２では、白抜き部Ｎ１，Ｎ２を表現するため、ハッチングを施して表現した。また、顔画像に合成する設定画像は、ユーザが予め設定する必要はなく、たとえば、画像データ記憶部８１に記憶された複数の画像データのうち日付等が最新の画像データに対応する画像を設定するようにしてもよい。
【００７０】
その後、表示制御部９６は、画像合成部９５が生成した合成画像を表示部６に表示させる（ステップＳ２１２）。具体的には、表示制御部９６は、図１２に示した合成画像Ｗ４を表示部６に表示させる。
【００７１】
続いて、制御部９は、タッチパネル７から入力される指示信号に応じて、表示部６が表示している合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたか否かを判断する（ステップＳ２１３）。合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたと制御部９が判断した場合（ステップＳ２１３：Ｙｅｓ）、撮像装置１は、ステップＳ２１４へ移行する。一方、所定時間（３秒）内に合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われていないと制御部９が判断した場合（ステップＳ２１３：Ｎｏ）、撮像装置１は、図４に示したメインルーチンへ戻る。
【００７２】
ステップＳ２１４において、表示制御部９６は、ユーザのスライド操作の軌跡に応じて、顔画像の表示位置を移動させて表示部６に表示させる。具体的には、図１３に示すように、表示制御部９６は、ユーザのスライド操作に応じて（図１３（ａ）→図１３（ｂ））、顔画像Ｍ１の表示位置を移動させて表示部６に表示させる。その後、撮像装置１は、図４に示したメインルーチンへ戻る。
【００７３】
ステップＳ２０１において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出していないと制御部９が判断した場合（ステップＳ２０１：Ｎｏ）について説明する。この場合、表示制御部９６は、表示部６が表示しているライブビュー画像上に、コラージュモードを実行することができない旨の警告を表示部６に表示させる（ステップＳ２１５）。その後、撮像装置１は、図４に示したメインルーチンへ戻る。
【００７４】
以上説明した本発明の実施の形態１によれば、表示制御部９６が、表示部６の表示領域において予め指定された表示位置に、トリミング部９３によって生成された各顔画像を表示部６に表示させる。これにより、簡易な操作で撮影時に写る所望の被写体を画像内に写すことができるとともに、コラージュ表現を用いた作風の画像を撮影することができる。
【００７５】
さらに、本発明の実施の形態１によれば、被写体が混み合った状況下であっても、ユーザが所望する被写体のみを撮影することができる。
【００７６】
また、本発明の実施の形態１によれば、表示制御部９６が表示位置検出部９３の検出結果に応じて、ライブビュー画像の白抜き部の位置を変更する。これにより、被写体が撮像装置１の視野領域において動き回る毎に、コラージュ表示による白抜き部の位置が変わるので、撮影者や被写体の工夫を面白く反映することできる。さらに、撮影者が撮影の構図を決定する際に被写体の位置に応じて直感的に表示位置を把握しながら撮影を行うことできる。
【００７７】
なお、上述した実施の形態１では、撮影者が削除アイコンＡ１１をタッチし、非表示対象とする被写体を選択していたが、たとえば顔情報記憶部８３に予め所望の被写体の顔の特徴を記憶させ、この特徴に応じて表示制御部９６が自動的に表示対象とする被写体の顔を選択するようにしてもよい。
【００７８】
また、上述した実施の形態１では、ユーザがスライド操作で顔画像を移動させていたが、図１４に示すように、表示部６が表示する合成画像Ｗ４内の顔画像Ｍ１内において、２点間の距離を引き伸ばす操作が行われた場合（図１４（ａ）→（図１４（ｂ））、表示制御部９６は、顔画像Ｍ１の縦横比を一定に維持しながら拡大して表示部６に表示させるようにしてもよい。
【００７９】
（実施の形態２）
つぎに、本発明の実施の形態２について説明する。本発明の実施の形態２にかかる撮像装置は、制御部の構成が上述した撮像装置と異なる。さらに、本発明の実施の形態２にかかる撮像装置が行う動作は、コラージュモード処理が上述した実施の形態１と異なる。このため、以下においては、上述した実施の形態１と異なる構成を説明後、本発明の実施の形態２にかかる撮像装置による動作のコラージュモード処理を説明する。なお、図面の記載において、同一の部分には同一の符号を付している。
【００８０】
図１５は、本発明の実施の形態２にかかる撮像装置１００の構成を示すブロック図である。図１５に示すように、撮像装置１００の制御部１０１は、画像処理部９１と、顔検出部９２と、トリミング部９３と、表示位置検出部９４と、画像合成部９５と、表示制御部９６と、背景検出部１０２と、を有する。
【００８１】
背景検出部１０２は、撮像部２が生成した画像データに対応する画像から被写体の顔領域を含む人物以外の領域を背景領域として検出する。具体的には、背景検出部１０２は、撮像部２が生成した画像データに対応する画像を複数（たとえば９分割）の領域毎に分割し、この分割した各領域に顔検出部９２によって検出された顔が含まれているか否かを判定し、顔が含まれていない領域を背景領域として検出する。
【００８２】
つぎに、本実施の形態２にかかる撮像装置１００が行うコラージュモード処理について説明する。図１６は、本実施の形態２にかかる撮像装置１００が行うコラージュモード処理（図４のステップＳ１０４）の概要を示すフローチャートである。
【００８３】
図１６において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出したと制御部１０１が判断した場合（ステップＳ３０１：Ｙｅｓ）について説明する。この場合、制御部１０１は、コラージュ表示で表示対象とする被写体の選択が適用済みであるか否かを判断する（ステップＳ３０２）。コラージュ表示で表示対象とする被写体の選択が適用済みであると制御部１０１が判断した場合（ステップＳ３０２：Ｙｅｓ）、撮像装置１００は、後述するステップＳ３１０へ移行する。一方、コラージュ表示で表示対象とする被写体の選択が適用済みでないと制御部１０１が判断した場合（ステップＳ３０２：Ｎｏ）、撮像装置１００は、後述するステップＳ３０３へ移行する。
【００８４】
ステップＳ３０３において、表示制御部９６は、顔検出部９２が検出した被写体の顔を一部に含む顔領域に対応する顔枠を表示部６に表示させる。
【００８５】
続いて、撮像装置１００は、コラージュ表示で顔画像に合成する背景画像を、ライブビュー画像上に背景枠として表示する背景枠表示処理を実行する（ステップＳ３０４）。なお、背景枠表示処理の詳細については後述する。
【００８６】
ステップＳ３０５〜ステップＳ３０９は、図７で説明したステップＳ２０５〜２０８それぞれに対応するため、説明を省略する。
【００８７】
ステップＳ３１０において、撮像装置１００は、顔検出部９２が検出した被写体の顔を一部に含む顔領域を切出して顔画像を生成し、この顔画像を背景画像に合成して合成画像を表示部６に表示させるコラージュ表示処理を実行する。なお、コラージュ表示処理の詳細については後述する。ステップＳ３１０の後、撮像装置１００は、図４に示したメインルーチンへ戻る。
【００８８】
ステップＳ３０１において、顔検出部９２がライブビュー画像に含まれる被写体の顔を検出していないと制御部１０１が判断した場合（ステップＳ３０１：Ｎｏ）について説明する。この場合、表示制御部９６は、表示部６が表示しているライブビュー画像上に、コラージュモードを実行することができない旨の警告を表示部６に表示させる（ステップＳ３１１）。その後、撮像装置１００は、図４に示したメインルーチンへ戻る。
【００８９】
つぎに、図１６のステップＳ３０４の背景枠表示処理について説明する。図１７は、背景枠表示処理の概要を示すフローチャートである。
【００９０】
図１７に示すように、背景検出部１０２は、ライブビュー画像の中央領域に、顔検出部９２が検出した被写体の顔があるか否かを判定する（ステップＳ４０１）。
【００９１】
図１８は、背景検出部１０２が判定する背景領域の判定方法の概要を説明する図である。図１８に示すように、背景検出部１０２は、ライブビュー画像Ｗ５を所定の領域毎、たとえば９分割し（Ｄ1〜Ｄ9）、まず、９分割の中央の領域（Ｄ1）に対して、顔検出部９２が検出した被写体の顔があるか否かを判定する。図１８に示す状態では、背景検出部１０２は、ライブビュー画像Ｗ５の中央領域Ｄ1に、二人の被写体の顔が写っているため、顔があると判定する。このように、背景検出部１０２は、各領域毎に顔検出部９２が検出した被写体の顔があるか否かを判定する。なお、図１８においては、ライブビュー画像を９分割しているが、たとえば１６分割であってもよい。また、分割する領域の画素数が１００万画素以上であれば、撮像素子２７の画像数に応じて適宜変更できるようにしてもよい。
【００９２】
ステップＳ４０１において、ライブビュー画像の中央領域に顔があると背景検出部１０２が判定した場合（ステップＳ４０１：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４０６へ移行する。一方、ライブビュー画像の中央領域に顔がないと背景検出部１０２が判定した場合（ステップＳ４０１：Ｎｏ）、撮像装置１００は、後述するステップＳ４０２へ移行する。
【００９３】
ステップＳ４０２において、背景検出部１０２は、ライブビュー画像Ｗ５の中央領域を背景領域として検出する。
【００９４】
続いて、表示制御部９６は、表示部６が表示するライブビュー画像上に、背景検出部１０２が検出した背景領域に対応する背景枠を表示させる（ステップＳ４０３）。具体的には、図１９に示すように、表示制御部９６は、表示部６が表示するライブビュー画像Ｗ５上に、背景検出部１０２が検出した背景領域に対応する背景枠Ｆ１１を表示部６に表示させる。
【００９５】
続いて、制御部１０１は、タッチパネル７から入力される指示信号に応じて、表示部６が表示している背景枠Ｆ１１を移動させるスライド操作が行われたか否かを判断する（ステップＳ４０４）。背景枠Ｆ１１を移動させるスライド操作が行われたと制御部１０１が判断した場合（ステップＳ４０４：Ｙｅｓ）、撮像装置１００は、ステップＳ４０５へ移行する。一方、背景枠Ｆ１１を移動させるスライド操作が行われていないと制御部１０１が判断した場合（ステップＳ４０４：Ｎｏ）、撮像装置１００は、図１６のコラージュモード処理へ戻る。
【００９６】
ステップＳ４０５において、表示制御部９６は、ユーザのスライド操作の軌跡に応じて、背景枠Ｆ１１の表示移動を移動させて表示部６に表示させる。その後、撮像装置１００は、図１６のコラージュモード処理へ戻る。
【００９７】
ステップＳ４０６において、背景検出部１０２は、ライブビュー画像Ｗ５の左右領域に顔検出部９２が検出した顔があるか否かを判定する。具体的には、図１８に示すように、ライブビュー画像Ｗ５の左右領域Ｄ2，Ｄ3に、顔検出部９２が検出した被写体の顔があるか否かを判定する。ライブビュー画像の左右領域に顔検出部９２が検出した顔があると背景検出部１０２が判定した場合（ステップＳ４０６：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４０８へ移行する。一方、ライブビュー画像の左右領域に顔検出部９２が検出した顔がないと背景検出部１０２が判定した場合（ステップＳ４０６：Ｎｏ）、撮像装置１００は、後述するステップＳ４０７へ移行する。
【００９８】
ステップＳ４０７において、背景検出部１０２は、ライブビュー画像の左右領域における色変化およびコントラスト変化に基づいて、ライブビュー画像の左右領域のどちらかを背景領域として検出する。具体的には、背景検出部１０２は、左右領域における色変化およびコントラスト変化それぞれを比較し、変化率が大きい方を背景領域として検出する。その後、撮像装置１００は、ステップＳ４０３へ移行する。
【００９９】
ステップＳ４０８において、背景検出部１０２は、ライブビュー画像の上領域に、顔検出部９２が検出した顔があるか否かを判定する。具体的には、図１８に示すように、背景検出部１０２は、ライブビュー画像Ｗ５の上領域Ｄ4〜Ｄ6に、顔検出部９２によって検出された被写体の顔が検出されているか否かを判定する。ライブビュー画像の上領域に顔検出部９２によって検出された被写体の顔があると背景検出部１０２が判定した場合（ステップＳ４０８：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４１０へ移行する。一方、ライブビュー画像の上領域に顔検出部９２によって被写体の顔が検出されていないと背景検出部１０２が判定した場合（ステップＳ４０８：Ｎｏ）、撮像装置１００は、後述するステップＳ４０９へ移行する。
【０１００】
ステップＳ４０９において、背景検出部１０２は、ライブビュー画像の上領域における色変化およびコントラスト変化に基づいて、ライブビュー画像の上領域のいずれかを背景領域として検出する。具体的には、図１８に示す状況では、背景検出部１０２は、上領域Ｄ6を背景領域として検出する。その後、撮像装置１００は、ステップＳ４０３へ移行する。
【０１０１】
ステップＳ４１０において、背景検出部１０２は、ライブビュー画像の下領域に、顔検出部９２が検出した被写体の顔があるか否かを判断する。具体的には、図１８に示すように、背景検出部１０２は、ライブビュー画像の下領域Ｄ7〜Ｄ9に、顔検出部９２によって検出された被写体の顔があるか否かを判定する。ライブビュー画像の下領域に顔検出部９２によって検出された被写体の顔があると背景検出部１０２が判定した場合（ステップＳ４１０：Ｙｅｓ）、撮像装置１００は、後述するステップＳ４１２へ移行する。一方、ライブビュー画像の下領域に顔検出部９２によって検出された被写体の顔がないと判定した場合（ステップＳ４１０：Ｎｏ）、撮像装置１００は、後述するステップＳ４１１へ移行する。
【０１０２】
ステップＳ４１１において、背景検出部１０２は、ライブビュー画像の下領域における色変化およびコントラスト変化に基づいて、ライブビュー画像の下領域のいずれかを背景領域として検出する。その後、撮像装置１００は、ステップＳ４０３へ移行する。
【０１０３】
ステップＳ４１２において、表示制御部９６は、表示部が表示するライブビュー画像上に、背景検出部１０２が背景を検出できなかったことを示す警告を表示させる。その後、撮像装置１００は、図１６のコラージュモード処理へ戻る。
【０１０４】
つぎに、図１６のステップＳ３１０のコラージュ表示処理について説明する。図２０は、コラージュ表示処理の概要を示すフローチャートである。
【０１０５】
図２０に示すように、表示位置検出部９４は、表示部６が表示するライブビュー画像における表示対象とする被写体の顔を含む顔の表示位置を検出する（ステップＳ５０１）。
【０１０６】
続いて、トリミング部９３は、表示制御部９６がライブビュー画像に表示している背景枠に対応する領域をライブビュー画像から切出して背景画像を生成する（ステップＳ５０２）。
【０１０７】
その後、表示制御部９６は、トリミング部９３が生成した背景画像を表示部６に全画面表示させ、（ステップＳ５０３）、表示部６が表示している背景画像に対して、表示位置検出部９４によって検出された表示対象とする被写体の顔の表示位置（座標位置）を中心に含む所定の大きさの領域を、白くして抜き出した白抜き部で表示部６に表示させる（ステップＳ５０４）。
【０１０８】
続いて、トリミング部９３は、顔検出部９２が検出した顔を一部に含む顔領域に対応する顔画像を生成する（ステップＳ５０５）。
【０１０９】
その後、表示制御部９６は、背景画像の白抜き部の表示位置に、トリミング部９３が生成した顔画像を画像合成部９５に合成させた合成画像を表示部６に表示させる（ステップＳ５０６）。具体的には、図２１に示すように、表示制御部９６は、画像合成部９５が背景画像の白抜き部Ｎ１および白抜き部Ｎ２それぞれに顔画像Ｍ１およびＭ２を合成した合成画像Ｗ６を表示部６に表示させる。この際、表示制御部９６は、合成画像Ｗ６上に、複数の顔画像それぞれを等間隔に整列させて表示させる指示信号の入力を受け付ける整列アイコンＡ２１を表示部６に表示させる。
【０１１０】
続いて、制御部１０１は、整列アイコンＡ２１がタッチされたか否かを判断する（ステップＳ５０７）。具体的には、制御部１０１は、タッチパネル７がタッチされることにより、タッチパネル７から入力される指示信号に応じて、整列アイコンＡ２１がタッチされたか否かを判断する。整列アイコンＡ２１がタッチされたと制御部１０１が判定した場合（ステップＳ５０７：Ｙｅｓ）、撮像装置１００は、後述するステップＳ５０８へ移行する。一方、所定時間（たとえば２秒）内に整列アイコンＡ２１がタッチされていないと制御部１０１が判断した場合（ステップＳ５０７：Ｎｏ）、撮像装置１００は、後述するステップＳ５１０へ移行する。
【０１１１】
ステップＳ５０８において、表示制御部９６は、複数の顔画像それぞれを背景画像上において等間隔に表示されるように整列して表示部６に表示させ、顔画像の大きさをどちらか一方の大きさに統一して表示部６に表示させる（ステップＳ５０９）。たとえば、図２２に示すように、表示制御部９６は、顔画像が２つの場合、表示部６の表示領域の表示領域において均等に配置されるように各顔画像を配置する。具体的には、表示制御部９６は、表示部６の表示領域において縦方向と横方向との表示間隔が同じになるように各画像を表示する。さらに、表示制御部９６は、顔画像の大きさが大きい方（Ｍ１）に合わせて、他方の顔画像（Ｍ２）の大きさを拡大して表示部６に表示させる。
【０１１２】
続いて、制御部１０１は、タッチパネル７から入力される指示信号に応じて、表示部６が表示している合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたか否かを判断する（ステップＳ５１０）。合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われたと制御部１０１が判断した場合（ステップＳ５１０：Ｙｅｓ）、撮像装置１００は、後述するステップＳ５１１へ移行する。一方、所定時間（３秒）内に合成画像に含まれる顔画像の表示位置を移動させるスライド操作が行われていないと制御部１０１が判断した場合（ステップＳ５１０：Ｎｏ）、撮像装置１００は、図１３のコラージュモード処理へ戻る。
【０１１３】
ステップＳ５１１において、表示制御部９６は、ユーザのスライド操作の軌跡に応じて、顔画像の表示位置を移動させて表示部６に表示させる。その後、撮像装置１００は、図１３のコラージュモード処理へ戻る。
【０１１４】
以上説明した本発明の実施の形態２によれば、背景検出部１０２が表示部６によって表示されているライブビュー画像から表示対象とする被写体の顔を含まない領域を背景領域として検出し、トリミング部９３が背景検出部１０２によって検出された背景領域およびユーザによって選択された表示対象とする顔領域をそれぞれライブビュー画像から切出して背景画像および顔画像を生成し、画像合成部９５が背景画像の指定画像に顔画像を合成して合成画像を生成し、表示制御部９６が画像合成部９５によって生成された合成画像を表示部６に表示させる。これにより、撮影時にいた複数の人物の中から所定する人物のみを写しこめた画像を撮影することができる。
【０１１５】
（実施の形態３）
つぎに、本発明の実施の形態３について説明する。本発明の実施の形態３にかかる撮像装置は、背面側に撮影者を撮影する背面撮像部を備える。さらに、本発明の実施の形態３にかかる撮像装置が行う動作は、コラージュモード処理が上述した実施の形態と異なる。このため、以下においては、上述した実施の形態と異なる構成を説明後、本発明の実施の形態３にかかる撮像装置による動作のコラージュモード処理を説明する。なお、図面の記載において、同一の部分には同一の符号を付している。
【０１１６】
図２３は、本発明の実施の形態３にかかる撮像装置２００の撮影者に面する側（背面側）の構成を示す斜視図である。図２４は、本発明の実施の形態３にかかる撮像装置２００の構成を示すブロック図である。
【０１１７】
図２３〜図２４に示すように、撮像装置２００は、背面撮像部２０１をさらに備える。背面撮像部２０１は、撮像部２と同一の構成によって実現され、レンズ部２１と、レンズ駆動部２２と、絞り２３と、絞り駆動部２４と、シャッタ２５と、シャッタ駆動部２６と、撮像素子２７と、撮像駆動部２８と、信号処理部２９と、を有する。背面撮像部２０１は、背面側の視野領域から光を集光して光電変換を行うことによって背面画像データを生成する。
【０１１８】
つぎに、本実施の形態３にかかる撮像装置２００が行うコラージュモード処理について説明する。図２５は、本実施の形態３にかかる撮像装置２００が行うコラージュモード処理（図４のステップＳ１０４）の概要を示すフローチャートである。
【０１１９】
図２５において、撮像装置２００は、制御部１０１の制御のもと、背面撮像部２０１を駆動することにより、撮像装置２００の背面を撮影する（ステップＳ６０１）。
【０１２０】
図２６は、撮影者が撮像装置２００を用いて撮影する際の状況を示す図である。図２７は、図２６に示す状況下で表示部６が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す。図２６および図２７に示すように、撮影者Ｋ１は、たとえば図２７のようなライブビュー画像Ｗ８を見ながら被写体Ｋ２（お母さん）被写体Ｋ３（子供）を撮影する際の構図を決定する。さらに、背面撮像部２０１は、撮影者Ｋ１（お父さん）を含む背面側を撮影する。
【０１２１】
続いて、制御部１０１は、顔検出部９２が背面画像の中央領域付近で被写体である撮影者の顔を検出したか否かを判断する（ステップＳ６０２）。顔検出部９２が背面画像の中央領域（正面）付近で被写体である撮影者の顔を検出したと制御部１０１が判断した場合（ステップＳ６０２：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６０３へ移行する。一方、顔検出部９２が背面画像の中央領域付近で被写体である撮影者の顔を検出していないと制御部１０１が判断した場合（ステップＳ６０２：Ｎｏ）、撮像装置２００は、後述するステップＳ６１４へ移行する。
【０１２２】
ステップＳ６０３において、制御部１０１は、顔検出部９２が背面画像から検出した撮影者の顔を一部に含む顔領域を顔枠の大きさを設定する。具体的には、制御部１０１は、顔検出部９２が背面画像から検出した撮影者の顔を一部に含む顔領域に対応する顔枠の大きさを、背面画像を９等分にした際の中央領域の大きさに設定する。
【０１２３】
続いて、撮像装置２００は、コラージュ表示で台紙として用いる背景画像の背景枠をライブビュー画像に表示する上述した背景枠表示処理（図１７を参照）を実行する（ステップＳ６０４）。
【０１２４】
その後、制御部１０１は、撮影者の顔を表示する表示位置が指定されているか否かを判断する（ステップＳ６０５）。撮影者の顔を表示する表示位置が指定されていると制御部１０１が判断した場合（ステップＳ６０５：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６１５へ移行する。一方、撮像者の顔を表示する表示位置が指定されていないと制御部１０１が判断した場合（ステップＳ６０５；Ｎｏ）、撮像装置２００は、後述するステップＳ６０６へ移行する。
【０１２５】
ステップＳ６０６において、撮像装置２００は、背面画像に写る撮影者の位置に応じて、ライブビュー画像上に撮影者の顔枠の表示位置を設定する撮影者顔枠表示処理を実行する。
【０１２６】
図２８は、図２５のステップＳ６０６の撮影者顔枠表示処理の概要を示すフローチャートである。
【０１２７】
図２８に示すように、表示位置検出部９４は、背景画像における撮影者の顔の位置を検出する（ステップＳ７０１）。
【０１２８】
続いて、表示制御部９６は、表示位置検出部９４によって検出された背面画像における撮影者の顔の位置に応じて、表示部６が表示するライブビュー画像上に白抜き部を表示部６に表示させる（ステップＳ７０２）。その後、撮像装置２００は、図２５のコラージュモード処理へ戻る。
【０１２９】
図２９は、表示制御部９６がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図であり、撮影者が背面撮像部２０１の光軸Ｌ２に対して左寄りに位置する状況を示す。図３０は、表示制御部９６がライブビュー画像上の白抜き部に撮影者の顔画像を表示させる際の表示方法を模式的に説明する図であり、撮影者が背面撮像部２０１の光軸Ｌ２に対して右寄りに位置する状況を示す。また、図２９および図３０において、背面撮像部２０１の撮影領域を２０１ａとする。
【０１３０】
図２９（ｄ）および図３０（ｄ）に示すように、本実施の形態３では、表示制御部９６は、表示部６に対して、背面画像２０１ａに写る撮影者の位置に対応したライブビュー画像の位置に白抜き部を表示させるとともに、白抜き部に合成する撮影者の顔画像を反転させて表示部６に表示させる（図２９（ｄ），図３０（ｄ））。これにより、図３２および図３３に示すように、撮影者は、ライブビュー画像の色抜き部を見ながら、撮像装置２００の位置を調整することで、撮影者自身が画像に写りこめる位置を調整することができる。これに対して、図２９（ａ）および図３０（ａ）に示すように、従来の撮像装置は、背面撮像部２０１で撮影した画像を表示部６に表示する場合、撮影者Ｋ１に対して撮影した画像を認識し易くするため、前面側の撮像部２で撮影した画像の位置で表されるように撮影者Ｋ１の位置を反転（座標変換）させて表示させる（図２９（ｂ）→図２９（ｃ），図３０（ｂ）→図３０（ｃ））。また、図３１に示すように、単に、背面画像に写る撮影者の顔の位置に応じて、前面側で撮影される画像に撮影者の顔画像を合成しても、撮影者の顔が左右逆（図３１（ｂ）になるため、前面側の撮像部２で撮影した画像に合成する際に不自然な状態で合成されてしまう場合があった。
【０１３１】
ここで、表示制御部９６が表示部６に表示させるライブビュー画像上の白抜き部の位置について説明する。具体的には、図２９（ｃ）において、背面画像２０１ａの左下を原点Ｐ1とし、背面画像２０１ａの横方向をＸ軸とし、背面画像２０１ａの縦方向をＹ軸とする座標系として考える。また、図２９（ｄ）において、表示部６の左下を原点Ｐ11として、表示部６の横方向をＸ軸とし、表示部６の縦方向をＹ軸とする座標系として考える。
【０１３２】
図２９（ｃ）および図２９（ｄ）に示すように、表示制御部９６は、背面画像２０１ａの右下の点Ｐ2の座標を（Ｘ1，０）、背面画像２０１ａにおける撮影者Ｋ１の点Ｐ3の座標を（Ｘf，Ｙf）、表示部６の右下の点Ｐ12の座標を（Ｘ2，０）、表示部６における撮影者Ｋ１の点Ｐ13の座標を（Ｘa，Ｙa）としたとき、以下の式によって表示部６における撮影者Ｋ１の点Ｐ13の座標が算出される。
Ｘa：Ｘ2＝Ｘ1−Ｘf：Ｘ1 ・・・（１）
したがって、
Ｘa＝（Ｘ1−Ｘf）Ｘ2／Ｘ1 ・・・（２）
になる。同様に、背面画像２０１ａの左上の点Ｐ4の座標を（０，Ｙ１）、表示部６の左上の点Ｐ14の座標を（０，Ｙ2）、としたとき
Ｙa：Ｙ2＝Ｙf：Ｙ１ ・・・（３）
したがって、
Ｙa＝Ｙ2Ｙf／Ｙ１ ・・・（４）
になる。このように、表示制御部９６は、式（２）および式（４）を用いて、表示部６における撮影者Ｋ１の座標を算出し、この算出した座標を一部に含む領域を白抜き部として
表示部６が表示するライブビュー画像上に表示させる。なお、表示制御部９６は、座標変換等を行わず、単に背面画像２０１ａにおける撮影者の顔の位置に応じて、白抜き部を表示部６が表示するライブビュー画像上に表示させてもよい。
【０１３３】
図２５に戻り、ステップＳ６０７以降の説明を続ける。ステップＳ６０７において、制御部１０１は、姿勢検出部３の検出結果に基づいて、撮像装置１の光軸Ｌ２が水平であるか否かを判断する。撮像装置２００の光軸Ｌ１および光軸Ｌ２が水平状態である場合（ステップＳ６０７：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６０８へ移行する。一方、撮像装置２００の光軸Ｌ１および光軸Ｌ２が水平状態でない場合（ステップＳ６０７：Ｎｏ）、撮像装置２００は、後述するステップＳ６１６へ移行する。
【０１３４】
ここで、水平状態を判断する理由について説明する。図３４に示すように、撮影者の顔画像Ｍ１１を合成する場合、撮影者の顔画像Ｍ１１の位置を背面撮像部２０１で得られた顔の高さと撮像部２に写る被写体の顔の高さとの関係を反映した状態で合成すること好ましい。たとえば、撮影者であるお父さんＫ１の顔の表示位置が子供のＫ３の顔の表示位置より低くなると不自然である。このため、図３５に示すように、制御部１０１は、姿勢検出部３の検出結果に基づいて、撮像装置２００の光軸Ｌ１およびＬ２が水平状態であるか否かを判断する。
【０１３５】
ステップＳ６０８において、制御部１０１は、顔検出部９２によって背面画像から撮影者の顔が検出されているか否かを判断する。顔検出部９２によって背面画像から撮影者の顔が検出されていると制御部１０１が判断した場合（ステップＳ６０８：Ｙｅｓ）、撮像装置２００は、後述するステップＳ６０９へ移行する。一方、顔検出部９２によって背面画像から撮影者の顔が検出されていないと制御部１０１が判断した場合（ステップＳ６０８：Ｎｏ）、撮像装置２００は、後述するステップＳ６１７へ移行する。
【０１３６】
ステップＳ６０９において、画像合成部９５は、トリミング部９３が生成した撮影者の顔画像の左右を反転させてライブビュー画像上の白抜き部に合成して合成画像を生成する。
【０１３７】
続いて、表示制御部９６は、画像合成部９５がライブビュー画像上の白抜き部に撮影者の顔画像の左右を反転させて合成した合成画像を表示部６に表示させる（ステップＳ６１０）。
【０１３８】
続いて、制御部１０１は、タッチパネル７から入力される指示信号に応じて、適用アイコンＡ１２が選択されたか否かを判断する（ステップＳ６１１）。適用アイコンＡ１２が選択されたと制御部１０１が判断した場合（ステップＳ６１１：Ｙｅｓ）、撮像装置２００は、上述したコラージュ表示処理（図２０を参照）を実行する（ステップＳ６１２）。この際、図３６に示すように、表示制御部９６は、コラージュ表示処理を行った画像Ｗ２０を表示部６に表示させる。これにより、家族撮影を行う際に家族Ｍ１２，Ｍ１３と一緒にお父さんＭ１１も写り込んだ家族写真を撮影することができ、再生する場合に撮影時の思い出を共有することができる。
【０１３９】
その後、制御部１０１は、タッチパネル７から入力される指示信号に応じて、コラージュ表示解除アイコン（図示せず）が選択されたか否かを判断する（ステップＳ６１３）。コラージュ表示解除アイコンが選択されたと制御部１０１が判断した場合（ステップＳ６１３：Ｙｅｓ）、撮像装置２００は、ステップＳ６０７へ戻る。一方、所定時間（たとえば２秒）以内にコラージュ表示解除アイコンが選択されていない場合（ステップＳ６１３：Ｎｏ）、撮像装置２００は、図４のメインルーチンへ戻る。
【０１４０】
ステップＳ６１１において、所定時間（たとえば３秒）内に適用アイコンＡ１２が選択されていないと制御部１０１が判断した場合（ステップＳ６１１：Ｎｏ）、撮像装置２００は、図４のメインルーチンへ戻る。
【０１４１】
ステップＳ６１４において、制御部１０１は、顔検出部９２が背面画像から検出した撮影者の顔領域に基づいて、表示部６が表示するライブビュー画像上の顔枠の大きさを設定する。その後、撮像装置２００は、ステップＳ６０５へ移行する。
【０１４２】
ステップＳ６１５において、表示制御部９６は、表示部６が表示するライブビュー画像上において、ユーザによって予め指定された表示位置に撮影者の顔枠を表示部６に表示させる。その後、撮像装置２００は、ステップＳ６０７へ移行する。
【０１４３】
ステップＳ６１６において、制御部１０１は、表示部６が表示するライブビュー画像上において、撮影者の顔枠の表示位置が指定されているか否かを判断する。撮影者の顔枠の表示位置が指定されていると制御部１０１が判断した場合（ステップＳ６１６：Ｙｅｓ）、撮像装置２００は、ステップＳ６０８へ移行する。一方、撮影者の顔枠の表示位置が指定されていないと制御部１０１が判断した場合（ステップＳ６１６：Ｎｏ）、撮像装置２００は、ステップＳ６１７へ移行する。
【０１４４】
ステップＳ６１７において、表示制御部９６は、撮影者の顔を合成することができない旨の警告を表示部６に表示させる。その後、撮像装置２００は、図４のメインルーチンへ戻る。
【０１４５】
以上説明した本発明の実施の形態３によれば、撮影者を撮影する背面撮像部２０１を設け、背面撮像部２０１が生成した背面画像に写る撮影者の顔画像を、撮像部２によって生成された画像に合成して表示部６に表示させる。これにより、撮影者が撮影時の同じ構図内に入れなくても、仮想的に入れるので、たとえば家族写真のように、撮影時の思い出を共有することができる画像を撮影することができる。
【０１４６】
なお、上述した実施の形態３では、撮像装置２００の背面に背面撮像部２０１を設けていたが、たとえば、撮像装置２００の側面に設けてもよい。
【０１４７】
また、上述した実施の形態３では、撮像装置２００の前面および背面それぞれに撮像部２および背面撮像部２０１を設けていたが、撮像装置２００の両側面それぞれに撮像部をさらに設けてもよい。
【０１４８】
（その他の実施の形態）
【０１４９】
また、上述した実施の形態では、特許請求の範囲、明細書および図面中の動作フローに関して、便宜上「まず、」や「つぎに、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【０１５０】
また、上述した実施の形態では、撮像装置としてデジタルカメラとして説明していたが、たとえばデジタル一眼レフカメラ、デジタルビデオカメラおよび２つの撮影機能を有する携帯電話やタブレット型携帯機器等の電子機器にも適用することができる。
【符号の説明】
【０１５１】
１，１００，２００ 撮像装置
２ 撮像部
３ 姿勢検出部
４ タイマー
５ 操作入力部
６ 表示部
７ タッチパネル
８ 記憶部
９，１０１ 制御部
２１ レンズ部
２２ レンズ駆動部
２３ 絞り
２４ 絞り駆動部
２５ シャッタ
２６ シャッタ駆動部
２７ 撮像素子
２８ 撮像駆動部
２９ 信号処理部
５１ 電源スイッチ
５２ レリーズスイッチ
５３ 撮影モード切換スイッチ
８１ 画像データ記憶部
８２ プログラム記憶部
８３ 顔情報記憶部
９１ 画像処理部
９２ 顔検出部
９３ トリミング部
９４ 表示位置検出部
９５ 画像合成部
９６ 表示制御部
１０１ 背景検出部
２０１ 背面撮像部
【特許請求の範囲】
【請求項１】
被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置であって、
前記ライブビュー画像に含まれる被写体の顔を検出する顔検出部と、
前記顔検出部が検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミング部と、
前記表示部の表示領域において指定された表示位置に、前記トリミング部が生成した前記顔画像を表示させる表示制御部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記顔検出部によって検出された前記被写体の顔の前記ライブビュー画像上における表示位置を検出する表示位置検出部をさらに備え、
前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域に、前記顔画像を表示させることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示部が表示している前記顔画像の表示位置を、前記表示領域内において移動させる指示信号の入力を受け付ける入力部をさらに備え、
前記表示制御部は、前記入力部が入力を受け付けた前記指示信号に応じて、前記顔画像を移動させて前記表示部に表示させることを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記入力部は、前記顔画像の大きさの変更を指示する変更指示信号の入力をさらに受け付け可能であり、
前記表示制御部は、前記入力部が受け付けた前記変更指示信号に応じて、前記顔画像の大きさを変更して前記表示部に表示させることを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記顔検出部は、前記ライブビュー画像に含まれる複数の被写体の顔を検出可能であり、
前記入力部は、前記顔検出部が検出した前記複数の顔の中から表示対象とする顔の選択する選択信号の入力をさらに受け付け可能であることを特徴とする請求項３または４に記載の撮像装置。
【請求項６】
前記トリミング部が生成した前記顔画像を、予め設定された設定画像の前記表示位置に合成して合成画像を生成する画像合成部をさらに備え、
前記表示制御部は、前記画像合成部が生成した前記合成画像を前記表示部に表示させることを特徴とする請求項１〜５のいずれか一つに記載の撮像装置。
【請求項７】
前記顔領域を含む前記被写体以外の領域を背景領域として検出する背景領域検出部をさらに備え、
前記トリミング部は、前記背景領域検出部が検出した前記背景領域を前記画像から切出して背景画像を生成し、
前記画像合成部は、前記背景画像を前記設定画像として前記顔画像に合成することを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記撮像部と異なる位置に設けられ、所定の視野領域から光を集光して光電変換を行うことによって第２の画像データを生成する第２の撮像部をさらに備え、
前記顔検出部は、前記第２の画像データに対応する第２の画像に含まれる被写体の顔を検出し、
前記トリミング部は、前記顔検出部が前記第２の画像から検出した顔を含む顔領域を前記第２の画像から切出して第２の顔画像を生成し、
前記画像合成部は、前記第２の顔画像を前記背景画像に合成することを特徴とする請求項７に記載の撮像装置。
【請求項９】
前記画像合成部は、前記第２の顔画像の表示位置を左右反転にして前記背景画像に合成することを特徴とする請求項８に記載の撮像装置。
【請求項１０】
当該撮像装置の姿勢を検出する姿勢検出部をさらに備え、
前記画像合成部は、前記姿勢検出部の検出結果に応じて、前記第２の顔画像を前記背景画像に合成することを特徴とする請求項９に記載の撮像装置。
【請求項１１】
前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域を識別可能な表示態様で表示させることを特徴とする請求項１０に記載の撮像装置。
【請求項１２】
被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置が撮影時に実行する表示方法であって、
前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、
前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、
前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、
を含むことを特徴とする表示方法。
【請求項１３】
被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置の撮影時に実行するプログラムであって、
前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、
前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、
前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、
を実行させることを特徴とするプログラム。
【請求項１】
被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置であって、
前記ライブビュー画像に含まれる被写体の顔を検出する顔検出部と、
前記顔検出部が検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミング部と、
前記表示部の表示領域において指定された表示位置に、前記トリミング部が生成した前記顔画像を表示させる表示制御部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記顔検出部によって検出された前記被写体の顔の前記ライブビュー画像上における表示位置を検出する表示位置検出部をさらに備え、
前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域に、前記顔画像を表示させることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示部が表示している前記顔画像の表示位置を、前記表示領域内において移動させる指示信号の入力を受け付ける入力部をさらに備え、
前記表示制御部は、前記入力部が入力を受け付けた前記指示信号に応じて、前記顔画像を移動させて前記表示部に表示させることを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記入力部は、前記顔画像の大きさの変更を指示する変更指示信号の入力をさらに受け付け可能であり、
前記表示制御部は、前記入力部が受け付けた前記変更指示信号に応じて、前記顔画像の大きさを変更して前記表示部に表示させることを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記顔検出部は、前記ライブビュー画像に含まれる複数の被写体の顔を検出可能であり、
前記入力部は、前記顔検出部が検出した前記複数の顔の中から表示対象とする顔の選択する選択信号の入力をさらに受け付け可能であることを特徴とする請求項３または４に記載の撮像装置。
【請求項６】
前記トリミング部が生成した前記顔画像を、予め設定された設定画像の前記表示位置に合成して合成画像を生成する画像合成部をさらに備え、
前記表示制御部は、前記画像合成部が生成した前記合成画像を前記表示部に表示させることを特徴とする請求項１〜５のいずれか一つに記載の撮像装置。
【請求項７】
前記顔領域を含む前記被写体以外の領域を背景領域として検出する背景領域検出部をさらに備え、
前記トリミング部は、前記背景領域検出部が検出した前記背景領域を前記画像から切出して背景画像を生成し、
前記画像合成部は、前記背景画像を前記設定画像として前記顔画像に合成することを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記撮像部と異なる位置に設けられ、所定の視野領域から光を集光して光電変換を行うことによって第２の画像データを生成する第２の撮像部をさらに備え、
前記顔検出部は、前記第２の画像データに対応する第２の画像に含まれる被写体の顔を検出し、
前記トリミング部は、前記顔検出部が前記第２の画像から検出した顔を含む顔領域を前記第２の画像から切出して第２の顔画像を生成し、
前記画像合成部は、前記第２の顔画像を前記背景画像に合成することを特徴とする請求項７に記載の撮像装置。
【請求項９】
前記画像合成部は、前記第２の顔画像の表示位置を左右反転にして前記背景画像に合成することを特徴とする請求項８に記載の撮像装置。
【請求項１０】
当該撮像装置の姿勢を検出する姿勢検出部をさらに備え、
前記画像合成部は、前記姿勢検出部の検出結果に応じて、前記第２の顔画像を前記背景画像に合成することを特徴とする請求項９に記載の撮像装置。
【請求項１１】
前記表示制御部は、前記表示位置検出部が検出した表示位置に対応する前記表示領域を識別可能な表示態様で表示させることを特徴とする請求項１０に記載の撮像装置。
【請求項１２】
被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置が撮影時に実行する表示方法であって、
前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、
前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、
前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、
を含むことを特徴とする表示方法。
【請求項１３】
被写体を撮像して該被写体の画像データを連続的に生成する撮像部と、前記撮像部が生成した前記画像データに対応するライブビュー画像を生成順に表示する表示部と、を備えた撮像装置の撮影時に実行するプログラムであって、
前記ライブビュー画像に含まれる被写体の顔を検出する顔検出ステップと、
前記顔検出ステップが検出した前記被写体の顔を含む顔領域を、前記ライブビュー画像から切出して顔画像を生成するトリミングステップと、
前記表示部の表示領域において指定された表示位置に、前記トリミングステップが生成した前記顔画像を表示させる表示制御ステップと、
を実行させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図３４】
【図３５】
【図３６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図３４】
【図３５】
【図３６】
【公開番号】特開２０１２−２４９１７５（Ｐ２０１２−２４９１７５Ａ）
【公開日】平成２４年１２月１３日（２０１２．１２．１３）
【国際特許分類】
【出願番号】特願２０１１−１２０７９６（Ｐ２０１１−１２０７９６）
【出願日】平成２３年５月３０日（２０１１．５．３０）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２４年１２月１３日（２０１２．１２．１３）
【国際特許分類】
【出願日】平成２３年５月３０日（２０１１．５．３０）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]