撮像装置および撮像プログラム
【課題】２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる撮像装置を提供する。
【解決手段】表示部７が表示する画像に対して特殊効果を施すことが可能な撮像装置１において、特殊効果画像生成部１１ｃが被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が合成画像生成部１１ｄによって被写体画像および背景画像の他方と合成された場合、表示制御部１１ｅは、この合成された合成画像を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。
【解決手段】表示部７が表示する画像に対して特殊効果を施すことが可能な撮像装置１において、特殊効果画像生成部１１ｃが被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が合成画像生成部１１ｄによって被写体画像および背景画像の他方と合成された場合、表示制御部１１ｅは、この合成された合成画像を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影して電子的な画像データを生成する撮像装置および撮像プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタルビデオなどの撮像装置においては、被写体を撮像した画像データに特殊効果を施すことによって、消費者の様々な要望に応える技術が知られている。たとえば、撮影した画像データにワイプやセピア等の特殊効果を施して記録することができる技術が知られている（特許文献１参照）。この技術では、ユーザが特殊効果を選択するエフェクトスイッチを操作している際に選択された特殊効果を施した画像を、表示モニタが表示している画像上の一部に表示させることにより、ユーザに所望の特殊効果を容易に選択させることができるようになっている。
【０００３】
また、同一の被写体に対して複数回撮影し、撮影した複数の画像を用いて画像内に含まれる被写体画像と背景画像とを分離後、背景画像にぼかしを施し、再度被写体画像に合成することができる撮像装置が知られている（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３４７８８６号公報
【特許文献２】特許第４３２１２８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、従来の撮像装置では、２つの画像データを用いて合成画像を生成する場合に、２つの画像データそれぞれに異なる特殊効果を組み合わせて合成画像を生成していなかった。そこで、２つの画像データそれぞれに対して異なる特殊効果を施すことが考えられる。しかしながら、異なる特殊効果の組み合わせがすべてよいわけではなく、中には効果が相殺されてしまうような組み合わせもあり、組み合わせの選択の指針となる情報が求められていた。
【０００６】
本発明は、上記に鑑みてなされたものであって、２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明に係る撮像装置は、被写体を撮像して該被写体の電子的な画像データを生成し、この生成された画像データに対応する画像を表示する表示部を有し、前記画像に特殊効果を施すことが可能な撮像装置であって、前記表示部が表示する前記画像から被写体画像と背景画像とを分離する画像分離部と、前記画像分離部が分離した前記被写体画像および前記背景画像に対してそれぞれ施す特殊効果に関する情報の入力を受け付ける入力部と、前記入力部が受け付けた情報に応じた特殊効果を前記被写体画像および前記背景画像に対して個別に施して各画像の特殊効果画像を生成する特殊効果画像生成部と、前記特殊効果画像生成部が前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部と、前記特殊効果画像生成部が生成した前記特殊効果画像を用いて合成画像を生成する合成画像生成部と、前記表示部の表示を制御する表示制御部と、を備え、前記特殊効果画像生成部が前記被写体画像および前記背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が前記合成画像生成部によって前記被写体画像および前記背景画像の他方と合成された場合、前記表示制御部は、この合成された合成画像を前記表示部に表示させるとともに、前記記憶部が記憶する特殊効果情報テーブルを参照して、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に前記表示部に表示させることを特徴とする。
【０００８】
また、本発明に係る撮像装置は、上記発明において、前記記憶部は、当該撮像装置で設定可能な撮影モードと前記被写体画像または前記背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルを記憶し、前記入力部は、撮影モードの設定入力を受け付け、前記表示制御部は、前記入力部からの入力によって撮影モードが設定された場合、前記記憶部が記憶する第２特殊効果情報テーブルを参照して、設定された前記撮影モードとの組み合わせに応じた前記推奨度の高い順に前記特殊効果に関する情報を前記表示部に表示させることを特徴とする。
【０００９】
また、本発明に係る撮像装置は、上記発明において、前記表示制御部は、前記直近に施した特殊効果に対して組み合わせることが可能な特殊効果に関する情報のみを前記表示部に表示させることを特徴とする。
【００１０】
また、本発明に係る撮像装置は、上記発明において、前記入力部は、前記表示部の表示画面上に設けられ、外部から接触する物体の位置に応じた信号の入力を受け付けるタッチパネルを有し、前記表示制御部は、前記特殊効果に関する情報をアイコンによって前記表示部に表示させ、前記特殊効果画像生成部は、前記タッチパネルが前記アイコンの表示領域上に位置する接触領域で入力を受け付けた前記アイコンに対応する特殊効果を、前記被写体画像または前記背景画像に施して前記特殊効果画像を生成することを特徴する。
【００１１】
また、本発明に係る撮像装置は、上記発明において、前記表示制御部は、前記直近に施した特殊効果との組み合わせに応じて前記アイコンの色および／または大きさを変えた表示態様で前記表示部に強調表示させることを特徴とする。
【００１２】
また、本発明に係る撮像プログラムは、被写体を撮像して該被写体の電子的な画像データを生成し、該画像データに対応する画像を表示可能であるとともに、前記画像に特殊効果を施すことが可能な撮像装置に、前記画像から被写体画像と背景画像とを分離する画像分離ステップと、前記画像分離ステップで分離した前記被写体画像および前記背景画像の一方に対して特殊効果を施した特殊効果画像を生成する特殊効果画像生成ステップと、前記特殊効果画像生成ステップで生成した特殊効果画像を前記被写体画像および前記背景画像の他方と合成して合成画像を生成する合成画像生成ステップと、前記合成画像生成ステップで生成した合成画像を表示するとともに、前記特殊効果画像生成部が前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部から該特殊効果情報テーブルを読み出して参照し、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に表示する表示ステップと、を実行させることを特徴とする。
【発明の効果】
【００１３】
本発明によれば、特殊効果画像生成部が被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が画像合成部によって被写体画像および背景画像の他方と合成された場合、表示制御部が、この合成された合成画像を表示部に表示させるとともに、記憶部が記憶する特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に表示部に表示させ。これにより、ユーザは、２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報を直感的に認識することができるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】図１は、本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。
【図２】図２は、本発明の実施の形態１に係る撮像装置の前面側の構成を示す斜視図である。
【図３】図３は、本発明の実施の形態１に係る撮像装置の背面側の構成を示す斜視図である。
【図４】図４は、本発明の実施の形態１に係る撮像装置が備える撮像部が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。
【図５】図５は、図４に示す状況下で撮像部が生成する画像データに対応する画像の一例を示す図である。
【図６】図６は、図４に示す状況下で撮像部が生成する画像データに対応する画像の一例を示す図である。
【図７】図７は、図４に示す状況下で撮像部が異なる撮影位置でそれぞれ生成した画像を仮想的に重ねた画像の一例を示す図である。
【図８】図８は、本発明の実施の形態１に係る撮像装置が備える画像分離部が生成する背景画像の一例を示す図である。
【図９】図９は、本発明の実施の形態１に係る撮像装置が備える画像分離部が生成する被写体画像の一例を示す図である。
【図１０】図１０は、本発明の実施の形態１に係る撮像装置が備える特殊効果画像生成部および合成画像生成部による処理の概要を説明する模式図である。
【図１１】図１１は、本発明の実施の形態１に係る撮像装置が行う処理の概要を示すフローチャートである。
【図１２】図１２は、本発明の実施の形態１に係る撮像装置が行うメニュー操作処理の概要を示すフローチャートである。
【図１３】図１３は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図１４】図１４は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図１５】図１５は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図１６】図１６は、本発明の実施の形態１に係る撮像装置が備える特殊効果情報記憶部が記憶する特殊効果情報テーブルの一例を示す図である。
【図１７】図１７は、本発明の実施の形態１に係る撮像装置が行う撮影処理の概要を示すフローチャートである。
【図１８】図１８は、本発明の実施の形態１に係る撮像装置が行うスイング撮影処理の概要を示すフローチャートである。
【図１９】図１９は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２０】図２０は、本発明の実施の形態２に係る撮像装置が行う撮影モードにおけるパノラマ撮影の撮影方法を説明する模式図である。
【図２１】図２１は、本発明の実施の形態２に係る撮像装置が行う撮影モードにおけるＨＤＲ撮影の撮影方法を説明する模式図である。
【図２２】図２２は、図２１に示す状況下で撮像装置が生成する画像の一例を示す図である。
【図２３】図２３は、本発明の実施の形態２に係る撮像装置が行うメニュー操作処理の概要を示すフローチャートである。
【図２４】図２４は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２５】図２５は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２６】図２６は、本発明の実施の形態２に係る撮像装置が備える特殊効果情報記憶部が記憶する特殊効果情報テーブルの一例を示す図である。
【図２７】図２７は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２８】図２８は、本発明の実施の形態２に係る撮像装置が備える特殊効果情報記憶部が記憶する特殊効果情報テーブルの一例を示す図である。
【図２９】図２９は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図３０】図３０は、本発明の実施の形態２に係る撮像装置が備える合成画像生成部が生成する合成画像の一例を示す図である。
【発明を実施するための形態】
【００１５】
以下に、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。また、図面の記載において、同一の部分には同一の符号を付している。
【００１６】
（実施の形態１）
図１は、本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。図２は、本実施の形態１に係る撮像装置の被写体に面する側（前面側）の構成を示す図である。図３は、本実施の形態１に係る撮像装置のユーザに面する側（背面側）の構成を示す図である。
【００１７】
図１〜図３に示すように、撮像装置１は、被写体を撮影し、撮影した被写体の電子的な画像データを生成する撮像部２と、撮像装置１の加速度を検出する姿勢検出部３と、撮像部２が撮影する視野領域に光を照射するストロボ４と、撮影日時の判定機能やタイマー機能を有する時計５と、撮像装置１の各種情報の入力を受け付ける操作入力部６と、撮像部２が生成した画像データに対応する画像を表示する表示部７と、外部からの接触位置に応じた信号の入力を受け付けるタッチパネル８と、撮像部２によって生成された画像データを含む各種情報を記憶する記憶部９と、インタネットを介して各種データベースと相互方向に送受信を行う通信部１０と、撮像装置１の動作を制御する制御部１１と、を備える。
【００１８】
撮像部２は、レンズ部２ａと、レンズ駆動機構２ｂと、絞り２ｃと、絞り駆動機構２ｄと、シャッタ２ｅと、シャッタ駆動機構２ｆと、撮像素子２ｇと、信号処理部２ｈとを有する。レンズ部２ａは、フォーカスレンズやズームレンズ等によって構成され、所定の視野領域からの光を集光する。レンズ駆動機構２ｂは、ＤＣモータ等によって構成され、レンズ部２ａのフォーカスレンズやズームレンズ等を光軸Ｌ１上で移動させることにより、レンズ部２ａのピント位置や焦点距離等の変更を行う。絞り２ｃは、レンズ部２ａが集光した光の入射量を制限することにより露出の調整を行う。絞り駆動機構２ｄは、ステッピングモータ等によって構成され、絞り２ｃを駆動する。シャッタ２ｅは、撮像素子２ｇの状態を露光状態または遮光状態に設定する。シャッタ駆動部２ｆは、ステッピングモータ等によって構成され、レリーズ信号に応じてシャッタ２ｅを駆動する。撮像素子２ｇは、レンズ部２ａが集光した光を受光して電気信号（アナログ信号）に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によって実現され、変換した電気信号を信号処理部２ｈに出力する。信号処理部２ｈは、撮像素子２ｇから出力される電気信号に増幅等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの画像データに変換して制御部１１に出力する。
【００１９】
姿勢検出部３は、加速度センサによって構成され、撮像装置１の加速度を検出することにより、撮像装置１の姿勢状態および／または動きを検出する。具体的には、姿勢検出部３は、水平面を基準としてときの撮像装置１の姿勢を検出する。
【００２０】
ストロボ４は、キセノンランプやＬＥＤ（Light Emitting Diode）等で構成される。ストロボ４は、撮像部２の視野領域へ向けて補助光であるストロボ光を照射する。
【００２１】
時計５は、撮像装置１の動作の基準となる時間信号を生成する。これにより、制御部１１は、画像データの取得時間や撮像素子２ｇの露光時間等を設定することができる。
【００２２】
操作入力部６は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ６ａと、撮影の指示を与えるレリーズ信号を入力するレリーズスイッチ６ｂと、撮像装置１の各種撮影のモードを切換える撮影モード切換スイッチ６ｃと、撮像装置１の各種設定を切換える操作スイッチ６ｄと、撮像装置１の各種撮影モードに関する情報を表示部７に表示させるメニュースイッチ６ｅと、撮像部２のズーム操作を行うズームスイッチ６ｆとを有する。
【００２３】
表示部７は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて実現される。表示部７は、撮像部２が生成する画像データに対応する画像を表示する。表示部７は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。また、表示部７は、撮像部２が生成する画像データに対応する３次元画像（以下、「３Ｄ画像」という）を表示する。一般に、３Ｄ画像を表示する表示部としては、パララックバリア方式またはレンティキュラレンズ方式がある。本実施の形態では、いずれの方式の表示部であっても適用可能である。
【００２４】
タッチパネル８は、表示部７の表示画面上に重ねて設けられる（図３を参照）。タッチパネル８は、ユーザが表示部７で表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた操作信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態では、いずれの方式のタッチパネルであっても適用可能である。なお、本実施の形態１では、タッチパネル８が入力部として機能する。
【００２５】
記憶部９は、撮像部２が撮影した画像データを記憶する画像データ記憶部９ａと、撮像装置１が実行する各種プログラムおよび本実施の形態１に係る撮像プログラムを記憶するプログラム記憶部９ｂと、撮像部２が撮影した画像データまたは各種撮像装置１の設定を一時的に記憶する仮画像データ記憶部９ｃと、特殊効果を行う際に被写体画像および背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する特殊効果情報記憶部９ｄとを有する。記憶部９は、撮像装置１の内部に固定的に設けられるフラッシュメモリやＲＡＭ（Random Access Memory）等の半導体メモリを用いて実現される。なお、記憶部９に対し、外部から装着されるメモリカード等の記憶媒体に対して情報を記憶する一方、記憶媒体が記憶する情報を読み出す記録媒体インターフェースとしての機能を具備させてもよい。
【００２６】
通信部１０は、通信インターフェースとしての機能を有し、ネットワーク（図示せず）を介してサーバ（図示せず）やパーソナルコンピュータ等の外部処理装置と相互方向に送受信を行う。通信部１０は、外部処理装置との間で送受信を行うことにより、撮像装置１の各種プログラムデータや特殊効果情報テーブルに関するデータを取得する。なお、通信部１０は、有線または無線ＬＡＮ（Local Area Network）を介してネットワークに接続される。
【００２７】
制御部１１は、ＣＰＵ（Central Processing Unit）等によって実現される。制御部１１は、操作入力部６からの操作信号等に応じて記憶部９のプログラム記憶部９ｂからプログラムを読み出して実行し、撮像装置１を構成する各部に対する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。制御部１１は、画像処理部１１ａと、画像分離部１１ｂと、特殊効果画像生成部１１ｃと、合成画像生成部１１ｄと、表示制御部１１ｅとを有する。
【００２８】
画像処理部１１ａは、信号処理部２ｈから出力された画像データに対して各種の画像処理を施して記憶部９に出力する。具体的には、画像処理部１１ａは、信号処理部２ｈから出力された画像データに対してエッジ強調、色補正およびγ補正等の処理を施す。
【００２９】
画像分離部１１ｂは、撮像部２が生成した画像データに対応する画像から被写体画像と背景画像とを分離する。具体的には、画像分離部１１ｂは、周知の三角測量の原理を用いて、撮像部２によって生成された互いの視野の左右方向の一端部同士が重なりを有する２つの画像データに対応する２つの画像の視差に基づいて、被写体画像と背景画像とを分離する。
【００３０】
特殊効果画像生成部１１ｃは、タッチパネル８が入力を受け付けた情報に応じた特殊効果を、画像分離部１１ｂが分離した被写体画像および背景画像に対して個別に施して各画像の特殊効果画像を生成する。具体的には、特殊効果画像生成部１１ｃは、被写体画像および背景画像それぞれに対して、撮像部２のレンズ部２ａの前面に各種の光学フィルタ、たとえば色変換フィルタやコントラスト調整フィルタ等を配置した場合に得られる特殊効果、または特定用途の撮影レンズ、たとえば魚眼レンズ等を配置した場合に得られる特殊効果を施した特殊効果画像を生成する。なお、特殊効果画像生成部１１ｃは、撮像部２が生成する画像データに対応する１つの画像に特殊効果を施して特殊効果画像を生成してもよい。さらに、撮像部２が連続的に生成する画像データに対して特殊効果を順次施して連続的に特殊効果画像を生成してもよい。
【００３１】
合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが生成した特殊効果画像を用いて合成画像を生成する。具体的には、合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが背景画像に特殊効果を施して生成した特殊効果画像に、画像分離部１１ｂが分離した被写体画像を合成して合成画像を生成する。
【００３２】
表示制御部１１ｅは、表示部７の表示を制御する。表示制御部１１ｅは、特殊効果画像生成部１１ｃが被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が合成画像生成部１１ｄによって被写体画像および背景画像の他方と合成された場合、この合成された合成画像を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。表示制御部１１ｅは、特殊効果に関する情報をアイコンによって表示部７に表示させる。具体的には、表示制御部１１ｅは、特殊効果情報に対応する特殊効果アイコンを、特殊効果情報テーブルを参照して、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。
【００３３】
以上の構成を有する撮像装置１において、画像分離部１１ｂが撮像部２によって生成される画像に対し、被写体画像と背景画像とに分離する際の状況について説明する。図４は、撮像部２が、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。図５は、図４に示す状況下で撮像部２が撮影位置Ｐ１で生成する画像データに対応する画像の一例を示す図である。図６は、図４に示す状況下で撮像部２が撮影位置Ｐ２で生成する画像データに対応する画像の一例を示す図である。図７は、図４に示す状況下で撮像部２が異なる撮影位置でそれぞれ生成した画像を仮想的に重ねた画像の一例を示す図である。図７において、画像Ｗ１が、背景を基準に重ねた画像であり、画像Ｗ２が被写体を基準に重ねた画像である。なお、図４においては、ユーザが撮像装置１を左側から右側に移動させ、この移動期間中に撮像装置１が微小な時間間隔で連続的に撮影する。このため、図５および図６に示す画像ＷＬ１と画像ＷＲ１との間には、複数の画像が存在する。
【００３４】
図４に示すように、撮像部２は、撮像部２からの距離が異なる被写体Ａ１（距離ｄ１）および被写体Ａ２（距離ｄ２）に対して、複数の撮影位置で連続的に撮影することによって視野領域が異なる複数の画像データを生成する。具体的には、図５および図６に示すように、撮像部２は、図４の撮影位置Ｐ１で画像ＷＬ１を生成し、図４の撮影位置Ｐ２で画像ＷＲ１を生成する。図４に示すように、撮像部２と被写体Ａ２との距離ｄ２は、撮像部２と被写体Ａ１との距離ｄ１より大きいため、背景である被写体Ａ２の領域がほぼ重なる。具体的には、図７に示すように、画像Ｗ１内では、被写体Ａ２の領域がほぼ重なる。これに対して、画像Ｗ１内では、被写体Ａ１の領域が重ならず、被写体Ａ１に対して視差ａ１を有する。
【００３５】
このように、画像分離部１１ｂは、図７（ａ）に示すように、画像ＷＬ１および画像ＷＲ１を仮想的に重ねた際に、重なる領域を背景画像として特定する。また、画像分離部１１ｂは、図７（ｂ）に示すように、画像ＷＬ１および画像ＷＲ１を互いに異なる方向に移動させながら画像ＷＬ１および画像ＷＲ１の輝度が高い領域を基準に重ねることにより、重なった領域を被写体Ａ１の被写体画像として特定する。これにより、画像分離部１１ｂは、図８および図９に示すように、撮像部２から生成する画像データに対応する画像から背景画像Ｗ３と被写体画像Ｗ４とを分離することができる。なお、画像分離部１１ｂは、被写体Ａ１を基準に画像ＷＬ１および画像ＷＲ１を仮想的に重なる場合、画像ＷＬ１および画像ＷＲ１のコントラストが高い領域を基準に重ねることによって、被写体画像を特定するようにしてもよい。
【００３６】
つぎに、特殊効果画像生成部１１ｃおよび合成画像生成部１１ｄによる処理の概要について説明する。図１０は、特殊効果画像生成部１１ｃおよび合成画像生成部１１ｄによる処理の概要を説明する模式図である。
【００３７】
図１０に示すように、まず、特殊効果画像生成部１１ｃ、画像データ記憶部９ａが記憶する背景画像Ｗ１０にユーザによって設定された特殊効果、たとえば後述する「ソフト効果」を施して特殊効果画像Ｗ１１を生成する（図１０（ａ）→図１０（ｂ））。その後、合成画像生成部１１ｄは、画像分離部１１ｂが分離した被写体画像Ｗ４を特殊効果画像Ｗ１１に合成して合成画像Ｗ１２を生成する（図１０（ｂ）→図１０（ｃ））。最後に、特殊効果画像生成部１１ｃは、合成画像Ｗ１２に含まれる被写体画像Ｗ４にユーザによって設定された特殊効果、たとえば後述する「セピア効果」を施して合成画像Ｗ１３にする（図１０（ｃ）→図１０（ｄ））。これにより、撮像装置１は、被写体画像および背景画像それぞれに特殊効果を施した合成画像を生成することができる。なお、図１０においては、「ソフト効果」を施した画像をぼかして表現し、「セピア効果」を施した画像をハッチングで表現した。
【００３８】
つぎに、本実施の形態１に係る撮像装置１が行う処理について説明する。図１１は、撮像装置１が行う処理の概要を示すフローチャートである。
【００３９】
図１１において、まず、制御部１１は、撮像装置１の電源がオンになっているか否かを判断する（ステップＳ１０１）。撮像装置１の電源がオンになっている場合（ステップＳ１０１：Ｙｅｓ）、撮像装置１はステップＳ１０２に移行する。一方、撮像装置１の電源がオンになっていない場合（ステップＳ１０１：Ｎｏ）、撮像装置１は本処理を終了する。
【００４０】
続いて、制御部１１は、撮像装置１が撮影モードに設定されているか否かを判断する（ステップＳ１０２）。撮像装置１が撮影モードに設定されている場合（ステップＳ１０２：Ｙｅｓ）、撮像装置１は後述するステップＳ１０３に移行する。一方、撮像装置１が撮影モードに設定されていない場合（ステップＳ１０２：Ｎｏ）、撮像装置１は後述するステップＳ１０８に移行する。
【００４１】
ステップＳ１０２において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０２：Ｙｅｓ）について説明する。この場合、表示制御部１１ｅは、撮像部２が一定の微小な時間間隔で連続的に生成する画像データに対応する画像のスルー画像を表示部７に表示させる（ステップＳ１０３）。
【００４２】
続いて、制御部１１は、ユーザによってレリーズスイッチ６ｂが操作されて撮影を指示するレリーズ信号が入力されたか否かを判断する（ステップＳ１０４）。撮影を指示するレリーズ信号が入力されていない場合（ステップＳ１０４：Ｎｏ）、制御部１１は、ユーザによってメニュースイッチ６ｅが操作されたか否かを判断する（ステップＳ１０５）。所定時間内、たとえば３０秒内にユーザによってメニュースイッチ６ｅが操作されていない場合（ステップＳ１０５：Ｎｏ）、撮像装置１はステップＳ１０１に戻る。一方、ユーザによってメニュースイッチ６ｅが操作された場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は、撮像モードの中に含まれるメニューを設定するメニュー操作処理を実行し（ステップＳ１０６）、撮像装置１はステップＳ１０１に戻る。
【００４３】
ステップＳ１０４において、撮影を指示するレリーズ信号が入力された場合（ステップＳ１０４：Ｙｅｓ）について説明する。この場合、撮像装置１は、被写体を撮影する撮影処理を実行し（ステップＳ１０７）、撮像装置１はステップＳ１０１に戻る。
【００４４】
ステップＳ１０２において、撮像装置１が撮影モードでない場合（ステップＳ１０２：Ｎｏ）について説明する。この場合、表示制御部１１ｅは、画像データ記憶部９ａに記憶された複数の画像をまとめて表示した画像選択画面を表示部７に表示させる（ステップＳ１０８）。
【００４５】
続いて、制御部１１は、ユーザがタッチパネル８をタッチすることによって表示部７が表示する画像選択画面の中から画像が選択されたか否かを判断する（ステップＳ１０９）。ユーザによって画像選択画面の中から画像が選択されていない場合（ステップＳ１０９：Ｎｏ）、撮像装置１は後述するステップＳ１１３に移行する。一方、ユーザによって画像選択画面の中から画像が選択された場合（ステップＳ１０９：Ｙｅｓ）、表示制御部１１ｅは、ユーザによって選択された画像を表示部７に全画面表示させ（ステップＳ１１０）、撮像装置１はステップＳ１１１に移行する。
【００４６】
ステップＳ１１１において、ユーザによって画像の切換操作が行われたか否かを判断する。ユーザによって画像の切換操作が行われた場合（ステップＳ１１１：Ｙｅｓ）、表示制御部１１ｅは、表示部７が現在表示している画像の切換えを行い（ステップＳ１１２）、撮像装置１はステップＳ１１０に戻る。一方、ユーザによって画像の切換操作が行われていない場合（ステップＳ１１１：Ｎｏ）、制御部１１は、画像再生の終了操作が行われたか否かを判断する（ステップＳ１１３）。具体的には、制御部１１は、ユーザによって撮影モード切換スイッチ６ｃが操作されたことにより、撮像装置１が再生モードから撮影モードに切換えられたか否かを判断する。ユーザによって画像再生の終了操作が行われていない場合（ステップＳ１１３：Ｎｏ）、撮像装置１はステップＳ１０８に戻る。一方、ユーザによって画像再生の終了操作が行われた場合（ステップＳ１１３）、撮像装置１はステップＳ１０１に戻る。
【００４７】
つぎに、図１１のステップＳ１０６のメニュー操作処理について説明する。図１２は、メニュー操作処理の概要を示すフローチャートである。
【００４８】
図１２において、まず、表示制御部１１ｅは、メニューアイコンを表示部７が表示する画像上に表示させる（ステップＳ２０１）。具体的には、図１３に示すように、表示制御部１１ｅは、撮影モードアイコンＱ１、ストロボアイコンＱ２、特殊撮影モードアイコンＱ３および戻るアイコンＱ４を表示部７が表示する画像Ｗ２１上に表示させる。撮影モードアイコンＱ１は、撮影モードの動作条件の詳細パラメータを表示部７に表示させる指示信号が入力されるアイコンである。撮影動作条件の詳細パラメータとしては、シャッタ速度、露出補正範囲、ＩＳＯ感度および絞り値等のパラメータが表示される。ストロボアイコンＱ２は、ストロボ（フラッシュ）のストロボ動作条件の詳細パラメータを表示部７に表示させる指示信号が入力されるアイコンである。ストロボ動作条件の詳細パラメータとしては、自動発光、発光禁止、赤目発光および強制発光等のパラメータが表示される。特殊撮影モードアイコンＱ３は、特殊撮影モードの下位メニュー（サブメニュー）を表示部７に表示させる指示信号が入力されるアイコンである。
【００４９】
続いて、制御部１１は、ユーザによって特殊撮影モードアイコンＱ３が操作されたか否かを判断する（ステップＳ２０２）。具体的には、図１３に示すように、制御部１１は、ユーザが表示部７の画像Ｗ２１上に表示される特殊撮影モードアイコンＱ３をタッチすることにより、タッチパネル８が入力を受け付けた信号によって特殊撮影モードアイコンＱ３が操作されたか否かを判断する。所定時間内、たとえば３０秒内にユーザによって特殊撮影モードアイコンＱ３が操作されていない場合（ステップＳ２０２：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによって特殊撮影モードアイコンＱ３が操作された場合（ステップＳ２０２：Ｙｅｓ）、撮像装置１はステップＳ２０３に移行する。
【００５０】
その後、表示制御部１１ｅは、特殊撮影モードの下位メニューアイコンを表示部７が表示する画像上に表示させる（ステップＳ２０３）。具体的には、図１４に示すように、表示制御部１１ｅは、表示部７が表示する画像Ｗ２１上にスイング合成アイコンＱ５、アートフィルタアイコンＱ６、スイングアートアイコンＱ７および戻るアイコンＱ４を表示させる。
【００５１】
ここで、図１４に示した各種アイコンについて説明する。スイング合成アイコンＱ５は、撮像装置１の撮影モードをスイング合成撮影モードに設定する指示信号を入力するアイコンである。スイング合成撮影モードとは、画像分離部１１ｂが撮影した画像から分離した被写体画像または背景画像を別の画像に合成して合成画像を生成する撮影モードである。アートフィルタアイコンＱ６は、撮像装置１の撮影モードを特殊効果撮影に設定する指示信号を入力するアイコンである。特殊効果撮影とは、撮影した画像に対して特殊効果画像生成部１１ｃがユーザによって設定された特殊効果を施して特殊効果画像を生成する撮影モードである。スイングアートアイコンＱ７は、撮像装置１の撮影モードをスイングアート撮影モードに設定する指示信号を入力するアイコンである。スイングアート撮影モードとは、画像分離部１１ｂが撮影した画像から分離した被写体画像または背景画像に対して、特殊効果画像生成部１１ｃがユーザによって設定された特殊効果を施して特殊効果画像を生成し、この生成した特殊効果画像を別の画像に合成して合成画像を生成する撮影モードである。
【００５２】
図１２に戻り、ステップＳ２０４において、制御部１１は、ユーザによってスイングアートアイコンＱ７が操作されたか否かを判断する。具体的には、図１４に示すように、制御部１１は、ユーザが表示部７の画面Ｗ２１上に表示されるスイングアートアイコンＱ７をタッチすることにより、タッチパネル８が入力を受け付けた信号によってスイングアートアイコンＱ７が操作されたか否かを判断する。所定時間内にユーザによってスイングアートアイコンＱ７が操作されていない場合（ステップＳ２０４：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによってスイングアートアイコンＱ７が操作された場合（ステップＳ２０４：Ｙｅｓ）、撮像装置１はステップＳ２０５に移行する。
【００５３】
続いて、表示制御部１１ｅは、画像データ記憶部９ａが記憶する画像データに対応する背景画像および複数の特殊効果アイコンを表示部７に表示させる（ステップＳ２０５）。具体的には、図１５に示すように、表示制御部１１ｅは、表示部７に背景画像Ｗ２２を表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、ノーマルアイコンＱ８、ソフトアイコンＱ９およびセピアアイコンＱ１０を表示部７に表示させる。
【００５４】
ここで、図１６を参照して、表示制御部１１ｅが表示部７に表示させる特殊効果用アイコンの表示方法について説明する。図１６は、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルの一例を示す図である。
【００５５】
図１６に示すように、特殊効果情報テーブルＴ１には、被写体画像および背景画像それぞれに適用可能な特殊効果が記載されている。具体的には、被写体画像に適用可能な特殊効果が、「ノーマル」、「ポップ」、「魚眼」、「ソフト」、「セピア」、「白黒」、「スケッチ」および「ミニチュア」である。一方、背景画像が適用可能な特殊効果が、「ノーマル」、「ポップ」、「魚眼」、「ソフト」、「セピア」、「白黒」、「スケッチ」および「ミニチュア」である。また、特殊効果情報テーブルＴ１には、被写体画像および背景画像それぞれに特殊効果を施して合成画像を生成する際の特殊効果の組み合わせに応じた推奨度（０〜５）が記載されている。具体的には、被写体画像の特殊効果が「ノーマル」の場合、背景画像の特殊効果において「ノーマル」、「ソフト」および「セピア」の組み合わせの推奨度として「５」が記載されている。さらに、「ポップ」、「白黒」および「スケッチ」の組み合わせの推奨度として「４」が記載され、「魚眼」および「ミニチュア」の組み合わせの推奨度として「１」が記載されている。すなわち、推奨度は、特殊効果の組み合わせの相性が良いほど数値が段階的に高く設定されている。なお、図１６に示す数値は、あくまでも例示にすぎずこれに限定されるものではなく、たとえば操作スイッチ６ｄ等で推奨度の数値を変更することも可能である。また、推奨度は、特殊効果の組み合わせの相性が良いほど数値を段階的に低く設定してもよい。
【００５６】
このように、表示制御部１１ｅは、表示部７に特殊効果用アイコンを表示する場合に、特殊効果情報テーブルＴ１を参照して、特殊効果の組み合わせの推奨度が高い順に表示させる。たとえば、表示制御部１１ｅは、図１５に示すように、表示部７によって現在表示されている背景画像Ｗ２２に特殊効果が施されておらず、背景画像Ｗ２２の状態が「ノーマル」の場合、特殊効果用アイコンとしてノーマルアイコンＱ８、ソフトアイコンＱ９およびセピアアイコンＱ１０を表示部７に表示させる制御を行う。これにより、表示装置１は、表示部７が現在表示している画像に最適な特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる。
【００５７】
つぎに、図１６に示した特殊効果それぞれについて説明する。ノーマルとは、特殊効果画像生成部１１ｃによって特殊効果を施さない状態である。ポップとは、色をカラフルで印象的に強調する効果である。たとえば画像データの色相および彩度を高めた処理を行う。魚眼とは、魚眼レンズを用いて撮影したように直線を円弧状に歪ませた画像に仕上げる効果である。たとえば画像データを座標変換等によって歪ませた画像に変更する処理を行う。ソフトとは、ソフトフォーカスレンズを用いて撮影したように画像全体を柔らかに仕上げる効果である。たとえば画像データのコントラストおよび彩度のレベルを低くした処理を行う。セピアとは、セピア調のモノクロームに仕上げる効果である。たとえばホワイトバランスおよびトーンカーブのレベルを低くした処理を行う。白黒とは、グレートーンで表現される白黒に画像を仕上げる効果である。たとえばホワイトバランスのレベルを低くした処理を行う。スケッチとは、輪郭を線画で描写するスケッチ風に画像を仕上げる効果である。ミニチュアとは、画面中央部にピントを合わせ、上下など周辺はコントラストを低くしてぼかす効果である。
【００５８】
図１２に戻り、ステップＳ２０６において、制御部１１は、ユーザによって背景画像の切換操作が行われたか否かを判断する。具体的には、図１５に示すように、制御部１１は、ユーザが別の背景画像に切換えを指示する指示信号の入力を受け付ける画像切換えアイコンＱ１１をタッチしたか否かを判断する。ユーザによって背景画像の切換操作が行われた場合（ステップＳ２０６：Ｙｅｓ）、表示制御部１１ｅは、表示部７が現在表示している背景画像から画像データ記憶部９ａが記憶する別の背景画像に切換えて表示部７に表示させ（ステップＳ２０７）、撮像装置１はステップＳ２０５に戻る。一方、ユーザによって背景画像の切換操作が行われていない場合（ステップＳ２０６：Ｎｏ）、撮像装置１はステップＳ２０８に移行する。
【００５９】
続いて、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する（ステップＳ２０８）。具体的には、図１５に示すように、制御部１１は、ユーザが表示部７の画面上に表示するノーマルアイコンＱ８、ソフトアイコンＱ９およびセピアアイコンＱ１０の何れか一つをタッチしたか否かを判断する。ユーザによって特殊効果アイコンが操作された場合（ステップＳ２０８：Ｙｅｓ）、特殊効果画像生成部１１ｃは、表示部７が現在表示している背景画像に対し、ユーザがタッチした特殊効果用アイコンに対応する特殊効果、たとえばソフトを施した特殊効果画像を生成し（ステップＳ２０９）、表示制御部１１ｅは、特殊効果画像（たとえば図１０（ｂ）を参照）を表示部７に表示させる（ステップＳ２１０）。
【００６０】
その後、制御部１１は、表示部７が現在表示している特殊効果画像を仮画像データ記憶部９ｃに仮記憶させ（ステップＳ２１１）、撮像装置１は図１１に示したメインルーチンに戻る。
【００６１】
ステップＳ２０８において、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ２０８：Ｎｏ）について説明する。この場合、制御部１１は、所定時間内にユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ２１２）。具体的には、図１５に示すように、制御部１１は、ユーザが表示部７によって現在表示されている特殊効果アイコンから次の推奨度が高い特殊効果アイコンに切換えを指示する指示信号の入力を受け付ける切換アイコンＱ１２をタッチしたか否かを判断する。所定時間内、たとえば３０秒内にユーザによって特殊効果アイコンの切換操作が行われていない場合（ステップＳ２１２：Ｎｏ）、撮像装置１は図１１に示すメインルーチンに戻る。一方、ユーザによって特殊効果アイコンの切換操作が行われた場合（ステップＳ２１２：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ１を参照して、次に推奨度が高い特殊効果アイコン、たとえば「ポップ」、「白黒」および「スケッチ」の特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ２１３）、撮像装置１はステップＳ２０５に戻る。
【００６２】
つぎに、図１１のステップ１０７の撮影処理について説明する。図１７は、撮影処理の概要を示すフローチャートである。なお、以下の説明においては、撮像装置１の撮影モードがスイングアート撮影に設定されている場合について説明する。
【００６３】
図１７に示すように、まず、制御部１１は、撮像装置１の撮影モードがスイングアート撮影に設定されているか否かを判断する（ステップＳ３０１）。撮像装置１の撮像モードがスイングアート撮影に設定されている場合（ステップＳ３０１：Ｙｅｓ）、撮像装置１は、被写体画像および背景画像それぞれに特殊効果を施して合成画像を生成するスイングアート撮影処理を実行し（ステップＳ３０２）、撮像装置１は図１１に示したメインルーチンに戻る。
【００６４】
ステップＳ３０１において、撮像装置１の撮影モードがスイングアート撮影に設定されていない場合（ステップＳ３０１：Ｎｏ）について説明する。この場合、撮像装置１は、被写体に対して撮影を行い（ステップＳ３０３）、表示制御部１１ｅは、撮影した画像データに対応する画像を表示部７にレックビュー表示させる（ステップＳ３０４）。
【００６５】
続いて、制御部１１は、撮影した画像データを記憶部９の画像データ記憶部９ａに記憶させ（ステップＳ３０５）、撮像装置１は図１１に示したメインルーチンに戻る。なお、ステップＳ３０５では、画像データとして圧縮データ（ＪＰＥＧ）と非圧縮データ（ＲＡＷ）をあわせて記憶してもよい。この場合には、後述する画像合成の際に、ユーザがこれらの画像データのいずれかを選択できるようにしてもよい。また、背景画像として、４：３、１６：９などの多種類のアスペクト比を設定可能とし、表現や目的に合わせてユーザが所望のアスペクト比を選択できるようにしてもよい。
【００６６】
つぎに、図１８のステップＳ３０２のスイングアート撮影処理について説明する。図１８は、スイングアート撮影処理の概要を示すフローチャートである。
【００６７】
図１８において、まず、制御部１１は、ユーザによって撮像装置１が移動を開始したか否かを判断する（ステップＳ４０１）。具体的には、制御部１１は、ユーザが撮像装置１を移動させた際（図４を参照）に姿勢検出部３が検出する加速度によって撮像装置１が移動を開始したか否かを判断する。撮像装置１が移動を開始していない場合（ステップＳ４０１：Ｎｏ）、制御部１１は、この判断を繰り返す。一方、撮像装置１が移動を開始した場合（ステップＳ４０１：Ｙｅｓ）、撮像装置１はステップＳ４０２に移行する。
【００６８】
続いて、撮像装置１は、被写体に対して微小な時間間隔で連続的に撮影を行い（ステップＳ４０２）、制御部１１は、撮影した画像を記憶部９の仮画像データ記憶部９ｃに仮記憶させる（ステップＳ４０３）。
【００６９】
その後、制御部１１は、撮像装置１が移動を停止したか否かを判断する（ステップＳ４０４）。撮像装置１が移動を停止していない場合（ステップＳ４０４：Ｎｏ）、撮像装置１はステップＳ４０２に戻る。一方、撮像装置１が移動を停止した場合（ステップＳ４０４：Ｙｅｓ）、撮像装置１はステップＳ４０５に移行する。
【００７０】
続いて、制御部１１は、画像分離部１１ｂが撮影した複数の画像から被写体画像と背景画像とを分離することが可能であるか否かを判断する（ステップＳ４０５）。具体的には、制御部１１は、画像分離部１１ｂが仮画像データ記憶部９ｃに記憶されている複数の画像、たとえば隣接する画像それぞれに含まれる被写体の視差（図７を参照）に基づいて、撮影した画像から被写体画像と背景画像とを分離することが可能であるか否かを判断する。画像分離部１１ｂが撮影した画像から被写体画像と背景画像とを分離することが可能でない場合（ステップＳ４０５：Ｎｏ）、表示制御部１１ｅは、撮影した画像から被写体画像と背景画像とを分離することができない旨の警告を表示部７に表示させ（ステップＳ４０６）、撮像装置１は図１１に示したメインルーチンに戻る。
【００７１】
ステップＳ４０５において、画像分離部１１ｂが撮影した画像から被写体画像と背景画像とを分離することが可能である場合（ステップＳ４０５：Ｙｅｓ）について説明する。この場合、画像分離部１１ｂは、撮影した画像から被写体画像を分離し（ステップＳ４０７）、合成画像生成部１１ｄは、画像分離部１１ｂが分離した被写体画像を、特殊効果画像生成部１１ｃが生成した特殊効果画像に合成して合成画像（たとえば図１０（ｃ）を参照）を生成する（ステップＳ４０８）。
【００７２】
続いて、表示制御部１１ｅは、合成画像生成部１１ｄが生成した合成画像を表示部７に表示させ（ステップＳ４０９）、制御部１１は、ユーザによってメニュースイッチ６ｅが操作されたか否かを判断する（ステップＳ４１０）。ユーザによってメニュースイッチ６ｅが操作された場合（ステップＳ４１０：Ｙｅｓ）、撮像装置１は後述するステップＳ４１１に移行する。一方、ユーザによってメニュースイッチ６ｅが所定時間内、たとえば３０秒内に操作されていない場合（ステップＳ４１０：Ｎｏ）、撮像装置１は後述するステップＳ４１９に移行する。
【００７３】
ステップＳ４１０において、ユーザによってメニュースイッチ６ｅが操作された場合（ステップＳ４１０：Ｙｅｓ）について説明する。この場合、表示制御部１１ｅは、表示部７が表示する画像上に画像選択アイコンおよび特殊効果アイコンを表示させる（ステップＳ４１１）。具体的には、図１９に示すように、表示制御部１１ｅは、表示部７が表示する合成画像Ｗ２３上に、背景画像に施す特殊効果の特殊効果アイコンに切換えを指示する背景選択アイコンＱ１３を表示させる。さらに、表示制御部１１ｅは、特殊効果情報テーブルＴ１を参照して、被写体画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示させる。たとえば、表示制御部１１ｅは、特殊効果画像生成部１１ｃが直近に施した背景画像に対する特殊効果が「ソフト」の場合、ノーマルアイコンＱ１４およびソフトアイコンＱ１５を表示部７に表示させる。さらにまた、表示制御部１１ｅは、特殊効果アイコンの切換えの指示信号の入力を受け付ける切換アイコンＱ１６およびスイングアート撮影の終了の指示信号の入力を受け付ける終了アイコンＱ１７を表示部７に表示させる。
【００７４】
続いて、制御部１１は、ユーザによって画像選択アイコンが操作されたか否かを判断する（ステップＳ４１２）。具体的には、図１９に示すように、制御部１１は、ユーザによって背景選択アイコンＱ１３が操作されたか否かを判断する。ユーザによって背景アイコンが操作された場合（ステップＳ４１２：Ｙｅｓ）、表示制御部１１ｅは、画像選択アイコンおよび特殊効果アイコンを切換えて表示させ（ステップＳ４１３）、撮像装置１はステップＳ４１２に戻る。具体的には、表示制御部１１ｅは、表示部７が表示する合成画像Ｗ２３上に、画像選択アイコンとして被写体アイコン（図示せず）を表示させるとともに、特殊効果情報テーブルＴ１を参照して、背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示させる。
【００７５】
ステップＳ４１２において、ユーザによって画像選択アイコンが操作されていない場合（ステップＳ４１２：Ｎｏ）について説明する。この場合、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する（ステップＳ４１４）。ユーザによって特殊効果アイコンが操作された場合（ステップＳ４１４：Ｙｅｓ）、特殊効果画像生成部１１ｃは、タッチパネル７が特殊効果アイコンの表示領域上に位置する接触領域で入力を受け付けた特殊効果アイコンに対応する特殊効果を被写体画像に施して特殊効果画像を生成する（ステップＳ４１５）。
【００７６】
続いて、合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが生成した特殊効果画像を用いて合成画像を生成し（ステップＳ４１６）、表示制御部１１ｅは、合成画像生成部１１ｄが生成した合成画像を表示部７に表示させる（ステップＳ４１７）。
【００７７】
その後、制御部１１は、所定時間内にユーザによって終了アイコンＱ１７が操作されたか否かを判断する（ステップＳ４１８）。所定時間内、たとえば３０秒内にユーザによって終了アイコンＱ１７が操作されない場合（ステップＳ４１８：Ｎｏ）、撮像装置１はステップＳ４１２に戻る。一方、所定時間内にユーザによって終了アイコンＱ１７が操作された場合（ステップＳ４１８：Ｙｅｓ）、制御部１１は、表示部７が現在表示している画像に対応する画像データを画像データ記憶部９ａに記憶させ（ステップＳ４１９）、撮像装置１は図１１に示したメインルーチンに戻る。
【００７８】
ステップＳ４１４において、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ４１４：Ｎｏ）について説明する。この場合、制御部１１は、ユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ４２０）。具体的には、制御部１１は、ユーザによって切換アイコンＱ１６（図１９を参照）が操作されたか否かを判断する。ユーザによって特殊効果アイコンの切換操作がない場合（ステップＳ４２０：Ｎｏ）、撮像装置１はステップＳ４１８に移行する。一方、ユーザによって特殊効果の切換操作が行われた場合（ステップＳ４２０：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報テーブルＴ１を参照して、次に推奨度が高い特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ４２１）、撮像装置１はステップＳ４１２に戻る。具体的には、表示制御部１１ｅは、次に推奨度が高い特殊効果アイコンとして「セピア」および「白黒」の特殊効果アイコンを表示部７に表示させる。
【００７９】
以上説明した本実施の形態１では、特殊効果画像生成部１１ｃが被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が合成画像生成部１１ｄによって被写体画像および背景画像の他方と合成された場合、表示制御部１１ｅは、この合成された合成画像を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ１を参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。これにより、２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる。
【００８０】
さらに、本実施の形態１では、表示制御部１１ｅが、最初に推奨度が高い組み合わせの特殊効果アイコンを表示部７に表示するので、ユーザは特殊効果の選択操作によって被写体のシャッタチャンスを逃すことなく、被写体画像および背景画像それぞれに特殊効果を施した合成画像を得ることができる。
【００８１】
（実施の形態２）
つぎに、本実施の形態２について説明する。上述した本実施の形態１では、表示制御部が、特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させていた。これに対して、本実施の形態２では、特殊効果情報記憶部が当該撮像装置で設定可能な撮影モードと被写体画像または背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルを記憶し、表示制御部が、入力部からの入力によって撮影モードが設定された場合、第２特殊効果情報テーブルを参照して、設定された撮影モードとの組み合わせに応じた推奨度の高い順に特殊効果に関する情報を表示部に表示させる。なお、本実施の形態２の撮像装置は、上述した本実施の形態１の撮像装置１と同様の構成を有する。このため、本実施の形態２では、撮像装置１に備えられた各種撮影シーンに応じてそれぞれ設定された複数の撮影モードについて説明する。
【００８２】
まず、本実施の形態２に係る撮像装置１に備えられた各種撮影シーンに応じてそれぞれ設定された複数の撮影モードについて説明する。本実施の形態２に係る撮像装置１は、撮像モードとして、通常撮影、パノラマ撮影、スイング３Ｄ撮影、３Ｄ撮影、ＨＤＲ（High Dynamic Range）撮影およびＳストロボ撮影が備えられている。なお、上記した撮影モードは、あくまでも例示にすぎず、これに限定されるものではない。
【００８３】
図２０は、撮像装置１が行う撮影モードにおけるパノラマ撮影の撮影方法を説明する模式図である。図２０に示すように、撮像装置１は、ユーザによって左側から右側に移動ささせられることによって、複数の撮影位置で連続的に撮影した複数の画像データを生成する。具体的には、図２０に示すように、撮像装置１は、画像Ｗ３１〜Ｗ３３を生成する（図２０（ａ））。その後、合成画像生成部１１ｄが、画像Ｗ３１〜Ｗ３３の短手方向の端部同士を重ねて合成した一枚のパノラマ画像Ｗ３４を生成する（図２０（ｂ））。これにより、ユーザは、撮像装置１を移動させながら撮影することによって、パノラマ画像Ｗ３４を得ることができる。なお、図２０（ａ）においては、撮像部２が生成する複数の画像のうち、代表的な３枚の画像Ｗ３１〜Ｗ３３を示し、各画像Ｗ３１〜Ｗ３３の間には複数の画像が存在する。
【００８４】
また、撮像装置１は、ユーザによって撮像装置１を移動させながら撮影することにより、撮像装置１の撮影モードにおける３Ｄ撮影およびスイング３Ｄ撮影を行うことができる。３Ｄ撮影とは、ユーザが撮像装置１を移動させながら被写体を連続的に撮影することにより、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する撮影である。具体的には、図２０に示すように、ユーザが撮像装置１を左から右に向けて移動させながら撮像装置１が被写体Ａ１を連続的に撮影することにより、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する。これにより、撮像装置１は、ユーザが仮想的に認識する３次元画像（以下、「３Ｄ画像」という）を生成することができる。さらに、スイング３Ｄ撮影とは、撮影した３Ｄ画像に対して特殊効果を施して特殊効果３Ｄ画像を生成する撮影である。具体的には、画像分離部１１ｂによって３Ｄ画像内から被写体画像および背景画像を分離し、分離した被写体画像および背景画像に特殊効果画像生成部１１ｃが特殊効果をそれぞれ施して特殊効果画像を生成する。その後、合成画像生成部１１ｄが特殊効果画像を合成して特殊効果３Ｄ画像を生成する。これにより、撮像装置１は、３Ｄ画像に特殊効果を施した特殊効果３Ｄ画像を生成することができる。
【００８５】
図２１は、撮像装置１が行う撮影モードにおけるＨＤＲ撮影の撮影方法を説明する模式図である。図２２は、図２１に示す状況下で撮像装置１が生成する画像の一例を示す図である。なお、図２２において、画像Ｗ４０が、図２１（ａ）に示す状況下で撮像装置１が生成する画像であり、画像Ｗ４１が、図２１（ｂ）に示す状況下で撮像装置１が生成する画像である。ＨＤＲ撮影とは、ダイナミックレンジの大きな画像を得るために、明るさが暗い部分用の画像と明るさが明るい部分用の画像とを合成することによって明るさの再現域を拡大する撮影である。
【００８６】
図２１に示すように、まず、撮像装置１は、ストロボ４の光を被写体Ａ３に照射して被写体Ａ３を撮影して画像Ｗ４０を生成する（図２２（ａ））。続いて、撮像装置１は、露光時間を通常の撮影より長く、たとえば２倍長くした露光時間で被写体Ａ３を撮影して画像Ｗ４１を生成する（図２２（ｂ））。その後、画像分離部１１ｂが、画像Ｗ４０の輝度値と画像Ｗ４１の輝度値との差分に基づいて、画像Ｗ４０および画像Ｗ４１からそれぞれ被写体画像と背景画像とを分離する。具体的には、画像分離部１１ｂは、画像Ｗ４０の輝度値と画像Ｗ４１の輝度値との差が閾値以上ある領域を被写体画像として特定して分離する。これに対して、画像分離部１１ｂは、画像Ｗ４０の輝度値と画像Ｗ４１の輝度値との差が閾値未満である領域を背景画像として特定して分離する。続いて、合成画像生成部１１ｄは、画像分離部１１ｂが画像Ｗ４０から分離した被写体画像と画像Ｗ４１から分離した背景画像とを合成して合成画像を生成する。これにより、撮像装置１は、被写体Ａ３と背景とを最適な輝度値を有する合成画像を生成することができる。
【００８７】
また、撮像装置１は、ストロボの発光を通常撮影より強めて撮影するＳストロボ撮影または絞り値を通常撮影より高めることにより背景をぼかした背景ぼかし撮影を行うことができる。ここで、Ｓストロボとは、ストロボを発光させた画像と、ストロボを発光させずに露出時間を長くした画像とを合成し、背景が真っ暗になることを防ぎ、背景および人物を正しく再現させる処理である。また、背景ぼかしとは、画像の明るさの変化を小さくし、コントラストを低くする処理である。
【００８８】
以上の撮像モードを備えた本実施の形態２に係る撮像装置１が行う処理について説明する。本実施の形態２に係る撮像装置１が行う処理は、上述した本実施の形態１と同様の処理を行い（図１１を参照）、メニュー操作処理と撮影処理が異なる。このため、本実施の形態２に係る撮像装置１が行うメニュー操作処理を説明後、本実施の形態２に係る撮像装置１が行う撮影処理を説明する。
【００８９】
図２３は、本実施の形態２に係る撮像装置１が行うメニュー操作処理の概要を示すフローチャートである。
【００９０】
図２３において、まず、表示制御部１１ｅは、メニューアイコン（図１３を参照）を表示部７が表示する画像上に表示させ（ステップＳ５０１）、制御部１１は、ユーザによって特殊撮影モードアイコンが操作されたか否かを判断する（ステップＳ５０２）。所定時間内にユーザによって特殊撮影モードアイコンが操作されていない場合（ステップＳ５０２：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによって特殊撮影モードアイコンが操作された場合（ステップＳ５０２：Ｙｅｓ）、撮像装置１はステップＳ５０３に移行する。
【００９１】
続いて、表示制御部１１ｅは、特殊撮影モードの下位メニューアイコンを表示部７が表示する画像上に表示させる（ステップＳ５０３）。具体的には、図２４に示すように、表示制御部１１ｅは、表示部７が表示する画像Ｗ５０上に、撮像装置１にパノラマ撮影の設定を指示する指示信号が入力されるパノラマアイコンＱ２１および撮像装置１にスイング３Ｄ撮影の設定を指示する指示信号が入力されるスイング３ＤアイコンＱ２２等を表示させる。なお、図２４においては、撮影モードの下位メニューアイコンとして、パノラマアイコンＱ２１およびスイング３ＤアイコンＱ２２のみであったが、これに限定されるものでない。具体的には、表示制御部１１ｅは、ユーザによって撮影モードの切換を指示する指示信号の入力を受け付ける切換アイコンＱ２３，２４が操作された場合、他の下位メニューアイコン、たとえば撮像装置１に３Ｄ撮影の設定を指示する指示信号が入力される３Ｄ撮影アイコンを表示部７に表示させる。
【００９２】
続いて、制御部１１は、ユーザによってスイング３Ｄアイコンが操作されたか否かを判断する（ステップＳ５０４）。所定時間内にユーザによってスイング３Ｄアイコンが操作されていない場合（ステップＳ５０４：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによってスイング３Ｄアイコンが操作された場合（ステップＳ５０４：Ｙｅｓ）、撮像装置１はステップＳ５０５に移行する。
【００９３】
その後、表示制御部１１ｅは、画像選択アイコンおよび特殊効果アイコンを表示部７が表示する画像上に表示させる（ステップＳ５０５）。具体的には、図２５に示すように、表示制御部１１ｅは、画像選択アイコンとして被写体選択アイコンＱ２６を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する第２特殊効果情報テーブルを参照して、設定された撮影モードとの組み合わせに応じた推奨度の高い順に特殊効果に関する情報としてポップアイコンＱ２７を表示させる。なお、図２５において、アイコンＱ２５は、ユーザによって設定された現在の撮像装置１の撮影モードに関する情報およびユーザによって設定された特殊効果を施す対象の画像の情報を示すアイコンである。
【００９４】
ここで、図２６を参照して、表示制御部１１ｅが表示部７に表示させる特殊効果アイコンの表示方法について説明する。図２６は、特殊効果情報記憶部９ｄが記憶する第２特殊効果情報テーブルの一例を示す図である。
【００９５】
図２６に示すように、特殊効果情報テーブルＴ２は、撮像装置１で設定可能な撮影モードに対して適用可能な特殊効果が記載されている。具体的には、撮影モードに適用可能な特殊効果が、「ミニチュア」、「ポップ」、「魚眼」、「ソフト」、「セピア」、「白黒」および「スケッチ」である。さらに、撮像装置１で設定可能な撮像モードと被写体画像または背景画像に施す特殊効果との組み合わせに応じた推奨度が数値（０〜５）で記載されている。具体的には、撮影モードが「スイング３Ｄ」の場合、特殊効果の「ポップ」の推奨度として「５」が記載されている。さらに、撮影モードが「スイング３Ｄ」の場合、特殊効果の「魚眼」の推奨度として「０」が記載されている。この撮像モードと特殊効果との推奨度が「０」になる組み合わせは、撮影した画像に対して特殊効果による顕著な視覚効果を得られない組み合わせである。このため、本実施の形態２では、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する第２特殊効果情報テーブルＴ２を参照して、特殊効果アイコンを撮影モードと推奨度が高い順に表示部７に表示させる制御を行う。さらに、表示制御部１１ｅは、撮影モードに組み合わせが可能な特殊効果のアイコンのみを表示部７に表示させる制御を行う。すなわち、表示制御部１１ｅは、撮像モードと特殊効果との推奨度が「０」の特殊効果アイコンを表示部７に表示させない制御を行う。
【００９６】
図２３に戻り、ステップＳ５０６において、制御部１１は、ユーザによって終了アイコンＱ２９（図２５を参照）が操作されたか否かを判断する。ユーザによって終了アイコンＱ２９が操作された場合（ステップＳ５０６：Ｙｅｓ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによって終了アイコンＱ２９が操作されていない場合（ステップＳ５０６：Ｎｏ）、撮像装置１はステップＳ５０７に移行する。
【００９７】
続いて、制御部１１は、ユーザによって画像選択アイコンが操作されたか否かを判断する（ステップＳ５０７）。具体的には、図２５に示すように、制御部１１は、被写体画像に施す特殊効果の設定に切換える指示信号の入力を受け付ける被写体選択アイコンＱ２６が操作されたか否かを判断する。ユーザによって画像選択アイコンが操作されていない場合（ステップＳ５０８：Ｎｏ）、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する（ステップＳ５０８）。具体的には、図２５に示すように、制御部１１は、ユーザによってポップアイコンＱ２７が操作されたか否かを判断する。ユーザによって特殊効果アイコンが操作された場合（ステップＳ５０８：Ｙｅｓ）、制御部１１は、ユーザによって操作された特殊効果アイコンに応じて背景画像の特殊効果を設定し、この設定した設定内容を仮画像データ記憶部９ｃに記憶し（ステップＳ５０９）、撮像装置１はステップＳ５０５に戻る。
【００９８】
ステップＳ５０８において、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ５０８：Ｎｏ）について説明する。この場合、制御部１１は、ユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ５１０）。具体的には、図２５に示すように、制御部１１は、ユーザが表示部７によって現在表示されている特殊効果アイコンから次に推奨度が高い特殊効果アイコンに切換えを指示する指示信号の入力を受け付ける切換アイコンＱ２８を操作したか否かを判断する。所定時間内にユーザによって特殊効果アイコンの切換操作が行われない場合（ステップＳ５１０：Ｎｏ）、撮像装置１はステップＳ５０５に戻る。一方、ユーザによって特殊効果アイコンの切換操作が行われた場合（ステップＳ５１０：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ２を参照して、次に推奨度が高い特殊効果アイコン、たとえば「白黒」の特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ５１１）、撮像装置１はステップＳ５０８に戻る。
【００９９】
ステップＳ５０７において、ユーザによって画像選択アイコンが操作された場合（ステップＳ５０７：Ｙｅｓ）について説明する。この場合、表示制御部１１ｅは、画像選択アイコン、および特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、特殊効果アイコンを表示部７が表示する画像上に表示させる（ステップＳ５１２）。具体的には、図２７に示すように、表示制御部１１ｅは、画像選択アイコンＱ３０を表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、ノーマルアイコンＱ３１、セピアアイコンＱ３２および白黒アイコンＱ３３を表示部７に表示させる。なお、図２７において、画像選択アイコンＱ３０には、ユーザによって設定された現在の撮像装置１の撮影モードと背景に設定された特殊効果の情報、たとえば特殊効果として白黒効果が付加されて表示される。これにより、ユーザは、背景画像に対して設定した特殊効果を確認しながら、被写体画像に施す特殊効果の設定を行うことができる。
【０１００】
ここで、図２８を参照して、表示制御部１１ｅが表示部７に表示させる特殊効果アイコンの表示方法について説明する。図２８は、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルの一例を示す図である。
【０１０１】
図２８に示すように、特殊効果情報テーブルＴ３は、被写体画像および背景画像それぞれに適用可能な特殊効果が記載されている。具体的には、特殊効果情報テーブルＴ３には、被写体画像および背景画像それぞれに特殊効果を施して合成画像を生成する際の特殊効果の組み合わせの推奨度が数値（０〜５）で記載されている。具体的には、被写体画像の特殊効果が「ノーマル」の場合、背景画像の特殊効果において「ノーマル」、「ソフト」および「白黒」の推奨度として「５」が記載されている。さらに、「セピア」の推奨度として「４」が記載され、「ポップ」、「魚眼」、「スケッチ」および「ミニチュア」の推奨度として「０」が記載されている。特殊効果の推奨度が「０」になる特殊効果の組み合わせは、撮影した画像に対して特殊効果による顕著な視覚効果を得られない組み合わせである。このため、本実施の形態２では、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ３を参照して、特殊効果の組み合わせが可能な特殊効果のアイコンのみを表示部７に表示させる制御を行う。すなわち、表示制御部１１ｅは、特殊効果の組み合わせ推奨度が「０」の特殊効果アイコンを表示部７に表示させない制御（制限）を行う。これにより、ユーザは、背景画像および被写体画像それぞれに対して特殊効果を設定して合成画像を生成する場合、画像が不自然になることを確実に防止することができる。
【０１０２】
図２３に戻り、ステップｓ５１３において、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する。ユーザによって特殊効果アイコンが操作された場合（ステップＳ５１３：Ｙｅｓ）、制御部１１は、ユーザによって操作された特殊効果アイコンに応じた被写体画像の特殊効果を設定し、この設定した設定内容を仮画像データ記憶部９ｃに記憶し（ステップＳ５１４）、撮像装置１はステップＳ５０５に戻る。
【０１０３】
これに対して、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ５１３：Ｎｏ）、制御部１１は、ユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ５１５）、具体的には、図２７に示すように、制御部１１は、ユーザが表示部７によって現在表示されている特殊効果アイコンから次の推奨度が高い特殊効果アイコンに切換えを指示する指示信号の入力を受け付ける切換アイコンＱ３４がタッチしたか否かを判断する。所定時間内にユーザによって特殊効果アイコンの切換操作が行われていない場合（ステップＳ５１５：Ｎｏ）、撮像装置１はステップＳ５０５に戻る。一方、ユーザによって特殊効果アイコンの切換操作が行われた場合（ステップＳ５１５：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ３を参照して、次に推奨度が高い特殊効果アイコン、たとえば「ポップ」の特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ５１６）、撮像装置１はステップＳ５０５に戻る。
【０１０４】
つぎに、本実施の形態２に係る撮像装置１が行う撮影処理について説明する。図２９は、撮影処理の概要を示すフローチャートである。なお、以下の説明においては、撮像装置１の撮影モードがスイング３Ｄ撮影に設定されている場合について説明する。
【０１０５】
図２９に示すように、まず、制御部１１は、撮像装置１の撮影モードがスイング３Ｄ撮影に設定されているか否かを判断する（ステップＳ６０１）。撮像装置１の撮影モードがスイング３Ｄ撮影に設定されている場合（ステップＳ６０１：Ｙｅｓ）、制御部１１は、ユーザによって撮像装置１が移動を開始したか否かを判断する（ステップＳ６０２）。撮像装置１が移動を開始していない場合（ステップＳ６０２：Ｎｏ）、制御部１１は、この判断を繰り返す。一方、ユーザによって撮像装置１が移動を開始した場合（ステップＳ６０２：Ｙｅｓ）、撮像装置１はステップＳ６０３に移行する。
【０１０６】
続いて、撮像装置１は、微小な時間間隔で連続的に撮影を行い（ステップＳ６０３）、制御部１１は、撮影した画像を仮画像データ記憶部９ｃに仮記憶させる（ステップＳ６０４）。
【０１０７】
その後、制御部１１は、撮像装置１が移動を停止したか否かを判断する（ステップＳ６０５）。撮像装置１が移動を停止していない場合（ステップＳ６０５：Ｎｏ）、撮像装置１はステップＳ６０３に戻る。一方、撮像装置１が移動を停止した場合（ステップＳ６０５：Ｙｅｓ）、撮像装置１はステップＳ６０６に移行する。
【０１０８】
続いて、制御部１１は、画像分離部１１ｂが撮影した複数の画像から被写体画像と背景画像とを分離することが可能であるか否かを判断する（ステップＳ６０６）。画像分離部１１ｂが撮影した複数の画像から被写体画像と背景画像とを分離することができない場合（ステップＳ６０６：Ｎｏ）、表示制御部１１ｅは、撮影した画像から被写体画像と背景画像とを分離することができない旨の警告を表示部７に表示させ（ステップＳ６０７）、撮像装置１は図１１に示したメインルーチンに戻る。
【０１０９】
ステップＳ６０６において、画像分離部１１ｂが撮影した画像から被写体画像と背景画像とを分離することが可能である場合（ステップＳ６０６：Ｙｅｓ）について説明する。この場合、画像分離部１１ｂは、撮影した画像から被写体画像と背景画像とを分離し（ステップＳ６０８）、特殊効果画像生成部１１ｃは、仮画像データ記憶部９ｃに記憶された被写体画像と背景画像とにそれぞれ設定された特殊効果を施して特殊効果画像を生成する（ステップＳ６０９）。
【０１１０】
続いて、合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが生成した被写体画像および背景画像それぞれの特殊効果画像を合成して合成画像を生成し（ステップＳ６１０）、表示制御部１１ｅは、合成画像生成部１１ｄが生成した合成画像を用いて３Ｄ特殊効果画像を表示部７に表示させる（ステップＳ６１１）。具体的には、図３０に示すように、表示制御部１１ｅは、合成画像ＷＬ２および合成画像ＷＲ２の２つの画像データを用いて３Ｄ画像を表示部７に表示させる。これにより、ユーザは、被写体画像および背景画像それぞれに特殊効果を施した３Ｄ画像を仮想的に視認することができる。
【０１１１】
その後、制御部１１は、表示部７が現在表示している画像を画像データ記憶部９ａに記憶させ（ステップＳ６１２）、撮像装置１は図１１に示したメインルーチンに戻る。
【０１１２】
ステップＳ６０１において、撮像装置１の撮影モードがスイング３Ｄ撮影に設定されていない場合（ステップＳ６０１：Ｎｏ）について説明する。この場合、撮像装置１は、被写体に対して撮影を行い（ステップＳ６１３）、表示制御部１１ｅは、撮影した画像を表示部７にレックビュー表示させる（ステップＳ６１４）。
【０１１３】
その後、制御部１１は、撮影した画像を画像データ記憶部９ａに記憶させ（ステップＳ６１５）、撮像装置１は図１１に示したメインルーチンに戻る。
【０１１４】
以上説明した本実施の形態２によれば、特殊効果情報記憶部９ｄが撮像装置１で設定可能な撮影モードと被写体画像または背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルＴ２を記憶し、表示制御部１１ｅが、タッチパネル８からの入力によって撮影モードが設定された場合、第２特殊効果情報テーブルを参照して、設定された撮影モードとの組み合わせに応じた推奨度の高い順に特殊効果に関する情報を表示部７に表示させる。これにより、ユーザが撮影モードと特殊効果とを組み合わせて撮影を行う場合に、撮像モードと特殊効果との組み合わせの選択の指針となる情報をユーザに提示することができる。
【０１１５】
さらに、本実施の形態２によれば、表示制御部１１ｅが、撮影モードと特殊効果との組み合わせが可能な特殊効果に対応する特殊効果アイコンのみ表示部７に表示させる制御を行う。これにより、ユーザは、撮影モードと特殊効果とを組み合わせて撮影を行う場合、撮影する画像が不自然になることを確実に防止することができる。
【０１１６】
なお、上述した実施の形態２では、撮像装置１がユーザによって移動させながら撮影することにより、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成していたが、たとえば、撮像部を２つの光学系を有する構成にすることによって互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成するようにしてもよい。
【０１１７】
（その他の実施の形態）
また、本実施の形態１，２では、表示制御部１１ｅが、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、特殊効果の組み合わせの推奨度が高い順に特殊効果アイコンの色および／または大きさを変えた表示態様で表示部７に強調表示させてもよい。これにより、ユーザは、特殊効果との組み合わせの選択の指針となる情報に基づいて、最適な特殊効果の組み合わせを直感的に選択することができる。
【０１１８】
また、本実施の形態１，２では、合成画像生成部１１ｄが、画像分離部１１ｂによって分離された被写体画像および背景画像それぞれに特殊効果が施された特殊効果画像を合成していたが、たとえば画像データ記憶部９ａが記憶する画像（圧縮データまたは非圧縮データ、アスペクト比ごとに分類された圧縮データまたは非圧縮データ等）と多重露出で撮影した直後の画像とに特殊効果をそれぞれ施して２つの特殊効果画像を生成し、この生成した２つの特殊効果画像を合成して合成画像を生成するようにしてもよい。
【０１１９】
また、本実施の形態１，２では、姿勢検出部３は、撮像装置１の姿勢状態を検出していたが、たとえば、ユーザが表示部７の表示画面をタップした際に生じる加速度を検出することにより、撮像装置１の各種撮影モードまたは各種設定を切換えるタッチ操作の操作信号を受け付け、この操作信号を制御部１１に出力するようにしてもよい。
【０１２０】
また、本実施の形態１，２では、通信部１０を介してパーソナルコンピュータやサーバ等の外部処理装置に接続することによって、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルの更新または書き換えを行ってもよい。これにより、表示制御部１１ｅは、新たに追加された特殊効果や撮影モードの組み合わせを加味した推奨度で特殊効果アイコンを表示することができる。さらに、記憶部９に装着可能な記憶媒体、たとえばメモリカード等に新たに追加された特殊効果や撮影モードの組み合わせの推奨度を記憶させ、制御部１１が記憶媒体から取得して特殊効果情報記憶部９ｄに記憶させることで特殊効果情報テーブルの更新または書き換えを行ってもよい。
【０１２１】
また、本実施の形態１，２では、撮像装置１をデジタルカメラとして説明していたが、たとえばデジタルビデオカメラ、カメラ付き携帯電話等の撮影機能および表示機能を備えた各種電子機器に適用することができる。
【符号の説明】
【０１２２】
１ 撮像装置
２ 撮像部
２ａ レンズ部
２ｂ レンズ駆動機構
２ｃ 絞り
２ｄ 絞り駆動機構
２ｅ シャッタ
２ｆ シャッタ駆動機構
２ｇ 撮像素子
２ｈ 信号処理部
３ 姿勢検出部
４ ストロボ
５ 時計
６ 操作入力部
６ａ 電源スイッチ
６ｂ レリーズスイッチ
６ｃ 撮影モード切換スイッチ
６ｅ メニュースイッチ
６ｆ ズームスイッチ
７ 表示部
８ タッチパネル
９ 記憶部
９ａ 画像データ記憶部
９ｂ プログラム記憶部
９ｃ 仮画像データ記憶部
９ｄ 特殊効果情報記憶部
１０ 通信部
１１ 制御部
１１ａ 画像処理部
１１ｂ 画像分離部
１１ｃ 特殊効果画像生成部
１１ｄ 合成画像生成部
１１ｅ 表示制御部
【技術分野】
【０００１】
本発明は、被写体を撮影して電子的な画像データを生成する撮像装置および撮像プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタルビデオなどの撮像装置においては、被写体を撮像した画像データに特殊効果を施すことによって、消費者の様々な要望に応える技術が知られている。たとえば、撮影した画像データにワイプやセピア等の特殊効果を施して記録することができる技術が知られている（特許文献１参照）。この技術では、ユーザが特殊効果を選択するエフェクトスイッチを操作している際に選択された特殊効果を施した画像を、表示モニタが表示している画像上の一部に表示させることにより、ユーザに所望の特殊効果を容易に選択させることができるようになっている。
【０００３】
また、同一の被写体に対して複数回撮影し、撮影した複数の画像を用いて画像内に含まれる被写体画像と背景画像とを分離後、背景画像にぼかしを施し、再度被写体画像に合成することができる撮像装置が知られている（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３４７８８６号公報
【特許文献２】特許第４３２１２８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、従来の撮像装置では、２つの画像データを用いて合成画像を生成する場合に、２つの画像データそれぞれに異なる特殊効果を組み合わせて合成画像を生成していなかった。そこで、２つの画像データそれぞれに対して異なる特殊効果を施すことが考えられる。しかしながら、異なる特殊効果の組み合わせがすべてよいわけではなく、中には効果が相殺されてしまうような組み合わせもあり、組み合わせの選択の指針となる情報が求められていた。
【０００６】
本発明は、上記に鑑みてなされたものであって、２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明に係る撮像装置は、被写体を撮像して該被写体の電子的な画像データを生成し、この生成された画像データに対応する画像を表示する表示部を有し、前記画像に特殊効果を施すことが可能な撮像装置であって、前記表示部が表示する前記画像から被写体画像と背景画像とを分離する画像分離部と、前記画像分離部が分離した前記被写体画像および前記背景画像に対してそれぞれ施す特殊効果に関する情報の入力を受け付ける入力部と、前記入力部が受け付けた情報に応じた特殊効果を前記被写体画像および前記背景画像に対して個別に施して各画像の特殊効果画像を生成する特殊効果画像生成部と、前記特殊効果画像生成部が前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部と、前記特殊効果画像生成部が生成した前記特殊効果画像を用いて合成画像を生成する合成画像生成部と、前記表示部の表示を制御する表示制御部と、を備え、前記特殊効果画像生成部が前記被写体画像および前記背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が前記合成画像生成部によって前記被写体画像および前記背景画像の他方と合成された場合、前記表示制御部は、この合成された合成画像を前記表示部に表示させるとともに、前記記憶部が記憶する特殊効果情報テーブルを参照して、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に前記表示部に表示させることを特徴とする。
【０００８】
また、本発明に係る撮像装置は、上記発明において、前記記憶部は、当該撮像装置で設定可能な撮影モードと前記被写体画像または前記背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルを記憶し、前記入力部は、撮影モードの設定入力を受け付け、前記表示制御部は、前記入力部からの入力によって撮影モードが設定された場合、前記記憶部が記憶する第２特殊効果情報テーブルを参照して、設定された前記撮影モードとの組み合わせに応じた前記推奨度の高い順に前記特殊効果に関する情報を前記表示部に表示させることを特徴とする。
【０００９】
また、本発明に係る撮像装置は、上記発明において、前記表示制御部は、前記直近に施した特殊効果に対して組み合わせることが可能な特殊効果に関する情報のみを前記表示部に表示させることを特徴とする。
【００１０】
また、本発明に係る撮像装置は、上記発明において、前記入力部は、前記表示部の表示画面上に設けられ、外部から接触する物体の位置に応じた信号の入力を受け付けるタッチパネルを有し、前記表示制御部は、前記特殊効果に関する情報をアイコンによって前記表示部に表示させ、前記特殊効果画像生成部は、前記タッチパネルが前記アイコンの表示領域上に位置する接触領域で入力を受け付けた前記アイコンに対応する特殊効果を、前記被写体画像または前記背景画像に施して前記特殊効果画像を生成することを特徴する。
【００１１】
また、本発明に係る撮像装置は、上記発明において、前記表示制御部は、前記直近に施した特殊効果との組み合わせに応じて前記アイコンの色および／または大きさを変えた表示態様で前記表示部に強調表示させることを特徴とする。
【００１２】
また、本発明に係る撮像プログラムは、被写体を撮像して該被写体の電子的な画像データを生成し、該画像データに対応する画像を表示可能であるとともに、前記画像に特殊効果を施すことが可能な撮像装置に、前記画像から被写体画像と背景画像とを分離する画像分離ステップと、前記画像分離ステップで分離した前記被写体画像および前記背景画像の一方に対して特殊効果を施した特殊効果画像を生成する特殊効果画像生成ステップと、前記特殊効果画像生成ステップで生成した特殊効果画像を前記被写体画像および前記背景画像の他方と合成して合成画像を生成する合成画像生成ステップと、前記合成画像生成ステップで生成した合成画像を表示するとともに、前記特殊効果画像生成部が前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部から該特殊効果情報テーブルを読み出して参照し、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に表示する表示ステップと、を実行させることを特徴とする。
【発明の効果】
【００１３】
本発明によれば、特殊効果画像生成部が被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が画像合成部によって被写体画像および背景画像の他方と合成された場合、表示制御部が、この合成された合成画像を表示部に表示させるとともに、記憶部が記憶する特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に表示部に表示させ。これにより、ユーザは、２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報を直感的に認識することができるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】図１は、本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。
【図２】図２は、本発明の実施の形態１に係る撮像装置の前面側の構成を示す斜視図である。
【図３】図３は、本発明の実施の形態１に係る撮像装置の背面側の構成を示す斜視図である。
【図４】図４は、本発明の実施の形態１に係る撮像装置が備える撮像部が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。
【図５】図５は、図４に示す状況下で撮像部が生成する画像データに対応する画像の一例を示す図である。
【図６】図６は、図４に示す状況下で撮像部が生成する画像データに対応する画像の一例を示す図である。
【図７】図７は、図４に示す状況下で撮像部が異なる撮影位置でそれぞれ生成した画像を仮想的に重ねた画像の一例を示す図である。
【図８】図８は、本発明の実施の形態１に係る撮像装置が備える画像分離部が生成する背景画像の一例を示す図である。
【図９】図９は、本発明の実施の形態１に係る撮像装置が備える画像分離部が生成する被写体画像の一例を示す図である。
【図１０】図１０は、本発明の実施の形態１に係る撮像装置が備える特殊効果画像生成部および合成画像生成部による処理の概要を説明する模式図である。
【図１１】図１１は、本発明の実施の形態１に係る撮像装置が行う処理の概要を示すフローチャートである。
【図１２】図１２は、本発明の実施の形態１に係る撮像装置が行うメニュー操作処理の概要を示すフローチャートである。
【図１３】図１３は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図１４】図１４は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図１５】図１５は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図１６】図１６は、本発明の実施の形態１に係る撮像装置が備える特殊効果情報記憶部が記憶する特殊効果情報テーブルの一例を示す図である。
【図１７】図１７は、本発明の実施の形態１に係る撮像装置が行う撮影処理の概要を示すフローチャートである。
【図１８】図１８は、本発明の実施の形態１に係る撮像装置が行うスイング撮影処理の概要を示すフローチャートである。
【図１９】図１９は、本発明の実施の形態１に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２０】図２０は、本発明の実施の形態２に係る撮像装置が行う撮影モードにおけるパノラマ撮影の撮影方法を説明する模式図である。
【図２１】図２１は、本発明の実施の形態２に係る撮像装置が行う撮影モードにおけるＨＤＲ撮影の撮影方法を説明する模式図である。
【図２２】図２２は、図２１に示す状況下で撮像装置が生成する画像の一例を示す図である。
【図２３】図２３は、本発明の実施の形態２に係る撮像装置が行うメニュー操作処理の概要を示すフローチャートである。
【図２４】図２４は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２５】図２５は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２６】図２６は、本発明の実施の形態２に係る撮像装置が備える特殊効果情報記憶部が記憶する特殊効果情報テーブルの一例を示す図である。
【図２７】図２７は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図２８】図２８は、本発明の実施の形態２に係る撮像装置が備える特殊効果情報記憶部が記憶する特殊効果情報テーブルの一例を示す図である。
【図２９】図２９は、本発明の実施の形態２に係る撮像装置が備える表示部が表示する画像の一例を示す図である。
【図３０】図３０は、本発明の実施の形態２に係る撮像装置が備える合成画像生成部が生成する合成画像の一例を示す図である。
【発明を実施するための形態】
【００１５】
以下に、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。また、図面の記載において、同一の部分には同一の符号を付している。
【００１６】
（実施の形態１）
図１は、本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。図２は、本実施の形態１に係る撮像装置の被写体に面する側（前面側）の構成を示す図である。図３は、本実施の形態１に係る撮像装置のユーザに面する側（背面側）の構成を示す図である。
【００１７】
図１〜図３に示すように、撮像装置１は、被写体を撮影し、撮影した被写体の電子的な画像データを生成する撮像部２と、撮像装置１の加速度を検出する姿勢検出部３と、撮像部２が撮影する視野領域に光を照射するストロボ４と、撮影日時の判定機能やタイマー機能を有する時計５と、撮像装置１の各種情報の入力を受け付ける操作入力部６と、撮像部２が生成した画像データに対応する画像を表示する表示部７と、外部からの接触位置に応じた信号の入力を受け付けるタッチパネル８と、撮像部２によって生成された画像データを含む各種情報を記憶する記憶部９と、インタネットを介して各種データベースと相互方向に送受信を行う通信部１０と、撮像装置１の動作を制御する制御部１１と、を備える。
【００１８】
撮像部２は、レンズ部２ａと、レンズ駆動機構２ｂと、絞り２ｃと、絞り駆動機構２ｄと、シャッタ２ｅと、シャッタ駆動機構２ｆと、撮像素子２ｇと、信号処理部２ｈとを有する。レンズ部２ａは、フォーカスレンズやズームレンズ等によって構成され、所定の視野領域からの光を集光する。レンズ駆動機構２ｂは、ＤＣモータ等によって構成され、レンズ部２ａのフォーカスレンズやズームレンズ等を光軸Ｌ１上で移動させることにより、レンズ部２ａのピント位置や焦点距離等の変更を行う。絞り２ｃは、レンズ部２ａが集光した光の入射量を制限することにより露出の調整を行う。絞り駆動機構２ｄは、ステッピングモータ等によって構成され、絞り２ｃを駆動する。シャッタ２ｅは、撮像素子２ｇの状態を露光状態または遮光状態に設定する。シャッタ駆動部２ｆは、ステッピングモータ等によって構成され、レリーズ信号に応じてシャッタ２ｅを駆動する。撮像素子２ｇは、レンズ部２ａが集光した光を受光して電気信号（アナログ信号）に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によって実現され、変換した電気信号を信号処理部２ｈに出力する。信号処理部２ｈは、撮像素子２ｇから出力される電気信号に増幅等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの画像データに変換して制御部１１に出力する。
【００１９】
姿勢検出部３は、加速度センサによって構成され、撮像装置１の加速度を検出することにより、撮像装置１の姿勢状態および／または動きを検出する。具体的には、姿勢検出部３は、水平面を基準としてときの撮像装置１の姿勢を検出する。
【００２０】
ストロボ４は、キセノンランプやＬＥＤ（Light Emitting Diode）等で構成される。ストロボ４は、撮像部２の視野領域へ向けて補助光であるストロボ光を照射する。
【００２１】
時計５は、撮像装置１の動作の基準となる時間信号を生成する。これにより、制御部１１は、画像データの取得時間や撮像素子２ｇの露光時間等を設定することができる。
【００２２】
操作入力部６は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ６ａと、撮影の指示を与えるレリーズ信号を入力するレリーズスイッチ６ｂと、撮像装置１の各種撮影のモードを切換える撮影モード切換スイッチ６ｃと、撮像装置１の各種設定を切換える操作スイッチ６ｄと、撮像装置１の各種撮影モードに関する情報を表示部７に表示させるメニュースイッチ６ｅと、撮像部２のズーム操作を行うズームスイッチ６ｆとを有する。
【００２３】
表示部７は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて実現される。表示部７は、撮像部２が生成する画像データに対応する画像を表示する。表示部７は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。また、表示部７は、撮像部２が生成する画像データに対応する３次元画像（以下、「３Ｄ画像」という）を表示する。一般に、３Ｄ画像を表示する表示部としては、パララックバリア方式またはレンティキュラレンズ方式がある。本実施の形態では、いずれの方式の表示部であっても適用可能である。
【００２４】
タッチパネル８は、表示部７の表示画面上に重ねて設けられる（図３を参照）。タッチパネル８は、ユーザが表示部７で表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた操作信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態では、いずれの方式のタッチパネルであっても適用可能である。なお、本実施の形態１では、タッチパネル８が入力部として機能する。
【００２５】
記憶部９は、撮像部２が撮影した画像データを記憶する画像データ記憶部９ａと、撮像装置１が実行する各種プログラムおよび本実施の形態１に係る撮像プログラムを記憶するプログラム記憶部９ｂと、撮像部２が撮影した画像データまたは各種撮像装置１の設定を一時的に記憶する仮画像データ記憶部９ｃと、特殊効果を行う際に被写体画像および背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する特殊効果情報記憶部９ｄとを有する。記憶部９は、撮像装置１の内部に固定的に設けられるフラッシュメモリやＲＡＭ（Random Access Memory）等の半導体メモリを用いて実現される。なお、記憶部９に対し、外部から装着されるメモリカード等の記憶媒体に対して情報を記憶する一方、記憶媒体が記憶する情報を読み出す記録媒体インターフェースとしての機能を具備させてもよい。
【００２６】
通信部１０は、通信インターフェースとしての機能を有し、ネットワーク（図示せず）を介してサーバ（図示せず）やパーソナルコンピュータ等の外部処理装置と相互方向に送受信を行う。通信部１０は、外部処理装置との間で送受信を行うことにより、撮像装置１の各種プログラムデータや特殊効果情報テーブルに関するデータを取得する。なお、通信部１０は、有線または無線ＬＡＮ（Local Area Network）を介してネットワークに接続される。
【００２７】
制御部１１は、ＣＰＵ（Central Processing Unit）等によって実現される。制御部１１は、操作入力部６からの操作信号等に応じて記憶部９のプログラム記憶部９ｂからプログラムを読み出して実行し、撮像装置１を構成する各部に対する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。制御部１１は、画像処理部１１ａと、画像分離部１１ｂと、特殊効果画像生成部１１ｃと、合成画像生成部１１ｄと、表示制御部１１ｅとを有する。
【００２８】
画像処理部１１ａは、信号処理部２ｈから出力された画像データに対して各種の画像処理を施して記憶部９に出力する。具体的には、画像処理部１１ａは、信号処理部２ｈから出力された画像データに対してエッジ強調、色補正およびγ補正等の処理を施す。
【００２９】
画像分離部１１ｂは、撮像部２が生成した画像データに対応する画像から被写体画像と背景画像とを分離する。具体的には、画像分離部１１ｂは、周知の三角測量の原理を用いて、撮像部２によって生成された互いの視野の左右方向の一端部同士が重なりを有する２つの画像データに対応する２つの画像の視差に基づいて、被写体画像と背景画像とを分離する。
【００３０】
特殊効果画像生成部１１ｃは、タッチパネル８が入力を受け付けた情報に応じた特殊効果を、画像分離部１１ｂが分離した被写体画像および背景画像に対して個別に施して各画像の特殊効果画像を生成する。具体的には、特殊効果画像生成部１１ｃは、被写体画像および背景画像それぞれに対して、撮像部２のレンズ部２ａの前面に各種の光学フィルタ、たとえば色変換フィルタやコントラスト調整フィルタ等を配置した場合に得られる特殊効果、または特定用途の撮影レンズ、たとえば魚眼レンズ等を配置した場合に得られる特殊効果を施した特殊効果画像を生成する。なお、特殊効果画像生成部１１ｃは、撮像部２が生成する画像データに対応する１つの画像に特殊効果を施して特殊効果画像を生成してもよい。さらに、撮像部２が連続的に生成する画像データに対して特殊効果を順次施して連続的に特殊効果画像を生成してもよい。
【００３１】
合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが生成した特殊効果画像を用いて合成画像を生成する。具体的には、合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが背景画像に特殊効果を施して生成した特殊効果画像に、画像分離部１１ｂが分離した被写体画像を合成して合成画像を生成する。
【００３２】
表示制御部１１ｅは、表示部７の表示を制御する。表示制御部１１ｅは、特殊効果画像生成部１１ｃが被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が合成画像生成部１１ｄによって被写体画像および背景画像の他方と合成された場合、この合成された合成画像を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。表示制御部１１ｅは、特殊効果に関する情報をアイコンによって表示部７に表示させる。具体的には、表示制御部１１ｅは、特殊効果情報に対応する特殊効果アイコンを、特殊効果情報テーブルを参照して、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。
【００３３】
以上の構成を有する撮像装置１において、画像分離部１１ｂが撮像部２によって生成される画像に対し、被写体画像と背景画像とに分離する際の状況について説明する。図４は、撮像部２が、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。図５は、図４に示す状況下で撮像部２が撮影位置Ｐ１で生成する画像データに対応する画像の一例を示す図である。図６は、図４に示す状況下で撮像部２が撮影位置Ｐ２で生成する画像データに対応する画像の一例を示す図である。図７は、図４に示す状況下で撮像部２が異なる撮影位置でそれぞれ生成した画像を仮想的に重ねた画像の一例を示す図である。図７において、画像Ｗ１が、背景を基準に重ねた画像であり、画像Ｗ２が被写体を基準に重ねた画像である。なお、図４においては、ユーザが撮像装置１を左側から右側に移動させ、この移動期間中に撮像装置１が微小な時間間隔で連続的に撮影する。このため、図５および図６に示す画像ＷＬ１と画像ＷＲ１との間には、複数の画像が存在する。
【００３４】
図４に示すように、撮像部２は、撮像部２からの距離が異なる被写体Ａ１（距離ｄ１）および被写体Ａ２（距離ｄ２）に対して、複数の撮影位置で連続的に撮影することによって視野領域が異なる複数の画像データを生成する。具体的には、図５および図６に示すように、撮像部２は、図４の撮影位置Ｐ１で画像ＷＬ１を生成し、図４の撮影位置Ｐ２で画像ＷＲ１を生成する。図４に示すように、撮像部２と被写体Ａ２との距離ｄ２は、撮像部２と被写体Ａ１との距離ｄ１より大きいため、背景である被写体Ａ２の領域がほぼ重なる。具体的には、図７に示すように、画像Ｗ１内では、被写体Ａ２の領域がほぼ重なる。これに対して、画像Ｗ１内では、被写体Ａ１の領域が重ならず、被写体Ａ１に対して視差ａ１を有する。
【００３５】
このように、画像分離部１１ｂは、図７（ａ）に示すように、画像ＷＬ１および画像ＷＲ１を仮想的に重ねた際に、重なる領域を背景画像として特定する。また、画像分離部１１ｂは、図７（ｂ）に示すように、画像ＷＬ１および画像ＷＲ１を互いに異なる方向に移動させながら画像ＷＬ１および画像ＷＲ１の輝度が高い領域を基準に重ねることにより、重なった領域を被写体Ａ１の被写体画像として特定する。これにより、画像分離部１１ｂは、図８および図９に示すように、撮像部２から生成する画像データに対応する画像から背景画像Ｗ３と被写体画像Ｗ４とを分離することができる。なお、画像分離部１１ｂは、被写体Ａ１を基準に画像ＷＬ１および画像ＷＲ１を仮想的に重なる場合、画像ＷＬ１および画像ＷＲ１のコントラストが高い領域を基準に重ねることによって、被写体画像を特定するようにしてもよい。
【００３６】
つぎに、特殊効果画像生成部１１ｃおよび合成画像生成部１１ｄによる処理の概要について説明する。図１０は、特殊効果画像生成部１１ｃおよび合成画像生成部１１ｄによる処理の概要を説明する模式図である。
【００３７】
図１０に示すように、まず、特殊効果画像生成部１１ｃ、画像データ記憶部９ａが記憶する背景画像Ｗ１０にユーザによって設定された特殊効果、たとえば後述する「ソフト効果」を施して特殊効果画像Ｗ１１を生成する（図１０（ａ）→図１０（ｂ））。その後、合成画像生成部１１ｄは、画像分離部１１ｂが分離した被写体画像Ｗ４を特殊効果画像Ｗ１１に合成して合成画像Ｗ１２を生成する（図１０（ｂ）→図１０（ｃ））。最後に、特殊効果画像生成部１１ｃは、合成画像Ｗ１２に含まれる被写体画像Ｗ４にユーザによって設定された特殊効果、たとえば後述する「セピア効果」を施して合成画像Ｗ１３にする（図１０（ｃ）→図１０（ｄ））。これにより、撮像装置１は、被写体画像および背景画像それぞれに特殊効果を施した合成画像を生成することができる。なお、図１０においては、「ソフト効果」を施した画像をぼかして表現し、「セピア効果」を施した画像をハッチングで表現した。
【００３８】
つぎに、本実施の形態１に係る撮像装置１が行う処理について説明する。図１１は、撮像装置１が行う処理の概要を示すフローチャートである。
【００３９】
図１１において、まず、制御部１１は、撮像装置１の電源がオンになっているか否かを判断する（ステップＳ１０１）。撮像装置１の電源がオンになっている場合（ステップＳ１０１：Ｙｅｓ）、撮像装置１はステップＳ１０２に移行する。一方、撮像装置１の電源がオンになっていない場合（ステップＳ１０１：Ｎｏ）、撮像装置１は本処理を終了する。
【００４０】
続いて、制御部１１は、撮像装置１が撮影モードに設定されているか否かを判断する（ステップＳ１０２）。撮像装置１が撮影モードに設定されている場合（ステップＳ１０２：Ｙｅｓ）、撮像装置１は後述するステップＳ１０３に移行する。一方、撮像装置１が撮影モードに設定されていない場合（ステップＳ１０２：Ｎｏ）、撮像装置１は後述するステップＳ１０８に移行する。
【００４１】
ステップＳ１０２において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０２：Ｙｅｓ）について説明する。この場合、表示制御部１１ｅは、撮像部２が一定の微小な時間間隔で連続的に生成する画像データに対応する画像のスルー画像を表示部７に表示させる（ステップＳ１０３）。
【００４２】
続いて、制御部１１は、ユーザによってレリーズスイッチ６ｂが操作されて撮影を指示するレリーズ信号が入力されたか否かを判断する（ステップＳ１０４）。撮影を指示するレリーズ信号が入力されていない場合（ステップＳ１０４：Ｎｏ）、制御部１１は、ユーザによってメニュースイッチ６ｅが操作されたか否かを判断する（ステップＳ１０５）。所定時間内、たとえば３０秒内にユーザによってメニュースイッチ６ｅが操作されていない場合（ステップＳ１０５：Ｎｏ）、撮像装置１はステップＳ１０１に戻る。一方、ユーザによってメニュースイッチ６ｅが操作された場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は、撮像モードの中に含まれるメニューを設定するメニュー操作処理を実行し（ステップＳ１０６）、撮像装置１はステップＳ１０１に戻る。
【００４３】
ステップＳ１０４において、撮影を指示するレリーズ信号が入力された場合（ステップＳ１０４：Ｙｅｓ）について説明する。この場合、撮像装置１は、被写体を撮影する撮影処理を実行し（ステップＳ１０７）、撮像装置１はステップＳ１０１に戻る。
【００４４】
ステップＳ１０２において、撮像装置１が撮影モードでない場合（ステップＳ１０２：Ｎｏ）について説明する。この場合、表示制御部１１ｅは、画像データ記憶部９ａに記憶された複数の画像をまとめて表示した画像選択画面を表示部７に表示させる（ステップＳ１０８）。
【００４５】
続いて、制御部１１は、ユーザがタッチパネル８をタッチすることによって表示部７が表示する画像選択画面の中から画像が選択されたか否かを判断する（ステップＳ１０９）。ユーザによって画像選択画面の中から画像が選択されていない場合（ステップＳ１０９：Ｎｏ）、撮像装置１は後述するステップＳ１１３に移行する。一方、ユーザによって画像選択画面の中から画像が選択された場合（ステップＳ１０９：Ｙｅｓ）、表示制御部１１ｅは、ユーザによって選択された画像を表示部７に全画面表示させ（ステップＳ１１０）、撮像装置１はステップＳ１１１に移行する。
【００４６】
ステップＳ１１１において、ユーザによって画像の切換操作が行われたか否かを判断する。ユーザによって画像の切換操作が行われた場合（ステップＳ１１１：Ｙｅｓ）、表示制御部１１ｅは、表示部７が現在表示している画像の切換えを行い（ステップＳ１１２）、撮像装置１はステップＳ１１０に戻る。一方、ユーザによって画像の切換操作が行われていない場合（ステップＳ１１１：Ｎｏ）、制御部１１は、画像再生の終了操作が行われたか否かを判断する（ステップＳ１１３）。具体的には、制御部１１は、ユーザによって撮影モード切換スイッチ６ｃが操作されたことにより、撮像装置１が再生モードから撮影モードに切換えられたか否かを判断する。ユーザによって画像再生の終了操作が行われていない場合（ステップＳ１１３：Ｎｏ）、撮像装置１はステップＳ１０８に戻る。一方、ユーザによって画像再生の終了操作が行われた場合（ステップＳ１１３）、撮像装置１はステップＳ１０１に戻る。
【００４７】
つぎに、図１１のステップＳ１０６のメニュー操作処理について説明する。図１２は、メニュー操作処理の概要を示すフローチャートである。
【００４８】
図１２において、まず、表示制御部１１ｅは、メニューアイコンを表示部７が表示する画像上に表示させる（ステップＳ２０１）。具体的には、図１３に示すように、表示制御部１１ｅは、撮影モードアイコンＱ１、ストロボアイコンＱ２、特殊撮影モードアイコンＱ３および戻るアイコンＱ４を表示部７が表示する画像Ｗ２１上に表示させる。撮影モードアイコンＱ１は、撮影モードの動作条件の詳細パラメータを表示部７に表示させる指示信号が入力されるアイコンである。撮影動作条件の詳細パラメータとしては、シャッタ速度、露出補正範囲、ＩＳＯ感度および絞り値等のパラメータが表示される。ストロボアイコンＱ２は、ストロボ（フラッシュ）のストロボ動作条件の詳細パラメータを表示部７に表示させる指示信号が入力されるアイコンである。ストロボ動作条件の詳細パラメータとしては、自動発光、発光禁止、赤目発光および強制発光等のパラメータが表示される。特殊撮影モードアイコンＱ３は、特殊撮影モードの下位メニュー（サブメニュー）を表示部７に表示させる指示信号が入力されるアイコンである。
【００４９】
続いて、制御部１１は、ユーザによって特殊撮影モードアイコンＱ３が操作されたか否かを判断する（ステップＳ２０２）。具体的には、図１３に示すように、制御部１１は、ユーザが表示部７の画像Ｗ２１上に表示される特殊撮影モードアイコンＱ３をタッチすることにより、タッチパネル８が入力を受け付けた信号によって特殊撮影モードアイコンＱ３が操作されたか否かを判断する。所定時間内、たとえば３０秒内にユーザによって特殊撮影モードアイコンＱ３が操作されていない場合（ステップＳ２０２：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによって特殊撮影モードアイコンＱ３が操作された場合（ステップＳ２０２：Ｙｅｓ）、撮像装置１はステップＳ２０３に移行する。
【００５０】
その後、表示制御部１１ｅは、特殊撮影モードの下位メニューアイコンを表示部７が表示する画像上に表示させる（ステップＳ２０３）。具体的には、図１４に示すように、表示制御部１１ｅは、表示部７が表示する画像Ｗ２１上にスイング合成アイコンＱ５、アートフィルタアイコンＱ６、スイングアートアイコンＱ７および戻るアイコンＱ４を表示させる。
【００５１】
ここで、図１４に示した各種アイコンについて説明する。スイング合成アイコンＱ５は、撮像装置１の撮影モードをスイング合成撮影モードに設定する指示信号を入力するアイコンである。スイング合成撮影モードとは、画像分離部１１ｂが撮影した画像から分離した被写体画像または背景画像を別の画像に合成して合成画像を生成する撮影モードである。アートフィルタアイコンＱ６は、撮像装置１の撮影モードを特殊効果撮影に設定する指示信号を入力するアイコンである。特殊効果撮影とは、撮影した画像に対して特殊効果画像生成部１１ｃがユーザによって設定された特殊効果を施して特殊効果画像を生成する撮影モードである。スイングアートアイコンＱ７は、撮像装置１の撮影モードをスイングアート撮影モードに設定する指示信号を入力するアイコンである。スイングアート撮影モードとは、画像分離部１１ｂが撮影した画像から分離した被写体画像または背景画像に対して、特殊効果画像生成部１１ｃがユーザによって設定された特殊効果を施して特殊効果画像を生成し、この生成した特殊効果画像を別の画像に合成して合成画像を生成する撮影モードである。
【００５２】
図１２に戻り、ステップＳ２０４において、制御部１１は、ユーザによってスイングアートアイコンＱ７が操作されたか否かを判断する。具体的には、図１４に示すように、制御部１１は、ユーザが表示部７の画面Ｗ２１上に表示されるスイングアートアイコンＱ７をタッチすることにより、タッチパネル８が入力を受け付けた信号によってスイングアートアイコンＱ７が操作されたか否かを判断する。所定時間内にユーザによってスイングアートアイコンＱ７が操作されていない場合（ステップＳ２０４：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによってスイングアートアイコンＱ７が操作された場合（ステップＳ２０４：Ｙｅｓ）、撮像装置１はステップＳ２０５に移行する。
【００５３】
続いて、表示制御部１１ｅは、画像データ記憶部９ａが記憶する画像データに対応する背景画像および複数の特殊効果アイコンを表示部７に表示させる（ステップＳ２０５）。具体的には、図１５に示すように、表示制御部１１ｅは、表示部７に背景画像Ｗ２２を表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、ノーマルアイコンＱ８、ソフトアイコンＱ９およびセピアアイコンＱ１０を表示部７に表示させる。
【００５４】
ここで、図１６を参照して、表示制御部１１ｅが表示部７に表示させる特殊効果用アイコンの表示方法について説明する。図１６は、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルの一例を示す図である。
【００５５】
図１６に示すように、特殊効果情報テーブルＴ１には、被写体画像および背景画像それぞれに適用可能な特殊効果が記載されている。具体的には、被写体画像に適用可能な特殊効果が、「ノーマル」、「ポップ」、「魚眼」、「ソフト」、「セピア」、「白黒」、「スケッチ」および「ミニチュア」である。一方、背景画像が適用可能な特殊効果が、「ノーマル」、「ポップ」、「魚眼」、「ソフト」、「セピア」、「白黒」、「スケッチ」および「ミニチュア」である。また、特殊効果情報テーブルＴ１には、被写体画像および背景画像それぞれに特殊効果を施して合成画像を生成する際の特殊効果の組み合わせに応じた推奨度（０〜５）が記載されている。具体的には、被写体画像の特殊効果が「ノーマル」の場合、背景画像の特殊効果において「ノーマル」、「ソフト」および「セピア」の組み合わせの推奨度として「５」が記載されている。さらに、「ポップ」、「白黒」および「スケッチ」の組み合わせの推奨度として「４」が記載され、「魚眼」および「ミニチュア」の組み合わせの推奨度として「１」が記載されている。すなわち、推奨度は、特殊効果の組み合わせの相性が良いほど数値が段階的に高く設定されている。なお、図１６に示す数値は、あくまでも例示にすぎずこれに限定されるものではなく、たとえば操作スイッチ６ｄ等で推奨度の数値を変更することも可能である。また、推奨度は、特殊効果の組み合わせの相性が良いほど数値を段階的に低く設定してもよい。
【００５６】
このように、表示制御部１１ｅは、表示部７に特殊効果用アイコンを表示する場合に、特殊効果情報テーブルＴ１を参照して、特殊効果の組み合わせの推奨度が高い順に表示させる。たとえば、表示制御部１１ｅは、図１５に示すように、表示部７によって現在表示されている背景画像Ｗ２２に特殊効果が施されておらず、背景画像Ｗ２２の状態が「ノーマル」の場合、特殊効果用アイコンとしてノーマルアイコンＱ８、ソフトアイコンＱ９およびセピアアイコンＱ１０を表示部７に表示させる制御を行う。これにより、表示装置１は、表示部７が現在表示している画像に最適な特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる。
【００５７】
つぎに、図１６に示した特殊効果それぞれについて説明する。ノーマルとは、特殊効果画像生成部１１ｃによって特殊効果を施さない状態である。ポップとは、色をカラフルで印象的に強調する効果である。たとえば画像データの色相および彩度を高めた処理を行う。魚眼とは、魚眼レンズを用いて撮影したように直線を円弧状に歪ませた画像に仕上げる効果である。たとえば画像データを座標変換等によって歪ませた画像に変更する処理を行う。ソフトとは、ソフトフォーカスレンズを用いて撮影したように画像全体を柔らかに仕上げる効果である。たとえば画像データのコントラストおよび彩度のレベルを低くした処理を行う。セピアとは、セピア調のモノクロームに仕上げる効果である。たとえばホワイトバランスおよびトーンカーブのレベルを低くした処理を行う。白黒とは、グレートーンで表現される白黒に画像を仕上げる効果である。たとえばホワイトバランスのレベルを低くした処理を行う。スケッチとは、輪郭を線画で描写するスケッチ風に画像を仕上げる効果である。ミニチュアとは、画面中央部にピントを合わせ、上下など周辺はコントラストを低くしてぼかす効果である。
【００５８】
図１２に戻り、ステップＳ２０６において、制御部１１は、ユーザによって背景画像の切換操作が行われたか否かを判断する。具体的には、図１５に示すように、制御部１１は、ユーザが別の背景画像に切換えを指示する指示信号の入力を受け付ける画像切換えアイコンＱ１１をタッチしたか否かを判断する。ユーザによって背景画像の切換操作が行われた場合（ステップＳ２０６：Ｙｅｓ）、表示制御部１１ｅは、表示部７が現在表示している背景画像から画像データ記憶部９ａが記憶する別の背景画像に切換えて表示部７に表示させ（ステップＳ２０７）、撮像装置１はステップＳ２０５に戻る。一方、ユーザによって背景画像の切換操作が行われていない場合（ステップＳ２０６：Ｎｏ）、撮像装置１はステップＳ２０８に移行する。
【００５９】
続いて、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する（ステップＳ２０８）。具体的には、図１５に示すように、制御部１１は、ユーザが表示部７の画面上に表示するノーマルアイコンＱ８、ソフトアイコンＱ９およびセピアアイコンＱ１０の何れか一つをタッチしたか否かを判断する。ユーザによって特殊効果アイコンが操作された場合（ステップＳ２０８：Ｙｅｓ）、特殊効果画像生成部１１ｃは、表示部７が現在表示している背景画像に対し、ユーザがタッチした特殊効果用アイコンに対応する特殊効果、たとえばソフトを施した特殊効果画像を生成し（ステップＳ２０９）、表示制御部１１ｅは、特殊効果画像（たとえば図１０（ｂ）を参照）を表示部７に表示させる（ステップＳ２１０）。
【００６０】
その後、制御部１１は、表示部７が現在表示している特殊効果画像を仮画像データ記憶部９ｃに仮記憶させ（ステップＳ２１１）、撮像装置１は図１１に示したメインルーチンに戻る。
【００６１】
ステップＳ２０８において、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ２０８：Ｎｏ）について説明する。この場合、制御部１１は、所定時間内にユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ２１２）。具体的には、図１５に示すように、制御部１１は、ユーザが表示部７によって現在表示されている特殊効果アイコンから次の推奨度が高い特殊効果アイコンに切換えを指示する指示信号の入力を受け付ける切換アイコンＱ１２をタッチしたか否かを判断する。所定時間内、たとえば３０秒内にユーザによって特殊効果アイコンの切換操作が行われていない場合（ステップＳ２１２：Ｎｏ）、撮像装置１は図１１に示すメインルーチンに戻る。一方、ユーザによって特殊効果アイコンの切換操作が行われた場合（ステップＳ２１２：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ１を参照して、次に推奨度が高い特殊効果アイコン、たとえば「ポップ」、「白黒」および「スケッチ」の特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ２１３）、撮像装置１はステップＳ２０５に戻る。
【００６２】
つぎに、図１１のステップ１０７の撮影処理について説明する。図１７は、撮影処理の概要を示すフローチャートである。なお、以下の説明においては、撮像装置１の撮影モードがスイングアート撮影に設定されている場合について説明する。
【００６３】
図１７に示すように、まず、制御部１１は、撮像装置１の撮影モードがスイングアート撮影に設定されているか否かを判断する（ステップＳ３０１）。撮像装置１の撮像モードがスイングアート撮影に設定されている場合（ステップＳ３０１：Ｙｅｓ）、撮像装置１は、被写体画像および背景画像それぞれに特殊効果を施して合成画像を生成するスイングアート撮影処理を実行し（ステップＳ３０２）、撮像装置１は図１１に示したメインルーチンに戻る。
【００６４】
ステップＳ３０１において、撮像装置１の撮影モードがスイングアート撮影に設定されていない場合（ステップＳ３０１：Ｎｏ）について説明する。この場合、撮像装置１は、被写体に対して撮影を行い（ステップＳ３０３）、表示制御部１１ｅは、撮影した画像データに対応する画像を表示部７にレックビュー表示させる（ステップＳ３０４）。
【００６５】
続いて、制御部１１は、撮影した画像データを記憶部９の画像データ記憶部９ａに記憶させ（ステップＳ３０５）、撮像装置１は図１１に示したメインルーチンに戻る。なお、ステップＳ３０５では、画像データとして圧縮データ（ＪＰＥＧ）と非圧縮データ（ＲＡＷ）をあわせて記憶してもよい。この場合には、後述する画像合成の際に、ユーザがこれらの画像データのいずれかを選択できるようにしてもよい。また、背景画像として、４：３、１６：９などの多種類のアスペクト比を設定可能とし、表現や目的に合わせてユーザが所望のアスペクト比を選択できるようにしてもよい。
【００６６】
つぎに、図１８のステップＳ３０２のスイングアート撮影処理について説明する。図１８は、スイングアート撮影処理の概要を示すフローチャートである。
【００６７】
図１８において、まず、制御部１１は、ユーザによって撮像装置１が移動を開始したか否かを判断する（ステップＳ４０１）。具体的には、制御部１１は、ユーザが撮像装置１を移動させた際（図４を参照）に姿勢検出部３が検出する加速度によって撮像装置１が移動を開始したか否かを判断する。撮像装置１が移動を開始していない場合（ステップＳ４０１：Ｎｏ）、制御部１１は、この判断を繰り返す。一方、撮像装置１が移動を開始した場合（ステップＳ４０１：Ｙｅｓ）、撮像装置１はステップＳ４０２に移行する。
【００６８】
続いて、撮像装置１は、被写体に対して微小な時間間隔で連続的に撮影を行い（ステップＳ４０２）、制御部１１は、撮影した画像を記憶部９の仮画像データ記憶部９ｃに仮記憶させる（ステップＳ４０３）。
【００６９】
その後、制御部１１は、撮像装置１が移動を停止したか否かを判断する（ステップＳ４０４）。撮像装置１が移動を停止していない場合（ステップＳ４０４：Ｎｏ）、撮像装置１はステップＳ４０２に戻る。一方、撮像装置１が移動を停止した場合（ステップＳ４０４：Ｙｅｓ）、撮像装置１はステップＳ４０５に移行する。
【００７０】
続いて、制御部１１は、画像分離部１１ｂが撮影した複数の画像から被写体画像と背景画像とを分離することが可能であるか否かを判断する（ステップＳ４０５）。具体的には、制御部１１は、画像分離部１１ｂが仮画像データ記憶部９ｃに記憶されている複数の画像、たとえば隣接する画像それぞれに含まれる被写体の視差（図７を参照）に基づいて、撮影した画像から被写体画像と背景画像とを分離することが可能であるか否かを判断する。画像分離部１１ｂが撮影した画像から被写体画像と背景画像とを分離することが可能でない場合（ステップＳ４０５：Ｎｏ）、表示制御部１１ｅは、撮影した画像から被写体画像と背景画像とを分離することができない旨の警告を表示部７に表示させ（ステップＳ４０６）、撮像装置１は図１１に示したメインルーチンに戻る。
【００７１】
ステップＳ４０５において、画像分離部１１ｂが撮影した画像から被写体画像と背景画像とを分離することが可能である場合（ステップＳ４０５：Ｙｅｓ）について説明する。この場合、画像分離部１１ｂは、撮影した画像から被写体画像を分離し（ステップＳ４０７）、合成画像生成部１１ｄは、画像分離部１１ｂが分離した被写体画像を、特殊効果画像生成部１１ｃが生成した特殊効果画像に合成して合成画像（たとえば図１０（ｃ）を参照）を生成する（ステップＳ４０８）。
【００７２】
続いて、表示制御部１１ｅは、合成画像生成部１１ｄが生成した合成画像を表示部７に表示させ（ステップＳ４０９）、制御部１１は、ユーザによってメニュースイッチ６ｅが操作されたか否かを判断する（ステップＳ４１０）。ユーザによってメニュースイッチ６ｅが操作された場合（ステップＳ４１０：Ｙｅｓ）、撮像装置１は後述するステップＳ４１１に移行する。一方、ユーザによってメニュースイッチ６ｅが所定時間内、たとえば３０秒内に操作されていない場合（ステップＳ４１０：Ｎｏ）、撮像装置１は後述するステップＳ４１９に移行する。
【００７３】
ステップＳ４１０において、ユーザによってメニュースイッチ６ｅが操作された場合（ステップＳ４１０：Ｙｅｓ）について説明する。この場合、表示制御部１１ｅは、表示部７が表示する画像上に画像選択アイコンおよび特殊効果アイコンを表示させる（ステップＳ４１１）。具体的には、図１９に示すように、表示制御部１１ｅは、表示部７が表示する合成画像Ｗ２３上に、背景画像に施す特殊効果の特殊効果アイコンに切換えを指示する背景選択アイコンＱ１３を表示させる。さらに、表示制御部１１ｅは、特殊効果情報テーブルＴ１を参照して、被写体画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示させる。たとえば、表示制御部１１ｅは、特殊効果画像生成部１１ｃが直近に施した背景画像に対する特殊効果が「ソフト」の場合、ノーマルアイコンＱ１４およびソフトアイコンＱ１５を表示部７に表示させる。さらにまた、表示制御部１１ｅは、特殊効果アイコンの切換えの指示信号の入力を受け付ける切換アイコンＱ１６およびスイングアート撮影の終了の指示信号の入力を受け付ける終了アイコンＱ１７を表示部７に表示させる。
【００７４】
続いて、制御部１１は、ユーザによって画像選択アイコンが操作されたか否かを判断する（ステップＳ４１２）。具体的には、図１９に示すように、制御部１１は、ユーザによって背景選択アイコンＱ１３が操作されたか否かを判断する。ユーザによって背景アイコンが操作された場合（ステップＳ４１２：Ｙｅｓ）、表示制御部１１ｅは、画像選択アイコンおよび特殊効果アイコンを切換えて表示させ（ステップＳ４１３）、撮像装置１はステップＳ４１２に戻る。具体的には、表示制御部１１ｅは、表示部７が表示する合成画像Ｗ２３上に、画像選択アイコンとして被写体アイコン（図示せず）を表示させるとともに、特殊効果情報テーブルＴ１を参照して、背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示させる。
【００７５】
ステップＳ４１２において、ユーザによって画像選択アイコンが操作されていない場合（ステップＳ４１２：Ｎｏ）について説明する。この場合、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する（ステップＳ４１４）。ユーザによって特殊効果アイコンが操作された場合（ステップＳ４１４：Ｙｅｓ）、特殊効果画像生成部１１ｃは、タッチパネル７が特殊効果アイコンの表示領域上に位置する接触領域で入力を受け付けた特殊効果アイコンに対応する特殊効果を被写体画像に施して特殊効果画像を生成する（ステップＳ４１５）。
【００７６】
続いて、合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが生成した特殊効果画像を用いて合成画像を生成し（ステップＳ４１６）、表示制御部１１ｅは、合成画像生成部１１ｄが生成した合成画像を表示部７に表示させる（ステップＳ４１７）。
【００７７】
その後、制御部１１は、所定時間内にユーザによって終了アイコンＱ１７が操作されたか否かを判断する（ステップＳ４１８）。所定時間内、たとえば３０秒内にユーザによって終了アイコンＱ１７が操作されない場合（ステップＳ４１８：Ｎｏ）、撮像装置１はステップＳ４１２に戻る。一方、所定時間内にユーザによって終了アイコンＱ１７が操作された場合（ステップＳ４１８：Ｙｅｓ）、制御部１１は、表示部７が現在表示している画像に対応する画像データを画像データ記憶部９ａに記憶させ（ステップＳ４１９）、撮像装置１は図１１に示したメインルーチンに戻る。
【００７８】
ステップＳ４１４において、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ４１４：Ｎｏ）について説明する。この場合、制御部１１は、ユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ４２０）。具体的には、制御部１１は、ユーザによって切換アイコンＱ１６（図１９を参照）が操作されたか否かを判断する。ユーザによって特殊効果アイコンの切換操作がない場合（ステップＳ４２０：Ｎｏ）、撮像装置１はステップＳ４１８に移行する。一方、ユーザによって特殊効果の切換操作が行われた場合（ステップＳ４２０：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報テーブルＴ１を参照して、次に推奨度が高い特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ４２１）、撮像装置１はステップＳ４１２に戻る。具体的には、表示制御部１１ｅは、次に推奨度が高い特殊効果アイコンとして「セピア」および「白黒」の特殊効果アイコンを表示部７に表示させる。
【００７９】
以上説明した本実施の形態１では、特殊効果画像生成部１１ｃが被写体画像および背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が合成画像生成部１１ｄによって被写体画像および背景画像の他方と合成された場合、表示制御部１１ｅは、この合成された合成画像を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ１を参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させる。これにより、２つの画像データそれぞれに対して個別に特殊効果を行って合成画像を生成する場合に、特殊効果の組み合わせの選択の指針となる情報をユーザに提示することができる。
【００８０】
さらに、本実施の形態１では、表示制御部１１ｅが、最初に推奨度が高い組み合わせの特殊効果アイコンを表示部７に表示するので、ユーザは特殊効果の選択操作によって被写体のシャッタチャンスを逃すことなく、被写体画像および背景画像それぞれに特殊効果を施した合成画像を得ることができる。
【００８１】
（実施の形態２）
つぎに、本実施の形態２について説明する。上述した本実施の形態１では、表示制御部が、特殊効果情報テーブルを参照して、被写体画像または背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた推奨度の高い順に表示部７に表示させていた。これに対して、本実施の形態２では、特殊効果情報記憶部が当該撮像装置で設定可能な撮影モードと被写体画像または背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルを記憶し、表示制御部が、入力部からの入力によって撮影モードが設定された場合、第２特殊効果情報テーブルを参照して、設定された撮影モードとの組み合わせに応じた推奨度の高い順に特殊効果に関する情報を表示部に表示させる。なお、本実施の形態２の撮像装置は、上述した本実施の形態１の撮像装置１と同様の構成を有する。このため、本実施の形態２では、撮像装置１に備えられた各種撮影シーンに応じてそれぞれ設定された複数の撮影モードについて説明する。
【００８２】
まず、本実施の形態２に係る撮像装置１に備えられた各種撮影シーンに応じてそれぞれ設定された複数の撮影モードについて説明する。本実施の形態２に係る撮像装置１は、撮像モードとして、通常撮影、パノラマ撮影、スイング３Ｄ撮影、３Ｄ撮影、ＨＤＲ（High Dynamic Range）撮影およびＳストロボ撮影が備えられている。なお、上記した撮影モードは、あくまでも例示にすぎず、これに限定されるものではない。
【００８３】
図２０は、撮像装置１が行う撮影モードにおけるパノラマ撮影の撮影方法を説明する模式図である。図２０に示すように、撮像装置１は、ユーザによって左側から右側に移動ささせられることによって、複数の撮影位置で連続的に撮影した複数の画像データを生成する。具体的には、図２０に示すように、撮像装置１は、画像Ｗ３１〜Ｗ３３を生成する（図２０（ａ））。その後、合成画像生成部１１ｄが、画像Ｗ３１〜Ｗ３３の短手方向の端部同士を重ねて合成した一枚のパノラマ画像Ｗ３４を生成する（図２０（ｂ））。これにより、ユーザは、撮像装置１を移動させながら撮影することによって、パノラマ画像Ｗ３４を得ることができる。なお、図２０（ａ）においては、撮像部２が生成する複数の画像のうち、代表的な３枚の画像Ｗ３１〜Ｗ３３を示し、各画像Ｗ３１〜Ｗ３３の間には複数の画像が存在する。
【００８４】
また、撮像装置１は、ユーザによって撮像装置１を移動させながら撮影することにより、撮像装置１の撮影モードにおける３Ｄ撮影およびスイング３Ｄ撮影を行うことができる。３Ｄ撮影とは、ユーザが撮像装置１を移動させながら被写体を連続的に撮影することにより、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する撮影である。具体的には、図２０に示すように、ユーザが撮像装置１を左から右に向けて移動させながら撮像装置１が被写体Ａ１を連続的に撮影することにより、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する。これにより、撮像装置１は、ユーザが仮想的に認識する３次元画像（以下、「３Ｄ画像」という）を生成することができる。さらに、スイング３Ｄ撮影とは、撮影した３Ｄ画像に対して特殊効果を施して特殊効果３Ｄ画像を生成する撮影である。具体的には、画像分離部１１ｂによって３Ｄ画像内から被写体画像および背景画像を分離し、分離した被写体画像および背景画像に特殊効果画像生成部１１ｃが特殊効果をそれぞれ施して特殊効果画像を生成する。その後、合成画像生成部１１ｄが特殊効果画像を合成して特殊効果３Ｄ画像を生成する。これにより、撮像装置１は、３Ｄ画像に特殊効果を施した特殊効果３Ｄ画像を生成することができる。
【００８５】
図２１は、撮像装置１が行う撮影モードにおけるＨＤＲ撮影の撮影方法を説明する模式図である。図２２は、図２１に示す状況下で撮像装置１が生成する画像の一例を示す図である。なお、図２２において、画像Ｗ４０が、図２１（ａ）に示す状況下で撮像装置１が生成する画像であり、画像Ｗ４１が、図２１（ｂ）に示す状況下で撮像装置１が生成する画像である。ＨＤＲ撮影とは、ダイナミックレンジの大きな画像を得るために、明るさが暗い部分用の画像と明るさが明るい部分用の画像とを合成することによって明るさの再現域を拡大する撮影である。
【００８６】
図２１に示すように、まず、撮像装置１は、ストロボ４の光を被写体Ａ３に照射して被写体Ａ３を撮影して画像Ｗ４０を生成する（図２２（ａ））。続いて、撮像装置１は、露光時間を通常の撮影より長く、たとえば２倍長くした露光時間で被写体Ａ３を撮影して画像Ｗ４１を生成する（図２２（ｂ））。その後、画像分離部１１ｂが、画像Ｗ４０の輝度値と画像Ｗ４１の輝度値との差分に基づいて、画像Ｗ４０および画像Ｗ４１からそれぞれ被写体画像と背景画像とを分離する。具体的には、画像分離部１１ｂは、画像Ｗ４０の輝度値と画像Ｗ４１の輝度値との差が閾値以上ある領域を被写体画像として特定して分離する。これに対して、画像分離部１１ｂは、画像Ｗ４０の輝度値と画像Ｗ４１の輝度値との差が閾値未満である領域を背景画像として特定して分離する。続いて、合成画像生成部１１ｄは、画像分離部１１ｂが画像Ｗ４０から分離した被写体画像と画像Ｗ４１から分離した背景画像とを合成して合成画像を生成する。これにより、撮像装置１は、被写体Ａ３と背景とを最適な輝度値を有する合成画像を生成することができる。
【００８７】
また、撮像装置１は、ストロボの発光を通常撮影より強めて撮影するＳストロボ撮影または絞り値を通常撮影より高めることにより背景をぼかした背景ぼかし撮影を行うことができる。ここで、Ｓストロボとは、ストロボを発光させた画像と、ストロボを発光させずに露出時間を長くした画像とを合成し、背景が真っ暗になることを防ぎ、背景および人物を正しく再現させる処理である。また、背景ぼかしとは、画像の明るさの変化を小さくし、コントラストを低くする処理である。
【００８８】
以上の撮像モードを備えた本実施の形態２に係る撮像装置１が行う処理について説明する。本実施の形態２に係る撮像装置１が行う処理は、上述した本実施の形態１と同様の処理を行い（図１１を参照）、メニュー操作処理と撮影処理が異なる。このため、本実施の形態２に係る撮像装置１が行うメニュー操作処理を説明後、本実施の形態２に係る撮像装置１が行う撮影処理を説明する。
【００８９】
図２３は、本実施の形態２に係る撮像装置１が行うメニュー操作処理の概要を示すフローチャートである。
【００９０】
図２３において、まず、表示制御部１１ｅは、メニューアイコン（図１３を参照）を表示部７が表示する画像上に表示させ（ステップＳ５０１）、制御部１１は、ユーザによって特殊撮影モードアイコンが操作されたか否かを判断する（ステップＳ５０２）。所定時間内にユーザによって特殊撮影モードアイコンが操作されていない場合（ステップＳ５０２：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによって特殊撮影モードアイコンが操作された場合（ステップＳ５０２：Ｙｅｓ）、撮像装置１はステップＳ５０３に移行する。
【００９１】
続いて、表示制御部１１ｅは、特殊撮影モードの下位メニューアイコンを表示部７が表示する画像上に表示させる（ステップＳ５０３）。具体的には、図２４に示すように、表示制御部１１ｅは、表示部７が表示する画像Ｗ５０上に、撮像装置１にパノラマ撮影の設定を指示する指示信号が入力されるパノラマアイコンＱ２１および撮像装置１にスイング３Ｄ撮影の設定を指示する指示信号が入力されるスイング３ＤアイコンＱ２２等を表示させる。なお、図２４においては、撮影モードの下位メニューアイコンとして、パノラマアイコンＱ２１およびスイング３ＤアイコンＱ２２のみであったが、これに限定されるものでない。具体的には、表示制御部１１ｅは、ユーザによって撮影モードの切換を指示する指示信号の入力を受け付ける切換アイコンＱ２３，２４が操作された場合、他の下位メニューアイコン、たとえば撮像装置１に３Ｄ撮影の設定を指示する指示信号が入力される３Ｄ撮影アイコンを表示部７に表示させる。
【００９２】
続いて、制御部１１は、ユーザによってスイング３Ｄアイコンが操作されたか否かを判断する（ステップＳ５０４）。所定時間内にユーザによってスイング３Ｄアイコンが操作されていない場合（ステップＳ５０４：Ｎｏ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによってスイング３Ｄアイコンが操作された場合（ステップＳ５０４：Ｙｅｓ）、撮像装置１はステップＳ５０５に移行する。
【００９３】
その後、表示制御部１１ｅは、画像選択アイコンおよび特殊効果アイコンを表示部７が表示する画像上に表示させる（ステップＳ５０５）。具体的には、図２５に示すように、表示制御部１１ｅは、画像選択アイコンとして被写体選択アイコンＱ２６を表示部７に表示させるとともに、特殊効果情報記憶部９ｄが記憶する第２特殊効果情報テーブルを参照して、設定された撮影モードとの組み合わせに応じた推奨度の高い順に特殊効果に関する情報としてポップアイコンＱ２７を表示させる。なお、図２５において、アイコンＱ２５は、ユーザによって設定された現在の撮像装置１の撮影モードに関する情報およびユーザによって設定された特殊効果を施す対象の画像の情報を示すアイコンである。
【００９４】
ここで、図２６を参照して、表示制御部１１ｅが表示部７に表示させる特殊効果アイコンの表示方法について説明する。図２６は、特殊効果情報記憶部９ｄが記憶する第２特殊効果情報テーブルの一例を示す図である。
【００９５】
図２６に示すように、特殊効果情報テーブルＴ２は、撮像装置１で設定可能な撮影モードに対して適用可能な特殊効果が記載されている。具体的には、撮影モードに適用可能な特殊効果が、「ミニチュア」、「ポップ」、「魚眼」、「ソフト」、「セピア」、「白黒」および「スケッチ」である。さらに、撮像装置１で設定可能な撮像モードと被写体画像または背景画像に施す特殊効果との組み合わせに応じた推奨度が数値（０〜５）で記載されている。具体的には、撮影モードが「スイング３Ｄ」の場合、特殊効果の「ポップ」の推奨度として「５」が記載されている。さらに、撮影モードが「スイング３Ｄ」の場合、特殊効果の「魚眼」の推奨度として「０」が記載されている。この撮像モードと特殊効果との推奨度が「０」になる組み合わせは、撮影した画像に対して特殊効果による顕著な視覚効果を得られない組み合わせである。このため、本実施の形態２では、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する第２特殊効果情報テーブルＴ２を参照して、特殊効果アイコンを撮影モードと推奨度が高い順に表示部７に表示させる制御を行う。さらに、表示制御部１１ｅは、撮影モードに組み合わせが可能な特殊効果のアイコンのみを表示部７に表示させる制御を行う。すなわち、表示制御部１１ｅは、撮像モードと特殊効果との推奨度が「０」の特殊効果アイコンを表示部７に表示させない制御を行う。
【００９６】
図２３に戻り、ステップＳ５０６において、制御部１１は、ユーザによって終了アイコンＱ２９（図２５を参照）が操作されたか否かを判断する。ユーザによって終了アイコンＱ２９が操作された場合（ステップＳ５０６：Ｙｅｓ）、撮像装置１は図１１に示したメインルーチンに戻る。一方、ユーザによって終了アイコンＱ２９が操作されていない場合（ステップＳ５０６：Ｎｏ）、撮像装置１はステップＳ５０７に移行する。
【００９７】
続いて、制御部１１は、ユーザによって画像選択アイコンが操作されたか否かを判断する（ステップＳ５０７）。具体的には、図２５に示すように、制御部１１は、被写体画像に施す特殊効果の設定に切換える指示信号の入力を受け付ける被写体選択アイコンＱ２６が操作されたか否かを判断する。ユーザによって画像選択アイコンが操作されていない場合（ステップＳ５０８：Ｎｏ）、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する（ステップＳ５０８）。具体的には、図２５に示すように、制御部１１は、ユーザによってポップアイコンＱ２７が操作されたか否かを判断する。ユーザによって特殊効果アイコンが操作された場合（ステップＳ５０８：Ｙｅｓ）、制御部１１は、ユーザによって操作された特殊効果アイコンに応じて背景画像の特殊効果を設定し、この設定した設定内容を仮画像データ記憶部９ｃに記憶し（ステップＳ５０９）、撮像装置１はステップＳ５０５に戻る。
【００９８】
ステップＳ５０８において、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ５０８：Ｎｏ）について説明する。この場合、制御部１１は、ユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ５１０）。具体的には、図２５に示すように、制御部１１は、ユーザが表示部７によって現在表示されている特殊効果アイコンから次に推奨度が高い特殊効果アイコンに切換えを指示する指示信号の入力を受け付ける切換アイコンＱ２８を操作したか否かを判断する。所定時間内にユーザによって特殊効果アイコンの切換操作が行われない場合（ステップＳ５１０：Ｎｏ）、撮像装置１はステップＳ５０５に戻る。一方、ユーザによって特殊効果アイコンの切換操作が行われた場合（ステップＳ５１０：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ２を参照して、次に推奨度が高い特殊効果アイコン、たとえば「白黒」の特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ５１１）、撮像装置１はステップＳ５０８に戻る。
【００９９】
ステップＳ５０７において、ユーザによって画像選択アイコンが操作された場合（ステップＳ５０７：Ｙｅｓ）について説明する。この場合、表示制御部１１ｅは、画像選択アイコン、および特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、特殊効果アイコンを表示部７が表示する画像上に表示させる（ステップＳ５１２）。具体的には、図２７に示すように、表示制御部１１ｅは、画像選択アイコンＱ３０を表示させるとともに、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、ノーマルアイコンＱ３１、セピアアイコンＱ３２および白黒アイコンＱ３３を表示部７に表示させる。なお、図２７において、画像選択アイコンＱ３０には、ユーザによって設定された現在の撮像装置１の撮影モードと背景に設定された特殊効果の情報、たとえば特殊効果として白黒効果が付加されて表示される。これにより、ユーザは、背景画像に対して設定した特殊効果を確認しながら、被写体画像に施す特殊効果の設定を行うことができる。
【０１００】
ここで、図２８を参照して、表示制御部１１ｅが表示部７に表示させる特殊効果アイコンの表示方法について説明する。図２８は、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルの一例を示す図である。
【０１０１】
図２８に示すように、特殊効果情報テーブルＴ３は、被写体画像および背景画像それぞれに適用可能な特殊効果が記載されている。具体的には、特殊効果情報テーブルＴ３には、被写体画像および背景画像それぞれに特殊効果を施して合成画像を生成する際の特殊効果の組み合わせの推奨度が数値（０〜５）で記載されている。具体的には、被写体画像の特殊効果が「ノーマル」の場合、背景画像の特殊効果において「ノーマル」、「ソフト」および「白黒」の推奨度として「５」が記載されている。さらに、「セピア」の推奨度として「４」が記載され、「ポップ」、「魚眼」、「スケッチ」および「ミニチュア」の推奨度として「０」が記載されている。特殊効果の推奨度が「０」になる特殊効果の組み合わせは、撮影した画像に対して特殊効果による顕著な視覚効果を得られない組み合わせである。このため、本実施の形態２では、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ３を参照して、特殊効果の組み合わせが可能な特殊効果のアイコンのみを表示部７に表示させる制御を行う。すなわち、表示制御部１１ｅは、特殊効果の組み合わせ推奨度が「０」の特殊効果アイコンを表示部７に表示させない制御（制限）を行う。これにより、ユーザは、背景画像および被写体画像それぞれに対して特殊効果を設定して合成画像を生成する場合、画像が不自然になることを確実に防止することができる。
【０１０２】
図２３に戻り、ステップｓ５１３において、制御部１１は、ユーザによって特殊効果アイコンが操作されたか否かを判断する。ユーザによって特殊効果アイコンが操作された場合（ステップＳ５１３：Ｙｅｓ）、制御部１１は、ユーザによって操作された特殊効果アイコンに応じた被写体画像の特殊効果を設定し、この設定した設定内容を仮画像データ記憶部９ｃに記憶し（ステップＳ５１４）、撮像装置１はステップＳ５０５に戻る。
【０１０３】
これに対して、ユーザによって特殊効果アイコンが操作されていない場合（ステップＳ５１３：Ｎｏ）、制御部１１は、ユーザによって特殊効果アイコンの切換操作が行われたか否かを判断する（ステップＳ５１５）、具体的には、図２７に示すように、制御部１１は、ユーザが表示部７によって現在表示されている特殊効果アイコンから次の推奨度が高い特殊効果アイコンに切換えを指示する指示信号の入力を受け付ける切換アイコンＱ３４がタッチしたか否かを判断する。所定時間内にユーザによって特殊効果アイコンの切換操作が行われていない場合（ステップＳ５１５：Ｎｏ）、撮像装置１はステップＳ５０５に戻る。一方、ユーザによって特殊効果アイコンの切換操作が行われた場合（ステップＳ５１５：Ｙｅｓ）、表示制御部１１ｅは、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルＴ３を参照して、次に推奨度が高い特殊効果アイコン、たとえば「ポップ」の特殊効果アイコンに切換えて表示部７に表示させ（ステップＳ５１６）、撮像装置１はステップＳ５０５に戻る。
【０１０４】
つぎに、本実施の形態２に係る撮像装置１が行う撮影処理について説明する。図２９は、撮影処理の概要を示すフローチャートである。なお、以下の説明においては、撮像装置１の撮影モードがスイング３Ｄ撮影に設定されている場合について説明する。
【０１０５】
図２９に示すように、まず、制御部１１は、撮像装置１の撮影モードがスイング３Ｄ撮影に設定されているか否かを判断する（ステップＳ６０１）。撮像装置１の撮影モードがスイング３Ｄ撮影に設定されている場合（ステップＳ６０１：Ｙｅｓ）、制御部１１は、ユーザによって撮像装置１が移動を開始したか否かを判断する（ステップＳ６０２）。撮像装置１が移動を開始していない場合（ステップＳ６０２：Ｎｏ）、制御部１１は、この判断を繰り返す。一方、ユーザによって撮像装置１が移動を開始した場合（ステップＳ６０２：Ｙｅｓ）、撮像装置１はステップＳ６０３に移行する。
【０１０６】
続いて、撮像装置１は、微小な時間間隔で連続的に撮影を行い（ステップＳ６０３）、制御部１１は、撮影した画像を仮画像データ記憶部９ｃに仮記憶させる（ステップＳ６０４）。
【０１０７】
その後、制御部１１は、撮像装置１が移動を停止したか否かを判断する（ステップＳ６０５）。撮像装置１が移動を停止していない場合（ステップＳ６０５：Ｎｏ）、撮像装置１はステップＳ６０３に戻る。一方、撮像装置１が移動を停止した場合（ステップＳ６０５：Ｙｅｓ）、撮像装置１はステップＳ６０６に移行する。
【０１０８】
続いて、制御部１１は、画像分離部１１ｂが撮影した複数の画像から被写体画像と背景画像とを分離することが可能であるか否かを判断する（ステップＳ６０６）。画像分離部１１ｂが撮影した複数の画像から被写体画像と背景画像とを分離することができない場合（ステップＳ６０６：Ｎｏ）、表示制御部１１ｅは、撮影した画像から被写体画像と背景画像とを分離することができない旨の警告を表示部７に表示させ（ステップＳ６０７）、撮像装置１は図１１に示したメインルーチンに戻る。
【０１０９】
ステップＳ６０６において、画像分離部１１ｂが撮影した画像から被写体画像と背景画像とを分離することが可能である場合（ステップＳ６０６：Ｙｅｓ）について説明する。この場合、画像分離部１１ｂは、撮影した画像から被写体画像と背景画像とを分離し（ステップＳ６０８）、特殊効果画像生成部１１ｃは、仮画像データ記憶部９ｃに記憶された被写体画像と背景画像とにそれぞれ設定された特殊効果を施して特殊効果画像を生成する（ステップＳ６０９）。
【０１１０】
続いて、合成画像生成部１１ｄは、特殊効果画像生成部１１ｃが生成した被写体画像および背景画像それぞれの特殊効果画像を合成して合成画像を生成し（ステップＳ６１０）、表示制御部１１ｅは、合成画像生成部１１ｄが生成した合成画像を用いて３Ｄ特殊効果画像を表示部７に表示させる（ステップＳ６１１）。具体的には、図３０に示すように、表示制御部１１ｅは、合成画像ＷＬ２および合成画像ＷＲ２の２つの画像データを用いて３Ｄ画像を表示部７に表示させる。これにより、ユーザは、被写体画像および背景画像それぞれに特殊効果を施した３Ｄ画像を仮想的に視認することができる。
【０１１１】
その後、制御部１１は、表示部７が現在表示している画像を画像データ記憶部９ａに記憶させ（ステップＳ６１２）、撮像装置１は図１１に示したメインルーチンに戻る。
【０１１２】
ステップＳ６０１において、撮像装置１の撮影モードがスイング３Ｄ撮影に設定されていない場合（ステップＳ６０１：Ｎｏ）について説明する。この場合、撮像装置１は、被写体に対して撮影を行い（ステップＳ６１３）、表示制御部１１ｅは、撮影した画像を表示部７にレックビュー表示させる（ステップＳ６１４）。
【０１１３】
その後、制御部１１は、撮影した画像を画像データ記憶部９ａに記憶させ（ステップＳ６１５）、撮像装置１は図１１に示したメインルーチンに戻る。
【０１１４】
以上説明した本実施の形態２によれば、特殊効果情報記憶部９ｄが撮像装置１で設定可能な撮影モードと被写体画像または背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルＴ２を記憶し、表示制御部１１ｅが、タッチパネル８からの入力によって撮影モードが設定された場合、第２特殊効果情報テーブルを参照して、設定された撮影モードとの組み合わせに応じた推奨度の高い順に特殊効果に関する情報を表示部７に表示させる。これにより、ユーザが撮影モードと特殊効果とを組み合わせて撮影を行う場合に、撮像モードと特殊効果との組み合わせの選択の指針となる情報をユーザに提示することができる。
【０１１５】
さらに、本実施の形態２によれば、表示制御部１１ｅが、撮影モードと特殊効果との組み合わせが可能な特殊効果に対応する特殊効果アイコンのみ表示部７に表示させる制御を行う。これにより、ユーザは、撮影モードと特殊効果とを組み合わせて撮影を行う場合、撮影する画像が不自然になることを確実に防止することができる。
【０１１６】
なお、上述した実施の形態２では、撮像装置１がユーザによって移動させながら撮影することにより、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成していたが、たとえば、撮像部を２つの光学系を有する構成にすることによって互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成するようにしてもよい。
【０１１７】
（その他の実施の形態）
また、本実施の形態１，２では、表示制御部１１ｅが、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルを参照して、特殊効果の組み合わせの推奨度が高い順に特殊効果アイコンの色および／または大きさを変えた表示態様で表示部７に強調表示させてもよい。これにより、ユーザは、特殊効果との組み合わせの選択の指針となる情報に基づいて、最適な特殊効果の組み合わせを直感的に選択することができる。
【０１１８】
また、本実施の形態１，２では、合成画像生成部１１ｄが、画像分離部１１ｂによって分離された被写体画像および背景画像それぞれに特殊効果が施された特殊効果画像を合成していたが、たとえば画像データ記憶部９ａが記憶する画像（圧縮データまたは非圧縮データ、アスペクト比ごとに分類された圧縮データまたは非圧縮データ等）と多重露出で撮影した直後の画像とに特殊効果をそれぞれ施して２つの特殊効果画像を生成し、この生成した２つの特殊効果画像を合成して合成画像を生成するようにしてもよい。
【０１１９】
また、本実施の形態１，２では、姿勢検出部３は、撮像装置１の姿勢状態を検出していたが、たとえば、ユーザが表示部７の表示画面をタップした際に生じる加速度を検出することにより、撮像装置１の各種撮影モードまたは各種設定を切換えるタッチ操作の操作信号を受け付け、この操作信号を制御部１１に出力するようにしてもよい。
【０１２０】
また、本実施の形態１，２では、通信部１０を介してパーソナルコンピュータやサーバ等の外部処理装置に接続することによって、特殊効果情報記憶部９ｄが記憶する特殊効果情報テーブルの更新または書き換えを行ってもよい。これにより、表示制御部１１ｅは、新たに追加された特殊効果や撮影モードの組み合わせを加味した推奨度で特殊効果アイコンを表示することができる。さらに、記憶部９に装着可能な記憶媒体、たとえばメモリカード等に新たに追加された特殊効果や撮影モードの組み合わせの推奨度を記憶させ、制御部１１が記憶媒体から取得して特殊効果情報記憶部９ｄに記憶させることで特殊効果情報テーブルの更新または書き換えを行ってもよい。
【０１２１】
また、本実施の形態１，２では、撮像装置１をデジタルカメラとして説明していたが、たとえばデジタルビデオカメラ、カメラ付き携帯電話等の撮影機能および表示機能を備えた各種電子機器に適用することができる。
【符号の説明】
【０１２２】
１ 撮像装置
２ 撮像部
２ａ レンズ部
２ｂ レンズ駆動機構
２ｃ 絞り
２ｄ 絞り駆動機構
２ｅ シャッタ
２ｆ シャッタ駆動機構
２ｇ 撮像素子
２ｈ 信号処理部
３ 姿勢検出部
４ ストロボ
５ 時計
６ 操作入力部
６ａ 電源スイッチ
６ｂ レリーズスイッチ
６ｃ 撮影モード切換スイッチ
６ｅ メニュースイッチ
６ｆ ズームスイッチ
７ 表示部
８ タッチパネル
９ 記憶部
９ａ 画像データ記憶部
９ｂ プログラム記憶部
９ｃ 仮画像データ記憶部
９ｄ 特殊効果情報記憶部
１０ 通信部
１１ 制御部
１１ａ 画像処理部
１１ｂ 画像分離部
１１ｃ 特殊効果画像生成部
１１ｄ 合成画像生成部
１１ｅ 表示制御部
【特許請求の範囲】
【請求項１】
被写体を撮像して該被写体の電子的な画像データを生成し、この生成された画像データに対応する画像を表示する表示部を有し、前記画像に特殊効果を施すことが可能な撮像装置であって、
前記表示部が表示する前記画像から被写体画像と背景画像とを分離する画像分離部と、
前記画像分離部が分離した前記被写体画像および前記背景画像に対してそれぞれ施す特殊効果に関する情報の入力を受け付ける入力部と、
前記入力部が受け付けた情報に応じた特殊効果を前記被写体画像および前記背景画像に対して個別に施して各画像の特殊効果画像を生成する特殊効果画像生成部と、
前記特殊効果画像生成部が前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部と、
前記特殊効果画像生成部が生成した前記特殊効果画像を用いて合成画像を生成する合成画像生成部と、
前記表示部の表示を制御する表示制御部と、
を備え、
前記特殊効果画像生成部が前記被写体画像および前記背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が前記合成画像生成部によって前記被写体画像および前記背景画像の他方と合成された場合、前記表示制御部は、この合成された合成画像を前記表示部に表示させるとともに、前記記憶部が記憶する特殊効果情報テーブルを参照して、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に前記表示部に表示させることを特徴とする撮像装置。
【請求項２】
前記記憶部は、当該撮像装置で設定可能な撮影モードと前記被写体画像または前記背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルを記憶し、
前記入力部は、撮影モードの設定入力を受け付け、
前記表示制御部は、前記入力部からの入力によって撮影モードが設定された場合、前記記憶部が記憶する第２特殊効果情報テーブルを参照して、設定された前記撮影モードとの組み合わせに応じた前記推奨度の高い順に前記特殊効果に関する情報を前記表示部に表示させることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示制御部は、前記直近に施した特殊効果に対して組み合わせることが可能な特殊効果に関する情報のみを前記表示部に表示させることを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記入力部は、前記表示部の表示画面上に設けられ、外部から接触する物体の位置に応じた信号の入力を受け付けるタッチパネルを有し、
前記表示制御部は、前記特殊効果に関する情報をアイコンによって前記表示部に表示させ、
前記特殊効果画像生成部は、前記タッチパネルが前記アイコンの表示領域上に位置する接触領域で入力を受け付けた前記アイコンに対応する特殊効果を、前記被写体画像または前記背景画像に施して前記特殊効果画像を生成することを特徴する請求項１〜３のいずれか一つに記載の撮像装置。
【請求項５】
前記表示制御部は、前記直近に施した特殊効果との組み合わせに応じて前記アイコンの色および／または大きさを変えた表示態様で前記表示部に強調表示させることを特徴とする請求項４に記載の撮像装置。
【請求項６】
被写体を撮像して該被写体の電子的な画像データを生成し、該画像データに対応する画像を表示可能であるとともに、前記画像に特殊効果を施すことが可能な撮像装置に、
前記画像から被写体画像と背景画像とを分離する画像分離ステップと、
前記画像分離ステップで分離した前記被写体画像および前記背景画像の一方に対して特殊効果を施した特殊効果画像を生成する特殊効果画像生成ステップと、
前記特殊効果画像生成ステップで生成した特殊効果画像を前記被写体画像および前記背景画像の他方と合成して合成画像を生成する合成画像生成ステップと、
前記合成画像生成ステップで生成した合成画像を表示するとともに、前記特殊効果画像生成ステップが前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部から該特殊効果情報テーブルを読み出して参照し、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に表示する表示ステップと、
を実行させることを特徴とする撮像プログラム。
【請求項１】
被写体を撮像して該被写体の電子的な画像データを生成し、この生成された画像データに対応する画像を表示する表示部を有し、前記画像に特殊効果を施すことが可能な撮像装置であって、
前記表示部が表示する前記画像から被写体画像と背景画像とを分離する画像分離部と、
前記画像分離部が分離した前記被写体画像および前記背景画像に対してそれぞれ施す特殊効果に関する情報の入力を受け付ける入力部と、
前記入力部が受け付けた情報に応じた特殊効果を前記被写体画像および前記背景画像に対して個別に施して各画像の特殊効果画像を生成する特殊効果画像生成部と、
前記特殊効果画像生成部が前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部と、
前記特殊効果画像生成部が生成した前記特殊効果画像を用いて合成画像を生成する合成画像生成部と、
前記表示部の表示を制御する表示制御部と、
を備え、
前記特殊効果画像生成部が前記被写体画像および前記背景画像の一方に対して特殊効果を施し、この特殊効果が施された特殊効果画像が前記合成画像生成部によって前記被写体画像および前記背景画像の他方と合成された場合、前記表示制御部は、この合成された合成画像を前記表示部に表示させるとともに、前記記憶部が記憶する特殊効果情報テーブルを参照して、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に前記表示部に表示させることを特徴とする撮像装置。
【請求項２】
前記記憶部は、当該撮像装置で設定可能な撮影モードと前記被写体画像または前記背景画像に施す特殊効果との組み合わせに応じた推奨度を与える第２特殊効果情報テーブルを記憶し、
前記入力部は、撮影モードの設定入力を受け付け、
前記表示制御部は、前記入力部からの入力によって撮影モードが設定された場合、前記記憶部が記憶する第２特殊効果情報テーブルを参照して、設定された前記撮影モードとの組み合わせに応じた前記推奨度の高い順に前記特殊効果に関する情報を前記表示部に表示させることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示制御部は、前記直近に施した特殊効果に対して組み合わせることが可能な特殊効果に関する情報のみを前記表示部に表示させることを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記入力部は、前記表示部の表示画面上に設けられ、外部から接触する物体の位置に応じた信号の入力を受け付けるタッチパネルを有し、
前記表示制御部は、前記特殊効果に関する情報をアイコンによって前記表示部に表示させ、
前記特殊効果画像生成部は、前記タッチパネルが前記アイコンの表示領域上に位置する接触領域で入力を受け付けた前記アイコンに対応する特殊効果を、前記被写体画像または前記背景画像に施して前記特殊効果画像を生成することを特徴する請求項１〜３のいずれか一つに記載の撮像装置。
【請求項５】
前記表示制御部は、前記直近に施した特殊効果との組み合わせに応じて前記アイコンの色および／または大きさを変えた表示態様で前記表示部に強調表示させることを特徴とする請求項４に記載の撮像装置。
【請求項６】
被写体を撮像して該被写体の電子的な画像データを生成し、該画像データに対応する画像を表示可能であるとともに、前記画像に特殊効果を施すことが可能な撮像装置に、
前記画像から被写体画像と背景画像とを分離する画像分離ステップと、
前記画像分離ステップで分離した前記被写体画像および前記背景画像の一方に対して特殊効果を施した特殊効果画像を生成する特殊効果画像生成ステップと、
前記特殊効果画像生成ステップで生成した特殊効果画像を前記被写体画像および前記背景画像の他方と合成して合成画像を生成する合成画像生成ステップと、
前記合成画像生成ステップで生成した合成画像を表示するとともに、前記特殊効果画像生成ステップが前記被写体画像および前記背景画像に対して施す特殊効果の組み合わせに応じた推奨度を与える特殊効果情報テーブルを記憶する記憶部から該特殊効果情報テーブルを読み出して参照し、前記被写体画像または前記背景画像に施すべき特殊効果に関する情報を、直近に施した特殊効果との組み合わせに応じた前記推奨度の高い順に表示する表示ステップと、
を実行させることを特徴とする撮像プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【公開番号】特開２０１２−６０２０１（Ｐ２０１２−６０２０１Ａ）
【公開日】平成２４年３月２２日（２０１２．３．２２）
【国際特許分類】
【出願番号】特願２０１０−１９８３１０（Ｐ２０１０−１９８３１０）
【出願日】平成２２年９月３日（２０１０．９．３）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２４年３月２２日（２０１２．３．２２）
【国際特許分類】
【出願日】平成２２年９月３日（２０１０．９．３）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]