撮像装置および撮像プログラム
【課題】被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができる撮像装置および撮像プログラムを提供する。
【解決手段】一対の画像それぞれに含まれる類似領域を重畳することにより、この一対の画像の視差量を算出する視差量算出部３２３と、視差量算出部３２３が算出した視差量に応じて、一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分け部３２４と、顔検出部３２２が検出した顔が近距離領域内にある場合、背景領域を画像処理部１４が特殊効果処理を行う領域として設定する画像処理設定部３２６と、を備える。
【解決手段】一対の画像それぞれに含まれる類似領域を重畳することにより、この一対の画像の視差量を算出する視差量算出部３２３と、視差量算出部３２３が算出した視差量に応じて、一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分け部３２４と、顔検出部３２２が検出した顔が近距離領域内にある場合、背景領域を画像処理部１４が特殊効果処理を行う領域として設定する画像処理設定部３２６と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮像して電子的な画像データを生成する撮像装置および撮像プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタルビデオカメラ等の撮像装置において、被写体を撮像した画像データに特殊効果を施すことによって、消費者の様々な要望に応える技術が知られている。たとえば、被写体を撮像した画像データにワイプやセピア等の特殊効果を施してメモリに記憶する技術が知られている（特許文献１参照）。この技術では、ユーザが特殊効果を選択するエフェクトスイッチを操作した際に選択された特殊効果を施した画像を、表示モニタが表示する画像上の一部に表示させることにより、ユーザに所望の特殊効果を容易に選択させることができるようになっている。
【０００３】
また、撮像した画像内に含まれる人物や花等の主要被写体と背景とにそれぞれ異なる画像処理を行う技術が知られている（特許文献２参照）。この技術では、主要被写体と背景とにそれぞれ異なった画像処理、たとえば感度（ＩＳＯ）処理、シャープネス処理、ぼかし処理または色相変換処理等を行うことにより、主要被写体を背景から際立たせることができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３４７８８６号公報
【特許文献２】特開２００２−４４５１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の撮像装置では、主要被写体および背景それぞれに対して、同一種類でパラメータが異なる画像処理しか行っていなかった。このため、被写体が人物や動物である場合、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができなかった。
【０００６】
本発明は、上記に鑑みてなされたものであって、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができる撮像装置および撮像プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明にかかる撮像装置は、被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像部と、前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理部と、前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出部と、前記視差量算出部が算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分け部と、前記一対の画像それぞれに含まれる顔を検出する顔検出部と、前記顔検出部が検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定部と、を備えたことを特徴とする。
【０００８】
また、本発明にかかる撮像装置は、上記発明において、前記顔検出部が検出した顔の特性を特定する特性特定部と、前記特性特定部が特定する特性と前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理との組み合わせに応じた推奨度を与える第１特殊効果処理情報を記憶する第１特殊効果処理情報記憶部と、をさらに備え、前記画像処理設定部は、前記特性特定部が前記顔検出部によって検出された顔の特性を特定した場合、前記第１特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理部が行う処理として設定することを特徴とする。
【０００９】
また、本発明にかかる撮像装置は、上記発明において、前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理の推奨度を与える第２特殊効果処理情報を記憶する第２特殊効果処理情報記憶部をさらに備え、前記画像処理設定部は、前記顔検出部が検出した顔が前記近距離領域内にない場合、前記第２特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理部が行う処理として設定することを特徴とする。
【００１０】
また、本発明にかかる撮像装置は、上記発明において、前記一対の画像データに対応する画像を表示する表示部と、前記画像処理部が実施可能な各特殊効果処理に関するアイコンを前記表示部に表示させる表示制御部と、前記表示部が表示するアイコンの選択を指示する操作信号の入力を受け付ける入力部と、を備え、前記画像処理設定部は、前記入力部によって選択されたアイコンに対応する特殊効果処理を設定することを特徴とする。
【００１１】
また、本発明にかかる撮像プログラムは、被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像ステップと、前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理ステップと、前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出ステップと、前記視差量算出ステップが算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分けステップと、前記一対の画像それぞれに含まれる顔を検出する顔検出ステップと、前記顔検出ステップが検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定ステップと、を撮像装置に実行させることを特徴とする。
【発明の効果】
【００１２】
本発明によれば、切分け部が視差量算出部によって算出された視差量に応じて、左目画像および右目画像それぞれの領域を近距離領域と背景領域とに切り分け、画像処理設定部が顔検出部によって検出された顔が近距離領域内である場合、背景領域を画像処理部が特殊効果処理を行う領域として設定する。この結果、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができるという効果を奏する。
【図面の簡単な説明】
【００１３】
【図１】図１は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【図２】図２は、本発明の実施の形態１にかかる撮像装置の被写体に面する側の構成を示す斜視図である。
【図３】図３は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側の構成を示す斜視図である。
【図４】図４は、本発明の実施の形態１にかかる撮像装置の表示部の概略構成を示す模式図である。
【図５】図５は、本発明の実施の形態１にかかる撮像装置の撮像部が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。
【図６】図６は、図５に示す状況下で撮像装置の立体画像生成部が生成する２つの画像データそれぞれに対応する２つの画像の一例を示す図である。
【図７】図７は、図５に示す状況下で撮像装置の立体画像生成部が生成した左目画像と右目画像とを仮想的に重ねた画像の一例を示す図である。
【図８】図８は、図５に示す状況下で撮像装置の立体画像生成部が生成した左目画像および右目画像を表示部に表示した際にユーザが仮想的に視認する３Ｄ画像の飛び出し距離を説明する図である。
【図９】図９は、本発明の実施の形態１にかかる撮像装置が特殊効果撮影モードに設定されている場合に表示部が表示する特殊効果撮影モードにおける特殊効果撮影操作メニュー画面遷移の一例を示す図である。
【図１０】図１０は、本発明の実施の形態１にかかる撮像装置の第１特殊効果処理情報記憶部が記憶する第１特殊効果処理情報テーブルの一例を示す図である。
【図１１】図１１は、本発明の実施の形態１にかかる撮像装置の第２特殊効果処理情報記憶部が記憶する第２特殊効果処理情報テーブルの一例を示す図である。
【図１２】図１２は、本発明の実施の形態１にかかる撮像装置が行う処理の概要を示すフローチャートである。
【図１３】図１３は、図１２に示す特殊効果処理設定の概要を示すフローチャートである。
【図１４】図１４は、本発明の実施の形態１にかかる撮像装置の表示部が表示する画像の一例を示す図である。
【図１５】図１５は、本発明の実施の形態２にかかる撮像装置が行う特殊効果処理の概要を示すフローチャートである。
【図１６】図１６は、本発明の実施の形態２にかかる撮像装置の表示部が表示する画像の一例を示す図である。
【図１７】図１７は、本発明の実施の形態の変形例１にかかる撮像装置で被写体を撮影する際の状況を示す図である。
【図１８】図１８は、図１７に示す状況下で撮像装置の表示部が表示する画面遷移の一例を示す図である。
【図１９】図１９は、本発明の実施の形態の変形例２にかかる撮像装置が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。
【発明を実施するための形態】
【００１４】
以下に、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。
【００１５】
（実施の形態１）
図１は、本発明の実施の形態１にかかる撮像装置の構成を示すブッロク図である。図２は、本発明の実施の形態１にかかる撮像装置の被写体に面する側（前面側）の構成を示す斜視図である。図３は、本発明の実施の形態１にかかる撮像装置の撮影者に面する（背面側）の構成を示す斜視図である。図１〜図３に示す撮像装置１は、デジタル一眼レフカメラであり、本体部２と、本体部２に着脱自在なレンズ部３と、を備える。
【００１６】
図１〜図３に示すように、本体部２は、シャッタ１０と、撮像素子１１と、Ａ／Ｄ変換部１２と、メモリ１３と、画像処理部１４と、撮像素子駆動部１５と、シャッタ駆動部１６と、露出処理部１７と、ＡＦ処理部１８と、タイマー１９と、本体通信部２０と、操作入力部２１と、フラッシュ発光部２２と、フラッシュ充電部２３と、フラッシュ駆動部２４と、表示部２５と、タッチパネル２６と、不揮発性メモリ２７と、外部メモリ２８と、外部通信部２９と、電源供給部３０と、電源部３１と、制御部３２と、を備える。
【００１７】
シャッタ１０は、撮像素子１１の状態を露光状態または遮光状態に設定する。シャッタ駆動部１６は、ステッピングモータ等を用いて構成され、レリーズ信号に応じてシャッタ１０を駆動する。
【００１８】
撮像素子１１は、レンズ部３が集光した光を受光して電気信号に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いて構成される。撮像素子駆動部１５は、所定のタイミングで撮像素子１１から画像データ（アナログ信号）をＡ／Ｄ変換部１２に出力させる。
【００１９】
Ａ／Ｄ変換部１２は、撮像素子１１から入力されるアナログ信号に対してＡ／Ｄ変換を行うことによってデジタルの画像データを生成してメモリ１３に出力する。
【００２０】
メモリ１３は、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）を用いて構成される。メモリ１３は、Ａ／Ｄ変換部１２から入力される画像データや撮像装置１の処理中の情報を一時的に記録する。具体的には、メモリ１３は、撮像素子１１が１フレーム毎に順次出力する画像データを一時的に記録する。
【００２１】
画像処理部１４は、制御部３２を介してメモリ１３に記録された画像データを取得し、取得した画像データに対して各種の画像処理を施してメモリ１３または不揮発性メモリ２７に出力する。具体的には、画像処理部１４は、画像データに対して、少なくともエッジ強調、ホワイトバランス、色補正およびγ補正を含む通常の画像処理を行う。画像処理部１４は、特殊効果処理部１４１を有する。
【００２２】
特殊効果処理部１４１は、画像データに対して複数の画像処理を組み合わせることにより視覚的な効果を生じさせる特殊効果処理を行う。この特殊効果処理としては、たとえばトーンカーブ処理、ぼかし処理および画像合成処理を組み合わせた処理を行う。
【００２３】
露出処理部１７は、制御部３２を介してメモリ１３に記録された画像データに基づいて、静止画撮影や動画撮影を行う際の条件、たとえば絞りの設定値、シャッタ速度等を決定することで撮像装置１の自動露出を行う。
【００２４】
ＡＦ処理部１８は、制御部３２を介してメモリ１３に記録された画像データに基づいて、撮像装置１の自動焦点（Auto Focus）の調整を行う。たとえば、ＡＦ処理部１８は、画像データのコントラストに基づいて、撮像する被写体像の鮮鋭度が最大となるようにレンズ部３を駆動する。
【００２５】
タイマー１９は、時間を計時する。タイマー１９は、撮影日時の判定機能を有する。タイマー１９は、撮像された画像データに日時データを付加するため、制御部３２に日時データを出力する。
【００２６】
本体通信部２０は、本体部２に装着されたレンズ部３との通信を行うための通信インターフェースである。なお、本体通信部２０は、本体部２に設けられた電源部３１からレンズ部３に電力を供給するようにしてもよい。
【００２７】
操作入力部２１は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ２１１と、撮影の指示を与えるレリーズ信号を入力するレリーズスイッチ２１２と、撮像装置１に設定された各種撮影モード切換えの指示を与える切換信号を入力する撮影モード切換スイッチ２１３と、撮像装置１の各種設定を選択または決定の指示を与える指示信号を入力する操作スイッチ２１４と、撮像装置１に設定された操作メニュー画面の表示の指示を与える指示信号を入力するメニュースイッチ２１５と、撮像した画像データのレックビュー表示の指示を与える指示信号を入力するプレビュースイッチ２１６と、動画撮影の指示を与える動画レリーズ信号を入力する動画スイッチ２１７と、を有する。操作スイッチ２１４は、メニュー画面等における選択設定を行う上下左右の各方向ボタン２１４ａ〜２１４ｄと、メニュー画面等における各方向ボタン２１４ａ〜２１４ｄによる操作を決定する決定ボタン２１４ｅ（ＯＫボタン）とを有する（図３を参照）。なお、操作スイッチ２１４は、ダイヤルスイッチ等を用いて構成してもよい。
【００２８】
フラッシュ発光部２２は、キセノンランプやＬＥＤ（Light Emitting Diode）等を用いて構成される。フラッシュ発光部２２は、撮像装置１が撮像する視野領域へ向けて補助光であるストロボ光を照射する。フラッシュ充電部２３は、電源部３１から電源供給を受けて電圧を昇圧して充電する。フラッシュ駆動部２４は、フラッシュ充電部２３が昇圧した電圧をフラッシュ発光部２２に印加させることにより、フラッシュ発光部２２を駆動する。
【００２９】
図４は、表示部２５の概略構成を示す模式図である。図４に示すように、表示部２５は、バックライト２５１と、表示パネル２５２と、視差バリア２５３とを有する。バックライト２５１は、ＬＥＤ（Light Emitting Diode）等によって構成され、画像を表示するための光を背面から照射する。表示パネル２５２は、液晶または有機ＥＬ（Electro Luminescence）等の表示パネルによって構成される。視差バリア２５３は、液晶等によって構成され、表示パネル２５２の上面に積層されている。視差バリア２５３は、表示パネル２５２の各画像の間隔よりも狭い間隔でスリットが設けられ、ユーザの右目ＥＲと左目ＥＬとにそれぞれ対応した画像を分離する。このような視差バリア２５３として、たとえばパララックバリア方式が適用される。なお、視差バリア２５３の代わりに、レンティキュラレンズを積層したレンズシートを表示パネル２５２の上面に設けてもよい。
【００３０】
以上の構成を有する表示部２５は、制御部３２から３次元画像（以下「３Ｄ画像」という）データが入力された場合、制御部３２の制御のもとで表示パネル２５２が左端の画像から水平方向に左目画像と右目画像とを交互に表示し、視差バリア２５３が表示パネル２５２の各画像から出た光を分離する。このため、左目画像が左目ＥＬのみに、右目画像が右目ＥＲのみにそれぞれ届く。これにより、ユーザは、表示部２５が表示する３Ｄ画像を立体視することができる。また、表示部２５が表示態様を３Ｄ画像から２次元画像（以下「２Ｄ画像」という）に切り換える際には、視差バリア２５３に印加される電圧がオン状態からオフ状態に変換することによって視差バリア２５３が遮光状態から透過状態に遷移し、左目画像データまたは右目画像データのどちらか一方が表示パネル２５３に出力される。
【００３１】
タッチパネル２６は、表示部２５の表示画面上に重ねて設けられる（図３を参照）。タッチパネル２６は、ユーザが表示部２５に表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた操作信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態では、いずれの方式のタッチパネルであっても適用可能である。
【００３２】
不揮発性メモリ２７は、フラッシュメモリを用いて構成される。不揮発性メモリ２７は、撮像装置１を動作させるための各種プログラム、本実施の形態にかかる撮像プログラムおよびプログラムの実行中に使用される各種データやパラメータ等を記憶する。不揮発性メモリ２７は、撮像装置１で実行される各種撮影モードに関する情報を記憶する撮影モード情報記憶部２７１と、画像処理部１４が行う特殊効果処理に関する情報を記憶する特殊効果処理情報記憶部２７２と、表示部２５に３Ｄ画像を表示させる際に用いる左目画像データを記憶する左目画像データ記憶部２７３と、表示部２５に３Ｄ画像を表示させる際に用いる右目画像データを記憶する右目画像データ記憶部２７４と、撮像した左目画像および右目画像それぞれの領域を、近距離領域（被写体領域）と背景領域とに切り分けることが可能な視差量を示す閾値を記憶する閾値記憶部２７５と、を有する。
【００３３】
特殊効果処理情報記憶部２７２は、第１特殊効果処理情報記憶部２７２ａと、第２特殊効果処理情報記憶部２７２ｂとを有する。第１特殊効果処理情報記憶部２７２ａは、特性特定部３２５が特定する特性と画像処理部１４が左目画像および右目画像それぞれに対して実施可能な各特殊効果処理との組み合わせに応じた推奨度を与える第１特殊効果処理情報を記憶する。第２特殊効果処理情報記憶部２７２ｂは、画像処理部１４が左目画像および右目画像それぞれに対して実施可能な各特殊効果処理の推奨度を与える第２特殊効果処理情報を記憶する。
【００３４】
外部メモリ２８は、撮像装置１の外部から装着されるメモリカード等の記録媒体を用いて構成される。外部メモリ２８は、記録媒体インターフェース（図示せず）を介して撮像装置１に装着されることで３Ｄ画像データや２Ｄ画像データ等の情報を記憶する一方、制御部３２の制御のもと、記憶した各種情報を表示部２５、画像処理部１４および不揮発性メモリ２７に出力する。
【００３５】
外部通信部２９は、通信インターフェースとしての機能を有し、ネットワーク（図示せず）を介してサーバ（図示せず）やパーソナルコンピュータ（図示せず）等の外部処理装置と相互方向に送受信を行う。外部通信部２９は、外部処理装置との間で送受信を行うことにより、撮像装置１の各種プログラムおよび特殊効果処理情報等に関するデータを取得して制御部３２に出力する。なお、外部通信部２９は、有線または無線ＬＡＮ（Local Area Network）等を介してネットワークに接続される。
【００３６】
電源供給部３０は、撮像装置１の各構成部に電源部３１の電力を供給する。電源部３１は、撮像装置１に着脱自在なバッテリを用いて構成される。なお、電源供給部３０は、外部電源（図示せず）から供給される電力を撮像装置１の各構成部に供給するようにしてもよい。
【００３７】
制御部３２は、ＣＰＵ（Central Processing Unit）等を用いて構成される。制御部３２は、操作入力部２１からの操作信号や指示信号に応じて不揮発性メモリ２７からプログラムを読み出して実行し、撮像装置１を構成する各部に対応する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。制御部３２は、立体画像生成部３２１と、顔検出部３２２と、視差量算出部３２３と、切分け部３２４と、特性特定部３２５と、画像処理設定部３２６と、表示制御部３２７とを有する。
【００３８】
立体画像生成部３２１は、画像処理部１４によって画像処理された画像データをメモリ１３から取得し、取得した画像データを用いて３Ｄ画像データを生成する。具体的には、立体画像生成部３２１は、まず、メモリ１３から取得した画像データを左目画像データと右目画像データとにそれぞれ分割する。その後、立体画像生成部３２１は、分割した左目画像データおよび右目画像データそれぞれを所定の縦横比率（たとえばアスペクト比９：１６）で切り出すことによって３Ｄ画像データを生成する。立体画像生成部３２１は、左目画像データおよび右目画像データそれぞれを左目画像データ記憶部２７３および右目画像データ記憶部２７４に記憶させる。なお、立体画像生成部３２１が分割した左目画像データおよび右目画像データそれぞれから切り出す縦横比率を操作入力部２１で変更できるようにしてもよい。
【００３９】
顔検出部３２２は、左目画像データに対応する左目画像または右目画像データに対応する右目画像のどちらか一方に含まれる人物や動物の顔をパターンマッチングによって検出する。たとえば、顔検出部３２２は、左目画像に含まれる人物の顔をパターンマッチングによって検出する。なお、顔検出部３２２は、人物の顔だけでなく、犬や猫等の動物の顔を検出してもよい。
【００４０】
視差量算出部３２３は、一対の画像それぞれに含まれる類似領域を重畳することにより、一対の画像の視差量を算出する。具体的には、視差量算出部３２３は、左目画像および右目画像それぞれに含まれる類似領域、たとえば背景領域を重畳することにより、左目画像および右目画像の視差量を算出する。
【００４１】
切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける。具体的には、切分け部３２４は、左目画像および右目画像それぞれの領域内で視差量が閾値記憶部２７５に記憶された閾値以上の領域を近距離領域として切り分ける一方、閾値未満を背景領域として切り分ける。
【００４２】
特性特定部３２５は、顔検出部３２２が検出した顔の特性を周知の技術を用いて特定する。具体的には、特性特定部３２５は、顔検出部３２２が検出した顔の特性として男性、女性、赤ちゃん（子供）または動物のいずれかであるかを特定する。この特定方法としては、赤ちゃんを特定する場合、顔検出部３２２が検出した顔の特徴点、たとえば目、鼻および唇等の位置を抽出し、抽出した特徴点を赤ちゃんにおける顔の基準サンプルデータと比較することで特定する。さらに、動物を特定する場合、特性特定部３２５は、顔検出部３２２が検出した顔に対して、犬や猫等の動物の顔の複数のサンプルデータを用いて特徴量を抽出し、この特徴量が設定された閾値以上である否かを判定することにより、顔検出部３２２が検出した顔が動物であるか否かを特定する。
【００４３】
画像処理設定部３２６は、顔検出部３２２が検出した顔が近距離領域内である場合、背景領域を画像処理部１４が特殊効果処理を行う領域として設定する。画像処理設定部３２６は、特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定した場合、第１特殊効果処理情報記憶部２７２ａが記憶する第１特殊効果処理情報参照して、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する。画像処理設定部３２６は、顔検出部３２２が検出した顔が近距離領域内にない場合または特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定できない場合、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報参照して、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する。さらに、画像処理設定部３２６は、顔検出部３２２が検出した顔が近距離領域内でない場合または特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定できない場合、左目画像および右目画像の全領域それぞれを画像処理部１４が行う特殊効果処理の領域として設定する。
【００４４】
表示制御部３２７は、表示部２５の表示態様を変更する。具体的には、表示制御部３２７は、表示部２５が表示している画像を２Ｄ画像または３Ｄ画像に切り換える制御を行う。表示制御部３２７は、表示部２５が２Ｄ画像を表示しているときに、操作入力部２１から操作信号が入力された場合において、特殊効果処理部１４１が行う特殊効果処理情報に関するアイコンを表示部２５に表示させる。
【００４５】
レンズ部３は、第１光学系４１と、第２光学系４２と、レンズ駆動部４３と、絞り４４と、絞り４５と、絞り駆動部４６と、ミラー４７と、ミラー４８と、プリズム４９と、レンズ通信部５０と、レンズ記憶部５１と、レンズ制御部５２と、を備える。なお、レンズ部３は、一対の光学系で視差を持って被写体を撮像し、撮像素子１１に左右の被写体像をそれぞれ形成することで３Ｄ撮影ができる交換レンズである。このため、第１光学系４１および第２光学系４２は、同じ構成のため、一方のみを説明する。
【００４６】
第１光学系４１は、一または複数のレンズを用いて構成される。第１光学系４１は、所定の視野領域から光を集光する。なお、第１光学系４１は、画像を変化させる光学ズーム機能を有してもよい。
【００４７】
レンズ駆動部４３は、ＤＣモータ等を用いて構成される。レンズ駆動部４３は、第１光学系４１および第２光学系４２のレンズそれぞれを光軸Ｌ上および光軸Ｒ上で同期させながら移動させることにより、第１光学系４１および第２光学系４２それぞれのピント位置や焦点距離等の変更を行う。
【００４８】
絞り４４および絞り４５は、第１光学系４１および第２光学系４２がそれぞれ集光した光の入射量を制限することにより露出の調整を行う。
【００４９】
絞り駆動部４６は、ステッピングモータ等を用いて構成される。絞り駆動部４６は、絞り４４および絞り４５をそれぞれ同期させながら駆動する。
【００５０】
ミラー４７およびミラー４８は、第１光学系４１および第２光学系４２がそれぞれ集光した光をプリズム４９に向けて反射する。
【００５１】
プリズム４９は、ミラー４７およびミラー４８からそれぞれ反射された光を撮像素子１１に向けて反射する。これにより、撮像素子１１には、第１光学系４１および第２光学系４２それぞれによって集光された左右一対の被写体像がそれぞれ形成される。
【００５２】
レンズ通信部５０は、レンズ部３が本体部２に装着された際に本体部２と相互方向に通信を行うための通信インターフェースである。
【００５３】
レンズ記憶部５１は、フラッシュメモリを用いて構成される。レンズ記憶部５１は、レンズ部３を動作させるための各種プログラムムおよびプログラムの実行中に使用される各種データやパラメータ等を記憶する。
【００５４】
レンズ制御部５２は、ＣＰＵ（Central Processing Unit）等を用いて構成される。レンズ制御部５２は、本体部２からの指示信号に応じてレンズ部３の動作を制御する。具体的には、レンズ制御部５２は、本体部２からの指示信号に応じてレンズ駆動部４３を駆動させてレンズ部３のピント合わせを行うとともに、絞り駆動部４６を駆動させて絞り値の変更を行う。なお、レンズ制御部５２は、レンズ部３が本体部２に装着された際に、レンズ部３のピント位置情報、焦点距離情報およびレンズ部３を識別する固有情報を本体部２に送信するようにしてもよい。なお、本実施の形態では、レンズ部３、撮像素子１１およびＡ／Ｄ変換部１２を含む構成が撮像部（以下、「撮像部１００」という）として機能する。すなわち、撮像部１００は、被写体を撮影することによって互いに視差を有する一対の画像データを生成することができる。
【００５５】
以上の構成を有する撮像装置１において、撮像部１００が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況について説明する。図５は、撮像部１００が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。図５に示すように、撮像部１００は、第１光学系４１および第２光学系４２からの距離が異なる被写体Ｅ１（距離ｄ１）および被写体Ｅ２（距離ｄ２）に対して、距離（基線長）Ｄ１だけ離れた並設された第１光学系４１および第２光学系４２で撮像することにより、左目画像データおよび右目画像データを撮像素子１１上に生成する。
【００５６】
続いて、立体画像生成部３２１は、撮像素子１１によって生成された画像データを左目画像データと右目画像データとにそれぞれ分割する。その後、立体画像生成部３２１は、分割した左目画像データおよび右目画像データそれぞれを所定の縦横比率で切り出すことによって左目画像および右目画像を生成する。
【００５７】
図６は、図５に示す状況下で立体画像生成部３２１が生成する２つの画像データそれぞれに対応する２つの画像の一例を示す図である。図６において、左目画像ＷＬ１は、立体画像生成部３２１が第１光学系４１によって生成された左目画像データに対応する画像から切り出して生成した画像である。また、図６において、右目画像ＷＲ１は、立体画像生成部３２１が第２光学系４２によって生成された右目画像データに対応する画像から切り出して生成した画像である。図７は、図５に示す状況下で立体画像生成部３２１が生成した左目画像ＷＬ１と右目画像ＷＲ１とを仮想的に重ねた画像（ＷＬＲ１）の一例を示す図である。図８は、図５に示す状況下で立体画像生成部３２１が生成した左目画像ＷＬ１および右目画像ＷＲ１を表示部２５に表示した際にユーザが仮想的に視認する３Ｄ画像の飛び出し距離を説明する図である。
【００５８】
図６に示すように、立体画像生成部３２１は、第１光学系４１と第２光学系４２との視差によって被写体Ｅ１，Ｅ２それぞれの位置が左右にずれた左目画像ＷＬ１および右目画像ＷＲ１を生成する。
【００５９】
続いて、表示制御部３２７は、左目画像ＷＬ１の被写体Ｅ２および右目画像ＷＲ１の被写体Ｅ２を重ねて表示部２５に表示させる（図７を参照）。これにより、ユーザは、被写体Ｅ１の視差によるズレ量ΔＸ１に応じて、被写体Ｅ１が表示パネル２５２からΔＺ１飛び出した立体的な３Ｄ画像を仮想的に視認することができる（図８を参照）。
【００６０】
その後、視差量算出部３２３は、左目画像ＷＬ１の被写体Ｅ２および右目画像ＷＲ１の被写体Ｅ２を重畳することにより、視差量を算出する。たとえば、図７に示す状況下では、視差量算出部３２３は、左目画像ＷＬ１および右目画像ＷＲ１どちらか一方の横幅をＸ０とした場合、この横幅Ｘ０の比率に応じた視差量を算出する。
【００６１】
続いて、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像ＷＬ１および右目画像ＷＲ１それぞれの領域を近距離領域と背景領域とに切り分けることができるか否かを判定する。具体的には、図７に示す状況下では、切分け部３２４は、視差量が横幅Ｘ０に対して、１／１００（１％）以上ずれた領域を近距離領域として切り分ける。たとえば、図５に示す状況下で、撮像する画像の横幅Ｘ０を３５ｍｍとしたとき、第１光学系４１および第２光学系４２から被写体Ｅ１までの距離ｄ１を１０００ｍｍ、第１光学系４１および第２光学系４２から撮像素子１１までの距離Ｆを３５ｍｍ、第１光学系４１の中心から第２光学系４２の中心までの距離Ｄ１を１０ｍｍとし、背景（無限遠）との視差量をΔＸとした場合において、
ΔＸ＝（Ｆ×Ｄ１）／ｄ１＝（３５×１０）／１０００＝０．３５
となる。この状況下で切分け部３２４は、視差量ΔＸが横幅Ｘ０の１／１００（＝０．３５／３５）になるため、左目画像ＷＬ１および右目画像ＷＲ１それぞれの領域を近距離領域と背景領域とに切り分けることができる。具体的には、切分け部３２４は、視差量算出部３２３によって算出された視差量が閾値記憶部２７５に記憶された閾値以上の領域を近距離領域として左目画像ＷＬ１および右目画像ＷＲ１それぞれから切り分ける。
【００６２】
このように、視差量算出部３２３は、左目画像ＷＬ１の被写体Ｅ２および右目画像ＷＲ１の被写体Ｅ２を重畳することにより、視差量を算出する。その後、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像ＷＬ１および右目画像ＷＲ１それぞれの領域を近距離領域と背景領域とに切り分ける。
【００６３】
つぎに、撮像装置１が特殊効果処理を行う特殊効果撮影モード（アートフィルタ撮影モード）の設定方法について説明する。なお、本実施の形態にかかる撮像装置１は、複数の撮影モード、たとえば、撮影シーン自動判別撮影モードやマニュアル撮影モードを有するが、以下の説明においては、特殊効果撮影モードの設定方法のみについて説明する。
【００６４】
まず、ユーザが電源スイッチ２１１を操作することにより、撮像装置１の起動に伴って、制御部３２は、撮像装置１の撮影モードが特殊効果撮影モードに設定されているか否かを判断する。具体的には、制御部３２は、撮影モード切換スイッチ２１３が特殊効果撮影モード（ＡＲＴ）に設定されているか否かを判断する（図２および図３を参照）。撮像装置１の撮影モードが特殊効果撮影モードに設定されていない場合、制御部３２は、他の撮影モードに対応した操作メニュー画面やライブビュー画像を表示部２５に表示させる。
【００６５】
これに対して、撮像装置１の撮影モードが特殊効果撮影モードに設定されている場合、表示制御部３２７は、特殊効果撮影モードに対応する特殊効果撮影操作メニュー画面を表示部２５に表示させる。
【００６６】
図９は、撮像装置１が特殊効果撮影モードに設定されている場合に表示部２５が表示する特殊効果撮影モードにおける特殊効果撮影操作メニュー画面遷移の一例を示す図である。
【００６７】
図９に示すように、表示制御部３２７は、撮像装置１が特殊効果撮影モードに設定された場合、特殊効果撮影モードにおける特殊効果撮影操作メニュー画面Ｗ１１を表示部２５に表示させる（図９（ａ）を参照）。特殊効果撮影操作メニュー画面Ｗ１１には、撮像装置１で実行可能な各特殊効果処理に関する情報がアイコンＡ１〜Ａ９として表示されている。
【００６８】
続いて、表示制御部３２７は、ユーザが操作スイッチ２１４の上ボタン２１４ａまたは下ボタン２１４ｂを操作することにより、操作スイッチ２１４から入力される操作信号に応じて表示部２５が表示する特殊効果撮影操作メニュー画面Ｗ１１の内容を表示部２５に切り換えさせる。具体的には、表示制御部３２７は、操作スイッチ２１４から入力される操作信号に応じて、特殊効果撮影操作メニュー画面Ｗ１１内に表示されるアイコンＡ１〜Ａ９の色を変更するとともに、選択されたアイコンに対応する特殊効果処理のタイトル、たとえば「ファンタジックフォーカス」、「ラフモノクローム」および「ジオラマ」等を表示部２５に表示させる（図９（ａ）→図９（ｂ）→図９（ｃ））。これにより、ユーザは、所望の特殊効果処理を選択することができるとともに、選択した特殊効果処理を直感的に確認することができる。
【００６９】
その後、制御部３２は、ユーザによって操作スイッチ２１４の決定ボタン２１４ｅが操作された際に表示部２５が特殊効果撮影操作メニュー画面Ｗ１１で現在表示している特殊効果処理、たとえば「ファンタジックフォーカス」（図９（ａ）を参照）を特殊効果撮影モードの特殊効果処理として撮像装置１に設定する。なお、設定された特殊効果処理に関する情報は、メモリ１３に記憶される。
【００７０】
続いて、表示制御部３２７は、特殊効果撮影操作メニュー画面Ｗ１１で選択された特殊効果処理を画像処理部１４が行った画像データに対応するライブビュー画像を表示部２５に表示させる。これにより、ユーザは、撮像した画像データに対して選択した特殊効果処理が施されたライブビュー画像をリアルタイムで確認しながら撮影の構図を決定することができる。
【００７１】
つぎに、図１０および図１１を参照して、画像処理部１４が特殊効果撮影モードで実行する特殊効果処理の処理内容について説明する。図１０は、第１特殊効果処理情報記憶部２７２ａが記憶する第１特殊効果処理情報テーブルの一例を示す図である。図１１は、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報テーブルの一例を示す図である。
【００７２】
図１０に示すように、第１特殊効果処理情報テーブルＴ１には、特殊効果撮影モードで画像処理部１４が左目画像および右目画像それぞれに対して実行可能な各特殊効果処理と、各特殊効果処理の画像処理の内容が記載されている。さらに、第１特殊効果処理情報テーブルＴ１には、特性特定部３２５が特定する顔の特性と、画像処理部１４が左目画像および右目画像それぞれに対して実施可能な各特殊効果処理との組み合わせに応じた推奨度が記載されている。たとえば、設定された特殊効果撮影モードの特殊効果処理「Ａｒｔ１」の「ファンタジックフォーカス」で特性特定部３２５が顔を「男性」と特定した場合、処理内容として「トーンカーブ処理（弱い）」、「ぼかし処理（強い）」および「合成処理」が記載され、推奨度として「４」が記載されている。ここで、合成処理とは、画像処理部１４がトーンカーブ処理を行った画像データと、ぼかし処理を行った画像データとを合成した画像データを生成する画像処理である。また、設定された特殊効果撮影モードの特殊効果処理「Ａｒｔ１」の「ファンタジックフォーカス」で特性特定部３２５が顔を「女性」と特定した場合、処理内容として「トーンカーブ処理（強い）」、「ぼかし処理（弱い）」および「合成処理」が記載され、推奨度として「１」が記載されている。
【００７３】
さらに、設定された特殊効果撮影モードの特殊効果処理が「Ａｒｔ７」の「墨絵」で特性特定部３２５が顔を「男性」と特定した場合、処理内容として「色彩判定ブロック化処理」、「２値化処理」および「エッジ処理（弱め）」が記載され、推奨度として「７」が記載されている。ここで、色彩判定ブロック化処理とは、画像内で類似する色を同じ色に変換するとともに、画素間を同じ大きさでブロックにまとめる画像処理である。
【００７４】
このように、第１特殊効果処理情報テーブルＴ１には、特性特定部３２５が特定した顔の特性に応じて、画像処理部１４が行う各特殊効果処理の推奨度が記載されているとともに、各特殊効果処理に記載された画像処理のパラメータを変更して記載されている。たとえば、赤ちゃんまたはペットの場合、撮影する画像の背景が地面になりがちになるうえ、赤ちゃんまたはペットはふっくら見える方が可愛く写る。このため、赤ちゃんまたはペットの場合、背景をぼかす特殊効果処理（ファンタジックフォーカス）の推奨度を最も高くすることで、被写体と背景との境界を強調させる。これにより、被写体のイメージに相応しい雰囲気で背景から被写体を引き立たせることができる。なお、第１特殊効果処理情報テーブルＴ１には、被写体の特性を３種類のみしか記載していないが、たとえば年齢またはペットの種類ごとに各特殊効果処理および推奨度を記載してもよい。さらに、被写体の数や動きに応じた各特殊効果処理や推奨度を記載してもよい。
【００７５】
つぎに、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報テーブルについて説明する。図１１に示すように、第２特殊効果処理情報テーブルＴ２には、特殊効果撮影モードで画像処理部１４が左目画像および右目画像それぞれに対して実行可能な各特殊効果処理と、各特殊効果処理の画像処理の内容が記載されている。たとえば、設定された特殊効果撮影モードの特殊効果処理「Ａｒｔ１」の「ファンタジックフォーカス」の場合、処理内容として「トーンカーブ処理（弱い）」、「ぼかし処理（強い）」および「合成処理」が記載され、推奨度として「１」が記載されている。
【００７６】
さらに、設定された特殊効果撮影モードの特殊効果処理が「Ａｒｔ９」の「ジオラマ」の場合、処理内容として「色相・彩度処理」、「コントラスト処理」、「３回ぼかし処理」および「３回合成処理」が記載され、推奨度として「９」が記載されている。ここで、３回ぼかし処理とは、画像処理部１４が色彩・彩度処理後、コントラスト処理を行った画像データに対してぼかし処理を３回行う処理である。また、３回合成処理とは、画像処理部１４がぼかし処理を行うごとに、ぼかし処理前の画像データと、ぼかし処理後の画像データとを合成した画像データを生成する画像処理である。
【００７７】
このように、ユーザによって特殊効果処理を撮像装置１に手動設定する際に２Ｄ画像を想定した特殊効果処理の推奨度を低く設定することで、ユーザに対して推奨度の高い特殊効果処理を積極的に選択させる。これにより、３Ｄ画像を撮影する際に２次元的な位置と３次元的な位置とでつじつまが合わなくなる特殊効果処理が選択されることを低減することができる。
【００７８】
つぎに、本実施の形態１にかかる撮像装置１が行う処理について説明する。図１２は、撮像装置１が行う処理の概要を示すフローチャートである。
【００７９】
図１２に示すように、まず、制御部３２は、撮像装置１が撮影モードであるか否かを判断する（ステップＳ１０１）。撮像装置１が撮影モードである場合（ステップＳ１０１：Ｙｅｓ）、撮像装置１は後述するステップＳ１０２に移行する。一方、撮像装置１が撮影モードに設定されていない場合（ステップＳ１０１：Ｎｏ）、撮像装置１はステップＳ１１２に移行する。
【００８０】
ステップＳ１０１において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０１：Ｙｅｓ）について説明する。この場合、表示制御部３２７は、撮像部１００が一定の微小な時間間隔で連続的に生成する一対の画像データに対応する３Ｄ画像のライブビュー画像を表示部２５に表示させる（ステップＳ１０２）。具体的には、表示制御部３２７は、撮像部１００によって生成された一対の画像データに対して、立体画像生成部３２１が左目画像データおよび右目画像データそれぞれを切り出して生成した３Ｄ画像のライブビュー画像を表示部２５に表示させる。
【００８１】
続いて、制御部３２は、撮影モードが特殊効果撮影モードであるか否かを判断する（ステップＳ１０３）。撮影モードが特殊効果撮影モードである場合（ステップＳ１０３：Ｙｅｓ）、撮像装置１は、撮像する画像に対して視覚的な効果を生じさせる特殊効果設定処理を実行し（ステップＳ１０４）、ステップＳ１０５に移行する。
【００８２】
これに対して、撮影モードが特殊効果撮影モードでない場合（ステップＳ１０３：Ｎｏ）、撮像装置１は後述するステップＳ１０５に移行する。
【００８３】
レリーズスイッチ２１２が操作された撮影を指示するレリーズ信号が入力された場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は撮影を行う（ステップＳ１０６）。
【００８４】
続いて、制御部３２は、撮像した画像データから画像ファイルを作成する（ステップＳ１０７）。この画像ファイルは、たとえば、撮像部１００によって生成された左目画像および右目画像それぞれに対して、画像処理部１４が特殊効果処理を背景領域に行った画像データから生成したものである。
【００８５】
その後、制御部３２は、生成した画像ファイルを外部メモリ２８に記憶させる（ステップＳ１０８）。
【００８６】
続いて、電源スイッチ２１１が操作されることにより撮像装置１の電源がオフであるか否かを判断する（ステップＳ１０９）。撮像装置１の電源がオフである場合（ステップＳ１０９：Ｙｅｓ）、撮像装置１は本処理を終了する。
【００８７】
これに対して、撮像装置１の電源がオフでない場合（ステップＳ１０９：Ｎｏ）、制御部３２は、撮影モード切換スイッチ２１３が操作されたとき（ステップＳ１１０：Ｙｅｓ）、撮影モード切換スイッチ２１３から入力される操作信号に応じて撮像装置１のモードを切り換え（ステップＳ１１１）、撮像装置１はステップＳ１０１に戻る。
【００８８】
ステップＳ１０１において、撮像装置１が撮影モードでない場合（ステップＳ１０１：Ｎｏ）について説明する。この場合、制御部３２は、撮像装置１が再生モードであるか否かを判断する（ステップＳ１１２）。撮像装置１が再生モードでない場合（ステップＳ１１２：Ｎｏ）、撮像装置１はステップＳ１０１に戻る。
【００８９】
これに対して、撮像装置１が再生モードである場合（ステップＳ１１２：Ｙｅｓ）、表示制御部３２７は、表示部２５に外部メモリ２８が記憶する画像ファイルを一覧表示させる（ステップＳ１１３）。
【００９０】
続いて、制御部３２は、表示部２５が表示している画像ファイルの一覧から画像ファイルが選択された場合（ステップＳ１１４：Ｙｅｓ）、表示制御部３２７は、選択された画像ファイルに含まれる画像データに対応する画像を表示部２５に表示させる（ステップＳ１１５）。
【００９１】
その後、制御部３２は、画像再生の終了操作が行われたか否かを判断する（ステップＳ１１６）。具体的には、制御部３２は、撮影モード切換スイッチ２１３が操作されることにより、再生モードから撮影モードに切り換えられたか否かを判断する。画像再生の終了操作が行われていない場合（ステップＳ１１６：Ｎｏ）、撮像装置１は上述したステップＳ１１３に戻る。一方、画像再生の終了操作が行われた場合（ステップＳ１１６：Ｙｅｓ）、撮像装置１はステップＳ１０９に移行する。
【００９２】
つぎに、図１２に示したステップＳ１０４の特殊効果処理設定について説明する。図１３は、図１２に示す特殊効果設定処理の概要を示すフローチャートである。
【００９３】
図１３に示すように、まず、視差量算出部３２３は、左目画像および右目画像それぞれに含まれる周辺領域を重ねるように左目画像および右目画像を重畳し（ステップＳ２０１）、左目画像および右目画像における視差量を算出する（ステップＳ２０２）。たとえば、視差量算出部３２３は、左目画像および右目画像それぞれに含まれる背景を重畳することにより、左目画像および右目画像における視差量を算出する。
【００９４】
続いて、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分ける切分け処理を行う（ステップＳ２０３）。具体的には、切分け部３２４は、視差量算出部３２３が算出した視差量が閾値記憶部２７５に記憶された閾値以上の領域があるか否かを判定する。その後視差量算出部３２３が算出した視差量が閾値記憶部２７５に記憶された閾値以上の領域がある場合、視差量算出部３２３が算出した視差量が閾値記憶部２７５に記憶された閾値以上の領域を近距離領域として切り分ける。左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分けることができた場合（ステップＳ２０３：Ｙｅｓ）、顔検出部３２２は、左目画像または右目画像における近距離領域に含まれる人物の顔を検出する（ステップＳ２０４）。
【００９５】
その後、特性特定部３２５は、顔検出部３２２によって検出された顔の特性を特定する特性特定処理を行う（ステップＳ２０５）。顔検出部３２２によって検出された顔の特性を特定することができた場合（ステップＳ２０５：Ｙｅｓ）、画像処理設定部３２６は、特殊効果処理情報記憶部２７２が記憶する特殊効果処理情報テーブルＴ１を参照して、ユーザによる特殊効果処理の手動設定がなれければ、特性特定部３２５が特定した特性に応じて、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する（ステップＳ２０６）。たとえば、特性特定部３２５が顔検出部３２２によって検出された顔を男性であると特定した場合、画像処理設定部３２６は、推奨度が最も高い特殊効果処理（図１０を参照）を画像処理部１４が行う処理として設定する。
【００９６】
続いて、画像処理部１４は、画像処理設定部３２６によって設定された特殊効果処理を背景領域に対して行う（ステップＳ２０７）。これにより、表示部２５が表示するライブビュー画像は、背景領域のみ特殊効果処理が施された３Ｄ画像になるので、近距離領域（主要被写体）が背景領域に比較して強調されたものとなる。
【００９７】
その後、メニュースイッチ２１５が操作された場合（ステップＳ２０８：Ｙｅｓ）、表示制御部３２７は、特殊効果処理情報に関する特殊効果アイコンを表示部２５に表示させる（ステップＳ２０９）。具体的には、図１４に示すように、表示制御部３２７は、表示部２５の表示画面Ｗ２１上にライブビュー画像Ｗ２１ａおよび特殊効果処理に関する特殊効果アイコンＡ１１〜Ａ１４および特殊効果アイコンの切り換えの指示が入力される切換アイコンＡ２１，Ａ２２を表示部２５に表示させる。この際、表示制御部３２７は、３Ｄ画像に対して適用可能な特殊効果処理のみ特殊効果アイコンを表示部２５に表示させるようにしてもよい。
【００９８】
続いて、表示部２５が表示する特殊効果アイコンを選択する操作が行われ、特殊効果処理が選択された場合（ステップＳ２１０：Ｙｅｓ）、画像処理設定部３２６は、その時点で設定されている特殊効果処理を選択された特殊効果処理に設定を変更する（ステップＳ２１１）。その後、撮像装置１は図１２のメインルーチンに戻る。
【００９９】
切分け部３２４が左目画像および右目画像それぞれにおいて近距離領域と背景領域とに切り分けることができなかった場合（ステップＳ２０３：Ｎｏ）、または特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定することができなかった場合（ステップＳ２０５：Ｎｏ）について説明する。この場合、画像処理部１４は、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報テーブルＴ２を参照して、ユーザによる特殊効果処理の手動設定がなければ推奨度の最も高い特殊効果処理を左目画像および右目画像の全体領域それぞれに行う（ステップＳ２１２）。
【０１００】
続いて、メニュースイッチ２１５が操作された場合（ステップＳ２１３：Ｙｅｓ）、表示制御部３２７は、特殊効果処理情報に関する特殊効果アイコン（図１４を参照）を表示部２５に表示させる（ステップＳ２１４）。
【０１０１】
その後、表示部２５が表示する特殊効果アイコンを選択する操作が行われ、特殊効果処理が選択された場合（ステップＳ２１５：Ｙｅｓ）、画像処理設定部３２６は、その時点で設定されている特殊効果処理から選択された特殊効果処理に設定する（ステップＳ２１６）。その後、撮像装置１は図１２のメインルーチンに戻る。
【０１０２】
以上説明した本発明の実施の形態１によれば、切分け部３２４が視差量算出部３２３によって算出された視差量に応じて、左目画像および右目画像それぞれの領域を近距離領域と背景領域とに切り分け、画像処理設定部３２６が顔検出部３２２によって検出された顔が近距離領域内にある場合、背景領域を画像処理部１４が特殊効果処理を行う領域として設定する。この結果、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができる。
【０１０３】
さらに、本発明の実施の形態１によれば、特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定した場合、第１特殊効果処理情報テーブルＴ１を参照して、推奨度の最も高い特殊効果処理を画像処理部１４が行う処理として設定する。これにより、被写体の特性に応じて、被写体と背景との境界を強調させることができるので、より被写体のイメージに相応しい雰囲気で被写体を引き立たせることができる。
【０１０４】
（実施の形態２）
つぎに、本発明の実施の形態２について説明する。本発明の実施の形態２では、撮像装置１が行う特殊効果設定処理が実施の形態１と異なる。このため、本発明の実施の形態２にかかる撮像装置が行う特殊効果設定処理のみ説明する。なお、本発明の実施の形態２にかかる撮像装置は、上述した撮像装置１と同様の構成を有するため説明を省略する。
【０１０５】
図１５は、本実施の形態２にかかる撮像装置１が行う特殊効果設定処理の概要を示すフローチャートである。
【０１０６】
図１５に示すように、まず、顔検出部３２２は、左目画像および右目画像それぞれに含まれる顔を検出する（ステップＳ３０１）。
【０１０７】
続いて、制御部３２は、顔検出部３２２が左目画像および右目画像からそれぞれ検出した顔の顔領域が所定値以上であるか否かを判断する（ステップＳ３０２）。具体的には、制御部３２は、顔検出部３２２が左目画像および右目画像からそれぞれ検出した顔の顔領域が、たとえば画像全体に対して５％以上占めるか否かを判断する。顔の顔領域が所定値以上である場合（ステップＳ３０２：Ｙｅｓ）、撮像装置１はステップＳ３０３に移行する。
【０１０８】
その後、視差量算出部３２３は、顔検出部３２２が検出した左目画像の顔領域および右目画像の顔領域を重畳し（ステップＳ３０３）、左目画像および右目画像の視差量を算出する（ステップＳ３０４）。
【０１０９】
続いて、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分ける切分け処理を行う（ステップＳ３０５）。左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分けることができた場合（ステップＳ３０５：Ｙｅｓ）、撮像装置１はステップＳ３０６に移行する。
【０１１０】
その後、特性特定部３２５は、顔検出部３２２によって検出された顔の特性を特定する（ステップＳ３０６）。顔検出部３２２によって検出された顔の特性を特定することができた場合（ステップＳ３０６：Ｙｅｓ）、画像処理設定部３２６は、特性特定部３２５が特定した特性に応じて、第１特殊効果処理情報記憶部２７２ａが記憶する特殊効果処理情報テーブルＴ１を参照し、ユーザによる特殊効果処理の手動設定がなければ、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する。（ステップＳ３０７）。
【０１１１】
続いて、画像処理部１４は、画像処理設定部３２６によって設定された特殊効果処理を左目画像および右目画像それぞれの背景領域に対して行う（ステップＳ３０８）。これにより、表示部２５が表示するライブビュー画像は、背景領域のみ特殊効果が施された３Ｄ画像になるので、近距離領域が背景領域に比較して強調されたものとなる。
【０１１２】
その後、メニュースイッチ２１５が操作された場合（ステップＳ３０９：Ｙｅｓ）、表示制御部３２７は、特殊効果アイコンを表示部２５に表示させる（ステップＳ３１０）。
【０１１３】
続いて、表示部２５が表示する３Ｄ画像の近距離領域がタッチされ（ステップＳ３１１：Ｙｅｓ）、所定時間内、たとえば３秒以内に特殊効果アイコンを操作する操作が行われ、特殊効果処理が選択された場合（ステップＳ３１２：Ｙｅｓ）、画像処理部１４は、選択された特殊効果処理を近距離領域に対して行う（ステップＳ３１３）。その後、撮像装置１は図１２のメインルーチンに戻る。
【０１１４】
図１６は、図１５のステップＳ３１１〜Ｓ３１３の処理の概要を説明する模式図である。図１６に示すように、ユーザは、まず、表示部２５が表示画像Ｗ３１上に表示するライブビュー画像Ｗ３１ａの近距離領域Ｅ１１にタッチする（図１６（ａ））。その後、ユーザは、所望の特殊効果アイコンとして特殊効果アイコンＡ１１をタッチする（図１６（ｂ））。この場合、画像処理部１４は、特殊効果アイコンに応じた特殊効果処理を近距離領域Ｅ１１に対して行う。その後、ユーザは、手動設定による特殊効果処理の決定を指示する操作信号の入力を受け付ける決定アイコンＡ３３をタッチする（図１６（ｃ））。これにより、画像処理部１４は、近距離領域に対してユーザが所望する特殊効果処理を行うことができる。なお、図１６の画像Ｗ３１ａは、３Ｄ画像を模式的に平面で示している。
【０１１５】
図１５に戻り、説明を続ける。ステップＳ３１１において表示部２５が表示する３Ｄ画像の近距離領域（人物）がタッチされず（ステップＳ３１１：Ｎｏ）、特殊効果アイコンを操作する操作が行われ、特殊効果処理が選択された場合（ステップＳ３１４：Ｙｅｓ）、画像処理設定部３２６は、画像全体に対してその時点で設定されている特殊効果処理から選択された特殊効果処理に設定する（ステップＳ３１５）。その後、撮像装置１は図１２のメインルーチンに戻る。なお、近距離領域がタッチされた場合、背景領域のみに特殊効果処理が設定されるようにしてもよい。
【０１１６】
顔検出部３２２が検出した顔領域が所定値以上でない場合（ステップＳ３０２：Ｎｏ）、左目画像および右目画像それぞれにおいて近距離領域と背景領域とに切り分けることができなかった場合（ステップＳ３０５：Ｎｏ）、または顔検出部３２２によって検出された顔の特性を特定することができなかった場合（ステップＳ３０６：Ｎｏ）について説明する。この場合、画像処理部１４は、第２特殊効果処理情報記憶部２７２ｂが記憶する特殊効果処理情報テーブルＴ２を参照して、ユーザによる特殊効果処理の手動設定がなければ、推奨度が最も高い特殊効果処理を左目画像および右目画像の全領域それぞれに対して行う（ステップＳ３１６）。
【０１１７】
続いて、メニュースイッチ２１５が操作された場合（ステップＳ３１７：Ｙｅｓ）、表示制御部３２７は、特殊効果アイコンを表示部２５に表示させる（ステップＳ３１８）。
【０１１８】
その後、表示部２５が表示する特殊効果アイコンを選択する操作が行われ、特殊効果処理が選択された場合（ステップＳ３１９：Ｙｅｓ）、画像処理設定部３２６は、その時点で設定されている特殊効果処理から選択された特殊効果処理に設定する（ステップＳ３２０）。その後、撮像装置１は図１２のメインルーチンに戻る。
【０１１９】
以上説明した本発明の実施の形態２によれば、上述した実施の形態１と同様の効果を有する。さらに、画像処理部１４は、ユーザが手動設定によって設定した特殊効果処理を近距離領域に対して行うことができる。この結果、近距離領域および背景領域それぞれに対して異なる特殊効果処理を行うことができ、撮像する画像に対してより独創的な表現を行うことができる。
【０１２０】
なお、本実施の形態１，２では、特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定した場合、第１特殊効果処理情報テーブルＴ１を参照して、推奨度の最も高い特殊効果処理を画像処理部１４が行う処理として設定し、画像処理設定部３２６が背景領域を画像処理部１４が特殊効果処理を行う領域として設定していたが、たとえば、メニュースイッチ２１５等によって背景領域に設定された特殊効果処理を変更するようにしてもよい。
【０１２１】
（変形例１）
上述した実施の形態では、画像処理設定部３２６が、特性特定部３２５によって特定された顔の特性に応じて、画像処理部１４が行う特殊効果処理の内容を設定していたが、たとえば顔検出部３２２によって検出された顔を登録するとともに、登録した顔に対応付けて画像処理部１４が行う特殊効果処理の内容を設定してもよい。
【０１２２】
図１７は、本実施の形態の変形例１にかかる撮像装置１で被写体を撮影する際の状況を示す図である。図１８は、図１７に示す状況下で表示部２５が表示する画面遷移の一例を示す図である。なお、上述した撮像装置１と同様の構成を有するため説明を省略する。
【０１２３】
図１７および図１８に示すように、ユーザは、たとえば図１８の表示画面Ｗ４０上に表示されるライブビュー画像Ｗ４０ａを見ながら被写体Ｅ５０を撮影する際の構図を決定する。図１８に示す状況下で、表示制御部３２７は、顔検出部３２２が検出した顔領域に対応するフレームＦ１をライブビュー画像Ｗ４０ａに表示させる。この際、ユーザが表示部２５によって表示されるライブビュー画像Ｗ４０ａ上のフレームＦ１をタッチした場合、制御部３２は、タッチパネル２６から入力される操作信号に応じてフレームＦ１の顔の特性を含む顔情報を不揮発性メモリ２７に記憶させる。
【０１２４】
続いて、表示制御部３２７は、特殊効果処理アイコンＡ１１〜Ａ１９を表示画面Ｗ４０上の右領域Ｒ４０に表示させる。その後、制御部３２は、ユーザが表示部２５によって表示される特殊効果処理アイコンＡ１１〜Ａ１９のいずれかをタッチした場合（図１８（ａ））、ユーザがタッチした特殊効果アイコンに応じた特殊効果処理の内容を、不揮発性メモリ２７に記憶させた顔に対応付けて記憶させる。
【０１２５】
その後、表示制御部３２７は、表示部２５が表示する表示画面Ｗ４０上の右領域Ｒ４０に設定された特殊効果処理の内容に対応する特殊効果処理を表示させるとともに、表示画面Ｗ４０の下領域Ｒ４１に補助メッセージを表示させる（図１８（ｂ））。
【０１２６】
このように、本実施の形態の変形例によれば、顔検出部３２２が不揮発性メモリ２７に記憶された顔情報と一致する顔を検出した場合、画像処理設定部３２６が顔情報に対応付けられた特殊効果処理の内容を画像処理部１４に自動的に設定することができる。
【０１２７】
（変形例２）
また、上述した実施の形態では、３Ｄ撮影可能なレンズ部３を用いて一対の画像データを生成していたが、たとえば、１つの光学系のみを有する構成とし、この構成で連続的に撮像することにより、一対の画像データを生成することができる。具体的には、図１９に示すように、ユーザが撮像装置２００を左から右に向けて移動（矢印Ｃ）させながら被写体Ｅ１００を連続的に撮像することにより、被写体に対して視差を有する一対の画像データを生成するようにしてもよい。
【０１２８】
（その他の実施の形態）
また、上述した実施の形態では、画像処理部１４は、撮影時に特殊効果処理を行っていたが、たとえば外部メモリ２８に記憶された画像データを再生する際の３Ｄ画像または２Ｄ画像に対して本処理を行ってもよい。
【０１２９】
また、上述した実施の形態では、静止画撮影を例に説明したが、動画撮影においても本処理を適応することができる。
【０１３０】
また、上述した実施の形態では、撮像装置１をデジタル一眼デジタルカメラとして説明していたが、たとえばレンズ部３と本体部２とが一体に形成されたデジタルカメラ、デジタルビデオカメラ、カメラ付き携帯電話等の撮影機能と表示機能を備えた各種電子機器に適用することができる。
【符号の説明】
【０１３１】
１，２００ 撮像装置
２ 本体部
３ レンズ部
１０ シャッタ
１１ 撮像素子
１２ Ａ／Ｄ変換部
１３ メモリ
１４ 画像処理部
１５ 撮像素子駆動部
１６ シャッタ駆動部
１７ 露出処理部
１８ ＡＦ処理部
１９ タイマー
２０ 本体通信部
２１ 操作入力部
２２ フラッシュ発光部
２３ フラッシュ充電部
２４ フラッシュ駆動部
２５ 表示部
２６ タッチパネル
２７ 不揮発性メモリ
２８ 外部メモリ
２９ 外部通信部
３０ 電源供給部
３１ 電源部
３２ 制御部
４１ 第１光学系
４２ 第２光学系
４３ レンズ駆動部
４４，４５ 絞り
４６ 絞り駆動部
４７，４８ ミラー
４９ プリズム
５０ レンズ通信部
５１ レンズ記憶部
５２ レンズ制御部
１４１ 特殊効果処理部
２１１ 電源スイッチ
２１２ レリーズスイッチ
２１３ 撮影モード切換スイッチ
２１４ 操作スイッチ
２１５ メニュースイッチ
２１６ プレビュースイッチ
２１７ 動画スイッチ
２５１ バックライト
２５２ 表示パネル
２５３ 視差バリア
２７１ 撮影モード情報記憶部
２７２ 特殊効果処理情報記憶部
２７３ 左目画像データ記憶部
２７４ 右目画像データ記憶部
２７５ 閾値記憶部
３２１ 立体画像生成部
３２２ 顔検出部
３２３ 視差量算出部
３２４ 切分け部
３２５ 特性特定部
３２６ 画像処理設定部
３２７ 表示制御部
【技術分野】
【０００１】
本発明は、被写体を撮像して電子的な画像データを生成する撮像装置および撮像プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタルビデオカメラ等の撮像装置において、被写体を撮像した画像データに特殊効果を施すことによって、消費者の様々な要望に応える技術が知られている。たとえば、被写体を撮像した画像データにワイプやセピア等の特殊効果を施してメモリに記憶する技術が知られている（特許文献１参照）。この技術では、ユーザが特殊効果を選択するエフェクトスイッチを操作した際に選択された特殊効果を施した画像を、表示モニタが表示する画像上の一部に表示させることにより、ユーザに所望の特殊効果を容易に選択させることができるようになっている。
【０００３】
また、撮像した画像内に含まれる人物や花等の主要被写体と背景とにそれぞれ異なる画像処理を行う技術が知られている（特許文献２参照）。この技術では、主要被写体と背景とにそれぞれ異なった画像処理、たとえば感度（ＩＳＯ）処理、シャープネス処理、ぼかし処理または色相変換処理等を行うことにより、主要被写体を背景から際立たせることができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３４７８８６号公報
【特許文献２】特開２００２−４４５１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の撮像装置では、主要被写体および背景それぞれに対して、同一種類でパラメータが異なる画像処理しか行っていなかった。このため、被写体が人物や動物である場合、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができなかった。
【０００６】
本発明は、上記に鑑みてなされたものであって、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができる撮像装置および撮像プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明にかかる撮像装置は、被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像部と、前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理部と、前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出部と、前記視差量算出部が算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分け部と、前記一対の画像それぞれに含まれる顔を検出する顔検出部と、前記顔検出部が検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定部と、を備えたことを特徴とする。
【０００８】
また、本発明にかかる撮像装置は、上記発明において、前記顔検出部が検出した顔の特性を特定する特性特定部と、前記特性特定部が特定する特性と前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理との組み合わせに応じた推奨度を与える第１特殊効果処理情報を記憶する第１特殊効果処理情報記憶部と、をさらに備え、前記画像処理設定部は、前記特性特定部が前記顔検出部によって検出された顔の特性を特定した場合、前記第１特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理部が行う処理として設定することを特徴とする。
【０００９】
また、本発明にかかる撮像装置は、上記発明において、前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理の推奨度を与える第２特殊効果処理情報を記憶する第２特殊効果処理情報記憶部をさらに備え、前記画像処理設定部は、前記顔検出部が検出した顔が前記近距離領域内にない場合、前記第２特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理部が行う処理として設定することを特徴とする。
【００１０】
また、本発明にかかる撮像装置は、上記発明において、前記一対の画像データに対応する画像を表示する表示部と、前記画像処理部が実施可能な各特殊効果処理に関するアイコンを前記表示部に表示させる表示制御部と、前記表示部が表示するアイコンの選択を指示する操作信号の入力を受け付ける入力部と、を備え、前記画像処理設定部は、前記入力部によって選択されたアイコンに対応する特殊効果処理を設定することを特徴とする。
【００１１】
また、本発明にかかる撮像プログラムは、被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像ステップと、前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理ステップと、前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出ステップと、前記視差量算出ステップが算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分けステップと、前記一対の画像それぞれに含まれる顔を検出する顔検出ステップと、前記顔検出ステップが検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定ステップと、を撮像装置に実行させることを特徴とする。
【発明の効果】
【００１２】
本発明によれば、切分け部が視差量算出部によって算出された視差量に応じて、左目画像および右目画像それぞれの領域を近距離領域と背景領域とに切り分け、画像処理設定部が顔検出部によって検出された顔が近距離領域内である場合、背景領域を画像処理部が特殊効果処理を行う領域として設定する。この結果、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができるという効果を奏する。
【図面の簡単な説明】
【００１３】
【図１】図１は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【図２】図２は、本発明の実施の形態１にかかる撮像装置の被写体に面する側の構成を示す斜視図である。
【図３】図３は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側の構成を示す斜視図である。
【図４】図４は、本発明の実施の形態１にかかる撮像装置の表示部の概略構成を示す模式図である。
【図５】図５は、本発明の実施の形態１にかかる撮像装置の撮像部が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。
【図６】図６は、図５に示す状況下で撮像装置の立体画像生成部が生成する２つの画像データそれぞれに対応する２つの画像の一例を示す図である。
【図７】図７は、図５に示す状況下で撮像装置の立体画像生成部が生成した左目画像と右目画像とを仮想的に重ねた画像の一例を示す図である。
【図８】図８は、図５に示す状況下で撮像装置の立体画像生成部が生成した左目画像および右目画像を表示部に表示した際にユーザが仮想的に視認する３Ｄ画像の飛び出し距離を説明する図である。
【図９】図９は、本発明の実施の形態１にかかる撮像装置が特殊効果撮影モードに設定されている場合に表示部が表示する特殊効果撮影モードにおける特殊効果撮影操作メニュー画面遷移の一例を示す図である。
【図１０】図１０は、本発明の実施の形態１にかかる撮像装置の第１特殊効果処理情報記憶部が記憶する第１特殊効果処理情報テーブルの一例を示す図である。
【図１１】図１１は、本発明の実施の形態１にかかる撮像装置の第２特殊効果処理情報記憶部が記憶する第２特殊効果処理情報テーブルの一例を示す図である。
【図１２】図１２は、本発明の実施の形態１にかかる撮像装置が行う処理の概要を示すフローチャートである。
【図１３】図１３は、図１２に示す特殊効果処理設定の概要を示すフローチャートである。
【図１４】図１４は、本発明の実施の形態１にかかる撮像装置の表示部が表示する画像の一例を示す図である。
【図１５】図１５は、本発明の実施の形態２にかかる撮像装置が行う特殊効果処理の概要を示すフローチャートである。
【図１６】図１６は、本発明の実施の形態２にかかる撮像装置の表示部が表示する画像の一例を示す図である。
【図１７】図１７は、本発明の実施の形態の変形例１にかかる撮像装置で被写体を撮影する際の状況を示す図である。
【図１８】図１８は、図１７に示す状況下で撮像装置の表示部が表示する画面遷移の一例を示す図である。
【図１９】図１９は、本発明の実施の形態の変形例２にかかる撮像装置が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。
【発明を実施するための形態】
【００１４】
以下に、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。
【００１５】
（実施の形態１）
図１は、本発明の実施の形態１にかかる撮像装置の構成を示すブッロク図である。図２は、本発明の実施の形態１にかかる撮像装置の被写体に面する側（前面側）の構成を示す斜視図である。図３は、本発明の実施の形態１にかかる撮像装置の撮影者に面する（背面側）の構成を示す斜視図である。図１〜図３に示す撮像装置１は、デジタル一眼レフカメラであり、本体部２と、本体部２に着脱自在なレンズ部３と、を備える。
【００１６】
図１〜図３に示すように、本体部２は、シャッタ１０と、撮像素子１１と、Ａ／Ｄ変換部１２と、メモリ１３と、画像処理部１４と、撮像素子駆動部１５と、シャッタ駆動部１６と、露出処理部１７と、ＡＦ処理部１８と、タイマー１９と、本体通信部２０と、操作入力部２１と、フラッシュ発光部２２と、フラッシュ充電部２３と、フラッシュ駆動部２４と、表示部２５と、タッチパネル２６と、不揮発性メモリ２７と、外部メモリ２８と、外部通信部２９と、電源供給部３０と、電源部３１と、制御部３２と、を備える。
【００１７】
シャッタ１０は、撮像素子１１の状態を露光状態または遮光状態に設定する。シャッタ駆動部１６は、ステッピングモータ等を用いて構成され、レリーズ信号に応じてシャッタ１０を駆動する。
【００１８】
撮像素子１１は、レンズ部３が集光した光を受光して電気信号に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いて構成される。撮像素子駆動部１５は、所定のタイミングで撮像素子１１から画像データ（アナログ信号）をＡ／Ｄ変換部１２に出力させる。
【００１９】
Ａ／Ｄ変換部１２は、撮像素子１１から入力されるアナログ信号に対してＡ／Ｄ変換を行うことによってデジタルの画像データを生成してメモリ１３に出力する。
【００２０】
メモリ１３は、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）を用いて構成される。メモリ１３は、Ａ／Ｄ変換部１２から入力される画像データや撮像装置１の処理中の情報を一時的に記録する。具体的には、メモリ１３は、撮像素子１１が１フレーム毎に順次出力する画像データを一時的に記録する。
【００２１】
画像処理部１４は、制御部３２を介してメモリ１３に記録された画像データを取得し、取得した画像データに対して各種の画像処理を施してメモリ１３または不揮発性メモリ２７に出力する。具体的には、画像処理部１４は、画像データに対して、少なくともエッジ強調、ホワイトバランス、色補正およびγ補正を含む通常の画像処理を行う。画像処理部１４は、特殊効果処理部１４１を有する。
【００２２】
特殊効果処理部１４１は、画像データに対して複数の画像処理を組み合わせることにより視覚的な効果を生じさせる特殊効果処理を行う。この特殊効果処理としては、たとえばトーンカーブ処理、ぼかし処理および画像合成処理を組み合わせた処理を行う。
【００２３】
露出処理部１７は、制御部３２を介してメモリ１３に記録された画像データに基づいて、静止画撮影や動画撮影を行う際の条件、たとえば絞りの設定値、シャッタ速度等を決定することで撮像装置１の自動露出を行う。
【００２４】
ＡＦ処理部１８は、制御部３２を介してメモリ１３に記録された画像データに基づいて、撮像装置１の自動焦点（Auto Focus）の調整を行う。たとえば、ＡＦ処理部１８は、画像データのコントラストに基づいて、撮像する被写体像の鮮鋭度が最大となるようにレンズ部３を駆動する。
【００２５】
タイマー１９は、時間を計時する。タイマー１９は、撮影日時の判定機能を有する。タイマー１９は、撮像された画像データに日時データを付加するため、制御部３２に日時データを出力する。
【００２６】
本体通信部２０は、本体部２に装着されたレンズ部３との通信を行うための通信インターフェースである。なお、本体通信部２０は、本体部２に設けられた電源部３１からレンズ部３に電力を供給するようにしてもよい。
【００２７】
操作入力部２１は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ２１１と、撮影の指示を与えるレリーズ信号を入力するレリーズスイッチ２１２と、撮像装置１に設定された各種撮影モード切換えの指示を与える切換信号を入力する撮影モード切換スイッチ２１３と、撮像装置１の各種設定を選択または決定の指示を与える指示信号を入力する操作スイッチ２１４と、撮像装置１に設定された操作メニュー画面の表示の指示を与える指示信号を入力するメニュースイッチ２１５と、撮像した画像データのレックビュー表示の指示を与える指示信号を入力するプレビュースイッチ２１６と、動画撮影の指示を与える動画レリーズ信号を入力する動画スイッチ２１７と、を有する。操作スイッチ２１４は、メニュー画面等における選択設定を行う上下左右の各方向ボタン２１４ａ〜２１４ｄと、メニュー画面等における各方向ボタン２１４ａ〜２１４ｄによる操作を決定する決定ボタン２１４ｅ（ＯＫボタン）とを有する（図３を参照）。なお、操作スイッチ２１４は、ダイヤルスイッチ等を用いて構成してもよい。
【００２８】
フラッシュ発光部２２は、キセノンランプやＬＥＤ（Light Emitting Diode）等を用いて構成される。フラッシュ発光部２２は、撮像装置１が撮像する視野領域へ向けて補助光であるストロボ光を照射する。フラッシュ充電部２３は、電源部３１から電源供給を受けて電圧を昇圧して充電する。フラッシュ駆動部２４は、フラッシュ充電部２３が昇圧した電圧をフラッシュ発光部２２に印加させることにより、フラッシュ発光部２２を駆動する。
【００２９】
図４は、表示部２５の概略構成を示す模式図である。図４に示すように、表示部２５は、バックライト２５１と、表示パネル２５２と、視差バリア２５３とを有する。バックライト２５１は、ＬＥＤ（Light Emitting Diode）等によって構成され、画像を表示するための光を背面から照射する。表示パネル２５２は、液晶または有機ＥＬ（Electro Luminescence）等の表示パネルによって構成される。視差バリア２５３は、液晶等によって構成され、表示パネル２５２の上面に積層されている。視差バリア２５３は、表示パネル２５２の各画像の間隔よりも狭い間隔でスリットが設けられ、ユーザの右目ＥＲと左目ＥＬとにそれぞれ対応した画像を分離する。このような視差バリア２５３として、たとえばパララックバリア方式が適用される。なお、視差バリア２５３の代わりに、レンティキュラレンズを積層したレンズシートを表示パネル２５２の上面に設けてもよい。
【００３０】
以上の構成を有する表示部２５は、制御部３２から３次元画像（以下「３Ｄ画像」という）データが入力された場合、制御部３２の制御のもとで表示パネル２５２が左端の画像から水平方向に左目画像と右目画像とを交互に表示し、視差バリア２５３が表示パネル２５２の各画像から出た光を分離する。このため、左目画像が左目ＥＬのみに、右目画像が右目ＥＲのみにそれぞれ届く。これにより、ユーザは、表示部２５が表示する３Ｄ画像を立体視することができる。また、表示部２５が表示態様を３Ｄ画像から２次元画像（以下「２Ｄ画像」という）に切り換える際には、視差バリア２５３に印加される電圧がオン状態からオフ状態に変換することによって視差バリア２５３が遮光状態から透過状態に遷移し、左目画像データまたは右目画像データのどちらか一方が表示パネル２５３に出力される。
【００３１】
タッチパネル２６は、表示部２５の表示画面上に重ねて設けられる（図３を参照）。タッチパネル２６は、ユーザが表示部２５に表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた操作信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態では、いずれの方式のタッチパネルであっても適用可能である。
【００３２】
不揮発性メモリ２７は、フラッシュメモリを用いて構成される。不揮発性メモリ２７は、撮像装置１を動作させるための各種プログラム、本実施の形態にかかる撮像プログラムおよびプログラムの実行中に使用される各種データやパラメータ等を記憶する。不揮発性メモリ２７は、撮像装置１で実行される各種撮影モードに関する情報を記憶する撮影モード情報記憶部２７１と、画像処理部１４が行う特殊効果処理に関する情報を記憶する特殊効果処理情報記憶部２７２と、表示部２５に３Ｄ画像を表示させる際に用いる左目画像データを記憶する左目画像データ記憶部２７３と、表示部２５に３Ｄ画像を表示させる際に用いる右目画像データを記憶する右目画像データ記憶部２７４と、撮像した左目画像および右目画像それぞれの領域を、近距離領域（被写体領域）と背景領域とに切り分けることが可能な視差量を示す閾値を記憶する閾値記憶部２７５と、を有する。
【００３３】
特殊効果処理情報記憶部２７２は、第１特殊効果処理情報記憶部２７２ａと、第２特殊効果処理情報記憶部２７２ｂとを有する。第１特殊効果処理情報記憶部２７２ａは、特性特定部３２５が特定する特性と画像処理部１４が左目画像および右目画像それぞれに対して実施可能な各特殊効果処理との組み合わせに応じた推奨度を与える第１特殊効果処理情報を記憶する。第２特殊効果処理情報記憶部２７２ｂは、画像処理部１４が左目画像および右目画像それぞれに対して実施可能な各特殊効果処理の推奨度を与える第２特殊効果処理情報を記憶する。
【００３４】
外部メモリ２８は、撮像装置１の外部から装着されるメモリカード等の記録媒体を用いて構成される。外部メモリ２８は、記録媒体インターフェース（図示せず）を介して撮像装置１に装着されることで３Ｄ画像データや２Ｄ画像データ等の情報を記憶する一方、制御部３２の制御のもと、記憶した各種情報を表示部２５、画像処理部１４および不揮発性メモリ２７に出力する。
【００３５】
外部通信部２９は、通信インターフェースとしての機能を有し、ネットワーク（図示せず）を介してサーバ（図示せず）やパーソナルコンピュータ（図示せず）等の外部処理装置と相互方向に送受信を行う。外部通信部２９は、外部処理装置との間で送受信を行うことにより、撮像装置１の各種プログラムおよび特殊効果処理情報等に関するデータを取得して制御部３２に出力する。なお、外部通信部２９は、有線または無線ＬＡＮ（Local Area Network）等を介してネットワークに接続される。
【００３６】
電源供給部３０は、撮像装置１の各構成部に電源部３１の電力を供給する。電源部３１は、撮像装置１に着脱自在なバッテリを用いて構成される。なお、電源供給部３０は、外部電源（図示せず）から供給される電力を撮像装置１の各構成部に供給するようにしてもよい。
【００３７】
制御部３２は、ＣＰＵ（Central Processing Unit）等を用いて構成される。制御部３２は、操作入力部２１からの操作信号や指示信号に応じて不揮発性メモリ２７からプログラムを読み出して実行し、撮像装置１を構成する各部に対応する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。制御部３２は、立体画像生成部３２１と、顔検出部３２２と、視差量算出部３２３と、切分け部３２４と、特性特定部３２５と、画像処理設定部３２６と、表示制御部３２７とを有する。
【００３８】
立体画像生成部３２１は、画像処理部１４によって画像処理された画像データをメモリ１３から取得し、取得した画像データを用いて３Ｄ画像データを生成する。具体的には、立体画像生成部３２１は、まず、メモリ１３から取得した画像データを左目画像データと右目画像データとにそれぞれ分割する。その後、立体画像生成部３２１は、分割した左目画像データおよび右目画像データそれぞれを所定の縦横比率（たとえばアスペクト比９：１６）で切り出すことによって３Ｄ画像データを生成する。立体画像生成部３２１は、左目画像データおよび右目画像データそれぞれを左目画像データ記憶部２７３および右目画像データ記憶部２７４に記憶させる。なお、立体画像生成部３２１が分割した左目画像データおよび右目画像データそれぞれから切り出す縦横比率を操作入力部２１で変更できるようにしてもよい。
【００３９】
顔検出部３２２は、左目画像データに対応する左目画像または右目画像データに対応する右目画像のどちらか一方に含まれる人物や動物の顔をパターンマッチングによって検出する。たとえば、顔検出部３２２は、左目画像に含まれる人物の顔をパターンマッチングによって検出する。なお、顔検出部３２２は、人物の顔だけでなく、犬や猫等の動物の顔を検出してもよい。
【００４０】
視差量算出部３２３は、一対の画像それぞれに含まれる類似領域を重畳することにより、一対の画像の視差量を算出する。具体的には、視差量算出部３２３は、左目画像および右目画像それぞれに含まれる類似領域、たとえば背景領域を重畳することにより、左目画像および右目画像の視差量を算出する。
【００４１】
切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける。具体的には、切分け部３２４は、左目画像および右目画像それぞれの領域内で視差量が閾値記憶部２７５に記憶された閾値以上の領域を近距離領域として切り分ける一方、閾値未満を背景領域として切り分ける。
【００４２】
特性特定部３２５は、顔検出部３２２が検出した顔の特性を周知の技術を用いて特定する。具体的には、特性特定部３２５は、顔検出部３２２が検出した顔の特性として男性、女性、赤ちゃん（子供）または動物のいずれかであるかを特定する。この特定方法としては、赤ちゃんを特定する場合、顔検出部３２２が検出した顔の特徴点、たとえば目、鼻および唇等の位置を抽出し、抽出した特徴点を赤ちゃんにおける顔の基準サンプルデータと比較することで特定する。さらに、動物を特定する場合、特性特定部３２５は、顔検出部３２２が検出した顔に対して、犬や猫等の動物の顔の複数のサンプルデータを用いて特徴量を抽出し、この特徴量が設定された閾値以上である否かを判定することにより、顔検出部３２２が検出した顔が動物であるか否かを特定する。
【００４３】
画像処理設定部３２６は、顔検出部３２２が検出した顔が近距離領域内である場合、背景領域を画像処理部１４が特殊効果処理を行う領域として設定する。画像処理設定部３２６は、特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定した場合、第１特殊効果処理情報記憶部２７２ａが記憶する第１特殊効果処理情報参照して、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する。画像処理設定部３２６は、顔検出部３２２が検出した顔が近距離領域内にない場合または特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定できない場合、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報参照して、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する。さらに、画像処理設定部３２６は、顔検出部３２２が検出した顔が近距離領域内でない場合または特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定できない場合、左目画像および右目画像の全領域それぞれを画像処理部１４が行う特殊効果処理の領域として設定する。
【００４４】
表示制御部３２７は、表示部２５の表示態様を変更する。具体的には、表示制御部３２７は、表示部２５が表示している画像を２Ｄ画像または３Ｄ画像に切り換える制御を行う。表示制御部３２７は、表示部２５が２Ｄ画像を表示しているときに、操作入力部２１から操作信号が入力された場合において、特殊効果処理部１４１が行う特殊効果処理情報に関するアイコンを表示部２５に表示させる。
【００４５】
レンズ部３は、第１光学系４１と、第２光学系４２と、レンズ駆動部４３と、絞り４４と、絞り４５と、絞り駆動部４６と、ミラー４７と、ミラー４８と、プリズム４９と、レンズ通信部５０と、レンズ記憶部５１と、レンズ制御部５２と、を備える。なお、レンズ部３は、一対の光学系で視差を持って被写体を撮像し、撮像素子１１に左右の被写体像をそれぞれ形成することで３Ｄ撮影ができる交換レンズである。このため、第１光学系４１および第２光学系４２は、同じ構成のため、一方のみを説明する。
【００４６】
第１光学系４１は、一または複数のレンズを用いて構成される。第１光学系４１は、所定の視野領域から光を集光する。なお、第１光学系４１は、画像を変化させる光学ズーム機能を有してもよい。
【００４７】
レンズ駆動部４３は、ＤＣモータ等を用いて構成される。レンズ駆動部４３は、第１光学系４１および第２光学系４２のレンズそれぞれを光軸Ｌ上および光軸Ｒ上で同期させながら移動させることにより、第１光学系４１および第２光学系４２それぞれのピント位置や焦点距離等の変更を行う。
【００４８】
絞り４４および絞り４５は、第１光学系４１および第２光学系４２がそれぞれ集光した光の入射量を制限することにより露出の調整を行う。
【００４９】
絞り駆動部４６は、ステッピングモータ等を用いて構成される。絞り駆動部４６は、絞り４４および絞り４５をそれぞれ同期させながら駆動する。
【００５０】
ミラー４７およびミラー４８は、第１光学系４１および第２光学系４２がそれぞれ集光した光をプリズム４９に向けて反射する。
【００５１】
プリズム４９は、ミラー４７およびミラー４８からそれぞれ反射された光を撮像素子１１に向けて反射する。これにより、撮像素子１１には、第１光学系４１および第２光学系４２それぞれによって集光された左右一対の被写体像がそれぞれ形成される。
【００５２】
レンズ通信部５０は、レンズ部３が本体部２に装着された際に本体部２と相互方向に通信を行うための通信インターフェースである。
【００５３】
レンズ記憶部５１は、フラッシュメモリを用いて構成される。レンズ記憶部５１は、レンズ部３を動作させるための各種プログラムムおよびプログラムの実行中に使用される各種データやパラメータ等を記憶する。
【００５４】
レンズ制御部５２は、ＣＰＵ（Central Processing Unit）等を用いて構成される。レンズ制御部５２は、本体部２からの指示信号に応じてレンズ部３の動作を制御する。具体的には、レンズ制御部５２は、本体部２からの指示信号に応じてレンズ駆動部４３を駆動させてレンズ部３のピント合わせを行うとともに、絞り駆動部４６を駆動させて絞り値の変更を行う。なお、レンズ制御部５２は、レンズ部３が本体部２に装着された際に、レンズ部３のピント位置情報、焦点距離情報およびレンズ部３を識別する固有情報を本体部２に送信するようにしてもよい。なお、本実施の形態では、レンズ部３、撮像素子１１およびＡ／Ｄ変換部１２を含む構成が撮像部（以下、「撮像部１００」という）として機能する。すなわち、撮像部１００は、被写体を撮影することによって互いに視差を有する一対の画像データを生成することができる。
【００５５】
以上の構成を有する撮像装置１において、撮像部１００が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況について説明する。図５は、撮像部１００が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。図５に示すように、撮像部１００は、第１光学系４１および第２光学系４２からの距離が異なる被写体Ｅ１（距離ｄ１）および被写体Ｅ２（距離ｄ２）に対して、距離（基線長）Ｄ１だけ離れた並設された第１光学系４１および第２光学系４２で撮像することにより、左目画像データおよび右目画像データを撮像素子１１上に生成する。
【００５６】
続いて、立体画像生成部３２１は、撮像素子１１によって生成された画像データを左目画像データと右目画像データとにそれぞれ分割する。その後、立体画像生成部３２１は、分割した左目画像データおよび右目画像データそれぞれを所定の縦横比率で切り出すことによって左目画像および右目画像を生成する。
【００５７】
図６は、図５に示す状況下で立体画像生成部３２１が生成する２つの画像データそれぞれに対応する２つの画像の一例を示す図である。図６において、左目画像ＷＬ１は、立体画像生成部３２１が第１光学系４１によって生成された左目画像データに対応する画像から切り出して生成した画像である。また、図６において、右目画像ＷＲ１は、立体画像生成部３２１が第２光学系４２によって生成された右目画像データに対応する画像から切り出して生成した画像である。図７は、図５に示す状況下で立体画像生成部３２１が生成した左目画像ＷＬ１と右目画像ＷＲ１とを仮想的に重ねた画像（ＷＬＲ１）の一例を示す図である。図８は、図５に示す状況下で立体画像生成部３２１が生成した左目画像ＷＬ１および右目画像ＷＲ１を表示部２５に表示した際にユーザが仮想的に視認する３Ｄ画像の飛び出し距離を説明する図である。
【００５８】
図６に示すように、立体画像生成部３２１は、第１光学系４１と第２光学系４２との視差によって被写体Ｅ１，Ｅ２それぞれの位置が左右にずれた左目画像ＷＬ１および右目画像ＷＲ１を生成する。
【００５９】
続いて、表示制御部３２７は、左目画像ＷＬ１の被写体Ｅ２および右目画像ＷＲ１の被写体Ｅ２を重ねて表示部２５に表示させる（図７を参照）。これにより、ユーザは、被写体Ｅ１の視差によるズレ量ΔＸ１に応じて、被写体Ｅ１が表示パネル２５２からΔＺ１飛び出した立体的な３Ｄ画像を仮想的に視認することができる（図８を参照）。
【００６０】
その後、視差量算出部３２３は、左目画像ＷＬ１の被写体Ｅ２および右目画像ＷＲ１の被写体Ｅ２を重畳することにより、視差量を算出する。たとえば、図７に示す状況下では、視差量算出部３２３は、左目画像ＷＬ１および右目画像ＷＲ１どちらか一方の横幅をＸ０とした場合、この横幅Ｘ０の比率に応じた視差量を算出する。
【００６１】
続いて、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像ＷＬ１および右目画像ＷＲ１それぞれの領域を近距離領域と背景領域とに切り分けることができるか否かを判定する。具体的には、図７に示す状況下では、切分け部３２４は、視差量が横幅Ｘ０に対して、１／１００（１％）以上ずれた領域を近距離領域として切り分ける。たとえば、図５に示す状況下で、撮像する画像の横幅Ｘ０を３５ｍｍとしたとき、第１光学系４１および第２光学系４２から被写体Ｅ１までの距離ｄ１を１０００ｍｍ、第１光学系４１および第２光学系４２から撮像素子１１までの距離Ｆを３５ｍｍ、第１光学系４１の中心から第２光学系４２の中心までの距離Ｄ１を１０ｍｍとし、背景（無限遠）との視差量をΔＸとした場合において、
ΔＸ＝（Ｆ×Ｄ１）／ｄ１＝（３５×１０）／１０００＝０．３５
となる。この状況下で切分け部３２４は、視差量ΔＸが横幅Ｘ０の１／１００（＝０．３５／３５）になるため、左目画像ＷＬ１および右目画像ＷＲ１それぞれの領域を近距離領域と背景領域とに切り分けることができる。具体的には、切分け部３２４は、視差量算出部３２３によって算出された視差量が閾値記憶部２７５に記憶された閾値以上の領域を近距離領域として左目画像ＷＬ１および右目画像ＷＲ１それぞれから切り分ける。
【００６２】
このように、視差量算出部３２３は、左目画像ＷＬ１の被写体Ｅ２および右目画像ＷＲ１の被写体Ｅ２を重畳することにより、視差量を算出する。その後、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像ＷＬ１および右目画像ＷＲ１それぞれの領域を近距離領域と背景領域とに切り分ける。
【００６３】
つぎに、撮像装置１が特殊効果処理を行う特殊効果撮影モード（アートフィルタ撮影モード）の設定方法について説明する。なお、本実施の形態にかかる撮像装置１は、複数の撮影モード、たとえば、撮影シーン自動判別撮影モードやマニュアル撮影モードを有するが、以下の説明においては、特殊効果撮影モードの設定方法のみについて説明する。
【００６４】
まず、ユーザが電源スイッチ２１１を操作することにより、撮像装置１の起動に伴って、制御部３２は、撮像装置１の撮影モードが特殊効果撮影モードに設定されているか否かを判断する。具体的には、制御部３２は、撮影モード切換スイッチ２１３が特殊効果撮影モード（ＡＲＴ）に設定されているか否かを判断する（図２および図３を参照）。撮像装置１の撮影モードが特殊効果撮影モードに設定されていない場合、制御部３２は、他の撮影モードに対応した操作メニュー画面やライブビュー画像を表示部２５に表示させる。
【００６５】
これに対して、撮像装置１の撮影モードが特殊効果撮影モードに設定されている場合、表示制御部３２７は、特殊効果撮影モードに対応する特殊効果撮影操作メニュー画面を表示部２５に表示させる。
【００６６】
図９は、撮像装置１が特殊効果撮影モードに設定されている場合に表示部２５が表示する特殊効果撮影モードにおける特殊効果撮影操作メニュー画面遷移の一例を示す図である。
【００６７】
図９に示すように、表示制御部３２７は、撮像装置１が特殊効果撮影モードに設定された場合、特殊効果撮影モードにおける特殊効果撮影操作メニュー画面Ｗ１１を表示部２５に表示させる（図９（ａ）を参照）。特殊効果撮影操作メニュー画面Ｗ１１には、撮像装置１で実行可能な各特殊効果処理に関する情報がアイコンＡ１〜Ａ９として表示されている。
【００６８】
続いて、表示制御部３２７は、ユーザが操作スイッチ２１４の上ボタン２１４ａまたは下ボタン２１４ｂを操作することにより、操作スイッチ２１４から入力される操作信号に応じて表示部２５が表示する特殊効果撮影操作メニュー画面Ｗ１１の内容を表示部２５に切り換えさせる。具体的には、表示制御部３２７は、操作スイッチ２１４から入力される操作信号に応じて、特殊効果撮影操作メニュー画面Ｗ１１内に表示されるアイコンＡ１〜Ａ９の色を変更するとともに、選択されたアイコンに対応する特殊効果処理のタイトル、たとえば「ファンタジックフォーカス」、「ラフモノクローム」および「ジオラマ」等を表示部２５に表示させる（図９（ａ）→図９（ｂ）→図９（ｃ））。これにより、ユーザは、所望の特殊効果処理を選択することができるとともに、選択した特殊効果処理を直感的に確認することができる。
【００６９】
その後、制御部３２は、ユーザによって操作スイッチ２１４の決定ボタン２１４ｅが操作された際に表示部２５が特殊効果撮影操作メニュー画面Ｗ１１で現在表示している特殊効果処理、たとえば「ファンタジックフォーカス」（図９（ａ）を参照）を特殊効果撮影モードの特殊効果処理として撮像装置１に設定する。なお、設定された特殊効果処理に関する情報は、メモリ１３に記憶される。
【００７０】
続いて、表示制御部３２７は、特殊効果撮影操作メニュー画面Ｗ１１で選択された特殊効果処理を画像処理部１４が行った画像データに対応するライブビュー画像を表示部２５に表示させる。これにより、ユーザは、撮像した画像データに対して選択した特殊効果処理が施されたライブビュー画像をリアルタイムで確認しながら撮影の構図を決定することができる。
【００７１】
つぎに、図１０および図１１を参照して、画像処理部１４が特殊効果撮影モードで実行する特殊効果処理の処理内容について説明する。図１０は、第１特殊効果処理情報記憶部２７２ａが記憶する第１特殊効果処理情報テーブルの一例を示す図である。図１１は、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報テーブルの一例を示す図である。
【００７２】
図１０に示すように、第１特殊効果処理情報テーブルＴ１には、特殊効果撮影モードで画像処理部１４が左目画像および右目画像それぞれに対して実行可能な各特殊効果処理と、各特殊効果処理の画像処理の内容が記載されている。さらに、第１特殊効果処理情報テーブルＴ１には、特性特定部３２５が特定する顔の特性と、画像処理部１４が左目画像および右目画像それぞれに対して実施可能な各特殊効果処理との組み合わせに応じた推奨度が記載されている。たとえば、設定された特殊効果撮影モードの特殊効果処理「Ａｒｔ１」の「ファンタジックフォーカス」で特性特定部３２５が顔を「男性」と特定した場合、処理内容として「トーンカーブ処理（弱い）」、「ぼかし処理（強い）」および「合成処理」が記載され、推奨度として「４」が記載されている。ここで、合成処理とは、画像処理部１４がトーンカーブ処理を行った画像データと、ぼかし処理を行った画像データとを合成した画像データを生成する画像処理である。また、設定された特殊効果撮影モードの特殊効果処理「Ａｒｔ１」の「ファンタジックフォーカス」で特性特定部３２５が顔を「女性」と特定した場合、処理内容として「トーンカーブ処理（強い）」、「ぼかし処理（弱い）」および「合成処理」が記載され、推奨度として「１」が記載されている。
【００７３】
さらに、設定された特殊効果撮影モードの特殊効果処理が「Ａｒｔ７」の「墨絵」で特性特定部３２５が顔を「男性」と特定した場合、処理内容として「色彩判定ブロック化処理」、「２値化処理」および「エッジ処理（弱め）」が記載され、推奨度として「７」が記載されている。ここで、色彩判定ブロック化処理とは、画像内で類似する色を同じ色に変換するとともに、画素間を同じ大きさでブロックにまとめる画像処理である。
【００７４】
このように、第１特殊効果処理情報テーブルＴ１には、特性特定部３２５が特定した顔の特性に応じて、画像処理部１４が行う各特殊効果処理の推奨度が記載されているとともに、各特殊効果処理に記載された画像処理のパラメータを変更して記載されている。たとえば、赤ちゃんまたはペットの場合、撮影する画像の背景が地面になりがちになるうえ、赤ちゃんまたはペットはふっくら見える方が可愛く写る。このため、赤ちゃんまたはペットの場合、背景をぼかす特殊効果処理（ファンタジックフォーカス）の推奨度を最も高くすることで、被写体と背景との境界を強調させる。これにより、被写体のイメージに相応しい雰囲気で背景から被写体を引き立たせることができる。なお、第１特殊効果処理情報テーブルＴ１には、被写体の特性を３種類のみしか記載していないが、たとえば年齢またはペットの種類ごとに各特殊効果処理および推奨度を記載してもよい。さらに、被写体の数や動きに応じた各特殊効果処理や推奨度を記載してもよい。
【００７５】
つぎに、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報テーブルについて説明する。図１１に示すように、第２特殊効果処理情報テーブルＴ２には、特殊効果撮影モードで画像処理部１４が左目画像および右目画像それぞれに対して実行可能な各特殊効果処理と、各特殊効果処理の画像処理の内容が記載されている。たとえば、設定された特殊効果撮影モードの特殊効果処理「Ａｒｔ１」の「ファンタジックフォーカス」の場合、処理内容として「トーンカーブ処理（弱い）」、「ぼかし処理（強い）」および「合成処理」が記載され、推奨度として「１」が記載されている。
【００７６】
さらに、設定された特殊効果撮影モードの特殊効果処理が「Ａｒｔ９」の「ジオラマ」の場合、処理内容として「色相・彩度処理」、「コントラスト処理」、「３回ぼかし処理」および「３回合成処理」が記載され、推奨度として「９」が記載されている。ここで、３回ぼかし処理とは、画像処理部１４が色彩・彩度処理後、コントラスト処理を行った画像データに対してぼかし処理を３回行う処理である。また、３回合成処理とは、画像処理部１４がぼかし処理を行うごとに、ぼかし処理前の画像データと、ぼかし処理後の画像データとを合成した画像データを生成する画像処理である。
【００７７】
このように、ユーザによって特殊効果処理を撮像装置１に手動設定する際に２Ｄ画像を想定した特殊効果処理の推奨度を低く設定することで、ユーザに対して推奨度の高い特殊効果処理を積極的に選択させる。これにより、３Ｄ画像を撮影する際に２次元的な位置と３次元的な位置とでつじつまが合わなくなる特殊効果処理が選択されることを低減することができる。
【００７８】
つぎに、本実施の形態１にかかる撮像装置１が行う処理について説明する。図１２は、撮像装置１が行う処理の概要を示すフローチャートである。
【００７９】
図１２に示すように、まず、制御部３２は、撮像装置１が撮影モードであるか否かを判断する（ステップＳ１０１）。撮像装置１が撮影モードである場合（ステップＳ１０１：Ｙｅｓ）、撮像装置１は後述するステップＳ１０２に移行する。一方、撮像装置１が撮影モードに設定されていない場合（ステップＳ１０１：Ｎｏ）、撮像装置１はステップＳ１１２に移行する。
【００８０】
ステップＳ１０１において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０１：Ｙｅｓ）について説明する。この場合、表示制御部３２７は、撮像部１００が一定の微小な時間間隔で連続的に生成する一対の画像データに対応する３Ｄ画像のライブビュー画像を表示部２５に表示させる（ステップＳ１０２）。具体的には、表示制御部３２７は、撮像部１００によって生成された一対の画像データに対して、立体画像生成部３２１が左目画像データおよび右目画像データそれぞれを切り出して生成した３Ｄ画像のライブビュー画像を表示部２５に表示させる。
【００８１】
続いて、制御部３２は、撮影モードが特殊効果撮影モードであるか否かを判断する（ステップＳ１０３）。撮影モードが特殊効果撮影モードである場合（ステップＳ１０３：Ｙｅｓ）、撮像装置１は、撮像する画像に対して視覚的な効果を生じさせる特殊効果設定処理を実行し（ステップＳ１０４）、ステップＳ１０５に移行する。
【００８２】
これに対して、撮影モードが特殊効果撮影モードでない場合（ステップＳ１０３：Ｎｏ）、撮像装置１は後述するステップＳ１０５に移行する。
【００８３】
レリーズスイッチ２１２が操作された撮影を指示するレリーズ信号が入力された場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は撮影を行う（ステップＳ１０６）。
【００８４】
続いて、制御部３２は、撮像した画像データから画像ファイルを作成する（ステップＳ１０７）。この画像ファイルは、たとえば、撮像部１００によって生成された左目画像および右目画像それぞれに対して、画像処理部１４が特殊効果処理を背景領域に行った画像データから生成したものである。
【００８５】
その後、制御部３２は、生成した画像ファイルを外部メモリ２８に記憶させる（ステップＳ１０８）。
【００８６】
続いて、電源スイッチ２１１が操作されることにより撮像装置１の電源がオフであるか否かを判断する（ステップＳ１０９）。撮像装置１の電源がオフである場合（ステップＳ１０９：Ｙｅｓ）、撮像装置１は本処理を終了する。
【００８７】
これに対して、撮像装置１の電源がオフでない場合（ステップＳ１０９：Ｎｏ）、制御部３２は、撮影モード切換スイッチ２１３が操作されたとき（ステップＳ１１０：Ｙｅｓ）、撮影モード切換スイッチ２１３から入力される操作信号に応じて撮像装置１のモードを切り換え（ステップＳ１１１）、撮像装置１はステップＳ１０１に戻る。
【００８８】
ステップＳ１０１において、撮像装置１が撮影モードでない場合（ステップＳ１０１：Ｎｏ）について説明する。この場合、制御部３２は、撮像装置１が再生モードであるか否かを判断する（ステップＳ１１２）。撮像装置１が再生モードでない場合（ステップＳ１１２：Ｎｏ）、撮像装置１はステップＳ１０１に戻る。
【００８９】
これに対して、撮像装置１が再生モードである場合（ステップＳ１１２：Ｙｅｓ）、表示制御部３２７は、表示部２５に外部メモリ２８が記憶する画像ファイルを一覧表示させる（ステップＳ１１３）。
【００９０】
続いて、制御部３２は、表示部２５が表示している画像ファイルの一覧から画像ファイルが選択された場合（ステップＳ１１４：Ｙｅｓ）、表示制御部３２７は、選択された画像ファイルに含まれる画像データに対応する画像を表示部２５に表示させる（ステップＳ１１５）。
【００９１】
その後、制御部３２は、画像再生の終了操作が行われたか否かを判断する（ステップＳ１１６）。具体的には、制御部３２は、撮影モード切換スイッチ２１３が操作されることにより、再生モードから撮影モードに切り換えられたか否かを判断する。画像再生の終了操作が行われていない場合（ステップＳ１１６：Ｎｏ）、撮像装置１は上述したステップＳ１１３に戻る。一方、画像再生の終了操作が行われた場合（ステップＳ１１６：Ｙｅｓ）、撮像装置１はステップＳ１０９に移行する。
【００９２】
つぎに、図１２に示したステップＳ１０４の特殊効果処理設定について説明する。図１３は、図１２に示す特殊効果設定処理の概要を示すフローチャートである。
【００９３】
図１３に示すように、まず、視差量算出部３２３は、左目画像および右目画像それぞれに含まれる周辺領域を重ねるように左目画像および右目画像を重畳し（ステップＳ２０１）、左目画像および右目画像における視差量を算出する（ステップＳ２０２）。たとえば、視差量算出部３２３は、左目画像および右目画像それぞれに含まれる背景を重畳することにより、左目画像および右目画像における視差量を算出する。
【００９４】
続いて、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分ける切分け処理を行う（ステップＳ２０３）。具体的には、切分け部３２４は、視差量算出部３２３が算出した視差量が閾値記憶部２７５に記憶された閾値以上の領域があるか否かを判定する。その後視差量算出部３２３が算出した視差量が閾値記憶部２７５に記憶された閾値以上の領域がある場合、視差量算出部３２３が算出した視差量が閾値記憶部２７５に記憶された閾値以上の領域を近距離領域として切り分ける。左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分けることができた場合（ステップＳ２０３：Ｙｅｓ）、顔検出部３２２は、左目画像または右目画像における近距離領域に含まれる人物の顔を検出する（ステップＳ２０４）。
【００９５】
その後、特性特定部３２５は、顔検出部３２２によって検出された顔の特性を特定する特性特定処理を行う（ステップＳ２０５）。顔検出部３２２によって検出された顔の特性を特定することができた場合（ステップＳ２０５：Ｙｅｓ）、画像処理設定部３２６は、特殊効果処理情報記憶部２７２が記憶する特殊効果処理情報テーブルＴ１を参照して、ユーザによる特殊効果処理の手動設定がなれければ、特性特定部３２５が特定した特性に応じて、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する（ステップＳ２０６）。たとえば、特性特定部３２５が顔検出部３２２によって検出された顔を男性であると特定した場合、画像処理設定部３２６は、推奨度が最も高い特殊効果処理（図１０を参照）を画像処理部１４が行う処理として設定する。
【００９６】
続いて、画像処理部１４は、画像処理設定部３２６によって設定された特殊効果処理を背景領域に対して行う（ステップＳ２０７）。これにより、表示部２５が表示するライブビュー画像は、背景領域のみ特殊効果処理が施された３Ｄ画像になるので、近距離領域（主要被写体）が背景領域に比較して強調されたものとなる。
【００９７】
その後、メニュースイッチ２１５が操作された場合（ステップＳ２０８：Ｙｅｓ）、表示制御部３２７は、特殊効果処理情報に関する特殊効果アイコンを表示部２５に表示させる（ステップＳ２０９）。具体的には、図１４に示すように、表示制御部３２７は、表示部２５の表示画面Ｗ２１上にライブビュー画像Ｗ２１ａおよび特殊効果処理に関する特殊効果アイコンＡ１１〜Ａ１４および特殊効果アイコンの切り換えの指示が入力される切換アイコンＡ２１，Ａ２２を表示部２５に表示させる。この際、表示制御部３２７は、３Ｄ画像に対して適用可能な特殊効果処理のみ特殊効果アイコンを表示部２５に表示させるようにしてもよい。
【００９８】
続いて、表示部２５が表示する特殊効果アイコンを選択する操作が行われ、特殊効果処理が選択された場合（ステップＳ２１０：Ｙｅｓ）、画像処理設定部３２６は、その時点で設定されている特殊効果処理を選択された特殊効果処理に設定を変更する（ステップＳ２１１）。その後、撮像装置１は図１２のメインルーチンに戻る。
【００９９】
切分け部３２４が左目画像および右目画像それぞれにおいて近距離領域と背景領域とに切り分けることができなかった場合（ステップＳ２０３：Ｎｏ）、または特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定することができなかった場合（ステップＳ２０５：Ｎｏ）について説明する。この場合、画像処理部１４は、第２特殊効果処理情報記憶部２７２ｂが記憶する第２特殊効果処理情報テーブルＴ２を参照して、ユーザによる特殊効果処理の手動設定がなければ推奨度の最も高い特殊効果処理を左目画像および右目画像の全体領域それぞれに行う（ステップＳ２１２）。
【０１００】
続いて、メニュースイッチ２１５が操作された場合（ステップＳ２１３：Ｙｅｓ）、表示制御部３２７は、特殊効果処理情報に関する特殊効果アイコン（図１４を参照）を表示部２５に表示させる（ステップＳ２１４）。
【０１０１】
その後、表示部２５が表示する特殊効果アイコンを選択する操作が行われ、特殊効果処理が選択された場合（ステップＳ２１５：Ｙｅｓ）、画像処理設定部３２６は、その時点で設定されている特殊効果処理から選択された特殊効果処理に設定する（ステップＳ２１６）。その後、撮像装置１は図１２のメインルーチンに戻る。
【０１０２】
以上説明した本発明の実施の形態１によれば、切分け部３２４が視差量算出部３２３によって算出された視差量に応じて、左目画像および右目画像それぞれの領域を近距離領域と背景領域とに切り分け、画像処理設定部３２６が顔検出部３２２によって検出された顔が近距離領域内にある場合、背景領域を画像処理部１４が特殊効果処理を行う領域として設定する。この結果、被写体の写実性をそのままにしながら背景によって被写体を引き立たせることができる。
【０１０３】
さらに、本発明の実施の形態１によれば、特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定した場合、第１特殊効果処理情報テーブルＴ１を参照して、推奨度の最も高い特殊効果処理を画像処理部１４が行う処理として設定する。これにより、被写体の特性に応じて、被写体と背景との境界を強調させることができるので、より被写体のイメージに相応しい雰囲気で被写体を引き立たせることができる。
【０１０４】
（実施の形態２）
つぎに、本発明の実施の形態２について説明する。本発明の実施の形態２では、撮像装置１が行う特殊効果設定処理が実施の形態１と異なる。このため、本発明の実施の形態２にかかる撮像装置が行う特殊効果設定処理のみ説明する。なお、本発明の実施の形態２にかかる撮像装置は、上述した撮像装置１と同様の構成を有するため説明を省略する。
【０１０５】
図１５は、本実施の形態２にかかる撮像装置１が行う特殊効果設定処理の概要を示すフローチャートである。
【０１０６】
図１５に示すように、まず、顔検出部３２２は、左目画像および右目画像それぞれに含まれる顔を検出する（ステップＳ３０１）。
【０１０７】
続いて、制御部３２は、顔検出部３２２が左目画像および右目画像からそれぞれ検出した顔の顔領域が所定値以上であるか否かを判断する（ステップＳ３０２）。具体的には、制御部３２は、顔検出部３２２が左目画像および右目画像からそれぞれ検出した顔の顔領域が、たとえば画像全体に対して５％以上占めるか否かを判断する。顔の顔領域が所定値以上である場合（ステップＳ３０２：Ｙｅｓ）、撮像装置１はステップＳ３０３に移行する。
【０１０８】
その後、視差量算出部３２３は、顔検出部３２２が検出した左目画像の顔領域および右目画像の顔領域を重畳し（ステップＳ３０３）、左目画像および右目画像の視差量を算出する（ステップＳ３０４）。
【０１０９】
続いて、切分け部３２４は、視差量算出部３２３が算出した視差量に応じて、左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分ける切分け処理を行う（ステップＳ３０５）。左目画像および右目画像の領域それぞれを近距離領域と背景領域とに切り分けることができた場合（ステップＳ３０５：Ｙｅｓ）、撮像装置１はステップＳ３０６に移行する。
【０１１０】
その後、特性特定部３２５は、顔検出部３２２によって検出された顔の特性を特定する（ステップＳ３０６）。顔検出部３２２によって検出された顔の特性を特定することができた場合（ステップＳ３０６：Ｙｅｓ）、画像処理設定部３２６は、特性特定部３２５が特定した特性に応じて、第１特殊効果処理情報記憶部２７２ａが記憶する特殊効果処理情報テーブルＴ１を参照し、ユーザによる特殊効果処理の手動設定がなければ、推奨度が最も高い特殊効果処理を画像処理部１４が行う処理として設定する。（ステップＳ３０７）。
【０１１１】
続いて、画像処理部１４は、画像処理設定部３２６によって設定された特殊効果処理を左目画像および右目画像それぞれの背景領域に対して行う（ステップＳ３０８）。これにより、表示部２５が表示するライブビュー画像は、背景領域のみ特殊効果が施された３Ｄ画像になるので、近距離領域が背景領域に比較して強調されたものとなる。
【０１１２】
その後、メニュースイッチ２１５が操作された場合（ステップＳ３０９：Ｙｅｓ）、表示制御部３２７は、特殊効果アイコンを表示部２５に表示させる（ステップＳ３１０）。
【０１１３】
続いて、表示部２５が表示する３Ｄ画像の近距離領域がタッチされ（ステップＳ３１１：Ｙｅｓ）、所定時間内、たとえば３秒以内に特殊効果アイコンを操作する操作が行われ、特殊効果処理が選択された場合（ステップＳ３１２：Ｙｅｓ）、画像処理部１４は、選択された特殊効果処理を近距離領域に対して行う（ステップＳ３１３）。その後、撮像装置１は図１２のメインルーチンに戻る。
【０１１４】
図１６は、図１５のステップＳ３１１〜Ｓ３１３の処理の概要を説明する模式図である。図１６に示すように、ユーザは、まず、表示部２５が表示画像Ｗ３１上に表示するライブビュー画像Ｗ３１ａの近距離領域Ｅ１１にタッチする（図１６（ａ））。その後、ユーザは、所望の特殊効果アイコンとして特殊効果アイコンＡ１１をタッチする（図１６（ｂ））。この場合、画像処理部１４は、特殊効果アイコンに応じた特殊効果処理を近距離領域Ｅ１１に対して行う。その後、ユーザは、手動設定による特殊効果処理の決定を指示する操作信号の入力を受け付ける決定アイコンＡ３３をタッチする（図１６（ｃ））。これにより、画像処理部１４は、近距離領域に対してユーザが所望する特殊効果処理を行うことができる。なお、図１６の画像Ｗ３１ａは、３Ｄ画像を模式的に平面で示している。
【０１１５】
図１５に戻り、説明を続ける。ステップＳ３１１において表示部２５が表示する３Ｄ画像の近距離領域（人物）がタッチされず（ステップＳ３１１：Ｎｏ）、特殊効果アイコンを操作する操作が行われ、特殊効果処理が選択された場合（ステップＳ３１４：Ｙｅｓ）、画像処理設定部３２６は、画像全体に対してその時点で設定されている特殊効果処理から選択された特殊効果処理に設定する（ステップＳ３１５）。その後、撮像装置１は図１２のメインルーチンに戻る。なお、近距離領域がタッチされた場合、背景領域のみに特殊効果処理が設定されるようにしてもよい。
【０１１６】
顔検出部３２２が検出した顔領域が所定値以上でない場合（ステップＳ３０２：Ｎｏ）、左目画像および右目画像それぞれにおいて近距離領域と背景領域とに切り分けることができなかった場合（ステップＳ３０５：Ｎｏ）、または顔検出部３２２によって検出された顔の特性を特定することができなかった場合（ステップＳ３０６：Ｎｏ）について説明する。この場合、画像処理部１４は、第２特殊効果処理情報記憶部２７２ｂが記憶する特殊効果処理情報テーブルＴ２を参照して、ユーザによる特殊効果処理の手動設定がなければ、推奨度が最も高い特殊効果処理を左目画像および右目画像の全領域それぞれに対して行う（ステップＳ３１６）。
【０１１７】
続いて、メニュースイッチ２１５が操作された場合（ステップＳ３１７：Ｙｅｓ）、表示制御部３２７は、特殊効果アイコンを表示部２５に表示させる（ステップＳ３１８）。
【０１１８】
その後、表示部２５が表示する特殊効果アイコンを選択する操作が行われ、特殊効果処理が選択された場合（ステップＳ３１９：Ｙｅｓ）、画像処理設定部３２６は、その時点で設定されている特殊効果処理から選択された特殊効果処理に設定する（ステップＳ３２０）。その後、撮像装置１は図１２のメインルーチンに戻る。
【０１１９】
以上説明した本発明の実施の形態２によれば、上述した実施の形態１と同様の効果を有する。さらに、画像処理部１４は、ユーザが手動設定によって設定した特殊効果処理を近距離領域に対して行うことができる。この結果、近距離領域および背景領域それぞれに対して異なる特殊効果処理を行うことができ、撮像する画像に対してより独創的な表現を行うことができる。
【０１２０】
なお、本実施の形態１，２では、特性特定部３２５が顔検出部３２２によって検出された顔の特性を特定した場合、第１特殊効果処理情報テーブルＴ１を参照して、推奨度の最も高い特殊効果処理を画像処理部１４が行う処理として設定し、画像処理設定部３２６が背景領域を画像処理部１４が特殊効果処理を行う領域として設定していたが、たとえば、メニュースイッチ２１５等によって背景領域に設定された特殊効果処理を変更するようにしてもよい。
【０１２１】
（変形例１）
上述した実施の形態では、画像処理設定部３２６が、特性特定部３２５によって特定された顔の特性に応じて、画像処理部１４が行う特殊効果処理の内容を設定していたが、たとえば顔検出部３２２によって検出された顔を登録するとともに、登録した顔に対応付けて画像処理部１４が行う特殊効果処理の内容を設定してもよい。
【０１２２】
図１７は、本実施の形態の変形例１にかかる撮像装置１で被写体を撮影する際の状況を示す図である。図１８は、図１７に示す状況下で表示部２５が表示する画面遷移の一例を示す図である。なお、上述した撮像装置１と同様の構成を有するため説明を省略する。
【０１２３】
図１７および図１８に示すように、ユーザは、たとえば図１８の表示画面Ｗ４０上に表示されるライブビュー画像Ｗ４０ａを見ながら被写体Ｅ５０を撮影する際の構図を決定する。図１８に示す状況下で、表示制御部３２７は、顔検出部３２２が検出した顔領域に対応するフレームＦ１をライブビュー画像Ｗ４０ａに表示させる。この際、ユーザが表示部２５によって表示されるライブビュー画像Ｗ４０ａ上のフレームＦ１をタッチした場合、制御部３２は、タッチパネル２６から入力される操作信号に応じてフレームＦ１の顔の特性を含む顔情報を不揮発性メモリ２７に記憶させる。
【０１２４】
続いて、表示制御部３２７は、特殊効果処理アイコンＡ１１〜Ａ１９を表示画面Ｗ４０上の右領域Ｒ４０に表示させる。その後、制御部３２は、ユーザが表示部２５によって表示される特殊効果処理アイコンＡ１１〜Ａ１９のいずれかをタッチした場合（図１８（ａ））、ユーザがタッチした特殊効果アイコンに応じた特殊効果処理の内容を、不揮発性メモリ２７に記憶させた顔に対応付けて記憶させる。
【０１２５】
その後、表示制御部３２７は、表示部２５が表示する表示画面Ｗ４０上の右領域Ｒ４０に設定された特殊効果処理の内容に対応する特殊効果処理を表示させるとともに、表示画面Ｗ４０の下領域Ｒ４１に補助メッセージを表示させる（図１８（ｂ））。
【０１２６】
このように、本実施の形態の変形例によれば、顔検出部３２２が不揮発性メモリ２７に記憶された顔情報と一致する顔を検出した場合、画像処理設定部３２６が顔情報に対応付けられた特殊効果処理の内容を画像処理部１４に自動的に設定することができる。
【０１２７】
（変形例２）
また、上述した実施の形態では、３Ｄ撮影可能なレンズ部３を用いて一対の画像データを生成していたが、たとえば、１つの光学系のみを有する構成とし、この構成で連続的に撮像することにより、一対の画像データを生成することができる。具体的には、図１９に示すように、ユーザが撮像装置２００を左から右に向けて移動（矢印Ｃ）させながら被写体Ｅ１００を連続的に撮像することにより、被写体に対して視差を有する一対の画像データを生成するようにしてもよい。
【０１２８】
（その他の実施の形態）
また、上述した実施の形態では、画像処理部１４は、撮影時に特殊効果処理を行っていたが、たとえば外部メモリ２８に記憶された画像データを再生する際の３Ｄ画像または２Ｄ画像に対して本処理を行ってもよい。
【０１２９】
また、上述した実施の形態では、静止画撮影を例に説明したが、動画撮影においても本処理を適応することができる。
【０１３０】
また、上述した実施の形態では、撮像装置１をデジタル一眼デジタルカメラとして説明していたが、たとえばレンズ部３と本体部２とが一体に形成されたデジタルカメラ、デジタルビデオカメラ、カメラ付き携帯電話等の撮影機能と表示機能を備えた各種電子機器に適用することができる。
【符号の説明】
【０１３１】
１，２００ 撮像装置
２ 本体部
３ レンズ部
１０ シャッタ
１１ 撮像素子
１２ Ａ／Ｄ変換部
１３ メモリ
１４ 画像処理部
１５ 撮像素子駆動部
１６ シャッタ駆動部
１７ 露出処理部
１８ ＡＦ処理部
１９ タイマー
２０ 本体通信部
２１ 操作入力部
２２ フラッシュ発光部
２３ フラッシュ充電部
２４ フラッシュ駆動部
２５ 表示部
２６ タッチパネル
２７ 不揮発性メモリ
２８ 外部メモリ
２９ 外部通信部
３０ 電源供給部
３１ 電源部
３２ 制御部
４１ 第１光学系
４２ 第２光学系
４３ レンズ駆動部
４４，４５ 絞り
４６ 絞り駆動部
４７，４８ ミラー
４９ プリズム
５０ レンズ通信部
５１ レンズ記憶部
５２ レンズ制御部
１４１ 特殊効果処理部
２１１ 電源スイッチ
２１２ レリーズスイッチ
２１３ 撮影モード切換スイッチ
２１４ 操作スイッチ
２１５ メニュースイッチ
２１６ プレビュースイッチ
２１７ 動画スイッチ
２５１ バックライト
２５２ 表示パネル
２５３ 視差バリア
２７１ 撮影モード情報記憶部
２７２ 特殊効果処理情報記憶部
２７３ 左目画像データ記憶部
２７４ 右目画像データ記憶部
２７５ 閾値記憶部
３２１ 立体画像生成部
３２２ 顔検出部
３２３ 視差量算出部
３２４ 切分け部
３２５ 特性特定部
３２６ 画像処理設定部
３２７ 表示制御部
【特許請求の範囲】
【請求項１】
被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像部と、
前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理部と、
前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出部と、
前記視差量算出部が算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分け部と、
前記一対の画像それぞれに含まれる顔を検出する顔検出部と、
前記顔検出部が検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記顔検出部が検出した顔の特性を特定する特性特定部と、
前記特性特定部が特定する特性と前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理との組み合わせに応じた推奨度を与える第１特殊効果処理情報を記憶する第１特殊効果処理情報記憶部と、
をさらに備え、
前記画像処理設定部は、前記特性特定部が前記顔検出部によって検出された顔の特性を特定した場合、前記第１特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理部が行う処理として設定することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理の推奨度を与える第２特殊効果処理情報を記憶する第２特殊効果処理情報記憶部をさらに備え、
前記画像処理設定部は、前記顔検出部が検出した顔が前記近距離領域内にない場合、前記第２特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理が行う処理として設定することを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記一対の画像データに対応する画像を表示する表示部と、
前記画像処理部が実施可能な各特殊効果処理に関するアイコンを前記表示部に表示させる表示制御部と、
前記表示部が表示するアイコンの選択を指示する操作信号の入力を受け付ける入力部と、
を備え、
前記画像処理設定部は、前記入力部によって選択されたアイコンに対応する特殊効果処理を設定することを特徴とする請求項１〜３のいずれか一つに記載の撮像装置。
【請求項５】
被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像ステップと、
前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理ステップと、
前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出ステップと、
前記視差量算出ステップが算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分けステップと、
前記一対の画像それぞれに含まれる顔を検出する顔検出ステップと、
前記顔検出ステップが検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定ステップと、
を撮像装置に実行させることを特徴とする撮像プログラム。
【請求項１】
被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像部と、
前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理部と、
前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出部と、
前記視差量算出部が算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分け部と、
前記一対の画像それぞれに含まれる顔を検出する顔検出部と、
前記顔検出部が検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記顔検出部が検出した顔の特性を特定する特性特定部と、
前記特性特定部が特定する特性と前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理との組み合わせに応じた推奨度を与える第１特殊効果処理情報を記憶する第１特殊効果処理情報記憶部と、
をさらに備え、
前記画像処理設定部は、前記特性特定部が前記顔検出部によって検出された顔の特性を特定した場合、前記第１特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理部が行う処理として設定することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記画像処理部が前記一対の画像に対して実施可能な特殊効果処理の推奨度を与える第２特殊効果処理情報を記憶する第２特殊効果処理情報記憶部をさらに備え、
前記画像処理設定部は、前記顔検出部が検出した顔が前記近距離領域内にない場合、前記第２特殊効果処理情報を参照して、推奨度が高い前記特殊効果処理を前記画像処理が行う処理として設定することを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記一対の画像データに対応する画像を表示する表示部と、
前記画像処理部が実施可能な各特殊効果処理に関するアイコンを前記表示部に表示させる表示制御部と、
前記表示部が表示するアイコンの選択を指示する操作信号の入力を受け付ける入力部と、
を備え、
前記画像処理設定部は、前記入力部によって選択されたアイコンに対応する特殊効果処理を設定することを特徴とする請求項１〜３のいずれか一つに記載の撮像装置。
【請求項５】
被写体を撮像することによって互いに視差を有する一対の画像データを生成する撮像ステップと、
前記一対の画像データそれぞれに対応する一対の画像に対して、複数の画像処理を組み合わせることにより視覚的な効果を生じさせることが可能な特殊効果処理を行う画像処理ステップと、
前記一対の画像それぞれに含まれる類似領域を重畳することにより、該一対の画像の視差量を算出する視差量算出ステップと、
前記視差量算出ステップが算出した前記視差量に応じて、前記一対の画像それぞれの領域を近距離領域と背景領域とに切り分ける切分けステップと、
前記一対の画像それぞれに含まれる顔を検出する顔検出ステップと、
前記顔検出ステップが検出した顔が前記近距離領域内にある場合、前記背景領域を前記画像処理部が前記特殊効果処理を行う領域として設定する画像処理設定ステップと、
を撮像装置に実行させることを特徴とする撮像プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【公開番号】特開２０１２−１４２７７９（Ｐ２０１２−１４２７７９Ａ）
【公開日】平成２４年７月２６日（２０１２．７．２６）
【国際特許分類】
【出願番号】特願２０１０−２９３９９６（Ｐ２０１０−２９３９９６）
【出願日】平成２２年１２月２８日（２０１０．１２．２８）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２４年７月２６日（２０１２．７．２６）
【国際特許分類】
【出願日】平成２２年１２月２８日（２０１０．１２．２８）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]