画像処理装置、画像処理装置の制御方法およびプログラム
【課題】ユーザ好みの画像を容易に生成する。
【解決手段】画像処理装置は、第１処理部と、第２処理部と、制御部とを備える。第１処理部は、画像に第１効果を与える。第２処理部は、第１効果とは異なる効果であって複数種類の第２効果を画像に与える。制御部は、操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には、第１処理部による第１効果をそのユーザ操作に応じて画像に与えるための制御を行う。また、制御部は、そのユーザ操作が所定条件を満たさない場合には、第２処理部による第２効果のうちの何れかの効果をそのユーザ操作に応じて画像に与えるための制御を行う。
【解決手段】画像処理装置は、第１処理部と、第２処理部と、制御部とを備える。第１処理部は、画像に第１効果を与える。第２処理部は、第１効果とは異なる効果であって複数種類の第２効果を画像に与える。制御部は、操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には、第１処理部による第１効果をそのユーザ操作に応じて画像に与えるための制御を行う。また、制御部は、そのユーザ操作が所定条件を満たさない場合には、第２処理部による第２効果のうちの何れかの効果をそのユーザ操作に応じて画像に与えるための制御を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像処理装置に関する。詳しくは、画像を扱う画像処理装置およびその制御方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
【背景技術】
【０００２】
近年、人物等の被写体を撮像して画像を生成し、この生成された画像を画像コンテンツ（画像ファイル）として記録する画像処理装置（例えば、デジタルスチルカメラ等の撮像装置）が普及している。また、このように生成される画像について各種効果を加える技術が多数提案されている。
【０００３】
例えば、デジタルスチルカメラから取り込まれた画像のうち、ユーザ操作により設定された領域内については、シャープ化処理を行い、その領域外については、ぼけ化処理を行う画像データ処理装置が提案されている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１−１４４０２６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述の従来技術によれば、簡単な構成で望遠効果を実現することができる。
【０００６】
ここで、ユーザの好みは多種多様であるため、撮像装置により生成される画像のぼかし度合い等についても、ユーザの好みが多種多様であると想定される。そこで、例えば、ユーザの好みに応じた適切な処理を撮像動作中における比較的容易な操作により行うことができれば、ユーザ好みの画像を容易に生成することができると考えられる。
【０００７】
本技術はこのような状況に鑑みて生み出されたものであり、ユーザ好みの画像を容易に生成することを目的とする。
【課題を解決するための手段】
【０００８】
本技術は、上述の問題点を解消するためになされたものであり、その第１の側面は、画像に第１効果を与える第１処理部と、上記第１効果とは異なる効果であって複数種類の第２効果を上記画像に与える第２処理部と、操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には上記第１処理部による上記第１効果を当該ユーザ操作に応じて上記画像に与え、当該ユーザ操作が所定条件を満たさない場合には上記第２処理部による上記第２効果のうちの何れかの効果を当該ユーザ操作に応じて上記画像に与えるための制御を行う制御部とを具備する画像処理装置およびその制御方法ならびに当該方法をコンピュータに実行させるプログラムである。これにより、ユーザ操作が所定条件を満たす場合には、第１処理部による第１効果をそのユーザ操作に応じて画像に与え、そのユーザ操作が所定条件を満たさない場合には、第２処理部による第２効果のうちの何れかの効果をそのユーザ操作に応じて画像に与えるという作用をもたらす。
【０００９】
また、この第１の側面において、光学系をさらに具備し、上記制御部は、上記光学系を制御することより上記第１効果を上記画像に与えるようにしてもよい。これにより、光学系を制御することより第１効果を画像に与えるという作用をもたらす。
【００１０】
また、この第１の側面において、上記ユーザ操作により設定された処理が、上記光学系の制御により得られる処理の範囲の中であることを上記所定条件とするようにしてもよい。これにより、ユーザ操作により設定された処理が、光学系の制御により得られる処理の範囲の中である場合に所定条件を満たすと判定するという作用をもたらす。
【００１１】
また、この第１の側面において、上記第１効果を、上記光学系の制御から生じる光学ぼかし効果とし、上記第２効果を、デジタル画像処理によるデジタルぼかし効果とするようにしてもよい。これにより、光学系の制御から生じる光学ぼかし効果、または、デジタル画像処理によるデジタルぼかし効果を与えるという作用をもたらす。
【００１２】
また、この第１の側面において、上記第２処理部を、上記画像にデジタル画像処理を施すことにより上記複数種類の第２効果を与える画像処理部とするようにしてもよい。これにより、画像にデジタル画像処理を施すことにより複数種類の第２効果を与えるという作用をもたらす。
【００１３】
また、この第１の側面において、上記第２効果を、ぼかし効果とし、上記制御部は、上記ユーザ操作が上記所定条件を満たさない場合には、当該ユーザ操作に応じて上記画像処理部を制御することにより複数種類の上記ぼかし効果のうちの何れかのぼかし効果を当該ユーザ操作に応じて上記画像に与えるための制御を行うようにしてもよい。これにより、ユーザ操作が所定条件を満たさない場合には、そのユーザ操作に応じて画像処理部を制御することにより、複数種類のぼかし効果のうちの何れかのぼかし効果をそのユーザ操作に応じて画像に与えるという作用をもたらす。
【００１４】
また、この第１の側面において、上記制御部は、上記ユーザ操作を受け付けるための操作領域画像を表示部に表示させるための制御を行うようにしてもよい。これにより、ユーザ操作を受け付けるための操作領域画像を表示させるという作用をもたらす。
【００１５】
また、この第１の側面において、上記制御部は、上記第１処理部による上記第１効果を上記画像に与えるための上記ユーザ操作としてユーザによる接触操作を行うための第１操作範囲と、上記第２処理部による上記第２効果のうちの何れかの効果を上記画像に与えるための上記ユーザ操作としてユーザによる接触操作を行うための第２操作範囲とを含む一連の線状領域を上記操作領域画像として上記表示部に表示させるための制御を行うようにしてもよい。これにより、第１操作範囲および第２操作範囲を含む一連の線状領域を操作領域画像として表示させるという作用をもたらす。
【００１６】
また、この第１の側面において、上記制御部は、上記第１操作範囲における上記接触操作が行われた位置と上記第１操作範囲および上記第２操作範囲の境界との距離に応じて上記第１処理部による上記第１効果の高低を決定し、上記第２操作範囲における上記接触操作が行われた位置と上記境界との距離に応じて上記第２処理部による上記第２効果の高低を決定するように制御を行うようにしてもよい。これにより、第１操作範囲における接触操作が行われた位置と第１操作範囲および第２操作範囲の境界との距離に応じて第１処理部による第１効果の高低を決定し、第２操作範囲における接触操作が行われた位置とその境界との距離に応じて第２処理部による第２効果の高低を決定するという作用をもたらす。
【００１７】
また、この第１の側面において、上記制御部は、上記第１操作範囲および上記第２操作範囲の境界から分岐する複数の線状領域を上記第２操作範囲における上記複数種類の第２効果に対応する画像として上記表示部に表示させるための制御を行うようにしてもよい。これにより、第１操作範囲および第２操作範囲の境界から分岐する複数の線状領域を第２操作範囲における複数種類の第２効果に対応する画像として表示させるという作用をもたらす。
【００１８】
また、この第１の側面において、上記制御部は、上記第２効果を表す画像を当該第２効果に係る線状領域に関連付けて上記複数種類の第２効果毎に上記表示部に表示させるための制御を行うようにしてもよい。これにより、第２効果を表す画像を、その第２効果に係る線状領域に関連付けて、複数種類の第２効果毎に表示させるという作用をもたらす。
【００１９】
また、この第１の側面において、上記制御部は、上記ユーザ操作に応じた効果が与えられた上記画像を表示部に表示させる制御を行うようにしてもよい。これにより、ユーザ操作に応じた効果が与えられた画像を表示させるという作用をもたらす。
【００２０】
また、この第１の側面において、上記制御部は、上記画像を記録するための記録指示操作が受け付けられた場合には当該記録指示操作に応じて記録される画像であって上記ユーザ操作に応じた効果が与えられた画像を表示部に表示させる制御を行うようにしてもよい。これにより、記録指示操作が受け付けられた場合には、その記録指示操作に応じて記録される画像であってそのユーザ操作に応じた効果が与えられた画像を表示させるという作用をもたらす。
【００２１】
また、この第１の側面において、撮像部をさらに具備するようにしてもよい。これにより、撮像部により生成された画像について、ユーザ操作に応じた第１効果または第２効果を与えるという作用をもたらす。
【発明の効果】
【００２２】
本技術によれば、ユーザ好みの画像を容易に生成することができるという優れた効果を奏し得る。
【図面の簡単な説明】
【００２３】
【図１】本技術の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。
【図２】本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作およびその撮像動作により生成される画像の撮像範囲を簡略的に示す図である。
【図３】本技術の第１の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。
【図４】本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてぼかし処理を行うための操作領域画像の表示例を示す図である。
【図５】本技術の第１の実施の形態における撮像装置１００による画像記録処理の処理手順の一例を示すフローチャートである。
【図６】本技術の第２の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例（表示画面４００）を示す図である。
【図７】本技術の第３の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される表示画面例（操作領域画像設定画面５００）を示す図である。
【図８】本技術の第３の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。
【図９】本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例を示す図である。
【図１０】本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてズーム処理を行うための操作領域画像の表示例を示す図である。
【図１１】本技術の第４の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される操作領域画像６１０、６２０を示す図である。
【発明を実施するための形態】
【００２４】
以下、本技術を実施するための形態（以下、実施の形態と称する）について説明する。説明は以下の順序により行う。
１．第１の実施の形態（光学的なぼかし処理と複数種類の電子ぼかし処理とを行うためのユーザ操作を操作領域画像を用いて行う例）
２．第２の実施の形態（複数種類の電子ぼかし処理が施された画像を操作領域画像とともに表示する例）
３．第３の実施の形態（操作領域画像を用いて各種処理のユーザ操作を行う例）
４．第４の実施の形態（操作領域画像の表示態様の変形例）
【００２５】
＜１．第１の実施の形態＞
［撮像装置の構成例］
図１は、本技術の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。
【００２６】
撮像装置１００は、レンズユニット１１０と、撮像部１２０と、変換部１３０と、画像処理部１４０と、表示制御部１５０と、表示部１６０と、記録制御部１７０と、記録媒体１８０と、操作受付部１９０と、制御部２００とを備える。また、撮像装置１００は、例えば、被写体を撮像して画像（画像データ）を生成し、この生成された画像（画像データ）を画像コンテンツ（静止画コンテンツまたは動画コンテンツ）として記録するデジタルスチルカメラにより実現される。なお、撮像装置１００は、特許請求の範囲に記載の画像処理装置の一例である。
【００２７】
レンズユニット１１０は、レンズ部１１１と、絞り１１２と、レンズ駆動部１１３と、絞り駆動部１１４とを備える。
【００２８】
レンズ部１１１は、被写体からの入射光を集光するレンズ群であり、これらのレンズ群により集光された光が絞り１１２を介して撮像部１２０に入射される。なお、レンズ部１１１は、焦点を合わせるためのフォーカスレンズや被写体を拡大するためのズームレンズ等により構成されるが、これらの具体的な配置構成等については、図示および説明を省略する。また、レンズ部１１１を構成する各レンズは、レンズ駆動部１１３により駆動され、被写体に対して前後に移動する。これにより、フォーカス機能およびズーム機能が実現される。
【００２９】
絞り１１２は、レンズ部１１１を通過する入射光の光量を調整するものであり、その調整後の光が撮像部１２０に入射される。すなわち、絞り１１２により、レンズ部１１１を通過する入射光の光量が調整され、撮像部１２０に供給される光量（すなわち、露出）が決定される。また、絞り１１２は、絞り駆動部１１４により駆動され、絞りの開度が調節される。
【００３０】
レンズ駆動部１１３は、制御部２００の指示に基づいて、レンズ部１１１を構成する各レンズを駆動させるものである。また、レンズ駆動部１１３は、レンズ部１１１を構成する各レンズの位置を取得し、制御部２００に出力する。
【００３１】
絞り駆動部１１４は、制御部２００の指示に基づいて、絞り１１２を駆動させるものである。また、絞り駆動部１１４は、絞り１１２の状態（開閉の状態）を取得し、制御部２００に出力する。
【００３２】
このように、絞り駆動部１１４は、光を集光して撮像部１２０に供給する光学系（レンズユニット１１０）を構成する絞り１１２の開閉を制御することにより、撮像部１２０により生成される画像にぼかし効果（第１効果）を与える。なお、レンズユニット１１０（絞り駆動部１１４）は、特許請求の範囲に記載の第１処理部の一例である。
【００３３】
なお、レンズユニット１１０については、交換レンズユニットとするようにしてもよい。この場合には、レンズユニット１１０は、レンズマウント（図示せず）を介して撮像装置１００に取り付けられる。また、レンズユニット１１０を制御する制御部２００を、ぼかし効果（第１効果）を与える処理部（第１処理部）としても把握することができる。
【００３４】
ここで、被写界深度について説明する。被写界深度は、被写体に対して、実質的にフォーカスが合っていると考えられる被写体距離の範囲を示すものである。一般に、この範囲が広い場合には「被写界深度が深い」と称し、この範囲が狭い場合には「被写界深度が浅い」と称する。また、被写界深度は、絞りの開閉に応じて、変化することが広く知られている。例えば、絞りを開くと、この開きの度合いに応じて被写界深度が浅くなる。すなわち、Ｆ値を小さくすると、被写界深度が浅くなる。一方、絞りを閉じると、この絞りの度合いに応じて被写界深度が深くなる。すなわち、Ｆ値を大きくすると、被写界深度が深くなる。
【００３５】
例えば、絞りの開口の直径を直径Ｈ１とする場合に、被写体に対して実質的にフォーカスが合うフォーカスレンズの範囲を合焦範囲Ｗ１とする。この場合（絞りの開口が直径Ｈ１である場合）において、合焦範囲Ｗ１内にフォーカスレンズが存在する場合には、被写体に対して実質的にフォーカスが合うことになる。このため、撮像装置１００の光軸方向に対して多少前後している被写体に対しても、比較的広い範囲（光軸方向における範囲）の被写体にフォーカスが合うことになる。
【００３６】
また、例えば、絞りの開口の直径を直径Ｈ２（Ｈ２＜Ｈ１）とする場合に、被写体に対して実質的にフォーカスが合うフォーカスレンズの範囲を合焦範囲Ｗ２（Ｗ２＜Ｗ１）とする。この場合（絞りの開口が直径Ｈ２である場合）には、合焦範囲Ｗ１よりも狭い合焦範囲Ｗ２内にフォーカスレンズが存在しないと、被写体に対して実質的にフォーカスが合わない。このため、撮像範囲に含まれる被写体が撮像装置１００の光軸方向に対して多少前後している場合には、これらの被写体にフォーカスが合わないことがある。すなわち、撮像装置１００の光軸方向に対して多少前後している被写体に対しては、比較的狭い範囲の被写体にのみフォーカスが合うことになる。
【００３７】
そこで、本技術の第１の実施の形態では、上述した被写界深度の性質を用いて、主要被写体の背景をぼかした画像を生成する例を示す。具体的には、ユーザ操作に基づいて絞り１１２を開放して、ユーザの好みに合うように、背景をぼかした画像を生成する。しかしながら、レンズの性能によっては、Ｆ値が小さすぎる場合にはそれ以上「ぼかす」ことができないこともある。例えば、交換レンズを用いる場合には、絞りの開放に限界があるズームレンズを備える交換レンズも存在する。このため、絞り１１２の開放のみでは、ユーザ好みのぼかし処理を施すことができないことも想定される。そこで、本技術の第１の実施の形態では、レンズユニット１１０による光学処理とともに画像処理部１４０によるデジタル画像処理によりぼかし処理を行う。
【００３８】
撮像部１２０は、制御部２００の指示に基づいて、画像信号（アナログ信号）を生成するものであり、生成された画像信号を変換部１３０に出力する。具体的には、撮像部１２０は、レンズユニット１１０を介して入射された被写体の光を電気信号に変換する撮像素子（図示せず）と、この撮像素子の出力信号（アナログ信号）を処理するアナログ信号処理部（図示せず）とを備える。すなわち、撮像部１２０において、レンズユニット１１０を介して入射された被写体の光学像が撮像素子の撮像面に結像され、この状態で撮像素子が撮像動作を行うことにより、アナログ信号が生成される。そして、アナログ信号処理部がそのアナログ信号に対して、ノイズ除去や増幅等のアナログ処理を行うことにより画像信号が生成される。そして、生成された画像信号（アナログ信号）が変換部１３０に出力される。なお、撮像素子として、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いることができる。
【００３９】
また、これらの撮像素子として、例えば、射出瞳が異なる部分を透過した透過光を受光することにより、位相差検出方式の焦点検出（位相差ＡＦ（Auto Focus））を行う撮像素子を用いることができる。この位相差ＡＦを行う撮像素子からは、画像信号（アナログ信号）とともに、位相差検出信号が出力される。このため、画像処理部１４０は、撮像部１２０から出力された位相差検出信号に基づいて、撮像部１２０から出力された画像信号に対応する画像における各領域の被写体距離を算出することができる。なお、被写体距離は、撮像装置１００から被写体までの距離である。
【００４０】
変換部１３０は、撮像部１２０から出力された画像信号（アナログ信号）をデジタル信号に変換するものであり、この変換により生成されたデジタル信号を画像処理部１４０に出力する。
【００４１】
画像処理部１４０は、制御部２００の指示に基づいて、変換部１３０から出力された画像信号（デジタル信号）について各種画像処理を施すものであり、各種画像処理が施された画像信号（画像データ）を表示制御部１５０および記録制御部１７０に出力する。
【００４２】
また、画像処理部１４０は、ぼかしフィルタを用いた画像処理により、変換部１３０から出力された画像信号（デジタル信号）に対応する画像（撮像部１２０により生成された画像）について、電子ぼかし処理を行う。例えば、画像処理部１４０は、撮像部１２０により生成された画像における複数の領域毎に、異なるレベルの電子ぼかしを施すことができる。また、画像処理部１４０は、撮像部１２０により生成された画像における各領域について、その領域に係る被写体距離に応じて異なるレベルの電子ぼかしを施すことができる。なお、各領域に係る被写体距離は、上述したように、撮像部１２０から出力された位相差検出信号に基づいて算出される値を用いることができる。
【００４３】
また、撮像部１２０により生成された画像およびこの画像の生成時における各情報（例えば、レンズの位置および合焦位置）に基づいて、その画像に関する被写体距離を算出するようにしてもよい。例えば、奥行マップ（いわゆる、デプスマップ（Depth Map））を生成し、この奥行マップに基づいて各領域に係る被写体距離を求めることができる。ここで、奥行マップは、被写体距離を表すデータにより構成されるマップである。この奥行マップの生成方法として、例えば、ＴＯＦ（Time of flight）方式やボケ量解析（Depth from Defocus）等の方法を用いることができる。例えば、ＴＯＦ方式は、光源から出射された光が対象物で反射し、センサに到達するまでの光の遅れ時間と光の速度とに基づいて被写体までの距離を算出する方法である。
【００４４】
また、ぼかしフィルタとして、例えば、平滑化フィルタやガウシアンフィルタ（次の式１）を用いることができる。ガウシアンフィルタのフィルタのサイズは、例えば、２０×２０画素とすることができる。
ｆ（ｘ，ｙ）＝（１／２πσ２）ｅｘｐ｛−（ｘ２＋ｙ２）／２σ２｝ …式１
【００４５】
ここで、ｘ、ｙは、画像における画素の座標位置を示す。また、σは、フィルタ係数を示す。このフィルタ係数σ（＞０）として、例えば、撮像部１２０により生成された画像における各領域に係る被写体距離に応じた値を用いることができる。例えば、各領域に係る被写体距離が長くなるに応じて、フィルタ係数σを高くすることができる。なお、この被写体距離に応じた値（フィルタ係数σ）は、予め設定しておくものとする。
【００４６】
また、画像処理部１４０は、撮像部１２０により生成された画像に含まれる人物の顔を検出し、検出された顔を含む領域と、これ以外の領域とに分類して、ぼかし処理を行うことができる。なお、顔検出方法として、例えば、顔の輝度分布情報が記録されているテンプレートと実画像とのマッチングによる顔検出方法、画像データに含まれる肌色の部分や人間の顔の特徴量等に基づいた顔検出方法等を用いることができる。
【００４７】
このように、画像処理部１４０は、撮像部１２０により生成された画像にデジタル画像処理を施すことにより複数種類のぼかし効果（第２効果（第１効果とは異なる効果））を与える。なお、画像処理部１４０は、特許請求の範囲に記載の第２処理部の一例である。
【００４８】
表示制御部１５０は、制御部２００の指示に基づいて、画像処理部１４０から出力された画像を表示部１６０に表示させるものである。例えば、表示制御部１５０は、撮像動作を行う際における各種設定を行うための設定画面（例えば、図７に示す操作領域画像設定画面５００）や、撮像部１２０により生成された画像（いわゆる、スルー画像、ライブビュー画像）を表示部１６０に表示させる。また、例えば、表示制御部１５０は、ユーザが操作入力を行うための操作領域画像（例えば、図４に示す操作領域画像３３０）を表示部１６０に表示させる。
【００４９】
表示部１６０は、表示制御部１５０の制御に基づいて各画像を表示する表示パネル（例えば、液晶ファインダー）である。表示部１６０として、例えば、ＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro Luminescence）パネル等の表示パネルを用いることができる。
【００５０】
記録制御部１７０は、制御部２００の指示に基づいて、記録媒体１８０に対する記録制御を行うものである。例えば、記録制御部１７０は、画像処理部１４０から出力された画像（画像データ）を静止画コンテンツ（静止画ファイル）として記録媒体１８０に記録させる。
【００５１】
記録媒体１８０は、記録制御部１７０の制御に基づいて、各種情報（静止画コンテンツや動画コンテンツ）を記憶する記録媒体である。なお、記録媒体１８０は、撮像装置１００に内蔵するようにしてもよく、撮像装置１００から着脱可能とするようにしてもよい。また、記録媒体１８０として、半導体メモリ、光記録媒体、磁気ディスク、ＨＤＤ（Hard Disk Drive）等の種々の記録媒体を用いることができる。
【００５２】
操作受付部１９０は、ユーザにより行われた操作を受け付ける操作受付部であり、受け付けられた操作内容に応じた制御信号（操作信号）を制御部２００に出力する。操作受付部１９０は、図４等に示すシャッターボタン１９１、入出力パネル３００に対応する。
【００５３】
制御部２００は、メモリ（図示せず）に格納されている制御プログラムに基づいて撮像装置１００における各部を制御するものである。制御部２００は、例えば、マイクロプロセッサにより構成される。
【００５４】
例えば、制御部２００は、ユーザ操作を受け付けるための操作領域画像３３０（図４に示す）を表示部１６０に表示させるための制御を行う。
【００５５】
また、例えば、制御部２００は、操作受付部１９０により受け付けられたユーザ操作（例えば、図４に示す操作領域画像３３０における接触操作）が所定条件を満たすか否かを判定する。ここで、ユーザ操作が所定条件を満たす場合は、例えば、図４（ｂ）に示す操作領域画像３３０における光学処理範囲３３２の接触操作が行われた場合である。すなわち、制御部２００は、ユーザ操作により設定された処理（例えば、ぼかし処理）が、光学系（レンズユニット１１０）の制御により得られる処理の範囲の中であることを、所定条件とすることができる。例えば、制御部２００は、撮像部１２０により生成される画像に、絞り１１２の開閉により、ぼかし効果を与えることができる操作内容がユーザ操作として受け付けられた場合には、所定条件を満たすと判定する。
【００５６】
そして、制御部２００は、そのユーザ操作が所定条件を満たす場合には、そのユーザ操作に応じた絞り１１２の開閉によるぼかし効果（第１効果）を画像（撮像部１２０により生成される画像）に与えるための制御を行う。すなわち、制御部２００による光学系（レンズユニット１１０）の制御（例えば、絞り１１２の開閉）により、ぼかし効果（第１効果）が、撮像部１２０により生成される画像に与えられる。また、制御部２００は、そのユーザ操作が所定条件を満たさない場合には、画像処理部１４０によるぼかし効果（第２効果）のうちの何れかの効果をそのユーザ操作に応じて画像（撮像部１２０により生成される画像）に与えるための制御を行う。このように、そのユーザ操作が所定条件を満たすか否かに応じて、光学系（レンズユニット１１０）の制御から生じる光学ぼかし効果（第１効果）、または、デジタル画像処理によるデジタルぼかし効果（第２効果）が与えられる。
【００５７】
［撮像動作例および撮像範囲例］
図２は、本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作およびその撮像動作により生成される画像の撮像範囲を簡略的に示す図である。
【００５８】
図２（ａ）には、撮像装置１００を用いて行われる撮像動作状態をその側面から見た場合を示す。具体的には、人物７０１、木７０２、家７０３、ビル群７０４を被写体として撮像装置１００を用いて撮像動作が行われている状態を示す。この場合に、人物７０１は、撮像装置１００からの距離（被写体距離）がＬ１（ｍ）の範囲内に存在し、木７０２は、被写体距離がＬ１（ｍ）〜Ｌ２（ｍ）の範囲内に存在するものとする。また、家７０３は、被写体距離がＬ２（ｍ）〜Ｌ３（ｍ）の範囲内に存在し、ビル群７０４は、被写体距離がＬ３（ｍ）を超える範囲に存在するものとする。また、本技術の第１の実施の形態では、人物７０１が主要被写体である場合を想定する。ここで、例えば、画像処理部１４０により人物の顔が検出された場合には、その顔を主要被写体とすることができる。また、例えば、ユーザ操作（例えば、図４等に示す入出力パネル３００におけるタッチ操作）により指定された被写体を主要被写体とすることができる、
【００５９】
図２（ｂ）には、撮像装置１００を用いて行われる撮像動作により生成される画像の撮像範囲７００（水平方向および垂直方向の撮像範囲）を示す。具体的には、図２（ａ）に示す状態で、撮像部１２０により生成される画像の撮像範囲７００を示す。
【００６０】
図２（ｂ）に示すように、人物７０１を主要被写体として、人物７０１とその背景（木７０２、家７０３、ビル群７０４）とを被写体とする画像を生成することができる。この場合に、例えば、主要被写体である人物７０１のみを鮮明にし、その背景（木７０２、家７０３、ビル群７０４）をぼかした画像を好むユーザも想定される。
【００６１】
そこで、上述したように、被写界深度を浅くすることにより、主要被写体の背景をぼかすことができる。また、被写界深度を調整することにより、ユーザ好みにぼかした画像を生成することができる。このように、ぼかした画像の生成例を図３に示す。
【００６２】
［画像の生成例］
図３は、本技術の第１の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。図３（ａ）乃至（ｂ）には、図２（ａ）に示す状態で撮像動作を行っている場合において、絞り１１２の調整後に生成される画像の一例を示す。
【００６３】
図３（ａ）には、人物７０１に合焦している状態で絞り１１２を最も開放した場合に生成される画像７１１を示す。このように、絞り１１２を最も開放した場合には、合焦範囲が狭くなる。このため、合焦している被写体（人物７０１）から少しだけ離れている被写体（木７０２）についてもフォーカスが合わない。同様に、合焦している被写体（人物７０１）から比較的離れている被写体（家７０３）と、合焦している被写体（人物７０１）から最も離れている被写体（ビル群７０４）とについてもフォーカスが合わない。このため、木７０２、家７０３、ビル群７０４のそれぞれがぼかされた画像７１１が生成される。
【００６４】
図３（ｂ）には、人物７０１に合焦している状態で絞り１１２を一定量（図３（ａ）よりも閉じた量）だけ開放した場合に生成される画像７１２を示す。このように、絞り１１２を図３（ａ）よりも閉じた場合には、合焦範囲が図３（ａ）に示す合焦範囲よりも広くなる。このため、合焦している被写体（人物７０１）から少しだけ離れている被写体（木７０２）についてはフォーカスが合うが、合焦している被写体（人物７０１）から比較的離れている被写体（家７０３）についてはフォーカスが合わない。同様に、合焦している被写体（人物７０１）から最も離れている被写体（ビル群７０４）についてもフォーカスが合わない。このため、家７０３、ビル群７０４のそれぞれがぼかされた画像７１２が生成される。
【００６５】
図３（ｃ）には、人物７０１に合焦している状態で絞り１１２を一定量（図３（ｂ）よりも閉じた量）だけ開放した場合に生成される画像７１３を示す。このように、絞り１１２を図３（ｂ）よりも閉じた場合には、合焦範囲が図３（ｂ）に示す合焦範囲よりも広くなる。このため、合焦している被写体（人物７０１）から少しだけ離れている被写体（木７０２）と、合焦している被写体（人物７０１）から比較的離れている被写体（家７０３）とについてはフォーカスが合う。しかしながら、合焦している被写体（人物７０１）から最も離れている被写体（ビル群７０４）についてはフォーカスが合わない。このため、ビル群７０４がぼかされた画像７１３が生成される。
【００６６】
このように、ユーザ操作に基づいて絞り１１２を調整することにより、ユーザ好みのぼかしを施すことができる。しかしながら、上述したように、レンズの性能によっては、Ｆ値が小さすぎる場合にはそれ以上「ぼかす」ことができないこともあり、絞り１１２の調整のみでは、ユーザ好みのぼかしを施すことができないことも想定される。そこで、本技術の第１の実施の形態では、レンズユニット１１０による光学処理とともに画像処理部１４０による画像処理によりぼかし処理を行う。このぼかし処理を行うための操作領域画像の表示例を図４に示す。
【００６７】
［ぼかし処理を行うための操作領域画像の表示例］
図４は、本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてぼかし処理を行うための操作領域画像の表示例を示す図である。なお、図４では、表示部１６０および操作受付部１９０を一体で構成する入出力パネル３００が、撮像装置１００の背面（すなわち、被写体に向けられるレンズが設けられている面の反対側の面）側に設けられている例を示す。すなわち、入出力パネル３００は、各種画像を表示するとともに、表示面に近接または接触する物体の検出状態に基づいてユーザからの操作入力を受け付けるものである。なお、入出力パネル３００は、タッチスクリーンまたはタッチパネルとも称される。また、入出力パネル３００として、例えば、導電性を有する物体（例えば、人物の指）の接触または近接を、静電容量の変化に基づいて検出する静電式（静電容量方式）のタッチパネルを用いることができる。
【００６８】
図４（ａ）には、入出力パネル３００に表示される表示画面例（表示画面３１０）を示す。表示画面３１０には、撮像画像表示領域３１１と、操作領域画像表示領域３２０とが設けられている。
【００６９】
撮像画像表示領域３１１は、撮像部１２０により生成された画像（いわゆる、スルー画像）を表示する領域である。すなわち、絞り１１２の調整後に生成された画像が撮像画像表示領域３１１に表示される。
【００７０】
操作領域画像表示領域３２０は、撮像部１２０により生成される画像について、画像効果（ぼかし効果）を施す場合に、その度合いを操作するための操作領域画像３３０を表示する領域である。ユーザは、操作領域画像３３０上において操作標識３３１を移動させることにより、所望のぼかし処理を行うための設定をすることができる。なお、操作領域画像３３０については、図４（ｂ）に拡大して示す。
【００７１】
なお、入出力パネル３００には、他の画像（例えば、各種アイコン（例えば、撮像モードを表すアイコン））等が表示されるが、これらについては、図示および説明を省略する。
【００７２】
図４（ｂ）には、操作領域画像表示領域３２０に表示される操作領域画像３３０を示す。操作領域画像３３０は、操作標識３３１を移動させることにより、撮像部１２０により生成される画像に対するぼかし処理の設定を行うための操作領域画像であり、その操作範囲が、光学処理範囲３３２および画像処理範囲３３３に分類されている。
【００７３】
ここで、操作標識３３１は、入出力パネル３００におけるユーザのタッチ操作やなぞる操作により移動させることができる。例えば、操作領域画像３３０における操作標識３３１の表示部分を指で触れた状態で、操作領域画像３３０における所望の位置にその指をユーザが移動させることにより操作標識３３１の移動操作を行うことができる。また、操作領域画像３３０における所望の位置に指を触れる操作（タッチ操作）をユーザが行うことにより、その指が触れた位置に操作標識３３１を移動させることができる。また、ユーザのタッチ操作やなぞる操作以外に、例えば、撮像装置１００に設けられている操作部材（例えば、操作ボタン）等を用いて、操作標識３３１の移動操作を行うようにしてもよい。
【００７４】
光学処理範囲３３２は、レンズユニット１１０における絞り１１２を調整（すなわち、Ｆ値の調整）するための範囲である。すなわち、光学処理範囲３３２は、レンズユニット１１０によるぼかし効果（第１効果）を画像に与えるためのユーザ操作としてユーザによる接触操作を行うための第１操作範囲である。なお、接触操作は、入出力パネル３００においてユーザが指を接触させることによる操作と、入出力パネル３００においてユーザが指を近接させることによる操作とを含むものとする。また、光学処理範囲３３２における操作標識３３１の移動に応じて絞り１１２が調整される。具体的には、光学処理範囲３３２の端部３３５（すなわち、操作領域画像３３０の上端部）に操作標識３３１が移動された場合には、絞り１１２が最も閉じられる。この場合には、例えば、画像全体に鮮鋭度がある画像（すなわち、背景等もくっきりとした画像）が撮像部１２０により生成される。一方、光学処理範囲３３２の他の端部３３６（すなわち、画像処理範囲３３３との境界部分）に操作標識３３１が移動された場合には、絞り１１２が最も開放される。この場合には、例えば、主要被写体以外の被写体（例えば、背景の被写体）が比較的ぼかされた画像が撮像部１２０により生成される。すなわち、画像処理範囲３３３との境界部分は、光学的にＦ値を下げることができる境界を意味する。また、絞り１１２を閉じる設定がされた場合には、絞り１１２の開閉の度合いに応じて、シャッタースピードを短くする等の設定が適宜行われるものとする。
【００７５】
画像処理範囲３３３は、画像処理部１４０による画像処理の度合いを調整するための範囲である。すなわち、画像処理範囲３３３は、画像処理部１４０によるぼかし効果（第２効果）のうちの何れかの効果を画像に与えるためのユーザ操作としてユーザによる接触操作を行うための第２操作範囲である。また、画像処理範囲３３３における操作標識３３１の移動に応じて画像処理部１４０によるぼかし処理の度合いが調整される。
【００７６】
ここで、画像処理範囲３３３は、光学処理範囲３３２との境界部分から分岐されている３つの範囲により構成されている（すなわち、光学処理範囲３３２との境界部分から分岐されている３つの枝により構成されている）。また、画像処理範囲３３３を操作標識３３１が移動する場合（画像処理範囲３３３に操作標識３３１が存在する場合）には、絞り１１２は最も開放された状態に維持される。そして、画像処理範囲３３３における操作標識３３１の移動に応じて画像処理部１４０によるぼかし処理の度合いのみが変更される。
【００７７】
具体的には、画像処理範囲３３３の端部３３６に操作標識３３１が移動された場合は、光学処理範囲３３２の端部３３６に操作標識３３１を移動させた場合と同様となる。すなわち、絞り１１２が最も開放された状態の画像が撮像部１２０により生成される。この場合における画像処理部１４０によるぼかし処理の度合いは、最も小さい設定がされる。
【００７８】
また、画像処理範囲３３３の他の端部（ぼかす１、ぼかす２、ぼかす３）に操作標識３３１が移動された場合には、移動先に応じたぼかし処理の度合いとして最も大きい設定がされる。例えば、ぼかしフィルタとして、ガウシアンフィルタを用いる場合には、フィルタ係数σとして、最も高い値が設定される。
【００７９】
すなわち、制御部２００は、光学処理範囲３３２および画像処理範囲３３３の境界から分岐する複数の線状領域を、画像処理範囲３３３における複数種類のぼかし効果（第２効果）に対応する画像として表示部１６０に表示させるための制御を行う。
【００８０】
ここで、図４では、ぼかし１乃至３については、被写体距離に応じてぼかし処理の度合いを調整する例を示す。例えば、ぼかし１は、合焦している被写体（注目被写体）以外の被写体をぼかす調整を行うための範囲であるものとする。また、ぼかし２は、合焦している被写体（注目被写体）以外の被写体のうち、注目被写体から比較的遠い被写体をぼかす調整を行うための範囲であるものとする。また、ぼかし３は、合焦している被写体（注目被写体）以外の被写体のうち、注目被写体からさらに遠い被写体（ぼかし２よりも遠い被写体）のみをぼかす調整を行うための範囲であるものとする。
【００８１】
例えば、図２（ａ）に示す撮像動作中において、ぼかし１に操作標識３３１が移動された場合には、被写体距離がＬ１（ｍ）を超える範囲に存在する被写体をぼかす調整が行われる。この場合には、例えば、図３（ａ）に示す画像７１１のような画像が生成される。
【００８２】
また、ぼかし２に操作標識３３１が移動された場合には、被写体距離がＬ２（ｍ）を超える範囲に存在する被写体をぼかす調整が行われる。この場合には、例えば、図３（ｂ）に示す画像７１２のような画像が生成される。
【００８３】
また、ぼかし３に操作標識３３１が移動された場合には、被写体距離がＬ３（ｍ）を超える範囲に存在する被写体をぼかす調整が行われる。この場合には、例えば、図３（ｃ）に示す画像７１３のような画像が生成される。
【００８４】
このように、画像に含まれる被写体の被写体距離に応じてぼかし処理を行う場合には、撮像部１２０から出力された位相差検出信号に基づいて算出される被写体距離（画像における各領域の被写体距離）を用いる。すなわち、画像処理部１４０は、画像における各領域の被写体距離を算出し、この算出された被写体距離に基づいて、操作標識３３１が存在するぼかし１乃至３に応じて調整対象となる領域（画像における領域）を特定する。そして、画像処理部１４０は、その特定された領域（画像における領域）について、ぼかし１乃至３における位置（長手方向における位置）に応じた度合いのぼかし処理を行う。このように、画像処理部１４０は、複数種類の第２効果（ぼかし効果）として、被写体距離に応じて、画像に含まれる被写体をぼかす効果を、画像における領域毎に施す。
【００８５】
このように、制御部２００は、光学処理範囲３３２および画像処理範囲３３３を含む一連の線状領域を、操作領域画像３３０として表示部１６０に表示させるための制御を行う。また、制御部２００は、光学処理範囲３３２における接触操作が行われた位置と、光学処理範囲３３２および画像処理範囲３３３の境界との距離に応じてレンズユニット１１０によるぼかし効果（第１効果）の高低を決定する。また、制御部２００は、画像処理範囲３３３における接触操作が行われた位置と、光学処理範囲３３２および画像処理範囲３３３の境界との距離に応じて画像処理部１４０によるぼかし効果（第２効果）の高低を決定する。
【００８６】
このように、同一ライン上において、光学処理範囲３３２と画像処理範囲３３３の１つの枝とを配置し、これらの境界から画像処理範囲３３３の複数の枝を分岐して配置する。このような表示態様とすることにより、関連する画像処理（電子ぼかし処理）を行うための枝（画像処理範囲３３３）が近接しているため、ユーザは関連する画像処理（電子ぼかし処理）の調整を容易に行うことができる。また、操作領域画像３３０を、複数の画像処理の効果から１つの画像処理の効果のみを選択することができる表示態様とすることにより、１つの画像処理効果とその処理の度合いとのユーザ操作を容易に行うことができる。
【００８７】
また、スルー画像とともに、操作領域画像３３０が表示されるため、記録対象となる画像が、画像処理部１４０によるデジタル画像処理による擬似画像であることをユーザが容易に把握することができる。
【００８８】
なお、撮像画像表示領域３１１には、絞り１１２によるぼかし処理が施された画像が表示される（すなわち、画像処理部１４０によるぼかし処理が施された画像は表示されない）。ただし、例えば、特定操作（例えば、操作標識３３１の長押し操作）が行われた場合には、画像処理部１４０によるぼかし処理が施された画像を撮像画像表示領域３１１に表示するようにしてもよい。すなわち、制御部２００は、ユーザ操作に応じた効果（ぼかし効果）が与えられた画像を表示部１６０に表示させる制御を行う。これにより、例えば、ユーザがシャッターボタン１９１の全押しを行う前に、特定操作に応じたぼかし処理が施された画像をユーザに見せることができる。
【００８９】
また、例えば、操作領域画像３３０におけるユーザ操作に応じた効果が与えられた画像を、プレビュー画像として表示部１６０に表示させるようにしてもよい。なお、プレビュー画像は、例えば、静止画の記録指示操作が受け付けられた場合におけるその記録対象となる画像であり、その記録指示操作に係る記録処理中およびその直後に一定期間表示される画像である。すなわち、制御部２００は、静止画の記録指示操作が受け付けられた場合には、その記録指示操作に応じて記録される画像（プレビュー画像）として、操作領域画像３３０におけるユーザ操作に応じた効果が与えられた画像を表示部１６０に表示させる制御を行う。
【００９０】
［撮像装置の動作例］
次に、本技術の第１の実施の形態における撮像装置１００の動作について図面を参照して説明する。
【００９１】
［撮像装置の動作例］
図５は、本技術の第１の実施の形態における撮像装置１００による画像記録処理の処理手順の一例を示すフローチャートである。
【００９２】
最初に、制御部２００は、撮像モードが設定されたか否かを判断し（ステップＳ９０１）、撮像モードが設定されていない場合には、監視を継続して行う。また、撮像モードが設定された場合には（ステップＳ９０１）、撮像部１２０が、制御部２００の指示に基づいて、撮像処理により画像を生成する（ステップＳ９０２）。
【００９３】
続いて、画像処理部１４０が、制御部２００の指示に基づいて、撮像部１２０により生成されて変換部１３０により変換された画像について画像処理（例えば、ぼかし処理）を行う（ステップＳ９０３）。この画像処理の内容は、図４に示す操作領域画像３３０における操作標識３３１の位置に応じて決定される。
【００９４】
続いて、表示制御部１５０が、制御部２００の指示に基づいて、画像処理部１４０により画像処理が施された画像を操作領域画像３３０とともに表示部１６０に表示させる（ステップＳ９０４）。例えば、図４（ａ）に示す表示画面３１０が表示部１６０に表示される。
【００９５】
続いて、制御部２００は、操作領域画像３３０における操作標識３３１の操作（例えば、移動操作）が行われたか否かを判断し（ステップＳ９０５）、操作領域画像３３０における操作標識３３１の操作が行われていない場合には、ステップＳ９０９に進む。一方、操作領域画像３３０における操作標識３３１の操作が行われた場合には（ステップＳ９０５）、制御部２００は、その操作による移動後の操作標識３３１の位置が操作領域画像３３０における光学処理範囲３３２内であるか否かを判断する（ステップＳ９０６）。なお、ステップＳ９０５、Ｓ９０６は、特許請求の範囲に記載の判定手順の一例である。
【００９６】
その操作による移動後の操作標識３３１の位置が光学処理範囲３３２内である場合には（ステップＳ９０６）、制御部２００は、光学処理範囲３３２における操作標識３３１の位置に基づいてレンズユニット１１０を制御する（ステップＳ９０７）。すなわち、光学処理範囲３３２における操作標識３３１の位置に応じて絞り１１２が調整される。なお、ステップＳ９０７は、特許請求の範囲に記載の第１制御手順の一例である。
【００９７】
また、その移動後の操作標識３３１の位置が光学処理範囲３３２内でない場合には（ステップＳ９０６）、制御部２００は、画像処理範囲３３３における操作標識３３１の位置に基づいて画像処理部１４０を制御する（ステップＳ９０８）。すなわち、画像処理範囲３３３において操作標識３３１が存在する枝に応じて、ぼかし処理の対象となる領域が決定される。また、その枝における操作標識３３１の位置（長手方向における位置）に応じてぼかし度合いが決定される。そして、制御部２００は、これらの決定内容を画像処理部１４０に通知する。これにより、画像処理部１４０が、撮像部１２０により生成されて変換部１３０により変換された画像について画像処理を行う（ステップＳ９０３）。なお、ステップＳ９０８は、特許請求の範囲に記載の第２制御手順の一例である。
【００９８】
続いて、制御部２００は、静止画の記録指示操作が行われたか否かを判断し（ステップＳ９０９）、静止画の記録指示操作が行われていない場合には、ステップＳ９１１に進む。例えば、静止画の記録指示操作は、シャッターボタン１９１（図４（ａ）等に示す）の全押し操作である。また、静止画の記録指示操作が行われた場合には（ステップＳ９０９）、記録制御部１７０が、制御部２００の指示に基づいて、画像処理部１４０により画像処理が施された画像を記録媒体１８０に記録させる記録処理を行う（ステップＳ９１０）。この場合に、画像処理部１４０によりぼかし処理が施された画像と、画像処理部１４０によりぼかし処理が施されていない画像とを、関連付けて記録媒体１８０に記録させるようにしてもよい。これにより、デジタル画像処理によるぼかし処理が施された画像と、デジタル画像処理によるぼかし処理が施されていない画像とを、ユーザが比較して見ることができる。
【００９９】
また、制御部２００は、撮像モードの終了操作が行われたか否かを判断し（ステップＳ９１１）、撮像モードの終了操作が行われていない場合には、ステップＳ９０２に戻る。また、撮像モードの終了操作が行われた場合には（ステップＳ９１１）、画像記録処理の動作を終了する。
【０１００】
なお、この例では、撮像モードが設定されている場合に操作領域画像３３０を表示する例を示すが、撮像モードのうちの特定モード（例えば、背景ぼかしモード）が設定されている場合にのみ操作領域画像３３０を表示するようにしてもよい。
【０１０１】
また、この例では、撮像動作中において操作領域画像３３０を常に表示する例を示すが、操作領域画像３３０を表示させるか否か（操作領域画像３３０のオン／オフ）を、ユーザ操作に応じて容易に切り換えることができるようにしてもよい。
【０１０２】
このように、本技術の第１の実施の形態によれば、レンズユニット１１０による光学処理と、画像処理部１４０によるデジタル画像処理とを同一線上で行えるユーザインターフェースを提供することができる。すなわち、絞り１１２を開放してその分のシャッタースピードを短くする等のレンズ性能を利用した背景ぼかしの操作と、デジタル画像処理技術を利用したぼかしの操作とを１つのインターフェースで行うことができる。これにより、ズームレンズのようにレンズの開放に制限があるような場合でも、レンズ性能以上のぼかし画像（例えば、おもいっきりぼかした画像）を生成することができる。このように、レンズユニット１１０では再現することができない背景ぼかしをデジタル画像処理により行うことができるため、レンズユニット１１０のレンズ性能を仮想的に延長させることができる。
【０１０３】
また、複数の背景ぼかしの処理方法を、操作領域画像３３０として表示してユーザに選択させることができる。また、それらの処理結果についても、入出力パネル３００においてユーザが容易に把握することができる。このため、例えば、撮像装置１００の扱いに不慣れな初心者でもあっても、好みのぼかし具合となる画像を容易に生成することができる。すなわち、ユーザ好みの画像を容易に生成することができる。
【０１０４】
＜２．第２の実施の形態＞
本技術の第１の実施の形態では、撮像動作時において操作領域画像（例えば、図４に示す操作領域画像３３０）を表示する例を示した。ここで、操作領域画像の画像処理範囲における各枝の先端に対応する画像処理が施された画像を、ユーザが枝毎に容易に把握することができれば、ユーザ好みの画像をさらに容易に生成することができると考えられる。
【０１０５】
そこで、本技術の第２の実施の形態では、操作領域画像の画像処理範囲における各枝の先端に対応する画像処理が施された画像を各枝に関連付けて表示する例を示す。なお、本技術の第２の実施の形態における撮像装置の構成については、図１に示す例と略同様である。このため、本技術の第１の実施の形態と共通する部分については、その説明の一部を省略する。
【０１０６】
［画像処理を行うための操作領域画像の表示例］
図６は、本技術の第２の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例（表示画面４００）を示す図である。
【０１０７】
表示画面４００は、図４（ａ）に示す表示画面３１０において、各画像処理が施された画像４０１乃至４０３を追加して表示するものである。なお、各画像処理が施された画像４０１乃至４０３を追加して表示する点以外は、表示画面４００は表示画面３１０と略同様であるため、共通する部分については同一の符号を付して、これらの説明の一部を省略する。
【０１０８】
図６（ａ）には、操作領域画像３３０における操作標識３３１が光学処理範囲（図４（ｂ）に示す光学処理範囲３３２）に存在する場合における表示画面４００を示す。また、図６（ｂ）には、操作領域画像３３０における操作標識３３１が画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）に存在する場合における表示画面４００を示す。
【０１０９】
図６（ａ）に示すように、表示画面４００には、操作領域画像３３０の下側に、画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）における各枝の先端に対応する画像処理が施された画像４０１乃至４０３を表示する表示領域が設けられている。すなわち、操作領域画像３３０における操作標識３３１が光学処理範囲（図４（ｂ）に示す光学処理範囲３３２）に存在する場合には、各枝の先端に対応する画像処理が施された画像４０１乃至４０３のそれぞれが同一のサイズで表示される。このように、制御部２００は、各画像処理が施された画像４０１乃至４０３を、各画像処理効果に係る枝に関連付けて表示部１６０に表示させるための制御を行う。
【０１１０】
また、図６（ｂ）に示すように、操作領域画像３３０における操作標識３３１が画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）に存在する場合には、操作標識３３１が存在する枝の先端に対応する画像処理が施された画像が拡大表示される（画像４０５）。例えば、図６（ｂ）に示すように、操作標識３３１が画像処理範囲のうちの「ぼかす１」の枝に存在する場合には、「ぼかす１」に対応する画像処理が施された画像４０１（図６（ａ）に示す）が拡大表示される（画像４０５）。
【０１１１】
ここで、操作領域画像３３０の下側に表示される画像（画像４０１乃至４０３）については、定期的または不定期に、画像処理部１４０により生成される。例えば、操作標識３３１が画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）に移動された場合に、画像処理部１４０が、各枝の先端に対応するぼかし処理を施した画像を生成して表示することができる。また、操作標識３３１の位置にかかわらず、画像処理部１４０が、各枝の先端に対応するぼかし処理を施した画像を順次生成して表示することができる。
【０１１２】
このように、本技術の第２の実施の形態によれば、操作領域画像３３０の画像処理範囲３３３における各枝の先端に対応する画像処理が施された画像を各枝に関連付けて表示させることができる。これにより、撮像動作中において、操作標識３３１の操作後の画像をユーザがさらに容易に把握することができ、ユーザ好みの画像をさらに容易に生成することができる。また、欲しいエフェクトを加えるためのユーザ操作を容易に行うことができる。
【０１１３】
また、光学的に再現することができないような複雑なぼかし処理を施した画像を記録する場合でも、入出力パネル３００において直感的に容易に、画像の処理結果をユーザが確認することができる。このため、撮像装置１００において新しいユーザ経験を提供することができる。
【０１１４】
＜３．第３の実施の形態＞
本技術の第１および第２の実施の形態では、画像に含まれる被写体をぼかす処理を行う場合にそのぼかし度合いを調整する例を示した。ここで、他の画像処理を行う場合にその処理の度合いを調整する場合についても本技術の第１および第２の実施の形態を適用することができると考えられる。
【０１１５】
そこで、本技術の第３の実施の形態では、各種の画像処理を行う場合にその処理の度合いを調整するための操作領域画像を表示する例を示す。なお、本技術の第３の実施の形態における撮像装置の構成については、図１に示す例と略同様である。このため、本技術の第１の実施の形態と共通する部分については、その説明の一部を省略する。
【０１１６】
［操作領域画像設定画面の表示例］
図７は、本技術の第３の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される表示画面例（操作領域画像設定画面５００）を示す図である。
【０１１７】
操作領域画像設定画面５００は、撮像装置１００を用いて行われる撮像動作中に入出力パネル３００に表示させる操作領域画像を選択するための表示画面である。操作領域画像設定画面５００は、例えば、撮像装置１００に実行させる機能を選択するための表示画面（例えば、メニュー画面）における選択操作に応じて表示される。
【０１１８】
具体的には、操作領域画像設定画面５００には、操作領域画像選択領域５０１と、決定ボタン５０２と、戻るボタン５０３とが設けられている。
【０１１９】
操作領域画像選択領域５０１には、撮像装置１００を用いて行われる撮像動作中に入出力パネル３００に表示させる操作領域画像を選択するためのラジオボタンが表示される。例えば、本技術の第１の実施の形態で示す操作領域画像３３０を表示させる場合には、一番上側のラジオボタン（ぼかし１〜３）が選択される。
【０１２０】
なお、真ん中のラジオボタン（トンネル風＋ぼかし、…）が選択された場合に表示される操作領域画像については、図９を参照して詳細に説明する。また、一番下側のラジオボタン（ズーム１〜３）が選択された場合に表示される操作領域画像については、図１０を参照して詳細に説明する。
【０１２１】
決定ボタン５０２は、操作領域画像選択領域５０１において、表示対象となる操作領域画像を選択する選択操作が行われた後に、その操作を決定する際に押下されるボタンである。
【０１２２】
戻るボタン５０３は、例えば、直前に表示されていた表示画面に戻る場合に押下されるボタンである。
【０１２３】
［画像の生成例］
図８は、本技術の第３の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。図８（ａ）乃至（ｂ）には、人物５１５を主要被写体とする撮像動作を行っている場合において、画像処理が施された後の画像の一例を示す。
【０１２４】
図８（ａ）には、トンネル効果およびぼかしに関する画像処理が画像処理部１４０により施された画像５１１を示す。ここで、トンネル効果は、画像における周縁の光量を落とすことにより、人物５１５がトンネル内に存在する場面を撮影したような効果を与えることである。
【０１２５】
例えば、画像処理部１４０は、撮像部１２０により生成されて変換部１３０により変換された画像について、この画像における周縁の光量を落とすとともに所定のエフェクトを加える画像処理を施すことにより、トンネル効果となる画像５１１を生成する。
【０１２６】
図８（ｂ）には、スケッチ風およびぼかしに関する画像処理が画像処理部１４０により施された画像５１２を示す。ここで、スケッチ風の画像は、画像における輝度を調整するように画像処理が施された画像であり、スケッチにより描かれたような画像である。
【０１２７】
例えば、画像処理部１４０は、撮像部１２０により生成されて変換部１３０により変換された画像について、明度の二値化処理およびエッジ抽出処理を行う。そして、画像処理部１４０は、二値化処理により生成された二値化画像と、エッジ抽出処理により生成された輪郭線画像とを重ね合わせる重ね合わせ処理を行うことにより、スケッチ風の画像５１２を生成する。
【０１２８】
図８（ｃ）には、トイカメラ風およびぼかしに関する画像処理が画像処理部１４０により施された画像５１３を示す。ここで、トイカメラ風の画像は、画像における四隅が薄暗くされた画像であり、トイカメラにより撮影されたような雰囲気の画像である。
【０１２９】
例えば、画像処理部１４０は、撮像部１２０により生成されて変換部１３０により変換された画像について、この画像における四隅を薄暗くするとともに所定のエフェクトを加える画像処理を施すことにより、トイカメラ風の画像５１３を生成する。
【０１３０】
［画像処理を行うための操作領域画像の表示例］
図９は、本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例を示す図である。なお、図９に示す表示画面５２０は、図４に示す表示画面３１０の一部を変形したものである。このため、図９では、表示画面３１０と共通する部分については、同一の符号を付して、これらの説明の一部を省略する。
【０１３１】
操作領域画像５３０は、撮像部１２０により生成される画像について、画像処理部１４０が画像効果（カラー、モノクロ等）を施す場合に、その度合いを調整するための画像である。なお、上側の範囲（図４（ｂ）に示す光学処理範囲３３２に相当する範囲）は、カラーの度合いを調整するための範囲である。また、下側の範囲（図４（ｂ）に示す画像処理範囲３３３に相当する範囲）は、モノクロの度合いを調整するための範囲であり、分岐されている各枝に応じて、それぞれ異なる画像処理が施される。
【０１３２】
［ズーム処理を行うための操作領域画像の表示例］
図１０は、本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてズーム処理を行うための操作領域画像の表示例を示す図である。なお、図１０に示す表示画面５４０は、図４に示す表示画面３１０の一部を変形したものである。このため、図１０では、表示画面３１０と共通する部分については、同一の符号を付して、これらの説明の一部を省略する。
【０１３３】
操作領域画像５５０は、撮像部１２０により生成される画像について、ズーム処理を行う場合に、その度合いを調整するための画像である。なお、上側の範囲（図４（ｂ）に示す光学処理範囲３３２に相当する範囲）は、光学ズーム倍率を調整するための範囲である。この光学ズーム処理は、レンズユニット１１０により行われる。また、下側の範囲（図４（ｂ）に示す画像処理範囲３３３に相当する範囲）は、電子ズーム（デジタルズーム）の度合いを調整するための範囲であり、分岐されている各枝に応じて、それぞれ異なるズーム処理が行われる。この電子ズーム処理は、画像処理部１４０により行われる。例えば、ズーム１は、画像における左側領域をズームするための枝とし、ズーム２は、画像における中央領域をズームするための枝とし、ズーム３は、画像における右側領域をズームするための枝とすることができる。
【０１３４】
このように、本技術の第３の実施の形態によれば、背景ぼかし効果やスケッチ効果等の複雑な処理を必要とする画像処理等についても、ユーザによるワンアクションの操作等により容易に行うことができる。また、本技術の第２の実施の形態と同様に、その処理が施された画像を表示させることにより、その効果をユーザが容易に確認することができる。
【０１３５】
＜４．第４の実施の形態＞
本技術の第１乃至第３の実施の形態では、略同一の長さの３つの枝が下側に延びている操作領域画像を表示する例を示した。ここで、枝の表示態様については、ユーザの好みや画像処理の内容に応じて変更するようにしてもよい。
【０１３６】
そこで、本技術の第４の実施の形態では、操作領域画像における複数の枝の表示態様を変更する例を示す。なお、本技術の第４の実施の形態における撮像装置の構成については、図１に示す例と略同様である。このため、本技術の第１の実施の形態と共通する部分については、その説明の一部を省略する。
【０１３７】
［操作領域画像の表示例］
図１１は、本技術の第４の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される操作領域画像６１０、６２０を示す図である。
【０１３８】
図１１（ａ）には、上下に延びるラインを基準とした場合における左右の一方に、複数の枝を配置する操作領域画像６１０を示す。操作領域画像６１０は、操作標識６１１と、第１操作範囲６１２と、第２操作範囲６１３とにより構成される。
【０１３９】
図１１（ｂ）には、上下に延びるラインを基準とした場合における左右の各枝の長さを変更した操作領域画像６２０を示す。操作領域画像６２０は、操作標識６２１と、第１操作範囲６２２と、第２操作範囲６２３とにより構成される。
【０１４０】
これらの変更については、ユーザの手動操作により設定するようにしてもよく、各画像処理に応じて自動で設定するようにしてもよい。
【０１４１】
なお、本技術の実施の形態では、３つの枝により構成される操作領域画像を示すが、２または４以上の枝により操作領域画像が構成されるようにしてもよい。この場合についても、本技術の第４の実施形態と同様に、各枝の配置や各枝の長さを適宜変更するようにしてもよい。また、本技術の第２の実施の形態と同様に、各処理が施された各画像を各枝に関連付けて表示させることにより、その効果をユーザが容易に確認することができる。
【０１４２】
なお、本技術の実施の形態では、撮像部１２０を備える撮像装置１００を例にして説明したが、撮像部を着脱可能な画像処理装置に本技術の実施の形態を適用することができる。また、撮像機能付き携帯電話機や撮像機能付き携帯端末装置等の画像処理装置に本技術の実施の形態を適用することができる。
【０１４３】
なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
【０１４４】
また、上述の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、ＣＤ（Compact Disc）、ＭＤ（MiniDisc）、ＤＶＤ（Digital Versatile Disk）、メモリカード、ブルーレイディスク（Blu-ray Disc（登録商標））等を用いることができる。
【０１４５】
なお、本技術は以下のような構成もとることができる。
（１） 画像に第１効果を与える第１処理部と、
前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部と、
操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には前記第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与え、当該ユーザ操作が所定条件を満たさない場合には前記第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う制御部と
を具備する画像処理装置。
（２） 光学系をさらに具備し、
前記制御部は、前記光学系を制御することより前記第１効果を前記画像に与える
前記（１）に記載の画像処理装置。
（３） 前記ユーザ操作により設定された処理が、前記光学系の制御により得られる処理の範囲の中であることを前記所定条件とする前記（２）に記載の画像処理装置。
（４） 前記第１効果は、前記光学系の制御から生じる光学ぼかし効果であり、
前記第２効果は、デジタル画像処理によるデジタルぼかし効果である
前記（２）または（３）に記載の画像処理装置。
（５） 前記第２処理部は、前記画像にデジタル画像処理を施すことにより前記複数種類の第２効果を与える画像処理部である前記（１）から（４）のいずれかに記載の画像処理装置。
（６） 前記第２効果は、ぼかし効果であり、
前記制御部は、前記ユーザ操作が前記所定条件を満たさない場合には、当該ユーザ操作に応じて前記画像処理部を制御することにより複数種類の前記ぼかし効果のうちの何れかのぼかし効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う
前記（５）に記載の画像処理装置。
（７） 前記制御部は、前記ユーザ操作を受け付けるための操作領域画像を表示部に表示させるための制御を行う前記（１）から（６）のいずれかに記載の画像処理装置。
（８） 前記制御部は、前記第１処理部による前記第１効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第１操作範囲と、前記第２処理部による前記第２効果のうちの何れかの効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第２操作範囲とを含む一連の線状領域を前記操作領域画像として前記表示部に表示させるための制御を行う前記（７）に記載の画像処理装置。
（９） 前記制御部は、前記第１操作範囲における前記接触操作が行われた位置と前記第１操作範囲および前記第２操作範囲の境界との距離に応じて前記第１処理部による前記第１効果の高低を決定し、前記第２操作範囲における前記接触操作が行われた位置と前記境界との距離に応じて前記第２処理部による前記第２効果の高低を決定するように制御を行う前記（８）に記載の画像処理装置。
（１０） 前記制御部は、前記第１操作範囲および前記第２操作範囲の境界から分岐する複数の線状領域を前記第２操作範囲における前記複数種類の第２効果に対応する画像として前記表示部に表示させるための制御を行う前記（８）または（９）に記載の画像処理装置。
（１１） 前記制御部は、前記第２効果を表す画像を当該第２効果に係る線状領域に関連付けて前記複数種類の第２効果毎に前記表示部に表示させるための制御を行う前記（１０）に記載の画像処理装置。
（１２） 前記制御部は、前記ユーザ操作に応じた効果が与えられた前記画像を表示部に表示させる制御を行う前記（１）から（１１）のいずれかに記載の画像処理装置。
（１３） 前記制御部は、前記画像を記録するための記録指示操作が受け付けられた場合には当該記録指示操作に応じて記録される画像であって前記ユーザ操作に応じた効果が与えられた画像を表示部に表示させる制御を行う前記（１）から（１２）のいずれかに記載の画像処理装置。
（１４） 撮像部をさらに具備する前記（１）から（１３）のいずれかに記載の画像処理装置。
（１５） 操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
を具備する画像処理装置の制御方法。
（１６） 操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
をコンピュータに実行させるプログラム。
【符号の説明】
【０１４６】
１００ 撮像装置
１１０ レンズユニット
１１１ レンズ部
１１２ 絞り
１１３ レンズ駆動部
１１４ 絞り駆動部
１２０ 撮像部
１３０ 変換部
１４０ 画像処理部
１５０ 表示制御部
１６０ 表示部
１７０ 記録制御部
１８０ 記録媒体
１９０ 操作受付部
１９１ シャッターボタン
２００ 制御部
３００ 入出力パネル
【技術分野】
【０００１】
本技術は、画像処理装置に関する。詳しくは、画像を扱う画像処理装置およびその制御方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
【背景技術】
【０００２】
近年、人物等の被写体を撮像して画像を生成し、この生成された画像を画像コンテンツ（画像ファイル）として記録する画像処理装置（例えば、デジタルスチルカメラ等の撮像装置）が普及している。また、このように生成される画像について各種効果を加える技術が多数提案されている。
【０００３】
例えば、デジタルスチルカメラから取り込まれた画像のうち、ユーザ操作により設定された領域内については、シャープ化処理を行い、その領域外については、ぼけ化処理を行う画像データ処理装置が提案されている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１−１４４０２６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述の従来技術によれば、簡単な構成で望遠効果を実現することができる。
【０００６】
ここで、ユーザの好みは多種多様であるため、撮像装置により生成される画像のぼかし度合い等についても、ユーザの好みが多種多様であると想定される。そこで、例えば、ユーザの好みに応じた適切な処理を撮像動作中における比較的容易な操作により行うことができれば、ユーザ好みの画像を容易に生成することができると考えられる。
【０００７】
本技術はこのような状況に鑑みて生み出されたものであり、ユーザ好みの画像を容易に生成することを目的とする。
【課題を解決するための手段】
【０００８】
本技術は、上述の問題点を解消するためになされたものであり、その第１の側面は、画像に第１効果を与える第１処理部と、上記第１効果とは異なる効果であって複数種類の第２効果を上記画像に与える第２処理部と、操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には上記第１処理部による上記第１効果を当該ユーザ操作に応じて上記画像に与え、当該ユーザ操作が所定条件を満たさない場合には上記第２処理部による上記第２効果のうちの何れかの効果を当該ユーザ操作に応じて上記画像に与えるための制御を行う制御部とを具備する画像処理装置およびその制御方法ならびに当該方法をコンピュータに実行させるプログラムである。これにより、ユーザ操作が所定条件を満たす場合には、第１処理部による第１効果をそのユーザ操作に応じて画像に与え、そのユーザ操作が所定条件を満たさない場合には、第２処理部による第２効果のうちの何れかの効果をそのユーザ操作に応じて画像に与えるという作用をもたらす。
【０００９】
また、この第１の側面において、光学系をさらに具備し、上記制御部は、上記光学系を制御することより上記第１効果を上記画像に与えるようにしてもよい。これにより、光学系を制御することより第１効果を画像に与えるという作用をもたらす。
【００１０】
また、この第１の側面において、上記ユーザ操作により設定された処理が、上記光学系の制御により得られる処理の範囲の中であることを上記所定条件とするようにしてもよい。これにより、ユーザ操作により設定された処理が、光学系の制御により得られる処理の範囲の中である場合に所定条件を満たすと判定するという作用をもたらす。
【００１１】
また、この第１の側面において、上記第１効果を、上記光学系の制御から生じる光学ぼかし効果とし、上記第２効果を、デジタル画像処理によるデジタルぼかし効果とするようにしてもよい。これにより、光学系の制御から生じる光学ぼかし効果、または、デジタル画像処理によるデジタルぼかし効果を与えるという作用をもたらす。
【００１２】
また、この第１の側面において、上記第２処理部を、上記画像にデジタル画像処理を施すことにより上記複数種類の第２効果を与える画像処理部とするようにしてもよい。これにより、画像にデジタル画像処理を施すことにより複数種類の第２効果を与えるという作用をもたらす。
【００１３】
また、この第１の側面において、上記第２効果を、ぼかし効果とし、上記制御部は、上記ユーザ操作が上記所定条件を満たさない場合には、当該ユーザ操作に応じて上記画像処理部を制御することにより複数種類の上記ぼかし効果のうちの何れかのぼかし効果を当該ユーザ操作に応じて上記画像に与えるための制御を行うようにしてもよい。これにより、ユーザ操作が所定条件を満たさない場合には、そのユーザ操作に応じて画像処理部を制御することにより、複数種類のぼかし効果のうちの何れかのぼかし効果をそのユーザ操作に応じて画像に与えるという作用をもたらす。
【００１４】
また、この第１の側面において、上記制御部は、上記ユーザ操作を受け付けるための操作領域画像を表示部に表示させるための制御を行うようにしてもよい。これにより、ユーザ操作を受け付けるための操作領域画像を表示させるという作用をもたらす。
【００１５】
また、この第１の側面において、上記制御部は、上記第１処理部による上記第１効果を上記画像に与えるための上記ユーザ操作としてユーザによる接触操作を行うための第１操作範囲と、上記第２処理部による上記第２効果のうちの何れかの効果を上記画像に与えるための上記ユーザ操作としてユーザによる接触操作を行うための第２操作範囲とを含む一連の線状領域を上記操作領域画像として上記表示部に表示させるための制御を行うようにしてもよい。これにより、第１操作範囲および第２操作範囲を含む一連の線状領域を操作領域画像として表示させるという作用をもたらす。
【００１６】
また、この第１の側面において、上記制御部は、上記第１操作範囲における上記接触操作が行われた位置と上記第１操作範囲および上記第２操作範囲の境界との距離に応じて上記第１処理部による上記第１効果の高低を決定し、上記第２操作範囲における上記接触操作が行われた位置と上記境界との距離に応じて上記第２処理部による上記第２効果の高低を決定するように制御を行うようにしてもよい。これにより、第１操作範囲における接触操作が行われた位置と第１操作範囲および第２操作範囲の境界との距離に応じて第１処理部による第１効果の高低を決定し、第２操作範囲における接触操作が行われた位置とその境界との距離に応じて第２処理部による第２効果の高低を決定するという作用をもたらす。
【００１７】
また、この第１の側面において、上記制御部は、上記第１操作範囲および上記第２操作範囲の境界から分岐する複数の線状領域を上記第２操作範囲における上記複数種類の第２効果に対応する画像として上記表示部に表示させるための制御を行うようにしてもよい。これにより、第１操作範囲および第２操作範囲の境界から分岐する複数の線状領域を第２操作範囲における複数種類の第２効果に対応する画像として表示させるという作用をもたらす。
【００１８】
また、この第１の側面において、上記制御部は、上記第２効果を表す画像を当該第２効果に係る線状領域に関連付けて上記複数種類の第２効果毎に上記表示部に表示させるための制御を行うようにしてもよい。これにより、第２効果を表す画像を、その第２効果に係る線状領域に関連付けて、複数種類の第２効果毎に表示させるという作用をもたらす。
【００１９】
また、この第１の側面において、上記制御部は、上記ユーザ操作に応じた効果が与えられた上記画像を表示部に表示させる制御を行うようにしてもよい。これにより、ユーザ操作に応じた効果が与えられた画像を表示させるという作用をもたらす。
【００２０】
また、この第１の側面において、上記制御部は、上記画像を記録するための記録指示操作が受け付けられた場合には当該記録指示操作に応じて記録される画像であって上記ユーザ操作に応じた効果が与えられた画像を表示部に表示させる制御を行うようにしてもよい。これにより、記録指示操作が受け付けられた場合には、その記録指示操作に応じて記録される画像であってそのユーザ操作に応じた効果が与えられた画像を表示させるという作用をもたらす。
【００２１】
また、この第１の側面において、撮像部をさらに具備するようにしてもよい。これにより、撮像部により生成された画像について、ユーザ操作に応じた第１効果または第２効果を与えるという作用をもたらす。
【発明の効果】
【００２２】
本技術によれば、ユーザ好みの画像を容易に生成することができるという優れた効果を奏し得る。
【図面の簡単な説明】
【００２３】
【図１】本技術の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。
【図２】本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作およびその撮像動作により生成される画像の撮像範囲を簡略的に示す図である。
【図３】本技術の第１の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。
【図４】本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてぼかし処理を行うための操作領域画像の表示例を示す図である。
【図５】本技術の第１の実施の形態における撮像装置１００による画像記録処理の処理手順の一例を示すフローチャートである。
【図６】本技術の第２の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例（表示画面４００）を示す図である。
【図７】本技術の第３の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される表示画面例（操作領域画像設定画面５００）を示す図である。
【図８】本技術の第３の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。
【図９】本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例を示す図である。
【図１０】本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてズーム処理を行うための操作領域画像の表示例を示す図である。
【図１１】本技術の第４の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される操作領域画像６１０、６２０を示す図である。
【発明を実施するための形態】
【００２４】
以下、本技術を実施するための形態（以下、実施の形態と称する）について説明する。説明は以下の順序により行う。
１．第１の実施の形態（光学的なぼかし処理と複数種類の電子ぼかし処理とを行うためのユーザ操作を操作領域画像を用いて行う例）
２．第２の実施の形態（複数種類の電子ぼかし処理が施された画像を操作領域画像とともに表示する例）
３．第３の実施の形態（操作領域画像を用いて各種処理のユーザ操作を行う例）
４．第４の実施の形態（操作領域画像の表示態様の変形例）
【００２５】
＜１．第１の実施の形態＞
［撮像装置の構成例］
図１は、本技術の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。
【００２６】
撮像装置１００は、レンズユニット１１０と、撮像部１２０と、変換部１３０と、画像処理部１４０と、表示制御部１５０と、表示部１６０と、記録制御部１７０と、記録媒体１８０と、操作受付部１９０と、制御部２００とを備える。また、撮像装置１００は、例えば、被写体を撮像して画像（画像データ）を生成し、この生成された画像（画像データ）を画像コンテンツ（静止画コンテンツまたは動画コンテンツ）として記録するデジタルスチルカメラにより実現される。なお、撮像装置１００は、特許請求の範囲に記載の画像処理装置の一例である。
【００２７】
レンズユニット１１０は、レンズ部１１１と、絞り１１２と、レンズ駆動部１１３と、絞り駆動部１１４とを備える。
【００２８】
レンズ部１１１は、被写体からの入射光を集光するレンズ群であり、これらのレンズ群により集光された光が絞り１１２を介して撮像部１２０に入射される。なお、レンズ部１１１は、焦点を合わせるためのフォーカスレンズや被写体を拡大するためのズームレンズ等により構成されるが、これらの具体的な配置構成等については、図示および説明を省略する。また、レンズ部１１１を構成する各レンズは、レンズ駆動部１１３により駆動され、被写体に対して前後に移動する。これにより、フォーカス機能およびズーム機能が実現される。
【００２９】
絞り１１２は、レンズ部１１１を通過する入射光の光量を調整するものであり、その調整後の光が撮像部１２０に入射される。すなわち、絞り１１２により、レンズ部１１１を通過する入射光の光量が調整され、撮像部１２０に供給される光量（すなわち、露出）が決定される。また、絞り１１２は、絞り駆動部１１４により駆動され、絞りの開度が調節される。
【００３０】
レンズ駆動部１１３は、制御部２００の指示に基づいて、レンズ部１１１を構成する各レンズを駆動させるものである。また、レンズ駆動部１１３は、レンズ部１１１を構成する各レンズの位置を取得し、制御部２００に出力する。
【００３１】
絞り駆動部１１４は、制御部２００の指示に基づいて、絞り１１２を駆動させるものである。また、絞り駆動部１１４は、絞り１１２の状態（開閉の状態）を取得し、制御部２００に出力する。
【００３２】
このように、絞り駆動部１１４は、光を集光して撮像部１２０に供給する光学系（レンズユニット１１０）を構成する絞り１１２の開閉を制御することにより、撮像部１２０により生成される画像にぼかし効果（第１効果）を与える。なお、レンズユニット１１０（絞り駆動部１１４）は、特許請求の範囲に記載の第１処理部の一例である。
【００３３】
なお、レンズユニット１１０については、交換レンズユニットとするようにしてもよい。この場合には、レンズユニット１１０は、レンズマウント（図示せず）を介して撮像装置１００に取り付けられる。また、レンズユニット１１０を制御する制御部２００を、ぼかし効果（第１効果）を与える処理部（第１処理部）としても把握することができる。
【００３４】
ここで、被写界深度について説明する。被写界深度は、被写体に対して、実質的にフォーカスが合っていると考えられる被写体距離の範囲を示すものである。一般に、この範囲が広い場合には「被写界深度が深い」と称し、この範囲が狭い場合には「被写界深度が浅い」と称する。また、被写界深度は、絞りの開閉に応じて、変化することが広く知られている。例えば、絞りを開くと、この開きの度合いに応じて被写界深度が浅くなる。すなわち、Ｆ値を小さくすると、被写界深度が浅くなる。一方、絞りを閉じると、この絞りの度合いに応じて被写界深度が深くなる。すなわち、Ｆ値を大きくすると、被写界深度が深くなる。
【００３５】
例えば、絞りの開口の直径を直径Ｈ１とする場合に、被写体に対して実質的にフォーカスが合うフォーカスレンズの範囲を合焦範囲Ｗ１とする。この場合（絞りの開口が直径Ｈ１である場合）において、合焦範囲Ｗ１内にフォーカスレンズが存在する場合には、被写体に対して実質的にフォーカスが合うことになる。このため、撮像装置１００の光軸方向に対して多少前後している被写体に対しても、比較的広い範囲（光軸方向における範囲）の被写体にフォーカスが合うことになる。
【００３６】
また、例えば、絞りの開口の直径を直径Ｈ２（Ｈ２＜Ｈ１）とする場合に、被写体に対して実質的にフォーカスが合うフォーカスレンズの範囲を合焦範囲Ｗ２（Ｗ２＜Ｗ１）とする。この場合（絞りの開口が直径Ｈ２である場合）には、合焦範囲Ｗ１よりも狭い合焦範囲Ｗ２内にフォーカスレンズが存在しないと、被写体に対して実質的にフォーカスが合わない。このため、撮像範囲に含まれる被写体が撮像装置１００の光軸方向に対して多少前後している場合には、これらの被写体にフォーカスが合わないことがある。すなわち、撮像装置１００の光軸方向に対して多少前後している被写体に対しては、比較的狭い範囲の被写体にのみフォーカスが合うことになる。
【００３７】
そこで、本技術の第１の実施の形態では、上述した被写界深度の性質を用いて、主要被写体の背景をぼかした画像を生成する例を示す。具体的には、ユーザ操作に基づいて絞り１１２を開放して、ユーザの好みに合うように、背景をぼかした画像を生成する。しかしながら、レンズの性能によっては、Ｆ値が小さすぎる場合にはそれ以上「ぼかす」ことができないこともある。例えば、交換レンズを用いる場合には、絞りの開放に限界があるズームレンズを備える交換レンズも存在する。このため、絞り１１２の開放のみでは、ユーザ好みのぼかし処理を施すことができないことも想定される。そこで、本技術の第１の実施の形態では、レンズユニット１１０による光学処理とともに画像処理部１４０によるデジタル画像処理によりぼかし処理を行う。
【００３８】
撮像部１２０は、制御部２００の指示に基づいて、画像信号（アナログ信号）を生成するものであり、生成された画像信号を変換部１３０に出力する。具体的には、撮像部１２０は、レンズユニット１１０を介して入射された被写体の光を電気信号に変換する撮像素子（図示せず）と、この撮像素子の出力信号（アナログ信号）を処理するアナログ信号処理部（図示せず）とを備える。すなわち、撮像部１２０において、レンズユニット１１０を介して入射された被写体の光学像が撮像素子の撮像面に結像され、この状態で撮像素子が撮像動作を行うことにより、アナログ信号が生成される。そして、アナログ信号処理部がそのアナログ信号に対して、ノイズ除去や増幅等のアナログ処理を行うことにより画像信号が生成される。そして、生成された画像信号（アナログ信号）が変換部１３０に出力される。なお、撮像素子として、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いることができる。
【００３９】
また、これらの撮像素子として、例えば、射出瞳が異なる部分を透過した透過光を受光することにより、位相差検出方式の焦点検出（位相差ＡＦ（Auto Focus））を行う撮像素子を用いることができる。この位相差ＡＦを行う撮像素子からは、画像信号（アナログ信号）とともに、位相差検出信号が出力される。このため、画像処理部１４０は、撮像部１２０から出力された位相差検出信号に基づいて、撮像部１２０から出力された画像信号に対応する画像における各領域の被写体距離を算出することができる。なお、被写体距離は、撮像装置１００から被写体までの距離である。
【００４０】
変換部１３０は、撮像部１２０から出力された画像信号（アナログ信号）をデジタル信号に変換するものであり、この変換により生成されたデジタル信号を画像処理部１４０に出力する。
【００４１】
画像処理部１４０は、制御部２００の指示に基づいて、変換部１３０から出力された画像信号（デジタル信号）について各種画像処理を施すものであり、各種画像処理が施された画像信号（画像データ）を表示制御部１５０および記録制御部１７０に出力する。
【００４２】
また、画像処理部１４０は、ぼかしフィルタを用いた画像処理により、変換部１３０から出力された画像信号（デジタル信号）に対応する画像（撮像部１２０により生成された画像）について、電子ぼかし処理を行う。例えば、画像処理部１４０は、撮像部１２０により生成された画像における複数の領域毎に、異なるレベルの電子ぼかしを施すことができる。また、画像処理部１４０は、撮像部１２０により生成された画像における各領域について、その領域に係る被写体距離に応じて異なるレベルの電子ぼかしを施すことができる。なお、各領域に係る被写体距離は、上述したように、撮像部１２０から出力された位相差検出信号に基づいて算出される値を用いることができる。
【００４３】
また、撮像部１２０により生成された画像およびこの画像の生成時における各情報（例えば、レンズの位置および合焦位置）に基づいて、その画像に関する被写体距離を算出するようにしてもよい。例えば、奥行マップ（いわゆる、デプスマップ（Depth Map））を生成し、この奥行マップに基づいて各領域に係る被写体距離を求めることができる。ここで、奥行マップは、被写体距離を表すデータにより構成されるマップである。この奥行マップの生成方法として、例えば、ＴＯＦ（Time of flight）方式やボケ量解析（Depth from Defocus）等の方法を用いることができる。例えば、ＴＯＦ方式は、光源から出射された光が対象物で反射し、センサに到達するまでの光の遅れ時間と光の速度とに基づいて被写体までの距離を算出する方法である。
【００４４】
また、ぼかしフィルタとして、例えば、平滑化フィルタやガウシアンフィルタ（次の式１）を用いることができる。ガウシアンフィルタのフィルタのサイズは、例えば、２０×２０画素とすることができる。
ｆ（ｘ，ｙ）＝（１／２πσ２）ｅｘｐ｛−（ｘ２＋ｙ２）／２σ２｝ …式１
【００４５】
ここで、ｘ、ｙは、画像における画素の座標位置を示す。また、σは、フィルタ係数を示す。このフィルタ係数σ（＞０）として、例えば、撮像部１２０により生成された画像における各領域に係る被写体距離に応じた値を用いることができる。例えば、各領域に係る被写体距離が長くなるに応じて、フィルタ係数σを高くすることができる。なお、この被写体距離に応じた値（フィルタ係数σ）は、予め設定しておくものとする。
【００４６】
また、画像処理部１４０は、撮像部１２０により生成された画像に含まれる人物の顔を検出し、検出された顔を含む領域と、これ以外の領域とに分類して、ぼかし処理を行うことができる。なお、顔検出方法として、例えば、顔の輝度分布情報が記録されているテンプレートと実画像とのマッチングによる顔検出方法、画像データに含まれる肌色の部分や人間の顔の特徴量等に基づいた顔検出方法等を用いることができる。
【００４７】
このように、画像処理部１４０は、撮像部１２０により生成された画像にデジタル画像処理を施すことにより複数種類のぼかし効果（第２効果（第１効果とは異なる効果））を与える。なお、画像処理部１４０は、特許請求の範囲に記載の第２処理部の一例である。
【００４８】
表示制御部１５０は、制御部２００の指示に基づいて、画像処理部１４０から出力された画像を表示部１６０に表示させるものである。例えば、表示制御部１５０は、撮像動作を行う際における各種設定を行うための設定画面（例えば、図７に示す操作領域画像設定画面５００）や、撮像部１２０により生成された画像（いわゆる、スルー画像、ライブビュー画像）を表示部１６０に表示させる。また、例えば、表示制御部１５０は、ユーザが操作入力を行うための操作領域画像（例えば、図４に示す操作領域画像３３０）を表示部１６０に表示させる。
【００４９】
表示部１６０は、表示制御部１５０の制御に基づいて各画像を表示する表示パネル（例えば、液晶ファインダー）である。表示部１６０として、例えば、ＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro Luminescence）パネル等の表示パネルを用いることができる。
【００５０】
記録制御部１７０は、制御部２００の指示に基づいて、記録媒体１８０に対する記録制御を行うものである。例えば、記録制御部１７０は、画像処理部１４０から出力された画像（画像データ）を静止画コンテンツ（静止画ファイル）として記録媒体１８０に記録させる。
【００５１】
記録媒体１８０は、記録制御部１７０の制御に基づいて、各種情報（静止画コンテンツや動画コンテンツ）を記憶する記録媒体である。なお、記録媒体１８０は、撮像装置１００に内蔵するようにしてもよく、撮像装置１００から着脱可能とするようにしてもよい。また、記録媒体１８０として、半導体メモリ、光記録媒体、磁気ディスク、ＨＤＤ（Hard Disk Drive）等の種々の記録媒体を用いることができる。
【００５２】
操作受付部１９０は、ユーザにより行われた操作を受け付ける操作受付部であり、受け付けられた操作内容に応じた制御信号（操作信号）を制御部２００に出力する。操作受付部１９０は、図４等に示すシャッターボタン１９１、入出力パネル３００に対応する。
【００５３】
制御部２００は、メモリ（図示せず）に格納されている制御プログラムに基づいて撮像装置１００における各部を制御するものである。制御部２００は、例えば、マイクロプロセッサにより構成される。
【００５４】
例えば、制御部２００は、ユーザ操作を受け付けるための操作領域画像３３０（図４に示す）を表示部１６０に表示させるための制御を行う。
【００５５】
また、例えば、制御部２００は、操作受付部１９０により受け付けられたユーザ操作（例えば、図４に示す操作領域画像３３０における接触操作）が所定条件を満たすか否かを判定する。ここで、ユーザ操作が所定条件を満たす場合は、例えば、図４（ｂ）に示す操作領域画像３３０における光学処理範囲３３２の接触操作が行われた場合である。すなわち、制御部２００は、ユーザ操作により設定された処理（例えば、ぼかし処理）が、光学系（レンズユニット１１０）の制御により得られる処理の範囲の中であることを、所定条件とすることができる。例えば、制御部２００は、撮像部１２０により生成される画像に、絞り１１２の開閉により、ぼかし効果を与えることができる操作内容がユーザ操作として受け付けられた場合には、所定条件を満たすと判定する。
【００５６】
そして、制御部２００は、そのユーザ操作が所定条件を満たす場合には、そのユーザ操作に応じた絞り１１２の開閉によるぼかし効果（第１効果）を画像（撮像部１２０により生成される画像）に与えるための制御を行う。すなわち、制御部２００による光学系（レンズユニット１１０）の制御（例えば、絞り１１２の開閉）により、ぼかし効果（第１効果）が、撮像部１２０により生成される画像に与えられる。また、制御部２００は、そのユーザ操作が所定条件を満たさない場合には、画像処理部１４０によるぼかし効果（第２効果）のうちの何れかの効果をそのユーザ操作に応じて画像（撮像部１２０により生成される画像）に与えるための制御を行う。このように、そのユーザ操作が所定条件を満たすか否かに応じて、光学系（レンズユニット１１０）の制御から生じる光学ぼかし効果（第１効果）、または、デジタル画像処理によるデジタルぼかし効果（第２効果）が与えられる。
【００５７】
［撮像動作例および撮像範囲例］
図２は、本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作およびその撮像動作により生成される画像の撮像範囲を簡略的に示す図である。
【００５８】
図２（ａ）には、撮像装置１００を用いて行われる撮像動作状態をその側面から見た場合を示す。具体的には、人物７０１、木７０２、家７０３、ビル群７０４を被写体として撮像装置１００を用いて撮像動作が行われている状態を示す。この場合に、人物７０１は、撮像装置１００からの距離（被写体距離）がＬ１（ｍ）の範囲内に存在し、木７０２は、被写体距離がＬ１（ｍ）〜Ｌ２（ｍ）の範囲内に存在するものとする。また、家７０３は、被写体距離がＬ２（ｍ）〜Ｌ３（ｍ）の範囲内に存在し、ビル群７０４は、被写体距離がＬ３（ｍ）を超える範囲に存在するものとする。また、本技術の第１の実施の形態では、人物７０１が主要被写体である場合を想定する。ここで、例えば、画像処理部１４０により人物の顔が検出された場合には、その顔を主要被写体とすることができる。また、例えば、ユーザ操作（例えば、図４等に示す入出力パネル３００におけるタッチ操作）により指定された被写体を主要被写体とすることができる、
【００５９】
図２（ｂ）には、撮像装置１００を用いて行われる撮像動作により生成される画像の撮像範囲７００（水平方向および垂直方向の撮像範囲）を示す。具体的には、図２（ａ）に示す状態で、撮像部１２０により生成される画像の撮像範囲７００を示す。
【００６０】
図２（ｂ）に示すように、人物７０１を主要被写体として、人物７０１とその背景（木７０２、家７０３、ビル群７０４）とを被写体とする画像を生成することができる。この場合に、例えば、主要被写体である人物７０１のみを鮮明にし、その背景（木７０２、家７０３、ビル群７０４）をぼかした画像を好むユーザも想定される。
【００６１】
そこで、上述したように、被写界深度を浅くすることにより、主要被写体の背景をぼかすことができる。また、被写界深度を調整することにより、ユーザ好みにぼかした画像を生成することができる。このように、ぼかした画像の生成例を図３に示す。
【００６２】
［画像の生成例］
図３は、本技術の第１の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。図３（ａ）乃至（ｂ）には、図２（ａ）に示す状態で撮像動作を行っている場合において、絞り１１２の調整後に生成される画像の一例を示す。
【００６３】
図３（ａ）には、人物７０１に合焦している状態で絞り１１２を最も開放した場合に生成される画像７１１を示す。このように、絞り１１２を最も開放した場合には、合焦範囲が狭くなる。このため、合焦している被写体（人物７０１）から少しだけ離れている被写体（木７０２）についてもフォーカスが合わない。同様に、合焦している被写体（人物７０１）から比較的離れている被写体（家７０３）と、合焦している被写体（人物７０１）から最も離れている被写体（ビル群７０４）とについてもフォーカスが合わない。このため、木７０２、家７０３、ビル群７０４のそれぞれがぼかされた画像７１１が生成される。
【００６４】
図３（ｂ）には、人物７０１に合焦している状態で絞り１１２を一定量（図３（ａ）よりも閉じた量）だけ開放した場合に生成される画像７１２を示す。このように、絞り１１２を図３（ａ）よりも閉じた場合には、合焦範囲が図３（ａ）に示す合焦範囲よりも広くなる。このため、合焦している被写体（人物７０１）から少しだけ離れている被写体（木７０２）についてはフォーカスが合うが、合焦している被写体（人物７０１）から比較的離れている被写体（家７０３）についてはフォーカスが合わない。同様に、合焦している被写体（人物７０１）から最も離れている被写体（ビル群７０４）についてもフォーカスが合わない。このため、家７０３、ビル群７０４のそれぞれがぼかされた画像７１２が生成される。
【００６５】
図３（ｃ）には、人物７０１に合焦している状態で絞り１１２を一定量（図３（ｂ）よりも閉じた量）だけ開放した場合に生成される画像７１３を示す。このように、絞り１１２を図３（ｂ）よりも閉じた場合には、合焦範囲が図３（ｂ）に示す合焦範囲よりも広くなる。このため、合焦している被写体（人物７０１）から少しだけ離れている被写体（木７０２）と、合焦している被写体（人物７０１）から比較的離れている被写体（家７０３）とについてはフォーカスが合う。しかしながら、合焦している被写体（人物７０１）から最も離れている被写体（ビル群７０４）についてはフォーカスが合わない。このため、ビル群７０４がぼかされた画像７１３が生成される。
【００６６】
このように、ユーザ操作に基づいて絞り１１２を調整することにより、ユーザ好みのぼかしを施すことができる。しかしながら、上述したように、レンズの性能によっては、Ｆ値が小さすぎる場合にはそれ以上「ぼかす」ことができないこともあり、絞り１１２の調整のみでは、ユーザ好みのぼかしを施すことができないことも想定される。そこで、本技術の第１の実施の形態では、レンズユニット１１０による光学処理とともに画像処理部１４０による画像処理によりぼかし処理を行う。このぼかし処理を行うための操作領域画像の表示例を図４に示す。
【００６７】
［ぼかし処理を行うための操作領域画像の表示例］
図４は、本技術の第１の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてぼかし処理を行うための操作領域画像の表示例を示す図である。なお、図４では、表示部１６０および操作受付部１９０を一体で構成する入出力パネル３００が、撮像装置１００の背面（すなわち、被写体に向けられるレンズが設けられている面の反対側の面）側に設けられている例を示す。すなわち、入出力パネル３００は、各種画像を表示するとともに、表示面に近接または接触する物体の検出状態に基づいてユーザからの操作入力を受け付けるものである。なお、入出力パネル３００は、タッチスクリーンまたはタッチパネルとも称される。また、入出力パネル３００として、例えば、導電性を有する物体（例えば、人物の指）の接触または近接を、静電容量の変化に基づいて検出する静電式（静電容量方式）のタッチパネルを用いることができる。
【００６８】
図４（ａ）には、入出力パネル３００に表示される表示画面例（表示画面３１０）を示す。表示画面３１０には、撮像画像表示領域３１１と、操作領域画像表示領域３２０とが設けられている。
【００６９】
撮像画像表示領域３１１は、撮像部１２０により生成された画像（いわゆる、スルー画像）を表示する領域である。すなわち、絞り１１２の調整後に生成された画像が撮像画像表示領域３１１に表示される。
【００７０】
操作領域画像表示領域３２０は、撮像部１２０により生成される画像について、画像効果（ぼかし効果）を施す場合に、その度合いを操作するための操作領域画像３３０を表示する領域である。ユーザは、操作領域画像３３０上において操作標識３３１を移動させることにより、所望のぼかし処理を行うための設定をすることができる。なお、操作領域画像３３０については、図４（ｂ）に拡大して示す。
【００７１】
なお、入出力パネル３００には、他の画像（例えば、各種アイコン（例えば、撮像モードを表すアイコン））等が表示されるが、これらについては、図示および説明を省略する。
【００７２】
図４（ｂ）には、操作領域画像表示領域３２０に表示される操作領域画像３３０を示す。操作領域画像３３０は、操作標識３３１を移動させることにより、撮像部１２０により生成される画像に対するぼかし処理の設定を行うための操作領域画像であり、その操作範囲が、光学処理範囲３３２および画像処理範囲３３３に分類されている。
【００７３】
ここで、操作標識３３１は、入出力パネル３００におけるユーザのタッチ操作やなぞる操作により移動させることができる。例えば、操作領域画像３３０における操作標識３３１の表示部分を指で触れた状態で、操作領域画像３３０における所望の位置にその指をユーザが移動させることにより操作標識３３１の移動操作を行うことができる。また、操作領域画像３３０における所望の位置に指を触れる操作（タッチ操作）をユーザが行うことにより、その指が触れた位置に操作標識３３１を移動させることができる。また、ユーザのタッチ操作やなぞる操作以外に、例えば、撮像装置１００に設けられている操作部材（例えば、操作ボタン）等を用いて、操作標識３３１の移動操作を行うようにしてもよい。
【００７４】
光学処理範囲３３２は、レンズユニット１１０における絞り１１２を調整（すなわち、Ｆ値の調整）するための範囲である。すなわち、光学処理範囲３３２は、レンズユニット１１０によるぼかし効果（第１効果）を画像に与えるためのユーザ操作としてユーザによる接触操作を行うための第１操作範囲である。なお、接触操作は、入出力パネル３００においてユーザが指を接触させることによる操作と、入出力パネル３００においてユーザが指を近接させることによる操作とを含むものとする。また、光学処理範囲３３２における操作標識３３１の移動に応じて絞り１１２が調整される。具体的には、光学処理範囲３３２の端部３３５（すなわち、操作領域画像３３０の上端部）に操作標識３３１が移動された場合には、絞り１１２が最も閉じられる。この場合には、例えば、画像全体に鮮鋭度がある画像（すなわち、背景等もくっきりとした画像）が撮像部１２０により生成される。一方、光学処理範囲３３２の他の端部３３６（すなわち、画像処理範囲３３３との境界部分）に操作標識３３１が移動された場合には、絞り１１２が最も開放される。この場合には、例えば、主要被写体以外の被写体（例えば、背景の被写体）が比較的ぼかされた画像が撮像部１２０により生成される。すなわち、画像処理範囲３３３との境界部分は、光学的にＦ値を下げることができる境界を意味する。また、絞り１１２を閉じる設定がされた場合には、絞り１１２の開閉の度合いに応じて、シャッタースピードを短くする等の設定が適宜行われるものとする。
【００７５】
画像処理範囲３３３は、画像処理部１４０による画像処理の度合いを調整するための範囲である。すなわち、画像処理範囲３３３は、画像処理部１４０によるぼかし効果（第２効果）のうちの何れかの効果を画像に与えるためのユーザ操作としてユーザによる接触操作を行うための第２操作範囲である。また、画像処理範囲３３３における操作標識３３１の移動に応じて画像処理部１４０によるぼかし処理の度合いが調整される。
【００７６】
ここで、画像処理範囲３３３は、光学処理範囲３３２との境界部分から分岐されている３つの範囲により構成されている（すなわち、光学処理範囲３３２との境界部分から分岐されている３つの枝により構成されている）。また、画像処理範囲３３３を操作標識３３１が移動する場合（画像処理範囲３３３に操作標識３３１が存在する場合）には、絞り１１２は最も開放された状態に維持される。そして、画像処理範囲３３３における操作標識３３１の移動に応じて画像処理部１４０によるぼかし処理の度合いのみが変更される。
【００７７】
具体的には、画像処理範囲３３３の端部３３６に操作標識３３１が移動された場合は、光学処理範囲３３２の端部３３６に操作標識３３１を移動させた場合と同様となる。すなわち、絞り１１２が最も開放された状態の画像が撮像部１２０により生成される。この場合における画像処理部１４０によるぼかし処理の度合いは、最も小さい設定がされる。
【００７８】
また、画像処理範囲３３３の他の端部（ぼかす１、ぼかす２、ぼかす３）に操作標識３３１が移動された場合には、移動先に応じたぼかし処理の度合いとして最も大きい設定がされる。例えば、ぼかしフィルタとして、ガウシアンフィルタを用いる場合には、フィルタ係数σとして、最も高い値が設定される。
【００７９】
すなわち、制御部２００は、光学処理範囲３３２および画像処理範囲３３３の境界から分岐する複数の線状領域を、画像処理範囲３３３における複数種類のぼかし効果（第２効果）に対応する画像として表示部１６０に表示させるための制御を行う。
【００８０】
ここで、図４では、ぼかし１乃至３については、被写体距離に応じてぼかし処理の度合いを調整する例を示す。例えば、ぼかし１は、合焦している被写体（注目被写体）以外の被写体をぼかす調整を行うための範囲であるものとする。また、ぼかし２は、合焦している被写体（注目被写体）以外の被写体のうち、注目被写体から比較的遠い被写体をぼかす調整を行うための範囲であるものとする。また、ぼかし３は、合焦している被写体（注目被写体）以外の被写体のうち、注目被写体からさらに遠い被写体（ぼかし２よりも遠い被写体）のみをぼかす調整を行うための範囲であるものとする。
【００８１】
例えば、図２（ａ）に示す撮像動作中において、ぼかし１に操作標識３３１が移動された場合には、被写体距離がＬ１（ｍ）を超える範囲に存在する被写体をぼかす調整が行われる。この場合には、例えば、図３（ａ）に示す画像７１１のような画像が生成される。
【００８２】
また、ぼかし２に操作標識３３１が移動された場合には、被写体距離がＬ２（ｍ）を超える範囲に存在する被写体をぼかす調整が行われる。この場合には、例えば、図３（ｂ）に示す画像７１２のような画像が生成される。
【００８３】
また、ぼかし３に操作標識３３１が移動された場合には、被写体距離がＬ３（ｍ）を超える範囲に存在する被写体をぼかす調整が行われる。この場合には、例えば、図３（ｃ）に示す画像７１３のような画像が生成される。
【００８４】
このように、画像に含まれる被写体の被写体距離に応じてぼかし処理を行う場合には、撮像部１２０から出力された位相差検出信号に基づいて算出される被写体距離（画像における各領域の被写体距離）を用いる。すなわち、画像処理部１４０は、画像における各領域の被写体距離を算出し、この算出された被写体距離に基づいて、操作標識３３１が存在するぼかし１乃至３に応じて調整対象となる領域（画像における領域）を特定する。そして、画像処理部１４０は、その特定された領域（画像における領域）について、ぼかし１乃至３における位置（長手方向における位置）に応じた度合いのぼかし処理を行う。このように、画像処理部１４０は、複数種類の第２効果（ぼかし効果）として、被写体距離に応じて、画像に含まれる被写体をぼかす効果を、画像における領域毎に施す。
【００８５】
このように、制御部２００は、光学処理範囲３３２および画像処理範囲３３３を含む一連の線状領域を、操作領域画像３３０として表示部１６０に表示させるための制御を行う。また、制御部２００は、光学処理範囲３３２における接触操作が行われた位置と、光学処理範囲３３２および画像処理範囲３３３の境界との距離に応じてレンズユニット１１０によるぼかし効果（第１効果）の高低を決定する。また、制御部２００は、画像処理範囲３３３における接触操作が行われた位置と、光学処理範囲３３２および画像処理範囲３３３の境界との距離に応じて画像処理部１４０によるぼかし効果（第２効果）の高低を決定する。
【００８６】
このように、同一ライン上において、光学処理範囲３３２と画像処理範囲３３３の１つの枝とを配置し、これらの境界から画像処理範囲３３３の複数の枝を分岐して配置する。このような表示態様とすることにより、関連する画像処理（電子ぼかし処理）を行うための枝（画像処理範囲３３３）が近接しているため、ユーザは関連する画像処理（電子ぼかし処理）の調整を容易に行うことができる。また、操作領域画像３３０を、複数の画像処理の効果から１つの画像処理の効果のみを選択することができる表示態様とすることにより、１つの画像処理効果とその処理の度合いとのユーザ操作を容易に行うことができる。
【００８７】
また、スルー画像とともに、操作領域画像３３０が表示されるため、記録対象となる画像が、画像処理部１４０によるデジタル画像処理による擬似画像であることをユーザが容易に把握することができる。
【００８８】
なお、撮像画像表示領域３１１には、絞り１１２によるぼかし処理が施された画像が表示される（すなわち、画像処理部１４０によるぼかし処理が施された画像は表示されない）。ただし、例えば、特定操作（例えば、操作標識３３１の長押し操作）が行われた場合には、画像処理部１４０によるぼかし処理が施された画像を撮像画像表示領域３１１に表示するようにしてもよい。すなわち、制御部２００は、ユーザ操作に応じた効果（ぼかし効果）が与えられた画像を表示部１６０に表示させる制御を行う。これにより、例えば、ユーザがシャッターボタン１９１の全押しを行う前に、特定操作に応じたぼかし処理が施された画像をユーザに見せることができる。
【００８９】
また、例えば、操作領域画像３３０におけるユーザ操作に応じた効果が与えられた画像を、プレビュー画像として表示部１６０に表示させるようにしてもよい。なお、プレビュー画像は、例えば、静止画の記録指示操作が受け付けられた場合におけるその記録対象となる画像であり、その記録指示操作に係る記録処理中およびその直後に一定期間表示される画像である。すなわち、制御部２００は、静止画の記録指示操作が受け付けられた場合には、その記録指示操作に応じて記録される画像（プレビュー画像）として、操作領域画像３３０におけるユーザ操作に応じた効果が与えられた画像を表示部１６０に表示させる制御を行う。
【００９０】
［撮像装置の動作例］
次に、本技術の第１の実施の形態における撮像装置１００の動作について図面を参照して説明する。
【００９１】
［撮像装置の動作例］
図５は、本技術の第１の実施の形態における撮像装置１００による画像記録処理の処理手順の一例を示すフローチャートである。
【００９２】
最初に、制御部２００は、撮像モードが設定されたか否かを判断し（ステップＳ９０１）、撮像モードが設定されていない場合には、監視を継続して行う。また、撮像モードが設定された場合には（ステップＳ９０１）、撮像部１２０が、制御部２００の指示に基づいて、撮像処理により画像を生成する（ステップＳ９０２）。
【００９３】
続いて、画像処理部１４０が、制御部２００の指示に基づいて、撮像部１２０により生成されて変換部１３０により変換された画像について画像処理（例えば、ぼかし処理）を行う（ステップＳ９０３）。この画像処理の内容は、図４に示す操作領域画像３３０における操作標識３３１の位置に応じて決定される。
【００９４】
続いて、表示制御部１５０が、制御部２００の指示に基づいて、画像処理部１４０により画像処理が施された画像を操作領域画像３３０とともに表示部１６０に表示させる（ステップＳ９０４）。例えば、図４（ａ）に示す表示画面３１０が表示部１６０に表示される。
【００９５】
続いて、制御部２００は、操作領域画像３３０における操作標識３３１の操作（例えば、移動操作）が行われたか否かを判断し（ステップＳ９０５）、操作領域画像３３０における操作標識３３１の操作が行われていない場合には、ステップＳ９０９に進む。一方、操作領域画像３３０における操作標識３３１の操作が行われた場合には（ステップＳ９０５）、制御部２００は、その操作による移動後の操作標識３３１の位置が操作領域画像３３０における光学処理範囲３３２内であるか否かを判断する（ステップＳ９０６）。なお、ステップＳ９０５、Ｓ９０６は、特許請求の範囲に記載の判定手順の一例である。
【００９６】
その操作による移動後の操作標識３３１の位置が光学処理範囲３３２内である場合には（ステップＳ９０６）、制御部２００は、光学処理範囲３３２における操作標識３３１の位置に基づいてレンズユニット１１０を制御する（ステップＳ９０７）。すなわち、光学処理範囲３３２における操作標識３３１の位置に応じて絞り１１２が調整される。なお、ステップＳ９０７は、特許請求の範囲に記載の第１制御手順の一例である。
【００９７】
また、その移動後の操作標識３３１の位置が光学処理範囲３３２内でない場合には（ステップＳ９０６）、制御部２００は、画像処理範囲３３３における操作標識３３１の位置に基づいて画像処理部１４０を制御する（ステップＳ９０８）。すなわち、画像処理範囲３３３において操作標識３３１が存在する枝に応じて、ぼかし処理の対象となる領域が決定される。また、その枝における操作標識３３１の位置（長手方向における位置）に応じてぼかし度合いが決定される。そして、制御部２００は、これらの決定内容を画像処理部１４０に通知する。これにより、画像処理部１４０が、撮像部１２０により生成されて変換部１３０により変換された画像について画像処理を行う（ステップＳ９０３）。なお、ステップＳ９０８は、特許請求の範囲に記載の第２制御手順の一例である。
【００９８】
続いて、制御部２００は、静止画の記録指示操作が行われたか否かを判断し（ステップＳ９０９）、静止画の記録指示操作が行われていない場合には、ステップＳ９１１に進む。例えば、静止画の記録指示操作は、シャッターボタン１９１（図４（ａ）等に示す）の全押し操作である。また、静止画の記録指示操作が行われた場合には（ステップＳ９０９）、記録制御部１７０が、制御部２００の指示に基づいて、画像処理部１４０により画像処理が施された画像を記録媒体１８０に記録させる記録処理を行う（ステップＳ９１０）。この場合に、画像処理部１４０によりぼかし処理が施された画像と、画像処理部１４０によりぼかし処理が施されていない画像とを、関連付けて記録媒体１８０に記録させるようにしてもよい。これにより、デジタル画像処理によるぼかし処理が施された画像と、デジタル画像処理によるぼかし処理が施されていない画像とを、ユーザが比較して見ることができる。
【００９９】
また、制御部２００は、撮像モードの終了操作が行われたか否かを判断し（ステップＳ９１１）、撮像モードの終了操作が行われていない場合には、ステップＳ９０２に戻る。また、撮像モードの終了操作が行われた場合には（ステップＳ９１１）、画像記録処理の動作を終了する。
【０１００】
なお、この例では、撮像モードが設定されている場合に操作領域画像３３０を表示する例を示すが、撮像モードのうちの特定モード（例えば、背景ぼかしモード）が設定されている場合にのみ操作領域画像３３０を表示するようにしてもよい。
【０１０１】
また、この例では、撮像動作中において操作領域画像３３０を常に表示する例を示すが、操作領域画像３３０を表示させるか否か（操作領域画像３３０のオン／オフ）を、ユーザ操作に応じて容易に切り換えることができるようにしてもよい。
【０１０２】
このように、本技術の第１の実施の形態によれば、レンズユニット１１０による光学処理と、画像処理部１４０によるデジタル画像処理とを同一線上で行えるユーザインターフェースを提供することができる。すなわち、絞り１１２を開放してその分のシャッタースピードを短くする等のレンズ性能を利用した背景ぼかしの操作と、デジタル画像処理技術を利用したぼかしの操作とを１つのインターフェースで行うことができる。これにより、ズームレンズのようにレンズの開放に制限があるような場合でも、レンズ性能以上のぼかし画像（例えば、おもいっきりぼかした画像）を生成することができる。このように、レンズユニット１１０では再現することができない背景ぼかしをデジタル画像処理により行うことができるため、レンズユニット１１０のレンズ性能を仮想的に延長させることができる。
【０１０３】
また、複数の背景ぼかしの処理方法を、操作領域画像３３０として表示してユーザに選択させることができる。また、それらの処理結果についても、入出力パネル３００においてユーザが容易に把握することができる。このため、例えば、撮像装置１００の扱いに不慣れな初心者でもあっても、好みのぼかし具合となる画像を容易に生成することができる。すなわち、ユーザ好みの画像を容易に生成することができる。
【０１０４】
＜２．第２の実施の形態＞
本技術の第１の実施の形態では、撮像動作時において操作領域画像（例えば、図４に示す操作領域画像３３０）を表示する例を示した。ここで、操作領域画像の画像処理範囲における各枝の先端に対応する画像処理が施された画像を、ユーザが枝毎に容易に把握することができれば、ユーザ好みの画像をさらに容易に生成することができると考えられる。
【０１０５】
そこで、本技術の第２の実施の形態では、操作領域画像の画像処理範囲における各枝の先端に対応する画像処理が施された画像を各枝に関連付けて表示する例を示す。なお、本技術の第２の実施の形態における撮像装置の構成については、図１に示す例と略同様である。このため、本技術の第１の実施の形態と共通する部分については、その説明の一部を省略する。
【０１０６】
［画像処理を行うための操作領域画像の表示例］
図６は、本技術の第２の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例（表示画面４００）を示す図である。
【０１０７】
表示画面４００は、図４（ａ）に示す表示画面３１０において、各画像処理が施された画像４０１乃至４０３を追加して表示するものである。なお、各画像処理が施された画像４０１乃至４０３を追加して表示する点以外は、表示画面４００は表示画面３１０と略同様であるため、共通する部分については同一の符号を付して、これらの説明の一部を省略する。
【０１０８】
図６（ａ）には、操作領域画像３３０における操作標識３３１が光学処理範囲（図４（ｂ）に示す光学処理範囲３３２）に存在する場合における表示画面４００を示す。また、図６（ｂ）には、操作領域画像３３０における操作標識３３１が画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）に存在する場合における表示画面４００を示す。
【０１０９】
図６（ａ）に示すように、表示画面４００には、操作領域画像３３０の下側に、画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）における各枝の先端に対応する画像処理が施された画像４０１乃至４０３を表示する表示領域が設けられている。すなわち、操作領域画像３３０における操作標識３３１が光学処理範囲（図４（ｂ）に示す光学処理範囲３３２）に存在する場合には、各枝の先端に対応する画像処理が施された画像４０１乃至４０３のそれぞれが同一のサイズで表示される。このように、制御部２００は、各画像処理が施された画像４０１乃至４０３を、各画像処理効果に係る枝に関連付けて表示部１６０に表示させるための制御を行う。
【０１１０】
また、図６（ｂ）に示すように、操作領域画像３３０における操作標識３３１が画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）に存在する場合には、操作標識３３１が存在する枝の先端に対応する画像処理が施された画像が拡大表示される（画像４０５）。例えば、図６（ｂ）に示すように、操作標識３３１が画像処理範囲のうちの「ぼかす１」の枝に存在する場合には、「ぼかす１」に対応する画像処理が施された画像４０１（図６（ａ）に示す）が拡大表示される（画像４０５）。
【０１１１】
ここで、操作領域画像３３０の下側に表示される画像（画像４０１乃至４０３）については、定期的または不定期に、画像処理部１４０により生成される。例えば、操作標識３３１が画像処理範囲（図４（ｂ）に示す画像処理範囲３３３）に移動された場合に、画像処理部１４０が、各枝の先端に対応するぼかし処理を施した画像を生成して表示することができる。また、操作標識３３１の位置にかかわらず、画像処理部１４０が、各枝の先端に対応するぼかし処理を施した画像を順次生成して表示することができる。
【０１１２】
このように、本技術の第２の実施の形態によれば、操作領域画像３３０の画像処理範囲３３３における各枝の先端に対応する画像処理が施された画像を各枝に関連付けて表示させることができる。これにより、撮像動作中において、操作標識３３１の操作後の画像をユーザがさらに容易に把握することができ、ユーザ好みの画像をさらに容易に生成することができる。また、欲しいエフェクトを加えるためのユーザ操作を容易に行うことができる。
【０１１３】
また、光学的に再現することができないような複雑なぼかし処理を施した画像を記録する場合でも、入出力パネル３００において直感的に容易に、画像の処理結果をユーザが確認することができる。このため、撮像装置１００において新しいユーザ経験を提供することができる。
【０１１４】
＜３．第３の実施の形態＞
本技術の第１および第２の実施の形態では、画像に含まれる被写体をぼかす処理を行う場合にそのぼかし度合いを調整する例を示した。ここで、他の画像処理を行う場合にその処理の度合いを調整する場合についても本技術の第１および第２の実施の形態を適用することができると考えられる。
【０１１５】
そこで、本技術の第３の実施の形態では、各種の画像処理を行う場合にその処理の度合いを調整するための操作領域画像を表示する例を示す。なお、本技術の第３の実施の形態における撮像装置の構成については、図１に示す例と略同様である。このため、本技術の第１の実施の形態と共通する部分については、その説明の一部を省略する。
【０１１６】
［操作領域画像設定画面の表示例］
図７は、本技術の第３の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される表示画面例（操作領域画像設定画面５００）を示す図である。
【０１１７】
操作領域画像設定画面５００は、撮像装置１００を用いて行われる撮像動作中に入出力パネル３００に表示させる操作領域画像を選択するための表示画面である。操作領域画像設定画面５００は、例えば、撮像装置１００に実行させる機能を選択するための表示画面（例えば、メニュー画面）における選択操作に応じて表示される。
【０１１８】
具体的には、操作領域画像設定画面５００には、操作領域画像選択領域５０１と、決定ボタン５０２と、戻るボタン５０３とが設けられている。
【０１１９】
操作領域画像選択領域５０１には、撮像装置１００を用いて行われる撮像動作中に入出力パネル３００に表示させる操作領域画像を選択するためのラジオボタンが表示される。例えば、本技術の第１の実施の形態で示す操作領域画像３３０を表示させる場合には、一番上側のラジオボタン（ぼかし１〜３）が選択される。
【０１２０】
なお、真ん中のラジオボタン（トンネル風＋ぼかし、…）が選択された場合に表示される操作領域画像については、図９を参照して詳細に説明する。また、一番下側のラジオボタン（ズーム１〜３）が選択された場合に表示される操作領域画像については、図１０を参照して詳細に説明する。
【０１２１】
決定ボタン５０２は、操作領域画像選択領域５０１において、表示対象となる操作領域画像を選択する選択操作が行われた後に、その操作を決定する際に押下されるボタンである。
【０１２２】
戻るボタン５０３は、例えば、直前に表示されていた表示画面に戻る場合に押下されるボタンである。
【０１２３】
［画像の生成例］
図８は、本技術の第３の実施の形態における撮像装置１００を用いて行われた撮像動作により生成される画像を簡略的に示す図である。図８（ａ）乃至（ｂ）には、人物５１５を主要被写体とする撮像動作を行っている場合において、画像処理が施された後の画像の一例を示す。
【０１２４】
図８（ａ）には、トンネル効果およびぼかしに関する画像処理が画像処理部１４０により施された画像５１１を示す。ここで、トンネル効果は、画像における周縁の光量を落とすことにより、人物５１５がトンネル内に存在する場面を撮影したような効果を与えることである。
【０１２５】
例えば、画像処理部１４０は、撮像部１２０により生成されて変換部１３０により変換された画像について、この画像における周縁の光量を落とすとともに所定のエフェクトを加える画像処理を施すことにより、トンネル効果となる画像５１１を生成する。
【０１２６】
図８（ｂ）には、スケッチ風およびぼかしに関する画像処理が画像処理部１４０により施された画像５１２を示す。ここで、スケッチ風の画像は、画像における輝度を調整するように画像処理が施された画像であり、スケッチにより描かれたような画像である。
【０１２７】
例えば、画像処理部１４０は、撮像部１２０により生成されて変換部１３０により変換された画像について、明度の二値化処理およびエッジ抽出処理を行う。そして、画像処理部１４０は、二値化処理により生成された二値化画像と、エッジ抽出処理により生成された輪郭線画像とを重ね合わせる重ね合わせ処理を行うことにより、スケッチ風の画像５１２を生成する。
【０１２８】
図８（ｃ）には、トイカメラ風およびぼかしに関する画像処理が画像処理部１４０により施された画像５１３を示す。ここで、トイカメラ風の画像は、画像における四隅が薄暗くされた画像であり、トイカメラにより撮影されたような雰囲気の画像である。
【０１２９】
例えば、画像処理部１４０は、撮像部１２０により生成されて変換部１３０により変換された画像について、この画像における四隅を薄暗くするとともに所定のエフェクトを加える画像処理を施すことにより、トイカメラ風の画像５１３を生成する。
【０１３０】
［画像処理を行うための操作領域画像の表示例］
図９は、本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像について画像処理を行うための操作領域画像の表示例を示す図である。なお、図９に示す表示画面５２０は、図４に示す表示画面３１０の一部を変形したものである。このため、図９では、表示画面３１０と共通する部分については、同一の符号を付して、これらの説明の一部を省略する。
【０１３１】
操作領域画像５３０は、撮像部１２０により生成される画像について、画像処理部１４０が画像効果（カラー、モノクロ等）を施す場合に、その度合いを調整するための画像である。なお、上側の範囲（図４（ｂ）に示す光学処理範囲３３２に相当する範囲）は、カラーの度合いを調整するための範囲である。また、下側の範囲（図４（ｂ）に示す画像処理範囲３３３に相当する範囲）は、モノクロの度合いを調整するための範囲であり、分岐されている各枝に応じて、それぞれ異なる画像処理が施される。
【０１３２】
［ズーム処理を行うための操作領域画像の表示例］
図１０は、本技術の第３の実施の形態における撮像装置１００を用いて行われる撮像動作により生成される画像についてズーム処理を行うための操作領域画像の表示例を示す図である。なお、図１０に示す表示画面５４０は、図４に示す表示画面３１０の一部を変形したものである。このため、図１０では、表示画面３１０と共通する部分については、同一の符号を付して、これらの説明の一部を省略する。
【０１３３】
操作領域画像５５０は、撮像部１２０により生成される画像について、ズーム処理を行う場合に、その度合いを調整するための画像である。なお、上側の範囲（図４（ｂ）に示す光学処理範囲３３２に相当する範囲）は、光学ズーム倍率を調整するための範囲である。この光学ズーム処理は、レンズユニット１１０により行われる。また、下側の範囲（図４（ｂ）に示す画像処理範囲３３３に相当する範囲）は、電子ズーム（デジタルズーム）の度合いを調整するための範囲であり、分岐されている各枝に応じて、それぞれ異なるズーム処理が行われる。この電子ズーム処理は、画像処理部１４０により行われる。例えば、ズーム１は、画像における左側領域をズームするための枝とし、ズーム２は、画像における中央領域をズームするための枝とし、ズーム３は、画像における右側領域をズームするための枝とすることができる。
【０１３４】
このように、本技術の第３の実施の形態によれば、背景ぼかし効果やスケッチ効果等の複雑な処理を必要とする画像処理等についても、ユーザによるワンアクションの操作等により容易に行うことができる。また、本技術の第２の実施の形態と同様に、その処理が施された画像を表示させることにより、その効果をユーザが容易に確認することができる。
【０１３５】
＜４．第４の実施の形態＞
本技術の第１乃至第３の実施の形態では、略同一の長さの３つの枝が下側に延びている操作領域画像を表示する例を示した。ここで、枝の表示態様については、ユーザの好みや画像処理の内容に応じて変更するようにしてもよい。
【０１３６】
そこで、本技術の第４の実施の形態では、操作領域画像における複数の枝の表示態様を変更する例を示す。なお、本技術の第４の実施の形態における撮像装置の構成については、図１に示す例と略同様である。このため、本技術の第１の実施の形態と共通する部分については、その説明の一部を省略する。
【０１３７】
［操作領域画像の表示例］
図１１は、本技術の第４の実施の形態における撮像装置１００の表示部１６０（入出力パネル３００）に表示される操作領域画像６１０、６２０を示す図である。
【０１３８】
図１１（ａ）には、上下に延びるラインを基準とした場合における左右の一方に、複数の枝を配置する操作領域画像６１０を示す。操作領域画像６１０は、操作標識６１１と、第１操作範囲６１２と、第２操作範囲６１３とにより構成される。
【０１３９】
図１１（ｂ）には、上下に延びるラインを基準とした場合における左右の各枝の長さを変更した操作領域画像６２０を示す。操作領域画像６２０は、操作標識６２１と、第１操作範囲６２２と、第２操作範囲６２３とにより構成される。
【０１４０】
これらの変更については、ユーザの手動操作により設定するようにしてもよく、各画像処理に応じて自動で設定するようにしてもよい。
【０１４１】
なお、本技術の実施の形態では、３つの枝により構成される操作領域画像を示すが、２または４以上の枝により操作領域画像が構成されるようにしてもよい。この場合についても、本技術の第４の実施形態と同様に、各枝の配置や各枝の長さを適宜変更するようにしてもよい。また、本技術の第２の実施の形態と同様に、各処理が施された各画像を各枝に関連付けて表示させることにより、その効果をユーザが容易に確認することができる。
【０１４２】
なお、本技術の実施の形態では、撮像部１２０を備える撮像装置１００を例にして説明したが、撮像部を着脱可能な画像処理装置に本技術の実施の形態を適用することができる。また、撮像機能付き携帯電話機や撮像機能付き携帯端末装置等の画像処理装置に本技術の実施の形態を適用することができる。
【０１４３】
なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
【０１４４】
また、上述の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、ＣＤ（Compact Disc）、ＭＤ（MiniDisc）、ＤＶＤ（Digital Versatile Disk）、メモリカード、ブルーレイディスク（Blu-ray Disc（登録商標））等を用いることができる。
【０１４５】
なお、本技術は以下のような構成もとることができる。
（１） 画像に第１効果を与える第１処理部と、
前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部と、
操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には前記第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与え、当該ユーザ操作が所定条件を満たさない場合には前記第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う制御部と
を具備する画像処理装置。
（２） 光学系をさらに具備し、
前記制御部は、前記光学系を制御することより前記第１効果を前記画像に与える
前記（１）に記載の画像処理装置。
（３） 前記ユーザ操作により設定された処理が、前記光学系の制御により得られる処理の範囲の中であることを前記所定条件とする前記（２）に記載の画像処理装置。
（４） 前記第１効果は、前記光学系の制御から生じる光学ぼかし効果であり、
前記第２効果は、デジタル画像処理によるデジタルぼかし効果である
前記（２）または（３）に記載の画像処理装置。
（５） 前記第２処理部は、前記画像にデジタル画像処理を施すことにより前記複数種類の第２効果を与える画像処理部である前記（１）から（４）のいずれかに記載の画像処理装置。
（６） 前記第２効果は、ぼかし効果であり、
前記制御部は、前記ユーザ操作が前記所定条件を満たさない場合には、当該ユーザ操作に応じて前記画像処理部を制御することにより複数種類の前記ぼかし効果のうちの何れかのぼかし効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う
前記（５）に記載の画像処理装置。
（７） 前記制御部は、前記ユーザ操作を受け付けるための操作領域画像を表示部に表示させるための制御を行う前記（１）から（６）のいずれかに記載の画像処理装置。
（８） 前記制御部は、前記第１処理部による前記第１効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第１操作範囲と、前記第２処理部による前記第２効果のうちの何れかの効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第２操作範囲とを含む一連の線状領域を前記操作領域画像として前記表示部に表示させるための制御を行う前記（７）に記載の画像処理装置。
（９） 前記制御部は、前記第１操作範囲における前記接触操作が行われた位置と前記第１操作範囲および前記第２操作範囲の境界との距離に応じて前記第１処理部による前記第１効果の高低を決定し、前記第２操作範囲における前記接触操作が行われた位置と前記境界との距離に応じて前記第２処理部による前記第２効果の高低を決定するように制御を行う前記（８）に記載の画像処理装置。
（１０） 前記制御部は、前記第１操作範囲および前記第２操作範囲の境界から分岐する複数の線状領域を前記第２操作範囲における前記複数種類の第２効果に対応する画像として前記表示部に表示させるための制御を行う前記（８）または（９）に記載の画像処理装置。
（１１） 前記制御部は、前記第２効果を表す画像を当該第２効果に係る線状領域に関連付けて前記複数種類の第２効果毎に前記表示部に表示させるための制御を行う前記（１０）に記載の画像処理装置。
（１２） 前記制御部は、前記ユーザ操作に応じた効果が与えられた前記画像を表示部に表示させる制御を行う前記（１）から（１１）のいずれかに記載の画像処理装置。
（１３） 前記制御部は、前記画像を記録するための記録指示操作が受け付けられた場合には当該記録指示操作に応じて記録される画像であって前記ユーザ操作に応じた効果が与えられた画像を表示部に表示させる制御を行う前記（１）から（１２）のいずれかに記載の画像処理装置。
（１４） 撮像部をさらに具備する前記（１）から（１３）のいずれかに記載の画像処理装置。
（１５） 操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
を具備する画像処理装置の制御方法。
（１６） 操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
をコンピュータに実行させるプログラム。
【符号の説明】
【０１４６】
１００ 撮像装置
１１０ レンズユニット
１１１ レンズ部
１１２ 絞り
１１３ レンズ駆動部
１１４ 絞り駆動部
１２０ 撮像部
１３０ 変換部
１４０ 画像処理部
１５０ 表示制御部
１６０ 表示部
１７０ 記録制御部
１８０ 記録媒体
１９０ 操作受付部
１９１ シャッターボタン
２００ 制御部
３００ 入出力パネル
【特許請求の範囲】
【請求項１】
画像に第１効果を与える第１処理部と、
前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部と、
操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には前記第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与え、当該ユーザ操作が所定条件を満たさない場合には前記第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う制御部と
を具備する画像処理装置。
【請求項２】
光学系をさらに具備し、
前記制御部は、前記光学系を制御することより前記第１効果を前記画像に与える
請求項１記載の画像処理装置。
【請求項３】
前記ユーザ操作により設定された処理が、前記光学系の制御により得られる処理の範囲の中であることを前記所定条件とする請求項２記載の画像処理装置。
【請求項４】
前記第１効果は、前記光学系の制御から生じる光学ぼかし効果であり、
前記第２効果は、デジタル画像処理によるデジタルぼかし効果である
請求項２記載の画像処理装置。
【請求項５】
前記第２処理部は、前記画像にデジタル画像処理を施すことにより前記複数種類の第２効果を与える画像処理部である請求項１記載の画像処理装置。
【請求項６】
前記第２効果は、ぼかし効果であり、
前記制御部は、前記ユーザ操作が前記所定条件を満たさない場合には、当該ユーザ操作に応じて前記画像処理部を制御することにより複数種類の前記ぼかし効果のうちの何れかのぼかし効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う
請求項５記載の画像処理装置。
【請求項７】
前記制御部は、前記ユーザ操作を受け付けるための操作領域画像を表示部に表示させるための制御を行う請求項１記載の画像処理装置。
【請求項８】
前記制御部は、前記第１処理部による前記第１効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第１操作範囲と、前記第２処理部による前記第２効果のうちの何れかの効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第２操作範囲とを含む一連の線状領域を前記操作領域画像として前記表示部に表示させるための制御を行う請求項７記載の画像処理装置。
【請求項９】
前記制御部は、前記第１操作範囲における前記接触操作が行われた位置と前記第１操作範囲および前記第２操作範囲の境界との距離に応じて前記第１処理部による前記第１効果の高低を決定し、前記第２操作範囲における前記接触操作が行われた位置と前記境界との距離に応じて前記第２処理部による前記第２効果の高低を決定するように制御を行う請求項８記載の画像処理装置。
【請求項１０】
前記制御部は、前記第１操作範囲および前記第２操作範囲の境界から分岐する複数の線状領域を前記第２操作範囲における前記複数種類の第２効果に対応する画像として前記表示部に表示させるための制御を行う請求項８記載の画像処理装置。
【請求項１１】
前記制御部は、前記第２効果を表す画像を当該第２効果に係る線状領域に関連付けて前記複数種類の第２効果毎に前記表示部に表示させるための制御を行う請求項１０記載の画像処理装置。
【請求項１２】
前記制御部は、前記ユーザ操作に応じた効果が与えられた前記画像を表示部に表示させる制御を行う請求項１記載の画像処理装置。
【請求項１３】
前記制御部は、前記画像を記録するための記録指示操作が受け付けられた場合には当該記録指示操作に応じて記録される画像であって前記ユーザ操作に応じた効果が与えられた画像を表示部に表示させる制御を行う請求項１記載の画像処理装置。
【請求項１４】
撮像部をさらに具備する請求項１記載の画像処理装置。
【請求項１５】
操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
を具備する画像処理装置の制御方法。
【請求項１６】
操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
をコンピュータに実行させるプログラム。
【請求項１】
画像に第１効果を与える第１処理部と、
前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部と、
操作受付部により受け付けられたユーザ操作が所定条件を満たす場合には前記第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与え、当該ユーザ操作が所定条件を満たさない場合には前記第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う制御部と
を具備する画像処理装置。
【請求項２】
光学系をさらに具備し、
前記制御部は、前記光学系を制御することより前記第１効果を前記画像に与える
請求項１記載の画像処理装置。
【請求項３】
前記ユーザ操作により設定された処理が、前記光学系の制御により得られる処理の範囲の中であることを前記所定条件とする請求項２記載の画像処理装置。
【請求項４】
前記第１効果は、前記光学系の制御から生じる光学ぼかし効果であり、
前記第２効果は、デジタル画像処理によるデジタルぼかし効果である
請求項２記載の画像処理装置。
【請求項５】
前記第２処理部は、前記画像にデジタル画像処理を施すことにより前記複数種類の第２効果を与える画像処理部である請求項１記載の画像処理装置。
【請求項６】
前記第２効果は、ぼかし効果であり、
前記制御部は、前記ユーザ操作が前記所定条件を満たさない場合には、当該ユーザ操作に応じて前記画像処理部を制御することにより複数種類の前記ぼかし効果のうちの何れかのぼかし効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う
請求項５記載の画像処理装置。
【請求項７】
前記制御部は、前記ユーザ操作を受け付けるための操作領域画像を表示部に表示させるための制御を行う請求項１記載の画像処理装置。
【請求項８】
前記制御部は、前記第１処理部による前記第１効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第１操作範囲と、前記第２処理部による前記第２効果のうちの何れかの効果を前記画像に与えるための前記ユーザ操作としてユーザによる接触操作を行うための第２操作範囲とを含む一連の線状領域を前記操作領域画像として前記表示部に表示させるための制御を行う請求項７記載の画像処理装置。
【請求項９】
前記制御部は、前記第１操作範囲における前記接触操作が行われた位置と前記第１操作範囲および前記第２操作範囲の境界との距離に応じて前記第１処理部による前記第１効果の高低を決定し、前記第２操作範囲における前記接触操作が行われた位置と前記境界との距離に応じて前記第２処理部による前記第２効果の高低を決定するように制御を行う請求項８記載の画像処理装置。
【請求項１０】
前記制御部は、前記第１操作範囲および前記第２操作範囲の境界から分岐する複数の線状領域を前記第２操作範囲における前記複数種類の第２効果に対応する画像として前記表示部に表示させるための制御を行う請求項８記載の画像処理装置。
【請求項１１】
前記制御部は、前記第２効果を表す画像を当該第２効果に係る線状領域に関連付けて前記複数種類の第２効果毎に前記表示部に表示させるための制御を行う請求項１０記載の画像処理装置。
【請求項１２】
前記制御部は、前記ユーザ操作に応じた効果が与えられた前記画像を表示部に表示させる制御を行う請求項１記載の画像処理装置。
【請求項１３】
前記制御部は、前記画像を記録するための記録指示操作が受け付けられた場合には当該記録指示操作に応じて記録される画像であって前記ユーザ操作に応じた効果が与えられた画像を表示部に表示させる制御を行う請求項１記載の画像処理装置。
【請求項１４】
撮像部をさらに具備する請求項１記載の画像処理装置。
【請求項１５】
操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
を具備する画像処理装置の制御方法。
【請求項１６】
操作受付部により受け付けられたユーザ操作が所定条件を満たすか否かを判定する判定手順と、
前記ユーザ操作が所定条件を満たす場合には、画像に第１効果を与える第１処理部による前記第１効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第１制御手順と、
前記ユーザ操作が所定条件を満たさない場合には、前記第１効果とは異なる効果であって複数種類の第２効果を前記画像に与える第２処理部による前記第２効果のうちの何れかの効果を当該ユーザ操作に応じて前記画像に与えるための制御を行う第２制御手順と
をコンピュータに実行させるプログラム。
【図１】
【図２】
【図４】
【図５】
【図７】
【図９】
【図１０】
【図１１】
【図３】
【図６】
【図８】
【図２】
【図４】
【図５】
【図７】
【図９】
【図１０】
【図１１】
【図３】
【図６】
【図８】
【公開番号】特開２０１３−５８８６１（Ｐ２０１３−５８８６１Ａ）
【公開日】平成２５年３月２８日（２０１３．３．２８）
【国際特許分類】
【出願番号】特願２０１１−１９５２９４（Ｐ２０１１−１９５２９４）
【出願日】平成２３年９月７日（２０１１．９．７）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２５年３月２８日（２０１３．３．２８）
【国際特許分類】
【出願日】平成２３年９月７日（２０１１．９．７）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]