画像処理装置
【課題】撮影画像にぼかしを付加する動作を最適化した画像処理装置を提供する。
【解決手段】撮像装置は、半押し操作信号が入力されている場合（ステップＳ１０１を肯定判定）にスルー画像に対して画像ぼけを付加し（ステップＳ１０４）、半押し操作信号が入力されなくなると（ステップＳ１１１を否定判定）スルー画像に対する画像ぼけの付加を解除する。撮像装置は、撮影シーンモードがポートレートモードに設定されると自動的に画像ぼけの付加を許可する。撮像装置は、画像ぼけは主要被写体の背景領域に行う。全押し操作信号に応じて得られる本撮影画像に対し、全押し操作信号が入力される直前のスルー画像に付加していた画像ぼけと同様の画像ぼけ（対象領域および画像ぼけの付加比率を同様にする）を付加する（ステップＳ１１４）。
【解決手段】撮像装置は、半押し操作信号が入力されている場合（ステップＳ１０１を肯定判定）にスルー画像に対して画像ぼけを付加し（ステップＳ１０４）、半押し操作信号が入力されなくなると（ステップＳ１１１を否定判定）スルー画像に対する画像ぼけの付加を解除する。撮像装置は、撮影シーンモードがポートレートモードに設定されると自動的に画像ぼけの付加を許可する。撮像装置は、画像ぼけは主要被写体の背景領域に行う。全押し操作信号に応じて得られる本撮影画像に対し、全押し操作信号が入力される直前のスルー画像に付加していた画像ぼけと同様の画像ぼけ（対象領域および画像ぼけの付加比率を同様にする）を付加する（ステップＳ１１４）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像にぼかしを付加する画像処理装置に関する。
【背景技術】
【０００２】
３５mm版カメラに比べて撮像面積が小さい電子カメラが普及している。このタイプのカメラは実焦点距離が短いため、３５mm版カメラの場合と同じＦ値（光学絞り値）の撮影レンズを用いても、３５mm版カメラのように背景をぼかした撮影画像が得られにくい。特許文献１には、画像処理によって画像にぼかしを付加する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１２５２８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に開示される処理では、撮影（もしくは再生）時において、画像にぼかしを付加する動作が最適化されているとは言えない。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明による画像処理装置は、画像信号を記録する記録手段と、記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、記録手段から読み出され、ぼかしの付加された再生画像を表示する表示手段と、表示装置の表示画面内で、最も多くの高域空間周波数成分を含んでいる領域を基準領域として抽出する抽出手段と、表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、操作部材が操作され、表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、表示手段の表示画面に次に表示されるべき次表示領域に対応する画像信号の中から、基準領域を抽出させるように抽出手段を制御するとともに、次表示領域に対応する画像信号のうち、基準領域を除いた領域にぼかしを付加させるようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１に記載の画像処理装置において、制御手段は、次表示領域に対応する画像信号の中から基準領域を抽出させる際に、次表示領域に対応する画像信号の中に当該画像の撮影時の自動合焦動作の際に用いられた焦点検出領域がある場合には、当該焦点検出領域を基準領域とするように抽出手段を制御することが好ましい。
請求項３に記載の発明による画像処理装置は、画像信号を記録する記録手段と、記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、記録手段から読み出され、ぼかしの付加された再生画像を表示する表示手段と、表示装置の表示画面内で、基準領域を抽出する抽出手段と、表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、操作部材が操作され、表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、表示手段の表示画面に次に表示されるべき次表示領域に対応する画像信号の中から、基準領域を抽出させるように抽出手段を制御するとともに、次表示領域に対応する画像信号のうち、基準領域を除いた領域にぼかしを付加させるようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１または請求項３に記載の画像処理装置において、表示手段に表示される再生画像に付加されるぼかしの量を変更する回転操作部材を有するのが好ましい。
請求項１または請求項３に記載の画像処理装置において、制御手段は、操作部材によって再生信号の電気的な拡大表示倍率の変更が指示されるたびに、ぼかし付加手段によって
付加されるぼかしの量を変更することが好ましい。
請求項６に記載の発明による画像処理装置は、被写体像を撮像して画像信号を出力する撮像素子と、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、ぼかしの付加された画像信号に対応する画像を、撮像素子による撮像動作と並行して表示する表示手段と、撮像動作中に、表示手段が表示している画像の拡大表示の指示がなされたときに、画像信号に解像度変換を施す解像度変換手段と、撮像動作中に、拡大指示がなされたときに、解像度変換手段によって解像度変換された画像信号を加工してぼかしを付加するようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項６に記載の画像処理装置において、撮像動作中に表示手段が表示している画像の縮小表示の指示がなされたときに、制御手段は、ぼかし付加手段によってぼかしが付加された画像信号に対して、解像度変換手段が縮小のための解像度変換を行うように制御することが好ましい。
請求項８に記載の発明による画像処理装置は、被写体像を撮像して画像信号を出力する撮像素子と、画像信号に基づく画像を表示する表示手段と、表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、表示手段に表示される画像の電気的な拡大を指示する指示手段と、指示手段の指示に応じて、画像信号に解像度変換を施して画像信号に対応する画像の電気的な拡大処理を行う解像度変換手段と、撮影指示前に、撮像素子に撮像されて表示手段に表示される画像に対して、指示手段によって拡大指示がなされた場合には、ぼかし付加手段によりぼかしが付加された画像に対して、解像度変換手段により電気的な拡大処理を行って表示手段に表示するように制御するとともに、撮影指示の後に撮影された画像にぼかしが付加された画像を表示手段に表示している際に、指示手段によって拡大指示がなされた場合には、解像度変換手段でぼかしが付加される前の画像信号に対して電気的な拡大処理を行った上で、ぼかし付加手段によりぼかしが付加された画像を表示手段に表示するように制御する制御手段とを備えることを特徴とする。
請求項９に記載の発明による画像処理装置は、画像信号を記録する記録手段と、記録手段から読み出された画像信号に対応する画像を表示する表示手段と、表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、表示手段に表示される画像の電気的な拡大を指示する指示手段と、指示手段の指示に応じて、記録画像信号に解像度変換処理を施して電気的な拡大処理を行う解像度変換手段と、指示手段によって表示手段に表示される画像の連続的な拡大が指示された際に、ぼかし付加手段によってぼかしが付加される前の記録画像信号に対して解像度変換処理を行った画像を、表示手段に表示するように制御する制御手段とを備えることを特徴とする。
請求項１０に記載の発明による画像処理装置は、被写体像を撮像して画像信号を出力する撮像素子と、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、ぼかしの付加された画像信号に対応する画像を撮像素子による撮像動作と並行して表示する表示手段と、撮像動作中に、表示手段が表示している画像の表示倍率の変更指示がなされたときに、画像信号に基づく信号に解像度変換を施す解像度変換手段と、撮像動作中に、変更指示がなされたときに、変更された表示倍率に応じて付加されるぼかしの量を変更するようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１０に記載の画像処理装置はさらに、短焦点端と長焦点端とで光学絞り量の異なるズーム撮影光学系を備えてもよい。この場合のぼかし付加手段は、ズーム撮影光学系が長焦点端の状態で、さらに表示倍率の変更指示がなされたときに、長焦点端での光学絞り値よりさらに絞り込んだ絞り値に相当するぼかし画像となるように、ぼかしを画像の所定領域に付加することが好ましい。
請求項１２に記載の発明による画像処理装置は、ズーム撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、ぼかしの付加された画像信号に対応する画像を撮像素子による撮像動作と並行して表示する表示手段と、撮像動作中に、表示手段が表示している画像の表示倍率の拡大変更指示が連続してなされたときに、ズーム撮影光学系の焦点距離を長焦点距離端まで変更し、さらに継続して画像信号に基づく信号に解像度変換を施す拡大手
段と、撮像動作中に、表示倍率の拡大変更指示がなされ、焦点距離が所定の値となったときに、画像信号に対するぼかしの付加を開始して、ぼかしの付加された画像信号を表示手段に出力するようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１３に記載の発明による画像処理装置は、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、画像信号に基づく画像の電気的な拡大を指示する指示手段と、解像度変換によって電気的な拡大処理を行う拡大手段と、指示手段によって所定倍率以上の拡大が指示されたときに、ぼかし手段によるぼかしの付加が行われないように制御する制御手段とを備えることを特徴とする。
請求項１４に記載の発明による画像処理装置は、撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、画像信号に加工処理を施して画像の所定領域にぼかしを付加するぼかし付加手段と、撮影光学系または撮像素子への異物の付着もしくは傷を画像信号をもとに検出する検出モードにおいて、ぼかし手段によるぼかしの付加を禁止する制御手段とを備えることを特徴とする。
請求項１４に記載の画像処理装置において、制御手段は、検出モード以外の撮影モードで撮像された撮像画像上の異物もしくは傷の像を含む領域にぼかしを付加するようにぼかし付加手段を制御することが好ましい。
請求項１４に記載の画像処理装置において、ぼかし付加手段は、検出モード以外の撮影モードで撮像された撮像画像上の異物もしくは傷の像を含む領域のコントラストの大きさに応じて、付加するぼかしの量を変更することが好ましい。
【発明の効果】
【０００６】
本発明によれば、撮影画像にぼかしを付加する動作を最適化した画像処理装置を提供できる。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施形態による撮像装置の一例を示すブロックダイアグラムである。
【図２】制御回路が画像ぼけを付加する撮影処理の流れについて説明するフローチャートである。
【図３】異なる時刻に取得されたスルー画像を例示する図である。
【図４】(a)画像ぼけを付加しないでスルー画像を例示する図である。(b)画像ぼけを付加したスルー画像を例示する図である。(c)他の表示態様を例示する図である。
【図５】カメラを例示する斜視図である。
【図６】カメラを例示する斜視図である。
【図７】カメラを例示する斜視図である。
【図８】カメラを例示する斜視図である。
【図９】ビデオカメラを例示する斜視図である。
【図１０】ビデオカメラを例示する斜視図である。
【図１１】ビデオカメラを例示する斜視図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明を実施するための最良の形態について説明する。図１は、本発明の一実施形態による撮像装置の一例を示すブロックダイアグラムである。図１において、撮像装置は、撮像素子１と、撮影レンズ２と、レンズ駆動回路３と、制御回路５と、操作部材７と、撮像素子駆動回路８と、信号処理回路９と、データ処理回路１０と、圧縮／伸張回路１１と、モニタ１３と、表示制御回路１４と、測光回路１５とを有し、さらに記録媒体１２が設けられている。記録媒体１２は、メモリカード、小型ハードディスク、ＤＶＤなどの光ディスクなどで構成される。記録媒体１２は、撮像装置に内蔵されるものであっても、着脱可能に装着されるものであってもよい。また、撮像装置の外部に設けられるものであってもよい。その場合、記録媒体１２と撮像装置とは有線または無線で電
気的に接続される。
【０００９】
撮影レンズ２は撮影光学系を構成する複数枚数のレンズ群で構成され、撮像素子１の撮像面上に被写体像を結像させる。撮影レンズ２は不図示のフォーカスレンズを含み、レンズ駆動回路３がフォーカスレンズを光軸方向に進退駆動することにより、撮影レンズ２のフォーカス調節が行われる。また、撮影レンズ２は不図示のズームレンズを含み、レンズ駆動回路３がズームレンズを光軸方向に進退駆動することにより、撮影レンズ２のズーム調節が行われる。レンズ駆動回路３は、制御回路５から出力されるレンズ駆動指令に応じてレンズ駆動信号を発生し、発生したレンズ駆動信号で不図示のレンズ駆動機構を駆動することにより、各レンズを移動させる。
【００１０】
撮像素子１は、静止画像の単写撮像とともに、静止画像の連続撮像、および動画像の撮像が可能である。撮像素子１は、例えばCCD撮像素子あるいはCMOS型撮像素子などによっ
て構成される。
【００１１】
撮像素子駆動回路８は、制御回路５から出力される指令に応じて所定タイミングの駆動信号を発生し、発生した駆動信号を撮像素子１へ供給する。撮像素子１は、供給された駆動信号によって電荷蓄積（撮像）や蓄積電荷の読み出しが制御される。制御回路５は、測光回路１５による被写体の測光データを用いて被写界の明るさの情報を求め、この明るさの情報に基づいて撮像素子１の電荷蓄積時間、撮影レンズ２の絞り、および撮像素子１より出力される画像信号の増幅度などを決定する。なお、被写界の明るさの情報は、撮像素子１から出力される信号から求める構成としてもよい。この場合には、撮像素子１が測光回路１５の機能を司る。
【００１２】
撮像素子１から読み出された画像信号は、信号処理回路９へ入力される。信号処理回路９は、制御回路５からの指令に応じて入力信号に対する増幅、直流再生、A/D変換、ホワ
イトバランス、およびガンマ変換等の信号処理を施し、信号処理後のデータを画像データとしてデータ処理回路１０へ出力する。
【００１３】
データ処理回路１０は、制御回路５からの指令に応じて、信号処理回路９より出力された画像データを圧縮／伸張回路１１に出力するとともに、モニタ１３に再生画像を表示させるために必要な解像度変換（画素数変換）処理を画像データに施し、解像度変換処理後の画像データを表示制御回路１４へ出力する。なお、データ処理回路１０は、後述する電子ズーム処理を行う際には、入力される画像データに対して解像度（画素数）変換処理を施して、圧縮／伸張回路１１および表示制御回路１４へそれぞれ出力する。
【００１４】
表示制御回路１４は、制御回路５からの指令に応じて、データ処理回路１０から入力される画像データに所定の信号処理を施してモニタ１３へ出力する。表示制御回路１４はさらに、上記画像データに撮影メニュー、カーソルなどのオーバーレイ画像データを重畳する処理を行う。これにより、オーバーレイ画像が重畳された被写体画像がモニタ１３に表示される。
【００１５】
圧縮/伸張回路１１は、制御回路５からの指令に応じて、データ処理回路１０から入力
される画像データに所定の形式で圧縮処理を施し、圧縮後のデータを記録媒体１２へ記録する。撮影時に記録媒体１２へ画像データを記録する場合、記録する画像データに対応する再生画像がモニタ１３に表示される。なお、操作部材７で画像データの非圧縮での記録が指示された場合、圧縮／伸張回路１１は圧縮処理を行わず、記録媒体１２への記録が行われる。この場合にも、モニタ１３には記録する画像データに対応する再生画像が表示される。
【００１６】
また、本撮像装置は、記録媒体１２に記録されている画像データによる再生画像をモニタ１３に表示する（再生モード）ことも可能に構成される。この場合の圧縮/伸張回路１
１は、制御回路５からの指令に応じて記録媒体１２に記録されている画像データを読み出し、読み出しデータに対して復号化処理を施した上で復号化後のデータをデータ処理回路１０へ送る。再生時にデータ処理回路１０が復号化データに解像度変換処理を施して表示制御回路１４へ出力することにより、再生画像がモニタ１３に表示される。なお、記録媒体１２に記録されている非圧縮の画像データが読み出された場合には、圧縮処理の逆処理である復号化処理は行われない。圧縮／伸張回路１１は、可逆圧縮（いわゆるロスレス符号化）を行うことも可能な構成となっている。
【００１７】
操作部材７はレリーズ釦を含み、操作内容に応じた操作信号を制御回路５へ出力する。制御回路５は、レリーズ釦の押下操作に基づくレリーズ操作信号が操作部材７から入力されると、撮像素子１から読み出される画像信号の中で、撮像画面内にあらかじめ設定されているフォーカス検出領域に対応する信号を用いて公知のコントラスト方式のＡＦ（オートフォーカス）動作を行う。
【００１８】
具体的には、信号処理回路９によって信号処理された画像データのうち、フォーカス検出領域に対応するデータについての高周波数成分の積算値（いわゆる焦点評価値）を最大にするように、レンズ駆動指令（フォーカス調節信号）をレンズ駆動回路３へ送る。焦点評価値を最大にするフォーカスレンズの位置は、撮像素子１によって撮像される被写体像のエッジのぼけをなくし、画像のコントラストを最大にする（尖鋭度を高める）合焦位置である。
【００１９】
本実施の形態では、撮像レンズ２内のフォーカスレンズを移動しながら順次得られる画像データ（映像信号）を撮影画面内の複数のフォーカス検出領域ごとに解析し、各領域に対応する画像のコントラスト値を最大にするフォーカスレンズ位置をもとに、各領域に位置する被写体の(相対的な)撮影距離を取得可能に構成されている。
【００２０】
なお、上記コントラスト方式のＡＦ動作に加えて、公知の瞳分割方式による位相差ＡＦ動作を行うように構成してもよい。この場合にも、各領域に位置する被写体の撮影距離を得ることができる。
【００２１】
操作部材７はズーム操作部材も含む。制御回路５は、ズーム操作に基づくズーム操作信号が操作部材７から入力されると上述したレンズ駆動指令を発生し、レンズ駆動回路３にズームレンズを進退駆動させる。これにより、撮像素子１の撮像面上に結像される被写体像が拡大もしくは縮小し、光学的にズーム調節される。
【００２２】
制御回路５はさらに、ズーム操作に基づくズーム操作信号が操作部材７から入力されるとデータ処理回路１０へ指令を出力し、画像データに対する解像度変換処理の変換比率を操作信号に応じて変化させる。これにより、モニタ１３に表示される画像が拡大もしくは縮小し、電気的にズーム調節される（電子ズーム）。解像度変換比率は電子ズーム倍率に対応する。データ処理回路１０が電子ズーム倍率を高める方向に変換比率を変える場合、再生画像の一部が拡大されてモニタ１３に表示される（拡大率が上がる反面、再生画像の表示範囲は狭くなる）。反対に、データ処理回路１０が電子ズーム倍率を低くする方向に変換比率を変える場合、モニタ１３に表示される再生画像の拡大率が下がる反面、再生画像の表示範囲は広くなる。撮像素子１による撮影モードに設定されている場合、モニタ１３に表示されている画像に対応する撮影画像データを記録媒体１２に記録することができる。
【００２３】
次に、撮像装置が撮影モードに設定されている場合に行うスルー画撮影動作と静止画本
撮影動作と動画本撮影動作について説明する。スルー画撮影は、静止画本撮影の前段階として行われる予備撮影であり、静止画本撮影は、レリーズ釦の全押し操作信号（撮影指示）に応じて行われる撮影である。また、動画本撮影動作は、ＲＥＣ釦の操作信号（撮影、記録指示）に応じて行われる撮影である。
【００２４】
＜スルー画撮影動作＞
本実施形態の撮像装置は、静止画本撮影動作を行う際に、操作部材７からレリーズ釦の半押し操作に基づく半押し操作信号が制御回路５へ入力されると、上述したＡＦ動作を伴ったスルー画撮影動作を行う。スルー画撮影動作は、所定のフレームレートで繰り返し行われており、レリーズ釦の半押し操作中、スルー画撮影動作と並行して、上述したＡＦ動作が行われ、撮影されたスルー画像がモニタ１３に表示される。
【００２５】
制御回路５は、撮像素子駆動回路８へ指示を送り、スルー画撮影動作を実行するための駆動信号を出力させる。撮像素子１は、スルー画撮影動作のための駆動信号を受けて、例えば、３０フレーム/秒の高フレームレートで蓄積電荷を連続的に出力する。スルー画撮
影用の露出条件は測光回路１５による測光データに基づいて決定される。信号処理回路９は、入力された信号に上述した信号処理を施すとともに、撮像素子１上において近傍に位置する同色画素(単板カラーの撮像素子の場合)の信号を加算し、後述する静止画本撮影時に比べて低解像度（低画素数）の映像信号としてデータ処理回路１０へ出力する。
【００２６】
データ処理回路１０が解像度変換処理を施した画像データを表示制御回路１４へ出力することにより、スルー画像がモニタ１３に表示される。これにより、撮影者は、これから本撮影しようとする被写界の状態をモニタ１３の画面で観察することができる。すなわち、スルー画撮影動作においては、撮像動作と表示動作が並行して行われる。
【００２７】
＜静止画本撮影動作＞
スルー画撮影動作に続いてレリーズ釦が全押し操作されると、全押し操作信号が制御回路５へ入力される。撮像装置は、全押し操作信号に応じて静止画本撮影動作を開始する。
【００２８】
制御回路５は、操作部材７（レリーズ釦）からの全押し操作信号を検出すると撮像素子駆動回路８へ指示を送り、本撮影動作を実行するための駆動信号を出力させる。撮像素子１は、静止画本撮影動作のための駆動信号を受けて、露出演算結果に基づく本撮影用の電荷蓄積を行って蓄積電荷を出力する。本撮影用の露出条件は、直近のスルー画データの信号値から得られる被写界の明るさ情報に基づいて決定される。信号処理回路９は入力された信号に上述した信号処理を施し、スルー画撮影時に比べて高解像度（高画素数）の画像データとしてデータ処理回路１０へ出力する。
【００２９】
データ処理回路１０が解像度変換処理を施した画像データを表示制御回路１４へ出力することにより、静止画本撮影画像がモニタ１３に表示される。また、圧縮/伸張回路１１
によって圧縮処理された画像データが記録媒体１２へ記録される。
【００３０】
＜動画本撮影動作＞
次に動画本撮影動作について説明する。動画本撮影動作は、撮像素子１により撮影された動画像をモニタ１３に表示しつつ記録媒体１２に記録を行う撮影動作である。この動画本撮影動作は、操作部材７の一部であり、動画像の撮影を指示するＲＥＣ釦の操作がなされている間実行される。制御回路５は、操作部材７の一部を構成するＲＥＣ釦の押圧操作がなされると、前述の自動合焦動作を連続的に行うとともに、撮像素子１による動画本撮影動作を実行する。なお、この場合の自動合焦動作は、画面内を移動する特定被写体に合焦動作が行われるように、特定被写体の追尾を行いつつ自動合焦動作を行うものであっても、所定の撮影距離の物体に常に合焦するように制御されるものであってもよい。また、
特に合焦動作を行わず、操作部材７の一部を構成するフォーカス操作部材(焦点調整部材)のマニュアル操作によって、撮影者の意図によって合焦状態を変化させるものであってもよい。
【００３１】
制御回路５は、ＲＥＣ釦の押圧操作を検出すると、撮像素子駆動回路８に対して、動画本撮影動作を実行する駆動信号を出力するように指示する。撮像素子１は、動画本撮影動作のための駆動信号を受けて、例えば、３０フレーム/秒の高フレームレートで映像信号
を連続的に出力する。このようにして撮像素子１から出力された映像信号は、信号処理回路９およびデータ処理回路１０で所定の処理が施された後、表示制御回路１４を介して順次モニタ１３に供給されるとともに、圧縮/伸張回路１１を介して記録媒体１２に記録さ
れる。
【００３２】
なお、操作部材７の操作によって記録媒体１２への非圧縮状態での記録が指示されている場合には、圧縮/伸張回路１１での圧縮処理は行われず、記録媒体１２への記録が行わ
れる。また、記録媒体１２への記録動作を行うにあたり、操作部材７の操作により圧縮率を変更可能な構成としてもよい。
【００３３】
さらに、記録媒体１２には、上述の自動合焦動作において取得した撮影距離情報を、動画像を構成する複数の静止画フレームの各々に対応付けて、画像データとともに記録する。撮影者は、モニタ１３に表示された動画像を目視することにより、これから撮影される被写界の状態を確認するとともに、記録媒体１２に記録される画像を確認することができる。記録媒体１２に記録される動画像の１フレームの画素数は、モニタ１３の画素数より大きい。従って、本実施形態においては、モニタ１３への動画像の表示を行うに際して、モニタ１３の画素数にあわせるように解像度(画素数)の変換処理がデータ処理回路１０で行われる。
【００３４】
＜ぼけ付加処理＞
本発明の特徴である電気的なぼかしを画像に付加する（すなわち、画像にぼかしを加える）動作について説明する。画像に対して電気的にぼかしを加える（以後、画像ぼけの付加と呼ぶ）とは、画像処理によって画像を加工し、擬似的にピントを外した画像を生成するものである。本実施形態による撮像装置では、画像データにローパスフィルタ（LPF）
処理を施して画像の高域空間周波数成分を劣化させることにより、画像のエッジを不鮮明にし、画像のコントラストを低下させる。
【００３５】
撮像装置は、撮影時の撮影モードがポートレートモードおよびマクロモードのいずれかに設定されている場合に画像ぼけの付加（および付加内容の変更）が許可され、撮影モードが遠景モードに設定されている場合には画像ぼけの付加（および付加内容の変更）が禁止される。ここで、ポートレートモードは人物を主要被写体とする撮影モード、マクロモードは近接撮影を行う撮影モード、遠景モードは風景を被写体とする撮影モードである。許可および禁止の判定は制御回路５が行う。この画像ぼけの付加の禁止、許可の判定に基づいて、スルー画像データおよびレリーズ釦の全押し操作に基づく静止画本撮影画像データの少なくとも一方の画像データに対して、画像ぼけの付加、禁止が制御される。すなわち、撮影画像に対して画像ぼけを付加した方が画像の芸術性が高まると判断される撮影モード（ポートレートモード、マクロモードなど）では画像ぼけの付加を許可し、それ以外の撮影モードでは画像ぼけの付加を禁止する構成としたので、画像ぼけの付加が好ましくない画像に誤って画像ぼけを付加してしまうといったことを未然に防止することができる。
【００３６】
また、撮影モードが夜景ポートレートモードに設定されている場合であって、画像の背景領域に所定レベル以上の明るさを有する領域が存在する場合にも、撮像装置は画像ぼけ
の付加（および付加内容の変更）が許可される。一方、夜景ポートレートモードに設定されている場合であって、画像の背景領域に所定レベル以上の明るさを有する領域（例えば、イルミネーションなどの輝点領域）が存在しない場合には、画像ぼけの付加（および付加内容の変更）が禁止される。画像の背景領域に所定レベル以上の明るさ領域が存在するか否かは、データ処理回路１０へ入力されたスルー画用の映像信号を用いて判定される。
【００３７】
制御回路５は、上述した画像ぼけの付加（および付加内容の変更）を禁止する場合、少なくとも撮影時において禁止すれば、再生時には許可するように構成してもよい。
【００３８】
制御回路５が画像ぼけを付加する撮影処理の流れについて、図２のフローチャートを参照して説明する。図２による撮影処理は、上述のように設定されている撮影モードや撮影された画像データに基づいて画像ぼけの付加（および付加内容の変更）が許可された場合に起動する。
【００３９】
図２のステップＳ１０１において、制御回路５はレリーズ釦が半押し操作されたか否かを判定する。制御回路５は、操作部材７（レリーズ釦）から半押し操作信号が入力されるとステップＳ１０１を肯定判定してステップＳ１０２へ進み、半押し操作信号が入力されない場合にはステップＳ１０１を否定判定し、当該判定処理を繰り返す。なお、本実施形態においては、ステップＳ１０１以前で既にスルー画撮影動作が開始されているものとする。
【００４０】
ステップＳ１０２において、制御回路５は、露出モードを絞り優先オートモードに設定するとともに、スルー画撮影動作を行いながら、上述したＡＦ動作を開始させてステップＳ１０３へ進む。絞り優先オートモードにおいては絞り値の変更が禁止され、撮像素子１の電子シャッタ速度（電荷蓄積時間）、および撮像素子１の出力する画像信号に対する増幅度のうち少なくとも一方が変更可能に設定される。絞り優先オートモードにすることで、現時点で設定されている絞り値が撮影処理中に変更されることがなくなり、後述する画像ぼけの付加量の調整、確認作業を容易に行うことができる。ＡＦ動作は、例えば、フォーカスレンズを無限遠に対応する位置から至近端に対応する位置へ向けて所定の速度で移動させながら、この移動過程において複数のフォーカス検出領域ごとに焦点評価値を最大にするフォーカスレンズ位置（合焦位置）を検出し、各フォーカスレンズ位置に対応する撮影距離情報を取得する。これにより、複数のフォーカス検出領域ごとに、当該領域に存在している被写体までの距離情報が得られる。
【００４１】
制御回路５は、ＡＦ動作中においてスルー画像を上記フレームレートでモニタ１３に逐次表示させるとともに、複数のフォーカス検出領域を示すＡＦマークをスルー画像に重ねて重畳表示させる。制御回路５は表示制御回路１４へ指令を送り、合焦位置が検出（焦点検出）されたフォーカス検出領域に対応するＡＦマークの表示色を赤色から緑色に変更表示させる。なお、焦点検出を撮影者に報知するための表示は、モニタ１３に重畳表示させる代わりにモニタ１３と別のＬＥＤなどによって表示させてもよい。
【００４２】
ステップＳ１０３において、制御回路５は、画像ぼけの付加されていない合焦画像であるスルー画用の映像信号から被写体の抽出（認識）処理を行ってステップＳ１０４へ進む。被写体の抽出（認識）は、例えば、ステップＳ１０３のＡＦ動作の過程において撮像される複数の画像を用いて、各々のフォーカス検出領域に存在する各被写体に合焦するようにフォーカス状態が調整された状態で、撮像画面内の各被写体像の抽出(認識)を行う。このようにステップＳ１０４の処理は、ステップＳ１０３の処理と並行して行われる。このようにして抽出された被写体の中から後述の抽出方法などを用いて、主要被写体を抽出(
認識)する。その他、焦点状態の異なる複数フレームの画像や、焦点距離の異なる複数フ
レームの画像を用いて被写体の抽出（認識）を行う構成としてもよい。抽出手法としては
、さらに公知の特定輪郭を抽出する技術、もしくは公知の特定色（肌色等）領域を抽出する技術、顔を認識する技術、またはこれらの抽出技術を組み合わせて用いる構成としてもよい。抽出された被写体が複数存在する場合は、例えば、上記ＡＦ動作で取得された複数の被写体までの距離情報を用いて、撮像装置に最も近い被写体を主要被写体として抽出する。制御回路５は、抽出（認識）した主要被写体に合焦する位置へフォーカスレンズを駆動させる。
【００４３】
なお、特定輪郭抽出や特定色抽出は省略してもよく、この場合には上記ＡＦ動作で取得された複数の被写体までの距離情報を用いて、撮像装置に最も近い被写体を主要被写体とする。このようにして抽出された主要被写体の領域を除いた領域に対して、後述する画像ぼけの付加が行われる。抽出された主要被写体の抽出(認識)結果(被写体の種類、及び撮
像画面上の位置)は、例えば、以下のように用いられる。主要被写体の抽出(認識)結果(被写体の種類、及び撮像画面上の位置)に応じて、スルー画像、あるいはこれに続く本撮影
静止画像に対して行われる画像処理の内容が変更される。例えば、画像ぼけの付加されていないスルー画像で顔が認識された画像についてのみ画像ぼけが付加される、あるいは顔領域の色を所定の色に変更するなどのように構成される。
【００４４】
さらには、上記のような抽出(認識)の結果をスルー画像、あるいはこれに続く本撮影静止画像の画像データとともに記録媒体１２に記録する構成としてもよい。撮影者は、記録媒体１２に記録された認識結果をもとに、関連付けて記録された画像データを検察することができる。上記の構成によれば、画像ぼけの付加されていない画像(スルー画像)を用いて被写体抽出、被写体認識が行われるので、正確な抽出、認識を行うことができる。この場合、被写体抽出、被写体認識の結果は、スルー画像に反映されるものに限定されず、これに続く本撮影静止画像に反映されるものであってもよい。また、各被写体に合焦した画像を用いて各被写体の抽出(認識)を行っているので、正確な抽出、認識を行うことができる。
【００４５】
ステップＳ１０４において、制御回路５は、スルー画用の映像信号のうち、ステップＳ１０３で抽出した主要被写体以外の領域（すなわち背景領域）に対する画像ぼけの付加をデータ処理回路１０へ指示し、ステップＳ１０５へ進む。データ処理回路１０が画像ぼけの付加および解像度変換処理を施した信号を表示制御回路１４へ出力することにより、画像ぼけが付加されたスルー画像がモニタ１３に表示される。
【００４６】
データ処理回路１０は、入力されるスルー画像のデータのうち背景領域に対応するデータに対して選択的にLPF処理を施すことによって画像ぼけを付加する。LPF処理の特性（フィルタのタップ数、遮断周波数、減衰量など）は、フォーカス検出領域で取得されている距離情報に応じて変化させる。具体的には、主要被写体領域内のフォーカス検出領域で取得されている撮影距離と、背景領域内のフォーカス検出領域で取得されている撮影距離とを比較し、両者間の撮影距離の乖離が大きいほど背景領域に対するLPF処理の遮断周波数
を低くする。この結果、主要被写体の撮影距離との差が大きい背景領域ほど、強いぼけ効果が付加される。
【００４７】
なお、データ処理回路１０にLPF処理を行わせる代わりに、点拡がり関数を用いた畳み
込み演算処理を行わせて、画面内の高域空間周波数成分を抑制する（画像ぼけを付加する）構成としてもよい。
【００４８】
ステップＳ１０５において、制御回路５は、撮影画面に動きがあるか否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが、撮影画面の全体で（撮影画面を所定数に分割したブロックの全てにおいて）共通に検出され（すなわち、ブロック間の動
きベクトルの向きおよび大きさの偏差が所定範囲内である）、かつ、撮影画面内の各ブロックにおける動きベクトルの大きさの平均値が所定値以上の場合にステップＳ１０５を肯定判定し、ステップＳ１０６へ進む。
【００４９】
一方、制御回路５は、複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが撮影画面の各領域で共通に検出されない場合、あるいは、撮影画面内の各ブロックにおける動きベクトルの大きさの平均値が所定値未満の場合にはステップＳ１０５を否定判定し、ステップＳ１０７へ進む。ステップＳ１０７において、制御回路５は、撮影画面内の一部の被写体に動きがあるか否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが、上記所定数の分割ブロックの少なくとも１つで検出される場合にはステップＳ１０７を肯定判定し、ステップＳ１０８へ進む。
【００５０】
ステップＳ１０６へ進む場合は、撮像装置の動きに起因する撮影範囲の移動があったと判定する。制御回路５は、ステップＳ１０６において、画像ぼけを付加する対象領域（背景領域）を動きベクトルの向き、大きさに応じて前フレームの付加対象領域の位置から移動させてステップＳ１０９へ進む。ここで、撮影範囲の移動にともなって新たに撮影範囲に加わった領域に対しては、撮影範囲が移動する前のフレームの該当する画面端において付加されていたぼけ量と同等のぼけを付加する（同様のLPF処理を施す）。画像ぼけを付
加する対象領域の移動は、リアルタイムでモニタ１３の表示画像に反映される。このように上記構成によれば、動画像中の被写体の動き（画像信号の変化）に合わせて、画像ぼけ量の変更、画像ぼけの付加位置の移動が自動的に行われるように制御される。
【００５１】
なお、撮影範囲の移動にともなって新たに撮影範囲に加わった領域に対するぼけ付加量を、撮影範囲が移動する前に付加していた撮影画面内のぼけ量の分布から外挿演算によって算出し、算出したぼけ量を付加する構成としても構わない。この場合にも、画像ぼけを付加する対象領域の移動はリアルタイムでモニタ１３の表示画像に反映される。
【００５２】
一方、制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが、上記所定数の分割ブロックのいずれでも検出されない場合にはステップＳ１０７を否定判定し、ステップＳ１０９へ進む。この場合は、画像ぼけを付加する対象領域を変更しないでステップＳ１０９へ進む。
【００５３】
ステップＳ１０８へ進む場合は、撮影画面内の一部被写体について動きがあったと判定する。制御回路５は、ステップＳ１０８において、動きを検出した分割ブロック、もしくは動きを検出しなかった分割ブロックにおける動きベクトルの向き、大きさに応じて、画像ぼけを付加する対象領域、もしくは画像ぼけを付加しない対象領域（一部被写体に対応する領域）を移動させてステップＳ１０９へ進む。
【００５４】
図３は、時刻Ｔ０、Ｔ１およびＴ２のそれぞれにおいて取得されたスルー画像を例示する図である。時刻Ｔ１の現フレーム画面の中で、動きを検出した一部被写体の領域Ｏ１に付加するぼけ量は、一部被写体が移動する前のフレーム画面（時刻Ｔ０）において当該一部被写体の領域Ｏ０に付加されていたぼけ量と同等とし、領域Ｏ０の位置に対応する現フレーム画面（時刻Ｔ１）内の領域Ｐに付加するぼけ量は、領域Ｐの周囲に対して付加するぼけ量の分布から補間処理によって算出する。画像ぼけを付加する対象領域の移動は、リアルタイムでモニタ１３の表示画像に反映される。
【００５５】
一部被写体が移動する前に存在していた領域に対するぼけ付加量について、以下のように決定してもよい。すなわち、現フレームを時刻Ｔ２とすると、現フレーム画面の中で動
きを検出した一部被写体の領域Ｏ２に付加するぼけ量は、一部被写体が移動する前のフレーム画面（時刻Ｔ１）において当該一部被写体の領域Ｏ１に付加されていたぼけ量と同等とし、領域Ｏ１の位置に対応する現フレーム画面（時刻Ｔ２）内の領域Ｑに付加するぼけ量は、さらに前（一部被写体が移動してくる前）のフレーム画面（時刻Ｔ０）において対応する領域Ｒに付加されていたぼけ量と同等とする。ステップＳ１０６、ステップＳ１０８のように、フレーム間の動き情報を利用して同じ量の画像ぼけを付加する領域を時間とともに移動させていく構成とすれば、画面内の領域によって付加するぼけ量が異なるような場合に、１フレームの画像毎に各領域の画像ぼけの付加量を演算する場合に比較して、迅速に電気ぼけの付加された画像を生成することができる。このようにして生成された画像をモニタ１３で表示させる場合には、表示に至るまでの遅延時間を少なくすることができる。
【００５６】
ステップＳ１０９において、制御回路５は、画像ぼけの付加量の変更操作が行われたか否かを判定する。制御回路５は、ぼけ量変更操作信号が操作部材７から入力された場合にステップＳ１０９を肯定判定してステップＳ１１０へ進み、ぼけ量変更操作信号が入力されない場合にはステップＳ１０９を否定判定してステップＳ１１１へ進む。ぼけ量変更操作は、モニタ１３の画面上で特定の領域を指定して行われる変更操作と、画面全体について共通に行われる変更操作とのいずれも可能に構成されている。
【００５７】
ステップＳ１１０において、制御回路５は、ぼけ量変更操作信号に応じてLPF処理の特
性を変更するようにデータ処理回路１０へ指示してステップＳ１１１へ進む。これにより、付加されるぼけ量が変更される。なお、LPF処理の代わりに畳み込み演算処理を行う場
合には、変更操作信号に応じて点拡がり関数を変更する。ぼけ量変更後の画像は、リアルタイムでモニタ１３に表示される。
【００５８】
ステップＳ１１１において、制御回路５はレリーズ釦の半押し操作が継続されているか否かを判定する。制御回路５は、操作部材７から半押し操作信号が継続して入力されている場合、ステップＳ１１１を肯定判定してステップＳ１１２へ進む。一方、半押し操作信号が入力されていない場合の制御回路５は、ステップＳ１１１を否定判定して画像ぼけの付加を解除するためにステップＳ１１５へ進む。ステップＳ１１５では、画像ぼけの付加が解除されて、モニタ１３には画像ぼけの付加されない画像が表示される。なお、この場合でもスルー画撮影動作は継続して行われる。従って、撮影者は、レリーズ釦の半押し操作を解除することで、画像ぼけの付加(量、位置等)について設定し直すことができる。
【００５９】
すなわち、上記ステップＳ１１１を否定判定してステップＳ１１５へ進んでから次に半押し操作信号が入力されてから自動合焦動作が完了して、主要被写体抽出が行われるまでの間、画像ぼけを付加しないスルー画像をモニタ１３に表示する。このような構成とすれば、付加された画像ぼけを簡単な操作で解除する（画像ぼけ付加前の状態に戻す）ことができる。また、撮影のたびに画像ぼけの付加されていない合焦画像がモニタ１３に表示されるので、画像ぼけを付加すべきか否かを撮影しようとする画像毎に判断することができる。また、上記のような付加されている画像ぼけの解除を行わない場合には、撮影範囲を変更して、次の撮影の自動合焦動作を行う際に、非合焦画像を用いて被写体抽出を行うこととなり、適切でない画像ぼけが付加される可能性がある。上記の構成によれば、自動合焦動作を行うために、レリーズ釦の半押しをしようとする段階で画像ぼけが付加されていないので、このようなことが防止される。
【００６０】
ステップＳ１１２において、制御回路５はレリーズ釦が全押し操作されたか否かを判定する。制御回路５は、操作部材７から全押し操作信号が入力された場合、ステップＳ１１２を肯定判定してステップＳ１１３へ進み、全押し操作信号が入力されない場合にはステップＳ１１２を否定判定し、ステップＳ１０５へ戻る。
【００６１】
ステップＳ１１３において、制御回路５は、静止画本撮影動作を開始させてステップＳ１１４へ進む。制御回路５は、全押し操作信号が入力される直前にモニタ１３に表示されていたスルー画像信号（データ）の明るさの情報を用いて本撮影用の自動露出（ＡＥ）動作を行う。これにより、直近のスルー画像データに画像ぼけが付加されている場合は、付加された画像ぼけを含む信号（データ）値の明るさの情報に基づいて本撮影用の露出が決定される。従って、例えば局所的に高レベルの輝点領域があるような画像に画像ぼけを付加するような場合であっても、画像ぼけの付加によってレベルの低下した輝点画像データをもとに本撮影動作の露出が決定されるので、正確な明るさの最終画像を得ることができる。撮像装置は、決定された露出に基づいて、撮像素子１の電子シャッタ速度(電荷蓄積
時間)、絞り、撮像素子１の出力する画像信号の増幅度等を設定し、撮像動作を行う。直
近のスルー画像信号（データ）に画像ぼけが付加されない場合には、画像ぼけを付加していない信号（データ）値に基づいて本撮影用の露出が決定される。
【００６２】
ステップＳ１１４において、制御回路５は、本撮影で得た画像信号に対し、全押し操作信号が入力される直前のスルー画像に対して付加していた画像ぼけと同様の画像ぼけを付加する処理（画像ぼけを付加する対象領域および画像ぼけの付加量を同様にする）を行う。この点について説明する。本撮影で得た画像とスルー画像では、画素数が異なる。通常、画像の空間周波数は、単位距離(例えば１mm)の間にいくつの縞があるかで定義される。上記の「同様の画像ぼけを付加する」とは、空間周波数を、画像の画面の大きさを基準として正規化したもの(上記の単位距離を画面の大きさとしたもの。すなわち、画面内のあ
る領域に何本の縞があるかについて、１画面の縦、横などの大きさを基準として正規化して示したもの。例えば画面のある領域に縦縞があるときに、これが画面の横方向いっぱいまであった場合に何本の縞になるか。)で考え、画像ぼけ付加後の、両画像の光学的なぼ
けを含む空間周波数特性が略同じになるように設定することを意味する。
【００６３】
ここで、両画像の空間周波数特性が略同じになるように設定することは、両画像の光学的なぼけを含む点拡がり特性(即ち、点を撮像した際の出力画像の点像の、画面の大きさ
を基準として正規化した拡がりの特性)が略同じになるように設定することと同じ意味で
ある。上記のような画面の大きさを基準として正規化した空間周波数の考え方によれば、両画像の画素数が異なるので、例えば、両画像の表現できる最高空間周波数は、必ず異なったものとなる。このような画素数の異なる画像の画像ぼけ度合いを同様にする為には、各々の画像ぼけの付加処理後の画面大きさを基準として正規化された空間周波数特性が同様となるように画像ぼけ付加処理のパラメータ等を設定する。具体的には、両画像の画素数が異なるため、両画像データに画像ぼけを付加する処理(低域通過フィルタの係数、畳
み込み演算の係数などのパラメータ、および処理の特性)を異なるものとする。ここでい
うスルー画像は、記録媒体１２から読み出してモニタ１３に表示させた再生画像に置き換えることができる。
【００６４】
このように、画素数の異なるスルー画像や再生画像と本撮影画像とで画像ぼけの度合いが同じになるように、各々の画像に対する画像ぼけの付加処理を設定することができる。撮影者は、高解像度の画素数の本撮影画像を実際に見なくても、モニタ１３に表示されたスルー画像、あるいはモニタ１３に表示された再生画像から、実際の画素数の本撮影画像の画像ぼけの付加度合いを判断することができる。
【００６５】
ここで、前述のようにスルー画像はモニタ１３に表示される。しかし、装置の小型化を図るため、一般にモニタ１３の表示画面の大きさは小さい。このため、モニタ１３上での画像ぼけの付加度合いの視認が容易になるように、表示面素数が少なく、また表示面積の少ないモニタ１３による表示画像に対する画像ぼけの付加量を、本撮影画像に対する画像ぼけの付加量より大きくするように構成してもよい。また、同じモニタ１３に表示される
画像であっても、スルー画像(あるいはクイックビュー画像)と、サムネイル画像とでは画像の表示面積が異なる。このため、上述と同様に、サムネイル画像の画像ぼけの付加量を、スルー画像(あるいはクイックビュー画像)の画像ぼけの付加量より大きく設定する構成とすることが好ましい。
【００６６】
また、静止画本撮影とその直前のスルー画撮影とで絞りの状態が異なる場合には、この絞りの変化量に相当するぼけを静止画本撮影動作によって得られた静止画像に対して電気的に付加する構成としてもよい。例えば、スルー画撮影から静止画本撮影に移行する過程で絞りが１段絞られた場合、静止画本撮影動作によって得られた静止画像は、その前に得られた画像より絞り１段分ぼけが低減されている。従って、静止画本撮影動作によって得られた静止画像に対して、絞り１段分の画像ぼけを電気的に付加して両画像の画像ぼけ度合いが同様になるようにする。このように、静止画本撮影とその直前のスルー画撮影とで絞りが変化する場合にも、この絞りの変化量に基づいて、絞り変化分の画像ぼけを加減するので、スルー画像と同じ画像ぼけ度合いの本撮影静止画像を得ることができる。
【００６７】
制御回路５はさらに、画像ぼけを付加後に圧縮処理した本撮影画像のデータを記録媒体１２に記録し、絞り優先オートモードを直近の設定モードに戻した上で図２による処理を終了する。
【００６８】
制御回路５が記録媒体１２へ本撮影画像のデータを記録する場合、本撮影画像とともに、サムネイル画像およびクイックビュー画像の記録も行う。サムネイル画像は、モニタ１３に撮影画像を縮小表示するための画像であり、サムネイル用に本撮影画像からモニタ１３の画素数よりさらに画素数を低減させたものである。また、クイックビュー画像は、モニタ１３に１フレームの撮影画像を大きく迅速に再生表示するためにモニタ１３の画素数に合わせて本撮影静止画像から生成されて記録された画像であり、モニタ１３の表示画素数に応じて本画像から画素数を低減させた画像である。サムネイル画像およびクイックビュー画像は、それぞれ本撮影画像に関連付けられて静止画像として記録媒体１２に記録される。
【００６９】
画像ぼけが付加された画像データは、画像ぼけが付加される前の画像データより高域空間周波数成分が抑制されるので、圧縮処理後のデータサイズが画像ぼけを付加していない画像の圧縮データサイズより小さくなる。制御回路５は、画像ぼけの付加（および付加内容の変更）が許可されると、撮影可能枚数を算出するための係数を画像ぼけの付加が許可されている場合の係数（所定量の画像ぼけの付加が許可された本撮影動作によって得られた静止画１フレーム当たりの平均圧縮符号量）に切替えて算出する。画像ぼけの付加された画像データは、高域空間周波数成分が抑制されているので圧縮処理後の符号量が減少する。これにより、画像ぼけの付加が許可されている場合は、禁止されている場合に比べて同じ残容量（記録媒体の空き容量）に対する撮影可能枚数が増加する。このような撮影可能枚数は、撮影モードのときに、例えばモニタ１３に表示され、画像ぼけの付加を許容する撮影モードと、許容しない撮影モードとで、この表示は異なったものとなる。また、画像ぼけの付加量を変更、設定可能な場合には、設定された付加量に応じて、残容量に記録することができる撮影可能枚数の表示を変更してもよい。
【００７０】
サムネイル画像およびクイックビュー画像の生成は、制御回路５による制御下でデータ処理回路１０が行う。静止画本撮影画像、サムネイル画像およびクイックビュー画像に付加するぼけ量は、前述のように出力する画像の大きさが大きくなる順に、すなわちサムネイル画像、クイックビュー画像、静止画本撮影画像の順に、ぼけ量が小さくなるように調節される、あるいは各画像の見た目のぼけ量（出力媒体(プリント紙、モニタ表示など)上における画像の大きさで正規化したぼけ量の空間周波数特性）が同様になるように付加する画像ぼけの量が調節される。この場合、本撮影静止画像のデータに解像度変換処理を施
してクイックビュー画像およびサムネイル画像に応じたデータサイズに変換し、変換後の各々の画像に対し、それぞれ適切なぼかしが得られるように画像ぼけを付加することが好ましい。このような構成とすることにより、各画像に付加する画像ぼけの量を個別に調節することができる。
【００７１】
あるいは、データ処理回路１０は、画像ぼけが付加された本撮影画像のデータ、または画像ぼけが付加されたスルー画像のデータからサムネイル画像データおよびクイックビュー画像データを生成する構成としてもよい。このような構成とすることにより、本撮影静止画像データからサムネイル画像、クイックビュー画像の各々の画素数に相当する画像を生成し、本撮影静止画像に対して画像ぼけの付加処理を行うとともに、生成された両画素数の画像に対して、それぞれ画像ぼけの付加処理を行う場合に比較して少ない演算量で迅速に、画像ぼけの付加されたサムネイル画像、およびクイックビュー画像を生成することができる。
【００７２】
＜モニタの表示例＞
画像ぼけを付加した画像をモニタ１３へ表示する場合の表示態様について、図４を参照して説明する。図４(a)は、画像ぼけを付加しないでスルー画像を表示するモニタ１３を
例示する図である。図４(a)において、主要被写体３００の背後に被写体３０１が、被写
体３０１のさらに後方に被写体３０２が、それぞれ存在する。撮像装置は、ＡＦ動作によってフォーカス調節され、撮像装置に最至近の主要被写体３００に合焦している。
【００７３】
図４(a)に例示したスルー画像に画像ぼけを付加する場合、合焦している主要被写体３
００より遠方に位置する被写体の領域に画像ぼけが付加される。付加されるぼけ量は、主要被写体３００の撮影距離との差がより大きい（より遠方に位置する）被写体３０２の方が被写体３０１よりも大きい。本実施形態の撮像装置は、このような画像ぼけを付加したスルー画像を図４(b)のようにモニタ１３に表示する。
【００７４】
図４(b)によれば、画像ぼけが付加された領域／付加されない領域を撮影者が容易に視
認できるように、画像ぼけを付加しない領域(この場合は主要被写体３００の領域)の境界部を強調表示する。本実施形態では、主要被写体３００の輪郭を太線で表示して強調を表す。また、画像ぼけの付加量は遠方に位置する被写体ほど大きくしてよく、主要な各被写体の輪郭の線の太さを変えることによって強調の違いを表すことができる。なお、図４(b)では、画像ぼけを付加しない領域と主要被写体（３００）の領域とが同一の場合の例を
示したが、合焦状態にない被写体であっても画像ぼけを付加しない場合があってもよい。すなわち、画像ぼけを付加しない領域は、必ずしも合焦状態にある主要被写体とは限らない。
【００７５】
なお、以上のモニタ表示は、撮像範囲の移動があった場合（ステップＳ１０５を肯定判定）、および一部被写体の移動があった場合（ステップＳ１０７を肯定判定）には、画像ぼけを付加する対象領域の移動がリアルタイムで反映される。
【００７６】
モニタ１３に画像ぼけを付加したスルー画像を表示する例を説明したが、本撮影動画像、本撮影静止画像やサムネイル画像、クイックビュー画像、あるいは記録媒体１２に記録された画像データに対応する再生画像に画像ぼけを付加し、それぞれをモニタ１３に表示する場合も同様である。
【００７７】
このように画像ぼけが付加された画像は、画像ぼけを付加しない領域(この場合は主要
被写体３００の領域)と、画像ぼけを付加した領域(この場合は主要被写体３０１および３０２を含む領域)とを含む全領域画像として、撮影動作中あるいは記録媒体１２から画像
データを読み出して再生画像を表示する再生モード中に、モニタ１３に表示される。モニ
タ１３に表示された画像は、操作部材７からの表示拡大操作に基づいて、撮影動作中あるいは再生モード中に、全領域画像の中で任意の領域を拡大して表示する（電子ズーム）ことが可能に構成される。
【００７８】
＜電子ズーム＞
電子ズーム動作は、モニタ１３が画像を表示しているときにその表示倍率を変更するために、撮影レンズ２による光学的な拡大動作（光学ズーム）を補完するように、操作部材７からのズーム操作（拡大／縮小操作）信号に基づいて行われる。電子ズーム動作では、補間演算処理によって生成された画像に対してさらに補間処理が行われるため、拡大倍率が大きくなるほどズームアップ後の画質が劣化する。画質劣化は、例えば、モニタ１３上で画像の斜めエッジ部のエリアシング（ぎざぎざ）として観察される。そこで、この画質劣化の度合いを許容範囲内に収めるように、あらかじめ電子ズームによる最大拡大倍率が定められている。
【００７９】
また、画像ぼけの付加と電子ズーム動作の双方を行う場合には、画質劣化を抑えるために、電子ズーム後に画像ぼけを付加する構成とする。電子ズームによる拡大倍率によって画像ぼけの付加量を変更しない場合であって、例えば、電子ズームによる連続した拡大が指示された場合のある時点の画像ぼけの付加処理は、その時点までに電気的に拡大された画像ぼけの付加されていない画像データを、さらに電気的に拡大した上で画像ぼけの付加処理を行う。このような処理は、電気的な拡大を行う際に、拡大処理を施す前の画像ぼけが付加されていない画像データを随時記憶しておくことによって実現することができる。このような構成によれば、画像ぼけの付加処理によって画像の高周波数成分が抑制されるので、同じ拡大倍率（電子ズーム倍率）でもエリアシングの影響が低減され、画質が向上する。すなわち、この構成においては、画像ぼけの付加処理がエリアシングの低減処理を兼用する。この結果、電子ズーム動作前に画像ぼけを付加する構成に比べて、電子ズーム動作後に画像ぼけを付加する構成の方が電子ズームの最大拡大倍率を高く設定できる。
【００８０】
上記理由により、画像ぼけを付加した画像と、付加しない画像とで電子ズームによる最大拡大倍率を異なる値としてもよい。
【００８１】
また、付加する画像ぼけの程度が大きいほど電子ズームの最大拡大倍率を高く設定するなど、付加する画像ぼけの程度に応じて電子ズーム倍率の設定範囲を変更する構成としてもよい。
【００８２】
一方、画像データを電子ズームによって縮小する際には上記のようなエリアシングによる画質劣化の問題が生じないので、画像ぼけの付加処理を電子ズームによる縮小処理前に行っても縮小処理後に行っても構わない。以上説明した電子ズームは、撮影時も記録媒体１２に記録された画像データを読み出して表示する再生時も同様の動作が可能である。
【００８３】
一方、撮影レンズ２の焦点距離によって光学的なぼけの量が異なることが知られている。撮影レンズ２がズームレンズである場合には、ズームの度合い(拡大度合い)に応じて光学的なぼけの量が異なる。従って、同一操作部材の連続的な操作によって光学的なズーム動作に継続して電子ズーム処理が行われる場合のみならず、例えば再生モード時の光学的なズーム動作を伴わない単なる電子ズーム動作の場合にも、電気的な拡大動作である電子ズーム処理時に電気的に付加されるぼけ量を、拡大倍率の変更が指示されるたびに変更された表示倍率に応じて変更する構成とすれば、撮影者にとって違和感のない動作が実現できる。
【００８４】
以下、撮影レンズ２として長焦点距離端(望遠端)と短焦点距離端(広角端)とでＦナンバーの異なるズームレンズ(ズーム撮影光学系)を用い、長焦点距離端のズーム状態で、さら
に電子ズームによる電気的な拡大が指示された場合の画像ぼけの付加について説明する。例えば、撮影レンズ２として焦点距離８mm(光学絞りＦ１.４)〜２３mm(光学絞りＦ２)の
間で焦点距離の変更が可能なズームレンズを用いて、モニタ１３に表示されている撮影画像の拡大が指示されると、長焦点距離端である焦点距離２３mmまで撮影レンズ２が駆動され、それ以降は、電子ズーム(解像度(画素数)変換)による電気的な拡大処理が行われる。撮影レンズ２の光学絞り値は、焦点距離の変更駆動に連動して、例えばＦ１.４とＦ２と
の間で２値的に変化する。
【００８５】
撮影レンズ２の焦点距離が長焦点距離端(所定の値)に達し、電子ズーム動作が開始されると、電気的な画像ぼけの付加が自動的に開始される。例えば、電子ズームの拡大指示による拡大画像が焦点距離３８mmに相当する電気的な拡大画像であった場合には、光学絞りＦ２.８、即ち、長焦点距離端での光学絞り値よりさらに絞り込んだ仮想的な絞り値に相
当するようにぼかしを付加する。もちろんこの場合に、長焦点距離端での光学絞り値(Ｆ
２)に相当する画像ぼけを付加するものであってもよい。
【００８６】
また、逆に長焦点距離端での光学絞り値(Ｆ２)より、開放方向に変更した絞り値に相当する画像ぼけを付加するものであってもよい。これらの場合に付加されるぼかし量は、さらに電気的な拡大倍率から決定される撮影レンズ２の仮想的な焦点距離(上記の例では３
８mm)を考慮して決定される。即ち、電気的な拡大倍率が大きくなることは、仮想的な焦
点距離が大きくなることを意味し、これによって付加されるぼかし量が大きくなるように設定される。
【００８７】
さらにまた、撮影レンズ２として光学絞り値を設定可能なズームレンズを用いた場合で、上記と同様に、長焦点距離端のズーム状態で、さらに電子ズームによる電気的な拡大が指示された場合に、設定された光学絞り値に相当する画像ぼけを電気的に付加する構成としてもよい。この他にも、上記の光学絞り値の変更範囲を越えた仮想的な絞り値を設定し、電子ズームによる拡大動作の際に、仮想的な絞り値に相当する画像ぼけを電気的に付加する構成としてもよい。
【００８８】
なお、上記の説明では、撮影レンズ２の焦点距離が長焦点距離端に達し、電子ズーム動作が開始されると、電気的な画像ぼけの付加が開始される例について説明したが、拡大指示(表示倍率の拡大変更指示)によって撮影レンズ２の焦点距離を大きく変更する際に、焦点距離が撮影レンズ２の実現できる最長の焦点距離未満の所定の値となったら、画像ぼけの付加を自動的に開始する構成としてもよい。このような構成によれば、撮影者が特に画像ぼけの付加を指示することなく、拡大倍率の変更操作のみによって自動的に画像ぼけの付加処理が開始されるので、快適な操作感を実現できる。
【００８９】
（遅延処理）
上述したように、画像ぼけの付加と電子ズームアップ（表示倍率拡大）動作の双方を行う場合に電子ズーム後に画像ぼけを付加する場合には、画像ぼけを付加していない原画像に電子ズームアップ処理を施してから、ズームアップ後の画像に対して画像ぼけを付加するという２段階の処理が必要になる。これに対して電子ズームダウン（表示倍率縮小）動作の場合は、画像ぼけが付加された画像にそのまま電子ズームダウン処理を施してもよいことから、電子ズームアップ時と電子ズームダウン時とで処理時間に差が生じる。
【００９０】
制御回路５は、撮影時の電子ズームダウン動作に要する時間が、電子ズームアップ動作に要する時間と同等になるように電子ズームダウン処理を遅延させる。これにより、画像ぼけの付加と電子ズーム動作の双方を行う場合における電子ズームアップと電子ズームダウンとでレスポンスの差が抑えられ、撮影者に違和感を与えないようにすることができる。
【００９１】
電子ズームダウン処理の遅延は、制御回路５が行う時系列の処理の合間に単純にウェイト処理を挿入するなどの他、画像ぼけを付加していない原画像に電子ズームダウン処理を施してからズームダウン後の画像に対して画像ぼけを付加するという２段階の処理を行ってもよい。
【００９２】
上記電子ズーム後に画像ぼけを付加する構成は、本撮影において撮像された静止画像に対してのみ行うようにしてもよい。スルー画撮影時にモニタ１３に表示されている画像に対して電子的な拡大、縮小が指示された場合には、画像ぼけが付加された画像に対して電子ズームアップもしくは電子ズームダウン処理を行い、レリーズ釦の全押し操作によって得られた本撮影による静止画像が画像ぼけを付加してモニタ１３に表示されているとともに、電子的な拡大が指示された場合には、画像ぼけを付加していない原画像に電子ズームアップ処理を施してから画像ぼけを付加する。また、本撮影時の電子ズームダウン時には上記遅延処理を含める。スルー画撮影時は、エリアシングによる画質劣化が問題となりにくいため、拡大縮小動作時のレスポンスを優先させる。一方、本撮影において撮像された静止画像に対しては、電子ズーム後（解像度変換後）にぼけ付加処理を施すことで、本撮影画像の画質維持を優先させる。
【００９３】
＜ぼけ量変更操作部材＞
操作部材７を構成するぼけ量変更操作部材について説明する。画像ぼけの付加量を変化させるためのLPF特性（あるいは点拡がり関数）の変更は、動画像（スルー画像）のフレ
ームレートに合わせてリアルタイムに遅延なく行うことが望ましい。このために、ぼけ量変更操作部材は、操作時間に応じて出力値（すなわち付加されるぼけ量）を決定するものでなく、操作量に応じて異なる値を出力する操作部材が好適である。
【００９４】
１．撮影時のぼけ量変更操作
撮影時は、光学的なズーム操作を行うことが想定されるので、ズーム操作部材と別にぼけ量変更操作部材を設けることが好ましい。
(1-1)図５は、押圧操作部材によってぼけ量変更操作部材５１を構成するカメラの例を説
明する斜視図である。図５において、カメラ筐体に対して回転可能に構成されるモニタ１３の上部にぼけ量変更操作部材５１が配設されている。押圧量（操作量）に応じて異なる３種類以上の大きさの操作信号を、ぼけ量を増やすための操作信号として発する操作部材［増］と、押圧量に応じて異なる大きさの操作信号を、ぼけ量を減らすための操作信号として発する操作部材［減］とで一対をなす。ぼけ量変更操作部材５１［増］、［減］をズーム操作部材５４［Ｔ］、［Ｗ］と別に配設することで、操作部材を共用する場合と異なり、ズーム操作しながらぼけ量変更操作を行うことが可能である。さらに、押圧操作部材で構成したことにより、回転操作部材に比べて操作時に生じる撮像装置の揺動を抑えることができる。
【００９５】
(1-2)図６は、図５の例と同様の操作信号を出力する押圧操作部材によってぼけ量変更操
作部材５１を構成するカメラの他の例を説明する斜視図である。図６において、一対のズーム操作部材５４［Ｔ］、［Ｗ］の近傍に一対のぼけ量変更操作部材５１［減］、［増］が配設されている。
【００９６】
(1-3)図７は、ジョグダイアル５２によってぼけ量変更操作部材およびズーム操作部材を
構成するカメラの例を説明する斜視図である。図７において、ジョグダイアル５２は、回転操作に応じてズーム操作信号（回転方向がズームアップもしくはズームダウンを示し、回転量がズーム操作量を示す）を発するとともに、押圧量に応じてぼけ量を増減するための操作信号を発する。ジョグダイアル５２は、不図示のバネ部材により図７のカメラの背面方向に付勢されており、ジョグダイアル５２が押し込まれるとぼけ量を増やすための信
号（押圧量によって異なる３種類以上の大きさの操作信号）を発し、ジョグダイアルが引き出されるとぼけ量を減らすための信号を発する。撮影者は、ジョグダイアル５２を操作して所望のぼけ量が得られた段階で別に設けられた決定釦を操作して付加するぼけ量を決定する。ズーム操作方向とぼけ量変更操作方向とを異ならせることで、操作部材（ジョグダイアル５２）を２系統の操作に共用できる。
【００９７】
(1-4)図８は、仮想絞り環５３によってぼけ量変更操作部材を構成するカメラの例を説明
する斜視図である。図８において、撮影レンズ２の鏡筒には、撮影レンズ２の光軸に平行な軸を中心に回転可能な仮想絞り環５３が配設されている。仮想絞り環５３には、回転角を示す指標が仮想絞り値の表示（例えばＦ１、Ｆ２．８等）とともに所定の仮想絞り段数毎（例えば、絞り段数１段毎や１／２段毎）に設けられており、各絞り位置にてクリック感を生じる構造となっている。例えば、仮想絞り環５３を仮想絞り値が開放する方向に２段回転させた際には、光学絞りを２段開放させた場合に相当する画像ぼけが付加される。仮想絞り環５３が回転操作されると、回転角度（仮想絞り段数）に応じてぼけ量を増減するための操作信号を発するように構成される。筐体の上部に配設される一対のズーム操作部材５４［Ｔ］、［Ｗ］と別に仮想絞り環５３を配設することで、右手でズーム操作しながら左手でぼけ量変更操作が可能である。
【００９８】
(1-5)図９は、図５の例と同様の操作信号を出力する押圧操作部材によってぼけ量変更操
作部材５１を構成するカメラの例を説明する斜視図である。図９において、カメラ筐体の左側面に一対のぼけ量変更操作部材５１［減］、［増］が配設されている。押圧量に応じてそれぞれがぼけ量を増減するための操作信号を発する点は、図５および図６の場合と同様である。カメラ筐体の右上面には、一対のズーム操作部材５４［Ｔ］、［Ｗ］が配設されている。図９の構成によれば、右手でズーム操作を行いながら、左手でぼけ量変更操作を行うことができる。
【００９９】
(1-6)図１０は、図９の変形例を示す図である。図９において、カメラ筐体の左側面に一
対のぼけ量変更操作部材５１［減］、［増］が配設され、カメラの右グリップの上面に、一対のズーム操作部材５４［Ｔ］、［Ｗ］が配設されている。図１０の構成でも、右手によるズーム操作と左手によるぼけ量変更操作とを同時に行うことができる。
【０１００】
(1-7)図１１は、図５の例と同様の操作信号を出力するスライド部材である操作ぼけ量変
更操作部材５１Ａおよびズーム操作部材５４Ａを近傍に配設するカメラの例を説明する図である。ぼけ量変更操作部材５１Ａは、スライド量（方向）に応じてぼけ量を増減するための操作信号（異なる３種類以上の大きさの操作信号）を発するように構成される。ズーム操作部材５４Ａは、スライド量（方向）に応じてズームアップ／ズームダウンするための操作信号を発するように構成される。両操作部材を近接させ、操作方向を揃えたことで、異なる指を用いて同時にズーム操作およびぼけ量変更操作を行うことが可能である。上記の図５〜図１１の例においては、ぼかし量の大きさを変更する操作部材として操作量に応じて異なる３種類以上の大きさの操作信号を発する操作部材を用いる場合について説明した。このような構成とすれば、画像に対して付加するぼけ量を時間とともに良好に変化させることができ、特に動画像、スルー画像に画像ぼけを付加する場合に好適である。もちろん、これに代えて、操作部材として２値的な出力信号を発する部材を採用し、操作時間に応じて、画像に付加するぼけ量を変更する構成としてもよい。例えば、ズームアップ／ズームダウンを指示する操作部材と、ぼけ量変更操作部材を兼用する構成とすれば、操作部材の数を減らすことができ、装置の小型化が実現できる。例えば、スルー画像、動画像の撮影時には、ズームアップ／ズームダウンを指示する操作部材として機能し、再生モード時にはぼけ量変更操作部材として機能するように構成できる。また、後述する４連スイッチ５５を用いる構成としても構わない。この場合の４連スイッチ５５は、撮影中はぼけ量変更操作部材として機能し、メニュー選択のための操作部材としては機能しない。
【０１０１】
２．再生時のぼけ量変更操作
再生時(電気的な画像ぼけの付加が許可された状態で、記録された画像を再生する場合)はぼけ量変更操作と電子ズーム操作とが可能に構成され、光学的なズーム操作は行われない。制御回路５は、記録媒体１２に記録されている画像データを読み出し、読み出しデータに対して復号化処理を施し、復号化後のデータをデータ処理回路１０へ送る。制御回路５は、復号化後のデータから主要被写体の抽出処理を行い（ステップＳ１０３と同様）、抽出した主要被写体以外の領域（すなわち背景領域）に対する画像ぼけの付加処理をデータ処理回路１０へ指示する（ステップＳ１０４と同様）。制御回路１０５はさらに、ぼけ量変更操作が行われるとぼけ量を変更させる（ステップＳ１０９、Ｓ１１０と同様）。
【０１０２】
(2-1)図５および図６、図９〜図１１に例示したカメラの再生時には、ぼけ量変更操作部
材５１（図１１の場合は５１Ａ）［増］、［減］が押圧操作されると、それぞれがぼけ量を増減するための操作信号を発するように構成される。
【０１０３】
(2-2)図７に例示したカメラの再生時には、ジョグダイアル５２の回転操作によってぼけ
量を増減するための操作信号を発するように構成される。すなわち、回転方向がぼけ量の増減に対応し、回転量が増減量に対応するように、ぼけ量を変化させるためのジョグダイアル５２の操作が撮影時と異なり、ジョグダイアル５２によって再生時に変更される機能が限定される。
【０１０４】
(2-3)図５〜図７に例示したカメラの場合、メニュー選択のための操作部材として配設さ
れている４連スイッチ（ＳＷ）５５を再生時のぼけ量変更操作部材としてもよい。
【０１０５】
(2-4)図８に例示したカメラの再生時に、仮想絞り環５３の操作に基づいて、再生画像に
付加される画像ぼけの量を変更する構成としてもよい。この場合、仮想絞り環５３は、実際に光学絞りの絞り値を変更する操作部材であっても構わない。この操作部材から出力される操作信号は制御回路５に入力され、制御回路５の制御のもとで、再生画像に対する画像ぼけの付加量が変更される。この操作部材の操作によって、光学絞りが駆動され光学絞り値が変更されたとしても、再生画像に対して何ら影響を及ぼすものではないことは言うまでもない。消費電力の観点から、再生モード時にこの操作部材が操作された場合には、光学絞りを駆動することなく、再生画像に対する画像ぼけの付加量を変更することが好ましい。
【０１０６】
(2-5)また、スルー画撮影時には画像ぼけの付加を行わず、本撮影された静止画像を記録
媒体１２に記録する前、もしくは記録した後に、モニタ１３に表示した上で画像ぼけを付加するような場合には、ズーム操作と画像ぼけの付加、変更操作は必ずしも同時に行う必要はない。従って、図５から図１１のぼけ量を変更する操作部材５１,５２,５３,５１Ａ
は必ずしも必要ではなく、ズーム操作部材５４のような他の用途に用いられる操作部材で兼用することができる。例えば、本撮影された静止画像がモニタ１３に表示されている状態でズーム操作部材５４のスイッチ［Ｔ］を押圧すると、操作時間に応じて画像ぼけの量が大きくなり、スイッチ［Ｗ］を押圧すると、操作時間に応じて画像ぼけの量が小さくなる。また、スイッチ［Ｔ］とスイッチ［Ｗ］を同時に押圧操作すると、モニタ１３上で付加された画像ぼけをリセット(画像ぼけが付加されていない状態にする)ことができる。このような操作は、４連スイッチ５５によって行ってもよい。付加する画像ぼけの量を４連スイッチ５５を用いて変更する構成とすれば、ズーム操作部材５４等の操作により、モニタ１３上の像を電気的に拡大することができ、画像ぼけを付加しつつ、細部にわたって画像確認を行うことができる。
【０１０７】
上記のようなぼけ量変更操作に伴い、仮想絞り値を画像とともにモニタ１３に重畳表示
するように構成してもよい。仮想絞り値は、付加される画像ぼけ量と等価な光学ぼけを与える光学絞り値とする。仮想絞り値は、例えば、画像ぼけの付加量を決めるLPF特性（あ
るいは点拡がり関数）を示すデータの関数として算出してもよいし、画像ぼけの付加量を引数としてルックアップテーブルから読み出せるようにあらかじめテーブル化しておいてもよい。このように算出した仮想絞り値が表示されることにより、撮影者は、付加される画像ぼけの量を直感的に把握することができる。
【０１０８】
仮想絞り値をモニタ１３に表示する場合、モニタ１３に実際の撮影レンズ２の光学絞り値を表示しているときは、光学絞り値と仮想絞り値とを異なる態様（例えば異なる表示色）で表示するとより一層好適である。異なる態様で表示することで、撮影者が両者を識別し易くなる。
【０１０９】
トリミング等の画像編集作業などのために、再生モード時に電子ズーム操作が行われると、モニタ１３の表示画面には再生画像の一部が表示される。この場合、撮影時に合焦した主要被写体が表示中の電子ズーム範囲に含まれないことがある。この場合には、モニタ１３の表示範囲に対応する画像信号についての高周波数成分の積算値（いわゆる焦点評価値）を最大にする領域を抽出し、この領域をズーム画面における主要被写体とみなす。焦点評価値の最大値を含む領域は、表示中の電子ズーム画面の中で最もピントが合っている（画像の尖鋭度が高い）と思われる領域である。このような構成とすれば、モニタ１３が拡大表示しようとする範囲に、撮影の際の自動合焦動作における焦点検出領域が含まれていない場合であっても、画像ぼけを付加しない領域を適切に判断することができる。モニタ１３が拡大表示しようとする範囲に、自動合焦動作に用いられた焦点検出領域がある場合には、この領域を基準に、この領域以外の領域に画像ぼけを付加する構成としてもよい。この場合には、上述の高周波数成分の積算値の算出処理は行わない。制御回路５は、この抽出領域を基準に、抽出した領域以外の領域（すなわち背景領域）に対する画像ぼけの付加処理をデータ処理回路１０へ指示する（ステップＳ１０４と同様）。制御回路５はさらに、ぼけ量変更操作が行われるとぼけ量を変更させる（ステップＳ１０９、Ｓ１１０と同様）。
【０１１０】
なお、モニタ１３の表示範囲に対応する画像信号から焦点評価値の最大値を含む領域が抽出不能の場合や、電子ズーム画面の中央を基準にするように指示されている場合には、表示中の電子ズーム画面の中央部をピントが合っている領域とみなす。制御回路５は、この中央部を基準に、中央部以外の領域に対する画像ぼけの付加処理をデータ処理回路１０へ指示する。このような構成とすれば、注目する被写体が存在する可能性が高い画面の中央部を除いた領域に画像ぼけが付加されるので、誤った場所に画像ぼけが付加されてしまう可能性が低減する。
【０１１１】
以上説明した実施形態によれば、以下の作用効果が得られる。
（１）撮像装置（画像再生装置、画像処理装置）は、画像信号の高周波数成分の積算値を演算して画像の尖鋭度が高い領域を検出し、当該画像信号のうち、検出領域と異なる領域に対応する信号に画像ぼけを付加するようにしたので、画像ぼけを付加すべき領域（ピントが合っている領域と異なる背景領域）を適切に抽出し、ぼかしを付加することができる。
【０１１２】
（２）上記（１）の撮像装置（画像再生装置）は、電子ズーム倍率を高める方向に解像度変換を行って再生画像の一部をモニタ１３に拡大表示する場合、モニタ１３の表示範囲に対応する画像信号から画像の尖鋭度が高い領域を検出するようにしたので、表示範囲の中で画像ぼけを付加すべき領域（ピントが合っている領域と異なる背景領域）を適切に抽出し、ぼかしを付加することができる。上記の電子ズーム動作は、連続的に行われるものに限定されず、トリミングしての拡大動作など１回しか行われない場合も含む。
【０１１３】
（３）上記（１）の撮像装置（画像再生装置）は、電子ズーム倍率を高める方向に解像度変換を行って再生画像の一部をモニタ１３に拡大表示する場合、モニタ１３の表示範囲の中央部に対応する領域を検出するようにしたので、表示範囲の中にピントが合っている領域がない場合に、表示範囲中央部にぼかしを付加することができる。
【０１１４】
（４）解像度変換比率（電子ズーム倍率）に応じて付加する画像ぼけの大きさを変更するようにすれば、従来の光学的なズーム動作において付加される光学的なぼけと同様の動作を実現できる。特に、光学的なズーム動作に継続して電子ズーム動作が行われる場合であっても違和感のない画像を得ることができる。
【０１１５】
（５）画像ぼけの付加と解像度変換（電子ズーム）との双方を行う場合で、少なくとも電子ズーム倍率を高める方向に解像度変換を行う場合は、解像度変換後に画像ぼけを付加する構成とする。これにより、画質劣化が抑えられ、解像度変換前に画像ぼけを付加する構成に比べて、電子ズームの最大拡大倍率を高く設定できる。
【０１１６】
（６）ダイアル部材である操作ぼけ量変更操作部材５３からぼけ量を増減するための操作信号を発するように構成したので、従来の操作性を維持した簡単な操作でぼかしの大きさを変更できる。
【０１１７】
（７）仮想絞り値（付加される画像ぼけ量と等価な光学ぼけを与える光学絞り値）を画像とともにモニタ１３に重畳表示するようにすれば、撮影者は、付加される画像ぼけの量を直感的に把握することができる。この際に電子ズーム倍率に応じた仮想的な焦点距離も表示する構成とすれば、より一層好適である。
【０１１８】
（変形例１）
ぼけ量変更操作部材の操作に応じて画像ぼけの付加量を変更する他に、被写体と撮像装置との間の距離(撮影距離)情報に応じて、デフォルト状態で設定されている画像ぼけ量を変更する構成としてもよい。距離情報は、ＡＦ動作中に取得されている距離情報を用いる。制御回路５は、移動する被写体と撮像装置との間の撮影距離がある時点より短くなると、移動被写体と静止している背景との間の距離が広がったとみなす。移動被写体を対象にＡＦ動作を行う場合、移動被写体に合焦させる動作が連続的に行われるため、移動被写体についての焦点調節状態は変化しない。この場合の制御回路５は、背景領域に対して付加するぼけ量を、上記ある時点と比較して大きくするように制御する。
【０１１９】
反対に、移動する被写体との撮像装置との間の撮影距離がある時点より長くなると、制御回路５は、移動被写体と静止している背景との間の距離が縮まったとみなす。制御回路５は、背景領域に対して付加するぼけ量を、上記ある時点と比較して小さくするように制御する。
【０１２０】
変形例１では、移動被写体および背景間の距離に応じて画像ぼけ量を変更する例を説明したが、複数の移動被写体に対してそれぞれ距離情報を取得し、複数の移動被写体間の距離に応じて各被写体領域に付加するぼけ量を動的に変化させてもよい。複数の移動被写体に対する距離情報は、例えば、複数のフォーカス検出領域ごとに当該領域に存在する被写体までの距離情報を取得すればよい。
【０１２１】
（変形例２）
以上の説明では、画像ぼけを付加した後に半押し操作が解除されると（ステップＳ１１１を否定判定）、画像ぼけの付加を解除するようにしたが、撮影レンズ２の光学絞りが変更された場合にも画像ぼけの付加を解除する構成にしてもよい。光学絞りは、例えば不図
示の絞り環や操作部材７からの操作信号によって変更される。制御回路５は、このような光学絞りの変更指示に応じて、現時点において付加している画像ぼけを一旦解除する。この結果、光学的なぼけと電気的に付加する画像ぼけとの双方を迅速に設定し直すことが可能になる。
【０１２２】
（変形例３）
ステップＳ１０５の説明では、フレーム間の動きベクトルを検出することによって撮影画面に動きがあるか否かを判定するようにした。この代わりに、角速度センサ、角加速度センサ、および加速度センサなどのいずれかの動きセンサを撮像装置に配設し、センサによる検出結果を用いて判定する構成にしてもよい。
【０１２３】
（変形例４）
上述したように、ステップＳ１０５およびステップＳ１０７の判定をともに動きベクトルを用いて行う場合には、ステップＳ１０５の判定処理と、ステップＳ１０７の判定処理とを並行して行ってもよい。
【０１２４】
（変形例５）
画像ぼけを付加することなしにスルー画像をモニタ１３に表示するように設定され、本撮影で得られる本撮影画像に対してのみ画像ぼけを付加する設定が行われている撮像装置の場合、上記ステップＳ１１３で説明した内容に代えて次のように本撮影用の露出を決定するとよい。すなわち、画像ぼけが付加されていない直近のスルー画像データの信号値（明るさ情報）に基づいて本撮影用の露出を演算し、この演算値を本撮影画像に付加される画像ぼけの量に応じて補正し、補正後の演算値に基づいて本撮影用の露出を決定する。撮像装置は、決定された露出に基づいて、撮像素子１の電子シャッタ速度（電荷蓄積時間）、絞り、撮像素子１の出力する画像信号の増幅度等を設定し、撮像動作を行う。これにより、例えば、スポット測光領域に輝点が含まれており、この輝点に画像ぼけを付加すると画像ぼけ領域が測光領域より大きくなってしまう場合のように、画像ぼけが付加されることによって画像の明るさの判定が変化する場合でも、適切な明るさの本撮影画像が得られる。
【０１２５】
（変形例６）
画像ぼけの付加（および付加内容の変更）の許可／禁止を判定する処理において、例えば、夜景ポートレートモードであっても画像の背景領域に所定レベル以上の明るさを有する領域が存在しない場合に、画像ぼけの付加（および付加内容の変更）を禁止する例を説明したが、次のようにしてもよい。すなわち、スルー画像もしくは本撮影画像をモニタ１３に表示する場合には画像ぼけの付加を禁止することをデフォルト設定とし、操作部材７から画像ぼけの付加を指示する操作信号が制御回路５へ入力された場合にのみ、画像ぼけの付加を許可する。もちろん、画像ぼけの付加が許可された状態では、画像ぼけを付加したデータを記録媒体１２へ記録可能に構成される。
【０１２６】
（変形例７）
ポートレートモードなどの撮影モードの設定状態に応じて画像ぼけの付加（および付加内容の変更）の許可／禁止を判定する処理に代えて、スルー画像中に人の顔が認識されるか否かに応じて画像ぼけの付加（および付加内容の変更）の許可／禁止を判定してもよい。この場合の制御回路５は、上述したＡＦ動作の終了後に撮像される画像であって、画像ぼけが付加されていないスルー画像を用いて公知の顔認識処理を施し、顔領域を抽出する。制御回路５は、抽出した顔領域を含む被写体を主要被写体とする。人の顔が認識された画像だけ、制御回路５によって画像ぼけの付加を許容する構成としてもよい。このような構成とすれば、人の顔が認識された場合に自動的にポートレート調の撮影を行うことができる。さらに、人の顔の数（例えば２人以下）、大きさ（所定値以上）の条件を満足した
ときに画像ぼけを付加するように構成してもよい。
【０１２７】
なお、画像ぼけの付加（および付加内容の変更）を本撮影画像にのみ行うように設定されている（スルー画像には付加しない）場合にも、画像ぼけが付加されていないスルー画像を用いて顔認識処理を施し、顔領域が認識された場合に本撮影画像に対する画像ぼけの付加（および付加内容の変更）を許可するように構成してもよい。このような構成とすれば、被写体認識処理を正確かつ迅速に行える。
【０１２８】
（変形例８）
画像ぼけの付加が許可された場合に絞り優先オートモードに設定する（ステップＳ１０２）代わりに、撮影レンズ２の光学絞りを所定の絞り値（例えば、開放値）に設定する構成にしてもよい。光学絞りに起因する光学ぼけが所定の状態に維持されるので、被写体輝度の変動にともなって本画像のぼけ量（光学ぼけと付加された画像ぼけの総和）が変動することが防止される。これにより、画像ぼけの付加量の設定変更操作が容易になる。なお、光学絞りを所定の絞り値に設定することにより、設定前後でモニタ１３に表示されるスルー画像の明るさが変化しないように、光学絞りの変更段数に応じてリアルタイムに撮像素子１の電荷蓄積時間（もしくは撮像素子１より出力される信号の増幅率）を異ならせるとよい。
【０１２９】
上記所定の絞り値を開放値に固定する場合には、被写界深度が浅くなり、画像ぼけを付加する領域の確認や指定操作が容易になる。
【０１３０】
（変形例９）
スルー画像から抽出した主要被写体の背景の領域に対して画像ぼけの付加を行うようにしたが、操作部材７の操作信号（例えば、カーソル位置を示す信号）によって示される領域に画像ぼけの付加を行うように構成してもよい。カーソルで示される被写体に画像ぼけが付加され、主要被写体を引き立たせる撮影効果が得られる。
【０１３１】
（変形例１０）
以上の説明では、レリーズ釦が半押し操作されると（ステップＳ１０１を肯定判定）、モニタ１３に表示される画像に画像ぼけを付加するようにしたが、操作部材７（例えば、ビュースイッチ）が操作されたときに画像ぼけを付加した画像をモニタ１３表示するように構成してもよい。ビュースイッチの操作に応じて画像ぼけが付加された画像をモニタ１３へ表示する場合、ビュースイッチからの操作信号が継続している間は同一の撮像画面（スルー画像）を連続して表示すると好適である。撮影者は、表示画面（フリーズ画面）をゆっくり確認することができる。また、これにより、撮影者が画像ぼけを確認したいときのみ、画像ぼけが付加されるので信号処理の負担が少ない。また、従来の一眼レフカメラと同様の使い勝手を実現することができる。
【０１３２】
なお、モニタ１３の表示がオフされている場合には、ビュースイッチからの操作信号を無効にする。この場合には、画像ぼけの付加（および付加内容の変更）を本撮影画像にのみ行うように設定されている場合と同様に、スルー画像に対する画像ぼけの付加を省略する。
【０１３３】
（変形例１１）
変形例１０と反対に、モニタ１３の表示がオフされている状態でビュースイッチからの操作信号が入力される場合に、モニタ１３をオン（起動）させてもよい。この場合には、ビュースイッチの操作に応じてモニタ１３を起動し、画像ぼけが付加された画像をモニタ１３へ表示する。ビュースイッチからの操作信号が継続している間は同一のスルー画像を静止画像として表示すると好適である。
【０１３４】
（変形例１２）
撮影時の撮影モードがポートレートモード、およびマクロモードに設定されている場合に画像ぼけの付加（および付加内容の変更）を許可する例を説明したが、次のように構成してもよい。すなわち、ポートレートモード、およびマクロモードに設定されている場合の操作メニューモードに「画像ぼけ」に関するメニュー項目を含め、このメニュー項目において「画像ぼけ」を「付加する」ように指示された場合に画像ぼけの付加（および付加内容の変更）を許可する。一方、撮影モードがポートレートモード、およびマクロモードであっても、メニュー項目において「画像ぼけ」を「付加しない」ように指示された場合には画像ぼけの付加（および付加内容の変更）を禁止する。ポートレートモードやマクロモードでも、画像ぼけを付加するか否かを自分で決めたいという撮影者の希望をかなえる撮像装置が得られる。一方、画像ぼけの付加を許可する／許可しないの設定が、撮影モードの設定より上位にあって(優先して設定されて)、ポートレートモード、マクロモード以外の撮影モードであっても、画像ぼけの付加を許可する設定となっているときには、画像ぼけの付加を許容する構成としてもよい。
【０１３５】
（変形例１３）
付加する画像ぼけの量を変更する際、ぼけ量変更操作部材の押圧量（もしくは回転量）に応じて付加する画像ぼけ量を変更（決定）するようにしたが、ぼけ量変更操作部材からの操作信号によって示される仮想絞り値に応じて付加する画像ぼけ量を変更する構成にしてもよい。この場合の制御回路５は、ぼけ量変更操作部材からの操作信号に応じた仮想絞り値を画像とともにモニタ１３に重畳表示させるとともに、この仮想絞り値に対応する画像ぼけを付加するようにデータ処理回路１０へ指示を送る。仮想絞り値は、現時点の画像に付加する画像ぼけ量と等価な光学ぼけを与える光学絞り値とする。ぼけ量変更操作を仮想絞り値（例えばＦ１１→Ｆ５．６）の変更操作として行う構成にすることで、撮影者は、現時点の画像に対して付加される画像ぼけの量を直感的に把握することができる。
【０１３６】
（変形例１４）
付加する画像ぼけの量を変更する際、ぼけ量変更操作部材からの操作信号によって示される仮想絞り段数に応じて付加する画像ぼけ量を変更（決定）する構成にしてもよい。この場合の制御回路５は、ぼけ量変更操作部材からの操作信号に応じた仮想絞り段数を画像とともにモニタ１３に重畳表示させるとともに、この仮想絞り段数に対応する画像ぼけを付加するようにデータ処理回路１０へ指示を送る。仮想絞り段数は、現時点の画像に付加する画像ぼけ量と等価な光学ぼけを与える光学絞り段数とする。ぼけ量変更操作を仮想絞り段数（例えば−２段）の変更操作として行う構成にすることで、撮影者は、現時点の画像に対して付加される画像ぼけの量を直感的に把握することができる。
【０１３７】
（変形例１５）
画像ぼけの付加と電子ズーム動作の双方を行う場合において、画質劣化を抑えるために電子ズーム後に画像ぼけを付加する点と、付加する画像ぼけの程度（量）が大きいほど電子ズームの最大拡大倍率を高く設定する点とを説明したが、電子ズーム倍率に応じて付加する画像ぼけの程度（量）を変更するように構成してもよい。電子ズーム倍率が小さい場合は、画像ぼけの付加量を小さく抑える。通常、撮影レンズ２の焦点距離が長くなるほど（拡大倍率が大きくなるほど）光学的なぼけの量は大きい。上記の構成によれば、電子的なズーム動作によっても、この動作と同様の画像を得ることができる。
【０１３８】
反対に、電子ズーム倍率が大きい場合は画像ぼけ付加量を大きくするが、電子ズーム前の画像に対する電子ズーム処理による拡大倍率が所定倍（例えば３倍）以上の場合は画像ぼけの付加を省略する（付加量を０にする）。これにより、高い電子ズーム倍率で画質劣化が進んだ画像に対し、無駄な画像ぼけの付加を止めることができる。このような構成は
、画像ぼけを付加した後に電子ズーム処理を行う装置に対しても同様に適用することができる。
【０１３９】
（変形例１６）
本撮影時の露出条件を段階的に変化させ、それぞれの露出値で複数の画像データを得るＡＥブラケティング撮影を行うように撮像装置が設定されている場合に、撮影レンズ２の絞り値を変えて露出条件を変化させることにより、複数の画像データを得るように構成してもよい。この場合の制御回路５は、複数の画像間で本撮影静止画像のぼけ量（光学ぼけと付加された画像ぼけの総和）が略一定になるように、各画像に付加する画像ぼけ量を段階的に異ならせる。これにより、光学絞り値を変更して通常のＡＥブラケティングを行うと各画像間で明るさおよび被写体深度（ぼけの状態）が異なるが、変形例１６では、各画像間で明るさのみが異なって被写体深度が同等の画像を得ることができる。
【０１４０】
（変形例１７）
本撮影時の画像ぼけの付加量を段階的に変化させ、それぞれの付加量で複数の画像データを得る画像ぼけブラケティング撮影を行うように構成してもよい。制御回路５は、複数の画像間で画像ぼけの付加量を段階的に異ならせる。これにより、本撮影時の露出条件を変化させなくても、各画像間で被写体深度が異なる画像を得ることができる。
【０１４１】
（変形例１８）
画像ぼけの付加が許可された場合に絞り優先オートモードに設定したり（ステップＳ１０２）、撮影レンズ２の光学絞りを所定値に設定したり（変形例８）する代わりに、撮像装置が決定した制御絞り値に応じて、付加する画像ぼけの大きさを決定する構成にしてもよい。この場合の撮像装置は、露出モードがプログラムオートモードまたはシャッタ速度優先オートモードに設定されている。プログラムオートモードは、明るさ情報に応じて制御絞り値および制御シャッタ秒時（電荷蓄積時間）の組み合わせを決定する露出モードである。この際に、さらに画像信号の増幅度を変更するものであってもよい。制御絞り値および制御シャッタ秒時（電荷蓄積時間）等の組み合わせは、プログラム線図データとしてあらかじめ制御回路５内に記憶されている。シャッタ速度優先オートモードは、設定されているシャッター秒時（電荷蓄積時間）で適正露出が得られるように、明るさ情報に応じて制御絞り値等を決定する露出モードである。
【０１４２】
露出モードがプログラムオートモード、またはシャッタ速度優先オートモードの場合、撮影時の撮影レンズ２の光学絞り値は制御絞り値に制御されるので、検出される被写体の明るさ情報によって、光学絞り値に起因する光学ぼけの大きさが異なる。具体的には、制御絞り値が開放値に近づくと光学ぼけが大きくなり、制御絞り値が絞り込まれると光学ぼけが小さくなる。そこで、このような光学ぼけの大きさの変動をキャンセルするように、制御絞り値に応じて付加する画像ぼけの大きさを決定する構成にすれば、本画像のぼけ量（光学ぼけと付加された画像ぼけの総和）を一定に保つことができる。
【０１４３】
＜モニタ表示の変形例１＞
画像をモニタ１３へ表示する場合の他の表示態様について、図４(c)を参照して説明す
る。図４(c)によれば、画像ぼけが付加された領域／付加されない領域を撮影者が容易に
視認できるように、画像ぼけを付加しない領域(この場合は主要被写体３００の領域)を他の領域に比べて明るく表示する。図４(c)では、主要な各被写体の輪郭の線の太さを変え
ることによって明るさの違いを表しており、線が太いほど輝度を高めて明るく表示される。つまり、主要被写体３００を一番明るく表示し、被写体３０１、被写体３０２の順に、画像ぼけの付加量（ぼけ効果の大きさ）が多いほどその被写体を暗く表示する。このように被写体の明るさを変えて表示することにより、撮影者は、画像ぼけが付加された領域／付加されない領域を容易に視認できるとともに、表示の明るさから付加された画像ぼけ量
を直感的に把握できる。なお、画像ぼけの付加量が多いほど、その被写体を明るく表示する構成にしてもよい。
【０１４４】
＜モニタ表示の変形例２＞
画像ぼけが付加された画像をモニタ１３へ表示する場合、着色によって画像ぼけの付加量の違いを表してもよい。この場合の制御回路５は、通常、モノクロ画像をモニタ１３に表示させ、画像ぼけを付加した画像を表示する場合には、画像ぼけを付加した領域に色をつけて表示させる。この際、画像ぼけの付加量（ぼけ効果の大きさ）が多いほど、その被写体を色濃く表示させる。このように被写体の色の濃淡を変えて表示することにより、撮影者は、画像ぼけが付加された領域／付加されない領域を容易に視認できるとともに、色の濃淡から付加された画像ぼけ量を直感的に把握できる。
【０１４５】
＜モニタ表示の変形例３＞
また、画像ぼけが付加された領域について撮影者の視認性の向上を図るために、モニタ１３による表示画像において画像ぼけの付加量を実際より大きくした上で表示させてもよい。また、撮像装置の小型化によってモニタ１３の大きさが制限される場合には、小さな画面からでも撮影者が容易に視認できるように画像ぼけの付加領域を広げ、強調して表示させてもよい。モニタ１３の画面が小さかったり、モニタ１３の表示画素数が少ない場合に画像ぼけの付加量、付加領域を強調表示することで、画像ぼけが付加された領域／付加されない領域を撮影者にわかりやすく表示することができる。
【０１４６】
以上説明したモニタ表示の変形例１〜３による表示態様は、操作部材７からの操作信号に応じて通常の表示態様（実施形態で説明した表示態様）との間で切り替え可能に構成してもよい。例えば、強調表示スイッチ（不図示）が操作されている間にのみ上記態様で表示する構成とすれば、撮影者が必要とする場合にただちにぼけ付加領域の確認を行うことができ、より一層好適である。
【０１４７】
以上の説明では、主要被写体と異なる背景領域について画像ぼけを付加する例を説明した。この他にも、撮影レンズ２などの撮影光学系や撮像素子１の撮像面に付着したゴミ（異物）やキズによる像を含む撮像画面上の領域について画像ぼけを付加するように構成してもよい。
【０１４８】
上記ゴミ（異物）やキズによる像を含む撮像画面上の領域についての画像ぼけの付加量は、ゴミ（異物）やキズによる像を含む領域とその背景領域とのコントラストに応じて変化させる。コントラストが大きい場合は付加量を大きくし、コントラストが小さい場合には付加量を小さくする。このような構成とすることにより、ゴミ（異物）付着領域等に必要以上の画像ぼけが付加され、本来必要とするべき画像情報が失われてしまうことが防止される。
【０１４９】
撮像装置は、撮像面や撮影光学系に付着したゴミ(異物)やキズを、撮像素子１が出力する画像信号から検出する動作モードを有しており、この動作モードに設定された場合には、画像ぼけの付加されていない画像信号(データ)に対応する画像をモニタ１３に表示する。この動作モードにおいて、画像ぼけの付加を禁止する構成としてもよい。撮影者は、例えば白色の紙を撮像し、モニタ１３に表示された画像をもとにゴミやキズの像を確認することができる。この状態で、データ処理回路１０は、画像データを解析して、ゴミ、キズの像の大きさ、画面上の位置についての情報を得ることができる。このように、画像ぼかしの付加されていない画像信号(データ)をもとに、撮像面や撮影光学系に付着したゴミ(
異物)やキズを検出する構成とすることにより、より正確な検出を行うことができる。
【０１５０】
また、撮像装置が撮像素子１の撮像面に付着したゴミ（異物）やキズを自動的に検出す
る動作モードを有しており、この動作モードに設定された場合、上記ゴミ（異物）を含む撮像面上の領域に対応する画像信号（データ）であって、画像ぼけを付加する前の画像信号（データ）を用いてゴミ（異物）やキズを検出するようにしてもよい。
【０１５１】
以上の実施形態では撮像装置を例に説明したが、記録されている画像データによる再生画像をモニタ１３に表示する画像再生装置、あるいは画像処理装置にも本発明を適用できる。この場合には、撮像素子１からの画像信号の代わりに、メモリカードやハードディスク装置などから読み出した画像データに対して解像度変換や画像ぼけの付加を行う。
【０１５２】
以上の説明はあくまで一例であり、発明を解釈する上で、上記の実施形態の構成要素と本発明の構成要素との対応関係に何ら限定されるものではない。
【符号の説明】
【０１５３】
１…撮像素子
２…撮影レンズ
５…制御回路
７…操作部材
９…信号処理回路
１０…データ処理回路
１１…圧縮／伸張回路
１２…記録媒体
１３…モニタ
１４…表示制御回路
【技術分野】
【０００１】
本発明は、画像にぼかしを付加する画像処理装置に関する。
【背景技術】
【０００２】
３５mm版カメラに比べて撮像面積が小さい電子カメラが普及している。このタイプのカメラは実焦点距離が短いため、３５mm版カメラの場合と同じＦ値（光学絞り値）の撮影レンズを用いても、３５mm版カメラのように背景をぼかした撮影画像が得られにくい。特許文献１には、画像処理によって画像にぼかしを付加する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１２５２８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に開示される処理では、撮影（もしくは再生）時において、画像にぼかしを付加する動作が最適化されているとは言えない。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明による画像処理装置は、画像信号を記録する記録手段と、記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、記録手段から読み出され、ぼかしの付加された再生画像を表示する表示手段と、表示装置の表示画面内で、最も多くの高域空間周波数成分を含んでいる領域を基準領域として抽出する抽出手段と、表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、操作部材が操作され、表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、表示手段の表示画面に次に表示されるべき次表示領域に対応する画像信号の中から、基準領域を抽出させるように抽出手段を制御するとともに、次表示領域に対応する画像信号のうち、基準領域を除いた領域にぼかしを付加させるようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１に記載の画像処理装置において、制御手段は、次表示領域に対応する画像信号の中から基準領域を抽出させる際に、次表示領域に対応する画像信号の中に当該画像の撮影時の自動合焦動作の際に用いられた焦点検出領域がある場合には、当該焦点検出領域を基準領域とするように抽出手段を制御することが好ましい。
請求項３に記載の発明による画像処理装置は、画像信号を記録する記録手段と、記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、記録手段から読み出され、ぼかしの付加された再生画像を表示する表示手段と、表示装置の表示画面内で、基準領域を抽出する抽出手段と、表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、操作部材が操作され、表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、表示手段の表示画面に次に表示されるべき次表示領域に対応する画像信号の中から、基準領域を抽出させるように抽出手段を制御するとともに、次表示領域に対応する画像信号のうち、基準領域を除いた領域にぼかしを付加させるようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１または請求項３に記載の画像処理装置において、表示手段に表示される再生画像に付加されるぼかしの量を変更する回転操作部材を有するのが好ましい。
請求項１または請求項３に記載の画像処理装置において、制御手段は、操作部材によって再生信号の電気的な拡大表示倍率の変更が指示されるたびに、ぼかし付加手段によって
付加されるぼかしの量を変更することが好ましい。
請求項６に記載の発明による画像処理装置は、被写体像を撮像して画像信号を出力する撮像素子と、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、ぼかしの付加された画像信号に対応する画像を、撮像素子による撮像動作と並行して表示する表示手段と、撮像動作中に、表示手段が表示している画像の拡大表示の指示がなされたときに、画像信号に解像度変換を施す解像度変換手段と、撮像動作中に、拡大指示がなされたときに、解像度変換手段によって解像度変換された画像信号を加工してぼかしを付加するようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項６に記載の画像処理装置において、撮像動作中に表示手段が表示している画像の縮小表示の指示がなされたときに、制御手段は、ぼかし付加手段によってぼかしが付加された画像信号に対して、解像度変換手段が縮小のための解像度変換を行うように制御することが好ましい。
請求項８に記載の発明による画像処理装置は、被写体像を撮像して画像信号を出力する撮像素子と、画像信号に基づく画像を表示する表示手段と、表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、表示手段に表示される画像の電気的な拡大を指示する指示手段と、指示手段の指示に応じて、画像信号に解像度変換を施して画像信号に対応する画像の電気的な拡大処理を行う解像度変換手段と、撮影指示前に、撮像素子に撮像されて表示手段に表示される画像に対して、指示手段によって拡大指示がなされた場合には、ぼかし付加手段によりぼかしが付加された画像に対して、解像度変換手段により電気的な拡大処理を行って表示手段に表示するように制御するとともに、撮影指示の後に撮影された画像にぼかしが付加された画像を表示手段に表示している際に、指示手段によって拡大指示がなされた場合には、解像度変換手段でぼかしが付加される前の画像信号に対して電気的な拡大処理を行った上で、ぼかし付加手段によりぼかしが付加された画像を表示手段に表示するように制御する制御手段とを備えることを特徴とする。
請求項９に記載の発明による画像処理装置は、画像信号を記録する記録手段と、記録手段から読み出された画像信号に対応する画像を表示する表示手段と、表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、表示手段に表示される画像の電気的な拡大を指示する指示手段と、指示手段の指示に応じて、記録画像信号に解像度変換処理を施して電気的な拡大処理を行う解像度変換手段と、指示手段によって表示手段に表示される画像の連続的な拡大が指示された際に、ぼかし付加手段によってぼかしが付加される前の記録画像信号に対して解像度変換処理を行った画像を、表示手段に表示するように制御する制御手段とを備えることを特徴とする。
請求項１０に記載の発明による画像処理装置は、被写体像を撮像して画像信号を出力する撮像素子と、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、ぼかしの付加された画像信号に対応する画像を撮像素子による撮像動作と並行して表示する表示手段と、撮像動作中に、表示手段が表示している画像の表示倍率の変更指示がなされたときに、画像信号に基づく信号に解像度変換を施す解像度変換手段と、撮像動作中に、変更指示がなされたときに、変更された表示倍率に応じて付加されるぼかしの量を変更するようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１０に記載の画像処理装置はさらに、短焦点端と長焦点端とで光学絞り量の異なるズーム撮影光学系を備えてもよい。この場合のぼかし付加手段は、ズーム撮影光学系が長焦点端の状態で、さらに表示倍率の変更指示がなされたときに、長焦点端での光学絞り値よりさらに絞り込んだ絞り値に相当するぼかし画像となるように、ぼかしを画像の所定領域に付加することが好ましい。
請求項１２に記載の発明による画像処理装置は、ズーム撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、ぼかしの付加された画像信号に対応する画像を撮像素子による撮像動作と並行して表示する表示手段と、撮像動作中に、表示手段が表示している画像の表示倍率の拡大変更指示が連続してなされたときに、ズーム撮影光学系の焦点距離を長焦点距離端まで変更し、さらに継続して画像信号に基づく信号に解像度変換を施す拡大手
段と、撮像動作中に、表示倍率の拡大変更指示がなされ、焦点距離が所定の値となったときに、画像信号に対するぼかしの付加を開始して、ぼかしの付加された画像信号を表示手段に出力するようにぼかし付加手段を制御する制御手段とを備えることを特徴とする。
請求項１３に記載の発明による画像処理装置は、画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、画像信号に基づく画像の電気的な拡大を指示する指示手段と、解像度変換によって電気的な拡大処理を行う拡大手段と、指示手段によって所定倍率以上の拡大が指示されたときに、ぼかし手段によるぼかしの付加が行われないように制御する制御手段とを備えることを特徴とする。
請求項１４に記載の発明による画像処理装置は、撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、画像信号に加工処理を施して画像の所定領域にぼかしを付加するぼかし付加手段と、撮影光学系または撮像素子への異物の付着もしくは傷を画像信号をもとに検出する検出モードにおいて、ぼかし手段によるぼかしの付加を禁止する制御手段とを備えることを特徴とする。
請求項１４に記載の画像処理装置において、制御手段は、検出モード以外の撮影モードで撮像された撮像画像上の異物もしくは傷の像を含む領域にぼかしを付加するようにぼかし付加手段を制御することが好ましい。
請求項１４に記載の画像処理装置において、ぼかし付加手段は、検出モード以外の撮影モードで撮像された撮像画像上の異物もしくは傷の像を含む領域のコントラストの大きさに応じて、付加するぼかしの量を変更することが好ましい。
【発明の効果】
【０００６】
本発明によれば、撮影画像にぼかしを付加する動作を最適化した画像処理装置を提供できる。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施形態による撮像装置の一例を示すブロックダイアグラムである。
【図２】制御回路が画像ぼけを付加する撮影処理の流れについて説明するフローチャートである。
【図３】異なる時刻に取得されたスルー画像を例示する図である。
【図４】(a)画像ぼけを付加しないでスルー画像を例示する図である。(b)画像ぼけを付加したスルー画像を例示する図である。(c)他の表示態様を例示する図である。
【図５】カメラを例示する斜視図である。
【図６】カメラを例示する斜視図である。
【図７】カメラを例示する斜視図である。
【図８】カメラを例示する斜視図である。
【図９】ビデオカメラを例示する斜視図である。
【図１０】ビデオカメラを例示する斜視図である。
【図１１】ビデオカメラを例示する斜視図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明を実施するための最良の形態について説明する。図１は、本発明の一実施形態による撮像装置の一例を示すブロックダイアグラムである。図１において、撮像装置は、撮像素子１と、撮影レンズ２と、レンズ駆動回路３と、制御回路５と、操作部材７と、撮像素子駆動回路８と、信号処理回路９と、データ処理回路１０と、圧縮／伸張回路１１と、モニタ１３と、表示制御回路１４と、測光回路１５とを有し、さらに記録媒体１２が設けられている。記録媒体１２は、メモリカード、小型ハードディスク、ＤＶＤなどの光ディスクなどで構成される。記録媒体１２は、撮像装置に内蔵されるものであっても、着脱可能に装着されるものであってもよい。また、撮像装置の外部に設けられるものであってもよい。その場合、記録媒体１２と撮像装置とは有線または無線で電
気的に接続される。
【０００９】
撮影レンズ２は撮影光学系を構成する複数枚数のレンズ群で構成され、撮像素子１の撮像面上に被写体像を結像させる。撮影レンズ２は不図示のフォーカスレンズを含み、レンズ駆動回路３がフォーカスレンズを光軸方向に進退駆動することにより、撮影レンズ２のフォーカス調節が行われる。また、撮影レンズ２は不図示のズームレンズを含み、レンズ駆動回路３がズームレンズを光軸方向に進退駆動することにより、撮影レンズ２のズーム調節が行われる。レンズ駆動回路３は、制御回路５から出力されるレンズ駆動指令に応じてレンズ駆動信号を発生し、発生したレンズ駆動信号で不図示のレンズ駆動機構を駆動することにより、各レンズを移動させる。
【００１０】
撮像素子１は、静止画像の単写撮像とともに、静止画像の連続撮像、および動画像の撮像が可能である。撮像素子１は、例えばCCD撮像素子あるいはCMOS型撮像素子などによっ
て構成される。
【００１１】
撮像素子駆動回路８は、制御回路５から出力される指令に応じて所定タイミングの駆動信号を発生し、発生した駆動信号を撮像素子１へ供給する。撮像素子１は、供給された駆動信号によって電荷蓄積（撮像）や蓄積電荷の読み出しが制御される。制御回路５は、測光回路１５による被写体の測光データを用いて被写界の明るさの情報を求め、この明るさの情報に基づいて撮像素子１の電荷蓄積時間、撮影レンズ２の絞り、および撮像素子１より出力される画像信号の増幅度などを決定する。なお、被写界の明るさの情報は、撮像素子１から出力される信号から求める構成としてもよい。この場合には、撮像素子１が測光回路１５の機能を司る。
【００１２】
撮像素子１から読み出された画像信号は、信号処理回路９へ入力される。信号処理回路９は、制御回路５からの指令に応じて入力信号に対する増幅、直流再生、A/D変換、ホワ
イトバランス、およびガンマ変換等の信号処理を施し、信号処理後のデータを画像データとしてデータ処理回路１０へ出力する。
【００１３】
データ処理回路１０は、制御回路５からの指令に応じて、信号処理回路９より出力された画像データを圧縮／伸張回路１１に出力するとともに、モニタ１３に再生画像を表示させるために必要な解像度変換（画素数変換）処理を画像データに施し、解像度変換処理後の画像データを表示制御回路１４へ出力する。なお、データ処理回路１０は、後述する電子ズーム処理を行う際には、入力される画像データに対して解像度（画素数）変換処理を施して、圧縮／伸張回路１１および表示制御回路１４へそれぞれ出力する。
【００１４】
表示制御回路１４は、制御回路５からの指令に応じて、データ処理回路１０から入力される画像データに所定の信号処理を施してモニタ１３へ出力する。表示制御回路１４はさらに、上記画像データに撮影メニュー、カーソルなどのオーバーレイ画像データを重畳する処理を行う。これにより、オーバーレイ画像が重畳された被写体画像がモニタ１３に表示される。
【００１５】
圧縮/伸張回路１１は、制御回路５からの指令に応じて、データ処理回路１０から入力
される画像データに所定の形式で圧縮処理を施し、圧縮後のデータを記録媒体１２へ記録する。撮影時に記録媒体１２へ画像データを記録する場合、記録する画像データに対応する再生画像がモニタ１３に表示される。なお、操作部材７で画像データの非圧縮での記録が指示された場合、圧縮／伸張回路１１は圧縮処理を行わず、記録媒体１２への記録が行われる。この場合にも、モニタ１３には記録する画像データに対応する再生画像が表示される。
【００１６】
また、本撮像装置は、記録媒体１２に記録されている画像データによる再生画像をモニタ１３に表示する（再生モード）ことも可能に構成される。この場合の圧縮/伸張回路１
１は、制御回路５からの指令に応じて記録媒体１２に記録されている画像データを読み出し、読み出しデータに対して復号化処理を施した上で復号化後のデータをデータ処理回路１０へ送る。再生時にデータ処理回路１０が復号化データに解像度変換処理を施して表示制御回路１４へ出力することにより、再生画像がモニタ１３に表示される。なお、記録媒体１２に記録されている非圧縮の画像データが読み出された場合には、圧縮処理の逆処理である復号化処理は行われない。圧縮／伸張回路１１は、可逆圧縮（いわゆるロスレス符号化）を行うことも可能な構成となっている。
【００１７】
操作部材７はレリーズ釦を含み、操作内容に応じた操作信号を制御回路５へ出力する。制御回路５は、レリーズ釦の押下操作に基づくレリーズ操作信号が操作部材７から入力されると、撮像素子１から読み出される画像信号の中で、撮像画面内にあらかじめ設定されているフォーカス検出領域に対応する信号を用いて公知のコントラスト方式のＡＦ（オートフォーカス）動作を行う。
【００１８】
具体的には、信号処理回路９によって信号処理された画像データのうち、フォーカス検出領域に対応するデータについての高周波数成分の積算値（いわゆる焦点評価値）を最大にするように、レンズ駆動指令（フォーカス調節信号）をレンズ駆動回路３へ送る。焦点評価値を最大にするフォーカスレンズの位置は、撮像素子１によって撮像される被写体像のエッジのぼけをなくし、画像のコントラストを最大にする（尖鋭度を高める）合焦位置である。
【００１９】
本実施の形態では、撮像レンズ２内のフォーカスレンズを移動しながら順次得られる画像データ（映像信号）を撮影画面内の複数のフォーカス検出領域ごとに解析し、各領域に対応する画像のコントラスト値を最大にするフォーカスレンズ位置をもとに、各領域に位置する被写体の(相対的な)撮影距離を取得可能に構成されている。
【００２０】
なお、上記コントラスト方式のＡＦ動作に加えて、公知の瞳分割方式による位相差ＡＦ動作を行うように構成してもよい。この場合にも、各領域に位置する被写体の撮影距離を得ることができる。
【００２１】
操作部材７はズーム操作部材も含む。制御回路５は、ズーム操作に基づくズーム操作信号が操作部材７から入力されると上述したレンズ駆動指令を発生し、レンズ駆動回路３にズームレンズを進退駆動させる。これにより、撮像素子１の撮像面上に結像される被写体像が拡大もしくは縮小し、光学的にズーム調節される。
【００２２】
制御回路５はさらに、ズーム操作に基づくズーム操作信号が操作部材７から入力されるとデータ処理回路１０へ指令を出力し、画像データに対する解像度変換処理の変換比率を操作信号に応じて変化させる。これにより、モニタ１３に表示される画像が拡大もしくは縮小し、電気的にズーム調節される（電子ズーム）。解像度変換比率は電子ズーム倍率に対応する。データ処理回路１０が電子ズーム倍率を高める方向に変換比率を変える場合、再生画像の一部が拡大されてモニタ１３に表示される（拡大率が上がる反面、再生画像の表示範囲は狭くなる）。反対に、データ処理回路１０が電子ズーム倍率を低くする方向に変換比率を変える場合、モニタ１３に表示される再生画像の拡大率が下がる反面、再生画像の表示範囲は広くなる。撮像素子１による撮影モードに設定されている場合、モニタ１３に表示されている画像に対応する撮影画像データを記録媒体１２に記録することができる。
【００２３】
次に、撮像装置が撮影モードに設定されている場合に行うスルー画撮影動作と静止画本
撮影動作と動画本撮影動作について説明する。スルー画撮影は、静止画本撮影の前段階として行われる予備撮影であり、静止画本撮影は、レリーズ釦の全押し操作信号（撮影指示）に応じて行われる撮影である。また、動画本撮影動作は、ＲＥＣ釦の操作信号（撮影、記録指示）に応じて行われる撮影である。
【００２４】
＜スルー画撮影動作＞
本実施形態の撮像装置は、静止画本撮影動作を行う際に、操作部材７からレリーズ釦の半押し操作に基づく半押し操作信号が制御回路５へ入力されると、上述したＡＦ動作を伴ったスルー画撮影動作を行う。スルー画撮影動作は、所定のフレームレートで繰り返し行われており、レリーズ釦の半押し操作中、スルー画撮影動作と並行して、上述したＡＦ動作が行われ、撮影されたスルー画像がモニタ１３に表示される。
【００２５】
制御回路５は、撮像素子駆動回路８へ指示を送り、スルー画撮影動作を実行するための駆動信号を出力させる。撮像素子１は、スルー画撮影動作のための駆動信号を受けて、例えば、３０フレーム/秒の高フレームレートで蓄積電荷を連続的に出力する。スルー画撮
影用の露出条件は測光回路１５による測光データに基づいて決定される。信号処理回路９は、入力された信号に上述した信号処理を施すとともに、撮像素子１上において近傍に位置する同色画素(単板カラーの撮像素子の場合)の信号を加算し、後述する静止画本撮影時に比べて低解像度（低画素数）の映像信号としてデータ処理回路１０へ出力する。
【００２６】
データ処理回路１０が解像度変換処理を施した画像データを表示制御回路１４へ出力することにより、スルー画像がモニタ１３に表示される。これにより、撮影者は、これから本撮影しようとする被写界の状態をモニタ１３の画面で観察することができる。すなわち、スルー画撮影動作においては、撮像動作と表示動作が並行して行われる。
【００２７】
＜静止画本撮影動作＞
スルー画撮影動作に続いてレリーズ釦が全押し操作されると、全押し操作信号が制御回路５へ入力される。撮像装置は、全押し操作信号に応じて静止画本撮影動作を開始する。
【００２８】
制御回路５は、操作部材７（レリーズ釦）からの全押し操作信号を検出すると撮像素子駆動回路８へ指示を送り、本撮影動作を実行するための駆動信号を出力させる。撮像素子１は、静止画本撮影動作のための駆動信号を受けて、露出演算結果に基づく本撮影用の電荷蓄積を行って蓄積電荷を出力する。本撮影用の露出条件は、直近のスルー画データの信号値から得られる被写界の明るさ情報に基づいて決定される。信号処理回路９は入力された信号に上述した信号処理を施し、スルー画撮影時に比べて高解像度（高画素数）の画像データとしてデータ処理回路１０へ出力する。
【００２９】
データ処理回路１０が解像度変換処理を施した画像データを表示制御回路１４へ出力することにより、静止画本撮影画像がモニタ１３に表示される。また、圧縮/伸張回路１１
によって圧縮処理された画像データが記録媒体１２へ記録される。
【００３０】
＜動画本撮影動作＞
次に動画本撮影動作について説明する。動画本撮影動作は、撮像素子１により撮影された動画像をモニタ１３に表示しつつ記録媒体１２に記録を行う撮影動作である。この動画本撮影動作は、操作部材７の一部であり、動画像の撮影を指示するＲＥＣ釦の操作がなされている間実行される。制御回路５は、操作部材７の一部を構成するＲＥＣ釦の押圧操作がなされると、前述の自動合焦動作を連続的に行うとともに、撮像素子１による動画本撮影動作を実行する。なお、この場合の自動合焦動作は、画面内を移動する特定被写体に合焦動作が行われるように、特定被写体の追尾を行いつつ自動合焦動作を行うものであっても、所定の撮影距離の物体に常に合焦するように制御されるものであってもよい。また、
特に合焦動作を行わず、操作部材７の一部を構成するフォーカス操作部材(焦点調整部材)のマニュアル操作によって、撮影者の意図によって合焦状態を変化させるものであってもよい。
【００３１】
制御回路５は、ＲＥＣ釦の押圧操作を検出すると、撮像素子駆動回路８に対して、動画本撮影動作を実行する駆動信号を出力するように指示する。撮像素子１は、動画本撮影動作のための駆動信号を受けて、例えば、３０フレーム/秒の高フレームレートで映像信号
を連続的に出力する。このようにして撮像素子１から出力された映像信号は、信号処理回路９およびデータ処理回路１０で所定の処理が施された後、表示制御回路１４を介して順次モニタ１３に供給されるとともに、圧縮/伸張回路１１を介して記録媒体１２に記録さ
れる。
【００３２】
なお、操作部材７の操作によって記録媒体１２への非圧縮状態での記録が指示されている場合には、圧縮/伸張回路１１での圧縮処理は行われず、記録媒体１２への記録が行わ
れる。また、記録媒体１２への記録動作を行うにあたり、操作部材７の操作により圧縮率を変更可能な構成としてもよい。
【００３３】
さらに、記録媒体１２には、上述の自動合焦動作において取得した撮影距離情報を、動画像を構成する複数の静止画フレームの各々に対応付けて、画像データとともに記録する。撮影者は、モニタ１３に表示された動画像を目視することにより、これから撮影される被写界の状態を確認するとともに、記録媒体１２に記録される画像を確認することができる。記録媒体１２に記録される動画像の１フレームの画素数は、モニタ１３の画素数より大きい。従って、本実施形態においては、モニタ１３への動画像の表示を行うに際して、モニタ１３の画素数にあわせるように解像度(画素数)の変換処理がデータ処理回路１０で行われる。
【００３４】
＜ぼけ付加処理＞
本発明の特徴である電気的なぼかしを画像に付加する（すなわち、画像にぼかしを加える）動作について説明する。画像に対して電気的にぼかしを加える（以後、画像ぼけの付加と呼ぶ）とは、画像処理によって画像を加工し、擬似的にピントを外した画像を生成するものである。本実施形態による撮像装置では、画像データにローパスフィルタ（LPF）
処理を施して画像の高域空間周波数成分を劣化させることにより、画像のエッジを不鮮明にし、画像のコントラストを低下させる。
【００３５】
撮像装置は、撮影時の撮影モードがポートレートモードおよびマクロモードのいずれかに設定されている場合に画像ぼけの付加（および付加内容の変更）が許可され、撮影モードが遠景モードに設定されている場合には画像ぼけの付加（および付加内容の変更）が禁止される。ここで、ポートレートモードは人物を主要被写体とする撮影モード、マクロモードは近接撮影を行う撮影モード、遠景モードは風景を被写体とする撮影モードである。許可および禁止の判定は制御回路５が行う。この画像ぼけの付加の禁止、許可の判定に基づいて、スルー画像データおよびレリーズ釦の全押し操作に基づく静止画本撮影画像データの少なくとも一方の画像データに対して、画像ぼけの付加、禁止が制御される。すなわち、撮影画像に対して画像ぼけを付加した方が画像の芸術性が高まると判断される撮影モード（ポートレートモード、マクロモードなど）では画像ぼけの付加を許可し、それ以外の撮影モードでは画像ぼけの付加を禁止する構成としたので、画像ぼけの付加が好ましくない画像に誤って画像ぼけを付加してしまうといったことを未然に防止することができる。
【００３６】
また、撮影モードが夜景ポートレートモードに設定されている場合であって、画像の背景領域に所定レベル以上の明るさを有する領域が存在する場合にも、撮像装置は画像ぼけ
の付加（および付加内容の変更）が許可される。一方、夜景ポートレートモードに設定されている場合であって、画像の背景領域に所定レベル以上の明るさを有する領域（例えば、イルミネーションなどの輝点領域）が存在しない場合には、画像ぼけの付加（および付加内容の変更）が禁止される。画像の背景領域に所定レベル以上の明るさ領域が存在するか否かは、データ処理回路１０へ入力されたスルー画用の映像信号を用いて判定される。
【００３７】
制御回路５は、上述した画像ぼけの付加（および付加内容の変更）を禁止する場合、少なくとも撮影時において禁止すれば、再生時には許可するように構成してもよい。
【００３８】
制御回路５が画像ぼけを付加する撮影処理の流れについて、図２のフローチャートを参照して説明する。図２による撮影処理は、上述のように設定されている撮影モードや撮影された画像データに基づいて画像ぼけの付加（および付加内容の変更）が許可された場合に起動する。
【００３９】
図２のステップＳ１０１において、制御回路５はレリーズ釦が半押し操作されたか否かを判定する。制御回路５は、操作部材７（レリーズ釦）から半押し操作信号が入力されるとステップＳ１０１を肯定判定してステップＳ１０２へ進み、半押し操作信号が入力されない場合にはステップＳ１０１を否定判定し、当該判定処理を繰り返す。なお、本実施形態においては、ステップＳ１０１以前で既にスルー画撮影動作が開始されているものとする。
【００４０】
ステップＳ１０２において、制御回路５は、露出モードを絞り優先オートモードに設定するとともに、スルー画撮影動作を行いながら、上述したＡＦ動作を開始させてステップＳ１０３へ進む。絞り優先オートモードにおいては絞り値の変更が禁止され、撮像素子１の電子シャッタ速度（電荷蓄積時間）、および撮像素子１の出力する画像信号に対する増幅度のうち少なくとも一方が変更可能に設定される。絞り優先オートモードにすることで、現時点で設定されている絞り値が撮影処理中に変更されることがなくなり、後述する画像ぼけの付加量の調整、確認作業を容易に行うことができる。ＡＦ動作は、例えば、フォーカスレンズを無限遠に対応する位置から至近端に対応する位置へ向けて所定の速度で移動させながら、この移動過程において複数のフォーカス検出領域ごとに焦点評価値を最大にするフォーカスレンズ位置（合焦位置）を検出し、各フォーカスレンズ位置に対応する撮影距離情報を取得する。これにより、複数のフォーカス検出領域ごとに、当該領域に存在している被写体までの距離情報が得られる。
【００４１】
制御回路５は、ＡＦ動作中においてスルー画像を上記フレームレートでモニタ１３に逐次表示させるとともに、複数のフォーカス検出領域を示すＡＦマークをスルー画像に重ねて重畳表示させる。制御回路５は表示制御回路１４へ指令を送り、合焦位置が検出（焦点検出）されたフォーカス検出領域に対応するＡＦマークの表示色を赤色から緑色に変更表示させる。なお、焦点検出を撮影者に報知するための表示は、モニタ１３に重畳表示させる代わりにモニタ１３と別のＬＥＤなどによって表示させてもよい。
【００４２】
ステップＳ１０３において、制御回路５は、画像ぼけの付加されていない合焦画像であるスルー画用の映像信号から被写体の抽出（認識）処理を行ってステップＳ１０４へ進む。被写体の抽出（認識）は、例えば、ステップＳ１０３のＡＦ動作の過程において撮像される複数の画像を用いて、各々のフォーカス検出領域に存在する各被写体に合焦するようにフォーカス状態が調整された状態で、撮像画面内の各被写体像の抽出(認識)を行う。このようにステップＳ１０４の処理は、ステップＳ１０３の処理と並行して行われる。このようにして抽出された被写体の中から後述の抽出方法などを用いて、主要被写体を抽出(
認識)する。その他、焦点状態の異なる複数フレームの画像や、焦点距離の異なる複数フ
レームの画像を用いて被写体の抽出（認識）を行う構成としてもよい。抽出手法としては
、さらに公知の特定輪郭を抽出する技術、もしくは公知の特定色（肌色等）領域を抽出する技術、顔を認識する技術、またはこれらの抽出技術を組み合わせて用いる構成としてもよい。抽出された被写体が複数存在する場合は、例えば、上記ＡＦ動作で取得された複数の被写体までの距離情報を用いて、撮像装置に最も近い被写体を主要被写体として抽出する。制御回路５は、抽出（認識）した主要被写体に合焦する位置へフォーカスレンズを駆動させる。
【００４３】
なお、特定輪郭抽出や特定色抽出は省略してもよく、この場合には上記ＡＦ動作で取得された複数の被写体までの距離情報を用いて、撮像装置に最も近い被写体を主要被写体とする。このようにして抽出された主要被写体の領域を除いた領域に対して、後述する画像ぼけの付加が行われる。抽出された主要被写体の抽出(認識)結果(被写体の種類、及び撮
像画面上の位置)は、例えば、以下のように用いられる。主要被写体の抽出(認識)結果(被写体の種類、及び撮像画面上の位置)に応じて、スルー画像、あるいはこれに続く本撮影
静止画像に対して行われる画像処理の内容が変更される。例えば、画像ぼけの付加されていないスルー画像で顔が認識された画像についてのみ画像ぼけが付加される、あるいは顔領域の色を所定の色に変更するなどのように構成される。
【００４４】
さらには、上記のような抽出(認識)の結果をスルー画像、あるいはこれに続く本撮影静止画像の画像データとともに記録媒体１２に記録する構成としてもよい。撮影者は、記録媒体１２に記録された認識結果をもとに、関連付けて記録された画像データを検察することができる。上記の構成によれば、画像ぼけの付加されていない画像(スルー画像)を用いて被写体抽出、被写体認識が行われるので、正確な抽出、認識を行うことができる。この場合、被写体抽出、被写体認識の結果は、スルー画像に反映されるものに限定されず、これに続く本撮影静止画像に反映されるものであってもよい。また、各被写体に合焦した画像を用いて各被写体の抽出(認識)を行っているので、正確な抽出、認識を行うことができる。
【００４５】
ステップＳ１０４において、制御回路５は、スルー画用の映像信号のうち、ステップＳ１０３で抽出した主要被写体以外の領域（すなわち背景領域）に対する画像ぼけの付加をデータ処理回路１０へ指示し、ステップＳ１０５へ進む。データ処理回路１０が画像ぼけの付加および解像度変換処理を施した信号を表示制御回路１４へ出力することにより、画像ぼけが付加されたスルー画像がモニタ１３に表示される。
【００４６】
データ処理回路１０は、入力されるスルー画像のデータのうち背景領域に対応するデータに対して選択的にLPF処理を施すことによって画像ぼけを付加する。LPF処理の特性（フィルタのタップ数、遮断周波数、減衰量など）は、フォーカス検出領域で取得されている距離情報に応じて変化させる。具体的には、主要被写体領域内のフォーカス検出領域で取得されている撮影距離と、背景領域内のフォーカス検出領域で取得されている撮影距離とを比較し、両者間の撮影距離の乖離が大きいほど背景領域に対するLPF処理の遮断周波数
を低くする。この結果、主要被写体の撮影距離との差が大きい背景領域ほど、強いぼけ効果が付加される。
【００４７】
なお、データ処理回路１０にLPF処理を行わせる代わりに、点拡がり関数を用いた畳み
込み演算処理を行わせて、画面内の高域空間周波数成分を抑制する（画像ぼけを付加する）構成としてもよい。
【００４８】
ステップＳ１０５において、制御回路５は、撮影画面に動きがあるか否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが、撮影画面の全体で（撮影画面を所定数に分割したブロックの全てにおいて）共通に検出され（すなわち、ブロック間の動
きベクトルの向きおよび大きさの偏差が所定範囲内である）、かつ、撮影画面内の各ブロックにおける動きベクトルの大きさの平均値が所定値以上の場合にステップＳ１０５を肯定判定し、ステップＳ１０６へ進む。
【００４９】
一方、制御回路５は、複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが撮影画面の各領域で共通に検出されない場合、あるいは、撮影画面内の各ブロックにおける動きベクトルの大きさの平均値が所定値未満の場合にはステップＳ１０５を否定判定し、ステップＳ１０７へ進む。ステップＳ１０７において、制御回路５は、撮影画面内の一部の被写体に動きがあるか否かを判定する。制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが、上記所定数の分割ブロックの少なくとも１つで検出される場合にはステップＳ１０７を肯定判定し、ステップＳ１０８へ進む。
【００５０】
ステップＳ１０６へ進む場合は、撮像装置の動きに起因する撮影範囲の移動があったと判定する。制御回路５は、ステップＳ１０６において、画像ぼけを付加する対象領域（背景領域）を動きベクトルの向き、大きさに応じて前フレームの付加対象領域の位置から移動させてステップＳ１０９へ進む。ここで、撮影範囲の移動にともなって新たに撮影範囲に加わった領域に対しては、撮影範囲が移動する前のフレームの該当する画面端において付加されていたぼけ量と同等のぼけを付加する（同様のLPF処理を施す）。画像ぼけを付
加する対象領域の移動は、リアルタイムでモニタ１３の表示画像に反映される。このように上記構成によれば、動画像中の被写体の動き（画像信号の変化）に合わせて、画像ぼけ量の変更、画像ぼけの付加位置の移動が自動的に行われるように制御される。
【００５１】
なお、撮影範囲の移動にともなって新たに撮影範囲に加わった領域に対するぼけ付加量を、撮影範囲が移動する前に付加していた撮影画面内のぼけ量の分布から外挿演算によって算出し、算出したぼけ量を付加する構成としても構わない。この場合にも、画像ぼけを付加する対象領域の移動はリアルタイムでモニタ１３の表示画像に反映される。
【００５２】
一方、制御回路５は、スルー画撮影によって１／３０秒ごとに取得される複数フレームのスルー画像データから算出されるフレーム間の動きベクトルが、上記所定数の分割ブロックのいずれでも検出されない場合にはステップＳ１０７を否定判定し、ステップＳ１０９へ進む。この場合は、画像ぼけを付加する対象領域を変更しないでステップＳ１０９へ進む。
【００５３】
ステップＳ１０８へ進む場合は、撮影画面内の一部被写体について動きがあったと判定する。制御回路５は、ステップＳ１０８において、動きを検出した分割ブロック、もしくは動きを検出しなかった分割ブロックにおける動きベクトルの向き、大きさに応じて、画像ぼけを付加する対象領域、もしくは画像ぼけを付加しない対象領域（一部被写体に対応する領域）を移動させてステップＳ１０９へ進む。
【００５４】
図３は、時刻Ｔ０、Ｔ１およびＴ２のそれぞれにおいて取得されたスルー画像を例示する図である。時刻Ｔ１の現フレーム画面の中で、動きを検出した一部被写体の領域Ｏ１に付加するぼけ量は、一部被写体が移動する前のフレーム画面（時刻Ｔ０）において当該一部被写体の領域Ｏ０に付加されていたぼけ量と同等とし、領域Ｏ０の位置に対応する現フレーム画面（時刻Ｔ１）内の領域Ｐに付加するぼけ量は、領域Ｐの周囲に対して付加するぼけ量の分布から補間処理によって算出する。画像ぼけを付加する対象領域の移動は、リアルタイムでモニタ１３の表示画像に反映される。
【００５５】
一部被写体が移動する前に存在していた領域に対するぼけ付加量について、以下のように決定してもよい。すなわち、現フレームを時刻Ｔ２とすると、現フレーム画面の中で動
きを検出した一部被写体の領域Ｏ２に付加するぼけ量は、一部被写体が移動する前のフレーム画面（時刻Ｔ１）において当該一部被写体の領域Ｏ１に付加されていたぼけ量と同等とし、領域Ｏ１の位置に対応する現フレーム画面（時刻Ｔ２）内の領域Ｑに付加するぼけ量は、さらに前（一部被写体が移動してくる前）のフレーム画面（時刻Ｔ０）において対応する領域Ｒに付加されていたぼけ量と同等とする。ステップＳ１０６、ステップＳ１０８のように、フレーム間の動き情報を利用して同じ量の画像ぼけを付加する領域を時間とともに移動させていく構成とすれば、画面内の領域によって付加するぼけ量が異なるような場合に、１フレームの画像毎に各領域の画像ぼけの付加量を演算する場合に比較して、迅速に電気ぼけの付加された画像を生成することができる。このようにして生成された画像をモニタ１３で表示させる場合には、表示に至るまでの遅延時間を少なくすることができる。
【００５６】
ステップＳ１０９において、制御回路５は、画像ぼけの付加量の変更操作が行われたか否かを判定する。制御回路５は、ぼけ量変更操作信号が操作部材７から入力された場合にステップＳ１０９を肯定判定してステップＳ１１０へ進み、ぼけ量変更操作信号が入力されない場合にはステップＳ１０９を否定判定してステップＳ１１１へ進む。ぼけ量変更操作は、モニタ１３の画面上で特定の領域を指定して行われる変更操作と、画面全体について共通に行われる変更操作とのいずれも可能に構成されている。
【００５７】
ステップＳ１１０において、制御回路５は、ぼけ量変更操作信号に応じてLPF処理の特
性を変更するようにデータ処理回路１０へ指示してステップＳ１１１へ進む。これにより、付加されるぼけ量が変更される。なお、LPF処理の代わりに畳み込み演算処理を行う場
合には、変更操作信号に応じて点拡がり関数を変更する。ぼけ量変更後の画像は、リアルタイムでモニタ１３に表示される。
【００５８】
ステップＳ１１１において、制御回路５はレリーズ釦の半押し操作が継続されているか否かを判定する。制御回路５は、操作部材７から半押し操作信号が継続して入力されている場合、ステップＳ１１１を肯定判定してステップＳ１１２へ進む。一方、半押し操作信号が入力されていない場合の制御回路５は、ステップＳ１１１を否定判定して画像ぼけの付加を解除するためにステップＳ１１５へ進む。ステップＳ１１５では、画像ぼけの付加が解除されて、モニタ１３には画像ぼけの付加されない画像が表示される。なお、この場合でもスルー画撮影動作は継続して行われる。従って、撮影者は、レリーズ釦の半押し操作を解除することで、画像ぼけの付加(量、位置等)について設定し直すことができる。
【００５９】
すなわち、上記ステップＳ１１１を否定判定してステップＳ１１５へ進んでから次に半押し操作信号が入力されてから自動合焦動作が完了して、主要被写体抽出が行われるまでの間、画像ぼけを付加しないスルー画像をモニタ１３に表示する。このような構成とすれば、付加された画像ぼけを簡単な操作で解除する（画像ぼけ付加前の状態に戻す）ことができる。また、撮影のたびに画像ぼけの付加されていない合焦画像がモニタ１３に表示されるので、画像ぼけを付加すべきか否かを撮影しようとする画像毎に判断することができる。また、上記のような付加されている画像ぼけの解除を行わない場合には、撮影範囲を変更して、次の撮影の自動合焦動作を行う際に、非合焦画像を用いて被写体抽出を行うこととなり、適切でない画像ぼけが付加される可能性がある。上記の構成によれば、自動合焦動作を行うために、レリーズ釦の半押しをしようとする段階で画像ぼけが付加されていないので、このようなことが防止される。
【００６０】
ステップＳ１１２において、制御回路５はレリーズ釦が全押し操作されたか否かを判定する。制御回路５は、操作部材７から全押し操作信号が入力された場合、ステップＳ１１２を肯定判定してステップＳ１１３へ進み、全押し操作信号が入力されない場合にはステップＳ１１２を否定判定し、ステップＳ１０５へ戻る。
【００６１】
ステップＳ１１３において、制御回路５は、静止画本撮影動作を開始させてステップＳ１１４へ進む。制御回路５は、全押し操作信号が入力される直前にモニタ１３に表示されていたスルー画像信号（データ）の明るさの情報を用いて本撮影用の自動露出（ＡＥ）動作を行う。これにより、直近のスルー画像データに画像ぼけが付加されている場合は、付加された画像ぼけを含む信号（データ）値の明るさの情報に基づいて本撮影用の露出が決定される。従って、例えば局所的に高レベルの輝点領域があるような画像に画像ぼけを付加するような場合であっても、画像ぼけの付加によってレベルの低下した輝点画像データをもとに本撮影動作の露出が決定されるので、正確な明るさの最終画像を得ることができる。撮像装置は、決定された露出に基づいて、撮像素子１の電子シャッタ速度(電荷蓄積
時間)、絞り、撮像素子１の出力する画像信号の増幅度等を設定し、撮像動作を行う。直
近のスルー画像信号（データ）に画像ぼけが付加されない場合には、画像ぼけを付加していない信号（データ）値に基づいて本撮影用の露出が決定される。
【００６２】
ステップＳ１１４において、制御回路５は、本撮影で得た画像信号に対し、全押し操作信号が入力される直前のスルー画像に対して付加していた画像ぼけと同様の画像ぼけを付加する処理（画像ぼけを付加する対象領域および画像ぼけの付加量を同様にする）を行う。この点について説明する。本撮影で得た画像とスルー画像では、画素数が異なる。通常、画像の空間周波数は、単位距離(例えば１mm)の間にいくつの縞があるかで定義される。上記の「同様の画像ぼけを付加する」とは、空間周波数を、画像の画面の大きさを基準として正規化したもの(上記の単位距離を画面の大きさとしたもの。すなわち、画面内のあ
る領域に何本の縞があるかについて、１画面の縦、横などの大きさを基準として正規化して示したもの。例えば画面のある領域に縦縞があるときに、これが画面の横方向いっぱいまであった場合に何本の縞になるか。)で考え、画像ぼけ付加後の、両画像の光学的なぼ
けを含む空間周波数特性が略同じになるように設定することを意味する。
【００６３】
ここで、両画像の空間周波数特性が略同じになるように設定することは、両画像の光学的なぼけを含む点拡がり特性(即ち、点を撮像した際の出力画像の点像の、画面の大きさ
を基準として正規化した拡がりの特性)が略同じになるように設定することと同じ意味で
ある。上記のような画面の大きさを基準として正規化した空間周波数の考え方によれば、両画像の画素数が異なるので、例えば、両画像の表現できる最高空間周波数は、必ず異なったものとなる。このような画素数の異なる画像の画像ぼけ度合いを同様にする為には、各々の画像ぼけの付加処理後の画面大きさを基準として正規化された空間周波数特性が同様となるように画像ぼけ付加処理のパラメータ等を設定する。具体的には、両画像の画素数が異なるため、両画像データに画像ぼけを付加する処理(低域通過フィルタの係数、畳
み込み演算の係数などのパラメータ、および処理の特性)を異なるものとする。ここでい
うスルー画像は、記録媒体１２から読み出してモニタ１３に表示させた再生画像に置き換えることができる。
【００６４】
このように、画素数の異なるスルー画像や再生画像と本撮影画像とで画像ぼけの度合いが同じになるように、各々の画像に対する画像ぼけの付加処理を設定することができる。撮影者は、高解像度の画素数の本撮影画像を実際に見なくても、モニタ１３に表示されたスルー画像、あるいはモニタ１３に表示された再生画像から、実際の画素数の本撮影画像の画像ぼけの付加度合いを判断することができる。
【００６５】
ここで、前述のようにスルー画像はモニタ１３に表示される。しかし、装置の小型化を図るため、一般にモニタ１３の表示画面の大きさは小さい。このため、モニタ１３上での画像ぼけの付加度合いの視認が容易になるように、表示面素数が少なく、また表示面積の少ないモニタ１３による表示画像に対する画像ぼけの付加量を、本撮影画像に対する画像ぼけの付加量より大きくするように構成してもよい。また、同じモニタ１３に表示される
画像であっても、スルー画像(あるいはクイックビュー画像)と、サムネイル画像とでは画像の表示面積が異なる。このため、上述と同様に、サムネイル画像の画像ぼけの付加量を、スルー画像(あるいはクイックビュー画像)の画像ぼけの付加量より大きく設定する構成とすることが好ましい。
【００６６】
また、静止画本撮影とその直前のスルー画撮影とで絞りの状態が異なる場合には、この絞りの変化量に相当するぼけを静止画本撮影動作によって得られた静止画像に対して電気的に付加する構成としてもよい。例えば、スルー画撮影から静止画本撮影に移行する過程で絞りが１段絞られた場合、静止画本撮影動作によって得られた静止画像は、その前に得られた画像より絞り１段分ぼけが低減されている。従って、静止画本撮影動作によって得られた静止画像に対して、絞り１段分の画像ぼけを電気的に付加して両画像の画像ぼけ度合いが同様になるようにする。このように、静止画本撮影とその直前のスルー画撮影とで絞りが変化する場合にも、この絞りの変化量に基づいて、絞り変化分の画像ぼけを加減するので、スルー画像と同じ画像ぼけ度合いの本撮影静止画像を得ることができる。
【００６７】
制御回路５はさらに、画像ぼけを付加後に圧縮処理した本撮影画像のデータを記録媒体１２に記録し、絞り優先オートモードを直近の設定モードに戻した上で図２による処理を終了する。
【００６８】
制御回路５が記録媒体１２へ本撮影画像のデータを記録する場合、本撮影画像とともに、サムネイル画像およびクイックビュー画像の記録も行う。サムネイル画像は、モニタ１３に撮影画像を縮小表示するための画像であり、サムネイル用に本撮影画像からモニタ１３の画素数よりさらに画素数を低減させたものである。また、クイックビュー画像は、モニタ１３に１フレームの撮影画像を大きく迅速に再生表示するためにモニタ１３の画素数に合わせて本撮影静止画像から生成されて記録された画像であり、モニタ１３の表示画素数に応じて本画像から画素数を低減させた画像である。サムネイル画像およびクイックビュー画像は、それぞれ本撮影画像に関連付けられて静止画像として記録媒体１２に記録される。
【００６９】
画像ぼけが付加された画像データは、画像ぼけが付加される前の画像データより高域空間周波数成分が抑制されるので、圧縮処理後のデータサイズが画像ぼけを付加していない画像の圧縮データサイズより小さくなる。制御回路５は、画像ぼけの付加（および付加内容の変更）が許可されると、撮影可能枚数を算出するための係数を画像ぼけの付加が許可されている場合の係数（所定量の画像ぼけの付加が許可された本撮影動作によって得られた静止画１フレーム当たりの平均圧縮符号量）に切替えて算出する。画像ぼけの付加された画像データは、高域空間周波数成分が抑制されているので圧縮処理後の符号量が減少する。これにより、画像ぼけの付加が許可されている場合は、禁止されている場合に比べて同じ残容量（記録媒体の空き容量）に対する撮影可能枚数が増加する。このような撮影可能枚数は、撮影モードのときに、例えばモニタ１３に表示され、画像ぼけの付加を許容する撮影モードと、許容しない撮影モードとで、この表示は異なったものとなる。また、画像ぼけの付加量を変更、設定可能な場合には、設定された付加量に応じて、残容量に記録することができる撮影可能枚数の表示を変更してもよい。
【００７０】
サムネイル画像およびクイックビュー画像の生成は、制御回路５による制御下でデータ処理回路１０が行う。静止画本撮影画像、サムネイル画像およびクイックビュー画像に付加するぼけ量は、前述のように出力する画像の大きさが大きくなる順に、すなわちサムネイル画像、クイックビュー画像、静止画本撮影画像の順に、ぼけ量が小さくなるように調節される、あるいは各画像の見た目のぼけ量（出力媒体(プリント紙、モニタ表示など)上における画像の大きさで正規化したぼけ量の空間周波数特性）が同様になるように付加する画像ぼけの量が調節される。この場合、本撮影静止画像のデータに解像度変換処理を施
してクイックビュー画像およびサムネイル画像に応じたデータサイズに変換し、変換後の各々の画像に対し、それぞれ適切なぼかしが得られるように画像ぼけを付加することが好ましい。このような構成とすることにより、各画像に付加する画像ぼけの量を個別に調節することができる。
【００７１】
あるいは、データ処理回路１０は、画像ぼけが付加された本撮影画像のデータ、または画像ぼけが付加されたスルー画像のデータからサムネイル画像データおよびクイックビュー画像データを生成する構成としてもよい。このような構成とすることにより、本撮影静止画像データからサムネイル画像、クイックビュー画像の各々の画素数に相当する画像を生成し、本撮影静止画像に対して画像ぼけの付加処理を行うとともに、生成された両画素数の画像に対して、それぞれ画像ぼけの付加処理を行う場合に比較して少ない演算量で迅速に、画像ぼけの付加されたサムネイル画像、およびクイックビュー画像を生成することができる。
【００７２】
＜モニタの表示例＞
画像ぼけを付加した画像をモニタ１３へ表示する場合の表示態様について、図４を参照して説明する。図４(a)は、画像ぼけを付加しないでスルー画像を表示するモニタ１３を
例示する図である。図４(a)において、主要被写体３００の背後に被写体３０１が、被写
体３０１のさらに後方に被写体３０２が、それぞれ存在する。撮像装置は、ＡＦ動作によってフォーカス調節され、撮像装置に最至近の主要被写体３００に合焦している。
【００７３】
図４(a)に例示したスルー画像に画像ぼけを付加する場合、合焦している主要被写体３
００より遠方に位置する被写体の領域に画像ぼけが付加される。付加されるぼけ量は、主要被写体３００の撮影距離との差がより大きい（より遠方に位置する）被写体３０２の方が被写体３０１よりも大きい。本実施形態の撮像装置は、このような画像ぼけを付加したスルー画像を図４(b)のようにモニタ１３に表示する。
【００７４】
図４(b)によれば、画像ぼけが付加された領域／付加されない領域を撮影者が容易に視
認できるように、画像ぼけを付加しない領域(この場合は主要被写体３００の領域)の境界部を強調表示する。本実施形態では、主要被写体３００の輪郭を太線で表示して強調を表す。また、画像ぼけの付加量は遠方に位置する被写体ほど大きくしてよく、主要な各被写体の輪郭の線の太さを変えることによって強調の違いを表すことができる。なお、図４(b)では、画像ぼけを付加しない領域と主要被写体（３００）の領域とが同一の場合の例を
示したが、合焦状態にない被写体であっても画像ぼけを付加しない場合があってもよい。すなわち、画像ぼけを付加しない領域は、必ずしも合焦状態にある主要被写体とは限らない。
【００７５】
なお、以上のモニタ表示は、撮像範囲の移動があった場合（ステップＳ１０５を肯定判定）、および一部被写体の移動があった場合（ステップＳ１０７を肯定判定）には、画像ぼけを付加する対象領域の移動がリアルタイムで反映される。
【００７６】
モニタ１３に画像ぼけを付加したスルー画像を表示する例を説明したが、本撮影動画像、本撮影静止画像やサムネイル画像、クイックビュー画像、あるいは記録媒体１２に記録された画像データに対応する再生画像に画像ぼけを付加し、それぞれをモニタ１３に表示する場合も同様である。
【００７７】
このように画像ぼけが付加された画像は、画像ぼけを付加しない領域(この場合は主要
被写体３００の領域)と、画像ぼけを付加した領域(この場合は主要被写体３０１および３０２を含む領域)とを含む全領域画像として、撮影動作中あるいは記録媒体１２から画像
データを読み出して再生画像を表示する再生モード中に、モニタ１３に表示される。モニ
タ１３に表示された画像は、操作部材７からの表示拡大操作に基づいて、撮影動作中あるいは再生モード中に、全領域画像の中で任意の領域を拡大して表示する（電子ズーム）ことが可能に構成される。
【００７８】
＜電子ズーム＞
電子ズーム動作は、モニタ１３が画像を表示しているときにその表示倍率を変更するために、撮影レンズ２による光学的な拡大動作（光学ズーム）を補完するように、操作部材７からのズーム操作（拡大／縮小操作）信号に基づいて行われる。電子ズーム動作では、補間演算処理によって生成された画像に対してさらに補間処理が行われるため、拡大倍率が大きくなるほどズームアップ後の画質が劣化する。画質劣化は、例えば、モニタ１３上で画像の斜めエッジ部のエリアシング（ぎざぎざ）として観察される。そこで、この画質劣化の度合いを許容範囲内に収めるように、あらかじめ電子ズームによる最大拡大倍率が定められている。
【００７９】
また、画像ぼけの付加と電子ズーム動作の双方を行う場合には、画質劣化を抑えるために、電子ズーム後に画像ぼけを付加する構成とする。電子ズームによる拡大倍率によって画像ぼけの付加量を変更しない場合であって、例えば、電子ズームによる連続した拡大が指示された場合のある時点の画像ぼけの付加処理は、その時点までに電気的に拡大された画像ぼけの付加されていない画像データを、さらに電気的に拡大した上で画像ぼけの付加処理を行う。このような処理は、電気的な拡大を行う際に、拡大処理を施す前の画像ぼけが付加されていない画像データを随時記憶しておくことによって実現することができる。このような構成によれば、画像ぼけの付加処理によって画像の高周波数成分が抑制されるので、同じ拡大倍率（電子ズーム倍率）でもエリアシングの影響が低減され、画質が向上する。すなわち、この構成においては、画像ぼけの付加処理がエリアシングの低減処理を兼用する。この結果、電子ズーム動作前に画像ぼけを付加する構成に比べて、電子ズーム動作後に画像ぼけを付加する構成の方が電子ズームの最大拡大倍率を高く設定できる。
【００８０】
上記理由により、画像ぼけを付加した画像と、付加しない画像とで電子ズームによる最大拡大倍率を異なる値としてもよい。
【００８１】
また、付加する画像ぼけの程度が大きいほど電子ズームの最大拡大倍率を高く設定するなど、付加する画像ぼけの程度に応じて電子ズーム倍率の設定範囲を変更する構成としてもよい。
【００８２】
一方、画像データを電子ズームによって縮小する際には上記のようなエリアシングによる画質劣化の問題が生じないので、画像ぼけの付加処理を電子ズームによる縮小処理前に行っても縮小処理後に行っても構わない。以上説明した電子ズームは、撮影時も記録媒体１２に記録された画像データを読み出して表示する再生時も同様の動作が可能である。
【００８３】
一方、撮影レンズ２の焦点距離によって光学的なぼけの量が異なることが知られている。撮影レンズ２がズームレンズである場合には、ズームの度合い(拡大度合い)に応じて光学的なぼけの量が異なる。従って、同一操作部材の連続的な操作によって光学的なズーム動作に継続して電子ズーム処理が行われる場合のみならず、例えば再生モード時の光学的なズーム動作を伴わない単なる電子ズーム動作の場合にも、電気的な拡大動作である電子ズーム処理時に電気的に付加されるぼけ量を、拡大倍率の変更が指示されるたびに変更された表示倍率に応じて変更する構成とすれば、撮影者にとって違和感のない動作が実現できる。
【００８４】
以下、撮影レンズ２として長焦点距離端(望遠端)と短焦点距離端(広角端)とでＦナンバーの異なるズームレンズ(ズーム撮影光学系)を用い、長焦点距離端のズーム状態で、さら
に電子ズームによる電気的な拡大が指示された場合の画像ぼけの付加について説明する。例えば、撮影レンズ２として焦点距離８mm(光学絞りＦ１.４)〜２３mm(光学絞りＦ２)の
間で焦点距離の変更が可能なズームレンズを用いて、モニタ１３に表示されている撮影画像の拡大が指示されると、長焦点距離端である焦点距離２３mmまで撮影レンズ２が駆動され、それ以降は、電子ズーム(解像度(画素数)変換)による電気的な拡大処理が行われる。撮影レンズ２の光学絞り値は、焦点距離の変更駆動に連動して、例えばＦ１.４とＦ２と
の間で２値的に変化する。
【００８５】
撮影レンズ２の焦点距離が長焦点距離端(所定の値)に達し、電子ズーム動作が開始されると、電気的な画像ぼけの付加が自動的に開始される。例えば、電子ズームの拡大指示による拡大画像が焦点距離３８mmに相当する電気的な拡大画像であった場合には、光学絞りＦ２.８、即ち、長焦点距離端での光学絞り値よりさらに絞り込んだ仮想的な絞り値に相
当するようにぼかしを付加する。もちろんこの場合に、長焦点距離端での光学絞り値(Ｆ
２)に相当する画像ぼけを付加するものであってもよい。
【００８６】
また、逆に長焦点距離端での光学絞り値(Ｆ２)より、開放方向に変更した絞り値に相当する画像ぼけを付加するものであってもよい。これらの場合に付加されるぼかし量は、さらに電気的な拡大倍率から決定される撮影レンズ２の仮想的な焦点距離(上記の例では３
８mm)を考慮して決定される。即ち、電気的な拡大倍率が大きくなることは、仮想的な焦
点距離が大きくなることを意味し、これによって付加されるぼかし量が大きくなるように設定される。
【００８７】
さらにまた、撮影レンズ２として光学絞り値を設定可能なズームレンズを用いた場合で、上記と同様に、長焦点距離端のズーム状態で、さらに電子ズームによる電気的な拡大が指示された場合に、設定された光学絞り値に相当する画像ぼけを電気的に付加する構成としてもよい。この他にも、上記の光学絞り値の変更範囲を越えた仮想的な絞り値を設定し、電子ズームによる拡大動作の際に、仮想的な絞り値に相当する画像ぼけを電気的に付加する構成としてもよい。
【００８８】
なお、上記の説明では、撮影レンズ２の焦点距離が長焦点距離端に達し、電子ズーム動作が開始されると、電気的な画像ぼけの付加が開始される例について説明したが、拡大指示(表示倍率の拡大変更指示)によって撮影レンズ２の焦点距離を大きく変更する際に、焦点距離が撮影レンズ２の実現できる最長の焦点距離未満の所定の値となったら、画像ぼけの付加を自動的に開始する構成としてもよい。このような構成によれば、撮影者が特に画像ぼけの付加を指示することなく、拡大倍率の変更操作のみによって自動的に画像ぼけの付加処理が開始されるので、快適な操作感を実現できる。
【００８９】
（遅延処理）
上述したように、画像ぼけの付加と電子ズームアップ（表示倍率拡大）動作の双方を行う場合に電子ズーム後に画像ぼけを付加する場合には、画像ぼけを付加していない原画像に電子ズームアップ処理を施してから、ズームアップ後の画像に対して画像ぼけを付加するという２段階の処理が必要になる。これに対して電子ズームダウン（表示倍率縮小）動作の場合は、画像ぼけが付加された画像にそのまま電子ズームダウン処理を施してもよいことから、電子ズームアップ時と電子ズームダウン時とで処理時間に差が生じる。
【００９０】
制御回路５は、撮影時の電子ズームダウン動作に要する時間が、電子ズームアップ動作に要する時間と同等になるように電子ズームダウン処理を遅延させる。これにより、画像ぼけの付加と電子ズーム動作の双方を行う場合における電子ズームアップと電子ズームダウンとでレスポンスの差が抑えられ、撮影者に違和感を与えないようにすることができる。
【００９１】
電子ズームダウン処理の遅延は、制御回路５が行う時系列の処理の合間に単純にウェイト処理を挿入するなどの他、画像ぼけを付加していない原画像に電子ズームダウン処理を施してからズームダウン後の画像に対して画像ぼけを付加するという２段階の処理を行ってもよい。
【００９２】
上記電子ズーム後に画像ぼけを付加する構成は、本撮影において撮像された静止画像に対してのみ行うようにしてもよい。スルー画撮影時にモニタ１３に表示されている画像に対して電子的な拡大、縮小が指示された場合には、画像ぼけが付加された画像に対して電子ズームアップもしくは電子ズームダウン処理を行い、レリーズ釦の全押し操作によって得られた本撮影による静止画像が画像ぼけを付加してモニタ１３に表示されているとともに、電子的な拡大が指示された場合には、画像ぼけを付加していない原画像に電子ズームアップ処理を施してから画像ぼけを付加する。また、本撮影時の電子ズームダウン時には上記遅延処理を含める。スルー画撮影時は、エリアシングによる画質劣化が問題となりにくいため、拡大縮小動作時のレスポンスを優先させる。一方、本撮影において撮像された静止画像に対しては、電子ズーム後（解像度変換後）にぼけ付加処理を施すことで、本撮影画像の画質維持を優先させる。
【００９３】
＜ぼけ量変更操作部材＞
操作部材７を構成するぼけ量変更操作部材について説明する。画像ぼけの付加量を変化させるためのLPF特性（あるいは点拡がり関数）の変更は、動画像（スルー画像）のフレ
ームレートに合わせてリアルタイムに遅延なく行うことが望ましい。このために、ぼけ量変更操作部材は、操作時間に応じて出力値（すなわち付加されるぼけ量）を決定するものでなく、操作量に応じて異なる値を出力する操作部材が好適である。
【００９４】
１．撮影時のぼけ量変更操作
撮影時は、光学的なズーム操作を行うことが想定されるので、ズーム操作部材と別にぼけ量変更操作部材を設けることが好ましい。
(1-1)図５は、押圧操作部材によってぼけ量変更操作部材５１を構成するカメラの例を説
明する斜視図である。図５において、カメラ筐体に対して回転可能に構成されるモニタ１３の上部にぼけ量変更操作部材５１が配設されている。押圧量（操作量）に応じて異なる３種類以上の大きさの操作信号を、ぼけ量を増やすための操作信号として発する操作部材［増］と、押圧量に応じて異なる大きさの操作信号を、ぼけ量を減らすための操作信号として発する操作部材［減］とで一対をなす。ぼけ量変更操作部材５１［増］、［減］をズーム操作部材５４［Ｔ］、［Ｗ］と別に配設することで、操作部材を共用する場合と異なり、ズーム操作しながらぼけ量変更操作を行うことが可能である。さらに、押圧操作部材で構成したことにより、回転操作部材に比べて操作時に生じる撮像装置の揺動を抑えることができる。
【００９５】
(1-2)図６は、図５の例と同様の操作信号を出力する押圧操作部材によってぼけ量変更操
作部材５１を構成するカメラの他の例を説明する斜視図である。図６において、一対のズーム操作部材５４［Ｔ］、［Ｗ］の近傍に一対のぼけ量変更操作部材５１［減］、［増］が配設されている。
【００９６】
(1-3)図７は、ジョグダイアル５２によってぼけ量変更操作部材およびズーム操作部材を
構成するカメラの例を説明する斜視図である。図７において、ジョグダイアル５２は、回転操作に応じてズーム操作信号（回転方向がズームアップもしくはズームダウンを示し、回転量がズーム操作量を示す）を発するとともに、押圧量に応じてぼけ量を増減するための操作信号を発する。ジョグダイアル５２は、不図示のバネ部材により図７のカメラの背面方向に付勢されており、ジョグダイアル５２が押し込まれるとぼけ量を増やすための信
号（押圧量によって異なる３種類以上の大きさの操作信号）を発し、ジョグダイアルが引き出されるとぼけ量を減らすための信号を発する。撮影者は、ジョグダイアル５２を操作して所望のぼけ量が得られた段階で別に設けられた決定釦を操作して付加するぼけ量を決定する。ズーム操作方向とぼけ量変更操作方向とを異ならせることで、操作部材（ジョグダイアル５２）を２系統の操作に共用できる。
【００９７】
(1-4)図８は、仮想絞り環５３によってぼけ量変更操作部材を構成するカメラの例を説明
する斜視図である。図８において、撮影レンズ２の鏡筒には、撮影レンズ２の光軸に平行な軸を中心に回転可能な仮想絞り環５３が配設されている。仮想絞り環５３には、回転角を示す指標が仮想絞り値の表示（例えばＦ１、Ｆ２．８等）とともに所定の仮想絞り段数毎（例えば、絞り段数１段毎や１／２段毎）に設けられており、各絞り位置にてクリック感を生じる構造となっている。例えば、仮想絞り環５３を仮想絞り値が開放する方向に２段回転させた際には、光学絞りを２段開放させた場合に相当する画像ぼけが付加される。仮想絞り環５３が回転操作されると、回転角度（仮想絞り段数）に応じてぼけ量を増減するための操作信号を発するように構成される。筐体の上部に配設される一対のズーム操作部材５４［Ｔ］、［Ｗ］と別に仮想絞り環５３を配設することで、右手でズーム操作しながら左手でぼけ量変更操作が可能である。
【００９８】
(1-5)図９は、図５の例と同様の操作信号を出力する押圧操作部材によってぼけ量変更操
作部材５１を構成するカメラの例を説明する斜視図である。図９において、カメラ筐体の左側面に一対のぼけ量変更操作部材５１［減］、［増］が配設されている。押圧量に応じてそれぞれがぼけ量を増減するための操作信号を発する点は、図５および図６の場合と同様である。カメラ筐体の右上面には、一対のズーム操作部材５４［Ｔ］、［Ｗ］が配設されている。図９の構成によれば、右手でズーム操作を行いながら、左手でぼけ量変更操作を行うことができる。
【００９９】
(1-6)図１０は、図９の変形例を示す図である。図９において、カメラ筐体の左側面に一
対のぼけ量変更操作部材５１［減］、［増］が配設され、カメラの右グリップの上面に、一対のズーム操作部材５４［Ｔ］、［Ｗ］が配設されている。図１０の構成でも、右手によるズーム操作と左手によるぼけ量変更操作とを同時に行うことができる。
【０１００】
(1-7)図１１は、図５の例と同様の操作信号を出力するスライド部材である操作ぼけ量変
更操作部材５１Ａおよびズーム操作部材５４Ａを近傍に配設するカメラの例を説明する図である。ぼけ量変更操作部材５１Ａは、スライド量（方向）に応じてぼけ量を増減するための操作信号（異なる３種類以上の大きさの操作信号）を発するように構成される。ズーム操作部材５４Ａは、スライド量（方向）に応じてズームアップ／ズームダウンするための操作信号を発するように構成される。両操作部材を近接させ、操作方向を揃えたことで、異なる指を用いて同時にズーム操作およびぼけ量変更操作を行うことが可能である。上記の図５〜図１１の例においては、ぼかし量の大きさを変更する操作部材として操作量に応じて異なる３種類以上の大きさの操作信号を発する操作部材を用いる場合について説明した。このような構成とすれば、画像に対して付加するぼけ量を時間とともに良好に変化させることができ、特に動画像、スルー画像に画像ぼけを付加する場合に好適である。もちろん、これに代えて、操作部材として２値的な出力信号を発する部材を採用し、操作時間に応じて、画像に付加するぼけ量を変更する構成としてもよい。例えば、ズームアップ／ズームダウンを指示する操作部材と、ぼけ量変更操作部材を兼用する構成とすれば、操作部材の数を減らすことができ、装置の小型化が実現できる。例えば、スルー画像、動画像の撮影時には、ズームアップ／ズームダウンを指示する操作部材として機能し、再生モード時にはぼけ量変更操作部材として機能するように構成できる。また、後述する４連スイッチ５５を用いる構成としても構わない。この場合の４連スイッチ５５は、撮影中はぼけ量変更操作部材として機能し、メニュー選択のための操作部材としては機能しない。
【０１０１】
２．再生時のぼけ量変更操作
再生時(電気的な画像ぼけの付加が許可された状態で、記録された画像を再生する場合)はぼけ量変更操作と電子ズーム操作とが可能に構成され、光学的なズーム操作は行われない。制御回路５は、記録媒体１２に記録されている画像データを読み出し、読み出しデータに対して復号化処理を施し、復号化後のデータをデータ処理回路１０へ送る。制御回路５は、復号化後のデータから主要被写体の抽出処理を行い（ステップＳ１０３と同様）、抽出した主要被写体以外の領域（すなわち背景領域）に対する画像ぼけの付加処理をデータ処理回路１０へ指示する（ステップＳ１０４と同様）。制御回路１０５はさらに、ぼけ量変更操作が行われるとぼけ量を変更させる（ステップＳ１０９、Ｓ１１０と同様）。
【０１０２】
(2-1)図５および図６、図９〜図１１に例示したカメラの再生時には、ぼけ量変更操作部
材５１（図１１の場合は５１Ａ）［増］、［減］が押圧操作されると、それぞれがぼけ量を増減するための操作信号を発するように構成される。
【０１０３】
(2-2)図７に例示したカメラの再生時には、ジョグダイアル５２の回転操作によってぼけ
量を増減するための操作信号を発するように構成される。すなわち、回転方向がぼけ量の増減に対応し、回転量が増減量に対応するように、ぼけ量を変化させるためのジョグダイアル５２の操作が撮影時と異なり、ジョグダイアル５２によって再生時に変更される機能が限定される。
【０１０４】
(2-3)図５〜図７に例示したカメラの場合、メニュー選択のための操作部材として配設さ
れている４連スイッチ（ＳＷ）５５を再生時のぼけ量変更操作部材としてもよい。
【０１０５】
(2-4)図８に例示したカメラの再生時に、仮想絞り環５３の操作に基づいて、再生画像に
付加される画像ぼけの量を変更する構成としてもよい。この場合、仮想絞り環５３は、実際に光学絞りの絞り値を変更する操作部材であっても構わない。この操作部材から出力される操作信号は制御回路５に入力され、制御回路５の制御のもとで、再生画像に対する画像ぼけの付加量が変更される。この操作部材の操作によって、光学絞りが駆動され光学絞り値が変更されたとしても、再生画像に対して何ら影響を及ぼすものではないことは言うまでもない。消費電力の観点から、再生モード時にこの操作部材が操作された場合には、光学絞りを駆動することなく、再生画像に対する画像ぼけの付加量を変更することが好ましい。
【０１０６】
(2-5)また、スルー画撮影時には画像ぼけの付加を行わず、本撮影された静止画像を記録
媒体１２に記録する前、もしくは記録した後に、モニタ１３に表示した上で画像ぼけを付加するような場合には、ズーム操作と画像ぼけの付加、変更操作は必ずしも同時に行う必要はない。従って、図５から図１１のぼけ量を変更する操作部材５１,５２,５３,５１Ａ
は必ずしも必要ではなく、ズーム操作部材５４のような他の用途に用いられる操作部材で兼用することができる。例えば、本撮影された静止画像がモニタ１３に表示されている状態でズーム操作部材５４のスイッチ［Ｔ］を押圧すると、操作時間に応じて画像ぼけの量が大きくなり、スイッチ［Ｗ］を押圧すると、操作時間に応じて画像ぼけの量が小さくなる。また、スイッチ［Ｔ］とスイッチ［Ｗ］を同時に押圧操作すると、モニタ１３上で付加された画像ぼけをリセット(画像ぼけが付加されていない状態にする)ことができる。このような操作は、４連スイッチ５５によって行ってもよい。付加する画像ぼけの量を４連スイッチ５５を用いて変更する構成とすれば、ズーム操作部材５４等の操作により、モニタ１３上の像を電気的に拡大することができ、画像ぼけを付加しつつ、細部にわたって画像確認を行うことができる。
【０１０７】
上記のようなぼけ量変更操作に伴い、仮想絞り値を画像とともにモニタ１３に重畳表示
するように構成してもよい。仮想絞り値は、付加される画像ぼけ量と等価な光学ぼけを与える光学絞り値とする。仮想絞り値は、例えば、画像ぼけの付加量を決めるLPF特性（あ
るいは点拡がり関数）を示すデータの関数として算出してもよいし、画像ぼけの付加量を引数としてルックアップテーブルから読み出せるようにあらかじめテーブル化しておいてもよい。このように算出した仮想絞り値が表示されることにより、撮影者は、付加される画像ぼけの量を直感的に把握することができる。
【０１０８】
仮想絞り値をモニタ１３に表示する場合、モニタ１３に実際の撮影レンズ２の光学絞り値を表示しているときは、光学絞り値と仮想絞り値とを異なる態様（例えば異なる表示色）で表示するとより一層好適である。異なる態様で表示することで、撮影者が両者を識別し易くなる。
【０１０９】
トリミング等の画像編集作業などのために、再生モード時に電子ズーム操作が行われると、モニタ１３の表示画面には再生画像の一部が表示される。この場合、撮影時に合焦した主要被写体が表示中の電子ズーム範囲に含まれないことがある。この場合には、モニタ１３の表示範囲に対応する画像信号についての高周波数成分の積算値（いわゆる焦点評価値）を最大にする領域を抽出し、この領域をズーム画面における主要被写体とみなす。焦点評価値の最大値を含む領域は、表示中の電子ズーム画面の中で最もピントが合っている（画像の尖鋭度が高い）と思われる領域である。このような構成とすれば、モニタ１３が拡大表示しようとする範囲に、撮影の際の自動合焦動作における焦点検出領域が含まれていない場合であっても、画像ぼけを付加しない領域を適切に判断することができる。モニタ１３が拡大表示しようとする範囲に、自動合焦動作に用いられた焦点検出領域がある場合には、この領域を基準に、この領域以外の領域に画像ぼけを付加する構成としてもよい。この場合には、上述の高周波数成分の積算値の算出処理は行わない。制御回路５は、この抽出領域を基準に、抽出した領域以外の領域（すなわち背景領域）に対する画像ぼけの付加処理をデータ処理回路１０へ指示する（ステップＳ１０４と同様）。制御回路５はさらに、ぼけ量変更操作が行われるとぼけ量を変更させる（ステップＳ１０９、Ｓ１１０と同様）。
【０１１０】
なお、モニタ１３の表示範囲に対応する画像信号から焦点評価値の最大値を含む領域が抽出不能の場合や、電子ズーム画面の中央を基準にするように指示されている場合には、表示中の電子ズーム画面の中央部をピントが合っている領域とみなす。制御回路５は、この中央部を基準に、中央部以外の領域に対する画像ぼけの付加処理をデータ処理回路１０へ指示する。このような構成とすれば、注目する被写体が存在する可能性が高い画面の中央部を除いた領域に画像ぼけが付加されるので、誤った場所に画像ぼけが付加されてしまう可能性が低減する。
【０１１１】
以上説明した実施形態によれば、以下の作用効果が得られる。
（１）撮像装置（画像再生装置、画像処理装置）は、画像信号の高周波数成分の積算値を演算して画像の尖鋭度が高い領域を検出し、当該画像信号のうち、検出領域と異なる領域に対応する信号に画像ぼけを付加するようにしたので、画像ぼけを付加すべき領域（ピントが合っている領域と異なる背景領域）を適切に抽出し、ぼかしを付加することができる。
【０１１２】
（２）上記（１）の撮像装置（画像再生装置）は、電子ズーム倍率を高める方向に解像度変換を行って再生画像の一部をモニタ１３に拡大表示する場合、モニタ１３の表示範囲に対応する画像信号から画像の尖鋭度が高い領域を検出するようにしたので、表示範囲の中で画像ぼけを付加すべき領域（ピントが合っている領域と異なる背景領域）を適切に抽出し、ぼかしを付加することができる。上記の電子ズーム動作は、連続的に行われるものに限定されず、トリミングしての拡大動作など１回しか行われない場合も含む。
【０１１３】
（３）上記（１）の撮像装置（画像再生装置）は、電子ズーム倍率を高める方向に解像度変換を行って再生画像の一部をモニタ１３に拡大表示する場合、モニタ１３の表示範囲の中央部に対応する領域を検出するようにしたので、表示範囲の中にピントが合っている領域がない場合に、表示範囲中央部にぼかしを付加することができる。
【０１１４】
（４）解像度変換比率（電子ズーム倍率）に応じて付加する画像ぼけの大きさを変更するようにすれば、従来の光学的なズーム動作において付加される光学的なぼけと同様の動作を実現できる。特に、光学的なズーム動作に継続して電子ズーム動作が行われる場合であっても違和感のない画像を得ることができる。
【０１１５】
（５）画像ぼけの付加と解像度変換（電子ズーム）との双方を行う場合で、少なくとも電子ズーム倍率を高める方向に解像度変換を行う場合は、解像度変換後に画像ぼけを付加する構成とする。これにより、画質劣化が抑えられ、解像度変換前に画像ぼけを付加する構成に比べて、電子ズームの最大拡大倍率を高く設定できる。
【０１１６】
（６）ダイアル部材である操作ぼけ量変更操作部材５３からぼけ量を増減するための操作信号を発するように構成したので、従来の操作性を維持した簡単な操作でぼかしの大きさを変更できる。
【０１１７】
（７）仮想絞り値（付加される画像ぼけ量と等価な光学ぼけを与える光学絞り値）を画像とともにモニタ１３に重畳表示するようにすれば、撮影者は、付加される画像ぼけの量を直感的に把握することができる。この際に電子ズーム倍率に応じた仮想的な焦点距離も表示する構成とすれば、より一層好適である。
【０１１８】
（変形例１）
ぼけ量変更操作部材の操作に応じて画像ぼけの付加量を変更する他に、被写体と撮像装置との間の距離(撮影距離)情報に応じて、デフォルト状態で設定されている画像ぼけ量を変更する構成としてもよい。距離情報は、ＡＦ動作中に取得されている距離情報を用いる。制御回路５は、移動する被写体と撮像装置との間の撮影距離がある時点より短くなると、移動被写体と静止している背景との間の距離が広がったとみなす。移動被写体を対象にＡＦ動作を行う場合、移動被写体に合焦させる動作が連続的に行われるため、移動被写体についての焦点調節状態は変化しない。この場合の制御回路５は、背景領域に対して付加するぼけ量を、上記ある時点と比較して大きくするように制御する。
【０１１９】
反対に、移動する被写体との撮像装置との間の撮影距離がある時点より長くなると、制御回路５は、移動被写体と静止している背景との間の距離が縮まったとみなす。制御回路５は、背景領域に対して付加するぼけ量を、上記ある時点と比較して小さくするように制御する。
【０１２０】
変形例１では、移動被写体および背景間の距離に応じて画像ぼけ量を変更する例を説明したが、複数の移動被写体に対してそれぞれ距離情報を取得し、複数の移動被写体間の距離に応じて各被写体領域に付加するぼけ量を動的に変化させてもよい。複数の移動被写体に対する距離情報は、例えば、複数のフォーカス検出領域ごとに当該領域に存在する被写体までの距離情報を取得すればよい。
【０１２１】
（変形例２）
以上の説明では、画像ぼけを付加した後に半押し操作が解除されると（ステップＳ１１１を否定判定）、画像ぼけの付加を解除するようにしたが、撮影レンズ２の光学絞りが変更された場合にも画像ぼけの付加を解除する構成にしてもよい。光学絞りは、例えば不図
示の絞り環や操作部材７からの操作信号によって変更される。制御回路５は、このような光学絞りの変更指示に応じて、現時点において付加している画像ぼけを一旦解除する。この結果、光学的なぼけと電気的に付加する画像ぼけとの双方を迅速に設定し直すことが可能になる。
【０１２２】
（変形例３）
ステップＳ１０５の説明では、フレーム間の動きベクトルを検出することによって撮影画面に動きがあるか否かを判定するようにした。この代わりに、角速度センサ、角加速度センサ、および加速度センサなどのいずれかの動きセンサを撮像装置に配設し、センサによる検出結果を用いて判定する構成にしてもよい。
【０１２３】
（変形例４）
上述したように、ステップＳ１０５およびステップＳ１０７の判定をともに動きベクトルを用いて行う場合には、ステップＳ１０５の判定処理と、ステップＳ１０７の判定処理とを並行して行ってもよい。
【０１２４】
（変形例５）
画像ぼけを付加することなしにスルー画像をモニタ１３に表示するように設定され、本撮影で得られる本撮影画像に対してのみ画像ぼけを付加する設定が行われている撮像装置の場合、上記ステップＳ１１３で説明した内容に代えて次のように本撮影用の露出を決定するとよい。すなわち、画像ぼけが付加されていない直近のスルー画像データの信号値（明るさ情報）に基づいて本撮影用の露出を演算し、この演算値を本撮影画像に付加される画像ぼけの量に応じて補正し、補正後の演算値に基づいて本撮影用の露出を決定する。撮像装置は、決定された露出に基づいて、撮像素子１の電子シャッタ速度（電荷蓄積時間）、絞り、撮像素子１の出力する画像信号の増幅度等を設定し、撮像動作を行う。これにより、例えば、スポット測光領域に輝点が含まれており、この輝点に画像ぼけを付加すると画像ぼけ領域が測光領域より大きくなってしまう場合のように、画像ぼけが付加されることによって画像の明るさの判定が変化する場合でも、適切な明るさの本撮影画像が得られる。
【０１２５】
（変形例６）
画像ぼけの付加（および付加内容の変更）の許可／禁止を判定する処理において、例えば、夜景ポートレートモードであっても画像の背景領域に所定レベル以上の明るさを有する領域が存在しない場合に、画像ぼけの付加（および付加内容の変更）を禁止する例を説明したが、次のようにしてもよい。すなわち、スルー画像もしくは本撮影画像をモニタ１３に表示する場合には画像ぼけの付加を禁止することをデフォルト設定とし、操作部材７から画像ぼけの付加を指示する操作信号が制御回路５へ入力された場合にのみ、画像ぼけの付加を許可する。もちろん、画像ぼけの付加が許可された状態では、画像ぼけを付加したデータを記録媒体１２へ記録可能に構成される。
【０１２６】
（変形例７）
ポートレートモードなどの撮影モードの設定状態に応じて画像ぼけの付加（および付加内容の変更）の許可／禁止を判定する処理に代えて、スルー画像中に人の顔が認識されるか否かに応じて画像ぼけの付加（および付加内容の変更）の許可／禁止を判定してもよい。この場合の制御回路５は、上述したＡＦ動作の終了後に撮像される画像であって、画像ぼけが付加されていないスルー画像を用いて公知の顔認識処理を施し、顔領域を抽出する。制御回路５は、抽出した顔領域を含む被写体を主要被写体とする。人の顔が認識された画像だけ、制御回路５によって画像ぼけの付加を許容する構成としてもよい。このような構成とすれば、人の顔が認識された場合に自動的にポートレート調の撮影を行うことができる。さらに、人の顔の数（例えば２人以下）、大きさ（所定値以上）の条件を満足した
ときに画像ぼけを付加するように構成してもよい。
【０１２７】
なお、画像ぼけの付加（および付加内容の変更）を本撮影画像にのみ行うように設定されている（スルー画像には付加しない）場合にも、画像ぼけが付加されていないスルー画像を用いて顔認識処理を施し、顔領域が認識された場合に本撮影画像に対する画像ぼけの付加（および付加内容の変更）を許可するように構成してもよい。このような構成とすれば、被写体認識処理を正確かつ迅速に行える。
【０１２８】
（変形例８）
画像ぼけの付加が許可された場合に絞り優先オートモードに設定する（ステップＳ１０２）代わりに、撮影レンズ２の光学絞りを所定の絞り値（例えば、開放値）に設定する構成にしてもよい。光学絞りに起因する光学ぼけが所定の状態に維持されるので、被写体輝度の変動にともなって本画像のぼけ量（光学ぼけと付加された画像ぼけの総和）が変動することが防止される。これにより、画像ぼけの付加量の設定変更操作が容易になる。なお、光学絞りを所定の絞り値に設定することにより、設定前後でモニタ１３に表示されるスルー画像の明るさが変化しないように、光学絞りの変更段数に応じてリアルタイムに撮像素子１の電荷蓄積時間（もしくは撮像素子１より出力される信号の増幅率）を異ならせるとよい。
【０１２９】
上記所定の絞り値を開放値に固定する場合には、被写界深度が浅くなり、画像ぼけを付加する領域の確認や指定操作が容易になる。
【０１３０】
（変形例９）
スルー画像から抽出した主要被写体の背景の領域に対して画像ぼけの付加を行うようにしたが、操作部材７の操作信号（例えば、カーソル位置を示す信号）によって示される領域に画像ぼけの付加を行うように構成してもよい。カーソルで示される被写体に画像ぼけが付加され、主要被写体を引き立たせる撮影効果が得られる。
【０１３１】
（変形例１０）
以上の説明では、レリーズ釦が半押し操作されると（ステップＳ１０１を肯定判定）、モニタ１３に表示される画像に画像ぼけを付加するようにしたが、操作部材７（例えば、ビュースイッチ）が操作されたときに画像ぼけを付加した画像をモニタ１３表示するように構成してもよい。ビュースイッチの操作に応じて画像ぼけが付加された画像をモニタ１３へ表示する場合、ビュースイッチからの操作信号が継続している間は同一の撮像画面（スルー画像）を連続して表示すると好適である。撮影者は、表示画面（フリーズ画面）をゆっくり確認することができる。また、これにより、撮影者が画像ぼけを確認したいときのみ、画像ぼけが付加されるので信号処理の負担が少ない。また、従来の一眼レフカメラと同様の使い勝手を実現することができる。
【０１３２】
なお、モニタ１３の表示がオフされている場合には、ビュースイッチからの操作信号を無効にする。この場合には、画像ぼけの付加（および付加内容の変更）を本撮影画像にのみ行うように設定されている場合と同様に、スルー画像に対する画像ぼけの付加を省略する。
【０１３３】
（変形例１１）
変形例１０と反対に、モニタ１３の表示がオフされている状態でビュースイッチからの操作信号が入力される場合に、モニタ１３をオン（起動）させてもよい。この場合には、ビュースイッチの操作に応じてモニタ１３を起動し、画像ぼけが付加された画像をモニタ１３へ表示する。ビュースイッチからの操作信号が継続している間は同一のスルー画像を静止画像として表示すると好適である。
【０１３４】
（変形例１２）
撮影時の撮影モードがポートレートモード、およびマクロモードに設定されている場合に画像ぼけの付加（および付加内容の変更）を許可する例を説明したが、次のように構成してもよい。すなわち、ポートレートモード、およびマクロモードに設定されている場合の操作メニューモードに「画像ぼけ」に関するメニュー項目を含め、このメニュー項目において「画像ぼけ」を「付加する」ように指示された場合に画像ぼけの付加（および付加内容の変更）を許可する。一方、撮影モードがポートレートモード、およびマクロモードであっても、メニュー項目において「画像ぼけ」を「付加しない」ように指示された場合には画像ぼけの付加（および付加内容の変更）を禁止する。ポートレートモードやマクロモードでも、画像ぼけを付加するか否かを自分で決めたいという撮影者の希望をかなえる撮像装置が得られる。一方、画像ぼけの付加を許可する／許可しないの設定が、撮影モードの設定より上位にあって(優先して設定されて)、ポートレートモード、マクロモード以外の撮影モードであっても、画像ぼけの付加を許可する設定となっているときには、画像ぼけの付加を許容する構成としてもよい。
【０１３５】
（変形例１３）
付加する画像ぼけの量を変更する際、ぼけ量変更操作部材の押圧量（もしくは回転量）に応じて付加する画像ぼけ量を変更（決定）するようにしたが、ぼけ量変更操作部材からの操作信号によって示される仮想絞り値に応じて付加する画像ぼけ量を変更する構成にしてもよい。この場合の制御回路５は、ぼけ量変更操作部材からの操作信号に応じた仮想絞り値を画像とともにモニタ１３に重畳表示させるとともに、この仮想絞り値に対応する画像ぼけを付加するようにデータ処理回路１０へ指示を送る。仮想絞り値は、現時点の画像に付加する画像ぼけ量と等価な光学ぼけを与える光学絞り値とする。ぼけ量変更操作を仮想絞り値（例えばＦ１１→Ｆ５．６）の変更操作として行う構成にすることで、撮影者は、現時点の画像に対して付加される画像ぼけの量を直感的に把握することができる。
【０１３６】
（変形例１４）
付加する画像ぼけの量を変更する際、ぼけ量変更操作部材からの操作信号によって示される仮想絞り段数に応じて付加する画像ぼけ量を変更（決定）する構成にしてもよい。この場合の制御回路５は、ぼけ量変更操作部材からの操作信号に応じた仮想絞り段数を画像とともにモニタ１３に重畳表示させるとともに、この仮想絞り段数に対応する画像ぼけを付加するようにデータ処理回路１０へ指示を送る。仮想絞り段数は、現時点の画像に付加する画像ぼけ量と等価な光学ぼけを与える光学絞り段数とする。ぼけ量変更操作を仮想絞り段数（例えば−２段）の変更操作として行う構成にすることで、撮影者は、現時点の画像に対して付加される画像ぼけの量を直感的に把握することができる。
【０１３７】
（変形例１５）
画像ぼけの付加と電子ズーム動作の双方を行う場合において、画質劣化を抑えるために電子ズーム後に画像ぼけを付加する点と、付加する画像ぼけの程度（量）が大きいほど電子ズームの最大拡大倍率を高く設定する点とを説明したが、電子ズーム倍率に応じて付加する画像ぼけの程度（量）を変更するように構成してもよい。電子ズーム倍率が小さい場合は、画像ぼけの付加量を小さく抑える。通常、撮影レンズ２の焦点距離が長くなるほど（拡大倍率が大きくなるほど）光学的なぼけの量は大きい。上記の構成によれば、電子的なズーム動作によっても、この動作と同様の画像を得ることができる。
【０１３８】
反対に、電子ズーム倍率が大きい場合は画像ぼけ付加量を大きくするが、電子ズーム前の画像に対する電子ズーム処理による拡大倍率が所定倍（例えば３倍）以上の場合は画像ぼけの付加を省略する（付加量を０にする）。これにより、高い電子ズーム倍率で画質劣化が進んだ画像に対し、無駄な画像ぼけの付加を止めることができる。このような構成は
、画像ぼけを付加した後に電子ズーム処理を行う装置に対しても同様に適用することができる。
【０１３９】
（変形例１６）
本撮影時の露出条件を段階的に変化させ、それぞれの露出値で複数の画像データを得るＡＥブラケティング撮影を行うように撮像装置が設定されている場合に、撮影レンズ２の絞り値を変えて露出条件を変化させることにより、複数の画像データを得るように構成してもよい。この場合の制御回路５は、複数の画像間で本撮影静止画像のぼけ量（光学ぼけと付加された画像ぼけの総和）が略一定になるように、各画像に付加する画像ぼけ量を段階的に異ならせる。これにより、光学絞り値を変更して通常のＡＥブラケティングを行うと各画像間で明るさおよび被写体深度（ぼけの状態）が異なるが、変形例１６では、各画像間で明るさのみが異なって被写体深度が同等の画像を得ることができる。
【０１４０】
（変形例１７）
本撮影時の画像ぼけの付加量を段階的に変化させ、それぞれの付加量で複数の画像データを得る画像ぼけブラケティング撮影を行うように構成してもよい。制御回路５は、複数の画像間で画像ぼけの付加量を段階的に異ならせる。これにより、本撮影時の露出条件を変化させなくても、各画像間で被写体深度が異なる画像を得ることができる。
【０１４１】
（変形例１８）
画像ぼけの付加が許可された場合に絞り優先オートモードに設定したり（ステップＳ１０２）、撮影レンズ２の光学絞りを所定値に設定したり（変形例８）する代わりに、撮像装置が決定した制御絞り値に応じて、付加する画像ぼけの大きさを決定する構成にしてもよい。この場合の撮像装置は、露出モードがプログラムオートモードまたはシャッタ速度優先オートモードに設定されている。プログラムオートモードは、明るさ情報に応じて制御絞り値および制御シャッタ秒時（電荷蓄積時間）の組み合わせを決定する露出モードである。この際に、さらに画像信号の増幅度を変更するものであってもよい。制御絞り値および制御シャッタ秒時（電荷蓄積時間）等の組み合わせは、プログラム線図データとしてあらかじめ制御回路５内に記憶されている。シャッタ速度優先オートモードは、設定されているシャッター秒時（電荷蓄積時間）で適正露出が得られるように、明るさ情報に応じて制御絞り値等を決定する露出モードである。
【０１４２】
露出モードがプログラムオートモード、またはシャッタ速度優先オートモードの場合、撮影時の撮影レンズ２の光学絞り値は制御絞り値に制御されるので、検出される被写体の明るさ情報によって、光学絞り値に起因する光学ぼけの大きさが異なる。具体的には、制御絞り値が開放値に近づくと光学ぼけが大きくなり、制御絞り値が絞り込まれると光学ぼけが小さくなる。そこで、このような光学ぼけの大きさの変動をキャンセルするように、制御絞り値に応じて付加する画像ぼけの大きさを決定する構成にすれば、本画像のぼけ量（光学ぼけと付加された画像ぼけの総和）を一定に保つことができる。
【０１４３】
＜モニタ表示の変形例１＞
画像をモニタ１３へ表示する場合の他の表示態様について、図４(c)を参照して説明す
る。図４(c)によれば、画像ぼけが付加された領域／付加されない領域を撮影者が容易に
視認できるように、画像ぼけを付加しない領域(この場合は主要被写体３００の領域)を他の領域に比べて明るく表示する。図４(c)では、主要な各被写体の輪郭の線の太さを変え
ることによって明るさの違いを表しており、線が太いほど輝度を高めて明るく表示される。つまり、主要被写体３００を一番明るく表示し、被写体３０１、被写体３０２の順に、画像ぼけの付加量（ぼけ効果の大きさ）が多いほどその被写体を暗く表示する。このように被写体の明るさを変えて表示することにより、撮影者は、画像ぼけが付加された領域／付加されない領域を容易に視認できるとともに、表示の明るさから付加された画像ぼけ量
を直感的に把握できる。なお、画像ぼけの付加量が多いほど、その被写体を明るく表示する構成にしてもよい。
【０１４４】
＜モニタ表示の変形例２＞
画像ぼけが付加された画像をモニタ１３へ表示する場合、着色によって画像ぼけの付加量の違いを表してもよい。この場合の制御回路５は、通常、モノクロ画像をモニタ１３に表示させ、画像ぼけを付加した画像を表示する場合には、画像ぼけを付加した領域に色をつけて表示させる。この際、画像ぼけの付加量（ぼけ効果の大きさ）が多いほど、その被写体を色濃く表示させる。このように被写体の色の濃淡を変えて表示することにより、撮影者は、画像ぼけが付加された領域／付加されない領域を容易に視認できるとともに、色の濃淡から付加された画像ぼけ量を直感的に把握できる。
【０１４５】
＜モニタ表示の変形例３＞
また、画像ぼけが付加された領域について撮影者の視認性の向上を図るために、モニタ１３による表示画像において画像ぼけの付加量を実際より大きくした上で表示させてもよい。また、撮像装置の小型化によってモニタ１３の大きさが制限される場合には、小さな画面からでも撮影者が容易に視認できるように画像ぼけの付加領域を広げ、強調して表示させてもよい。モニタ１３の画面が小さかったり、モニタ１３の表示画素数が少ない場合に画像ぼけの付加量、付加領域を強調表示することで、画像ぼけが付加された領域／付加されない領域を撮影者にわかりやすく表示することができる。
【０１４６】
以上説明したモニタ表示の変形例１〜３による表示態様は、操作部材７からの操作信号に応じて通常の表示態様（実施形態で説明した表示態様）との間で切り替え可能に構成してもよい。例えば、強調表示スイッチ（不図示）が操作されている間にのみ上記態様で表示する構成とすれば、撮影者が必要とする場合にただちにぼけ付加領域の確認を行うことができ、より一層好適である。
【０１４７】
以上の説明では、主要被写体と異なる背景領域について画像ぼけを付加する例を説明した。この他にも、撮影レンズ２などの撮影光学系や撮像素子１の撮像面に付着したゴミ（異物）やキズによる像を含む撮像画面上の領域について画像ぼけを付加するように構成してもよい。
【０１４８】
上記ゴミ（異物）やキズによる像を含む撮像画面上の領域についての画像ぼけの付加量は、ゴミ（異物）やキズによる像を含む領域とその背景領域とのコントラストに応じて変化させる。コントラストが大きい場合は付加量を大きくし、コントラストが小さい場合には付加量を小さくする。このような構成とすることにより、ゴミ（異物）付着領域等に必要以上の画像ぼけが付加され、本来必要とするべき画像情報が失われてしまうことが防止される。
【０１４９】
撮像装置は、撮像面や撮影光学系に付着したゴミ(異物)やキズを、撮像素子１が出力する画像信号から検出する動作モードを有しており、この動作モードに設定された場合には、画像ぼけの付加されていない画像信号(データ)に対応する画像をモニタ１３に表示する。この動作モードにおいて、画像ぼけの付加を禁止する構成としてもよい。撮影者は、例えば白色の紙を撮像し、モニタ１３に表示された画像をもとにゴミやキズの像を確認することができる。この状態で、データ処理回路１０は、画像データを解析して、ゴミ、キズの像の大きさ、画面上の位置についての情報を得ることができる。このように、画像ぼかしの付加されていない画像信号(データ)をもとに、撮像面や撮影光学系に付着したゴミ(
異物)やキズを検出する構成とすることにより、より正確な検出を行うことができる。
【０１５０】
また、撮像装置が撮像素子１の撮像面に付着したゴミ（異物）やキズを自動的に検出す
る動作モードを有しており、この動作モードに設定された場合、上記ゴミ（異物）を含む撮像面上の領域に対応する画像信号（データ）であって、画像ぼけを付加する前の画像信号（データ）を用いてゴミ（異物）やキズを検出するようにしてもよい。
【０１５１】
以上の実施形態では撮像装置を例に説明したが、記録されている画像データによる再生画像をモニタ１３に表示する画像再生装置、あるいは画像処理装置にも本発明を適用できる。この場合には、撮像素子１からの画像信号の代わりに、メモリカードやハードディスク装置などから読み出した画像データに対して解像度変換や画像ぼけの付加を行う。
【０１５２】
以上の説明はあくまで一例であり、発明を解釈する上で、上記の実施形態の構成要素と本発明の構成要素との対応関係に何ら限定されるものではない。
【符号の説明】
【０１５３】
１…撮像素子
２…撮影レンズ
５…制御回路
７…操作部材
９…信号処理回路
１０…データ処理回路
１１…圧縮／伸張回路
１２…記録媒体
１３…モニタ
１４…表示制御回路
【特許請求の範囲】
【請求項１】
画像信号を記録する記録手段と、
前記記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記記録手段から読み出され、前記ぼかしの付加された再生画像を表示する表示手段と、
前記表示装置の表示画面内で、最も多くの高域空間周波数成分を含んでいる領域を基準領域として抽出する抽出手段と、
前記表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、
前記操作部材が操作され、前記表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、前記表示手段の表示画面に次に表示されるべき次表示領域に対応する前記画像信号の中から、前記基準領域を抽出させるように前記抽出手段を制御するとともに、前記次表示領域に対応する画像信号のうち、前記基準領域を除いた領域に前記ぼかしを付加させるように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記制御手段は、前記次表示領域に対応する前記画像信号の中から前記基準領域を抽出させる際に、前記次表示領域に対応する前記画像信号の中に当該画像の撮影時の自動合焦動作の際に用いられた焦点検出領域がある場合には、当該焦点検出領域を前記基準領域とするように前記抽出手段を制御することを特徴とする画像処理装置。
【請求項３】
画像信号を記録する記録手段と、
前記記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記記録手段から読み出され、前記ぼかしの付加された再生画像を表示する表示手段と、
前記表示装置の表示画面内で、基準領域を抽出する抽出手段と、
前記表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、
前記操作部材が操作され、前記表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、前記表示手段の表示画面に次に表示されるべき次表示領域に対応する前記画像信号の中から、前記基準領域を抽出させるように前記抽出手段を制御するとともに、前記次表示領域に対応する画像信号のうち、前記基準領域を除いた領域に前記ぼかしを付加させるように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項４】
請求項１または請求項３に記載の画像処理装置において、
前記表示手段に表示される再生画像に付加される前記ぼかしの量を変更する回転操作部材を有することを特徴とする画像処理装置。
【請求項５】
請求項１または請求項３に記載の画像処理装置において、
前記制御手段は、前記操作部材によって前記再生信号の電気的な拡大表示倍率の変更が指示されるたびに、前記ぼかし付加手段によって付加されるぼかしの量を変更することを特徴とする画像処理装置。
【請求項６】
被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記ぼかしの付加された画像信号に対応する画像を、前記撮像素子による撮像動作と並行して表示する表示手段と、
前記撮像動作中に、前記表示手段が表示している前記画像の拡大表示の指示がなされたときに、前記画像信号に解像度変換を施す解像度変換手段と、
前記撮像動作中に、前記拡大指示がなされたときに、前記解像度変換手段によって解像度変換された画像信号を加工して前記ぼかしを付加するように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項７】
請求項６に記載の画像処理装置において、
前記撮像動作中に前記表示手段が表示している前記画像の縮小表示の指示がなされたときに、前記制御手段は、前記ぼかし付加手段によってぼかしが付加された前記画像信号に対して、前記解像度変換手段が縮小のための解像度変換を行うように制御することを特徴とする画像処理装置。
【請求項８】
被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号に基づく画像を表示する表示手段と、
前記表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、
前記表示手段に表示される画像の電気的な拡大を指示する指示手段と、
前記指示手段の指示に応じて、前記画像信号に解像度変換を施して前記画像信号に対応する画像の電気的な拡大処理を行う解像度変換手段と、
撮影指示前に、前記撮像素子に撮像されて前記表示手段に表示される画像に対して、前記指示手段によって拡大指示がなされた場合には、前記ぼかし付加手段によりぼかしが付加された画像に対して、前記解像度変換手段により電気的な拡大処理を行って前記表示手段に表示するように制御するとともに、前記撮影指示の後に撮影された画像に前記ぼかしが付加された画像を前記表示手段に表示している際に、前記指示手段によって拡大指示がなされた場合には、前記解像度変換手段で前記ぼかしが付加される前の画像信号に対して電気的な拡大処理を行った上で、前記ぼかし付加手段によりぼかしが付加された画像を前記表示手段に表示するように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項９】
画像信号を記録する記録手段と、
前記記録手段から読み出された画像信号に対応する画像を表示する表示手段と、
前記表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、
前記表示手段に表示される画像の電気的な拡大を指示する指示手段と、
前記指示手段の指示に応じて、前記記録画像信号に解像度変換処理を施して電気的な拡大処理を行う解像度変換手段と、
前記指示手段によって前記表示手段に表示される画像の連続的な拡大が指示された際に、前記ぼかし付加手段によってぼかしが付加される前の前記記録画像信号に対して前記解像度変換処理を行った画像を、前記表示手段に表示するように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１０】
被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記ぼかしの付加された画像信号に対応する画像を前記撮像素子による撮像動作と並行して表示する表示手段と、
前記撮像動作中に、前記表示手段が表示している前記画像の表示倍率の変更指示がなされたときに、前記画像信号に基づく信号に解像度変換を施す解像度変換手段と、
前記撮像動作中に、前記変更指示がなされたときに、前記変更された表示倍率に応じて付加されるぼかしの量を変更するように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１１】
請求項１０に記載の画像処理装置において、
短焦点端と長焦点端とで光学絞り量の異なるズーム撮影光学系をさらに備え、
前記ぼかし付加手段は、前記ズーム撮影光学系が前記長焦点端の状態で、さらに前記表示倍率の変更指示がなされたときに、前記長焦点端での光学絞り値よりさらに絞り込んだ絞り値に相当するぼかし画像となるように、前記ぼかしを前記画像の所定領域に付加することを特徴とする画像処理装置。
【請求項１２】
ズーム撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記ぼかしの付加された画像信号に対応する画像を前記撮像素子による撮像動作と並行して表示する表示手段と、
前記撮像動作中に、前記表示手段が表示している前記画像の表示倍率の拡大変更指示が連続してなされたときに、前記ズーム撮影光学系の焦点距離を長焦点距離端まで変更し、さらに継続して前記画像信号に基づく信号に解像度変換を施す拡大手段と、
前記撮像動作中に、前記表示倍率の拡大変更指示がなされ、前記焦点距離が所定の値となったときに、前記画像信号に対するぼかしの付加を開始して、前記ぼかしの付加された画像信号を前記表示手段に出力するように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１３】
画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記画像信号に基づく画像の電気的な拡大を指示する指示手段と、
解像度変換によって前記電気的な拡大処理を行う拡大手段と、
前記指示手段によって所定倍率以上の拡大が指示されたときに、前記ぼかし手段によるぼかしの付加が行われないように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１４】
撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号に加工処理を施して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記撮影光学系または前記撮像素子への異物の付着もしくは傷を前記画像信号をもとに検出する検出モードにおいて、前記ぼかし手段による前記ぼかしの付加を禁止する制御手段とを備えることを特徴とする画像処理装置。
【請求項１５】
請求項１４に記載の画像処理装置において、
前記制御手段は、前記検出モード以外の撮影モードで撮像された撮像画像上の前記異物もしくは前記傷の像を含む領域に前記ぼかしを付加するように前記ぼかし付加手段を制御することを特徴とする画像処理装置。
【請求項１６】
請求項１４に記載の画像処理装置において、
前記ぼかし付加手段は、前記検出モード以外の撮影モードで撮像された撮像画像上の前記異物もしくは前記傷の像を含む領域のコントラストの大きさに応じて、付加するぼかしの量を変更することを特徴とする画像処理装置。
【請求項１】
画像信号を記録する記録手段と、
前記記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記記録手段から読み出され、前記ぼかしの付加された再生画像を表示する表示手段と、
前記表示装置の表示画面内で、最も多くの高域空間周波数成分を含んでいる領域を基準領域として抽出する抽出手段と、
前記表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、
前記操作部材が操作され、前記表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、前記表示手段の表示画面に次に表示されるべき次表示領域に対応する前記画像信号の中から、前記基準領域を抽出させるように前記抽出手段を制御するとともに、前記次表示領域に対応する画像信号のうち、前記基準領域を除いた領域に前記ぼかしを付加させるように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記制御手段は、前記次表示領域に対応する前記画像信号の中から前記基準領域を抽出させる際に、前記次表示領域に対応する前記画像信号の中に当該画像の撮影時の自動合焦動作の際に用いられた焦点検出領域がある場合には、当該焦点検出領域を前記基準領域とするように前記抽出手段を制御することを特徴とする画像処理装置。
【請求項３】
画像信号を記録する記録手段と、
前記記録手段から読み出された画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記記録手段から読み出され、前記ぼかしの付加された再生画像を表示する表示手段と、
前記表示装置の表示画面内で、基準領域を抽出する抽出手段と、
前記表示手段の表示画面に表示される再生画像の電気的な拡大表示倍率を変更する操作部材と、
前記操作部材が操作され、前記表示手段の表示画面に表示される再生画像の電気的な拡大が指示された際に、前記表示手段の表示画面に次に表示されるべき次表示領域に対応する前記画像信号の中から、前記基準領域を抽出させるように前記抽出手段を制御するとともに、前記次表示領域に対応する画像信号のうち、前記基準領域を除いた領域に前記ぼかしを付加させるように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項４】
請求項１または請求項３に記載の画像処理装置において、
前記表示手段に表示される再生画像に付加される前記ぼかしの量を変更する回転操作部材を有することを特徴とする画像処理装置。
【請求項５】
請求項１または請求項３に記載の画像処理装置において、
前記制御手段は、前記操作部材によって前記再生信号の電気的な拡大表示倍率の変更が指示されるたびに、前記ぼかし付加手段によって付加されるぼかしの量を変更することを特徴とする画像処理装置。
【請求項６】
被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記ぼかしの付加された画像信号に対応する画像を、前記撮像素子による撮像動作と並行して表示する表示手段と、
前記撮像動作中に、前記表示手段が表示している前記画像の拡大表示の指示がなされたときに、前記画像信号に解像度変換を施す解像度変換手段と、
前記撮像動作中に、前記拡大指示がなされたときに、前記解像度変換手段によって解像度変換された画像信号を加工して前記ぼかしを付加するように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項７】
請求項６に記載の画像処理装置において、
前記撮像動作中に前記表示手段が表示している前記画像の縮小表示の指示がなされたときに、前記制御手段は、前記ぼかし付加手段によってぼかしが付加された前記画像信号に対して、前記解像度変換手段が縮小のための解像度変換を行うように制御することを特徴とする画像処理装置。
【請求項８】
被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号に基づく画像を表示する表示手段と、
前記表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、
前記表示手段に表示される画像の電気的な拡大を指示する指示手段と、
前記指示手段の指示に応じて、前記画像信号に解像度変換を施して前記画像信号に対応する画像の電気的な拡大処理を行う解像度変換手段と、
撮影指示前に、前記撮像素子に撮像されて前記表示手段に表示される画像に対して、前記指示手段によって拡大指示がなされた場合には、前記ぼかし付加手段によりぼかしが付加された画像に対して、前記解像度変換手段により電気的な拡大処理を行って前記表示手段に表示するように制御するとともに、前記撮影指示の後に撮影された画像に前記ぼかしが付加された画像を前記表示手段に表示している際に、前記指示手段によって拡大指示がなされた場合には、前記解像度変換手段で前記ぼかしが付加される前の画像信号に対して電気的な拡大処理を行った上で、前記ぼかし付加手段によりぼかしが付加された画像を前記表示手段に表示するように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項９】
画像信号を記録する記録手段と、
前記記録手段から読み出された画像信号に対応する画像を表示する表示手段と、
前記表示手段に表示される画像の所定領域にぼかしを付加するぼかし付加手段と、
前記表示手段に表示される画像の電気的な拡大を指示する指示手段と、
前記指示手段の指示に応じて、前記記録画像信号に解像度変換処理を施して電気的な拡大処理を行う解像度変換手段と、
前記指示手段によって前記表示手段に表示される画像の連続的な拡大が指示された際に、前記ぼかし付加手段によってぼかしが付加される前の前記記録画像信号に対して前記解像度変換処理を行った画像を、前記表示手段に表示するように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１０】
被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記ぼかしの付加された画像信号に対応する画像を前記撮像素子による撮像動作と並行して表示する表示手段と、
前記撮像動作中に、前記表示手段が表示している前記画像の表示倍率の変更指示がなされたときに、前記画像信号に基づく信号に解像度変換を施す解像度変換手段と、
前記撮像動作中に、前記変更指示がなされたときに、前記変更された表示倍率に応じて付加されるぼかしの量を変更するように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１１】
請求項１０に記載の画像処理装置において、
短焦点端と長焦点端とで光学絞り量の異なるズーム撮影光学系をさらに備え、
前記ぼかし付加手段は、前記ズーム撮影光学系が前記長焦点端の状態で、さらに前記表示倍率の変更指示がなされたときに、前記長焦点端での光学絞り値よりさらに絞り込んだ絞り値に相当するぼかし画像となるように、前記ぼかしを前記画像の所定領域に付加することを特徴とする画像処理装置。
【請求項１２】
ズーム撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記ぼかしの付加された画像信号に対応する画像を前記撮像素子による撮像動作と並行して表示する表示手段と、
前記撮像動作中に、前記表示手段が表示している前記画像の表示倍率の拡大変更指示が連続してなされたときに、前記ズーム撮影光学系の焦点距離を長焦点距離端まで変更し、さらに継続して前記画像信号に基づく信号に解像度変換を施す拡大手段と、
前記撮像動作中に、前記表示倍率の拡大変更指示がなされ、前記焦点距離が所定の値となったときに、前記画像信号に対するぼかしの付加を開始して、前記ぼかしの付加された画像信号を前記表示手段に出力するように前記ぼかし付加手段を制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１３】
画像信号を加工して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記画像信号に基づく画像の電気的な拡大を指示する指示手段と、
解像度変換によって前記電気的な拡大処理を行う拡大手段と、
前記指示手段によって所定倍率以上の拡大が指示されたときに、前記ぼかし手段によるぼかしの付加が行われないように制御する制御手段とを備えることを特徴とする画像処理装置。
【請求項１４】
撮影光学系を介して被写体像を撮像して画像信号を出力する撮像素子と、
前記画像信号に加工処理を施して画像の所定領域にぼかしを付加するぼかし付加手段と、
前記撮影光学系または前記撮像素子への異物の付着もしくは傷を前記画像信号をもとに検出する検出モードにおいて、前記ぼかし手段による前記ぼかしの付加を禁止する制御手段とを備えることを特徴とする画像処理装置。
【請求項１５】
請求項１４に記載の画像処理装置において、
前記制御手段は、前記検出モード以外の撮影モードで撮像された撮像画像上の前記異物もしくは前記傷の像を含む領域に前記ぼかしを付加するように前記ぼかし付加手段を制御することを特徴とする画像処理装置。
【請求項１６】
請求項１４に記載の画像処理装置において、
前記ぼかし付加手段は、前記検出モード以外の撮影モードで撮像された撮像画像上の前記異物もしくは前記傷の像を含む領域のコントラストの大きさに応じて、付加するぼかしの量を変更することを特徴とする画像処理装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１４２９７８（Ｐ２０１２−１４２９７８Ａ）
【公開日】平成２４年７月２６日（２０１２．７．２６）
【国際特許分類】
【出願番号】特願２０１２−４４３３４（Ｐ２０１２−４４３３４）
【出願日】平成２４年２月２９日（２０１２．２．２９）
【分割の表示】特願２００５−３１３８４７（Ｐ２００５−３１３８４７）の分割
【原出願日】平成１７年１０月２８日（２００５．１０．２８）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２４年７月２６日（２０１２．７．２６）
【国際特許分類】
【出願日】平成２４年２月２９日（２０１２．２．２９）
【分割の表示】特願２００５−３１３８４７（Ｐ２００５−３１３８４７）の分割
【原出願日】平成１７年１０月２８日（２００５．１０．２８）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]