画像処理装置および画像処理プログラム
【課題】静止画の場合でも主要被写体を際立たせるように画像処理すること。
【解決手段】画像処理装置５０は、互いに視差を含む２画像をそれぞれ同数の複数領域に分割する分割部と、２画像間の類似度を分割部により分割される分割領域ごとに演算する類似度演算部と、所定の画像処理を行う画像処理部と、２画像の少なくとも一方に対して施される画像処理部による画像処理の編集度合いを、分割領域における類似度に基づいて変化させるように画像処理部を制御する制御部と、を備える。
【解決手段】画像処理装置５０は、互いに視差を含む２画像をそれぞれ同数の複数領域に分割する分割部と、２画像間の類似度を分割部により分割される分割領域ごとに演算する類似度演算部と、所定の画像処理を行う画像処理部と、２画像の少なくとも一方に対して施される画像処理部による画像処理の編集度合いを、分割領域における類似度に基づいて変化させるように画像処理部を制御する制御部と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、および画像処理プログラムに関する。
【背景技術】
【０００２】
２次元画像の奥行き感を高めるために、背景領域と前景領域とで異なる画像処理を行う技術が知られている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２３９９０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来技術では、画像間の差分に基づいて背景か否かを判断し、背景に対してぼかしを付加する。背景を画像間の差分に基づいて判断するため、画像間に差分が生じない静止画像の場合への適用が困難という問題があった。
【課題を解決するための手段】
【０００５】
本発明による画像処理装置は、互いに視差を含む２画像をそれぞれ同数の複数領域に分割する分割部と、２画像間の類似度を分割部により分割される分割領域ごとに演算する類似度演算部と、所定の画像処理を行う画像処理部と、２画像の少なくとも一方に対して施される画像処理部による画像処理の編集度合いを、分割領域における類似度に基づいて変化させるように画像処理部を制御する制御部と、を備えることを特徴とする。
【発明の効果】
【０００６】
本発明によれば、静止画の場合でも主要被写体を際立たせるように適切に画像処理できる。
【図面の簡単な説明】
【０００７】
【図１】本発明の一実施の形態による画像処理装置を搭載する電子カメラを例示する図である。
【図２】制御部が実行する画像編集処理の流れを例示するフローチャートである。
【図３】画像Ａおよび画像Ｂに対する分割エリアを例示する図である。
【図４】分割エリアに付与した序列を例示する図である。
【図５】序列による順位と付加するぼかし量の大きさとの第１関係を例示する図である。
【図６】序列による順位と付加するぼかし量の大きさとの第２関係を例示する図である。
【図７】序列による順位と付加するぼかし量の大きさとの第３関係を例示する図である。
【図８】コンピュータ装置を例示する図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明を実施するための形態について説明する。図１は、本発明の一実施の形態による画像処理装置を搭載する電子カメラ５０を例示する図である。電子カメラ５０は２系統の撮像部を有し、これら２つの撮像部によって基線長に相当する視差を確保し得る２画像を撮影する。基線長は、たとえば、人の左右の目の間隔（眼幅）に相当する６５mmに構成されている。撮影された２画像は立体視効果が得られるので、３Ｄ画像と呼ばれる。
【０００９】
図１において、撮影光学系１は、ズームレンズやフォーカシングレンズを含む複数のレンズ群で構成され、被写体像を撮像素子６の受光面に結像させる。なお、図１を簡単にするため、撮影光学系１を単レンズとして図示している。絞り２は、絞り駆動機構４によって開口径が制御される。シャッター３は、シャッター駆動部５によって開閉制御される。
【００１０】
撮像素子６は、受光素子が受光面に二次元配列されたＣＭＯＳイメージセンサなどによって構成される。撮像素子６は、撮影光学系１によって結像された被写体像を光電変換し、デジタル画像データを出力する。画像データは制御部１６に入力される。上述した撮影光学系１〜撮像素子６で構成される撮像部は、たとえば、右視点画像（画像Ａと呼ぶ）を撮影する。
【００１１】
撮影光学系７は、撮影光学系１と同様のレンズ群で構成され、被写体像を撮像素子１２の受光面に結像させる。絞り８は、絞り駆動機構１０によって開口径が制御される。シャッター９は、シャッター駆動部１１によって開閉制御される。
【００１２】
撮像素子１２は、撮像素子６と同様のイメージセンサによって構成される。撮像素子１２は、撮影光学系７によって結像された被写体像を光電変換し、デジタル画像データを出力する。画像データは制御部１６に入力される。撮影光学系７〜撮像素子１２で構成される撮像部は、たとえば、左視点画像（画像Ｂと呼ぶ）を撮影する。
【００１３】
制御部１６は、不揮発性メモリ２３が記憶するプログラムを実行することにより、電子カメラ５０が行う動作を制御する。制御部１６は、ＡＦ（オートフォーカス）動作制御や、自動露出（ＡＥ）演算も行う。ＡＦ動作は、たとえば、撮像素子６で取得されたライブビュー画像のコントラスト情報に基づいて、主要被写体に合焦させるためのフォーカシングレンズ（不図示）の位置を求める。ライブビュー画像は、レリーズ操作前に撮像素子６によって所定の時間間隔（たとえば６０コマ／毎秒）で繰り返し取得されるモニタ用画像のことをいう。
【００１４】
画像処理部１７は、画像データに対して各種の画像処理（色補間処理、階調変換処理、輪郭強調処理、ホワイトバランス調整処理など）を施す。画像記憶部１８はコネクタ（不図示）を有し、該コネクタにメモリカードなどの記憶媒体（不図示）が接続される。画像記憶部１８は、接続された記憶媒体に対するデータの書き込みや、記憶媒体からのデータの読み込みを行う。記憶媒体は、半導体メモリを内蔵したメモリカードなどで構成される。
【００１５】
表示部２２は液晶パネルなどによって構成される。表示部２２は、制御部１６からの指示に応じて画像や操作アイコン、メニュー画面などを表示する。表示部２２の表示面上にはタッチ操作部材２２ａが積層されている。タッチ操作部材２２ａは、ユーザーによって表示部２２の表示画面がタッチ操作された場合に、タッチ位置を示す信号を発生して制御部１６へ送出する。画像編集部２１は、制御部１６からの指示に応じて、画像処理によって画像にぼかしを加える。たとえば、画像編集部２１は、画像データにローパスフィルタ（LPF）処理を施して画像の高域空間周波数成分を劣化させることにより、画像のエッジを不鮮明にしてコントラストを低下させる編集をする。画像編集部２１は、このような画像ぼけの付加により、擬似的にピントを外した画像を生成する。
【００１６】
類似度演算部２０は、制御部１６からの指示に応じて左視点画像と右視点画像との間の類似度を算出する。エリア分割部１９は、制御部１６からの指示に応じて左視点画像および右視点画像をそれぞれ所定数のエリアに分割する。照明装置２４は、制御部１６からの指示に応じて撮影補助光を発し、被写体を照明する。
【００１７】
絞り駆動部４および１０は、それぞれがドライバー回路１３からの駆動信号を受けて絞り２および８を駆動する。シャッター駆動部５および１１は、それぞれがドライバー回路１３からの駆動信号を受けてシャッター３および９を駆動する。ドライバー回路１３は、制御部１６からの指示に応じて絞り駆動部４および１０と、シャッター駆動部５および１１へ駆動信号を送出する。
【００１８】
操作部材１５は、電源スイッチ（不図示）をはじめとする各操作部材を含む。操作部材１５は、撮影操作、モード切替え操作や各種選択操作など、各操作に応じた操作信号を制御部１６へ送出する。レリーズスイッチ１４は、レリーズボタン（不図示）の押下操作に連動してオン信号を制御部１６へ送出し、レリーズボタン（不図示）の押下解除に連動してオフ信号を制御部１６へ送出する。
【００１９】
レンズ駆動部２５は、制御部１６からの指示に応じて撮影光学系１を構成するズームレンズ（不図示）やフォーカシングレンズ（不図示）をそれぞれ光軸方向へ進退移動させる。レンズ駆動部２６は、制御部１６からの指示に応じて撮影光学系７を構成するズームレンズ（不図示）やフォーカシングレンズ（不図示）をそれぞれ光軸方向へ進退移動させる。なお、撮像素子６で取得されたライブビュー画像のコントラスト情報に基づいて決定した合焦位置を、撮影光学系１および撮影光学系７の双方に適用する。
【００２０】
本実施形態では、上述した電子カメラ５０で取得した２画像を用いて前景と背景とを識別する。前景領域と背景領域とを識別したら、主要被写体を際立たせるように画像を加工する画像編集処理を行う。以降の説明は、前景／背景の識別と画像編集処理を中心に行う。図２は、制御部１６が実行する画像編集処理の流れを例示するフローチャートである。制御部１６は、たとえば、メニュー操作によって画像編集処理が許可設定されている場合に、図２による処理を起動させる。
【００２１】
図２のステップＳ１において、制御部１６は撮影処理を行う。具体的には、レリーズスイッチ１４からのオン信号に応じて、上述した２系統の撮像部によって画像Ａおよび画像Ｂをそれぞれ取得させてステップＳ２へ進む。ここで、制御部１６はドライバー回路１３へ指示を送り、絞り４および絞り１０を絞り込ませて被写界深度を深く制御する。このように、いわゆるパンフォーカス撮影を行うことにより、画像Ａおよび画像Ｂは画面全体で概ねピントが合う画像が得られる。ステップＳ２において、制御部１６は画像処理部１８へ指示を送り、取得された画像Ａおよび画像Ｂに対してそれぞれ所定の画像処理（色補間処理、階調変換処理、輪郭強調処理、ホワイトバランス調整処理など）を行わせてステップＳ３へ進む。
【００２２】
ステップＳ３において、制御部１６は画像記憶部１８へ指示を送り、画像所理後の画像Ａおよび画像Ｂを記憶媒体（不図示）に記録させてステップＳ４へ進む。画像記憶部１８は、たとえば、代表画像ファイルと本体画像ファイルとをそれぞれ記録する。代表画像ファイルと本体画像ファイルは同一のファイル名称を有し、拡張子が異なる構成とする。代表画像ファイルには、たとえば画像Ａの画像データを含め、拡張子を「ＪＰＧ」とする。本体画像ファイルには、画像Ａおよび画像Ｂの画像データをそれぞれ含め、拡張子を「ＭＰＯ」とする。
【００２３】
ステップＳ４において、制御部１６は画像記憶部１８へ指示を送り、記憶媒体から撮影画像を読込ませてステップＳ５へ進む。ここでは、本体画像ファイル、すなわち、画像Ａおよび画像Ｂの双方のデータと、代表画像ファイル内の画像データとをそれぞれ読込ませる。ステップＳ５において、制御部１６はエリア分割部１９へ指示を送り、画像Ａおよび画像Ｂをそれぞれ同数の複数エリアに分割させてステップＳ６へ進む。図３は、画像Ａおよび画像Ｂに対する分割エリアを例示する図である。図３の場合、横方向に６エリア、縦方向に５エリアの計３０エリアに分割する。
【００２４】
ステップＳ６において、制御部１６は類似度演算部２０へ指示を送り、画像Ａと画像Ｂとの間の類似度を上記分割エリアごとに算出させる。たとえば、画像Ａおよび画像Ｂの対応する２つの分割エリアを注目エリアとし、これら２つの注目エリアに含まれる画像データを対象に相互情報量を演算するなどして、２つの注目エリア間における類似度を求める。上述したように、画像Ａおよび画像Ｂは視差を含む。このため、一般に、画像Ａおよび画像Ｂの類似度は以下のようになる。すなわち、画像Ａの撮影範囲における物体像の位置と、画像Ｂの撮影範囲における物体像の位置とは、電子カメラ５０に近い物体ほど相対的に離れるので、画像Ａ，Ｂ間の類似度は低くなる。反対に、画像Ａの撮影範囲における物体像の位置と、画像Ｂの撮影範囲における物体像の位置とは、電子カメラ５０から遠い物体ほど相対的に近づくので、画像Ａ，Ｂ間の類似度は高くなる。制御部１６は、類似度が高いエリアを１として、類似度が低いエリアに向かって順位が下がるように序列をつける。図４は、分割エリアに付与した序列を例示する図である。図４において、類似度が高い（すなわち、順位が高い）エリアは遠景エリアに相当し、類似度が低い（すなわち、順位が低い）エリアは前景エリアに相当する。
【００２５】
図２のステップＳ７において、制御部１６は画像編集部２１へ指示を送り、代表画像ファイル内の画像にぼかしを加えさせてステップＳ８へ進む。画像編集部２１は、図４に例示した序列にしたがってエリアごとにローパスフィルタ（LPF）による遮断周波数を変化させることにより、付加するぼかし量を異ならせる。図５は、序列による順位と付加するぼかし量の大きさとの第１関係を例示する図である。図５において横軸は順位を表し、縦軸はぼかし量を表す。なお、本例においてＮの値は３０である。画像編集部２１は、遠景エリアに付加するぼかし量を大きくし、前景に近づくほど付加するぼかし量を小さくする。なお、図５に例示した曲線波形の曲率は適宜変更して構わないし、曲線を右下がりの直線にしても構わない。
【００２６】
図２のステップＳ８において、制御部１６は表示部２２へ指示を送り、ぼかしを付加した代表画像を再生表示させてステップＳ９へ進む。ステップＳ９において、制御部１６は、画像編集の変更を行うか否かを判定する。ユーザーは、表示部２２に再生表示されている画像に対して画像編集の変更を望む場合（本例では付加するぼかしを変えたい場合）に、ぼかし付加画像を再生表示している表示部２２の画面上で、たとえば、ぼかしを付加したくない位置をタッチ操作する。制御部１６は、タッチ操作部材２２ａから操作信号が入力された場合にステップＳ９を肯定判定してステップＳ７へ戻る。ステップＳ７へ戻った制御部１６は画像編集部２１へ指示を送り、代表画像ファイル内の画像にぼかしを加えさせる。このとき、タッチ位置に対応する分割エリアに対して付加するぼかし量を小さくする（たとえば０にする）ように制御を行う。
【００２７】
画像編集部２１は、図５に例示する第１関係に代えて、図６に例示する第２関係にしたがってぼかし量を付加させる。図６は、序列による順位と付加するぼかし量の大きさとの第２関係を例示する図である。図６によれば、タッチ位置に対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。
【００２８】
一方、タッチ操作部材２２ａから操作信号が入力されない場合の制御部１６は、ステップＳ９を否定判定する。制御部１６は画像記憶部１８へ指示を送り、画像編集後の代表画像のデータを格納する代表画像ファイルを記憶媒体に更新記録させて図２による処理を終了する。
【００２９】
以上説明した実施形態によれば、次の作用効果が得られる。
（１）電子カメラ５０は、互いに視差を含む２画像Ａ，Ｂをそれぞれ同数の複数の分割エリアに分割するエリア分割部１９と、２画像Ａ，Ｂ間の類似度を分割エリアごとに演算する類似度演算部２０と、所定の画像処理を行う画像編集部２１と、画像編集部２１が２画像Ａ，Ｂの少なくとも一方に対して行う画像処理の強弱を、分割エリアにおける類似度の高低に基づいて該分割エリアごとに変化させるように画像編集部２１を制御する制御部１６とを備えるので、静止画像の場合でも主要被写体を際立たせるように適切に画像処理できる。
【００３０】
（２）上記（１）の電子カメラ５０において、類似度演算部２０は、２画像Ａ，Ｂ間で対応する分割エリア内の物体像の相対位置の差に基づいて類似度を演算するので、移動せずに静止する物体を対象に類似度を演算できる。このため、静止画像への適用が可能である。
【００３１】
（３）上記（１）または（２）の電子カメラ５０において、制御部１６は、類似度の高低に応じて分割エリアに序列を付与し、該序列に基づいて画像処理の強弱を変化させるので、エリアごとに適切に画像処理できる。
【００３２】
（４）上記（３）の電子カメラ５０において、分割エリアのうち１つを選択する制御部１６をさらに備える。そして、制御部１６は、選択した分割エリアを基準として、該分割エリア以外の他の分割エリアに対する画像処理の強弱を変化させるので、選択エリアの被写体を際立たせるように適切に画像処理できる。
【００３３】
（５）上記（４）の電子カメラ５０において、操作信号を発するタッチ操作部材２２ａをさらに備え、制御部１６は、分割エリアのうちタッチ操作部材２２ａからの操作信号が示す１つを選択するので、被写体を際立たせる分割エリアをユーザー操作に基づいて選ぶことができる。
【００３４】
（６）上記（４）の電子カメラ５０において、制御部１６は、２画像Ａ，Ｂに基づいて分割エリアのうち１つを自動選択するので、被写体を際立たせる分割エリアを自動的に選ぶこともできる。
【００３５】
（７）上記（１）〜（６）の電子カメラ５０において、画像編集部２１は、画像に対するぼかし付加処理を行うので、主要被写体を際立たせることができる。
【００３６】
（８）上記（１）〜（６）の電子カメラ５０において、画像編集部２１は、画像に対する明るさ補正処理を行うので、主要被写体を際立たせることができる。
【００３７】
（９）上記（１）〜（８）の電子カメラ５０において、２画像Ａ，Ｂを含む本体画像ファイルと、２画像Ａ，Ｂのうちの１画像を含む代表画像ファイルと、をそれぞれ記憶媒体へ記録する画像記憶部１８をさらに備え、画像編集部２１は、代表画像ファイル内の画像に対して画像処理を行うので、本体画像ファイル内の画像にも画像処理を行う場合に比べて処理負担を軽減できる。
【００３８】
（変形例１）
制御部１６は、図５に例示する第１関係、および図６に例示する第２関係に代えて、図７に例示する第３関係にしたがってぼかし量を付加させてもよい。図７は、序列による順位と付加するぼかし量の大きさとの第３関係を例示する図である。図７によれば、タッチ位置に対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を他の分割エリアに比べて最大にし、序列が「Ｘ」から離れるほど付加するぼかし量を小さくする。
【００３９】
（変形例２）
上述した実施形態では、ステップＳ７において最初に画像編集処理を行う場合に、第１関係（図５）を用いて最も前景である分割エリアに対するぼかし量を０にするようにした。この代わりに、ピント合わせに用いたフォーカスエリア（ＡＦ処理において合焦位置の決定に採用した領域）に対応する分割エリアに対して付加するぼかし量を小さくする（たとえば０にする）ように制御してもよい。
【００４０】
変形例２の画像編集部２１は、図５に例示した第１関係に代えて、図６に例示した第２関係にしたがってぼかし量を付加させる。図６によれば、フォーカスエリアに対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。このように、被写体を際立たせる分割エリアを適切に選ぶことができる。
【００４１】
（変形例３）
上述したステップＳ７では、代表画像ファイル内の画像にのみぼかしを加える例を説明した。この代わりに、本体画像ファイル内の画像Ａおよび画像Ｂの双方にぼかしを加えるように構成してもよい。また、代表画像ファイル内の画像と、本体画像ファイル内の画像Ａおよび画像Ｂとにそれぞれぼかしを加えるように構成してもよい。
【００４２】
（変形例４）
画像編集処理として輝度変換処理を行うように構成してもよい。変形例４の画像編集部２１は、制御部１６からの指示に応じて、画像処理によって輝度変換を行う。たとえば、画像データ値を大きくする場合は当該画素の輝度が上がり、画像データ値を小さくする場合には当該画素の輝度が下がる。制御部１６は、たとえば、画像Ａおよび画像Ｂがスローシンクロ撮影された画像である場合に、背景に対応する分割エリアにおいて輝度を高めるように輝度変換処理を行う。これにより、背景の夜景領域の露光が不十分である場合には、画像編集処理によって夜景領域に対する輝度補正を行うことができる。
【００４３】
（変形例５）
画像編集部２１が輝度変換処理を行う場合に、タッチ位置に対応する分割エリアの輝度を高めるように構成してもよい。変形例５の画像編集部２１は、図７に例示した第３関係と同様の曲線で表されるように、タッチ位置に対応する分割エリアにおける輝度を高める輝度変換処理を行う。変形例５では、図７の縦軸を輝度変換量と読み替える。画像編集部２１は、タッチ位置に対応する分割エリアの序列が「Ｘ」であった場合、「Ｘ」番目の分割エリアに対して行う輝度変換量を他の分割エリアに比べて最大にし、序列が「Ｘ」から離れるほど輝度変換量を小さくする。これにより、画像の中でタッチ位置に対応する分割エリアを他の分割エリアに比べて明るく輝度変換することができる。なお、画像の中でタッチ位置に対応する分割エリアの輝度値をそのままに、他の分割エリアに対して輝度値を減じるように輝度変換を行うようにしてもよい。この場合にも、画像の中でタッチ位置に対応する分割エリアを他の分割エリアに比べて明るくすることができる。
【００４４】
（変形例６）
画像Ａ（または画像Ｂ）から検出した顔を含む領域に対応する分割エリアに対して付加するぼかし量を小さくするように制御してもよい。変形例６の場合も、図６に例示した第２関係にしたがってぼかし量を付加させる。すなわち、公知の「顔認識」処理によって検出した顔領域に対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。
【００４５】
（変形例７）
上述した説明では、画像Ａおよび画像Ｂが静止画像の場合を例に説明したが、画像Ａ、および画像Ｂがそれぞれ動画像である場合にも本発明を適用してよい。動画像の場合には、たとえば、ピント合わせに用いたフォーカスエリア（ＡＦ処理において合焦位置の決定に採用した領域）に対応する分割エリアに対して付加するぼかし量を小さくするように制御する。そして、図６に例示した第２関係にしたがってぼかし量を付加させる。すなわち、フォーカスエリアに対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。
【００４６】
（変形例８）
上述した実施形態では、電子カメラ５０に画像処理装置を搭載する例を説明したが、画像処理装置をパーソナルコンピュータによって構成するようにしてもよい。図２に例示したフローチャートのうちステップＳ４以降の処理を行うプログラムを図８に示すコンピュータ装置１００に実行させることにより、画像処理装置を構成してもよい。プログラムをパーソナルコンピュータ１００に取込んで使用する場合には、パーソナルコンピュータ１００のデータストレージ装置にプログラムをローディングした上で、当該プログラムを実行させることによって画像処理装置として使用する。
【００４７】
パーソナルコンピュータ１００に対するプログラムのローディングは、プログラムを格納したＣＤ−ＲＯＭなどの記憶媒体１０４をパーソナルコンピュータ１００にセットして行ってもよいし、ネットワークなどの通信回線１０１を経由する方法でパーソナルコンピュータ１００へローディングしてもよい。通信回線１０１を経由する場合は、通信回線１０１に接続されたサーバー（コンピュータ）１０２のハードディスク装置１０３などにプログラムを格納しておく。プログラムは、記憶媒体１０４や通信回線１０１を介する提供など、種々の形態のコンピュータプログラム製品として供給することができる。
【００４８】
以上説明した変形例８によれば、上記実施形態と同様の作用効果が得られる。なお、パーソナルコンピュータによって構成する他にも、デジタルフォトフレームやプロジェクタ等にも上述した画像編集処理をさせるように構成して構わない。
【００４９】
以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。
【符号の説明】
【００５０】
１，７…撮影光学系
２，８…絞り
６，１２…撮像素子
１４…レリーズスイッチ
１５…操作部材
１６…制御部
１７…画像処理部
１８…画像記憶部
１９…エリア分割部
２０…類似度演算部
２１…画像編集部
２２…表示部
２２ａ…タッチ操作部材
５０…電子カメラ
【技術分野】
【０００１】
本発明は、画像処理装置、および画像処理プログラムに関する。
【背景技術】
【０００２】
２次元画像の奥行き感を高めるために、背景領域と前景領域とで異なる画像処理を行う技術が知られている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２３９９０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来技術では、画像間の差分に基づいて背景か否かを判断し、背景に対してぼかしを付加する。背景を画像間の差分に基づいて判断するため、画像間に差分が生じない静止画像の場合への適用が困難という問題があった。
【課題を解決するための手段】
【０００５】
本発明による画像処理装置は、互いに視差を含む２画像をそれぞれ同数の複数領域に分割する分割部と、２画像間の類似度を分割部により分割される分割領域ごとに演算する類似度演算部と、所定の画像処理を行う画像処理部と、２画像の少なくとも一方に対して施される画像処理部による画像処理の編集度合いを、分割領域における類似度に基づいて変化させるように画像処理部を制御する制御部と、を備えることを特徴とする。
【発明の効果】
【０００６】
本発明によれば、静止画の場合でも主要被写体を際立たせるように適切に画像処理できる。
【図面の簡単な説明】
【０００７】
【図１】本発明の一実施の形態による画像処理装置を搭載する電子カメラを例示する図である。
【図２】制御部が実行する画像編集処理の流れを例示するフローチャートである。
【図３】画像Ａおよび画像Ｂに対する分割エリアを例示する図である。
【図４】分割エリアに付与した序列を例示する図である。
【図５】序列による順位と付加するぼかし量の大きさとの第１関係を例示する図である。
【図６】序列による順位と付加するぼかし量の大きさとの第２関係を例示する図である。
【図７】序列による順位と付加するぼかし量の大きさとの第３関係を例示する図である。
【図８】コンピュータ装置を例示する図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明を実施するための形態について説明する。図１は、本発明の一実施の形態による画像処理装置を搭載する電子カメラ５０を例示する図である。電子カメラ５０は２系統の撮像部を有し、これら２つの撮像部によって基線長に相当する視差を確保し得る２画像を撮影する。基線長は、たとえば、人の左右の目の間隔（眼幅）に相当する６５mmに構成されている。撮影された２画像は立体視効果が得られるので、３Ｄ画像と呼ばれる。
【０００９】
図１において、撮影光学系１は、ズームレンズやフォーカシングレンズを含む複数のレンズ群で構成され、被写体像を撮像素子６の受光面に結像させる。なお、図１を簡単にするため、撮影光学系１を単レンズとして図示している。絞り２は、絞り駆動機構４によって開口径が制御される。シャッター３は、シャッター駆動部５によって開閉制御される。
【００１０】
撮像素子６は、受光素子が受光面に二次元配列されたＣＭＯＳイメージセンサなどによって構成される。撮像素子６は、撮影光学系１によって結像された被写体像を光電変換し、デジタル画像データを出力する。画像データは制御部１６に入力される。上述した撮影光学系１〜撮像素子６で構成される撮像部は、たとえば、右視点画像（画像Ａと呼ぶ）を撮影する。
【００１１】
撮影光学系７は、撮影光学系１と同様のレンズ群で構成され、被写体像を撮像素子１２の受光面に結像させる。絞り８は、絞り駆動機構１０によって開口径が制御される。シャッター９は、シャッター駆動部１１によって開閉制御される。
【００１２】
撮像素子１２は、撮像素子６と同様のイメージセンサによって構成される。撮像素子１２は、撮影光学系７によって結像された被写体像を光電変換し、デジタル画像データを出力する。画像データは制御部１６に入力される。撮影光学系７〜撮像素子１２で構成される撮像部は、たとえば、左視点画像（画像Ｂと呼ぶ）を撮影する。
【００１３】
制御部１６は、不揮発性メモリ２３が記憶するプログラムを実行することにより、電子カメラ５０が行う動作を制御する。制御部１６は、ＡＦ（オートフォーカス）動作制御や、自動露出（ＡＥ）演算も行う。ＡＦ動作は、たとえば、撮像素子６で取得されたライブビュー画像のコントラスト情報に基づいて、主要被写体に合焦させるためのフォーカシングレンズ（不図示）の位置を求める。ライブビュー画像は、レリーズ操作前に撮像素子６によって所定の時間間隔（たとえば６０コマ／毎秒）で繰り返し取得されるモニタ用画像のことをいう。
【００１４】
画像処理部１７は、画像データに対して各種の画像処理（色補間処理、階調変換処理、輪郭強調処理、ホワイトバランス調整処理など）を施す。画像記憶部１８はコネクタ（不図示）を有し、該コネクタにメモリカードなどの記憶媒体（不図示）が接続される。画像記憶部１８は、接続された記憶媒体に対するデータの書き込みや、記憶媒体からのデータの読み込みを行う。記憶媒体は、半導体メモリを内蔵したメモリカードなどで構成される。
【００１５】
表示部２２は液晶パネルなどによって構成される。表示部２２は、制御部１６からの指示に応じて画像や操作アイコン、メニュー画面などを表示する。表示部２２の表示面上にはタッチ操作部材２２ａが積層されている。タッチ操作部材２２ａは、ユーザーによって表示部２２の表示画面がタッチ操作された場合に、タッチ位置を示す信号を発生して制御部１６へ送出する。画像編集部２１は、制御部１６からの指示に応じて、画像処理によって画像にぼかしを加える。たとえば、画像編集部２１は、画像データにローパスフィルタ（LPF）処理を施して画像の高域空間周波数成分を劣化させることにより、画像のエッジを不鮮明にしてコントラストを低下させる編集をする。画像編集部２１は、このような画像ぼけの付加により、擬似的にピントを外した画像を生成する。
【００１６】
類似度演算部２０は、制御部１６からの指示に応じて左視点画像と右視点画像との間の類似度を算出する。エリア分割部１９は、制御部１６からの指示に応じて左視点画像および右視点画像をそれぞれ所定数のエリアに分割する。照明装置２４は、制御部１６からの指示に応じて撮影補助光を発し、被写体を照明する。
【００１７】
絞り駆動部４および１０は、それぞれがドライバー回路１３からの駆動信号を受けて絞り２および８を駆動する。シャッター駆動部５および１１は、それぞれがドライバー回路１３からの駆動信号を受けてシャッター３および９を駆動する。ドライバー回路１３は、制御部１６からの指示に応じて絞り駆動部４および１０と、シャッター駆動部５および１１へ駆動信号を送出する。
【００１８】
操作部材１５は、電源スイッチ（不図示）をはじめとする各操作部材を含む。操作部材１５は、撮影操作、モード切替え操作や各種選択操作など、各操作に応じた操作信号を制御部１６へ送出する。レリーズスイッチ１４は、レリーズボタン（不図示）の押下操作に連動してオン信号を制御部１６へ送出し、レリーズボタン（不図示）の押下解除に連動してオフ信号を制御部１６へ送出する。
【００１９】
レンズ駆動部２５は、制御部１６からの指示に応じて撮影光学系１を構成するズームレンズ（不図示）やフォーカシングレンズ（不図示）をそれぞれ光軸方向へ進退移動させる。レンズ駆動部２６は、制御部１６からの指示に応じて撮影光学系７を構成するズームレンズ（不図示）やフォーカシングレンズ（不図示）をそれぞれ光軸方向へ進退移動させる。なお、撮像素子６で取得されたライブビュー画像のコントラスト情報に基づいて決定した合焦位置を、撮影光学系１および撮影光学系７の双方に適用する。
【００２０】
本実施形態では、上述した電子カメラ５０で取得した２画像を用いて前景と背景とを識別する。前景領域と背景領域とを識別したら、主要被写体を際立たせるように画像を加工する画像編集処理を行う。以降の説明は、前景／背景の識別と画像編集処理を中心に行う。図２は、制御部１６が実行する画像編集処理の流れを例示するフローチャートである。制御部１６は、たとえば、メニュー操作によって画像編集処理が許可設定されている場合に、図２による処理を起動させる。
【００２１】
図２のステップＳ１において、制御部１６は撮影処理を行う。具体的には、レリーズスイッチ１４からのオン信号に応じて、上述した２系統の撮像部によって画像Ａおよび画像Ｂをそれぞれ取得させてステップＳ２へ進む。ここで、制御部１６はドライバー回路１３へ指示を送り、絞り４および絞り１０を絞り込ませて被写界深度を深く制御する。このように、いわゆるパンフォーカス撮影を行うことにより、画像Ａおよび画像Ｂは画面全体で概ねピントが合う画像が得られる。ステップＳ２において、制御部１６は画像処理部１８へ指示を送り、取得された画像Ａおよび画像Ｂに対してそれぞれ所定の画像処理（色補間処理、階調変換処理、輪郭強調処理、ホワイトバランス調整処理など）を行わせてステップＳ３へ進む。
【００２２】
ステップＳ３において、制御部１６は画像記憶部１８へ指示を送り、画像所理後の画像Ａおよび画像Ｂを記憶媒体（不図示）に記録させてステップＳ４へ進む。画像記憶部１８は、たとえば、代表画像ファイルと本体画像ファイルとをそれぞれ記録する。代表画像ファイルと本体画像ファイルは同一のファイル名称を有し、拡張子が異なる構成とする。代表画像ファイルには、たとえば画像Ａの画像データを含め、拡張子を「ＪＰＧ」とする。本体画像ファイルには、画像Ａおよび画像Ｂの画像データをそれぞれ含め、拡張子を「ＭＰＯ」とする。
【００２３】
ステップＳ４において、制御部１６は画像記憶部１８へ指示を送り、記憶媒体から撮影画像を読込ませてステップＳ５へ進む。ここでは、本体画像ファイル、すなわち、画像Ａおよび画像Ｂの双方のデータと、代表画像ファイル内の画像データとをそれぞれ読込ませる。ステップＳ５において、制御部１６はエリア分割部１９へ指示を送り、画像Ａおよび画像Ｂをそれぞれ同数の複数エリアに分割させてステップＳ６へ進む。図３は、画像Ａおよび画像Ｂに対する分割エリアを例示する図である。図３の場合、横方向に６エリア、縦方向に５エリアの計３０エリアに分割する。
【００２４】
ステップＳ６において、制御部１６は類似度演算部２０へ指示を送り、画像Ａと画像Ｂとの間の類似度を上記分割エリアごとに算出させる。たとえば、画像Ａおよび画像Ｂの対応する２つの分割エリアを注目エリアとし、これら２つの注目エリアに含まれる画像データを対象に相互情報量を演算するなどして、２つの注目エリア間における類似度を求める。上述したように、画像Ａおよび画像Ｂは視差を含む。このため、一般に、画像Ａおよび画像Ｂの類似度は以下のようになる。すなわち、画像Ａの撮影範囲における物体像の位置と、画像Ｂの撮影範囲における物体像の位置とは、電子カメラ５０に近い物体ほど相対的に離れるので、画像Ａ，Ｂ間の類似度は低くなる。反対に、画像Ａの撮影範囲における物体像の位置と、画像Ｂの撮影範囲における物体像の位置とは、電子カメラ５０から遠い物体ほど相対的に近づくので、画像Ａ，Ｂ間の類似度は高くなる。制御部１６は、類似度が高いエリアを１として、類似度が低いエリアに向かって順位が下がるように序列をつける。図４は、分割エリアに付与した序列を例示する図である。図４において、類似度が高い（すなわち、順位が高い）エリアは遠景エリアに相当し、類似度が低い（すなわち、順位が低い）エリアは前景エリアに相当する。
【００２５】
図２のステップＳ７において、制御部１６は画像編集部２１へ指示を送り、代表画像ファイル内の画像にぼかしを加えさせてステップＳ８へ進む。画像編集部２１は、図４に例示した序列にしたがってエリアごとにローパスフィルタ（LPF）による遮断周波数を変化させることにより、付加するぼかし量を異ならせる。図５は、序列による順位と付加するぼかし量の大きさとの第１関係を例示する図である。図５において横軸は順位を表し、縦軸はぼかし量を表す。なお、本例においてＮの値は３０である。画像編集部２１は、遠景エリアに付加するぼかし量を大きくし、前景に近づくほど付加するぼかし量を小さくする。なお、図５に例示した曲線波形の曲率は適宜変更して構わないし、曲線を右下がりの直線にしても構わない。
【００２６】
図２のステップＳ８において、制御部１６は表示部２２へ指示を送り、ぼかしを付加した代表画像を再生表示させてステップＳ９へ進む。ステップＳ９において、制御部１６は、画像編集の変更を行うか否かを判定する。ユーザーは、表示部２２に再生表示されている画像に対して画像編集の変更を望む場合（本例では付加するぼかしを変えたい場合）に、ぼかし付加画像を再生表示している表示部２２の画面上で、たとえば、ぼかしを付加したくない位置をタッチ操作する。制御部１６は、タッチ操作部材２２ａから操作信号が入力された場合にステップＳ９を肯定判定してステップＳ７へ戻る。ステップＳ７へ戻った制御部１６は画像編集部２１へ指示を送り、代表画像ファイル内の画像にぼかしを加えさせる。このとき、タッチ位置に対応する分割エリアに対して付加するぼかし量を小さくする（たとえば０にする）ように制御を行う。
【００２７】
画像編集部２１は、図５に例示する第１関係に代えて、図６に例示する第２関係にしたがってぼかし量を付加させる。図６は、序列による順位と付加するぼかし量の大きさとの第２関係を例示する図である。図６によれば、タッチ位置に対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。
【００２８】
一方、タッチ操作部材２２ａから操作信号が入力されない場合の制御部１６は、ステップＳ９を否定判定する。制御部１６は画像記憶部１８へ指示を送り、画像編集後の代表画像のデータを格納する代表画像ファイルを記憶媒体に更新記録させて図２による処理を終了する。
【００２９】
以上説明した実施形態によれば、次の作用効果が得られる。
（１）電子カメラ５０は、互いに視差を含む２画像Ａ，Ｂをそれぞれ同数の複数の分割エリアに分割するエリア分割部１９と、２画像Ａ，Ｂ間の類似度を分割エリアごとに演算する類似度演算部２０と、所定の画像処理を行う画像編集部２１と、画像編集部２１が２画像Ａ，Ｂの少なくとも一方に対して行う画像処理の強弱を、分割エリアにおける類似度の高低に基づいて該分割エリアごとに変化させるように画像編集部２１を制御する制御部１６とを備えるので、静止画像の場合でも主要被写体を際立たせるように適切に画像処理できる。
【００３０】
（２）上記（１）の電子カメラ５０において、類似度演算部２０は、２画像Ａ，Ｂ間で対応する分割エリア内の物体像の相対位置の差に基づいて類似度を演算するので、移動せずに静止する物体を対象に類似度を演算できる。このため、静止画像への適用が可能である。
【００３１】
（３）上記（１）または（２）の電子カメラ５０において、制御部１６は、類似度の高低に応じて分割エリアに序列を付与し、該序列に基づいて画像処理の強弱を変化させるので、エリアごとに適切に画像処理できる。
【００３２】
（４）上記（３）の電子カメラ５０において、分割エリアのうち１つを選択する制御部１６をさらに備える。そして、制御部１６は、選択した分割エリアを基準として、該分割エリア以外の他の分割エリアに対する画像処理の強弱を変化させるので、選択エリアの被写体を際立たせるように適切に画像処理できる。
【００３３】
（５）上記（４）の電子カメラ５０において、操作信号を発するタッチ操作部材２２ａをさらに備え、制御部１６は、分割エリアのうちタッチ操作部材２２ａからの操作信号が示す１つを選択するので、被写体を際立たせる分割エリアをユーザー操作に基づいて選ぶことができる。
【００３４】
（６）上記（４）の電子カメラ５０において、制御部１６は、２画像Ａ，Ｂに基づいて分割エリアのうち１つを自動選択するので、被写体を際立たせる分割エリアを自動的に選ぶこともできる。
【００３５】
（７）上記（１）〜（６）の電子カメラ５０において、画像編集部２１は、画像に対するぼかし付加処理を行うので、主要被写体を際立たせることができる。
【００３６】
（８）上記（１）〜（６）の電子カメラ５０において、画像編集部２１は、画像に対する明るさ補正処理を行うので、主要被写体を際立たせることができる。
【００３７】
（９）上記（１）〜（８）の電子カメラ５０において、２画像Ａ，Ｂを含む本体画像ファイルと、２画像Ａ，Ｂのうちの１画像を含む代表画像ファイルと、をそれぞれ記憶媒体へ記録する画像記憶部１８をさらに備え、画像編集部２１は、代表画像ファイル内の画像に対して画像処理を行うので、本体画像ファイル内の画像にも画像処理を行う場合に比べて処理負担を軽減できる。
【００３８】
（変形例１）
制御部１６は、図５に例示する第１関係、および図６に例示する第２関係に代えて、図７に例示する第３関係にしたがってぼかし量を付加させてもよい。図７は、序列による順位と付加するぼかし量の大きさとの第３関係を例示する図である。図７によれば、タッチ位置に対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を他の分割エリアに比べて最大にし、序列が「Ｘ」から離れるほど付加するぼかし量を小さくする。
【００３９】
（変形例２）
上述した実施形態では、ステップＳ７において最初に画像編集処理を行う場合に、第１関係（図５）を用いて最も前景である分割エリアに対するぼかし量を０にするようにした。この代わりに、ピント合わせに用いたフォーカスエリア（ＡＦ処理において合焦位置の決定に採用した領域）に対応する分割エリアに対して付加するぼかし量を小さくする（たとえば０にする）ように制御してもよい。
【００４０】
変形例２の画像編集部２１は、図５に例示した第１関係に代えて、図６に例示した第２関係にしたがってぼかし量を付加させる。図６によれば、フォーカスエリアに対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。このように、被写体を際立たせる分割エリアを適切に選ぶことができる。
【００４１】
（変形例３）
上述したステップＳ７では、代表画像ファイル内の画像にのみぼかしを加える例を説明した。この代わりに、本体画像ファイル内の画像Ａおよび画像Ｂの双方にぼかしを加えるように構成してもよい。また、代表画像ファイル内の画像と、本体画像ファイル内の画像Ａおよび画像Ｂとにそれぞれぼかしを加えるように構成してもよい。
【００４２】
（変形例４）
画像編集処理として輝度変換処理を行うように構成してもよい。変形例４の画像編集部２１は、制御部１６からの指示に応じて、画像処理によって輝度変換を行う。たとえば、画像データ値を大きくする場合は当該画素の輝度が上がり、画像データ値を小さくする場合には当該画素の輝度が下がる。制御部１６は、たとえば、画像Ａおよび画像Ｂがスローシンクロ撮影された画像である場合に、背景に対応する分割エリアにおいて輝度を高めるように輝度変換処理を行う。これにより、背景の夜景領域の露光が不十分である場合には、画像編集処理によって夜景領域に対する輝度補正を行うことができる。
【００４３】
（変形例５）
画像編集部２１が輝度変換処理を行う場合に、タッチ位置に対応する分割エリアの輝度を高めるように構成してもよい。変形例５の画像編集部２１は、図７に例示した第３関係と同様の曲線で表されるように、タッチ位置に対応する分割エリアにおける輝度を高める輝度変換処理を行う。変形例５では、図７の縦軸を輝度変換量と読み替える。画像編集部２１は、タッチ位置に対応する分割エリアの序列が「Ｘ」であった場合、「Ｘ」番目の分割エリアに対して行う輝度変換量を他の分割エリアに比べて最大にし、序列が「Ｘ」から離れるほど輝度変換量を小さくする。これにより、画像の中でタッチ位置に対応する分割エリアを他の分割エリアに比べて明るく輝度変換することができる。なお、画像の中でタッチ位置に対応する分割エリアの輝度値をそのままに、他の分割エリアに対して輝度値を減じるように輝度変換を行うようにしてもよい。この場合にも、画像の中でタッチ位置に対応する分割エリアを他の分割エリアに比べて明るくすることができる。
【００４４】
（変形例６）
画像Ａ（または画像Ｂ）から検出した顔を含む領域に対応する分割エリアに対して付加するぼかし量を小さくするように制御してもよい。変形例６の場合も、図６に例示した第２関係にしたがってぼかし量を付加させる。すなわち、公知の「顔認識」処理によって検出した顔領域に対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。
【００４５】
（変形例７）
上述した説明では、画像Ａおよび画像Ｂが静止画像の場合を例に説明したが、画像Ａ、および画像Ｂがそれぞれ動画像である場合にも本発明を適用してよい。動画像の場合には、たとえば、ピント合わせに用いたフォーカスエリア（ＡＦ処理において合焦位置の決定に採用した領域）に対応する分割エリアに対して付加するぼかし量を小さくするように制御する。そして、図６に例示した第２関係にしたがってぼかし量を付加させる。すなわち、フォーカスエリアに対応する分割エリアの序列が「Ｘ」であった場合、画像編集部２１は、「Ｘ」番目の分割エリアに対して付加するぼかし量を０にし、序列が「Ｘ」から離れるほど付加するぼかし量を大きくする。
【００４６】
（変形例８）
上述した実施形態では、電子カメラ５０に画像処理装置を搭載する例を説明したが、画像処理装置をパーソナルコンピュータによって構成するようにしてもよい。図２に例示したフローチャートのうちステップＳ４以降の処理を行うプログラムを図８に示すコンピュータ装置１００に実行させることにより、画像処理装置を構成してもよい。プログラムをパーソナルコンピュータ１００に取込んで使用する場合には、パーソナルコンピュータ１００のデータストレージ装置にプログラムをローディングした上で、当該プログラムを実行させることによって画像処理装置として使用する。
【００４７】
パーソナルコンピュータ１００に対するプログラムのローディングは、プログラムを格納したＣＤ−ＲＯＭなどの記憶媒体１０４をパーソナルコンピュータ１００にセットして行ってもよいし、ネットワークなどの通信回線１０１を経由する方法でパーソナルコンピュータ１００へローディングしてもよい。通信回線１０１を経由する場合は、通信回線１０１に接続されたサーバー（コンピュータ）１０２のハードディスク装置１０３などにプログラムを格納しておく。プログラムは、記憶媒体１０４や通信回線１０１を介する提供など、種々の形態のコンピュータプログラム製品として供給することができる。
【００４８】
以上説明した変形例８によれば、上記実施形態と同様の作用効果が得られる。なお、パーソナルコンピュータによって構成する他にも、デジタルフォトフレームやプロジェクタ等にも上述した画像編集処理をさせるように構成して構わない。
【００４９】
以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。
【符号の説明】
【００５０】
１，７…撮影光学系
２，８…絞り
６，１２…撮像素子
１４…レリーズスイッチ
１５…操作部材
１６…制御部
１７…画像処理部
１８…画像記憶部
１９…エリア分割部
２０…類似度演算部
２１…画像編集部
２２…表示部
２２ａ…タッチ操作部材
５０…電子カメラ
【特許請求の範囲】
【請求項１】
視差を有する２画像をそれぞれ同数の複数領域に分割する分割部と、
前記２画像間の類似度を前記分割部により分割される分割領域ごとに演算する類似度演算部と、
所定の画像処理を行う画像処理部と、
前記２画像の少なくとも一方に対して施される前記画像処理部による画像処理の編集度合いを、前記分割領域における類似度に基づいて変化させるように前記画像処理部を制御する制御部と、
を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記制御部は、前記編集度合いを、前記分割領域における類似度に基づいて該分割領域ごとに変化させることを特徴とする画像処理装置。
【請求項３】
請求項１または２に記載の画像処理装置において、
前記類似度演算部は、前記２画像間で対応する前記分割領域内の物体像の相対位置の差に基づいて前記類似度を演算することを特徴とする画像処理装置。
【請求項４】
請求項１〜３のいずれか１項に記載の画像処理装置において、
前記制御部は、前記類似度の高低に応じて前記分割領域に序列を付与し、該序列に基づいて前記編集度合いの強弱を変化させることを特徴とする画像処理装置。
【請求項５】
請求項４に記載の画像処理装置において、
前記分割領域のうち１つを選択する選択部をさらに備え、
前記制御部は、前記選択部によって選択された選択領域を基準として、該選択領域以外の他の分割領域に対する前記編集度合いの強弱を変化させることを特徴とする画像処理装置。
【請求項６】
請求項５に記載の画像処理装置において、
操作信号を発する操作部材をさらに備え、
前記選択部は、前記分割領域のうち、前記操作部材からの操作信号が示す１つを選択することを特徴とする画像処理装置。
【請求項７】
請求項５に記載の画像処理装置において、
前記選択部は、前記２画像に基づいて前記分割領域のうち１つを自動選択することを特徴とする画像処理装置。
【請求項８】
請求項７に記載の画像処理装置において、
前記選択部は、前記２画像撮影時の合焦エリアに対応する分割領域を自動選択することを特徴とする画像処理装置。
【請求項９】
請求項７に記載の画像処理装置において、
前記選択部は、前記２画像における顔認識エリアに対応する分割領域を自動選択することを特徴とする画像処理装置。
【請求項１０】
請求項１〜９のいずれか一項に記載の画像処理装置において、
前記画像処理部は、画像に対するぼかし付加処理を行うことを特徴とする画像処理装置。
【請求項１１】
請求項１〜９のいずれか一項に記載の画像処理装置において、
前記画像処理部は、画像に対する明るさ補正処理を行うことを特徴とする画像処理装置。
【請求項１２】
請求項１〜１１のいずれか一項に記載の画像処理装置において、
前記２画像を含む第１画像ファイルと、前記２画像のうちの１画像を含む第２画像ファイルと、をそれぞれ記憶媒体へ記録する記録部をさらに備え、
前記画像処理部は、前記第２画像ファイル内の画像に対して画像処理を行うことを特徴とする画像処理装置。
【請求項１３】
請求項１〜１１のいずれか一項に記載の画像処理装置において、
前記２画像を含む第１画像ファイルと、前記２画像のうちの１画像を含む第２画像ファイルと、をそれぞれ記憶媒体へ記録する記録部をさらに備え、
前記画像処理部は、前記１画像ファイル内の画像および前記第２画像ファイル内の画像に対してそれぞれ画像処理を行うことを特徴とする画像処理装置。
【請求項１４】
視差有する２画像をそれぞれ読み込む第１処理と、
前記２画像をそれぞれ同数の複数領域に分割する第２処理と、
前記２画像間の類似度を前記第２処理により分割される分割領域ごとに演算する第３処理と、
所定の画像処理の編集度合いを、前記分割領域における類似度に基づいて決定する第４処理と、
前記２画像の少なくとも一方に対し、前記第４処理で決定した編集度合いで画像処理を行う第５処理と、
をコンピュータに実行させることを特徴とする画像処理プログラム。
【請求項１】
視差を有する２画像をそれぞれ同数の複数領域に分割する分割部と、
前記２画像間の類似度を前記分割部により分割される分割領域ごとに演算する類似度演算部と、
所定の画像処理を行う画像処理部と、
前記２画像の少なくとも一方に対して施される前記画像処理部による画像処理の編集度合いを、前記分割領域における類似度に基づいて変化させるように前記画像処理部を制御する制御部と、
を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記制御部は、前記編集度合いを、前記分割領域における類似度に基づいて該分割領域ごとに変化させることを特徴とする画像処理装置。
【請求項３】
請求項１または２に記載の画像処理装置において、
前記類似度演算部は、前記２画像間で対応する前記分割領域内の物体像の相対位置の差に基づいて前記類似度を演算することを特徴とする画像処理装置。
【請求項４】
請求項１〜３のいずれか１項に記載の画像処理装置において、
前記制御部は、前記類似度の高低に応じて前記分割領域に序列を付与し、該序列に基づいて前記編集度合いの強弱を変化させることを特徴とする画像処理装置。
【請求項５】
請求項４に記載の画像処理装置において、
前記分割領域のうち１つを選択する選択部をさらに備え、
前記制御部は、前記選択部によって選択された選択領域を基準として、該選択領域以外の他の分割領域に対する前記編集度合いの強弱を変化させることを特徴とする画像処理装置。
【請求項６】
請求項５に記載の画像処理装置において、
操作信号を発する操作部材をさらに備え、
前記選択部は、前記分割領域のうち、前記操作部材からの操作信号が示す１つを選択することを特徴とする画像処理装置。
【請求項７】
請求項５に記載の画像処理装置において、
前記選択部は、前記２画像に基づいて前記分割領域のうち１つを自動選択することを特徴とする画像処理装置。
【請求項８】
請求項７に記載の画像処理装置において、
前記選択部は、前記２画像撮影時の合焦エリアに対応する分割領域を自動選択することを特徴とする画像処理装置。
【請求項９】
請求項７に記載の画像処理装置において、
前記選択部は、前記２画像における顔認識エリアに対応する分割領域を自動選択することを特徴とする画像処理装置。
【請求項１０】
請求項１〜９のいずれか一項に記載の画像処理装置において、
前記画像処理部は、画像に対するぼかし付加処理を行うことを特徴とする画像処理装置。
【請求項１１】
請求項１〜９のいずれか一項に記載の画像処理装置において、
前記画像処理部は、画像に対する明るさ補正処理を行うことを特徴とする画像処理装置。
【請求項１２】
請求項１〜１１のいずれか一項に記載の画像処理装置において、
前記２画像を含む第１画像ファイルと、前記２画像のうちの１画像を含む第２画像ファイルと、をそれぞれ記憶媒体へ記録する記録部をさらに備え、
前記画像処理部は、前記第２画像ファイル内の画像に対して画像処理を行うことを特徴とする画像処理装置。
【請求項１３】
請求項１〜１１のいずれか一項に記載の画像処理装置において、
前記２画像を含む第１画像ファイルと、前記２画像のうちの１画像を含む第２画像ファイルと、をそれぞれ記憶媒体へ記録する記録部をさらに備え、
前記画像処理部は、前記１画像ファイル内の画像および前記第２画像ファイル内の画像に対してそれぞれ画像処理を行うことを特徴とする画像処理装置。
【請求項１４】
視差有する２画像をそれぞれ読み込む第１処理と、
前記２画像をそれぞれ同数の複数領域に分割する第２処理と、
前記２画像間の類似度を前記第２処理により分割される分割領域ごとに演算する第３処理と、
所定の画像処理の編集度合いを、前記分割領域における類似度に基づいて決定する第４処理と、
前記２画像の少なくとも一方に対し、前記第４処理で決定した編集度合いで画像処理を行う第５処理と、
をコンピュータに実行させることを特徴とする画像処理プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１３−２６７７３（Ｐ２０１３−２６７７３Ａ）
【公開日】平成２５年２月４日（２０１３．２．４）
【国際特許分類】
【出願番号】特願２０１１−１５８８７９（Ｐ２０１１−１５８８７９）
【出願日】平成２３年７月２０日（２０１１．７．２０）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２５年２月４日（２０１３．２．４）
【国際特許分類】
【出願日】平成２３年７月２０日（２０１１．７．２０）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]