画像処理装置、画像処理方法、画像処理プログラム
【課題】被写界深度を変更して撮影された複数の画像ついて、色にじみの発生の有無を判断する。
【解決手段】画像処理装置は、画像取得部と、エッジ検出部と、差分算出部と、判断部と、を備える。画像取得部は、露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する。エッジ検出部は、複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出する。差分算出部は、第１の画像におけるエッジ部分の色成分と、複数の画像のうちの第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像におけるエッジ部分の色成分との差分を算出する。判断部は、算出された差分を用いて、第１の画像における色にじみの有無を判断する。
【解決手段】画像処理装置は、画像取得部と、エッジ検出部と、差分算出部と、判断部と、を備える。画像取得部は、露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する。エッジ検出部は、複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出する。差分算出部は、第１の画像におけるエッジ部分の色成分と、複数の画像のうちの第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像におけるエッジ部分の色成分との差分を算出する。判断部は、算出された差分を用いて、第１の画像における色にじみの有無を判断する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理に関し、色にじみの発生の有無の検出に関する。
【背景技術】
【０００２】
従来より、露出量を段階的に変化させて、複数回の撮影を連続して行う、いわゆる露出ブラケット撮影機能を備えたカメラが知られている（例えば、特許文献１）。また、合焦状態を段階的に変化させるフォーカスブラケット撮影機能、フラッシュの強度を段階的に変化させるフラッシュブラケット撮影機能を備えるカメラが知られている。さらに、デジタルカメラにおいては、露出ブラケット撮影機能の他に、ホワイトバランス（色温度）を段階的に変化させるホワイトバランスブラケット撮影機能、撮像素子の感度を段階的に変化させる感度ブラケット撮影機能など、を備えるものが知られている（例えば、特許文献２）。
【０００３】
ここで、銀塩カメラや、デジタルカメラを用いた撮影において、絞りを変化させることにより、被写界深度を変更する撮影技術が知られている。例えば、絞りを比較的開放することにより、被写界深度を浅くして撮影を行うと、背景をぼかした画像を得ることができる。逆に、絞りを比較的絞り込むことにより、被写界深度を深くして撮影を行うと、カメラに近い被写体からカメラから遠い被写体まで、ピントが合った画像を得ることができる。
【０００４】
【特許文献１】特開平５−３０３１３０号公報
【特許文献２】特開平７−３１８７８５号公報
【特許文献３】特開２０００−７５３７１号公報
【特許文献４】特開２００３−１０１８６９号公報
【特許文献５】特開２００５−１７３１６９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、被写界深度を浅くするために、絞りを開放側に設定すると、色にじみが発生しやすくなるという問題があった。このような場合、色にじみの発生の有無を容易に判断することができればユーザにとって便利である。
【０００６】
本発明は、上記課題を解決するためになされたものであり、本発明は、上記課題を解決するためになされたものであり、被写界深度を変更して撮影された複数の画像ついて、色にじみの発生の有無を判断することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題の少なくとも一部を解決するため、本発明の第１の態様は、画像処理装置を提供する。第１の態様に係る画像処理装置は、画像取得部と、エッジ検出部と、差分算出部と、判断部と、を備える。前記画像取得部は、露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する。前記エッジ検出部は、前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出する。前記差分算出部は、前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出する。前記判断部は、前記差分を用いて、前記第１の画像における色にじみの有無を判断する。
【０００８】
第１の態様に係る画像処理装置によれば、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像に、色にじみが発生しているか否かを自動的に判断することができる。
【０００９】
本発明の第１の態様に係る画像処理装置において、前記第１の画像におけるエッジ部分の検出は、前記複数の画像に共通するエッジ部分を検出することにより行われても良い。かかる場合において、複数の画像に共通するエッジ部分は、前記複数の画像のうちの最も絞りが開放された撮影条件で撮影された画像のエッジ部分であっても良い。こうすれば、色にじみの有無を判断しようとする画像ごとにエッジ部分の検出を行う必要がなく、処理時間および処理負荷を低減することができる。
【００１０】
発明の第１の態様に係る画像処理装置において、前記第２の画像は、前記複数の画像のうちの最も絞りが絞り込まれた撮影条件で撮影された画像であっても良い。こうすれば、色にじみが最も発生しにくい画像を基準として色にじみの有無を判断するので、色にじみの有無の判断精度を向上することができる。
【００１１】
発明の第１の態様に係る画像処理装置において、前記第１の画像と前記第２の画像のそれぞれのエッジ部分に、人間の視覚フィルタを適用するフィルタ処理を実行するフィルタ処理部を備え、前記差分算出部は、前記フィルタ処理後の前記エッジ部分について、前記差分を算出しても良い。こうすれば、人間の視覚の特性を考慮して、色にじみの有無を判断できるので、色にじみの有無の判断を適切に行うことができる。
【００１２】
本発明の第１の態様に係る画像処理装置において、前記色にじみが有ると判断された前記第１の画像を削除しても良い。こうすれば、ユーザは、連続撮影された画像のうち、色にじみの発生していない好ましい画像のみを取得することができる。
【００１３】
本発明の第１の態様に係る画像処理装置において、前記色にじみが有ると判断された前記第１の画像に、色にじみが有る旨を示す情報を関連付けても良い。こうすれば、ユーザあるいは画像を取得する装置は、連続撮影された画像について、色にじみの有無を容易に認識することができる。
【００１４】
本発明の第１の態様に係る画像処理装置において、前記第２の画像と、色にじみが無いと判断された前記第１の画像のうちの最も絞りが開放された撮影条件で撮影された画像のみを記憶しても良い。こうすれば、色にじみが発生しない範囲で、被写界深度の大きく異なる画像を容易に取得することができる。
【００１５】
なお、本発明は、種々の態様で実現することが可能であり、上述した画像処理装置のような装置発明に加えて、例えば、画像処理方法のような方法発明として実現することができる。あるいは、かかる装置または方法を構築するためのコンピュータプログラム、そのコンピュータプログラムを記録した記録媒体、そのコンピュータプログラムを含み搬送波内に具現化されたデータ信号、等の態様で実現することができる。
【発明を実施するための最良の形態】
【００１６】
Ａ．第１実施例：
・装置の構成：
次に、本発明の実施の形態を実施例に基づき説明する。図１は、第１実施例に係る画像処理装置としてのデジタルカメラの概略構成図である。
【００１７】
デジタルカメラ１００は、撮影部１０と、制御部２０と、被写体の明るさを測定するための測光回路３０と、操作部４０と、液晶パネルなどの表示部５０と、外部記憶装置６０と、を備えている。
【００１８】
撮影部１０は、実際に撮影を行う機構部分であり、撮影結果として生成される画像データを後述する制御部２０に出力する。撮影部１０は、レンズ１１と、絞り機構１２と、シャッター１３と、撮像素子１４と、画像取得回路１５を備えている。レンズ１１は、被写体からの光を撮像素子１４の受光面に集めることにより、被写体の像を撮像素子１４の受光面上に形成する。絞り機構１２は、レンズを通過する光の量を調整する機構である。シャッター１３は、撮像素子１４の受光面に被写体からの光が当たる時間（露光時間）を調整する機構である。撮像素子１４は、受光面に結像した被写体の像の明暗を電気信号に変換する。撮像素子１４には、例えば、ＣＣＤ（Charge Coupled Device）や、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）が用いられる。画像取得回路１５は、Ａ／Ｄ変換器を含み、撮像素子１４により出力される電気信号をデジタル信号に変換し、撮像素子１４の受光面に結像した画像を表す画像データを生成する。
【００１９】
制御部２０は、中央演算装置（ＣＰＵ）と、ＲＯＭやＲＡＭなどの内部記憶装置とを含む、周知のコンピュータである。制御部２０は、制御プログラムを実行することにより、デジタルカメラ１００全体を制御する種々の機能を実現する。図１には、制御部２０により実現される機能部のうち、本実施例の説明に必要な機能部が選択的に図示されている。制御部２０は、機能部として、撮影条件設定部２１と、撮影実行部２３と、画像記録部２４と、画像処理部２５とを備えている。撮影条件設定部２１は、各種の撮影条件、例えば、シャッター速度（露光時間）、絞り値、フラッシュの発光の有無、撮像素子１４の感度を設定する。撮影条件設定部２１は、測光回路３０により測定された被写体の明るさに基づいて、適正な露出量を実現する撮影条件を出力する自動露出調整部２２を含んでいる。撮影条件設定部２１は、撮影条件の設定のために自動露出調整部２２を用いる。撮影実行部２３は、撮影条件設定部２１により設定された撮影条件を用いて、撮影部１０を制御し、撮影部１０に撮影を行わせる。画像記録部２４は、後述する画像処理部２５により処理された画像データを、外部記憶装置６０に記憶させる。
【００２０】
画像処理部２５は、撮影部１０から出力された画像データに対して、各種の画像処理を施す。図１には、画像処理部２５の備える機能部のうち、後述する画像の色にじみを判断するための処理（色にじみ判断処理）に必要な機能部のみを選択的に図示している。画像処理部２５は、機能部として、エッジ検出部２５１と、フィルタ処理部２５２と、差分算出部２５３と、色にじみ判断部２５４とを含んでいる。これらの画像処理部２５の機能部については、後述する。
【００２１】
操作部４０は、ユーザからの要求を入力するための操作ボタンを含み、入力された要求を制御部２０に対して送信する。操作部４０は、操作ボタンの一つとして、撮影指示を入力するための撮影指示入力部であるシャッターボタン４１を含んでいる。操作部４０は、撮影モードなどの選択・決定ボタンを始めとする各種操作ボタンを含んでいる（図示省略）。
【００２２】
外部記憶装置６０は、生成された画像データを保存しておくための記憶装置であり、メモリカードなどの脱着可能な記録媒体を用いる装置であっても良いし、内蔵ＨＤＤ（ハードディスクドライブ）装置であっても良い。画像データは、画像データに関連付けられた付属情報と共に、所定の規格に従った画像ファイルに格納されて、外部記憶装置６０に記憶される。画像ファイルの規格には、例えば、デジタルカメラ用画像ファイルフォーマット規格（Exif）が用いられる。画像データは、例えば、ＪＰＥＧ形式、ＴＩＦＦ形式、ＧＩＦ形式、ＢＭＰ形式などの保存形式で、画像ファイルに格納される
【００２３】
・デジタルカメラ１００の動作：
図２〜図５を参照して、被写界深度ブラケットモードにおけるデジタルカメラ１００の動作について説明する。図２は、被写界深度ブラケットモードにおけるデジタルカメラ１００の動作を示すフローチャートである。図３は、絞り限界値検出処理の処理ルーチンを示すフローチャートである。図４は、被写界深度ブラケットモードにおける撮影条件を説明する図である。図５は、被写界震度ブラケットモードを用いて撮影された画像の一例を示す説明図である。
【００２４】
ユーザが操作部４０を操作して、被写界深度ブラケットモードを選択すると、制御部２０の撮影条件設定部２１により絞り限界値検出処理が行われる（ステップＳ１０２）。絞り限界値検出処理は、例えば、ユーザがシャッターボタン４１を半押し状態にした場合に実行されても良いし、デジタルカメラ１００が撮影可能な状態にある時に、常にデジタルカメラ１００が捉えている被写体について繰り返し実行されても良い。
【００２５】
絞り限界値検出処理が開始されると、撮影条件設定部２１は、まず、ＩＳＯ感度を最低値に設定すると共に、絞りを最も開放側に設定する。ＩＳＯ感度は、フィルムの感度を示す数値として定められたもので、デジタルカメラでは、撮像素子１４の感度を表す値として用いられている。本実施例におけるデジタルカメラ１００は、ＩＳＯ感度を、１００、２００、４００、８００の４段階に設定可能である。ＩＳＯ感度の数値が大きい程、撮像素子１４の感度が高いことを示している。本ステップでは、ＩＳＯ感度は、最低値である１００に設定される。絞り機構１２の状態は、Ｆ値と呼ばれる数値を用いて表される。本実施例におけるデジタルカメラ１００は、Ｆ値を、１．４、２、２．８、４、５．６、８、１１、１６、２２、３２の１０段階に設定可能である。以下では、絞り機構１２をＦ値が１．４である状態に設定することを、絞りをＦ１．４に設定する、と表現することとする。Ｆ値が小さい側が、絞りの開放側であり、Ｆ値の大きい側が絞りの絞り込み側である。絞りを一段階絞ると、例えば、絞りをＦ１．４からＦ２に変更すると、露出量は、約半分になる。本ステップでは、絞りは、最も開放側であるＦ１．４に設定される。
【００２６】
続いて、撮影条件設定部２１の自動露出調整部２２は、先のステップにおいて設定されたＩＳＯ感度とＦ値を固定して、自動露出調整を行うことにより、シャッター速度を決定する（ステップＳ２０４）。具体的には、自動露出調整部２２は、測光回路３０を用いて被写体の明るさを測定し、被写体の明るさに応じて適正な露出量を算出する。露出量は、ＥＶ（Exposure Value）と呼ばれる数値を用いて表され、被写体が明るいほど大きな値が適正な露出量とされる。自動露出調整部２２は、適正な露出量が得られるように、シャッター速度を決定する。シャッター速度は、露光時間（秒）を用いて表される。本実施例におけるデジタルカメラ１００のシャッター速度は、図４の横軸に示されるように最速値１／４０００から最も遅い値１／４まで、１１段階に設定することができる。シャッター速度を、一段階速くすると、例えば、１／３０から１／６０に変更すると、露出量は、約半分になる。図４には、露出量（ＥＶ）と、絞り（Ｆ値）と、シャッター速度（露光時間）との関係が示されている。ＩＳＯ感度が１００である場合に露出量が１０ＥＶになる絞りとシャッター速度の組み合わせは、図４において、太い実線Ｌ１０上になる。従って、適正な露出量が１０ＥＶ、絞りがＦ１．４、ＩＳＯ感度が１００である場合、自動露出調整部２２は、シャッター速度を１／５００に決定する（図４：実線Ｌ１０上の点ＳＯ１０参照）。一方、ＩＳＯ感度が１００である場合に露出量が１６ＥＶになる絞りとシャッター速度の組み合わせは、図４において、太い実線Ｌ１６上になる。従って、適正な露出量が１６ＥＶ、絞りがＦ１．４、ＩＳＯ感度が１００である場合、シャッター速度の適切な値は、１／４０００より速い（露光時間が短い）値となるので、自動露出調整部２２は、シャッター速度を決定できない。
【００２７】
続いて、撮影条件設定部２１は、適正な露出量を設定できたか否かを判断する（ステップＳ２０６）。撮影条件設定部２１は、先のステップにおいて、適正な露出量を実現できるように、シャッター速度を決定できた場合には、適正な露出量を設定できたと判断し、シャッター速度を決定できなかった場合には、適正な露出量を設定できないと判断する。
【００２８】
撮影条件設定部２１は、適正な露出量を設定できないと判断すると（ステップＳ２０６：ＮＯ）、絞りを現在の状態から一段階絞り込み側に設定する（ステップＳ２０８）。例えば、現在の絞りがＦ１．４であれば、絞りをＦ２に設定する。撮影条件設定部２１は、絞りを変更すると、ステップＳ２０４に戻り、新たに設定された絞りにて、再度シャッター速度を決定する。
【００２９】
一方、撮影条件設定部２１は、適正な露出量を設定できたと判断すると（ステップＳ２０６：ＹＥＳ）、現在の絞りを開放側の限界値として保存しておく（ステップＳ２１０）。例えば、適正な露出量が１０ＥＶである場合には、Ｆ１．４が開放側の限界値とされる（図４：実線Ｌ１０上の点ＳＯ１０参照）。また、適正な露出量が１６ＥＶである場合には、Ｆ４が開放側の限界値とされる（図４：実線Ｌ１６上の点ＳＯ１６参照）。
【００３０】
続いて、撮影条件設定部２１は、絞りを最も絞り込み側に設定する（ステップＳ２１２）。本実施例におけるデジタルカメラ１００では、絞りはＦ３２に設定される。自動露出調整部２２は、ステップＳ２０４と同様に、ＩＳＯ感度とＦ値を固定して、自動露出調整を行うことにより、シャッター速度を決定する（ステップＳ２１４）。シャッター速度は、手ぶれが発生しない範囲で決定される。図４において一点破線Ａ−Ａは、手ぶれが発生する限界の例を示している。すなわち、本実施例におけるデジタルカメラ１００では、シャッター速度が１／８より遅くなると手ぶれが発生すると判断され、自動露出調整部２２は、シャッター速度を１／１５もしくは１／１５より速く設定する。自動露出調整部２２は、適正な露出量が１６ＥＶ、絞りがＦ３２、ＩＳＯ感度が１００である場合、自動露出調整部２２は、シャッター速度を１／６０に決定する（図４：実線Ｌ１６上の点ＳＣ１６参照）。一方、適正な露出量が１０ＥＶ、絞りがＦ３２、ＩＳＯ感度が１００である場合、シャッター速度の適切な値は、１／１５より遅い（露光時間が長い）値となるので、自動露出調整部２２は、シャッター速度を決定できない。
【００３１】
続いて、撮影条件設定部２１は、適正な露出量を設定できたか否かを判断する（ステップＳ２１６）。撮影条件設定部２１は、先のステップにおいて、適正な露出量を実現できるように、シャッター速度を決定できた場合には、適正な露出量を設定できたと判断し、シャッター速度を決定できなかった場合には、適正な露出量を設定できないと判断する。
【００３２】
撮影条件設定部２１は、適正な露出量を設定できないと判断すると（ステップＳ２１６：ＮＯ）、現在のＩＳＯ感度が設定できる最高値（本実施例では、８００）であるか否かを判断する（ステップＳ２１８）。撮影条件設定部２１は、ＩＳＯ感度が最高値でないと判断すると（ステップＳ２１８：ＮＯ）、ＩＳＯ感度を一段階上げる（ステップＳ２２０）。一方、撮影条件設定部２１は、ＩＳＯ感度が最高値であると判断すると（ステップＳ２１８：ＹＥＳ）、絞りを現在の状態から一段階開放側に設定する（ステップＳ２２２）。例えば、現在の絞りがＦ１．４であれば、絞りをＦ２に設定する。撮影条件設定部２１は、ＩＳＯ感度または絞りを変更すると、ステップＳ２１４に戻り、新たに設定された絞りまたはＩＳＯ感度にて、再度シャッター速度を決定する。
【００３３】
一方、撮影条件設定部２１は、適正な露出量を設定できたと判断すると（ステップＳ２１６：ＹＥＳ）、現在の絞りを絞り込み側の限界値として保存しておく（ステップＳ２２４）。例えば、適正な露出量が１０ＥＶである場合には、Ｆ２２が絞り込み側の限界値とされる（図４：破線Ｍ１０上の点ＳＣ１０参照）。また、適正な露出量が１６ＥＶである場合には、Ｆ３２が絞り込み側の限界値とされる（図４：実線Ｌ１６上の点ＳＣ１６参照）。こうして、絞りの開放側および絞り込み側の限界値がそれぞれ保存されると、絞り限界値検出処理は終了される。
【００３４】
図３に戻って説明を続ける。絞り限界値検出処理を終えると、撮影条件設定部２１は、絞り限界値検出処理において保存された開放側の限界値に、絞りを設定し（ステップＳ１０４）、ユーザからの撮影指示を待つ。ユーザがシャッターボタン４１を押下することにより、撮影指示を入力すると（ステップＳ１０６：ＹＥＳ）、自動露出調整部２２は、設定された絞りにて、自動露出調整を実行する（ステップＳ１０８）。これにより、設定された絞りにて適正露出が得られるように、ＩＳＯ感度およびシャッター速度が決定される。自動露出調整がなされると、撮影実行部２３は、決定された撮影条件（絞り、ＩＳＯ感度、シャッター速度）にて、撮影部１０に撮影を実行させる（ステップＳ１１０）。撮影が終了すると、撮影条件設定部２１は、現在の絞りが、上述した絞り限界値検出処理により保存された絞り込み側の限界値であるか否かを判断する（ステップＳ１１２）。絞り込み側の限界値ではないと判断されると（ステップＳ１１２：ＮＯ）、撮影条件設定部２１は、絞りを一段階絞り込み側に設定する（ステップＳ１１４）。絞りが変更されると、ステップＳ１０８に戻って、次の撮影が実行される。一方、絞り込み側の限界値であると判断されると（ステップＳ１１２：ＹＥＳ）、撮影条件設定部２１は、撮影を終了し、色にじみ判断処理に移る（ステップＳ１１６）。
【００３５】
このようにして、絞りを開放側の限界値から絞り込み側の限界値まで、段階的に変更しながら、連続して撮影が行われることにより、制御部２０は、被写体および露出量が実質的に同一であり、被写界深度が段階的に変化していく複数の画像をデジタルデータとして取得する。例えば、適正な露出量が１６ＥＶである被写体を撮影した場合、図４の実線Ｌ１６上の７つの点に対応する撮影条件をそれぞれ用いて、７回の撮影が連続して実行される。この結果、制御部２０は、露出量が実質的に同一に、絞りがＦ４からＦ３２までの各段階に、それぞれ設定して撮影された、同一被写体を有する７枚の画像のデジタルデータを取得する。図５（ａ）〜（ｃ）は、これらの７枚の画像のうちの３枚の画像の一例を示している。
【００３６】
図５（ａ）は、図４における実線Ｌ１６上の点ＳＣ１６に対応する撮影条件（絞り込み側の限界値）で撮影された画像を示す。図５（ｂ）は、図４における実線Ｌ１６上の点ＳＭ１６に対応する撮影条件で撮影された画像を示す。図５（ｃ）は、図４における実線Ｌ１６上の点ＳＯ１６に対応する撮影条件（開放側の限界値）で撮影された画像を示す。絞りを限界まで絞り込んで撮影された画像は、被写界深度が深い画像となり、例えば、図５（ａ）に示すように、主要被写体Ｆのみならず、主要被写体Ｆの後方にある非主要被写体Ｈにもピントが合った画像となる。一方、絞りを限界まで開放して撮影された画像は、非写界深度が浅い画像となり、例えば、図５（ｃ）に示すように、主要被写体Ｆの前面部分にのみピントが合い、主要被写体Ｆの側面部分は少しぼけ、後方の非主要被写体Ｈは完全にぼけた画像になる。そして、絞りを、開放側の限界と絞り込み側の限界との中間に設定して撮影された画像は、非写界深度が中程度の画像となり、例えば、図５（ｂ）に示すように、主要被写体Ｆは全体にピントが合っているが、後方の非主要被写体Ｈはぼけている画像になる。
【００３７】
また、適正な露出量が１０ＥＶである被写体を撮影した場合、図４の実線Ｌ１０上の６つの点（黒丸）に対応する撮影条件をそれぞれ用いて、６回の撮影が連続して実行される。さらに、シャッター速度を固定し、絞りとＩＳＯ感度を段階的に変更しながら図４の破線Ｍ１０上の３つの点（四角、三角、バツ型の各点）に対応する撮影条件をそれぞれ用いて３回の撮影が連続して実行される。この結果、制御部２０は、露出量が実質的に同一に、絞りがＦ１．４からＦ２２までの各段階に、それぞれ設定して撮影された、同一被写体を有する９枚の画像のデジタルデータを取得する。
【００３８】
図６および図７を参照して、撮影後に行われる色にじみ判断処理（ステップＳ１１６）について説明する。図６は、色にじみ判断処理の処理ルーチンを示すフローチャートである。図７は、エッジの検出に用いられるラプラシアンフィルタの一例を示す図である。
【００３９】
色にじみ判断処理は、制御部２０の画像処理部２５により実行される。色にじみ判断処理が開始されると、画像処理部２５のエッジ検出部２５１は、上述した連続撮影により撮影された複数の画像（連続撮影画像）のうち、絞りを開放側の限界値に設定して撮影された画像（最開放側画像）のエッジ部分を検出する（ステップＳ３０２）。エッジ部分は、画像中の被写体の輪郭部分などに現れる隣接する画素間の階調値の差が大きい部分である。エッジ検出部２５１は、例えば、エッジ量が所定の閾値より大きいエッジ画素を検出し、当該エッジ画素により構成される部分をエッジ部分とする。画素のエッジ量は、例えば、各画素に対して、図７に示す８近傍ラプラシアンフィルタを適用することにより算出される。具体的には、エッジ検出部２５１は、注目している画素と周囲の８つの画素の輝度値のそれぞれに、８近傍ラプラシアンフィルタに設定された係数を乗じて得られる値の合計値の絶対値をエッジ量として採用する。輝度値は、例えば、ＹＣｂＣｒ色空間における輝度値Ｙや、Ｌ＊ａ＊ｂ＊色空間における明度値Ｌを用いることができる。画素データがｓＲＧＢ色空間で与えられている場合は、輝度値Ｙは、式（１）によって算出される。
Y ＝ 0.29891 × R ＋ 0.58661 × G ＋ 0.11448 × B …（１）
【００４０】
ピントが合っている領域では、被写体の輪郭や細部がはっきり描写されるため、エッジ部分が多くなり、ピントがぼけている領域では、被写体の輪郭や細部が曖昧になるためエッジ部分が少なくなる。従って、絞りが絞り込まれた（Ｆ値が大きい）画像ほど、ピントが合っている領域が大きいためエッジ部分が多くなり、絞りが開放された（Ｆ値が小さい）画像ほど、ピントが合っている領域が小さいためエッジ部分は少なくなる。この結果、連続撮影画像のうち、最開放側画像（例えば、図５（ｃ）の画像）のエッジ部分は、他の画像においてもエッジ部分となる。本ステップにおいて、最開放側画像を用いてエッジ部分を検出するのは、連続撮影画像に共通するエッジ部分を検出するためである。
【００４１】
次に、画像処理部２５は、連続撮影画像のうち、絞りを絞り込み側の限界値に設定して撮影された画像（最絞り込み側画像）の画素データの色空間を、いわゆる反対色空間に変換する（ステップＳ３０４）。反対色空間は、輝度成分Ｏ1と、２つの色差成分Ｏ2（赤−緑成分）、Ｏ3（青−黄成分）とから成る色空間であり、各成分が、人間の脳が認識する視覚の３つの感覚に対応していると考えられている。画素データがｓＲＧＢ色空間で与えられている場合は、反対色空間の各成分値（Ｏ1、Ｏ2、Ｏ3）は、ＣＩＥＸＹＺ色空間を介して、以下の式（２）および（３）によって算出される。
【００４２】
【数１】
【００４３】
画像処理部２５のフィルタ処理部２５２は、画素データを反対色空間に変換された最絞り込み側画像に対して人間の視覚フィルタを適用する（ステップＳ３０６）。人間の視覚フィルタは、輝度に対する空間分解能に比較して、色差に対する空間分解能が大幅に低いという人間の視覚特性を考慮して、画像の各画素データを、画像を人間が見た場合に認識される値に変換するフィルタである。変換後の画素データの各成分値（Ｏｔ1、Ｏｔ2、Ｏｔ3）は、以下の式（４）〜（６）によって算出される。
【００４４】
【数２】
【００４５】
上記の式において、「＊」は、畳み込み積分を表す。上記の式において、（ｘ，ｙ）は、画像における画素の座標を表す。上記の式において、ｋiおよびｋijは、正規化係数であり、ｋiはｆjの和が１になるように設定され、ｋijは、Ｅijの和が１になるように設定される。上記の式におけるパラメータｗijおよびσijは、以下の表に示すとおりである。
【００４６】
【表１】
【００４７】
続いて、画像処理部２５は、後述する色にじみの発生の有無が未判断の画像のうち、最も絞りが開放側で撮影された画像（最もＦ値が小さい撮影条件の画像）を、注目画像に設定する（ステップＳ３０８）。最初は、最開放側画像が注目画像に設定されることになる。
【００４８】
注目画像が設定されると、画像処理部２５は、注目画像の画素データの色空間を、反対色空間に変換する（ステップＳ３１０）。そして、画像処理部２５は、画素データを反対色空間に変換された注目画像に対して人間の視覚フィルタを適用する（ステップＳ３１２）。色空間の変換、および、人間の視覚フィルタの適用の手法は、上述したとおりである。
【００４９】
続いて、画像処理部２５の差分算出部２５３は、注目画像と最絞り込み側画像とのエッジ部分における色成分の差分を算出する。具体的には、ステップＳ３０２において検出されたエッジ部分を構成するエッジ画素の座標を（ｘn，ｙn）（ｎ＝１，２，３…）とすると、差分算出部２５３は、各エッジ画素の色成分差分値ΔＣ（ｘn，ｙn）（ｎ＝１，２，３…）を、以下の式（７）を用いて算出する。
ΔＣ（ｘn，ｙn）＝〔｛Ｏｓ2（ｘn，ｙn）−Ｏｒ2（ｘn，ｙn）｝2
＋｛Ｏｓ3（ｘn，ｙn）−Ｏｒ3（ｘn，ｙn）｝2〕1/2…（７）
【００５０】
式（７）において、Ｏｓ2（ｘn，ｙn）は、注目画像における座標（ｘn，ｙn）の画素の色成分値Ｏ2を表し、Ｏｒ2（ｘn，ｙn）は、最絞り込み側画像における座標（ｘn，ｙn）の画素の色成分値Ｏ2を表す。同様にして、Ｏｓ3（ｘn，ｙn）は、注目画像における座標（ｘn，ｙn）の画素の色成分値Ｏ3を表し、Ｏｒ3（ｘn，ｙn）は、最絞り込み側画像における座標（ｘn，ｙn）の画素の色成分値Ｏ3を表す。
【００５１】
画像処理部２５は、差分平均値ΔＣａｖｅを算出する（ステップＳ３１６）。差分平均値ΔＣａｖｅは、上述した各エッジ画素の色成分差分値ΔＣ（ｘn，ｙn）の平均値である。
【００５２】
差分平均値ΔＣａｖｅが算出されると、画像処理部２５の色にじみ判断部２５４は、差分平均値ΔＣａｖｅを所定の閾値と比較する（ステップＳ３１８）。
【００５３】
差分平均値ΔＣａｖｅが閾値以上である場合には（ステップＳ３１８：ＹＥＳ）、色にじみ判断部２５４は、注目画像に色にじみが発生していると判断する（ステップＳ３２０）。差分平均値ΔＣａｖｅが閾値未満である場合には（ステップＳ３１８：ＮＯ）、色にじみ判断部２５４は、色にじみが発生していないと判断する（ステップＳ３２２）。ここで、エッジ部分における色成分差分値を用いて色にじみの有無を判断するのは、色にじみは、画像のエッジ部分において発生しやすいからである。
【００５４】
注目画像における色にじみの発生の有無が判断されると、画像処理部２５は、連続撮影画像のうち、最絞り込み側画像を除く全ての画像について、色にじみの発生の有無の判断が終了したかを判断する（ステップＳ３２４）。未判断の画像がある場合には（ステップＳ３２４：ＮＯ）、ステップＳ３０８に戻って、新たな注目画像を設定する。未判断の画像がない場合には（ステップＳ３２４：ＹＥＳ）、色にじみ判断処理を終了する。
【００５５】
図２に戻って説明を続ける。色にじみ判断処理が終了すると、画像記録部２４は、連続撮影画像のうち、色にじみが発生していないと判断された画像の画像ファイルを作成して、外部記憶装置６０に記憶する（ステップＳ１１８）。一方、画像記録部２４は、連続撮影画像のうち、色にじみが発生していると判断された画像を削除する（ステップＳ１１８）。
【００５６】
以上説明した本実施例におけるデジタルカメラ１００によれば、明るさがほぼ等しく、被写界深度が異なる複数の画像を、シャッターボタン４１を一度押すだけで、容易に撮影することができる。この結果、ユーザは、煩わしい操作や、撮影条件の設定のための知識を要することなく、容易に被写界深度が異なる画像を取得・利用することができる。
【００５７】
さらに、手ぶれの発生による画質の劣化が生じない範囲で、撮影条件を設定するので、取得された連続撮影画像に手ぶれ画像が混入することを防止または抑制することができる。
【００５８】
さらに、絞りの段階的な変更に応じて、画像の明るさをほぼ一定に保つために、シャッター速度に加えて、撮像素子１４の感度（ＩＳＯ感度）の変更を行うので、被写界深度を、より大きく変更することができる。
【００５９】
また、手ぶれの発生しない範囲で設定可能な全ての撮影条件で撮影するので、ユーザは、多様な非写界深度を有する画像を取得することが容易にできる。
【００６０】
さらに、連続撮影された画像のうち、色にじみが発生している画像は、自動的に削除されるので、ユーザが取得する連続撮影画像に、色にじみが発生している画像が混入することを防止または抑制することができる。
【００６１】
また、色にじみ判断処理は、連続撮影画像に共通するエッジ部分における色成分差を比較することにより行われる。色にじみが発生しやすいエッジ部分に着目して色にじみの有無を判断するため、精度良く色にじみの有無を判断することができる。また、各注目画像についてエッジ検出処理を行う必要がないので、色にじみ判断処理の処理負荷および処理時間を低減することができる。
【００６２】
また、色にじみ判断処理は、人間の視覚フィルタを適用した後の画素データを用いて行われるので、人間の視覚特性を考慮して、精度良く色にじみの有無を判断することができる。
【００６３】
Ｂ．第２実施例：
第１実施例において、色にじみ判断処理は、デジタルカメラ１００において実行されているが、これに限られない。例えば、色にじみ判断処理を実行する画像処理部２５は、パーソナルコンピュータに実装されても良いし、あるいは、インクジェットプリンタなどの印刷装置に実装されても良い。図８〜図１０を参照して、色にじみ判断処理を実行する画像処理部２５をパーソナルコンピュータに実装する態様を、第２実施例として説明する。図８は、第２実施例におけるシステムの概略構成図である。図９は、第２実施例におけるデジタルカメラの動作を示すフローチャートである。図１０は、第２実施例におけるパーソナルコンピュータの動作を示すフローチャートである。
【００６４】
・システムの構成：
第２実施例におけるシステムは、デジタルカメラ１００ｂと、パーソナルコンピュータ２００を備えている。第２実施例におけるデジタルカメラ１００ｂの制御部２０は、第１実施例（図１）と異なり、色にじみ判断処理を行うための画像処理部２５を備えていない。第２実施例におけるデジタルカメラ１００ｂのその他の構成は、第１実施例におけるデジタルカメラ１００（図１）と同一であるので、同一の構成要素については図１と同一の符号を付し、その説明を省略する。
【００６５】
第２実施例におけるパーソナルコンピュータ２００は、ＣＰＵ２１０と、ＲＯＭやＲＡＭなどの内部記憶装置２２０と、ハードディスク装置などの外部記憶装置２４０と、表示部２６０と、マウスやキーボードなどの操作部２７０と、インタフェース部（Ｉ／Ｆ部）２９０と、を備えている。Ｉ／Ｆ部２９０は、外部に設けられた種々の機器との間でデータ通信を行う。例えば、Ｉ／Ｆ部２９０は、デジタルカメラ１００ｂから画像データを受け取る。
【００６６】
内部記憶装置２２０には、画像処理部２５０として機能するコンピュータプログラムが格納されている。なお、画像処理部２３０の機能は、ＣＰＵ２１０がコンピュータプログラムを実行することによって実現される。コンピュータプログラムは、例えば、ＣＤ−ＲＯＭなどのコンピュータ読み取り可能な記録媒体に記録された形態で提供される。
【００６７】
画像処理部２５０は、画像取得部２５０１と、エッジ検出部２５０２と、フィルタ処理部２５０３と、差分算出部２５０４と、色にじみ判断部２５０５と、を備えている。画像取得部２５０１は、デジタルカメラ１００ｂにより撮影された連続撮影画像を取得する。エッジ検出部２５０２と、フィルタ処理部２５０３と、差分算出部２５０４と、色にじみ判断部２５０５は、第１実施例における同名の構成要素と同一であるので、その説明を省略する。
【００６８】
・デジタルカメラ１００ｂの動作：
図９に示すデジタルカメラ１００ｂの動作のうち、ステップＳ６０２〜ステップＳ６１４までのステップは、図２を参照して説明した第１実施例におけるデジタルカメラ１００の動作と同一であるので、その説明を省略する。第２実施例におけるデジタルカメラ１００ｂでは、上述のとおり色にじみ判断処理を実行する機能部を備えていないので、連続撮影が終了すると（ステップＳ６１２：ＹＥＳ）、画像記録部２４は、連続撮影された全ての画像を外部記憶装置６０に画像ファイルとして記録し（ステップＳ６１６）、本処理を終了する。
【００６９】
デジタルカメラ１００ｂにおいて撮影された連続撮影画像は、例えば、Ｉ／Ｆ部２９０を介して、パーソナルコンピュータ２００の外部記憶装置２４０に記憶される。
【００７０】
・パーソナルコンピュータ２００の動作：
続いて、図１０を参照して、パーソナルコンピュータ２００の画像処理部２５０の動作を説明する。画像処理部２５０による処理が開始されると、画像処理部２５０の画像取得部２５０１は、外部記憶装置２４０から連続撮影画像を取得する（ステップＳ７０２）。画像処理部２５０は、取得された連続撮影画像を対象として色にじみ判断処理を実行する（ステップＳ７０４）。本ステップにおける色にじみ判断処理の内容は、第１実施例において説明した色にじみ判断処理（図２：ステップＳ１１６）と同一であるので、その説明を省略する。色にじみ判断処理が終了すると、画像処理部２５０は、第１実施例におけるステップＳ１１８（図２）と同様に、連続撮影画像のうち、色にじみが発生していないと判断された画像のみを記憶し、色にじみが発生していると判断された画像を削除する（ステップＳ７０６）。
【００７１】
以上説明した第２実施例におけるシステムによれば、第１実施例におけるデジタルカメラ１００と同一の作用・効果を実現することができる。以上の説明から解るように、第１実施例においては、デジタルカメラ１００が、特許請求の範囲における画像処理装置に相当し、第２実施例においては、パーソナルコンピュータ２００が、特許請求の範囲における画像処理装置に相当する。
【００７２】
Ｃ．変形例：
被写界深度ブラケットモードにおけるデジタルカメラ１００の動作は、上記実施例に限られない。以下、第１変形例および第２変形例として、被写界深度ブラケットモードにおけるデジタルカメラ１００の動作の他の態様を説明する。
【００７３】
・第１変形例：
図１１を参照して、第１変形例におけるデジタルカメラ１００の動作について説明する。図１１は、本変形例におけるデジタルカメラ１００の動作を示すフローチャートである。本変形例におけるステップＳ４０２〜ステップＳ４０６は、上記第１実施例におけるステップＳ１０２〜ステップＳ１０６（図２）と同一であるので、説明を省略する。ステップＳ４０６において、ユーザがシャッターボタン４１を押下することにより、撮影指示を入力すると（ステップＳ１０６：ＹＥＳ）、自動露出調整部２２は、開放側の限界値に設定された絞りにて、自動露出調整を実行する（ステップＳ４０８）。これにより、開放側の限界値に設定された絞りにて適正露出が得られるように、ＩＳＯ感度およびシャッター速度が決定される。自動露出調整が終了すると、撮影実行部２３は、決定された撮影条件（絞り、ＩＳＯ感度、シャッター速度）にて、撮影部１０に撮影を実行させる（ステップＳ４１０）。
【００７４】
開放側の限界値に設定された絞りにて、撮影が終了すると、撮影条件設定部２１は、絞りを絞り込み側の限界値に設定する（ステップＳ４１２）。続いて、自動露出調整部２２は、絞り込み側の限界値に設定された絞りにて、自動露出調整を実行する（ステップＳ４１４）。これにより、絞り込み側の限界値に設定された絞りにて適正露出が得られるように、ＩＳＯ感度およびシャッター速度が決定される。自動露出調整が終了すると、撮影実行部２３は、決定された撮影条件（絞り、ＩＳＯ感度、シャッター速度）にて、撮影部１０に撮影を実行させる（ステップＳ４１６）。
【００７５】
制御部２０の画像記録部２４は、絞りを開放側の限界値に設定した撮影により生成された画像と、絞りを絞り込み側の限界値に設定した撮影により生成された画像とを、それぞれ画像ファイルとして外部記憶装置６０に記録し（ステップＳ４１８）、本処理を終了する。
【００７６】
第１変形例によれば、デジタルカメラ１００は、撮影可能な画像のうち、最も被写界深度の深い画像と、最も被写界深度の浅い画像とを、一の操作で取得することができる。例えば、適正な露出量が１０ＥＶである被写体を撮影した場合、図４における点ＳＯ１０に対応する撮影条件で撮影された画像と、点ＳＣ１０に対応する撮影条件で撮影された画像とを取得することができる。この結果、ユーザは、被写界深度を変更する撮影技術を容易に利用することができる。
【００７７】
本変形例では、色にじみ判断処理は実行されないので、本変形例における動作のみをおこなうデジタルカメラでは、図１に示す構成要素のうち、色にじみ判断処理を行うための機能部２５１〜２５４を備えていなくても良い。
【００７８】
・第２変形例：
図１２〜図１３を参照して、第２変形例におけるデジタルカメラ１００の動作について、説明する。図１２は、本変形例におけるデジタルカメラ１００の動作を示すフローチャートである。図１３は、撮影条件設定部２１に記憶されている撮影条件を示すプログラム線図である。
【００７９】
第２変形例に係るデジタルカメラ１００では、被写体の明るさに対する適正な露出量ごとに、絞りが異なる複数の撮影条件が予め、撮影条件設定部２１にプログラムされている。撮影条件設定部２１は、適正な露出量を認識すると、プログラムに従って、用いる複数の撮影条件を決定する。以下、より具体的に説明する。
【００８０】
被写界深度ブラケットモードが選択されている場合、撮影条件設定部２１は、測光回路３０を用いて被写体の明るさを測定し、被写体の明るさに応じて適正な露出量を算出する（ステップＳ５０２）。露出量の算出は、例えば、ユーザがシャッターボタン４１を半押し状態にした場合に実行されても良い。また、露出量の算出を、常にデジタルカメラ１００が捉えている被写体について繰り返し実行しながら、シャッターボタン４１が押下されるのを待機しても良い。
【００８１】
ユーザが、シャッターボタン４１を押下することにより、撮影指示を入力すると（ステップＳ５０４：ＹＥＳ）、撮影条件設定部２１は、適正な露出量に応じて、予めプログラムされた複数の撮影条件を決定する（ステップＳ５０６）。図１３のプログラム線図に示すように、例えば、被写体の明るさに対する適切な露出量が６ＥＶである場合には、太い実線Ｌ６上の５つの点にそれぞれ対応する５つの撮影条件が決定される。また、被写体の明るさに対する適切な露出量が１８ＥＶである場合には、太い実線Ｌ１８上の５つの点にそれぞれ対応する５つの撮影条件が決定される。撮影条件設定部２１には、設定可能な全ての露出量について、複数の撮影条件がプログラムされているが、図１３のプログラム線図では、図の煩雑を避けるため、適切な露出量が６ＥＶ、１０ＥＶ、１８ＥＶである場合の撮影条件のみを図示している。図１３から解るように、露出量ごとに定められた複数の撮影条件は、上記実施例と同様に、手ぶれが発生しない範囲で設定されると共に、シャッター速度とＩＳＯ感度とを変更することにより絞りを極力広い範囲で変更するように設定される。
【００８２】
複数の撮影条件が決定されると、撮影条件設定部２１は、複数の撮影条件を順次に設定する（ステップＳ５０８）。撮影実行部２３は、撮影条件が設定されると、その撮影条件にて、撮影部１０に撮影を実行させる。次に、先のステップＳ５０６において決定された複数の設定条件の全てについて撮影が終了されたが判断される（ステップＳ５１２）。全ての撮影条件で撮影されるまでステップＳ５０８およびＳ５１０が繰り返される。全ての撮影条件で撮影されると（ステップＳ５１２：ＹＥＳ）、ステップＳ５１４に移行する。
【００８３】
ステップＳ５１４およびステップＳ５１６は、上記第１実施例におけるステップＳ１１６およびＳ１１８（図２）と同一であるので、説明を省略する。
【００８４】
本変形例によれば、上記実施例と同様の作用・効果を実現することができる。また、本変形例によれば、露出量に応じて、予め被写界深度ブラケットモードに用いる複数の撮影条件がプログラムされている。上記実施例のように絞り限界値検出処理を実行することなく、適正な露出量を決定するだけで、容易に複数の撮影条件を決定できる。
【００８５】
・第３変形例：
上記実施例では、色にじみ判断処理の結果、色にじみが発生していないと判断された画像のみを画像ファイルとして記憶し、色にじみが発生していると判断された画像は削除している（ステップＳ１１８：図２）。これに代えて、画像記録部２４は、色にじみ判断処理の結果、すなわち、色にじみの発生の有無を示す情報を、各画像に関連付けて、全ての画像を画像ファイルとして記憶しても良い。色にじみの発生の有無を示す情報は、例えば、画像ファイルにおける付属情報格納領域に格納される。例えば、Ｅｘｉｆ規格に従ったファイル構造を有する画像ファイルの付属情報格納領域には、デジタルカメラの製造者が自由に使用できるMakernote領域が定義されている。色にじみの発生の有無を示す情報は、例えば、Makernote領域に記録される。
【００８６】
第３変形例によれば、被写界深度ブラケットモードで撮影された複数の画像にそれぞれ、色にじみの発生の有無を示す情報が関連付けられる。この結果、これらの画像を取得したユーザや、パーソナルコンピュータなどの画像処理装置は、容易にこれらの画像における色にじみの発生の有無を認識することができる。例えば、ユーザは、印刷する画像や、保存しておく画像を選択する際に、色にじみの発生の有無を示す情報を参考にすることができる。
【００８７】
・第４変形例：
上記実施例において、画像記録部２４は、色にじみが発生していないと判断された全ての画像を、画像ファイルとして記憶しているが、色にじみが発生していないと判断された画像の一部を選択的に、画像ファイルとして記憶しても良い。例えば、画像記録部２４は、最絞り込み画像と、色にじみが発生していないと判断された画像のうち、最も絞りが開放された条件で撮影された画像の２枚を、画像ファイルとして記憶しても良い。
【００８８】
・第５変形例：
上記実施例では、エッジ量の算出に８近傍ラプラシアンフィルタを用いているが、この代わりに、４近傍ラプラシアンフィルタやプレウィットフィルタ、ソーベルフィルタといった、注目の画素位置における階調値の変化の大きさを算出可能なフィルタを用いてもよい。また、注目画素とその周辺の画素とにおける「最大輝度値−最小輝度値」をエッジ量として用いてもよい。輝度値を比較する画素の範囲としては、注目画素を中心とした３×３画素範囲や５×５画素範囲といった矩形範囲を採用してもよく、また、他の種類の範囲を採用してもよい。
【００８９】
また、色にじみは、輝度値Ｙに限らず種々の色成分の変化の大きな部分で生じる可能性もある。従って、エッジ量は、注目の画素位置における種々の色成分（例えば、ＲＧＢの各色成分や、ＹＣｂＣｒの各色成分）の階調値の変化の大きさを表す指標であってもよい。例えば、ＲＧＢ色成分のＧ成分に上述のフィルタを用いて算出した値をエッジ量として用いてもよく、また、ＲＧＢ各色成分毎に算出した色別エッジ量の合計値をエッジ量として用いてもよい。
【００９０】
・第６変形例：
上記実施例では、色成分差分値ΔＣの算出を、反対色空間（Ｏ1、Ｏ2、Ｏ3）における色成分（Ｏ2、Ｏ3）を用いて算出しているが、これに限られない。例えば、色成分差分値ΔＣの算出は、ＣＩＥＬ＊ａ＊ｂ＊色空間における色成分（ａ＊、ｂ＊）を用いても良いし、ＹＣｂＣｒ色空間における色成分（Ｃｂ、Ｃｒ）を用いても良い。
【００９１】
また、上記実施例において、色にじみの発生の有無の検出は、色成分差分値ΔＣの平均値を用いて行われているが、これに限られない。例えば、色にじみ判断部２５４は、色成分差分値ΔＣが所定値以上であるエッジ画素が、所定数以上存在する場合に色にじみが発生していると判断しても良い。
【００９２】
・第７変形例：
上記実施例において、色にじみの発生の有無の検出を、人間の視覚フィルタを適用後の画素値を用いて行っているが、人間の視覚フィルタの適用は、省略することができる。ただし、人間の視覚フィルタを適用すると、人間の視覚特性を考慮し、より色にじみの発生の有無を精度良く検出できる利点がある。
【００９３】
・第８変形例：
上記実施例において、エッジ部分の検出は、最開放側画像を用いて実行している。そして、最開放側画像において検出されたエッジ部分を、連続撮影画像に共通するエッジ部分として、色にじみの有無の判断に用いている。これに代えて、色にじみの判断の対象である注目画像のそれぞれについてエッジ部分を検出しても良い。そして、各注目画像について、各注目画像において検出されたエッジ部分を用いて、色にじみの有無を判断しても良い。ただし、実施例のように、最開放側画像を用いてエッジ検出をする場合には、エッジ検出処理は、一度で済むため、色にじみ判定処理における処理時間や処理負荷を軽減することができる利点がある。
【００９４】
・第９変形例：
上記実施例における色にじみ判断処理は、最絞り込み側画像を基準として、注目画像と最絞り込み側画像の色成分差分値ΔＣを算出している。これは、最絞り込み側画像は、一般的に、最も色にじみが発生しにくいため、色にじみが発生していないと推定できるからである。色にじみが発生していないと推定できる画像であれば、基準とする画像は最絞り込み側画像でなくても良い。例えば、デジタルカメラ１００の特性などから、２番目に絞り込まれた絞りにて撮影された画像でも色にじみが発生していないと考えられる場合は、当該画像を基準としても良い。
【００９５】
・第１０変形例：
上記実施例において、ハードウェアによって実現されていた構成の一部をソフトウェアに置き換えてもよく、逆に、ソフトウェアによって実現されていた構成の一部をハードウェアに置き換えてもよい。例えば、画像処理部２５の各機能部のうちの一部、例えば、フィルタ処理部２５２や、エッジ検出部２５１を、ソフトウェアに代えて専用のハードウェアにより構成しても良い。
【００９６】
以上、実施例、変形例に基づき本発明について説明してきたが、上記した発明の実施の形態は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明は、その趣旨並びに特許請求の範囲を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれる。
【図面の簡単な説明】
【００９７】
【図１】第１実施例に係る撮像装置としてのデジタルカメラの概略構成図。
【図２】被写界深度ブラケットモードにおけるデジタルカメラの動作を示すフローチャートである。
【図３】絞り限界値検出処理の処理ルーチンを示すフローチャート。
【図４】被写界深度ブラケットモードにおける撮影条件を説明する図。
【図５】被写界震度ブラケットモードを用いて撮影された画像の一例を示す説明図。
【図６】色にじみ判断処理の処理ルーチンを示すフローチャート。
【図７】エッジの検出に用いられるラプラシアンフィルタの一例を示す図。
【図８】第２実施例におけるシステムの概略構成図。
【図９】第２実施例におけるデジタルカメラの動作を示すフローチャート。
【図１０】第２実施例におけるパーソナルコンピュータの動作を示すフローチャート。
【図１１】第１変形例におけるデジタルカメラの動作を示すフローチャート。
【図１２】第２変形例におけるデジタルカメラの動作を示すフローチャート。
【図１３】撮影条件設定部に記憶されている撮影条件を示すプログラム線図。
【符号の説明】
【００９８】
１０…撮影部
１１…レンズ
１２…絞り機構
１３…シャッター
１４…撮像素子
１５…画像取得回路
２０…制御部
２１…撮影条件設定部
２２…自動露出調整部
２３…撮影実行部
２４…画像記録部
２５…画像処理部
２５１…エッジ検出部
２５１…機能部
２５２…フィルタ処理部
２５３…差分算出部
２５４…色にじみ判断部
３０…測光回路
４０…操作部
４１…シャッターボタン
５０…表示部
６０…外部記憶装置
１００…デジタルカメラ
【技術分野】
【０００１】
本発明は、画像処理に関し、色にじみの発生の有無の検出に関する。
【背景技術】
【０００２】
従来より、露出量を段階的に変化させて、複数回の撮影を連続して行う、いわゆる露出ブラケット撮影機能を備えたカメラが知られている（例えば、特許文献１）。また、合焦状態を段階的に変化させるフォーカスブラケット撮影機能、フラッシュの強度を段階的に変化させるフラッシュブラケット撮影機能を備えるカメラが知られている。さらに、デジタルカメラにおいては、露出ブラケット撮影機能の他に、ホワイトバランス（色温度）を段階的に変化させるホワイトバランスブラケット撮影機能、撮像素子の感度を段階的に変化させる感度ブラケット撮影機能など、を備えるものが知られている（例えば、特許文献２）。
【０００３】
ここで、銀塩カメラや、デジタルカメラを用いた撮影において、絞りを変化させることにより、被写界深度を変更する撮影技術が知られている。例えば、絞りを比較的開放することにより、被写界深度を浅くして撮影を行うと、背景をぼかした画像を得ることができる。逆に、絞りを比較的絞り込むことにより、被写界深度を深くして撮影を行うと、カメラに近い被写体からカメラから遠い被写体まで、ピントが合った画像を得ることができる。
【０００４】
【特許文献１】特開平５−３０３１３０号公報
【特許文献２】特開平７−３１８７８５号公報
【特許文献３】特開２０００−７５３７１号公報
【特許文献４】特開２００３−１０１８６９号公報
【特許文献５】特開２００５−１７３１６９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、被写界深度を浅くするために、絞りを開放側に設定すると、色にじみが発生しやすくなるという問題があった。このような場合、色にじみの発生の有無を容易に判断することができればユーザにとって便利である。
【０００６】
本発明は、上記課題を解決するためになされたものであり、本発明は、上記課題を解決するためになされたものであり、被写界深度を変更して撮影された複数の画像ついて、色にじみの発生の有無を判断することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題の少なくとも一部を解決するため、本発明の第１の態様は、画像処理装置を提供する。第１の態様に係る画像処理装置は、画像取得部と、エッジ検出部と、差分算出部と、判断部と、を備える。前記画像取得部は、露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する。前記エッジ検出部は、前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出する。前記差分算出部は、前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出する。前記判断部は、前記差分を用いて、前記第１の画像における色にじみの有無を判断する。
【０００８】
第１の態様に係る画像処理装置によれば、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像に、色にじみが発生しているか否かを自動的に判断することができる。
【０００９】
本発明の第１の態様に係る画像処理装置において、前記第１の画像におけるエッジ部分の検出は、前記複数の画像に共通するエッジ部分を検出することにより行われても良い。かかる場合において、複数の画像に共通するエッジ部分は、前記複数の画像のうちの最も絞りが開放された撮影条件で撮影された画像のエッジ部分であっても良い。こうすれば、色にじみの有無を判断しようとする画像ごとにエッジ部分の検出を行う必要がなく、処理時間および処理負荷を低減することができる。
【００１０】
発明の第１の態様に係る画像処理装置において、前記第２の画像は、前記複数の画像のうちの最も絞りが絞り込まれた撮影条件で撮影された画像であっても良い。こうすれば、色にじみが最も発生しにくい画像を基準として色にじみの有無を判断するので、色にじみの有無の判断精度を向上することができる。
【００１１】
発明の第１の態様に係る画像処理装置において、前記第１の画像と前記第２の画像のそれぞれのエッジ部分に、人間の視覚フィルタを適用するフィルタ処理を実行するフィルタ処理部を備え、前記差分算出部は、前記フィルタ処理後の前記エッジ部分について、前記差分を算出しても良い。こうすれば、人間の視覚の特性を考慮して、色にじみの有無を判断できるので、色にじみの有無の判断を適切に行うことができる。
【００１２】
本発明の第１の態様に係る画像処理装置において、前記色にじみが有ると判断された前記第１の画像を削除しても良い。こうすれば、ユーザは、連続撮影された画像のうち、色にじみの発生していない好ましい画像のみを取得することができる。
【００１３】
本発明の第１の態様に係る画像処理装置において、前記色にじみが有ると判断された前記第１の画像に、色にじみが有る旨を示す情報を関連付けても良い。こうすれば、ユーザあるいは画像を取得する装置は、連続撮影された画像について、色にじみの有無を容易に認識することができる。
【００１４】
本発明の第１の態様に係る画像処理装置において、前記第２の画像と、色にじみが無いと判断された前記第１の画像のうちの最も絞りが開放された撮影条件で撮影された画像のみを記憶しても良い。こうすれば、色にじみが発生しない範囲で、被写界深度の大きく異なる画像を容易に取得することができる。
【００１５】
なお、本発明は、種々の態様で実現することが可能であり、上述した画像処理装置のような装置発明に加えて、例えば、画像処理方法のような方法発明として実現することができる。あるいは、かかる装置または方法を構築するためのコンピュータプログラム、そのコンピュータプログラムを記録した記録媒体、そのコンピュータプログラムを含み搬送波内に具現化されたデータ信号、等の態様で実現することができる。
【発明を実施するための最良の形態】
【００１６】
Ａ．第１実施例：
・装置の構成：
次に、本発明の実施の形態を実施例に基づき説明する。図１は、第１実施例に係る画像処理装置としてのデジタルカメラの概略構成図である。
【００１７】
デジタルカメラ１００は、撮影部１０と、制御部２０と、被写体の明るさを測定するための測光回路３０と、操作部４０と、液晶パネルなどの表示部５０と、外部記憶装置６０と、を備えている。
【００１８】
撮影部１０は、実際に撮影を行う機構部分であり、撮影結果として生成される画像データを後述する制御部２０に出力する。撮影部１０は、レンズ１１と、絞り機構１２と、シャッター１３と、撮像素子１４と、画像取得回路１５を備えている。レンズ１１は、被写体からの光を撮像素子１４の受光面に集めることにより、被写体の像を撮像素子１４の受光面上に形成する。絞り機構１２は、レンズを通過する光の量を調整する機構である。シャッター１３は、撮像素子１４の受光面に被写体からの光が当たる時間（露光時間）を調整する機構である。撮像素子１４は、受光面に結像した被写体の像の明暗を電気信号に変換する。撮像素子１４には、例えば、ＣＣＤ（Charge Coupled Device）や、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）が用いられる。画像取得回路１５は、Ａ／Ｄ変換器を含み、撮像素子１４により出力される電気信号をデジタル信号に変換し、撮像素子１４の受光面に結像した画像を表す画像データを生成する。
【００１９】
制御部２０は、中央演算装置（ＣＰＵ）と、ＲＯＭやＲＡＭなどの内部記憶装置とを含む、周知のコンピュータである。制御部２０は、制御プログラムを実行することにより、デジタルカメラ１００全体を制御する種々の機能を実現する。図１には、制御部２０により実現される機能部のうち、本実施例の説明に必要な機能部が選択的に図示されている。制御部２０は、機能部として、撮影条件設定部２１と、撮影実行部２３と、画像記録部２４と、画像処理部２５とを備えている。撮影条件設定部２１は、各種の撮影条件、例えば、シャッター速度（露光時間）、絞り値、フラッシュの発光の有無、撮像素子１４の感度を設定する。撮影条件設定部２１は、測光回路３０により測定された被写体の明るさに基づいて、適正な露出量を実現する撮影条件を出力する自動露出調整部２２を含んでいる。撮影条件設定部２１は、撮影条件の設定のために自動露出調整部２２を用いる。撮影実行部２３は、撮影条件設定部２１により設定された撮影条件を用いて、撮影部１０を制御し、撮影部１０に撮影を行わせる。画像記録部２４は、後述する画像処理部２５により処理された画像データを、外部記憶装置６０に記憶させる。
【００２０】
画像処理部２５は、撮影部１０から出力された画像データに対して、各種の画像処理を施す。図１には、画像処理部２５の備える機能部のうち、後述する画像の色にじみを判断するための処理（色にじみ判断処理）に必要な機能部のみを選択的に図示している。画像処理部２５は、機能部として、エッジ検出部２５１と、フィルタ処理部２５２と、差分算出部２５３と、色にじみ判断部２５４とを含んでいる。これらの画像処理部２５の機能部については、後述する。
【００２１】
操作部４０は、ユーザからの要求を入力するための操作ボタンを含み、入力された要求を制御部２０に対して送信する。操作部４０は、操作ボタンの一つとして、撮影指示を入力するための撮影指示入力部であるシャッターボタン４１を含んでいる。操作部４０は、撮影モードなどの選択・決定ボタンを始めとする各種操作ボタンを含んでいる（図示省略）。
【００２２】
外部記憶装置６０は、生成された画像データを保存しておくための記憶装置であり、メモリカードなどの脱着可能な記録媒体を用いる装置であっても良いし、内蔵ＨＤＤ（ハードディスクドライブ）装置であっても良い。画像データは、画像データに関連付けられた付属情報と共に、所定の規格に従った画像ファイルに格納されて、外部記憶装置６０に記憶される。画像ファイルの規格には、例えば、デジタルカメラ用画像ファイルフォーマット規格（Exif）が用いられる。画像データは、例えば、ＪＰＥＧ形式、ＴＩＦＦ形式、ＧＩＦ形式、ＢＭＰ形式などの保存形式で、画像ファイルに格納される
【００２３】
・デジタルカメラ１００の動作：
図２〜図５を参照して、被写界深度ブラケットモードにおけるデジタルカメラ１００の動作について説明する。図２は、被写界深度ブラケットモードにおけるデジタルカメラ１００の動作を示すフローチャートである。図３は、絞り限界値検出処理の処理ルーチンを示すフローチャートである。図４は、被写界深度ブラケットモードにおける撮影条件を説明する図である。図５は、被写界震度ブラケットモードを用いて撮影された画像の一例を示す説明図である。
【００２４】
ユーザが操作部４０を操作して、被写界深度ブラケットモードを選択すると、制御部２０の撮影条件設定部２１により絞り限界値検出処理が行われる（ステップＳ１０２）。絞り限界値検出処理は、例えば、ユーザがシャッターボタン４１を半押し状態にした場合に実行されても良いし、デジタルカメラ１００が撮影可能な状態にある時に、常にデジタルカメラ１００が捉えている被写体について繰り返し実行されても良い。
【００２５】
絞り限界値検出処理が開始されると、撮影条件設定部２１は、まず、ＩＳＯ感度を最低値に設定すると共に、絞りを最も開放側に設定する。ＩＳＯ感度は、フィルムの感度を示す数値として定められたもので、デジタルカメラでは、撮像素子１４の感度を表す値として用いられている。本実施例におけるデジタルカメラ１００は、ＩＳＯ感度を、１００、２００、４００、８００の４段階に設定可能である。ＩＳＯ感度の数値が大きい程、撮像素子１４の感度が高いことを示している。本ステップでは、ＩＳＯ感度は、最低値である１００に設定される。絞り機構１２の状態は、Ｆ値と呼ばれる数値を用いて表される。本実施例におけるデジタルカメラ１００は、Ｆ値を、１．４、２、２．８、４、５．６、８、１１、１６、２２、３２の１０段階に設定可能である。以下では、絞り機構１２をＦ値が１．４である状態に設定することを、絞りをＦ１．４に設定する、と表現することとする。Ｆ値が小さい側が、絞りの開放側であり、Ｆ値の大きい側が絞りの絞り込み側である。絞りを一段階絞ると、例えば、絞りをＦ１．４からＦ２に変更すると、露出量は、約半分になる。本ステップでは、絞りは、最も開放側であるＦ１．４に設定される。
【００２６】
続いて、撮影条件設定部２１の自動露出調整部２２は、先のステップにおいて設定されたＩＳＯ感度とＦ値を固定して、自動露出調整を行うことにより、シャッター速度を決定する（ステップＳ２０４）。具体的には、自動露出調整部２２は、測光回路３０を用いて被写体の明るさを測定し、被写体の明るさに応じて適正な露出量を算出する。露出量は、ＥＶ（Exposure Value）と呼ばれる数値を用いて表され、被写体が明るいほど大きな値が適正な露出量とされる。自動露出調整部２２は、適正な露出量が得られるように、シャッター速度を決定する。シャッター速度は、露光時間（秒）を用いて表される。本実施例におけるデジタルカメラ１００のシャッター速度は、図４の横軸に示されるように最速値１／４０００から最も遅い値１／４まで、１１段階に設定することができる。シャッター速度を、一段階速くすると、例えば、１／３０から１／６０に変更すると、露出量は、約半分になる。図４には、露出量（ＥＶ）と、絞り（Ｆ値）と、シャッター速度（露光時間）との関係が示されている。ＩＳＯ感度が１００である場合に露出量が１０ＥＶになる絞りとシャッター速度の組み合わせは、図４において、太い実線Ｌ１０上になる。従って、適正な露出量が１０ＥＶ、絞りがＦ１．４、ＩＳＯ感度が１００である場合、自動露出調整部２２は、シャッター速度を１／５００に決定する（図４：実線Ｌ１０上の点ＳＯ１０参照）。一方、ＩＳＯ感度が１００である場合に露出量が１６ＥＶになる絞りとシャッター速度の組み合わせは、図４において、太い実線Ｌ１６上になる。従って、適正な露出量が１６ＥＶ、絞りがＦ１．４、ＩＳＯ感度が１００である場合、シャッター速度の適切な値は、１／４０００より速い（露光時間が短い）値となるので、自動露出調整部２２は、シャッター速度を決定できない。
【００２７】
続いて、撮影条件設定部２１は、適正な露出量を設定できたか否かを判断する（ステップＳ２０６）。撮影条件設定部２１は、先のステップにおいて、適正な露出量を実現できるように、シャッター速度を決定できた場合には、適正な露出量を設定できたと判断し、シャッター速度を決定できなかった場合には、適正な露出量を設定できないと判断する。
【００２８】
撮影条件設定部２１は、適正な露出量を設定できないと判断すると（ステップＳ２０６：ＮＯ）、絞りを現在の状態から一段階絞り込み側に設定する（ステップＳ２０８）。例えば、現在の絞りがＦ１．４であれば、絞りをＦ２に設定する。撮影条件設定部２１は、絞りを変更すると、ステップＳ２０４に戻り、新たに設定された絞りにて、再度シャッター速度を決定する。
【００２９】
一方、撮影条件設定部２１は、適正な露出量を設定できたと判断すると（ステップＳ２０６：ＹＥＳ）、現在の絞りを開放側の限界値として保存しておく（ステップＳ２１０）。例えば、適正な露出量が１０ＥＶである場合には、Ｆ１．４が開放側の限界値とされる（図４：実線Ｌ１０上の点ＳＯ１０参照）。また、適正な露出量が１６ＥＶである場合には、Ｆ４が開放側の限界値とされる（図４：実線Ｌ１６上の点ＳＯ１６参照）。
【００３０】
続いて、撮影条件設定部２１は、絞りを最も絞り込み側に設定する（ステップＳ２１２）。本実施例におけるデジタルカメラ１００では、絞りはＦ３２に設定される。自動露出調整部２２は、ステップＳ２０４と同様に、ＩＳＯ感度とＦ値を固定して、自動露出調整を行うことにより、シャッター速度を決定する（ステップＳ２１４）。シャッター速度は、手ぶれが発生しない範囲で決定される。図４において一点破線Ａ−Ａは、手ぶれが発生する限界の例を示している。すなわち、本実施例におけるデジタルカメラ１００では、シャッター速度が１／８より遅くなると手ぶれが発生すると判断され、自動露出調整部２２は、シャッター速度を１／１５もしくは１／１５より速く設定する。自動露出調整部２２は、適正な露出量が１６ＥＶ、絞りがＦ３２、ＩＳＯ感度が１００である場合、自動露出調整部２２は、シャッター速度を１／６０に決定する（図４：実線Ｌ１６上の点ＳＣ１６参照）。一方、適正な露出量が１０ＥＶ、絞りがＦ３２、ＩＳＯ感度が１００である場合、シャッター速度の適切な値は、１／１５より遅い（露光時間が長い）値となるので、自動露出調整部２２は、シャッター速度を決定できない。
【００３１】
続いて、撮影条件設定部２１は、適正な露出量を設定できたか否かを判断する（ステップＳ２１６）。撮影条件設定部２１は、先のステップにおいて、適正な露出量を実現できるように、シャッター速度を決定できた場合には、適正な露出量を設定できたと判断し、シャッター速度を決定できなかった場合には、適正な露出量を設定できないと判断する。
【００３２】
撮影条件設定部２１は、適正な露出量を設定できないと判断すると（ステップＳ２１６：ＮＯ）、現在のＩＳＯ感度が設定できる最高値（本実施例では、８００）であるか否かを判断する（ステップＳ２１８）。撮影条件設定部２１は、ＩＳＯ感度が最高値でないと判断すると（ステップＳ２１８：ＮＯ）、ＩＳＯ感度を一段階上げる（ステップＳ２２０）。一方、撮影条件設定部２１は、ＩＳＯ感度が最高値であると判断すると（ステップＳ２１８：ＹＥＳ）、絞りを現在の状態から一段階開放側に設定する（ステップＳ２２２）。例えば、現在の絞りがＦ１．４であれば、絞りをＦ２に設定する。撮影条件設定部２１は、ＩＳＯ感度または絞りを変更すると、ステップＳ２１４に戻り、新たに設定された絞りまたはＩＳＯ感度にて、再度シャッター速度を決定する。
【００３３】
一方、撮影条件設定部２１は、適正な露出量を設定できたと判断すると（ステップＳ２１６：ＹＥＳ）、現在の絞りを絞り込み側の限界値として保存しておく（ステップＳ２２４）。例えば、適正な露出量が１０ＥＶである場合には、Ｆ２２が絞り込み側の限界値とされる（図４：破線Ｍ１０上の点ＳＣ１０参照）。また、適正な露出量が１６ＥＶである場合には、Ｆ３２が絞り込み側の限界値とされる（図４：実線Ｌ１６上の点ＳＣ１６参照）。こうして、絞りの開放側および絞り込み側の限界値がそれぞれ保存されると、絞り限界値検出処理は終了される。
【００３４】
図３に戻って説明を続ける。絞り限界値検出処理を終えると、撮影条件設定部２１は、絞り限界値検出処理において保存された開放側の限界値に、絞りを設定し（ステップＳ１０４）、ユーザからの撮影指示を待つ。ユーザがシャッターボタン４１を押下することにより、撮影指示を入力すると（ステップＳ１０６：ＹＥＳ）、自動露出調整部２２は、設定された絞りにて、自動露出調整を実行する（ステップＳ１０８）。これにより、設定された絞りにて適正露出が得られるように、ＩＳＯ感度およびシャッター速度が決定される。自動露出調整がなされると、撮影実行部２３は、決定された撮影条件（絞り、ＩＳＯ感度、シャッター速度）にて、撮影部１０に撮影を実行させる（ステップＳ１１０）。撮影が終了すると、撮影条件設定部２１は、現在の絞りが、上述した絞り限界値検出処理により保存された絞り込み側の限界値であるか否かを判断する（ステップＳ１１２）。絞り込み側の限界値ではないと判断されると（ステップＳ１１２：ＮＯ）、撮影条件設定部２１は、絞りを一段階絞り込み側に設定する（ステップＳ１１４）。絞りが変更されると、ステップＳ１０８に戻って、次の撮影が実行される。一方、絞り込み側の限界値であると判断されると（ステップＳ１１２：ＹＥＳ）、撮影条件設定部２１は、撮影を終了し、色にじみ判断処理に移る（ステップＳ１１６）。
【００３５】
このようにして、絞りを開放側の限界値から絞り込み側の限界値まで、段階的に変更しながら、連続して撮影が行われることにより、制御部２０は、被写体および露出量が実質的に同一であり、被写界深度が段階的に変化していく複数の画像をデジタルデータとして取得する。例えば、適正な露出量が１６ＥＶである被写体を撮影した場合、図４の実線Ｌ１６上の７つの点に対応する撮影条件をそれぞれ用いて、７回の撮影が連続して実行される。この結果、制御部２０は、露出量が実質的に同一に、絞りがＦ４からＦ３２までの各段階に、それぞれ設定して撮影された、同一被写体を有する７枚の画像のデジタルデータを取得する。図５（ａ）〜（ｃ）は、これらの７枚の画像のうちの３枚の画像の一例を示している。
【００３６】
図５（ａ）は、図４における実線Ｌ１６上の点ＳＣ１６に対応する撮影条件（絞り込み側の限界値）で撮影された画像を示す。図５（ｂ）は、図４における実線Ｌ１６上の点ＳＭ１６に対応する撮影条件で撮影された画像を示す。図５（ｃ）は、図４における実線Ｌ１６上の点ＳＯ１６に対応する撮影条件（開放側の限界値）で撮影された画像を示す。絞りを限界まで絞り込んで撮影された画像は、被写界深度が深い画像となり、例えば、図５（ａ）に示すように、主要被写体Ｆのみならず、主要被写体Ｆの後方にある非主要被写体Ｈにもピントが合った画像となる。一方、絞りを限界まで開放して撮影された画像は、非写界深度が浅い画像となり、例えば、図５（ｃ）に示すように、主要被写体Ｆの前面部分にのみピントが合い、主要被写体Ｆの側面部分は少しぼけ、後方の非主要被写体Ｈは完全にぼけた画像になる。そして、絞りを、開放側の限界と絞り込み側の限界との中間に設定して撮影された画像は、非写界深度が中程度の画像となり、例えば、図５（ｂ）に示すように、主要被写体Ｆは全体にピントが合っているが、後方の非主要被写体Ｈはぼけている画像になる。
【００３７】
また、適正な露出量が１０ＥＶである被写体を撮影した場合、図４の実線Ｌ１０上の６つの点（黒丸）に対応する撮影条件をそれぞれ用いて、６回の撮影が連続して実行される。さらに、シャッター速度を固定し、絞りとＩＳＯ感度を段階的に変更しながら図４の破線Ｍ１０上の３つの点（四角、三角、バツ型の各点）に対応する撮影条件をそれぞれ用いて３回の撮影が連続して実行される。この結果、制御部２０は、露出量が実質的に同一に、絞りがＦ１．４からＦ２２までの各段階に、それぞれ設定して撮影された、同一被写体を有する９枚の画像のデジタルデータを取得する。
【００３８】
図６および図７を参照して、撮影後に行われる色にじみ判断処理（ステップＳ１１６）について説明する。図６は、色にじみ判断処理の処理ルーチンを示すフローチャートである。図７は、エッジの検出に用いられるラプラシアンフィルタの一例を示す図である。
【００３９】
色にじみ判断処理は、制御部２０の画像処理部２５により実行される。色にじみ判断処理が開始されると、画像処理部２５のエッジ検出部２５１は、上述した連続撮影により撮影された複数の画像（連続撮影画像）のうち、絞りを開放側の限界値に設定して撮影された画像（最開放側画像）のエッジ部分を検出する（ステップＳ３０２）。エッジ部分は、画像中の被写体の輪郭部分などに現れる隣接する画素間の階調値の差が大きい部分である。エッジ検出部２５１は、例えば、エッジ量が所定の閾値より大きいエッジ画素を検出し、当該エッジ画素により構成される部分をエッジ部分とする。画素のエッジ量は、例えば、各画素に対して、図７に示す８近傍ラプラシアンフィルタを適用することにより算出される。具体的には、エッジ検出部２５１は、注目している画素と周囲の８つの画素の輝度値のそれぞれに、８近傍ラプラシアンフィルタに設定された係数を乗じて得られる値の合計値の絶対値をエッジ量として採用する。輝度値は、例えば、ＹＣｂＣｒ色空間における輝度値Ｙや、Ｌ＊ａ＊ｂ＊色空間における明度値Ｌを用いることができる。画素データがｓＲＧＢ色空間で与えられている場合は、輝度値Ｙは、式（１）によって算出される。
Y ＝ 0.29891 × R ＋ 0.58661 × G ＋ 0.11448 × B …（１）
【００４０】
ピントが合っている領域では、被写体の輪郭や細部がはっきり描写されるため、エッジ部分が多くなり、ピントがぼけている領域では、被写体の輪郭や細部が曖昧になるためエッジ部分が少なくなる。従って、絞りが絞り込まれた（Ｆ値が大きい）画像ほど、ピントが合っている領域が大きいためエッジ部分が多くなり、絞りが開放された（Ｆ値が小さい）画像ほど、ピントが合っている領域が小さいためエッジ部分は少なくなる。この結果、連続撮影画像のうち、最開放側画像（例えば、図５（ｃ）の画像）のエッジ部分は、他の画像においてもエッジ部分となる。本ステップにおいて、最開放側画像を用いてエッジ部分を検出するのは、連続撮影画像に共通するエッジ部分を検出するためである。
【００４１】
次に、画像処理部２５は、連続撮影画像のうち、絞りを絞り込み側の限界値に設定して撮影された画像（最絞り込み側画像）の画素データの色空間を、いわゆる反対色空間に変換する（ステップＳ３０４）。反対色空間は、輝度成分Ｏ1と、２つの色差成分Ｏ2（赤−緑成分）、Ｏ3（青−黄成分）とから成る色空間であり、各成分が、人間の脳が認識する視覚の３つの感覚に対応していると考えられている。画素データがｓＲＧＢ色空間で与えられている場合は、反対色空間の各成分値（Ｏ1、Ｏ2、Ｏ3）は、ＣＩＥＸＹＺ色空間を介して、以下の式（２）および（３）によって算出される。
【００４２】
【数１】
【００４３】
画像処理部２５のフィルタ処理部２５２は、画素データを反対色空間に変換された最絞り込み側画像に対して人間の視覚フィルタを適用する（ステップＳ３０６）。人間の視覚フィルタは、輝度に対する空間分解能に比較して、色差に対する空間分解能が大幅に低いという人間の視覚特性を考慮して、画像の各画素データを、画像を人間が見た場合に認識される値に変換するフィルタである。変換後の画素データの各成分値（Ｏｔ1、Ｏｔ2、Ｏｔ3）は、以下の式（４）〜（６）によって算出される。
【００４４】
【数２】
【００４５】
上記の式において、「＊」は、畳み込み積分を表す。上記の式において、（ｘ，ｙ）は、画像における画素の座標を表す。上記の式において、ｋiおよびｋijは、正規化係数であり、ｋiはｆjの和が１になるように設定され、ｋijは、Ｅijの和が１になるように設定される。上記の式におけるパラメータｗijおよびσijは、以下の表に示すとおりである。
【００４６】
【表１】
【００４７】
続いて、画像処理部２５は、後述する色にじみの発生の有無が未判断の画像のうち、最も絞りが開放側で撮影された画像（最もＦ値が小さい撮影条件の画像）を、注目画像に設定する（ステップＳ３０８）。最初は、最開放側画像が注目画像に設定されることになる。
【００４８】
注目画像が設定されると、画像処理部２５は、注目画像の画素データの色空間を、反対色空間に変換する（ステップＳ３１０）。そして、画像処理部２５は、画素データを反対色空間に変換された注目画像に対して人間の視覚フィルタを適用する（ステップＳ３１２）。色空間の変換、および、人間の視覚フィルタの適用の手法は、上述したとおりである。
【００４９】
続いて、画像処理部２５の差分算出部２５３は、注目画像と最絞り込み側画像とのエッジ部分における色成分の差分を算出する。具体的には、ステップＳ３０２において検出されたエッジ部分を構成するエッジ画素の座標を（ｘn，ｙn）（ｎ＝１，２，３…）とすると、差分算出部２５３は、各エッジ画素の色成分差分値ΔＣ（ｘn，ｙn）（ｎ＝１，２，３…）を、以下の式（７）を用いて算出する。
ΔＣ（ｘn，ｙn）＝〔｛Ｏｓ2（ｘn，ｙn）−Ｏｒ2（ｘn，ｙn）｝2
＋｛Ｏｓ3（ｘn，ｙn）−Ｏｒ3（ｘn，ｙn）｝2〕1/2…（７）
【００５０】
式（７）において、Ｏｓ2（ｘn，ｙn）は、注目画像における座標（ｘn，ｙn）の画素の色成分値Ｏ2を表し、Ｏｒ2（ｘn，ｙn）は、最絞り込み側画像における座標（ｘn，ｙn）の画素の色成分値Ｏ2を表す。同様にして、Ｏｓ3（ｘn，ｙn）は、注目画像における座標（ｘn，ｙn）の画素の色成分値Ｏ3を表し、Ｏｒ3（ｘn，ｙn）は、最絞り込み側画像における座標（ｘn，ｙn）の画素の色成分値Ｏ3を表す。
【００５１】
画像処理部２５は、差分平均値ΔＣａｖｅを算出する（ステップＳ３１６）。差分平均値ΔＣａｖｅは、上述した各エッジ画素の色成分差分値ΔＣ（ｘn，ｙn）の平均値である。
【００５２】
差分平均値ΔＣａｖｅが算出されると、画像処理部２５の色にじみ判断部２５４は、差分平均値ΔＣａｖｅを所定の閾値と比較する（ステップＳ３１８）。
【００５３】
差分平均値ΔＣａｖｅが閾値以上である場合には（ステップＳ３１８：ＹＥＳ）、色にじみ判断部２５４は、注目画像に色にじみが発生していると判断する（ステップＳ３２０）。差分平均値ΔＣａｖｅが閾値未満である場合には（ステップＳ３１８：ＮＯ）、色にじみ判断部２５４は、色にじみが発生していないと判断する（ステップＳ３２２）。ここで、エッジ部分における色成分差分値を用いて色にじみの有無を判断するのは、色にじみは、画像のエッジ部分において発生しやすいからである。
【００５４】
注目画像における色にじみの発生の有無が判断されると、画像処理部２５は、連続撮影画像のうち、最絞り込み側画像を除く全ての画像について、色にじみの発生の有無の判断が終了したかを判断する（ステップＳ３２４）。未判断の画像がある場合には（ステップＳ３２４：ＮＯ）、ステップＳ３０８に戻って、新たな注目画像を設定する。未判断の画像がない場合には（ステップＳ３２４：ＹＥＳ）、色にじみ判断処理を終了する。
【００５５】
図２に戻って説明を続ける。色にじみ判断処理が終了すると、画像記録部２４は、連続撮影画像のうち、色にじみが発生していないと判断された画像の画像ファイルを作成して、外部記憶装置６０に記憶する（ステップＳ１１８）。一方、画像記録部２４は、連続撮影画像のうち、色にじみが発生していると判断された画像を削除する（ステップＳ１１８）。
【００５６】
以上説明した本実施例におけるデジタルカメラ１００によれば、明るさがほぼ等しく、被写界深度が異なる複数の画像を、シャッターボタン４１を一度押すだけで、容易に撮影することができる。この結果、ユーザは、煩わしい操作や、撮影条件の設定のための知識を要することなく、容易に被写界深度が異なる画像を取得・利用することができる。
【００５７】
さらに、手ぶれの発生による画質の劣化が生じない範囲で、撮影条件を設定するので、取得された連続撮影画像に手ぶれ画像が混入することを防止または抑制することができる。
【００５８】
さらに、絞りの段階的な変更に応じて、画像の明るさをほぼ一定に保つために、シャッター速度に加えて、撮像素子１４の感度（ＩＳＯ感度）の変更を行うので、被写界深度を、より大きく変更することができる。
【００５９】
また、手ぶれの発生しない範囲で設定可能な全ての撮影条件で撮影するので、ユーザは、多様な非写界深度を有する画像を取得することが容易にできる。
【００６０】
さらに、連続撮影された画像のうち、色にじみが発生している画像は、自動的に削除されるので、ユーザが取得する連続撮影画像に、色にじみが発生している画像が混入することを防止または抑制することができる。
【００６１】
また、色にじみ判断処理は、連続撮影画像に共通するエッジ部分における色成分差を比較することにより行われる。色にじみが発生しやすいエッジ部分に着目して色にじみの有無を判断するため、精度良く色にじみの有無を判断することができる。また、各注目画像についてエッジ検出処理を行う必要がないので、色にじみ判断処理の処理負荷および処理時間を低減することができる。
【００６２】
また、色にじみ判断処理は、人間の視覚フィルタを適用した後の画素データを用いて行われるので、人間の視覚特性を考慮して、精度良く色にじみの有無を判断することができる。
【００６３】
Ｂ．第２実施例：
第１実施例において、色にじみ判断処理は、デジタルカメラ１００において実行されているが、これに限られない。例えば、色にじみ判断処理を実行する画像処理部２５は、パーソナルコンピュータに実装されても良いし、あるいは、インクジェットプリンタなどの印刷装置に実装されても良い。図８〜図１０を参照して、色にじみ判断処理を実行する画像処理部２５をパーソナルコンピュータに実装する態様を、第２実施例として説明する。図８は、第２実施例におけるシステムの概略構成図である。図９は、第２実施例におけるデジタルカメラの動作を示すフローチャートである。図１０は、第２実施例におけるパーソナルコンピュータの動作を示すフローチャートである。
【００６４】
・システムの構成：
第２実施例におけるシステムは、デジタルカメラ１００ｂと、パーソナルコンピュータ２００を備えている。第２実施例におけるデジタルカメラ１００ｂの制御部２０は、第１実施例（図１）と異なり、色にじみ判断処理を行うための画像処理部２５を備えていない。第２実施例におけるデジタルカメラ１００ｂのその他の構成は、第１実施例におけるデジタルカメラ１００（図１）と同一であるので、同一の構成要素については図１と同一の符号を付し、その説明を省略する。
【００６５】
第２実施例におけるパーソナルコンピュータ２００は、ＣＰＵ２１０と、ＲＯＭやＲＡＭなどの内部記憶装置２２０と、ハードディスク装置などの外部記憶装置２４０と、表示部２６０と、マウスやキーボードなどの操作部２７０と、インタフェース部（Ｉ／Ｆ部）２９０と、を備えている。Ｉ／Ｆ部２９０は、外部に設けられた種々の機器との間でデータ通信を行う。例えば、Ｉ／Ｆ部２９０は、デジタルカメラ１００ｂから画像データを受け取る。
【００６６】
内部記憶装置２２０には、画像処理部２５０として機能するコンピュータプログラムが格納されている。なお、画像処理部２３０の機能は、ＣＰＵ２１０がコンピュータプログラムを実行することによって実現される。コンピュータプログラムは、例えば、ＣＤ−ＲＯＭなどのコンピュータ読み取り可能な記録媒体に記録された形態で提供される。
【００６７】
画像処理部２５０は、画像取得部２５０１と、エッジ検出部２５０２と、フィルタ処理部２５０３と、差分算出部２５０４と、色にじみ判断部２５０５と、を備えている。画像取得部２５０１は、デジタルカメラ１００ｂにより撮影された連続撮影画像を取得する。エッジ検出部２５０２と、フィルタ処理部２５０３と、差分算出部２５０４と、色にじみ判断部２５０５は、第１実施例における同名の構成要素と同一であるので、その説明を省略する。
【００６８】
・デジタルカメラ１００ｂの動作：
図９に示すデジタルカメラ１００ｂの動作のうち、ステップＳ６０２〜ステップＳ６１４までのステップは、図２を参照して説明した第１実施例におけるデジタルカメラ１００の動作と同一であるので、その説明を省略する。第２実施例におけるデジタルカメラ１００ｂでは、上述のとおり色にじみ判断処理を実行する機能部を備えていないので、連続撮影が終了すると（ステップＳ６１２：ＹＥＳ）、画像記録部２４は、連続撮影された全ての画像を外部記憶装置６０に画像ファイルとして記録し（ステップＳ６１６）、本処理を終了する。
【００６９】
デジタルカメラ１００ｂにおいて撮影された連続撮影画像は、例えば、Ｉ／Ｆ部２９０を介して、パーソナルコンピュータ２００の外部記憶装置２４０に記憶される。
【００７０】
・パーソナルコンピュータ２００の動作：
続いて、図１０を参照して、パーソナルコンピュータ２００の画像処理部２５０の動作を説明する。画像処理部２５０による処理が開始されると、画像処理部２５０の画像取得部２５０１は、外部記憶装置２４０から連続撮影画像を取得する（ステップＳ７０２）。画像処理部２５０は、取得された連続撮影画像を対象として色にじみ判断処理を実行する（ステップＳ７０４）。本ステップにおける色にじみ判断処理の内容は、第１実施例において説明した色にじみ判断処理（図２：ステップＳ１１６）と同一であるので、その説明を省略する。色にじみ判断処理が終了すると、画像処理部２５０は、第１実施例におけるステップＳ１１８（図２）と同様に、連続撮影画像のうち、色にじみが発生していないと判断された画像のみを記憶し、色にじみが発生していると判断された画像を削除する（ステップＳ７０６）。
【００７１】
以上説明した第２実施例におけるシステムによれば、第１実施例におけるデジタルカメラ１００と同一の作用・効果を実現することができる。以上の説明から解るように、第１実施例においては、デジタルカメラ１００が、特許請求の範囲における画像処理装置に相当し、第２実施例においては、パーソナルコンピュータ２００が、特許請求の範囲における画像処理装置に相当する。
【００７２】
Ｃ．変形例：
被写界深度ブラケットモードにおけるデジタルカメラ１００の動作は、上記実施例に限られない。以下、第１変形例および第２変形例として、被写界深度ブラケットモードにおけるデジタルカメラ１００の動作の他の態様を説明する。
【００７３】
・第１変形例：
図１１を参照して、第１変形例におけるデジタルカメラ１００の動作について説明する。図１１は、本変形例におけるデジタルカメラ１００の動作を示すフローチャートである。本変形例におけるステップＳ４０２〜ステップＳ４０６は、上記第１実施例におけるステップＳ１０２〜ステップＳ１０６（図２）と同一であるので、説明を省略する。ステップＳ４０６において、ユーザがシャッターボタン４１を押下することにより、撮影指示を入力すると（ステップＳ１０６：ＹＥＳ）、自動露出調整部２２は、開放側の限界値に設定された絞りにて、自動露出調整を実行する（ステップＳ４０８）。これにより、開放側の限界値に設定された絞りにて適正露出が得られるように、ＩＳＯ感度およびシャッター速度が決定される。自動露出調整が終了すると、撮影実行部２３は、決定された撮影条件（絞り、ＩＳＯ感度、シャッター速度）にて、撮影部１０に撮影を実行させる（ステップＳ４１０）。
【００７４】
開放側の限界値に設定された絞りにて、撮影が終了すると、撮影条件設定部２１は、絞りを絞り込み側の限界値に設定する（ステップＳ４１２）。続いて、自動露出調整部２２は、絞り込み側の限界値に設定された絞りにて、自動露出調整を実行する（ステップＳ４１４）。これにより、絞り込み側の限界値に設定された絞りにて適正露出が得られるように、ＩＳＯ感度およびシャッター速度が決定される。自動露出調整が終了すると、撮影実行部２３は、決定された撮影条件（絞り、ＩＳＯ感度、シャッター速度）にて、撮影部１０に撮影を実行させる（ステップＳ４１６）。
【００７５】
制御部２０の画像記録部２４は、絞りを開放側の限界値に設定した撮影により生成された画像と、絞りを絞り込み側の限界値に設定した撮影により生成された画像とを、それぞれ画像ファイルとして外部記憶装置６０に記録し（ステップＳ４１８）、本処理を終了する。
【００７６】
第１変形例によれば、デジタルカメラ１００は、撮影可能な画像のうち、最も被写界深度の深い画像と、最も被写界深度の浅い画像とを、一の操作で取得することができる。例えば、適正な露出量が１０ＥＶである被写体を撮影した場合、図４における点ＳＯ１０に対応する撮影条件で撮影された画像と、点ＳＣ１０に対応する撮影条件で撮影された画像とを取得することができる。この結果、ユーザは、被写界深度を変更する撮影技術を容易に利用することができる。
【００７７】
本変形例では、色にじみ判断処理は実行されないので、本変形例における動作のみをおこなうデジタルカメラでは、図１に示す構成要素のうち、色にじみ判断処理を行うための機能部２５１〜２５４を備えていなくても良い。
【００７８】
・第２変形例：
図１２〜図１３を参照して、第２変形例におけるデジタルカメラ１００の動作について、説明する。図１２は、本変形例におけるデジタルカメラ１００の動作を示すフローチャートである。図１３は、撮影条件設定部２１に記憶されている撮影条件を示すプログラム線図である。
【００７９】
第２変形例に係るデジタルカメラ１００では、被写体の明るさに対する適正な露出量ごとに、絞りが異なる複数の撮影条件が予め、撮影条件設定部２１にプログラムされている。撮影条件設定部２１は、適正な露出量を認識すると、プログラムに従って、用いる複数の撮影条件を決定する。以下、より具体的に説明する。
【００８０】
被写界深度ブラケットモードが選択されている場合、撮影条件設定部２１は、測光回路３０を用いて被写体の明るさを測定し、被写体の明るさに応じて適正な露出量を算出する（ステップＳ５０２）。露出量の算出は、例えば、ユーザがシャッターボタン４１を半押し状態にした場合に実行されても良い。また、露出量の算出を、常にデジタルカメラ１００が捉えている被写体について繰り返し実行しながら、シャッターボタン４１が押下されるのを待機しても良い。
【００８１】
ユーザが、シャッターボタン４１を押下することにより、撮影指示を入力すると（ステップＳ５０４：ＹＥＳ）、撮影条件設定部２１は、適正な露出量に応じて、予めプログラムされた複数の撮影条件を決定する（ステップＳ５０６）。図１３のプログラム線図に示すように、例えば、被写体の明るさに対する適切な露出量が６ＥＶである場合には、太い実線Ｌ６上の５つの点にそれぞれ対応する５つの撮影条件が決定される。また、被写体の明るさに対する適切な露出量が１８ＥＶである場合には、太い実線Ｌ１８上の５つの点にそれぞれ対応する５つの撮影条件が決定される。撮影条件設定部２１には、設定可能な全ての露出量について、複数の撮影条件がプログラムされているが、図１３のプログラム線図では、図の煩雑を避けるため、適切な露出量が６ＥＶ、１０ＥＶ、１８ＥＶである場合の撮影条件のみを図示している。図１３から解るように、露出量ごとに定められた複数の撮影条件は、上記実施例と同様に、手ぶれが発生しない範囲で設定されると共に、シャッター速度とＩＳＯ感度とを変更することにより絞りを極力広い範囲で変更するように設定される。
【００８２】
複数の撮影条件が決定されると、撮影条件設定部２１は、複数の撮影条件を順次に設定する（ステップＳ５０８）。撮影実行部２３は、撮影条件が設定されると、その撮影条件にて、撮影部１０に撮影を実行させる。次に、先のステップＳ５０６において決定された複数の設定条件の全てについて撮影が終了されたが判断される（ステップＳ５１２）。全ての撮影条件で撮影されるまでステップＳ５０８およびＳ５１０が繰り返される。全ての撮影条件で撮影されると（ステップＳ５１２：ＹＥＳ）、ステップＳ５１４に移行する。
【００８３】
ステップＳ５１４およびステップＳ５１６は、上記第１実施例におけるステップＳ１１６およびＳ１１８（図２）と同一であるので、説明を省略する。
【００８４】
本変形例によれば、上記実施例と同様の作用・効果を実現することができる。また、本変形例によれば、露出量に応じて、予め被写界深度ブラケットモードに用いる複数の撮影条件がプログラムされている。上記実施例のように絞り限界値検出処理を実行することなく、適正な露出量を決定するだけで、容易に複数の撮影条件を決定できる。
【００８５】
・第３変形例：
上記実施例では、色にじみ判断処理の結果、色にじみが発生していないと判断された画像のみを画像ファイルとして記憶し、色にじみが発生していると判断された画像は削除している（ステップＳ１１８：図２）。これに代えて、画像記録部２４は、色にじみ判断処理の結果、すなわち、色にじみの発生の有無を示す情報を、各画像に関連付けて、全ての画像を画像ファイルとして記憶しても良い。色にじみの発生の有無を示す情報は、例えば、画像ファイルにおける付属情報格納領域に格納される。例えば、Ｅｘｉｆ規格に従ったファイル構造を有する画像ファイルの付属情報格納領域には、デジタルカメラの製造者が自由に使用できるMakernote領域が定義されている。色にじみの発生の有無を示す情報は、例えば、Makernote領域に記録される。
【００８６】
第３変形例によれば、被写界深度ブラケットモードで撮影された複数の画像にそれぞれ、色にじみの発生の有無を示す情報が関連付けられる。この結果、これらの画像を取得したユーザや、パーソナルコンピュータなどの画像処理装置は、容易にこれらの画像における色にじみの発生の有無を認識することができる。例えば、ユーザは、印刷する画像や、保存しておく画像を選択する際に、色にじみの発生の有無を示す情報を参考にすることができる。
【００８７】
・第４変形例：
上記実施例において、画像記録部２４は、色にじみが発生していないと判断された全ての画像を、画像ファイルとして記憶しているが、色にじみが発生していないと判断された画像の一部を選択的に、画像ファイルとして記憶しても良い。例えば、画像記録部２４は、最絞り込み画像と、色にじみが発生していないと判断された画像のうち、最も絞りが開放された条件で撮影された画像の２枚を、画像ファイルとして記憶しても良い。
【００８８】
・第５変形例：
上記実施例では、エッジ量の算出に８近傍ラプラシアンフィルタを用いているが、この代わりに、４近傍ラプラシアンフィルタやプレウィットフィルタ、ソーベルフィルタといった、注目の画素位置における階調値の変化の大きさを算出可能なフィルタを用いてもよい。また、注目画素とその周辺の画素とにおける「最大輝度値−最小輝度値」をエッジ量として用いてもよい。輝度値を比較する画素の範囲としては、注目画素を中心とした３×３画素範囲や５×５画素範囲といった矩形範囲を採用してもよく、また、他の種類の範囲を採用してもよい。
【００８９】
また、色にじみは、輝度値Ｙに限らず種々の色成分の変化の大きな部分で生じる可能性もある。従って、エッジ量は、注目の画素位置における種々の色成分（例えば、ＲＧＢの各色成分や、ＹＣｂＣｒの各色成分）の階調値の変化の大きさを表す指標であってもよい。例えば、ＲＧＢ色成分のＧ成分に上述のフィルタを用いて算出した値をエッジ量として用いてもよく、また、ＲＧＢ各色成分毎に算出した色別エッジ量の合計値をエッジ量として用いてもよい。
【００９０】
・第６変形例：
上記実施例では、色成分差分値ΔＣの算出を、反対色空間（Ｏ1、Ｏ2、Ｏ3）における色成分（Ｏ2、Ｏ3）を用いて算出しているが、これに限られない。例えば、色成分差分値ΔＣの算出は、ＣＩＥＬ＊ａ＊ｂ＊色空間における色成分（ａ＊、ｂ＊）を用いても良いし、ＹＣｂＣｒ色空間における色成分（Ｃｂ、Ｃｒ）を用いても良い。
【００９１】
また、上記実施例において、色にじみの発生の有無の検出は、色成分差分値ΔＣの平均値を用いて行われているが、これに限られない。例えば、色にじみ判断部２５４は、色成分差分値ΔＣが所定値以上であるエッジ画素が、所定数以上存在する場合に色にじみが発生していると判断しても良い。
【００９２】
・第７変形例：
上記実施例において、色にじみの発生の有無の検出を、人間の視覚フィルタを適用後の画素値を用いて行っているが、人間の視覚フィルタの適用は、省略することができる。ただし、人間の視覚フィルタを適用すると、人間の視覚特性を考慮し、より色にじみの発生の有無を精度良く検出できる利点がある。
【００９３】
・第８変形例：
上記実施例において、エッジ部分の検出は、最開放側画像を用いて実行している。そして、最開放側画像において検出されたエッジ部分を、連続撮影画像に共通するエッジ部分として、色にじみの有無の判断に用いている。これに代えて、色にじみの判断の対象である注目画像のそれぞれについてエッジ部分を検出しても良い。そして、各注目画像について、各注目画像において検出されたエッジ部分を用いて、色にじみの有無を判断しても良い。ただし、実施例のように、最開放側画像を用いてエッジ検出をする場合には、エッジ検出処理は、一度で済むため、色にじみ判定処理における処理時間や処理負荷を軽減することができる利点がある。
【００９４】
・第９変形例：
上記実施例における色にじみ判断処理は、最絞り込み側画像を基準として、注目画像と最絞り込み側画像の色成分差分値ΔＣを算出している。これは、最絞り込み側画像は、一般的に、最も色にじみが発生しにくいため、色にじみが発生していないと推定できるからである。色にじみが発生していないと推定できる画像であれば、基準とする画像は最絞り込み側画像でなくても良い。例えば、デジタルカメラ１００の特性などから、２番目に絞り込まれた絞りにて撮影された画像でも色にじみが発生していないと考えられる場合は、当該画像を基準としても良い。
【００９５】
・第１０変形例：
上記実施例において、ハードウェアによって実現されていた構成の一部をソフトウェアに置き換えてもよく、逆に、ソフトウェアによって実現されていた構成の一部をハードウェアに置き換えてもよい。例えば、画像処理部２５の各機能部のうちの一部、例えば、フィルタ処理部２５２や、エッジ検出部２５１を、ソフトウェアに代えて専用のハードウェアにより構成しても良い。
【００９６】
以上、実施例、変形例に基づき本発明について説明してきたが、上記した発明の実施の形態は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明は、その趣旨並びに特許請求の範囲を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれる。
【図面の簡単な説明】
【００９７】
【図１】第１実施例に係る撮像装置としてのデジタルカメラの概略構成図。
【図２】被写界深度ブラケットモードにおけるデジタルカメラの動作を示すフローチャートである。
【図３】絞り限界値検出処理の処理ルーチンを示すフローチャート。
【図４】被写界深度ブラケットモードにおける撮影条件を説明する図。
【図５】被写界震度ブラケットモードを用いて撮影された画像の一例を示す説明図。
【図６】色にじみ判断処理の処理ルーチンを示すフローチャート。
【図７】エッジの検出に用いられるラプラシアンフィルタの一例を示す図。
【図８】第２実施例におけるシステムの概略構成図。
【図９】第２実施例におけるデジタルカメラの動作を示すフローチャート。
【図１０】第２実施例におけるパーソナルコンピュータの動作を示すフローチャート。
【図１１】第１変形例におけるデジタルカメラの動作を示すフローチャート。
【図１２】第２変形例におけるデジタルカメラの動作を示すフローチャート。
【図１３】撮影条件設定部に記憶されている撮影条件を示すプログラム線図。
【符号の説明】
【００９８】
１０…撮影部
１１…レンズ
１２…絞り機構
１３…シャッター
１４…撮像素子
１５…画像取得回路
２０…制御部
２１…撮影条件設定部
２２…自動露出調整部
２３…撮影実行部
２４…画像記録部
２５…画像処理部
２５１…エッジ検出部
２５１…機能部
２５２…フィルタ処理部
２５３…差分算出部
２５４…色にじみ判断部
３０…測光回路
４０…操作部
４１…シャッターボタン
５０…表示部
６０…外部記憶装置
１００…デジタルカメラ
【特許請求の範囲】
【請求項１】
画像処理装置であって、
露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する画像取得部と、
前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出するエッジ検出部と、
前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出する差分算出部と、
前記差分を用いて、前記第１の画像における色にじみの有無を判断する判断部と、
を備える画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記第１の画像におけるエッジ部分の検出は、前記複数の画像に共通するエッジ部分を検出することにより行われる、画像処理装置。
【請求項３】
請求項２に記載の画像処理装置において、
前記複数の画像に共通するエッジ部分は、前記複数の画像のうちの最も絞りが開放された撮影条件で撮影された画像のエッジ部分である、画像処理装置。
【請求項４】
請求項１ないし請求項３のいずれかに記載の画像処理装置において、
前記第２の画像は、前記複数の画像のうち、最も絞りが絞り込まれた撮影条件で撮影された画像である、画像処理装置。
【請求項５】
請求項１ないし請求項４のいずれかに記載の画像処理装置は、さらに、
前記第１の画像と前記第２の画像のそれぞれのエッジ部分に、人間の視覚フィルタを適用するフィルタ処理を実行するフィルタ処理部を備え、
前記差分算出部は、前記フィルタ処理後の前記エッジ部分について、前記差分を算出する、画像処理装置。
【請求項６】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記色にじみが有ると判断された前記第１の画像を削除する、画像処理装置。
【請求項７】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記色にじみが有ると判断された前記第１の画像に、色にじみが有る旨を示す情報を関連付ける、画像処理装置。
【請求項８】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記第２の画像と、色にじみが無いと判断された前記第１の画像のうち、最も絞りが開放された撮影条件で撮影された画像のみを保存する、画像処理装置。
【請求項９】
画像処理方法であって、
露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得し、
前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出し、
前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出し、
前記差分を用いて、前記第１の画像における色にじみの有無を判断する、画像処理方法。
【請求項１０】
画像処理を実行するためのコンピュータプログラムであって、
露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する機能と、
前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出する機能と、
前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出する機能と、
前記差分を用いて、前記第１の画像における色にじみの有無を判断する機能と、
をコンピュータに実現させるコンピュータプログラム。
【請求項１】
画像処理装置であって、
露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する画像取得部と、
前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出するエッジ検出部と、
前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出する差分算出部と、
前記差分を用いて、前記第１の画像における色にじみの有無を判断する判断部と、
を備える画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記第１の画像におけるエッジ部分の検出は、前記複数の画像に共通するエッジ部分を検出することにより行われる、画像処理装置。
【請求項３】
請求項２に記載の画像処理装置において、
前記複数の画像に共通するエッジ部分は、前記複数の画像のうちの最も絞りが開放された撮影条件で撮影された画像のエッジ部分である、画像処理装置。
【請求項４】
請求項１ないし請求項３のいずれかに記載の画像処理装置において、
前記第２の画像は、前記複数の画像のうち、最も絞りが絞り込まれた撮影条件で撮影された画像である、画像処理装置。
【請求項５】
請求項１ないし請求項４のいずれかに記載の画像処理装置は、さらに、
前記第１の画像と前記第２の画像のそれぞれのエッジ部分に、人間の視覚フィルタを適用するフィルタ処理を実行するフィルタ処理部を備え、
前記差分算出部は、前記フィルタ処理後の前記エッジ部分について、前記差分を算出する、画像処理装置。
【請求項６】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記色にじみが有ると判断された前記第１の画像を削除する、画像処理装置。
【請求項７】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記色にじみが有ると判断された前記第１の画像に、色にじみが有る旨を示す情報を関連付ける、画像処理装置。
【請求項８】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記第２の画像と、色にじみが無いと判断された前記第１の画像のうち、最も絞りが開放された撮影条件で撮影された画像のみを保存する、画像処理装置。
【請求項９】
画像処理方法であって、
露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得し、
前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出し、
前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出し、
前記差分を用いて、前記第１の画像における色にじみの有無を判断する、画像処理方法。
【請求項１０】
画像処理を実行するためのコンピュータプログラムであって、
露出量が実質的に同一であり、絞りが異なる複数の撮影条件をそれぞれ用いて、連続して撮影された複数の画像を取得する機能と、
前記複数の撮影条件を用いて撮影された複数の画像のうちの第１の画像におけるエッジ部分を検出する機能と、
前記第１の画像におけるエッジ部分の色成分と、前記複数の画像のうちの前記第１の画像より絞りが絞り込まれた撮影条件で撮影された第２の画像における前記エッジ部分の色成分との差分を算出する機能と、
前記差分を用いて、前記第１の画像における色にじみの有無を判断する機能と、
をコンピュータに実現させるコンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００７−２５８９２３（Ｐ２００７−２５８９２３Ａ）
【公開日】平成１９年１０月４日（２００７．１０．４）
【国際特許分類】
【出願番号】特願２００６−７８９７３（Ｐ２００６−７８９７３）
【出願日】平成１８年３月２２日（２００６．３．２２）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成１９年１０月４日（２００７．１０．４）
【国際特許分類】
【出願日】平成１８年３月２２日（２００６．３．２２）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]