画像処理装置、画像処理方法
【課題】 コントラストの低いエッジを保存しつつノイズ低減を行うための技術を提供すること。
【解決手段】 着目画素の周辺画素のそれぞれの画素値から、着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める。周辺画素のそれぞれの画素値から、着目画素の画素値ｘより小さい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める。周辺画素のそれぞれの画素値から、着目画素の画素値ｘより大きい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める。ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する。画素値ｘ若しくは着目画素及び周辺画素のそれぞれの画素の画素値の平均画素値をＩとし、係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する。着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する。
【解決手段】 着目画素の周辺画素のそれぞれの画素値から、着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める。周辺画素のそれぞれの画素値から、着目画素の画素値ｘより小さい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める。周辺画素のそれぞれの画素値から、着目画素の画素値ｘより大きい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める。ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する。画素値ｘ若しくは着目画素及び周辺画素のそれぞれの画素の画素値の平均画素値をＩとし、係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する。着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ノイズ低減技術に関するものである。
【背景技術】
【０００２】
通常、デジタルカメラ等の撮像装置により撮影された撮影画像にはノイズが含まれている。ノイズにはランダムノイズと固定パターンノイズがある。ランダムノイズは画像上の位置に関係なく現れるノイズである。固定パターンノイズは画像上の固定した位置に現れるノイズである。
【０００３】
ノイズは被写体と直接関係のない画像成分であるため、被写体像にノイズが混入すると、撮影画像の画質を低下させるという問題がある。そのため、デジタルカメラなどでは信号処理回路等にてノイズ低減処理を行うことで、ノイズによる撮影画像の画質の低下を抑制している。
【０００４】
従来より、様々なノイズ低減処理方法が提案されているが、それらは主として、平滑化フィルタによる処理を基礎にしている。通常、被写体像は低周波成分に比べて高周波成分の強度が弱いため、撮影画像上の高周波領域ではノイズが支配的となる。そこで高周波成分を抑圧する平滑化フィルタを撮影画像に適用すれば、被写体像の低〜中周波成分を保存しつつ、ノイズを低減しうる。このような考えに基づく平滑化フィルタはノイズ低減手法として現在広く用いられている。
【０００５】
また、平滑化フィルタの改良としてバイラテラルフィルタと呼ばれるエッジ保存平滑化フィルタなども提案されている（非特許文献１）。しかしながら、上述したような平滑化フィルタをベースとする従来のノイズ低減技術では、被写体像の高周波成分も抑圧されてしまい、細かなテクスチャ成分が除去されてしまうことがあった。また、仮にエッジ保存特性を備えたフィルタを用いたとしても、テクスチャの振幅がある程度大きくなければ、その効果が得られない。
【０００６】
上記の課題に対し、特許文献１に記載のノイズ低減方法では、画像領域が平坦な領域であるか否かの判定を行い、平坦であると判定されれば、注目画素を領域の平均値に近づける処理を行う。特許文献１における平坦領域の判定の概要はおおよそ次のようなものである。特許文献１記載の領域判定方法は、領域の標準偏差に基づいて行い、コントラストの高いエッジ領域では標準偏差が大であるため、標準偏差が大であるときにはノイズ低減を行わない。従って、エッジ領域ではノイズ低減処理がなされず、エッジが保存される。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開2007-150441号公報
【非特許文献】
【０００８】
【非特許文献１】“Fast Bilateral Filtering for the Display of High-Dynamic-Range IMAGES Proc. of ACM SIGGRAPH 2002, pp. 257-266
【発明の概要】
【発明が解決しようとする課題】
【０００９】
しかし、特許文献１に記載の技術では、コントラストの低いエッジは標準偏差が小であるため、このエッジに対してはノイズ低減処理が行われてしまい、コントラストの低いエッジがぼけるという課題がある。
【００１０】
本発明は以上の問題に鑑みてなされたものであり、コントラストの低いエッジを保存しつつノイズ低減を行うための技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明の目的を達成するために、例えば、本発明の画像処理装置は以下の構成を備える。即ち、入力画像中の着目画素及び該着目画素の周辺に位置する周辺画素のそれぞれの画素の画素値を取得する手段と、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める手段と、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより小さい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める手段と、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより大きい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める手段と、ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する手段と、前記画素値ｘ、若しくは前記着目画素及び前記周辺画素のそれぞれの画素の画素値の平均画素値、をＩとした場合に、予め設定された係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する手段と、前記着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する更新手段と、前記入力画像を構成する各画素の画素値を前記更新手段により更新した後、該入力画像を出力する出力手段とを備えることを特徴とする。
【発明の効果】
【００１２】
本発明の構成によれば、コントラストの低いエッジを保存しつつノイズ低減を行うことができる。
【図面の簡単な説明】
【００１３】
【図１】画像処理装置の機能構成例を示すブロック図。
【図２】信号処理部１０３の構成例を示すブロック図。
【図３】ノイズ低減処理部２０１の構成例を示すブロック図。
【図４】ノイズ低減処理部２０１が行う処理のフローチャート。
【図５】ヒストグラムを示す図。
【図６】ヒストグラムを示す図。
【図７】ヒストグラムを示す図。
【発明を実施するための形態】
【００１４】
以下、添付図面を参照し、本発明の好適な実施形態について説明する。なお、以下説明する実施形態は、本発明を具体的に実施した場合の一例を示すもので、特許請求の範囲に記載の構成の具体的な実施例の１つである。
【００１５】
［第１の実施形態］
先ず、本実施形態に係る画像処理装置の構成例について、図１のブロック図を用いて説明する。本実施形態では、ディジタルカメラに適用した画像処理装置について説明する。
【００１６】
撮像部１０１は、外界の光をその光量に応じた映像信号として取得するものである。撮像部１０１は、例えば、ズームレンズ、フォーカスレンズ、ぶれ補正レンズ、絞り、シャッター、光学ローパスフィルタ、iRカットフィルタ、カラーフィルタ、CMOSやCCDなどのセンサ、等により構成されている。Ａ／Ｄ変換部１０２は、撮像部１０１から送出された映像信号（アナログ信号）をディジタル信号（データ）に変換する。
【００１７】
信号処理部１０３は、Ａ／Ｄ変換部１０２により得られたデータが表す入力画像に対してホワイトバランス処理、ガンマ補正処理、ノイズ低減処理等の信号処理を行う。エンコーダ部１０５は、信号処理部１０３による信号処理済みの入力画像に対してJpegやMpegなどの圧縮符号化処理を行い、符号化画像データを生成する。もちろん、この圧縮符号化方法には様々なものがあり、特定の方法に限定するものではないし、そもそもこの圧縮符号化は必須ではない。
【００１８】
メディアＩ／Ｆ１０６には、PC（パーソナルコンピュータ）やその他メディア（例えば、ハードディスク、メモリーカード、CFカード、SDカード、USBメモリ）を接続することができる。然るに、エンコーダ部１０５による符号化画像データ（若しくは非圧縮符号化画像データ）は、このメディアＩ／Ｆ１０６を介してＰＣやその他のメディアに対して記録することができる。
【００１９】
Ｄ／Ａ変換部１０４は、信号処理部１０３による信号処理済みの入力画像（ディジタル信号）をアナログ信号に変換する。表示部１１３は液晶画面などにより構成されており、このアナログ信号が表す入力画像を表示する。また、この表示部１１３には、キャラクタジェネレーション部１１２により生成された文字やグラフィックなども表示することができる。
【００２０】
ＣＰＵ１０７は、ＲＯＭ１０８やＲＡＭ１０９に格納されているコンピュータプログラムやデータを用いて画像処理装置全体の動作制御を行う。ＲＯＭ１０８には、画像処理装置を構成する各部の動作制御をＣＰＵ１０７に実行させるためのコンピュータプログラムやデータが格納されている。また、既知の情報（予め設定された情報）として後述する様々なものもこのＲＯＭ１０８に格納されている。
【００２１】
ＲＡＭ１０９は、様々なデータを一時的に記憶するためのエリアや、ＣＰＵ１０７が各種の処理を実行する際に用いるワークエリアを有する。即ち、ＲＡＭ１０９は、各種のエリアを適宜提供することができる。
【００２２】
撮像系制御部１１０は、上記の撮像部１０１の制御を行うものであり、フォーカスを合わせる、シャッターを開く、絞りを調節するなどの、ＣＰＵ１０７から指示された様々な制御を行う。
【００２３】
操作部１１１は、ボタンやモードダイヤル等のユーザインターフェースにより構成されており、ユーザはこの操作部１１１を操作することで、各種の指示をＣＰＵ１０７に対して入力することができる。なお、上記の表示部１１３がタッチパネル式の液晶画面で構成されている場合、ユーザは周知の如く、このタッチパネル式の液晶画面を自身の指などでタッチすることで、ＣＰＵ１０７に対して様々な指示入力を行うことができる。
【００２４】
なお、図１には、以下の説明で用いる構成用件を含む一部の構成のみについて示している。然るに、本実施形態に係る画像処理装置に適用可能な構成は、図１に示した構成に限るものではなく、図１に示した構成に適当な構成用件を加えたものであっても良いし、以下の処理が実現可能であれば、適当な構成用件を省いても良い。また、１つの構成用件が行うものとして後述する処理を他の構成用件に行わせても良いし、それぞれで分配しても良い。
【００２５】
次に、信号処理部１０３のより詳細な構成について、図２のブロック図を用いて説明する。信号処理部１０３は、Ａ／Ｄ変換部１０２から送出された入力画像の画質を向上させるためのもので、先ずはこの入力画像に対してノイズ低減処理部２０１によってノイズ低減処理が施される。そしてノイズ低減処理部２０１によりノイズ低減処理が施された入力画像に対して、ホワイトバランス制御部によるホワイトバランス処理、エッジ強調部によるエッジ強調処理、色変換部による色変換処理、ガンマ処理部によるγ補正処理、が順に施される。そしてガンマ処理部からは、以上の各処理が施された入力画像が出力される。なお、画質を向上させるためには、ノイズ低減処理部２０１による処理だけでも良いし、ノイズ低減処理部２０１による処理と、ホワイトバランス制御部、エッジ強調部、色変換部、ガンマ処理部の１以上による処理と、で実現させても良い。
【００２６】
次に、ノイズ低減処理部２０１のより詳細な構成について、図３のブロック図、及び図４のフローチャートを用いて説明する。先ず、ステップＳ４０１において頻度計算部３０１は、Ａ／Ｄ変換部１０２から送出された入力画像を取得する。
【００２７】
ステップＳ４０２では頻度計算部３０１は先ず、入力画像中の着目画素及び着目画素の周辺に位置する周辺画素、のそれぞれの画素の画素値を取得する。例えば、着目画素、着目画素の周囲に位置する８画素、のそれぞれの画素の画素値を取得する。
【００２８】
そして次に頻度計算部３０１は、着目画素の周辺に位置する周辺画素のそれぞれの画素値から、着目画素の画素値ｘと同じ画素値を有する画素の数を求める。更に頻度計算部３０１は、着目画素の周辺に位置する周辺画素のそれぞれの画素値から、着目画素の画素値ｘより小さい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める。更に頻度計算部３０１は、着目画素の周辺に位置する周辺画素のそれぞれの画素値から、着目画素の画素値ｘより大きい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める。
【００２９】
例えば、着目画素の画素値がＰ３、着目画素の周辺に位置する８画素のそれぞれの画素値がＰ２、Ｐ４、Ｐ２、Ｐ１、Ｐ５、Ｐ４、Ｐ３、Ｐ２であったとする。ここで、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５であるとする。このとき、画素値Ｐ１を有する画素の数は１、画素値Ｐ２を有する画素の数は３、画素値Ｐ３を有する画素の数は２、画素値Ｐ４を有する画素の数は２、画素値Ｐ５を有する画素の数は１、となる。然るにこの場合、ステップＳ４０２では頻度計算部３０１は、着目画素の画素値ｘ（＝Ｐ３）と同じ画素値を有する周辺画素の数として「１」を求める。更に、着目画素の画素値ｘより小さい画素値のうち着目画素の画素値ｘに最も近い画素値（＝Ｐ２）を有する周辺画素の数として「３」を求める。更に、着目画素の画素値ｘより大きい画素値のうち着目画素の画素値ｘに最も近い画素値（＝Ｐ４）を有する周辺画素の数「２」を求める。
【００３０】
なお、入力画像中の着目画素の周辺に位置する周辺画素を用いて各画素値に対する画素数を計算するものとしても良いが、全ての画素を用いなくても良く、着目画素の画素値に近い画素値を有する周辺画素数が得られればよい。例えば、着目画素の画素値が「１００」である場合、画素値が「８０」〜「１２０」の範囲内の画素の数を得るようにしても良い。
【００３１】
ステップＳ４０３では、傾き計算部３０２は、以下の式を計算することで、着目画素を含む近傍領域内で、同じ画素値を有する画素数の増減（＝傾きａ）を求める。然るに、この増減を求めることができるのであれば、他の式を用いても構わない。
【００３２】
【数１】
【００３３】
ここで、Ｈ（ｘ）は、着目画素の画素値がｘである場合に、着目画素の周辺に位置する周辺画素のうち、画素値ｘを有する画素の数を示す。Ｈ（ｘ−１）は上記のＨ１に対応し、Ｈ（ｘ＋１）は上記のＨ２に対応している。
【００３４】
ステップＳ４０４では補正量調整部３０３は、ＲＯＭ１０８等に格納されているノイズ特性係数を取得する。本実施形態では、このノイズ特性係数として、Ｃ１，Ｃ２を取得する。この係数Ｃ１，Ｃ２は以下の式を満たす。
【００３５】
【数２】
【００３６】
この式においてＩは、着目画素の画素値としても良いし、着目画素の画素値及び着目画素の周辺に位置する周辺画素の画素値の平均画素値、としても良い。ノイズ特性係数は、撮影画像に含まれるノイズの大きさを示している。具体的にはチャートを撮影した画像から算出したノイズの分散などである。なおショットノイズは輝度に応じてノイズ量が増加することが知られている。そこで、撮影画像に含まれるノイズの分散σ２と画素値Iの関係を係数C1,C2を用いて上記の式(2)のように表して係数C1,C2をノイズ特性係数とすることが好適である。
【００３７】
然るにＣ１は主としてショットノイズに関わる項、Ｃ２は主として暗電流ノイズに関わる項となる。C1,C2はグレイスケールチャートを撮影した画像から求める。具体的には、グレースケールチャートにおいて反射率一定の領域に対応する撮影画像の領域の平均値と分散値の関係を式（２）により回帰分析してC1,C2を求める。撮影画像から求める方法の他にも、設計パラメータから、撮影画像に含まれるであろうノイズの分散を算出しても良い。
【００３８】
いずれにせよ、ショットノイズ量は輝度に依存するため、着目画素あるいは周辺画素の画素値に応じてノイズ量σ２を計算することが望ましい。なお、着目画素の画素値が大きい場合、式（２）により着目画素に含まれるであろうノイズ量σ２が増大する。以下に説明する補正量はノイズ量σ２に比例するため、着目画素の補正量は大きくなる事が分かる。なお、傾きaが正である場合とは、着目画素に対して、着目画素の画素値よりも値が大きい画素の数が着目画素よりも値が小さい画素の数に対して多いことを意味する。その場合には、補正は着目画素の画素値を増加させる作用があることが式（１）から分かる。逆も然りである。
【００３９】
ステップＳ４０５では補正量調整部３０３は、ステップＳ４０４で取得したＣ１，Ｃ２、着目画素の画素値（若しくは着目画素の画素値及び着目画素の周辺に位置する周辺画素の画素値の平均画素値）Ｉ、を用いて上記の式（２）を計算し、σ２を求める。次に補正量調整部３０３は、求めたσ２と上記の式（１）で計算した傾きａとを用いてσ２×ａを、補正量として計算し、加算器３０４に送出する。
【００４０】
ステップＳ４０６では加算器３０４は、着目画素の画素値ｘに対して補正量（σ２×ａ）を加算した結果（ｘ＋σ２×ａ）を、着目画素の新たな画素値として、ホワイトバランス制御部に対して出力する。
【００４１】
図４のフローチャートは、１つの画素（＝着目画素）に対する処理のフローチャートであるため、ノイズ低減処理部２０１は、図４のフローチャートに従った処理を、入力画像を構成する各画素について行うことになる。図４のフローチャートに従った処理を、入力画像を構成する各画素について行うことで得られる画像は、ノイズ低減後の画像となる。
【００４２】
なお、画像の境界付近では着目画素の周辺画素が存在しない場合がある。その際は、仮想的に所定画素値の画素が周辺画素として存在するとして計算したり、領域内には画素が存在するよう領域の形状を変更するなどが考えられる。
【００４３】
次に、入力画像を構成する各画素について図４のフローチャートに従った処理を行うことで得られる画像については、コントラストの低いエッジが暈けないことについて説明する。
【００４４】
先ず、本実施形態に係る上記の処理によりノイズが良好に低減できる理由について説明する。入力画像中の着目画素の画素値をｘ、周辺画素のうち画素値ｘを有する画素数をＨ（ｘ）、Ｈ（ｘ）をｘについて微分した結果をＨ’（ｘ）、入力画像に混入しているノイズの標準偏差をσとする。このとき、ノイズ低減処理部２０１により着目画素の画素値ｘは以下の式（３）に従って画素値ｘ’に更新されることになる。
【００４５】
【数３】
【００４６】
この式（３）により、なぜノイズ低減が良好に行われるのかを説明する。ノイズ混入前の画像が一様な画素値ｘ０を有しており、この画像に対して標準偏差σのノイズが混入すると、混入後の画像のヒストグラムは以下の式（４）の正規分布で表すことができる。
【００４７】
【数４】
【００４８】
上記の式（３）と式（４）から、ノイズ低減後の画素値x'は以下の式（５）に示すとおり、ノイズ混入前の画素値ｘ０がノイズ低減後の画素値ｘ’となることが分かる。
【００４９】
【数５】
【００５０】
ただし、式（４）で表される正規分布はなめらかな関数であることに注意が必要である。仮に着目画素の周辺領域が小さすぎる場合、少ないサンプルからヒストグラムH(x)を計算することになり、式（４）のようななめらかな理想的なヒストグラムは得られないし、式（３）の計算結果が（式（５））となる保証は無い。
【００５１】
正規分布に従う乱数を計算機で発生させて、そのヒストグラムを表したものを図５に示す。図５において実線がヒストグラムであり、波線が正規分布（理想的なヒストグラム）である。サンプル数が有限であるため、ヒストグラムは滑らかではなく正規分布に一致しない。このような事態を避けるため、ヒストグラムをとる画像領域を広くするか、サンプル数が少なくても良好な結果を得る工夫が必要である。例えば、式（１）は離散データから傾きを示す量を得る一般的な数式であるが、サンプル数が少ない場合にはヒストグラムは滑らかでないため、aは理想値より大きな値をとる可能性がある。そこで、以下の式（６）に示すように、サンプル数Nを用いて修正する工夫が考えられる。
【００５２】
【数６】
【００５３】
式（６）によれば、サンプル数が少ないときには分母が大きくなり、傾きを示す量aは小さくなる。つまり、式（６）は傾きを示す量aが過度に大きくなる事を防ぐ効果があり、良好な結果を得る事ができる。なお、式（６）のサンプル数Nはx-1,x,x+1の度数の総和である。
【００５４】
次に、ノイズ混入前の画像が一様では無い場合を考える。ノイズ混入前の画像のヒストグラムをｈ（α）とする。するとノイズ混入後の画像のヒストグラムはｈ（α）を用いて以下の式（７）のように表すことができる。
【００５５】
【数７】
【００５６】
式（７）は、撮影画像のヒストグラムについて新しい見方を提供している。総和記号の中身はノイズ混入前に画素値がαであり、なおかつノイズ混入により画素値ｘに変化した画素の数に等しい。式（７）全体を見ると、入力画像の画素値ｘの度数は、ノイズ混入により画素値xに変化するようなノイズ混入前の画素値αの総和に等しい。式（７）を式（３）に代入すると以下の式（８）が得られる。
【００５７】
【数８】
【００５８】
式（８）の一部である次式（９）の意味を考える。
【００５９】
【数９】
【００６０】
式（９）が表す量は、ノイズ混入により画素値がαからｘに変化した画素の数を、ノイズ混入後の画素ｘの数で割っている。すなわち式（９）が表す量は、撮影画像の画素値がxである画素のうち、何％がノイズ混入前は画素値αであったのかを示す量である。これはノイズがのった画素値xを取得したうえで、ノイズ混入前は画素値αである事後確率P(α|x)に等しい。式（９）が表す量をP(α|x)とおくと式（８）は以下の式（１０）に示す如く変形できる。
【００６１】
【数１０】
【００６２】
式（１０）を展開すると、以下の式（１１）が得られる。
【００６３】
【数１１】
【００６４】
ここで、ΣP(α|x)＝１（式（１１）の右辺の最後の項）であるから、最終的に式（１１）は以下の式（１２）に変形することができる。
【００６５】
【数１２】
【００６６】
式（１２）は画素値xを取得したという条件付きで、ノイズ混入前は画素値がαである確率を用いてノイズ混入前の画素値の期待値を計算している。つまり、式（３）を用いてノイズ低減後の画素値を得ることは、実質的にノイズ混入前の画素値の期待値を求めていることになる。以上が式（３）によりノイズ低減が行える理由である。特筆すべきは、式（３）はノイズ混入前のヒストグラムを直接求めることなしに、期待値演算によりノイズ混入前の画素値の期待値を計算できることである。
【００６７】
次に、本実施形態に係る上記の処理により低コントラストのエッジが保存できる理由について説明する。本実施形態に係る上記の処理によるノイズ低減方法の作用を図６に示す。図６には、撮影画像のヒストグラムと、画素値の補正方向の関係を表している。
【００６８】
図６において平均値よりも値が小さい画素値は勾配が正となり、ヒストグラムのピークに近づくよう補正がなされる。一方、平均値よりも値が大きい画素値は勾配が負となり、補正結果としては着目画素の画素値は減少し、やはりヒストグラムのピークに近づくよう補正される。ノイズ混入によりヒストグラムは広がるため、本実施形態に係る上記の処理によるノイズ低減方法は、広がった画素値をノイズ混入前の状態に近づける作用があることが分かる。
【００６９】
入力画像が低コントラストのエッジを含む場合のヒストグラムと画素値の補正方向の関係とを図７(a)に示す。図７(a)の画素値a,bはエッジを構成する画素値の、それぞれの平均値である。ノイズ混入前の状態では図７(b)に示すヒストグラムのように画素値a,bでのみ０でない度数を有する。図７(a)の画素値の補正方向を見ると、ピークa,b以外の入力画像の画素値はピークa,bに近づくように補正がなされる。ノイズ混入前の画素値であるa,bと等しい画素値を有する画素は傾きが０であるため補正がなされない。そのため、補正の効果としてはエッジのコントラストの低下を押さえて、ノイズ混入前の状態に近づける作用がある。
【００７０】
以上のことは、ヒストグラムのピークに位置する画素値a,bが近い値をとっていたとしても成り立つ。従って、本実施形態に係る上記の処理によるノイズ低減方法では、コントラストの低いエッジでもコントラストを維持しつつ、ノイズ低減がなされる。
【００７１】
［第２の実施形態］
第１の実施形態では、ノイズ低減処理部２０１をディジタルカメラに搭載した場合について説明したが、第１の実施形態で説明したノイズ低減処理部２０１の動作は、ノイズ低減処理が必要な様々な画像処理装置に組み込むことが可能である。
【００７２】
また、ノイズ低減処理部２０１はハードウェアで構成しても良いが、ソフトウェアで実装し、ＲＯＭなどに格納しても良い。この場合、このＲＯＭ及びＣＰＵを有する機器において、ＣＰＵがこのＲＯＭに格納されたこのソフトウェアを実行することにより、この機器は第１の実施形態でノイズ低減処理部２０１が行うものとして上述した各処理を実行することになる。
【００７３】
（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【技術分野】
【０００１】
本発明は、ノイズ低減技術に関するものである。
【背景技術】
【０００２】
通常、デジタルカメラ等の撮像装置により撮影された撮影画像にはノイズが含まれている。ノイズにはランダムノイズと固定パターンノイズがある。ランダムノイズは画像上の位置に関係なく現れるノイズである。固定パターンノイズは画像上の固定した位置に現れるノイズである。
【０００３】
ノイズは被写体と直接関係のない画像成分であるため、被写体像にノイズが混入すると、撮影画像の画質を低下させるという問題がある。そのため、デジタルカメラなどでは信号処理回路等にてノイズ低減処理を行うことで、ノイズによる撮影画像の画質の低下を抑制している。
【０００４】
従来より、様々なノイズ低減処理方法が提案されているが、それらは主として、平滑化フィルタによる処理を基礎にしている。通常、被写体像は低周波成分に比べて高周波成分の強度が弱いため、撮影画像上の高周波領域ではノイズが支配的となる。そこで高周波成分を抑圧する平滑化フィルタを撮影画像に適用すれば、被写体像の低〜中周波成分を保存しつつ、ノイズを低減しうる。このような考えに基づく平滑化フィルタはノイズ低減手法として現在広く用いられている。
【０００５】
また、平滑化フィルタの改良としてバイラテラルフィルタと呼ばれるエッジ保存平滑化フィルタなども提案されている（非特許文献１）。しかしながら、上述したような平滑化フィルタをベースとする従来のノイズ低減技術では、被写体像の高周波成分も抑圧されてしまい、細かなテクスチャ成分が除去されてしまうことがあった。また、仮にエッジ保存特性を備えたフィルタを用いたとしても、テクスチャの振幅がある程度大きくなければ、その効果が得られない。
【０００６】
上記の課題に対し、特許文献１に記載のノイズ低減方法では、画像領域が平坦な領域であるか否かの判定を行い、平坦であると判定されれば、注目画素を領域の平均値に近づける処理を行う。特許文献１における平坦領域の判定の概要はおおよそ次のようなものである。特許文献１記載の領域判定方法は、領域の標準偏差に基づいて行い、コントラストの高いエッジ領域では標準偏差が大であるため、標準偏差が大であるときにはノイズ低減を行わない。従って、エッジ領域ではノイズ低減処理がなされず、エッジが保存される。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開2007-150441号公報
【非特許文献】
【０００８】
【非特許文献１】“Fast Bilateral Filtering for the Display of High-Dynamic-Range IMAGES Proc. of ACM SIGGRAPH 2002, pp. 257-266
【発明の概要】
【発明が解決しようとする課題】
【０００９】
しかし、特許文献１に記載の技術では、コントラストの低いエッジは標準偏差が小であるため、このエッジに対してはノイズ低減処理が行われてしまい、コントラストの低いエッジがぼけるという課題がある。
【００１０】
本発明は以上の問題に鑑みてなされたものであり、コントラストの低いエッジを保存しつつノイズ低減を行うための技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明の目的を達成するために、例えば、本発明の画像処理装置は以下の構成を備える。即ち、入力画像中の着目画素及び該着目画素の周辺に位置する周辺画素のそれぞれの画素の画素値を取得する手段と、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める手段と、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより小さい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める手段と、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより大きい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める手段と、ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する手段と、前記画素値ｘ、若しくは前記着目画素及び前記周辺画素のそれぞれの画素の画素値の平均画素値、をＩとした場合に、予め設定された係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する手段と、前記着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する更新手段と、前記入力画像を構成する各画素の画素値を前記更新手段により更新した後、該入力画像を出力する出力手段とを備えることを特徴とする。
【発明の効果】
【００１２】
本発明の構成によれば、コントラストの低いエッジを保存しつつノイズ低減を行うことができる。
【図面の簡単な説明】
【００１３】
【図１】画像処理装置の機能構成例を示すブロック図。
【図２】信号処理部１０３の構成例を示すブロック図。
【図３】ノイズ低減処理部２０１の構成例を示すブロック図。
【図４】ノイズ低減処理部２０１が行う処理のフローチャート。
【図５】ヒストグラムを示す図。
【図６】ヒストグラムを示す図。
【図７】ヒストグラムを示す図。
【発明を実施するための形態】
【００１４】
以下、添付図面を参照し、本発明の好適な実施形態について説明する。なお、以下説明する実施形態は、本発明を具体的に実施した場合の一例を示すもので、特許請求の範囲に記載の構成の具体的な実施例の１つである。
【００１５】
［第１の実施形態］
先ず、本実施形態に係る画像処理装置の構成例について、図１のブロック図を用いて説明する。本実施形態では、ディジタルカメラに適用した画像処理装置について説明する。
【００１６】
撮像部１０１は、外界の光をその光量に応じた映像信号として取得するものである。撮像部１０１は、例えば、ズームレンズ、フォーカスレンズ、ぶれ補正レンズ、絞り、シャッター、光学ローパスフィルタ、iRカットフィルタ、カラーフィルタ、CMOSやCCDなどのセンサ、等により構成されている。Ａ／Ｄ変換部１０２は、撮像部１０１から送出された映像信号（アナログ信号）をディジタル信号（データ）に変換する。
【００１７】
信号処理部１０３は、Ａ／Ｄ変換部１０２により得られたデータが表す入力画像に対してホワイトバランス処理、ガンマ補正処理、ノイズ低減処理等の信号処理を行う。エンコーダ部１０５は、信号処理部１０３による信号処理済みの入力画像に対してJpegやMpegなどの圧縮符号化処理を行い、符号化画像データを生成する。もちろん、この圧縮符号化方法には様々なものがあり、特定の方法に限定するものではないし、そもそもこの圧縮符号化は必須ではない。
【００１８】
メディアＩ／Ｆ１０６には、PC（パーソナルコンピュータ）やその他メディア（例えば、ハードディスク、メモリーカード、CFカード、SDカード、USBメモリ）を接続することができる。然るに、エンコーダ部１０５による符号化画像データ（若しくは非圧縮符号化画像データ）は、このメディアＩ／Ｆ１０６を介してＰＣやその他のメディアに対して記録することができる。
【００１９】
Ｄ／Ａ変換部１０４は、信号処理部１０３による信号処理済みの入力画像（ディジタル信号）をアナログ信号に変換する。表示部１１３は液晶画面などにより構成されており、このアナログ信号が表す入力画像を表示する。また、この表示部１１３には、キャラクタジェネレーション部１１２により生成された文字やグラフィックなども表示することができる。
【００２０】
ＣＰＵ１０７は、ＲＯＭ１０８やＲＡＭ１０９に格納されているコンピュータプログラムやデータを用いて画像処理装置全体の動作制御を行う。ＲＯＭ１０８には、画像処理装置を構成する各部の動作制御をＣＰＵ１０７に実行させるためのコンピュータプログラムやデータが格納されている。また、既知の情報（予め設定された情報）として後述する様々なものもこのＲＯＭ１０８に格納されている。
【００２１】
ＲＡＭ１０９は、様々なデータを一時的に記憶するためのエリアや、ＣＰＵ１０７が各種の処理を実行する際に用いるワークエリアを有する。即ち、ＲＡＭ１０９は、各種のエリアを適宜提供することができる。
【００２２】
撮像系制御部１１０は、上記の撮像部１０１の制御を行うものであり、フォーカスを合わせる、シャッターを開く、絞りを調節するなどの、ＣＰＵ１０７から指示された様々な制御を行う。
【００２３】
操作部１１１は、ボタンやモードダイヤル等のユーザインターフェースにより構成されており、ユーザはこの操作部１１１を操作することで、各種の指示をＣＰＵ１０７に対して入力することができる。なお、上記の表示部１１３がタッチパネル式の液晶画面で構成されている場合、ユーザは周知の如く、このタッチパネル式の液晶画面を自身の指などでタッチすることで、ＣＰＵ１０７に対して様々な指示入力を行うことができる。
【００２４】
なお、図１には、以下の説明で用いる構成用件を含む一部の構成のみについて示している。然るに、本実施形態に係る画像処理装置に適用可能な構成は、図１に示した構成に限るものではなく、図１に示した構成に適当な構成用件を加えたものであっても良いし、以下の処理が実現可能であれば、適当な構成用件を省いても良い。また、１つの構成用件が行うものとして後述する処理を他の構成用件に行わせても良いし、それぞれで分配しても良い。
【００２５】
次に、信号処理部１０３のより詳細な構成について、図２のブロック図を用いて説明する。信号処理部１０３は、Ａ／Ｄ変換部１０２から送出された入力画像の画質を向上させるためのもので、先ずはこの入力画像に対してノイズ低減処理部２０１によってノイズ低減処理が施される。そしてノイズ低減処理部２０１によりノイズ低減処理が施された入力画像に対して、ホワイトバランス制御部によるホワイトバランス処理、エッジ強調部によるエッジ強調処理、色変換部による色変換処理、ガンマ処理部によるγ補正処理、が順に施される。そしてガンマ処理部からは、以上の各処理が施された入力画像が出力される。なお、画質を向上させるためには、ノイズ低減処理部２０１による処理だけでも良いし、ノイズ低減処理部２０１による処理と、ホワイトバランス制御部、エッジ強調部、色変換部、ガンマ処理部の１以上による処理と、で実現させても良い。
【００２６】
次に、ノイズ低減処理部２０１のより詳細な構成について、図３のブロック図、及び図４のフローチャートを用いて説明する。先ず、ステップＳ４０１において頻度計算部３０１は、Ａ／Ｄ変換部１０２から送出された入力画像を取得する。
【００２７】
ステップＳ４０２では頻度計算部３０１は先ず、入力画像中の着目画素及び着目画素の周辺に位置する周辺画素、のそれぞれの画素の画素値を取得する。例えば、着目画素、着目画素の周囲に位置する８画素、のそれぞれの画素の画素値を取得する。
【００２８】
そして次に頻度計算部３０１は、着目画素の周辺に位置する周辺画素のそれぞれの画素値から、着目画素の画素値ｘと同じ画素値を有する画素の数を求める。更に頻度計算部３０１は、着目画素の周辺に位置する周辺画素のそれぞれの画素値から、着目画素の画素値ｘより小さい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める。更に頻度計算部３０１は、着目画素の周辺に位置する周辺画素のそれぞれの画素値から、着目画素の画素値ｘより大きい画素値のうち着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める。
【００２９】
例えば、着目画素の画素値がＰ３、着目画素の周辺に位置する８画素のそれぞれの画素値がＰ２、Ｐ４、Ｐ２、Ｐ１、Ｐ５、Ｐ４、Ｐ３、Ｐ２であったとする。ここで、Ｐ１＜Ｐ２＜Ｐ３＜Ｐ４＜Ｐ５であるとする。このとき、画素値Ｐ１を有する画素の数は１、画素値Ｐ２を有する画素の数は３、画素値Ｐ３を有する画素の数は２、画素値Ｐ４を有する画素の数は２、画素値Ｐ５を有する画素の数は１、となる。然るにこの場合、ステップＳ４０２では頻度計算部３０１は、着目画素の画素値ｘ（＝Ｐ３）と同じ画素値を有する周辺画素の数として「１」を求める。更に、着目画素の画素値ｘより小さい画素値のうち着目画素の画素値ｘに最も近い画素値（＝Ｐ２）を有する周辺画素の数として「３」を求める。更に、着目画素の画素値ｘより大きい画素値のうち着目画素の画素値ｘに最も近い画素値（＝Ｐ４）を有する周辺画素の数「２」を求める。
【００３０】
なお、入力画像中の着目画素の周辺に位置する周辺画素を用いて各画素値に対する画素数を計算するものとしても良いが、全ての画素を用いなくても良く、着目画素の画素値に近い画素値を有する周辺画素数が得られればよい。例えば、着目画素の画素値が「１００」である場合、画素値が「８０」〜「１２０」の範囲内の画素の数を得るようにしても良い。
【００３１】
ステップＳ４０３では、傾き計算部３０２は、以下の式を計算することで、着目画素を含む近傍領域内で、同じ画素値を有する画素数の増減（＝傾きａ）を求める。然るに、この増減を求めることができるのであれば、他の式を用いても構わない。
【００３２】
【数１】
【００３３】
ここで、Ｈ（ｘ）は、着目画素の画素値がｘである場合に、着目画素の周辺に位置する周辺画素のうち、画素値ｘを有する画素の数を示す。Ｈ（ｘ−１）は上記のＨ１に対応し、Ｈ（ｘ＋１）は上記のＨ２に対応している。
【００３４】
ステップＳ４０４では補正量調整部３０３は、ＲＯＭ１０８等に格納されているノイズ特性係数を取得する。本実施形態では、このノイズ特性係数として、Ｃ１，Ｃ２を取得する。この係数Ｃ１，Ｃ２は以下の式を満たす。
【００３５】
【数２】
【００３６】
この式においてＩは、着目画素の画素値としても良いし、着目画素の画素値及び着目画素の周辺に位置する周辺画素の画素値の平均画素値、としても良い。ノイズ特性係数は、撮影画像に含まれるノイズの大きさを示している。具体的にはチャートを撮影した画像から算出したノイズの分散などである。なおショットノイズは輝度に応じてノイズ量が増加することが知られている。そこで、撮影画像に含まれるノイズの分散σ２と画素値Iの関係を係数C1,C2を用いて上記の式(2)のように表して係数C1,C2をノイズ特性係数とすることが好適である。
【００３７】
然るにＣ１は主としてショットノイズに関わる項、Ｃ２は主として暗電流ノイズに関わる項となる。C1,C2はグレイスケールチャートを撮影した画像から求める。具体的には、グレースケールチャートにおいて反射率一定の領域に対応する撮影画像の領域の平均値と分散値の関係を式（２）により回帰分析してC1,C2を求める。撮影画像から求める方法の他にも、設計パラメータから、撮影画像に含まれるであろうノイズの分散を算出しても良い。
【００３８】
いずれにせよ、ショットノイズ量は輝度に依存するため、着目画素あるいは周辺画素の画素値に応じてノイズ量σ２を計算することが望ましい。なお、着目画素の画素値が大きい場合、式（２）により着目画素に含まれるであろうノイズ量σ２が増大する。以下に説明する補正量はノイズ量σ２に比例するため、着目画素の補正量は大きくなる事が分かる。なお、傾きaが正である場合とは、着目画素に対して、着目画素の画素値よりも値が大きい画素の数が着目画素よりも値が小さい画素の数に対して多いことを意味する。その場合には、補正は着目画素の画素値を増加させる作用があることが式（１）から分かる。逆も然りである。
【００３９】
ステップＳ４０５では補正量調整部３０３は、ステップＳ４０４で取得したＣ１，Ｃ２、着目画素の画素値（若しくは着目画素の画素値及び着目画素の周辺に位置する周辺画素の画素値の平均画素値）Ｉ、を用いて上記の式（２）を計算し、σ２を求める。次に補正量調整部３０３は、求めたσ２と上記の式（１）で計算した傾きａとを用いてσ２×ａを、補正量として計算し、加算器３０４に送出する。
【００４０】
ステップＳ４０６では加算器３０４は、着目画素の画素値ｘに対して補正量（σ２×ａ）を加算した結果（ｘ＋σ２×ａ）を、着目画素の新たな画素値として、ホワイトバランス制御部に対して出力する。
【００４１】
図４のフローチャートは、１つの画素（＝着目画素）に対する処理のフローチャートであるため、ノイズ低減処理部２０１は、図４のフローチャートに従った処理を、入力画像を構成する各画素について行うことになる。図４のフローチャートに従った処理を、入力画像を構成する各画素について行うことで得られる画像は、ノイズ低減後の画像となる。
【００４２】
なお、画像の境界付近では着目画素の周辺画素が存在しない場合がある。その際は、仮想的に所定画素値の画素が周辺画素として存在するとして計算したり、領域内には画素が存在するよう領域の形状を変更するなどが考えられる。
【００４３】
次に、入力画像を構成する各画素について図４のフローチャートに従った処理を行うことで得られる画像については、コントラストの低いエッジが暈けないことについて説明する。
【００４４】
先ず、本実施形態に係る上記の処理によりノイズが良好に低減できる理由について説明する。入力画像中の着目画素の画素値をｘ、周辺画素のうち画素値ｘを有する画素数をＨ（ｘ）、Ｈ（ｘ）をｘについて微分した結果をＨ’（ｘ）、入力画像に混入しているノイズの標準偏差をσとする。このとき、ノイズ低減処理部２０１により着目画素の画素値ｘは以下の式（３）に従って画素値ｘ’に更新されることになる。
【００４５】
【数３】
【００４６】
この式（３）により、なぜノイズ低減が良好に行われるのかを説明する。ノイズ混入前の画像が一様な画素値ｘ０を有しており、この画像に対して標準偏差σのノイズが混入すると、混入後の画像のヒストグラムは以下の式（４）の正規分布で表すことができる。
【００４７】
【数４】
【００４８】
上記の式（３）と式（４）から、ノイズ低減後の画素値x'は以下の式（５）に示すとおり、ノイズ混入前の画素値ｘ０がノイズ低減後の画素値ｘ’となることが分かる。
【００４９】
【数５】
【００５０】
ただし、式（４）で表される正規分布はなめらかな関数であることに注意が必要である。仮に着目画素の周辺領域が小さすぎる場合、少ないサンプルからヒストグラムH(x)を計算することになり、式（４）のようななめらかな理想的なヒストグラムは得られないし、式（３）の計算結果が（式（５））となる保証は無い。
【００５１】
正規分布に従う乱数を計算機で発生させて、そのヒストグラムを表したものを図５に示す。図５において実線がヒストグラムであり、波線が正規分布（理想的なヒストグラム）である。サンプル数が有限であるため、ヒストグラムは滑らかではなく正規分布に一致しない。このような事態を避けるため、ヒストグラムをとる画像領域を広くするか、サンプル数が少なくても良好な結果を得る工夫が必要である。例えば、式（１）は離散データから傾きを示す量を得る一般的な数式であるが、サンプル数が少ない場合にはヒストグラムは滑らかでないため、aは理想値より大きな値をとる可能性がある。そこで、以下の式（６）に示すように、サンプル数Nを用いて修正する工夫が考えられる。
【００５２】
【数６】
【００５３】
式（６）によれば、サンプル数が少ないときには分母が大きくなり、傾きを示す量aは小さくなる。つまり、式（６）は傾きを示す量aが過度に大きくなる事を防ぐ効果があり、良好な結果を得る事ができる。なお、式（６）のサンプル数Nはx-1,x,x+1の度数の総和である。
【００５４】
次に、ノイズ混入前の画像が一様では無い場合を考える。ノイズ混入前の画像のヒストグラムをｈ（α）とする。するとノイズ混入後の画像のヒストグラムはｈ（α）を用いて以下の式（７）のように表すことができる。
【００５５】
【数７】
【００５６】
式（７）は、撮影画像のヒストグラムについて新しい見方を提供している。総和記号の中身はノイズ混入前に画素値がαであり、なおかつノイズ混入により画素値ｘに変化した画素の数に等しい。式（７）全体を見ると、入力画像の画素値ｘの度数は、ノイズ混入により画素値xに変化するようなノイズ混入前の画素値αの総和に等しい。式（７）を式（３）に代入すると以下の式（８）が得られる。
【００５７】
【数８】
【００５８】
式（８）の一部である次式（９）の意味を考える。
【００５９】
【数９】
【００６０】
式（９）が表す量は、ノイズ混入により画素値がαからｘに変化した画素の数を、ノイズ混入後の画素ｘの数で割っている。すなわち式（９）が表す量は、撮影画像の画素値がxである画素のうち、何％がノイズ混入前は画素値αであったのかを示す量である。これはノイズがのった画素値xを取得したうえで、ノイズ混入前は画素値αである事後確率P(α|x)に等しい。式（９）が表す量をP(α|x)とおくと式（８）は以下の式（１０）に示す如く変形できる。
【００６１】
【数１０】
【００６２】
式（１０）を展開すると、以下の式（１１）が得られる。
【００６３】
【数１１】
【００６４】
ここで、ΣP(α|x)＝１（式（１１）の右辺の最後の項）であるから、最終的に式（１１）は以下の式（１２）に変形することができる。
【００６５】
【数１２】
【００６６】
式（１２）は画素値xを取得したという条件付きで、ノイズ混入前は画素値がαである確率を用いてノイズ混入前の画素値の期待値を計算している。つまり、式（３）を用いてノイズ低減後の画素値を得ることは、実質的にノイズ混入前の画素値の期待値を求めていることになる。以上が式（３）によりノイズ低減が行える理由である。特筆すべきは、式（３）はノイズ混入前のヒストグラムを直接求めることなしに、期待値演算によりノイズ混入前の画素値の期待値を計算できることである。
【００６７】
次に、本実施形態に係る上記の処理により低コントラストのエッジが保存できる理由について説明する。本実施形態に係る上記の処理によるノイズ低減方法の作用を図６に示す。図６には、撮影画像のヒストグラムと、画素値の補正方向の関係を表している。
【００６８】
図６において平均値よりも値が小さい画素値は勾配が正となり、ヒストグラムのピークに近づくよう補正がなされる。一方、平均値よりも値が大きい画素値は勾配が負となり、補正結果としては着目画素の画素値は減少し、やはりヒストグラムのピークに近づくよう補正される。ノイズ混入によりヒストグラムは広がるため、本実施形態に係る上記の処理によるノイズ低減方法は、広がった画素値をノイズ混入前の状態に近づける作用があることが分かる。
【００６９】
入力画像が低コントラストのエッジを含む場合のヒストグラムと画素値の補正方向の関係とを図７(a)に示す。図７(a)の画素値a,bはエッジを構成する画素値の、それぞれの平均値である。ノイズ混入前の状態では図７(b)に示すヒストグラムのように画素値a,bでのみ０でない度数を有する。図７(a)の画素値の補正方向を見ると、ピークa,b以外の入力画像の画素値はピークa,bに近づくように補正がなされる。ノイズ混入前の画素値であるa,bと等しい画素値を有する画素は傾きが０であるため補正がなされない。そのため、補正の効果としてはエッジのコントラストの低下を押さえて、ノイズ混入前の状態に近づける作用がある。
【００７０】
以上のことは、ヒストグラムのピークに位置する画素値a,bが近い値をとっていたとしても成り立つ。従って、本実施形態に係る上記の処理によるノイズ低減方法では、コントラストの低いエッジでもコントラストを維持しつつ、ノイズ低減がなされる。
【００７１】
［第２の実施形態］
第１の実施形態では、ノイズ低減処理部２０１をディジタルカメラに搭載した場合について説明したが、第１の実施形態で説明したノイズ低減処理部２０１の動作は、ノイズ低減処理が必要な様々な画像処理装置に組み込むことが可能である。
【００７２】
また、ノイズ低減処理部２０１はハードウェアで構成しても良いが、ソフトウェアで実装し、ＲＯＭなどに格納しても良い。この場合、このＲＯＭ及びＣＰＵを有する機器において、ＣＰＵがこのＲＯＭに格納されたこのソフトウェアを実行することにより、この機器は第１の実施形態でノイズ低減処理部２０１が行うものとして上述した各処理を実行することになる。
【００７３】
（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【特許請求の範囲】
【請求項１】
入力画像中の着目画素及び該着目画素の周辺に位置する周辺画素のそれぞれの画素の画素値を取得する手段と、
前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める手段と、
前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより小さい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める手段と、
前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより大きい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める手段と、
ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する手段と、
前記画素値ｘ、若しくは前記着目画素及び前記周辺画素のそれぞれの画素の画素値の平均画素値、をＩとした場合に、予め設定された係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する手段と、
前記着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する更新手段と、
前記入力画像を構成する各画素の画素値を前記更新手段により更新した後、該入力画像を出力する出力手段と
を備えることを特徴とする画像処理装置。
【請求項２】
更に、
前記出力手段により出力された入力画像に対して、ホワイトバランス処理、エッジ強調処理、色変換処理、γ補正処理、を順に実行する手段を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
画像処理装置が行う画像処理方法であって、
前記画像処理装置の取得手段が、入力画像中の着目画素及び該着目画素の周辺に位置する周辺画素のそれぞれの画素の画素値を取得する工程と、
前記画像処理装置の数Ｈを求める手段が、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める工程と、
前記画像処理装置の数Ｈ１を求める手段が、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより小さい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める工程と、
前記画像処理装置の数Ｈ２を求める手段が、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより大きい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める工程と、
前記画像処理装置のａを求める手段が、ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する工程と、
前記画像処理装置のσ２を求める手段が、前記画素値ｘ、若しくは前記着目画素及び前記周辺画素のそれぞれの画素の画素値の平均画素値、をＩとした場合に、予め設定された係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する工程と、
前記画像処理装置の更新手段が、前記着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する更新工程と、
前記画像処理装置の出力手段が、前記入力画像を構成する各画素の画素値を前記更新工程により更新した後、該入力画像を出力する出力工程と
を備えることを特徴とする画像処理方法。
【請求項４】
コンピュータを、請求項１又は２に記載の画像処理装置の各手段として機能させるためのコンピュータプログラム。
【請求項１】
入力画像中の着目画素及び該着目画素の周辺に位置する周辺画素のそれぞれの画素の画素値を取得する手段と、
前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める手段と、
前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより小さい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める手段と、
前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより大きい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める手段と、
ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する手段と、
前記画素値ｘ、若しくは前記着目画素及び前記周辺画素のそれぞれの画素の画素値の平均画素値、をＩとした場合に、予め設定された係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する手段と、
前記着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する更新手段と、
前記入力画像を構成する各画素の画素値を前記更新手段により更新した後、該入力画像を出力する出力手段と
を備えることを特徴とする画像処理装置。
【請求項２】
更に、
前記出力手段により出力された入力画像に対して、ホワイトバランス処理、エッジ強調処理、色変換処理、γ補正処理、を順に実行する手段を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
画像処理装置が行う画像処理方法であって、
前記画像処理装置の取得手段が、入力画像中の着目画素及び該着目画素の周辺に位置する周辺画素のそれぞれの画素の画素値を取得する工程と、
前記画像処理装置の数Ｈを求める手段が、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘと同じ画素値を有する画素の数Ｈを求める工程と、
前記画像処理装置の数Ｈ１を求める手段が、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより小さい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ１を求める工程と、
前記画像処理装置の数Ｈ２を求める手段が、前記着目画素の周辺に位置する周辺画素のそれぞれの画素値から、前記着目画素の画素値ｘより大きい画素値のうち前記着目画素の画素値ｘに最も近い画素値を有する画素の数Ｈ２を求める工程と、
前記画像処理装置のａを求める手段が、ａ＝（Ｈ２−Ｈ１）／（２×Ｈ）を計算する工程と、
前記画像処理装置のσ２を求める手段が、前記画素値ｘ、若しくは前記着目画素及び前記周辺画素のそれぞれの画素の画素値の平均画素値、をＩとした場合に、予め設定された係数Ｃ１，Ｃ２を用いて、σ２＝Ｃ１×Ｉ＋Ｃ２を計算する工程と、
前記画像処理装置の更新手段が、前記着目画素の画素値ｘを（ｘ＋ａ×σ２）に更新する更新工程と、
前記画像処理装置の出力手段が、前記入力画像を構成する各画素の画素値を前記更新工程により更新した後、該入力画像を出力する出力工程と
を備えることを特徴とする画像処理方法。
【請求項４】
コンピュータを、請求項１又は２に記載の画像処理装置の各手段として機能させるためのコンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１２−１３４５７６（Ｐ２０１２−１３４５７６Ａ）
【公開日】平成２４年７月１２日（２０１２．７．１２）
【国際特許分類】
【出願番号】特願２０１０−２８２４００（Ｐ２０１０−２８２４００）
【出願日】平成２２年１２月１７日（２０１０．１２．１７）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２４年７月１２日（２０１２．７．１２）
【国際特許分類】
【出願日】平成２２年１２月１７日（２０１０．１２．１７）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]