説明

TVカメラの使用により得られた画像におけるノイズ低減の方法

【課題】タイミング相互依存性を有する、フレームグループからのフレーム映像流の生成と、前記フレームグループの処理によって得られた出力フレームシリーズからの画像の生成と、重み係数を考慮した平均値の使用とを含む、TVカメラの使用により得られた画像におけるノイズ低減の方法を提供する。
【解決手段】ノイズ低減のために、処理中のフレームに対して時間的に前後して時間対称的に並置されたフレームが使用される。3つの値から1つの値を選択するために、処理中のフレームの意味を有するこれらの値の差異係数が計算され、次に最小の差異係数が規定され、適切な画素値が平均化のために使用される。平均化の際、選択された画素値に、処理中のフレームからの隔たりの程度に依存する係数が乗算される。この方法で用いられるフレームの量、および処理中のフレームからの隔たりの程度に対する関数係数依存性が、ノイズ低減のためのパラメータを規定する。

【発明の詳細な説明】
【技術分野】
【0001】
この方法は、デジタル画像処理、すなわち、TVカメラの使用により得られた画像を処理し、画像ノイズ低減用を対象としたシステムに言及する。
【背景技術】
【0002】
TVカメラの使用により得られた画像の品質は、ノイズによって劣化するおそれがある。このノイズは低減しなければならず、それは画像品質の向上をもたらすであろう。
【0003】
TVカメラの使用により得られた画像におけるノイズ低減の方法は、2009年6月18日公開の特許US2009154825から公知であり、タイミング相互依存性を有する、フレーム映像流からの出力フレームの生成と、1つのグループのフレームにおけるフレーム要素の接近して隣接する値の平均化と、出力フレームを形成するための、重み係数を考慮した平均値の使用とを含む。
【0004】
画像におけるノイズ低減の方法は特許EP0289152から公知であり、フレーム映像流からの画像の生成を含む。各映像フレームは、以下の方法によってフレーム映像流から形成される。前のフレームの適切な要素を含む処理中の各フレームの比較が行なわれる。この比較は、重み係数を考慮して、使用された関係を定義することをもたらし、出力フレームの平均化された要素を形成する。
【発明の概要】
【課題を解決するための手段】
【0005】
この発明は、TVカメラの使用により得られた画像におけるノイズ低減をもたらした。
タイミング相互依存性を有する、フレームのグループからなる映像流の生成と、少なくとも1つのグループの画素における適切な画素の接近して隣接する値の平均化による前記フレームグループの処理によって得られた出力フレームのシーケンスからの映像画像の生成と、出力フレームを形成するための、重み係数を考慮した平均値の使用とを、映像チャネルに含む、TVカメラの使用により得られた画像におけるノイズ低減の方法における技術的結果は、奇数、すなわち2N+1個のフレームを含むフレームのグループを処理することによって達成され、ここで、N≧1であり、フレームは、番号が−N以上N以下の処理中のフレームに対して時間対称的に並置され、ここで、0はノイズが低減されつつある処理中のフレームの番号であり、1は次のフレームの番号であり、−Nは最も古いフレームの番号であり、Nは最も新しいフレームの番号であり、前記方法はさらに、処理中のフレームに対して時間対称的に並置されたフレーム画素の値、およびそれらの平均値を規定することと、前記差異係数を、最小の差異係数に対応する画素値が選択されるように重み係数を考慮して、処理中のフレームの画素値を用いて、処理中のフレームの画素値として計算することとによって達成される。
【0006】
請求されている方法の特定の実施形態では、
重み係数の値は、処理中のフレームからのフレーム対の隔たりとの相関関係において選択可能であり、
重み係数の値は、係数の関数としての釣鐘曲線の幅に等しい1つのパラメータを考慮してフレーム番号を介して計算可能であり、その幅はノイズ低減の程度を規定し、
処理のために用いられるフレームの量は、ノイズ低減のパラメータとして機能し、
処理のために用いられるフレームの量は、釣鐘曲線の幅の2倍となるよう選択され、
1行における処理された画素および隣接する2つの画素について差異係数が計算され、3つの値のうちの1つが、メジアンフィルタを用いて、結果値として選択される。
【0007】
請求されている方法の顕著な特徴は、ノイズ低減のために、処理中のフレームに対して時間的に前後して時間対称的に並置されたフレームが使用される、ということである。任意の画素の平均値の計算のために、一方または他方のフレームの適切な画素値か、もしくはこれら双方のフレームの平均化された画素値が使用される、ということが理解される。3つの値から1つの値を選択するために、処理中のフレームの意味を有するこれらの値の差異係数が計算され、次に最小の差異係数が規定され、適切な画素値が平均化のために使用される。平均化の際、選択された画素値に、処理中のフレームからの隔たりの程度に依存する係数が乗算される。この方法で用いられるフレームの量、および処理中のフレームからの隔たりの程度に対する関数係数依存性が、ノイズ低減のためのパラメータを規定する。
【0008】
3つの値から1つの値を選択するために、処理中のフレームの意味を有するこれらの値の差異係数が計算され、次に最小の差異係数が規定され、適切な画素値が平均化のために使用される。平均化の際、選択された画素値に、処理中のフレームからの隔たりの程度に依存する係数が乗算される。この方法で用いられるフレームの量、および処理中のフレームからの隔たりの程度に対する関数係数依存性が、ノイズ低減のためのパラメータを規定する。
【0009】
この方法では、以下の優先順位規則が実行される。
N個のフレームを含むシーケンスが得られ、ここで、Nはフレーム番号である。次に、奇数のフレームが同時に処理される。すなわち、N+1個のフレームが、番号が−N以上N以下の処理中のフレームに対して時間対称的に並置され、ここで、0はノイズが低減されつつある現在のフレームの番号であり、−1は前のフレームの番号であり、1は次のフレームの番号であり、−Nは最も古いフレームの番号であり、Nは最も新しいフレームの番号である。
【0010】
処理中のフレームの各画素について、新しい値が以下のように計算される。
明確にするために、以下の表記を導入する:
P−N(x,y)は、最も古いフレームの画素値であり、
P−N+1(x,y)は、次のフレームの画素値であり、
P0(x,y)は、処理中のフレームの画素値であり、
PN(x,y)は、最も新しいフレームの画素値である。
【0011】
ここで、
yは、画像行番号、
xは、画像行における画素位置である。
【0012】
以下のアルゴリズムが、出力フレームを計算するために使用される。
フレーム対KMの係数が計算され、ここで、Mは、処理中のフレームに対して時間対称的に並置されたフレーム対の番号であり、これに応じて、Mは1からNへと変化し、画素値と係数との積の和ΣPKは0と等しく、係数ΣKの和は0と等しく、処理中の画素のP0(x,y)値は係数K0によって乗算されてΣPKに加算され、処理中のフレームに対して時間対称的に並置されたすべてのフレーム対について、つまり1〜NのすべてのM値について、K0がΣKに加算され、以下の演算が実行される:
− 画素値の差異係数が、まずフレーム番号0および−Mで、次に0およびMで、0およびフレーム番号−MとMとについての平均画素値で、計算される:
【0013】
【数1】

【0014】
− D−M、DM、DAの最小値が求められる:
− 最小値がD−Mであることが判明した場合、ΣPKがP−M(x,y)*KMに加算され、KMがΣKに加算される。最小値がDMであることが判明した場合、ΣPKにPM(x,y)*KMが加算され、またΣKにKMが加算される。最小値がDAであることが判明した場合、ΣPKに(P−M(x,y)+PM(x,y))*KMが加算され、ΣKに2*KMが加算される。
【0015】
すべてのM個のフレーム対の処理後、結果として生じる画素値は以下のように算出可能である。
【0016】
【数2】

【0017】
ノイズ低減の要求される程度が、KM係数選択を決定する。特殊な係数の組が2つある。第1の組は、すべての係数が1に等しい、ノイズ低減の最大の程度に対応する。第2の組は、1に等しいK0を除き、すべての係数が0に等しい、ノイズ低減の完全な欠如に対応する。ノイズ低減中間値については、現在のフレーム(フレーム「0」)に並置されたフレームの係数がK0に近い値を有し、移動すると減少するように、係数は計算される。他の変形も異なるように展開可能である。
【0018】
この方法の実施形態のうちの1つは、フレーム番号依存性を介した係数値が釣鐘曲線によって与えられるということであり、釣鐘形状の幅がノイズ低減の程度を決定するであろう。そのような関数の例は、
i<Rについては、
【0019】
【数3】

【0020】
i≧Rについては、
【0021】
【数4】

【0022】
である。
ここで、Rは、ノイズ低減の程度を決定するパラメータである。R>>Nでは、すべての係数が等しく、ノイズ低減の程度は最小である。R<1では、平均を除くすべての値が「0」に等しく、ノイズ低減器は実質的にオフであろう。R=2とは、係数が0.5で平均フレームがオンになり、0.25で2つの隣接するフレームがオンになること、すなわち釣鐘の幅が2になることを意味する。
【0023】
この方法は、画像出力において遅延Nがあると仮定している。したがって、セル番号を選択する際、所望の最大のノイズ低減の程度と画像出力における最小の遅延との折り合いを考慮に入れる必要がある。
【0024】
請求されている方法では、明度ジャンプテーリング(brightness jump tailing)といったアーチファクトは、それらの平均フレーム対称並置によって著しく減少する。すなわち、アーチファクトは2つの辺によって分割され、その可視性が大幅に低減する。加えて、平均フレーム対称並置を有するフレームのフィルタリングによって明度を徐々に変化させると、ノイズ低減の程度は、画像変更の場合でさえ著しく増加する。また、画像が平均に対する変更を止めるか、または現在のフレームまで変更しない場合、ノイズ低減の程度は高水準に留まったままである。さらに、請求されている形態では、選択されたセル番号によって修正時間が限定される。
【図面の簡単な説明】
【0025】
【発明を実施するための形態】
【0026】
請求されているこの方法は、公知のハードウェアの使用により実現可能である。この方法の実施形態の例を図1および図2に示す。
【0027】
図1は、N=3についての処理ブロック図を示し、ここで、1はグループ処理モジュール、2は乗算器、3は加算器、4は除算器である。フレーム画素−3÷3は3つのグループに分割され、それらは各々、処理中のフレームと、それに対して時間対称的に並置された2つのフレームとを包含している。すべてのグループからの映像流が、モジュール1(グループ処理モジュール)に転送される。それに応じて、重み係数K1〜K3もすべてのモジュールに転送される。また、処理中のフレームの画素と係数K0とが、乗算器2に転送される。モジュール1の出力から、画素値と、前記画素値を計算するために使用される係数値とが、加算器3に転送される。画素値は一方の加算器に転送され、係数値は別の加算器に転送される。加算器3の出力から、総画素値および総係数値が除算器4に転送される。除算器4の出力から、ノイズ低減の結果値が読出される。
【0028】
図2は、グループ処理モジュール1のブロック図を示しており、ここで、5は算術平均算出器、6は差異係数算出器、7は差異係数半値算出器、8は最小差異係数選択部である。処理中のフレームの画素値、フレームに対して時間対称的に並置された画素値、およびこのグループの画素値を乗算するための係数という4つの値が、グループ処理モジュールに転送される。対称フレームの画素値は、算術平均算出器5に転送される。得られた平均値と処理中のフレームの画素値とが、差異係数半値算出器7に転送される。差異係数算出器6に、対称フレームの画素値が転送される。得られた3つの差異値が、最小差異係数選択部8に転送される。どの差異値が最小であると判明したかに依存して、対称フレームのうちの一方の画素値か、またはこれら双方のフレームの平均値が、選択部8に転送される。加えて、選択部8で平均値が選択された場合、係数Kに2を乗算する。
【0029】
チャネルにおけるノイズは、差異係数の計算におけるエラー、ひいてはノイズ低減器の誤動作を引起すおそれがあるため、ノイズの多い映像チャネルについて、1行における隣接する3つの画素に対して差異が計算される。その目的のために、処理中のフレームおよび2つの隣接する画素についての差異係数が計算され、次に、メディアンフィルタによってさらなる処理用の値が選択される。
【0030】
請求されている方法は、前記方法を実行するための指針が備わった媒体データとして、ソフトウェアで実現される。
【符号の説明】
【0031】
1:グループ処理モジュール、2:乗算器、3:加算器、4:除算器、5:算術平均算出器、6:差異係数算出器、7:差異係数半値算出器、8:最小差異係数選択部。
【図1】

【図2】


【特許請求の範囲】
【請求項1】
TVカメラの使用により得られた画像におけるノイズ低減の方法であって、タイミング相互依存性を有する、フレームグループからのフレーム映像流の生成と、1つのグループのフレームにおける接近して隣接する画素値の平均化の使用による前記フレームグループの処理によって得られた出力フレームシリーズからの画像の生成と、出力フレームを形成するための、重み係数を考慮した平均値の使用とを含み、
前記方法は、2N+1個のフレームを含むフレームグループを処理することを含み、ここで、N≧1であり、フレームは、番号が−N以上N以下の処理中のフレームに対して時間対称的に並置され、ここで、0はノイズが低減されつつある処理中のフレームの番号であり、−1は前のフレームの番号であり、1は次のフレームの番号であり、−Nは最も古いフレームの番号であり、Nは最も新しいフレームの番号であり、前記方法はさらに、
処理中のフレームに対して時間対称的に並置されたフレーム画素の値、およびそれらの平均値を規定することと、
これらの値の差異係数を、最小の差異係数に対応する画素値が選択されるように重み係数を考慮して、処理中のフレームの画素値を用いて、出力フレームの画素値として計算することとを含むことを特徴とする、方法。
【請求項2】
処理中のフレームからのフレーム対の隔たりの程度に依存して重み係数を選択することを特徴とする、請求項1に記載の方法。
【請求項3】
重み係数は、係数の関数としての釣鐘曲線の幅に等しいパラメータを考慮してフレーム番号を介して計算され、その幅はノイズ低減の程度を規定する、ということを特徴とする、請求項1に記載の方法。
【請求項4】
処理のために用いられるフレームの量は、ノイズ低減のパラメータとして機能する、ということを特徴とする、請求項1〜3に記載の方法。
【請求項5】
処理のために用いられるフレームの量は、釣鐘曲線の幅の2倍となるよう選択される、ということを特徴とする、請求項1〜3に記載の方法。
【請求項6】
1行における処理された画素および隣接する2つの画素について差異係数が計算され、3つの値のうちの1つが、メジアンフィルタを用いて、結果値として選択される、ということを特徴とする、請求項1〜3に記載の方法。

【公開番号】特開2013−55652(P2013−55652A)
【公開日】平成25年3月21日(2013.3.21)
【国際特許分類】
【外国語出願】
【出願番号】特願2012−185079(P2012−185079)
【出願日】平成24年8月24日(2012.8.24)
【出願人】(512008864)
【氏名又は名称原語表記】ZAKRYTOE AKCIONERNOE OBSHCHESTVO (IMPUL’S)
【Fターム(参考)】