ノイズ検知装置、再生装置、およびノイズ検知プログラム
【課題】動画像に含まれる点滅ノイズを、精度良く的確に自動で検知する。
【解決手段】処理の対象となる動画像の情報を取得する取得部と、動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割部と、領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出部と、複数枚の画像間において、現在の画像における特徴量と、１つ前の画像における特徴量との差分に基づいて領域の特徴量の変化が増加又は減少であるかを判定する状態判定部と、状態判定部により判定した状態に基づき特徴量の変化量を算出する特徴量変化算出部と、状態判定部により判定した状態が増加から減少を経て、その他の任意の状態に変化した場合に、特徴量の変化量に基づいて、動画像の任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定部と、領域ノイズ判定部の判定結果に基づいて、動画像に点滅ノイズが含まれるか否かの判定を行うノイズ判定部とを備える。
【解決手段】処理の対象となる動画像の情報を取得する取得部と、動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割部と、領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出部と、複数枚の画像間において、現在の画像における特徴量と、１つ前の画像における特徴量との差分に基づいて領域の特徴量の変化が増加又は減少であるかを判定する状態判定部と、状態判定部により判定した状態に基づき特徴量の変化量を算出する特徴量変化算出部と、状態判定部により判定した状態が増加から減少を経て、その他の任意の状態に変化した場合に、特徴量の変化量に基づいて、動画像の任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定部と、領域ノイズ判定部の判定結果に基づいて、動画像に点滅ノイズが含まれるか否かの判定を行うノイズ判定部とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ノイズ検知装置、再生装置、およびノイズ検知プログラムに関する。
【背景技術】
【０００２】
動画像においては、特定の要因に起因する固有のノイズが発生することが知られている。例えば、動画像において輝度や色が短い時間内に大きく変化する点滅ノイズがある。そこで、このような点滅ノイズの検知を自動化することが考えられている。例えば、特許文献１の発明では、フレーム画像にサンプリング位置を表す標本点を複数設定し、標本点の色情報を順次抽出して判断を行うことにより、点滅ノイズを自動的に検知する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第４４７６１２５号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１の発明は、各標本点の色情報を、フレーム全体で平均化しているため、正しい検知が行われない場合がある。例えば、上述した平均化により求められた平均値は、「フレームの一部が非常に明るい点滅ノイズ」と「フレーム全体が中程度に明るい点滅ノイズ」とで同じになってしまう場合がある。
【０００５】
本発明の目的は、動画像に含まれる点滅ノイズを、精度良く的確に自動で検知するための手段を提供することにある。
【課題を解決するための手段】
【０００６】
一の態様のノイズ検知装置は、処理の対象となる動画像の情報を取得する取得部と、前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割部と、前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出部と、前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定部と、前記状態判定部により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出部と、前記状態判定部により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定部と、前記領域ノイズ判定部の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定部とを備える。
【０００７】
なお、前記状態判定部は、現在の画像における前記特徴量と１つ前の画像における前記特徴量との差分が予め定められた閾値を越えないときには、１つ前の判定を維持しても良い。
【０００８】
また、前記特徴量変化算出部は、前記状態判定部により判定した前記状態が１つ前の画像における前記状態と同一のときは前記差分の値を累積しても良い。
【０００９】
前記状態判定部は前記増加もしくは前記減少のどちらかの状態を所定時間維持した場合に定常状態と判定しても良い。
【００１０】
また、前記ノイズ判定部は、前記領域ノイズ判定部による判定結果に基づいて、前記動画像を構成するそれぞれの画像単位で前記点滅ノイズが含まれるか否かを判定し、判定結果に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行っても良い。
【００１１】
また、前記ノイズ判定部は、前記画像単位で前記点滅ノイズが含まれるか否かを判定した判定結果に基づいて、前記対象動画像において、所定の時間内に所定の回数以上の前記点滅ノイズが含まれるか否かの判定を行っても良い。
【００１２】
また、前記領域ノイズ判定部は、前記特徴量の変化量が所定の閾値より大きい場合に、前記対象動画像の前記任意の領域に前記点滅ノイズが含まれると判定しても良い。
【００１３】
また、前記ノイズ判定部は、前記特徴量変化算出部により算出された前記特徴量の変化量に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行う際に、連続する少なくとも２枚の前記画像における前記判定結果を加味して判定を行っても良い。
【００１４】
また、前記算出部は、前記特徴量として、前記画像の輝度に関する特徴量と、前記画像の色情報に関する特徴量との少なくとも一方を算出しても良い。
【００１５】
一の態様の再生装置は、動画像を記録する記録部と、前記動画像を再生する再生部と、上述した何れかのノイズ検知装置とを備え、前記取得部は、前記記録部から前記対象動画像の情報を取得する。
【００１６】
一の態様のノイズ検知プログラムは、処理の対象となる動画像の情報を取得する取得処理と、前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割処理と、前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出処理と、前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定処理と、前記状態判定処理により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出処理と、前記状態判定処理により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定処理と、前記領域ノイズ判定処理の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定処理とをコンピュータに実行させる。
【発明の効果】
【００１７】
本発明によれば、動画像に含まれる点滅ノイズを、精度良く的確に自動で検知するための手段を提供することができる。
【図面の簡単な説明】
【００１８】
【図１】ノイズ検知装置の構成例を示すブロック図
【図２】ノイズ検知時のノイズ検知装置の動作例を示す流れ図
【図３】ノイズ検知時のノイズ検知装置の動作例を示す流れ図（続き）
【図４】ノイズ検知時のノイズ検知装置の動作例を示す流れ図（続き）
【図５】分割処理について説明する図
【図６】色相に関する重み付けテーブルの例
【図７】彩度に関する重み付けテーブルの例
【図８】明度に関する重み付けテーブルの例
【図９】差分値の変化の状態について説明する図
【図１０】差分値の変化の状態について説明する別の図
【図１１】輝度点滅の検出の変形例について説明する図
【発明を実施するための形態】
【００１９】
図１は、実施形態でのノイズ検知装置の構成例を示すブロック図である。ノイズ検知装置には、処理の対象となる動画像（対象動画像）について、ノイズを検知するためのノイズ検知プログラムが予めインストールされる。
【００２０】
なお、対象動画像はどのようなものであっても良い。例えば、デジタル画像を生成可能な撮像装置により生成されたものであっても良いし、アナログの動画像の画像データをデジタルデータに変換したものであっても良いし、ビデオテープなどに記録された動画像をデジタルデータに変換したものであっても良い。また、コンピュータなどにより作成された動画像であっても良い。
【００２１】
また、以下では、対象動画像の全フレームをノイズ検知の対象として処理を行う例を示すが、対象動画像の一部のフレームのみをノイズ検知の対象として処理を行っても良い。この場合、ノイズ検知の対象となるフレームは、ユーザ操作に基づいて指定されても良いし、対象動画像の情報などに基づいて自動で指定されても良い。
【００２２】
図１に示すノイズ検知装置１１は、ノイズ検知部１２、ＣＰＵ１３、アラーム出力部１４および入出力Ｉ／Ｆ１５、バス１６を有している。ＣＰＵ１３は、入出力Ｉ／Ｆ１４と相互に接続される。また、ノイズ検知部１２の出力は、バス１６を介してＣＰＵ１３に接続される。さらに、アラーム出力部１４は、ＣＰＵ１３により制御される。
【００２３】
ノイズ検知装置１１に入力された対象動画像の画像データは、ノイズ検知部１２に入力される。
【００２４】
さらに、ノイズ検知装置１１には、入出力Ｉ／Ｆ１４を介して、不図示の入力デバイス（キーボード、ポインティングデバイスなど）やモニタ、ＬＡＮ接続のためのネットワークケーブルなどが接続されている。
【００２５】
また、ノイズ検知装置１１は、不図示の記憶装置（例えば、ハードディスクや、不揮発性の半導体メモリなどの記憶媒体で構成される）を備える。この記憶装置には、画像処理プログラムや、プログラムの実行に必要となる各種のデータが記録されている。
【００２６】
ＣＰＵ１３は、ノイズ検知装置１１の各部を統括的に制御するプロセッサである。また、アラーム出力部１４は、スピーカ、モニタ、ランプなどの報知部材を備え、ノイズ検知部１２による検知結果をユーザに報知する。
【００２７】
ノイズ検知部１２は、図１に示すように、対象動画像が入力されるＹＨＳＶ変換部３１、輝度点滅ノイズを検知する輝度点滅ノイズ検知部２２、色点滅ノイズを検知する色点滅ノイズ検知部２３を有する。そして、輝度点滅ノイズ検知部２２は、Ｙ評価値算出部３１、ブロック輝度点滅検出部３２、フレーム輝度点滅判定部３３、輝度点滅判定部３４の各部を備え、色点滅ノイズ検知部２３は、Ｈ評価値算出部３５、Ｓ評価値算出部３６、Ｖ評価値算出部３７、ブロック色情報算出部３８、ブロック色点滅検出部３９、フレーム色点滅判定部４０、色点滅判定部４１の各部を備える。
【００２８】
以上説明した構成のノイズ検知装置１１は、予め定められた固有の点滅ノイズを検知する。検知の対象となる点滅ノイズはどのようなものであっても良いが、以下では、「鮮やかな赤色の点滅」が、「１フレームの所定の面積以上の頻度」で、「１秒間に３回以上」発生する点滅ノイズを検知対象の例として説明する。また、以下では、上述した点滅ノイズを検知する際に、「輝度点滅」および「色点滅」の２つの要素について検知を行う例を説明する。なお、検知対象となる「固有の点滅ノイズ」には、表現上の必要に基づき対象動画像に存在する点滅も含まれる。例えば、アニメーションにおいて、爆発などを表現するための点滅も、「固有の点滅ノイズ」としてノイズ検知装置１１の検知対象になり得る。
【００２９】
まず、図２から図４の流れ図を参照しつつ、ノイズ検知部１２における点滅ノイズの検知の動作例を説明する。なお、図２から図４の流れ図の処理は、ユーザによるプログラム実行指示に応じて、各部がノイズ検知プログラムを実行することで開始される。
【００３０】
（ステップＳ１０１）
ノイズ検知部１２は、ユーザにより指定された対象動画像の１フレームの画像データを取得する。取得した１フレームの画像データは、図１に示すように、ＹＨＳＶ変換部２１に入力される。
【００３１】
（ステップＳ１０２）
ノイズ検知部１２は、ＹＨＳＶ変換部２１によりＹＨＳＶ変換処理を行う。
【００３２】
ＹＨＳＶ変換部２１は、入力信号に対して公知のＹＨＳＶ変換処理を施し、輝度信号（以下、Ｙ信号と称する）、色相信号（以下、Ｈ信号と称する）、彩度信号（以下、Ｓ信号と称する）、明度信号（以下、Ｖ信号と称する）の各信号を生成する。ＹＨＳＶ変換処理の内容は、入力信号の形式によって異なる。例えば、入力信号がＹＣｂＣｒ信号である場合には、Ｙ成分をそのままＹ信号として出力し、Ｈ信号、Ｓ信号、Ｖ信号をそれぞれ生成する。また、例えば、入力信号がＲＧＢ信号である場合には、公知のＲＧＢ色空間からＹＨＳＶ色空間への変換処理を行い、Ｙ信号、Ｈ信号、Ｓ信号、Ｖ信号をそれぞれ生成する。
【００３３】
生成されたＹ信号は、Ｙ評価値算出部３１に入力される。また、生成されたＨ信号は、Ｈ評価値算出部３５に入力される。また、生成されたＳ信号は、Ｓ評価値算出部３６に入力される。また、生成されたＶ信号は、Ｖ評価値算出部３７に入力される。
【００３４】
（ステップＳ１０３）
ノイズ検知部１２は、Ｙ評価値算出部３１により、分割処理を行う。Ｙ評価値算出部３１は、入力されたＹ信号について、フレームごとに複数の領域に分割する。Ｙ評価値算出部３１は、例えば、図５に示すように、各フレームのＹ信号を、縦横それぞれ５ずつの２５の領域に分割する。この分割による２５の領域を、それぞれ、Ｂ(１)〜Ｂ(２５)と称する。
【００３５】
また、ノイズ検知部１２は、Ｈ評価値算出部３５、Ｓ評価値算出部３６、Ｖ評価値算出部３７により、それぞれ、Ｈ信号、Ｓ信号、Ｖ信号に対して同様の分割処理を行い、上述したＢ(１)〜Ｂ(２５)の２５の領域に分割する。
【００３６】
なお、図５の例では、５×５に等分割する例を示したが、他の分割方法であっても良い。例えば、フレーム内の場所によって大きさの違う領域に分割しても良い。
【００３７】
さらに、対象動画像の内容や、対象動画像を撮影時の撮影モードなどに応じて、分割方法を適宜変更する構成としても良い。
【００３８】
（ステップＳ１０４）
ノイズ検知部１２は、Ｙ評価値算出部３１により、評価値算出処理を行う。Ｙ評価値算出部３１は、ステップＳ１０３で分割したＢ(１)〜Ｂ(２５)の２５の領域ごとに、評価値を算出する。Ｙ評価値算出部３１は、例えば、評価値として、各領域に含まれるＹ信号の平均値を算出する。この結果、Ｂ(１)〜Ｂ(２５)の２５の領域に対応して、２５の評価値（以下、Ｅｙ(１)〜Ｅｙ(２５)と称する。）が算出される。この評価値は、ブロック輝度点滅検出部３２に入力され、輝度点滅ノイズの検出に用いられる（詳細は後述する）。
【００３９】
また、ノイズ検知部１２は、Ｈ評価値算出部３５により、Ｈ信号に対して同様の処理を行い、２５の評価値（以下、Ｅｈ(１)〜Ｅｈ(２５)と称する。）を算出し、Ｓ評価値算出部３６により、Ｓ信号に対して同様の処理を行い、２５の評価値（以下、Ｅｓ(１)〜Ｅｓ(２５)と称する。）を算出し、Ｖ評価値算出部３７により、Ｖ信号に対して同様の処理を行い、２５の評価値（以下、Ｅｖ(１)〜Ｅｖ(２５)と称する。）を算出する。
【００４０】
さらに、ノイズ検知部１２は、ブロック色情報算出部３８により、色情報に関する評価値算出処理を行う。ブロック色情報算出部３８は、上述したＨ信号に基づく評価値（Ｅｈ(１)〜Ｅｈ(２５)）と、Ｓ信号に基づく評価値（Ｅｓ(１)〜Ｅｓ(２５)）と、Ｖ信号に基づく評価値（Ｅｖ(１)〜Ｅｖ(２５)）とに対して、重み付け積算を行い、色情報に関する評価値（以下、Ｅｃ(１)〜Ｅｃ(２５)と称する。）を算出する。
【００４１】
重みは、検知対象の点滅ノイズの性質に応じて定められる。本実施形態では、「鮮やかな赤色の点滅」の点滅ノイズが検知対象であるため、赤色の純度の最も高い色相がピークになるようなテーブルを用いて重み付けを行う。
【００４２】
図６から図８は、それぞれ、色相、彩度、明度に関する重み付けテーブル（それぞれＴｈ、Ｔｓ、Ｔｖと称する）の一例である。図６に示すように、彩度に関しては、「鮮やかな赤色の点滅」の点滅ノイズに合わせて、彩度が０°がピークになるようなテーブルを用いる。
【００４３】
ブロック色情報算出部３８は、領域ごとに、これらのテーブルを用いて色情報に関する評価値（以下、Ｅｃ(１)〜Ｅｃ(２５)と称する。）を算出する。
【００４４】
任意の領域Ｂ(Ｘ)における評価値Ｅｃ(Ｘ)は、以下の式で算出される。
【００４５】
Ｅｃ(Ｘ)＝｛Ｔｈにより重み付けしたＥｈ(Ｘ)｝＊｛Ｔｓにより重み付けしたＥｓ(Ｘ)｝＊｛Ｔｖにより重み付けしたＥｖ(Ｘ)｝
ブロック色情報算出部３８は、Ｂ(１)〜Ｂ(２５)のそれぞれについて同様の処理を行い、色情報に関する評価値（Ｅｃ(１)〜Ｅｃ(２５)）を算出する。この評価値は、ブロック色点滅検出部３９に入力され、色点滅ノイズの検出に用いられる（詳細は後述する）。
【００４６】
なお、重み付けを行う際に、テーブル以外の手法を用いても良い。また、彩度に関するテーブルＴｓと明度に関するテーブルＴｖについては、それぞれ用意しても良いし、同じものを利用しても良い。
【００４７】
また、輝度情報に関する評価値、および、色情報に関する評価値を算出する際に、各領域に適宜重み付けを行ってから評価値を算出しても良い。例えば、中央の領域（例えば、図５の領域Ｂ(１３)）について重みを大きくし、外側へ向かう程重みが小さくなるように、領域ごとに重み付けを行ってから評価値を算出しても良い。
【００４８】
（ステップＳ１０５）
ノイズ検知部１２は、ブロック輝度点滅検出部３２、フレーム輝度点滅判定部３３、輝度点滅判定部３４の各部により、輝度点滅検出を行う。検出の詳細は後述する。
【００４９】
（ステップＳ１０６）
ノイズ検知部１２は、ブロック色点滅検出部３９、フレーム色点滅判定部４０、色点滅判定部４１の各部により、色点滅検出を行う。検出の詳細は後述する。
【００５０】
（ステップＳ１０７）
ＣＰＵ１３は、ステップＳ１０２からステップＳ１０６の処理を、全フレーム分行ったか否かを判定する。ＣＰＵ１３は、全フレーム分終了したと判定すると一連の処理を終了し、全フレーム分終了していないと判定すると、ステップＳ１０８に進む。
【００５１】
（ステップＳ１０８）
ノイズ検知部１２は、次のフレームの画像データを取得し、ステップＳ１０２に戻る。
【００５２】
次に、図３の流れ図を参照しつつ、ステップＳ１０５の輝度点滅検出処理時の輝度点滅ノイズ検知部２２における輝度点滅ノイズの検知の動作例を説明する。
【００５３】
（ステップＳ１２１）
ノイズ検知部１２は、ブロック輝度点滅検出部３２により、ブロック単位で輝度点滅の検出を行う。ブロック輝度点滅検出部３２は、以下の４つの処理を領域ごとに行うことにより、ブロック単位で輝度点滅の検出を行う。この検出により、領域Ｂ(１)〜Ｂ(２５)のうち、輝度点滅が含まれる領域（ブロック）を検出することができる。以下では、任意の領域Ｂ(Ｘ)を例に挙げて説明する。
（ａ）差分値の算出
ブロック輝度点滅検出部３２は、フレームの画像が取得されるたびに、取得したフレームと１つ前のフレームとに関して、ステップＳ１０４で算出した輝度情報に関する評価値Ｅｙ(Ｘ)の差分値を算出する。
（ｂ）状態の監視
ブロック輝度点滅検出部３２は、図９に示す条件にしたがって、上述した差分値の変化の状態が、「増加中」、「減少中」、「定常」のうち何れの状態であるかを監視する。図９において、「有効な増加あり」とは、上述した差分値が正の値で（取得したフレームの評価値＞１つ前のフレームの評価値）、かつ、差分値の絶対値が所定の閾値より大きい場合である。このような場合には、状態は「増加中」となる。また、図９において、「有効な減少あり」とは、上述した差分値が負の値で（取得したフレームの評価値＜１つ前のフレームの評価値）、かつ、差分値の絶対値が所定の閾値より大きい場合である。このような場合には、状態は「減少中」となる。一方、所定のフレーム間に渡って「有効な増加なし」かつ「有効な減少なし」である場合には、状態は「定常」となる。なお、有効な増加および減少を判別するための閾値、および、上述した所定のフレームの数は、検知対象の点滅ノイズの性質に応じて予め定められる。
【００５４】
上述した３つの状態の変化について、図１０を参照して例示する。図１０は、任意の領域Ｂ(Ｘ)における評価値Ｅｙ(Ｘ)の変化を示す一例である。図１０において、点線のグラフは評価値Ｅｙ(Ｘ)のアナログ信号の変化を示し、実線グラフは各処理時の評価値Ｅｙ(Ｘ)のデジタル的な変化を示す。また、図１０の横軸はフレームＮｏ（つまり、時間）を示し、縦軸は評価値Ｅｙ(Ｘ)を示す。なお、図１０において、Ｆ（Ｘ）は、フレームＮｏがＸであることを示す。また、図１０の例では、説明のために、フレームＮｏを「１」から順に付しているが、対象動画像のどの部分であっても同様である。また、図１０の例では、上述した３つの状態のうち、「増加中」および「減少中」のみを例示し、「定常」については特に例示していない。
【００５５】
図１０において、Ｆ（２）からＦ（３）への変化は、上述した「有効な増加あり」には相当しない。これは、Ｆ（３）の評価値＞Ｆ（２）の評価値ではあるが、Ｆ（２）およびＦ（３）の評価値の差分値の絶対値が所定の閾値より小さいためである。Ｆ（３）からＦ（４）への変化についても同様である。一方、Ｆ（４）からＦ（５）への変化は、上述した「有効な増加あり」に相当する。これは、Ｆ（５）の評価値＞Ｆ（４）の評価値であり、かつ、Ｆ（４）およびＦ（５）の評価値の差分値の絶対値が所定の閾値より大きいためである。このタイミングで、ブロック輝度点滅検出部３２は、状態が「増加中」に変化したと判定し、後述する「状態が増加中である場合の処理」を実行する。
【００５６】
続いて、Ｆ（５）からＦ（６）への変化、および、Ｆ（６）からＦ（７）への変化は、図９で説明した何れの条件も満たさないため、状態は変化せず、「増加中」のままである。そして、Ｆ（７）からＦ（８）への変化は、上述した「有効な減少あり」に相当する。これは、Ｆ（８）の評価値＜Ｆ（７）の評価値であり、かつ、Ｆ（７）およびＦ（８）の評価値の差分値の絶対値が所定の閾値より大きいためである。このタイミングで、ブロック輝度点滅検出部３２は、状態が「減少中」に変化したと判定し、後述する「状態が減少中である場合の処理」を実行する。
【００５７】
続いて、Ｆ（８）からＦ（９）への変化、および、Ｆ（９）からＦ（１０）への変化は、図９で説明した何れの条件も満たさないため、状態は変化せず、「減少中」のままである。そして、Ｆ（１０）からＦ（１１）への変化は、上述した「有効な増加あり」に相当するため、このタイミングで、ブロック輝度点滅検出部３２は、状態が「増加中」に変化したと判定し、後述する「状態が増加中である場合の処理」を実行する。
【００５８】
以降同様であるが、状態が「増加中」であるＦ（１５）からＦ（１６）への変化は、Ｆ（１６）の評価値＜Ｆ（１５）の評価値ではあるが、Ｆ（１５）およびＦ（１６）の評価値の差分値の絶対値が所定の閾値より小さいため、上述した「有効な減少あり」に相当せず、「無効な減少」となる。そのため、状態は変化せず、「増加中」のままである。
（ｃ）状態別の処理
＜増加中＞
状態が「増加中」の場合、ブロック輝度点滅検出部３２は、上述した差分値の算出および状態の監視に加えて、状態が増加中に変化した際の「有効な増加」を起点として、上述した差分値を累積していき、累積値として更新する。例えば、図１０の例では、Ｆ（４）からＦ（５）への変化のタイミングで状態が「増加中」に変化するため、図１０に示すように、Ｆ（４）から差分値が累積されることになる。また、累積値の更新は、状態が「増加中」からその他の状態に変化するまで行われる。このように求められた累積値は、後述する点滅候補の検出時に用いられる。
＜減少中＞
状態が「減少中」の場合、ブロック輝度点滅検出部３２は、上述した差分値の算出および状態の監視のみを行う。なお、ブロック輝度点滅検出部３２は、上述した累積値の算出を減少中においても行い、後述する点滅候補の検出時に加味しても良い。
＜定常＞
状態が「定常」の場合、ブロック輝度点滅検出部３２は、上述した差分値の算出および状態の監視のみを行う。
（ｄ）状態が「増加中」から「減少中」を経て、その他の任意の状態に変化した際の検出処理
状態が「増加中」から「減少中」を経て、その他の任意の状態に変化すると、ブロック輝度点滅検出部３２は、まず、上述した「増加中」に保持した累積値を、所定の閾値と比較する。なお、上述したその他の任意の状態とは、「増加中」、または、「定常」の状態の他に、差分値が０以上となった場合も含む。そして、累積値＞所定の閾値である場合には、状態が「減少中」に変化した際の「有効な減少」の起点に対応するフレーム近傍に点滅候補が存在すると推定し、この時刻に輝度点滅ノイズが含まれていると判定する。例えば、図１０の例では、Ｆ（４）からＦ（５）への変化に応じて状態が「増加中」に変化し、さらに、Ｆ（７）からＦ（８）への変化に応じて状態が「減少中」に変化し、さらに、Ｆ（１０）からＦ（１１）への変化に応じて状態が「増加中」に変化するため、状態が「減少中」に変化した際の「有効な減少」の起点は、Ｆ（７）となり、Ｆ（７）の近傍に点滅候補が存在すると推定し、この時刻に輝度点滅ノイズが含まれていると判定する。
【００５９】
なお、累積値＜所定の閾値である場合とは、輝度に関する評価値の触れ幅が小さく、輝度点滅ノイズと判定するには不十分な点滅が含まれる場合である。また、累積値と比較する閾値は、検知対象の点滅ノイズの性質に応じて予め定められる。
【００６０】
また、状態の変化に「定常」が含まれる場合とは、輝度に関する評価値の触れ幅は十分である一方、変化時間が長く、輝度に関する評価値の変化スピードが緩やかな点滅が含まれる場合である。このような点滅は、評価値の極値が存在するものの、点滅ノイズとしては検出しない。
【００６１】
ブロック輝度点滅検出部３２は、上述した４つの処理を領域Ｂ(１)〜Ｂ(２５)のそれぞれについて行い、ステップＳ１２２に進む。
【００６２】
なお、ステップＳ１２１で説明した輝度点滅の検出方法は一例である。例えば、単純に極大値や極小値などを求めることにより輝度点滅の検出を行っても良い。また、例えば、評価値の変化の立ち上がり部分のみを検出することにより輝度点滅の検出を行っても良い。
【００６３】
また、ステップＳ１２１で説明した輝度点滅の検出において、評価値の変化におけるベースの明るさを加味して輝度点滅の検出を行っても良い。例えば、ベースの明るさが暗いほど、輝度点滅の影響が大きく、ベースの明るさが明るいほど、輝度点滅の影響は目立ちにくい。そこで、ベースの明るさが暗いほど、上述した累積値と比較する閾値を小さくするなど、評価値の変化におけるベースの明るさを加味して輝度点滅の検出を行っても良い。
【００６４】
（ステップＳ１２２）
ノイズ検知部１２は、ステップＳ１２１で行ったブロック単位での輝度点滅の検出の結果に基づいて、ブロック単位での輝度点滅があるか否かを判定する。ノイズ検知部１２は、ブロック単位での輝度点滅があると判定するとステップＳ１２３に進み、ブロック単位での輝度点滅がないと判定すると、一連の処理を終了する。
【００６５】
（ステップＳ１２３）
ノイズ検知部１２は、フレーム輝度点滅判定部３３により、フレーム単位で輝度点滅の検出を行う。フレーム輝度点滅判定部３３は、フレーム単位で、そのフレーム内において輝度点滅が検出された領域の数をカウントし、領域の数が所定の閾値より大きい場合には、そのフレームには輝度点滅ノイズが含まれると判定する。閾値は、検知対象の点滅ノイズの性質に応じて定められる。本実施形態では、「１フレームの所定の面積以上の頻度」の点滅ノイズが検知対象であるため、例えば、閾値が５である場合には、輝度点滅が検出された領域の数が５以上、すなわち、フレームの２０％以上の領域において輝度点滅が発生している場合に、そのフレームに輝度点滅ノイズが含まれていると判定する。
【００６６】
このように、面積に閾値を設けて点滅ノイズが含まれるか否かを判定することにより、離散的に発生する点滅ノイズも、まとまって発生する点滅ノイズも検知することが可能になる。
【００６７】
（ステップＳ１２４）
ノイズ検知部１２は、ステップＳ１２３で行ったフレーム単位での輝度点滅の検出の結果に基づいて、フレーム単位での輝度点滅があるか否かを判定する。ノイズ検知部１２は、フレーム単位での輝度点滅があると判定するとステップＳ１２５に進み、フレーム単位での輝度点滅がないと判定すると、一連の処理を終了する。
【００６８】
（ステップＳ１２５）
ノイズ検知部１２は、輝度点滅判定部３４により、フレーム単位の輝度点滅について、所定の時間内の点滅回数が閾値Ｔｔ以上であるか否かを判定する。ノイズ検知部１２は、所定の時間内の点滅回数が閾値Ｔｔ以上であると判定するとステップＳ１２６に進み、所定の時間内の点滅回数が閾値Ｔｔ未満であると判定すると、一連の処理を終了する。
【００６９】
閾値Ｔｈは、検知対象の点滅ノイズの性質に応じて定められる。本実施形態では、「１秒間に３回以上」の点滅ノイズが検知対象であるため、１秒間の点滅回数の閾値Ｔｈ＝３となる。
【００７０】
（ステップＳ１２６）
ノイズ検知部１２は、判別内容として、輝度点滅ノイズが存在することを示す情報（発生フレームＮｏ、発生時刻など）を、バス１６を介してＣＰＵ１３に出力し、一連の処理を終了する。
【００７１】
このような処理を行うことにより、例えば、３秒間に、１回のみフレーム単位の輝度点滅が発生した場合には、輝度点滅ノイズは存在しないと判定されることになる。
【００７２】
次に、図４の流れ図を参照しつつ、ステップＳ１０６の色点滅検出処理時の色点滅ノイズ検知部２３における色点滅ノイズの検知の動作例を説明する。なお、色点滅ノイズの検知は、図３を参照して説明した輝度点滅ノイズの検知と共通する処理を含むため、以下では、輝度点滅ノイズの検知と異なる部分についてのみ説明する。
【００７３】
（ステップＳ１３１）
ノイズ検知部１２は、ブロック色点滅検出部３９により、ステップＳ１０４で算出した色情報に関する評価値（Ｅｃ(１)〜Ｅｃ(２５)）を用いて、上述した図３のステップＳ１２１と同様の処理を行い、ブロック単位で色点滅の検出を行う。
【００７４】
（ステップＳ１３２）
ノイズ検知部１２は、ステップＳ１３１で行ったブロック単位での色点滅の検出の結果に基づいて、ブロック単位での色点滅があるか否かを判定する。ノイズ検知部１２は、ブロック単位での色点滅があると判定するとステップＳ１３３に進み、ブロック単位での色点滅がないと判定すると、一連の処理を終了する。
【００７５】
（ステップＳ１３３）
ノイズ検知部１２は、フレーム色点滅判定部４０により、上述した図３のステップＳ１２３と同様の処理を行い、フレーム単位で色点滅の検出を行う。
【００７６】
（ステップＳ１３４）
ノイズ検知部１２は、ステップＳ１３３で行ったフレーム単位での色点滅の検出の結果に基づいて、フレーム単位での色点滅があるか否かを判定する。ノイズ検知部１２は、フレーム単位での色点滅があると判定するとステップＳ１３５に進み、フレーム単位での色点滅がないと判定すると、一連の処理を終了する。
【００７７】
（ステップＳ１３５）
ノイズ検知部１２は、色点滅判定部４１により、フレーム単位の色点滅について、所定の時間内の点滅回数が閾値Ｔｔ以上であるか否かを判定する。ノイズ検知部１２は、所定の時間内の点滅回数が閾値Ｔｔ以上であると判定するとステップＳ１３６に進み、所定の時間内の点滅回数が閾値Ｔｔ未満であると判定すると、一連の処理を終了する。
【００７８】
（ステップＳ１３６）
ノイズ検知部１２は、判別内容として、色点滅ノイズが存在することを示す情報（発生フレームＮｏ、発生時刻など）を、バス１６を介してＣＰＵ１３に出力し、一連の処理を終了する。
【００７９】
なお、色点滅ノイズの検出に用いる各閾値等は、図３を参照して説明した輝度点滅ノイズの検出に用いる各閾値等と同じであっても良いし、異なっても良い。
【００８０】
また、上述した例では、輝度点滅ノイズの検知と色点滅ノイズの検知とを、それぞれ独立して行う例を示したが、両者の検知結果を複合的に判断してノイズの検知を行っても良い。また、一方の検知結果を他方の検知に反映させても良い。
【００８１】
また、上述の例では、１フレームの画像データを取得するたびに、一連の検知処理を行う例を示したが、数フレームの画像データを取得するごとに、一連の検知処理を行っても良いし、すべてのフレームを取得した後に、一連の検知処理を行っても良い。この場合、例えば、図１０に示した差分値の変化の状態を示すグラフをブロック数分作成し、これらのグラフを総合的に解析することにより、より詳細な点滅ノイズの検知を行うこともできる。
【００８２】
また、例えば、連続するフレーム間で点滅ノイズの形状などが微妙に変化した場合であっても、確実に点滅ノイズとして検知するために、図１１に示す処理をさらに行っても良い。図１１中のステップ番号は、図３中のステップ番号に対応する。図１１に示すように、ステップＳ１２１のブロック単位での輝度点滅の検出を行った結果、Ｆ（ｎ−１）およびＦ（ｎ）の間で、点滅ノイズが微妙に移動している場合、ステップＳ１２３のフレーム単位での輝度点滅の検出を行うと、輝度点滅が検出された領域の数が５以下となるため、Ｆ（ｎ−１）およびＦ（ｎ）の両方において、輝度点滅は検出されない。そこで、図１１に示すように、ステップＳ１２１＊として、１つ前のフレームにおけるブロック単位での輝度点滅との論理和の算出（ＯＲ合成）を行う。このような処理を行うことにより、例えば、Ｆ（ｎ）において輝度点滅が検出された領域の数が５以上となるため、Ｆ（ｎ）においてフレーム単位の輝度点滅を検出することができる。なお、本実施形態において検知対象とした点滅ノイズは、２フレーム連続で含まれるということはない。そこで、上述した処理を行った際に、２フレーム連続でフレーム単位での輝度点滅が検出された場合には、何れかのフレームの輝度点滅を無視し、一方のフレームの輝度点滅のみを有効とすると良い。
【００８３】
そして、ノイズの検知の結果は、アラーム出力部１４を介したユーザへの報知に用いられても良いし、入出力Ｉ／Ｆ1を介してノイズ検知装置１１の外部に出力されても良い。また、対象動画像のタグ情報などに、検知したノイズの種類などを示す情報として記録しても良い。
【００８４】
また、上述の例で説明した各処理は、ハードウエアで行っても良いし、ＣＰＵ１３によるソフトウェアで行っても良い。
【００８５】
上記のように、本実施形態のノイズ検知装置は、処理の対象となる対象動画像の情報を取得し、対象動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する。そして、領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する。さらに、複数枚の画像間において、現在の画像における特徴量と、１つ前の画像における特徴量との差分に基づいて領域の特徴量の変化が増加又は減少であるかを判定し、判定した状態に基づき特徴量の変化量を算出する。そして、判定した状態が増加から減少を経て、その他の任意の状態に変化した場合に、特徴量の変化量に基づいて、動画像の任意の領域に領域ノイズが含まれるか否かを判定し、判定結果に基づいて、動画像に点滅ノイズが含まれるか否かの判定を行うものである。
【００８６】
よって、本実施形態の構成によれば、動画像に含まれる点滅ノイズが画像において局部的に含まれる場合であっても、その点滅ノイズを検知することができる。また、経時変化に基づいて状態を判定し、状態に応じて点滅ノイズの検知を行うことにより、誤検出や検出漏れを防ぐことができる。そのため、動画像に含まれる点滅ノイズを、精度良く的確に自動で検知することができる。
【００８７】
また、本実施形態によれば、動画像を構成するそれぞれの画像単位で点滅ノイズが含まれるか否かを判定し、判定結果に基づいて、対象動画像に点滅ノイズが含まれるか否かの判定を行う。そのため、局所的に発生する点滅ノイズと全体的に発生する点滅ノイズとの両方を区別して、検知することが可能となる。
【００８８】
なお、上述した例では、ユーザによるプログラム実行指示に応じて、一連の処理を実行する例を示したが、本発明はこの例に限定されない。例えば、ノイズ検知装置１１が何らかの動画像の画像データを読み込むたびに、自動で一連の処理を実行しても良い。
【００８９】
＜実施形態の補足事項＞
（１）上記実施形態で説明した各処理や各閾値などは一例であり本発明はこの例に限定されない。
【００９０】
例えば、上記実施形態では、「鮮やかな赤色の点滅」が、「１フレームの所定の面積以上の頻度」で、「１秒間に３回以上」発生する点滅ノイズを検知対象として挙げたが、他の性質を有する点滅ノイズを検知対象としても良い。例えば、「シアンの点滅」などを検知対象としても良い。赤色以外の点滅ノイズを検知対象とする際には、その性質に応じて各種テーブルや閾値を定めれば良い。また、複数色の色点滅ノイズを検知対象としても良い。このような場合には、それぞれの色の色点滅ノイズを独立に検出すれば良い。
【００９１】
また、上記実施形態では、ＹＨＳＶ変換部２１により、色空間をＨＳＶ色空間に変換した後に一連の処理を行う例を示したが、ＨＳＶ色空間以外の色空間に変換する構成としても良い。
【００９２】
また、上記実施形態では、ブロック単位、フレーム単位、動画像単位の順で点滅ノイズの検出を行う例を示したが、検知対象の動画像が複数フィールドからなる場合には、ブロック単位、フィールド単位、動画像単位の順で点滅ノイズの検出を行っても良い。また、フレーム単位で点滅ノイズの検出を省略し、ブロック単位で点滅ノイズの検出を行った結果に基づいて、動画像全体に点滅ノイズが含まれるか否かの判定を行っても良い。
【００９３】
（２）上記実施形態で説明したノイズ検知装置による処理を実行するノイズ検知プログラムも本発明の具体的態様として有効である。このノイズ検知プログラムは、磁気ディスクなどの記憶媒体に記憶されたものであっても良いし、インターネットなどを介してダウンロード可能なものであっても良い。また、上記実施形態で説明したノイズ検知装置を備えた画像処理装置や再生装置（例えば、フォトビューアー、デジタルフォトフレーム、各種印刷装置など）も本発明の具体的態様として有効である。上述した再生装置においては、画像の再生を行う際に一連の処理を実行する構成としても良い。
【００９４】
（３）上記実施形態の各画像処理および各判定の方法は一例であり、本発明はこの例に限定されない。
【００９５】
以上の詳細な説明により、実施形態の特徴点および利点は明らかになるであろう。これは、特許請求の範囲が、その精神および権利範囲を逸脱しない範囲で前述のような実施形態の特徴点および利点にまで及ぶことを意図する。また、当該技術分野において通常の知識を有する者であれば、あらゆる改良および変更に容易に想到できるはずであり、発明性を有する実施形態の範囲を前述したものに限定する意図はなく、実施形態に開示された範囲に含まれる適当な改良物および均等物によることも可能である。
【符号の説明】
【００９６】
１１…ノイズ検知装置、１２…ノイズ検知部、１３…ＣＰＵ
【技術分野】
【０００１】
本発明は、ノイズ検知装置、再生装置、およびノイズ検知プログラムに関する。
【背景技術】
【０００２】
動画像においては、特定の要因に起因する固有のノイズが発生することが知られている。例えば、動画像において輝度や色が短い時間内に大きく変化する点滅ノイズがある。そこで、このような点滅ノイズの検知を自動化することが考えられている。例えば、特許文献１の発明では、フレーム画像にサンプリング位置を表す標本点を複数設定し、標本点の色情報を順次抽出して判断を行うことにより、点滅ノイズを自動的に検知する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第４４７６１２５号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１の発明は、各標本点の色情報を、フレーム全体で平均化しているため、正しい検知が行われない場合がある。例えば、上述した平均化により求められた平均値は、「フレームの一部が非常に明るい点滅ノイズ」と「フレーム全体が中程度に明るい点滅ノイズ」とで同じになってしまう場合がある。
【０００５】
本発明の目的は、動画像に含まれる点滅ノイズを、精度良く的確に自動で検知するための手段を提供することにある。
【課題を解決するための手段】
【０００６】
一の態様のノイズ検知装置は、処理の対象となる動画像の情報を取得する取得部と、前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割部と、前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出部と、前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定部と、前記状態判定部により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出部と、前記状態判定部により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定部と、前記領域ノイズ判定部の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定部とを備える。
【０００７】
なお、前記状態判定部は、現在の画像における前記特徴量と１つ前の画像における前記特徴量との差分が予め定められた閾値を越えないときには、１つ前の判定を維持しても良い。
【０００８】
また、前記特徴量変化算出部は、前記状態判定部により判定した前記状態が１つ前の画像における前記状態と同一のときは前記差分の値を累積しても良い。
【０００９】
前記状態判定部は前記増加もしくは前記減少のどちらかの状態を所定時間維持した場合に定常状態と判定しても良い。
【００１０】
また、前記ノイズ判定部は、前記領域ノイズ判定部による判定結果に基づいて、前記動画像を構成するそれぞれの画像単位で前記点滅ノイズが含まれるか否かを判定し、判定結果に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行っても良い。
【００１１】
また、前記ノイズ判定部は、前記画像単位で前記点滅ノイズが含まれるか否かを判定した判定結果に基づいて、前記対象動画像において、所定の時間内に所定の回数以上の前記点滅ノイズが含まれるか否かの判定を行っても良い。
【００１２】
また、前記領域ノイズ判定部は、前記特徴量の変化量が所定の閾値より大きい場合に、前記対象動画像の前記任意の領域に前記点滅ノイズが含まれると判定しても良い。
【００１３】
また、前記ノイズ判定部は、前記特徴量変化算出部により算出された前記特徴量の変化量に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行う際に、連続する少なくとも２枚の前記画像における前記判定結果を加味して判定を行っても良い。
【００１４】
また、前記算出部は、前記特徴量として、前記画像の輝度に関する特徴量と、前記画像の色情報に関する特徴量との少なくとも一方を算出しても良い。
【００１５】
一の態様の再生装置は、動画像を記録する記録部と、前記動画像を再生する再生部と、上述した何れかのノイズ検知装置とを備え、前記取得部は、前記記録部から前記対象動画像の情報を取得する。
【００１６】
一の態様のノイズ検知プログラムは、処理の対象となる動画像の情報を取得する取得処理と、前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割処理と、前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出処理と、前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定処理と、前記状態判定処理により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出処理と、前記状態判定処理により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定処理と、前記領域ノイズ判定処理の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定処理とをコンピュータに実行させる。
【発明の効果】
【００１７】
本発明によれば、動画像に含まれる点滅ノイズを、精度良く的確に自動で検知するための手段を提供することができる。
【図面の簡単な説明】
【００１８】
【図１】ノイズ検知装置の構成例を示すブロック図
【図２】ノイズ検知時のノイズ検知装置の動作例を示す流れ図
【図３】ノイズ検知時のノイズ検知装置の動作例を示す流れ図（続き）
【図４】ノイズ検知時のノイズ検知装置の動作例を示す流れ図（続き）
【図５】分割処理について説明する図
【図６】色相に関する重み付けテーブルの例
【図７】彩度に関する重み付けテーブルの例
【図８】明度に関する重み付けテーブルの例
【図９】差分値の変化の状態について説明する図
【図１０】差分値の変化の状態について説明する別の図
【図１１】輝度点滅の検出の変形例について説明する図
【発明を実施するための形態】
【００１９】
図１は、実施形態でのノイズ検知装置の構成例を示すブロック図である。ノイズ検知装置には、処理の対象となる動画像（対象動画像）について、ノイズを検知するためのノイズ検知プログラムが予めインストールされる。
【００２０】
なお、対象動画像はどのようなものであっても良い。例えば、デジタル画像を生成可能な撮像装置により生成されたものであっても良いし、アナログの動画像の画像データをデジタルデータに変換したものであっても良いし、ビデオテープなどに記録された動画像をデジタルデータに変換したものであっても良い。また、コンピュータなどにより作成された動画像であっても良い。
【００２１】
また、以下では、対象動画像の全フレームをノイズ検知の対象として処理を行う例を示すが、対象動画像の一部のフレームのみをノイズ検知の対象として処理を行っても良い。この場合、ノイズ検知の対象となるフレームは、ユーザ操作に基づいて指定されても良いし、対象動画像の情報などに基づいて自動で指定されても良い。
【００２２】
図１に示すノイズ検知装置１１は、ノイズ検知部１２、ＣＰＵ１３、アラーム出力部１４および入出力Ｉ／Ｆ１５、バス１６を有している。ＣＰＵ１３は、入出力Ｉ／Ｆ１４と相互に接続される。また、ノイズ検知部１２の出力は、バス１６を介してＣＰＵ１３に接続される。さらに、アラーム出力部１４は、ＣＰＵ１３により制御される。
【００２３】
ノイズ検知装置１１に入力された対象動画像の画像データは、ノイズ検知部１２に入力される。
【００２４】
さらに、ノイズ検知装置１１には、入出力Ｉ／Ｆ１４を介して、不図示の入力デバイス（キーボード、ポインティングデバイスなど）やモニタ、ＬＡＮ接続のためのネットワークケーブルなどが接続されている。
【００２５】
また、ノイズ検知装置１１は、不図示の記憶装置（例えば、ハードディスクや、不揮発性の半導体メモリなどの記憶媒体で構成される）を備える。この記憶装置には、画像処理プログラムや、プログラムの実行に必要となる各種のデータが記録されている。
【００２６】
ＣＰＵ１３は、ノイズ検知装置１１の各部を統括的に制御するプロセッサである。また、アラーム出力部１４は、スピーカ、モニタ、ランプなどの報知部材を備え、ノイズ検知部１２による検知結果をユーザに報知する。
【００２７】
ノイズ検知部１２は、図１に示すように、対象動画像が入力されるＹＨＳＶ変換部３１、輝度点滅ノイズを検知する輝度点滅ノイズ検知部２２、色点滅ノイズを検知する色点滅ノイズ検知部２３を有する。そして、輝度点滅ノイズ検知部２２は、Ｙ評価値算出部３１、ブロック輝度点滅検出部３２、フレーム輝度点滅判定部３３、輝度点滅判定部３４の各部を備え、色点滅ノイズ検知部２３は、Ｈ評価値算出部３５、Ｓ評価値算出部３６、Ｖ評価値算出部３７、ブロック色情報算出部３８、ブロック色点滅検出部３９、フレーム色点滅判定部４０、色点滅判定部４１の各部を備える。
【００２８】
以上説明した構成のノイズ検知装置１１は、予め定められた固有の点滅ノイズを検知する。検知の対象となる点滅ノイズはどのようなものであっても良いが、以下では、「鮮やかな赤色の点滅」が、「１フレームの所定の面積以上の頻度」で、「１秒間に３回以上」発生する点滅ノイズを検知対象の例として説明する。また、以下では、上述した点滅ノイズを検知する際に、「輝度点滅」および「色点滅」の２つの要素について検知を行う例を説明する。なお、検知対象となる「固有の点滅ノイズ」には、表現上の必要に基づき対象動画像に存在する点滅も含まれる。例えば、アニメーションにおいて、爆発などを表現するための点滅も、「固有の点滅ノイズ」としてノイズ検知装置１１の検知対象になり得る。
【００２９】
まず、図２から図４の流れ図を参照しつつ、ノイズ検知部１２における点滅ノイズの検知の動作例を説明する。なお、図２から図４の流れ図の処理は、ユーザによるプログラム実行指示に応じて、各部がノイズ検知プログラムを実行することで開始される。
【００３０】
（ステップＳ１０１）
ノイズ検知部１２は、ユーザにより指定された対象動画像の１フレームの画像データを取得する。取得した１フレームの画像データは、図１に示すように、ＹＨＳＶ変換部２１に入力される。
【００３１】
（ステップＳ１０２）
ノイズ検知部１２は、ＹＨＳＶ変換部２１によりＹＨＳＶ変換処理を行う。
【００３２】
ＹＨＳＶ変換部２１は、入力信号に対して公知のＹＨＳＶ変換処理を施し、輝度信号（以下、Ｙ信号と称する）、色相信号（以下、Ｈ信号と称する）、彩度信号（以下、Ｓ信号と称する）、明度信号（以下、Ｖ信号と称する）の各信号を生成する。ＹＨＳＶ変換処理の内容は、入力信号の形式によって異なる。例えば、入力信号がＹＣｂＣｒ信号である場合には、Ｙ成分をそのままＹ信号として出力し、Ｈ信号、Ｓ信号、Ｖ信号をそれぞれ生成する。また、例えば、入力信号がＲＧＢ信号である場合には、公知のＲＧＢ色空間からＹＨＳＶ色空間への変換処理を行い、Ｙ信号、Ｈ信号、Ｓ信号、Ｖ信号をそれぞれ生成する。
【００３３】
生成されたＹ信号は、Ｙ評価値算出部３１に入力される。また、生成されたＨ信号は、Ｈ評価値算出部３５に入力される。また、生成されたＳ信号は、Ｓ評価値算出部３６に入力される。また、生成されたＶ信号は、Ｖ評価値算出部３７に入力される。
【００３４】
（ステップＳ１０３）
ノイズ検知部１２は、Ｙ評価値算出部３１により、分割処理を行う。Ｙ評価値算出部３１は、入力されたＹ信号について、フレームごとに複数の領域に分割する。Ｙ評価値算出部３１は、例えば、図５に示すように、各フレームのＹ信号を、縦横それぞれ５ずつの２５の領域に分割する。この分割による２５の領域を、それぞれ、Ｂ(１)〜Ｂ(２５)と称する。
【００３５】
また、ノイズ検知部１２は、Ｈ評価値算出部３５、Ｓ評価値算出部３６、Ｖ評価値算出部３７により、それぞれ、Ｈ信号、Ｓ信号、Ｖ信号に対して同様の分割処理を行い、上述したＢ(１)〜Ｂ(２５)の２５の領域に分割する。
【００３６】
なお、図５の例では、５×５に等分割する例を示したが、他の分割方法であっても良い。例えば、フレーム内の場所によって大きさの違う領域に分割しても良い。
【００３７】
さらに、対象動画像の内容や、対象動画像を撮影時の撮影モードなどに応じて、分割方法を適宜変更する構成としても良い。
【００３８】
（ステップＳ１０４）
ノイズ検知部１２は、Ｙ評価値算出部３１により、評価値算出処理を行う。Ｙ評価値算出部３１は、ステップＳ１０３で分割したＢ(１)〜Ｂ(２５)の２５の領域ごとに、評価値を算出する。Ｙ評価値算出部３１は、例えば、評価値として、各領域に含まれるＹ信号の平均値を算出する。この結果、Ｂ(１)〜Ｂ(２５)の２５の領域に対応して、２５の評価値（以下、Ｅｙ(１)〜Ｅｙ(２５)と称する。）が算出される。この評価値は、ブロック輝度点滅検出部３２に入力され、輝度点滅ノイズの検出に用いられる（詳細は後述する）。
【００３９】
また、ノイズ検知部１２は、Ｈ評価値算出部３５により、Ｈ信号に対して同様の処理を行い、２５の評価値（以下、Ｅｈ(１)〜Ｅｈ(２５)と称する。）を算出し、Ｓ評価値算出部３６により、Ｓ信号に対して同様の処理を行い、２５の評価値（以下、Ｅｓ(１)〜Ｅｓ(２５)と称する。）を算出し、Ｖ評価値算出部３７により、Ｖ信号に対して同様の処理を行い、２５の評価値（以下、Ｅｖ(１)〜Ｅｖ(２５)と称する。）を算出する。
【００４０】
さらに、ノイズ検知部１２は、ブロック色情報算出部３８により、色情報に関する評価値算出処理を行う。ブロック色情報算出部３８は、上述したＨ信号に基づく評価値（Ｅｈ(１)〜Ｅｈ(２５)）と、Ｓ信号に基づく評価値（Ｅｓ(１)〜Ｅｓ(２５)）と、Ｖ信号に基づく評価値（Ｅｖ(１)〜Ｅｖ(２５)）とに対して、重み付け積算を行い、色情報に関する評価値（以下、Ｅｃ(１)〜Ｅｃ(２５)と称する。）を算出する。
【００４１】
重みは、検知対象の点滅ノイズの性質に応じて定められる。本実施形態では、「鮮やかな赤色の点滅」の点滅ノイズが検知対象であるため、赤色の純度の最も高い色相がピークになるようなテーブルを用いて重み付けを行う。
【００４２】
図６から図８は、それぞれ、色相、彩度、明度に関する重み付けテーブル（それぞれＴｈ、Ｔｓ、Ｔｖと称する）の一例である。図６に示すように、彩度に関しては、「鮮やかな赤色の点滅」の点滅ノイズに合わせて、彩度が０°がピークになるようなテーブルを用いる。
【００４３】
ブロック色情報算出部３８は、領域ごとに、これらのテーブルを用いて色情報に関する評価値（以下、Ｅｃ(１)〜Ｅｃ(２５)と称する。）を算出する。
【００４４】
任意の領域Ｂ(Ｘ)における評価値Ｅｃ(Ｘ)は、以下の式で算出される。
【００４５】
Ｅｃ(Ｘ)＝｛Ｔｈにより重み付けしたＥｈ(Ｘ)｝＊｛Ｔｓにより重み付けしたＥｓ(Ｘ)｝＊｛Ｔｖにより重み付けしたＥｖ(Ｘ)｝
ブロック色情報算出部３８は、Ｂ(１)〜Ｂ(２５)のそれぞれについて同様の処理を行い、色情報に関する評価値（Ｅｃ(１)〜Ｅｃ(２５)）を算出する。この評価値は、ブロック色点滅検出部３９に入力され、色点滅ノイズの検出に用いられる（詳細は後述する）。
【００４６】
なお、重み付けを行う際に、テーブル以外の手法を用いても良い。また、彩度に関するテーブルＴｓと明度に関するテーブルＴｖについては、それぞれ用意しても良いし、同じものを利用しても良い。
【００４７】
また、輝度情報に関する評価値、および、色情報に関する評価値を算出する際に、各領域に適宜重み付けを行ってから評価値を算出しても良い。例えば、中央の領域（例えば、図５の領域Ｂ(１３)）について重みを大きくし、外側へ向かう程重みが小さくなるように、領域ごとに重み付けを行ってから評価値を算出しても良い。
【００４８】
（ステップＳ１０５）
ノイズ検知部１２は、ブロック輝度点滅検出部３２、フレーム輝度点滅判定部３３、輝度点滅判定部３４の各部により、輝度点滅検出を行う。検出の詳細は後述する。
【００４９】
（ステップＳ１０６）
ノイズ検知部１２は、ブロック色点滅検出部３９、フレーム色点滅判定部４０、色点滅判定部４１の各部により、色点滅検出を行う。検出の詳細は後述する。
【００５０】
（ステップＳ１０７）
ＣＰＵ１３は、ステップＳ１０２からステップＳ１０６の処理を、全フレーム分行ったか否かを判定する。ＣＰＵ１３は、全フレーム分終了したと判定すると一連の処理を終了し、全フレーム分終了していないと判定すると、ステップＳ１０８に進む。
【００５１】
（ステップＳ１０８）
ノイズ検知部１２は、次のフレームの画像データを取得し、ステップＳ１０２に戻る。
【００５２】
次に、図３の流れ図を参照しつつ、ステップＳ１０５の輝度点滅検出処理時の輝度点滅ノイズ検知部２２における輝度点滅ノイズの検知の動作例を説明する。
【００５３】
（ステップＳ１２１）
ノイズ検知部１２は、ブロック輝度点滅検出部３２により、ブロック単位で輝度点滅の検出を行う。ブロック輝度点滅検出部３２は、以下の４つの処理を領域ごとに行うことにより、ブロック単位で輝度点滅の検出を行う。この検出により、領域Ｂ(１)〜Ｂ(２５)のうち、輝度点滅が含まれる領域（ブロック）を検出することができる。以下では、任意の領域Ｂ(Ｘ)を例に挙げて説明する。
（ａ）差分値の算出
ブロック輝度点滅検出部３２は、フレームの画像が取得されるたびに、取得したフレームと１つ前のフレームとに関して、ステップＳ１０４で算出した輝度情報に関する評価値Ｅｙ(Ｘ)の差分値を算出する。
（ｂ）状態の監視
ブロック輝度点滅検出部３２は、図９に示す条件にしたがって、上述した差分値の変化の状態が、「増加中」、「減少中」、「定常」のうち何れの状態であるかを監視する。図９において、「有効な増加あり」とは、上述した差分値が正の値で（取得したフレームの評価値＞１つ前のフレームの評価値）、かつ、差分値の絶対値が所定の閾値より大きい場合である。このような場合には、状態は「増加中」となる。また、図９において、「有効な減少あり」とは、上述した差分値が負の値で（取得したフレームの評価値＜１つ前のフレームの評価値）、かつ、差分値の絶対値が所定の閾値より大きい場合である。このような場合には、状態は「減少中」となる。一方、所定のフレーム間に渡って「有効な増加なし」かつ「有効な減少なし」である場合には、状態は「定常」となる。なお、有効な増加および減少を判別するための閾値、および、上述した所定のフレームの数は、検知対象の点滅ノイズの性質に応じて予め定められる。
【００５４】
上述した３つの状態の変化について、図１０を参照して例示する。図１０は、任意の領域Ｂ(Ｘ)における評価値Ｅｙ(Ｘ)の変化を示す一例である。図１０において、点線のグラフは評価値Ｅｙ(Ｘ)のアナログ信号の変化を示し、実線グラフは各処理時の評価値Ｅｙ(Ｘ)のデジタル的な変化を示す。また、図１０の横軸はフレームＮｏ（つまり、時間）を示し、縦軸は評価値Ｅｙ(Ｘ)を示す。なお、図１０において、Ｆ（Ｘ）は、フレームＮｏがＸであることを示す。また、図１０の例では、説明のために、フレームＮｏを「１」から順に付しているが、対象動画像のどの部分であっても同様である。また、図１０の例では、上述した３つの状態のうち、「増加中」および「減少中」のみを例示し、「定常」については特に例示していない。
【００５５】
図１０において、Ｆ（２）からＦ（３）への変化は、上述した「有効な増加あり」には相当しない。これは、Ｆ（３）の評価値＞Ｆ（２）の評価値ではあるが、Ｆ（２）およびＦ（３）の評価値の差分値の絶対値が所定の閾値より小さいためである。Ｆ（３）からＦ（４）への変化についても同様である。一方、Ｆ（４）からＦ（５）への変化は、上述した「有効な増加あり」に相当する。これは、Ｆ（５）の評価値＞Ｆ（４）の評価値であり、かつ、Ｆ（４）およびＦ（５）の評価値の差分値の絶対値が所定の閾値より大きいためである。このタイミングで、ブロック輝度点滅検出部３２は、状態が「増加中」に変化したと判定し、後述する「状態が増加中である場合の処理」を実行する。
【００５６】
続いて、Ｆ（５）からＦ（６）への変化、および、Ｆ（６）からＦ（７）への変化は、図９で説明した何れの条件も満たさないため、状態は変化せず、「増加中」のままである。そして、Ｆ（７）からＦ（８）への変化は、上述した「有効な減少あり」に相当する。これは、Ｆ（８）の評価値＜Ｆ（７）の評価値であり、かつ、Ｆ（７）およびＦ（８）の評価値の差分値の絶対値が所定の閾値より大きいためである。このタイミングで、ブロック輝度点滅検出部３２は、状態が「減少中」に変化したと判定し、後述する「状態が減少中である場合の処理」を実行する。
【００５７】
続いて、Ｆ（８）からＦ（９）への変化、および、Ｆ（９）からＦ（１０）への変化は、図９で説明した何れの条件も満たさないため、状態は変化せず、「減少中」のままである。そして、Ｆ（１０）からＦ（１１）への変化は、上述した「有効な増加あり」に相当するため、このタイミングで、ブロック輝度点滅検出部３２は、状態が「増加中」に変化したと判定し、後述する「状態が増加中である場合の処理」を実行する。
【００５８】
以降同様であるが、状態が「増加中」であるＦ（１５）からＦ（１６）への変化は、Ｆ（１６）の評価値＜Ｆ（１５）の評価値ではあるが、Ｆ（１５）およびＦ（１６）の評価値の差分値の絶対値が所定の閾値より小さいため、上述した「有効な減少あり」に相当せず、「無効な減少」となる。そのため、状態は変化せず、「増加中」のままである。
（ｃ）状態別の処理
＜増加中＞
状態が「増加中」の場合、ブロック輝度点滅検出部３２は、上述した差分値の算出および状態の監視に加えて、状態が増加中に変化した際の「有効な増加」を起点として、上述した差分値を累積していき、累積値として更新する。例えば、図１０の例では、Ｆ（４）からＦ（５）への変化のタイミングで状態が「増加中」に変化するため、図１０に示すように、Ｆ（４）から差分値が累積されることになる。また、累積値の更新は、状態が「増加中」からその他の状態に変化するまで行われる。このように求められた累積値は、後述する点滅候補の検出時に用いられる。
＜減少中＞
状態が「減少中」の場合、ブロック輝度点滅検出部３２は、上述した差分値の算出および状態の監視のみを行う。なお、ブロック輝度点滅検出部３２は、上述した累積値の算出を減少中においても行い、後述する点滅候補の検出時に加味しても良い。
＜定常＞
状態が「定常」の場合、ブロック輝度点滅検出部３２は、上述した差分値の算出および状態の監視のみを行う。
（ｄ）状態が「増加中」から「減少中」を経て、その他の任意の状態に変化した際の検出処理
状態が「増加中」から「減少中」を経て、その他の任意の状態に変化すると、ブロック輝度点滅検出部３２は、まず、上述した「増加中」に保持した累積値を、所定の閾値と比較する。なお、上述したその他の任意の状態とは、「増加中」、または、「定常」の状態の他に、差分値が０以上となった場合も含む。そして、累積値＞所定の閾値である場合には、状態が「減少中」に変化した際の「有効な減少」の起点に対応するフレーム近傍に点滅候補が存在すると推定し、この時刻に輝度点滅ノイズが含まれていると判定する。例えば、図１０の例では、Ｆ（４）からＦ（５）への変化に応じて状態が「増加中」に変化し、さらに、Ｆ（７）からＦ（８）への変化に応じて状態が「減少中」に変化し、さらに、Ｆ（１０）からＦ（１１）への変化に応じて状態が「増加中」に変化するため、状態が「減少中」に変化した際の「有効な減少」の起点は、Ｆ（７）となり、Ｆ（７）の近傍に点滅候補が存在すると推定し、この時刻に輝度点滅ノイズが含まれていると判定する。
【００５９】
なお、累積値＜所定の閾値である場合とは、輝度に関する評価値の触れ幅が小さく、輝度点滅ノイズと判定するには不十分な点滅が含まれる場合である。また、累積値と比較する閾値は、検知対象の点滅ノイズの性質に応じて予め定められる。
【００６０】
また、状態の変化に「定常」が含まれる場合とは、輝度に関する評価値の触れ幅は十分である一方、変化時間が長く、輝度に関する評価値の変化スピードが緩やかな点滅が含まれる場合である。このような点滅は、評価値の極値が存在するものの、点滅ノイズとしては検出しない。
【００６１】
ブロック輝度点滅検出部３２は、上述した４つの処理を領域Ｂ(１)〜Ｂ(２５)のそれぞれについて行い、ステップＳ１２２に進む。
【００６２】
なお、ステップＳ１２１で説明した輝度点滅の検出方法は一例である。例えば、単純に極大値や極小値などを求めることにより輝度点滅の検出を行っても良い。また、例えば、評価値の変化の立ち上がり部分のみを検出することにより輝度点滅の検出を行っても良い。
【００６３】
また、ステップＳ１２１で説明した輝度点滅の検出において、評価値の変化におけるベースの明るさを加味して輝度点滅の検出を行っても良い。例えば、ベースの明るさが暗いほど、輝度点滅の影響が大きく、ベースの明るさが明るいほど、輝度点滅の影響は目立ちにくい。そこで、ベースの明るさが暗いほど、上述した累積値と比較する閾値を小さくするなど、評価値の変化におけるベースの明るさを加味して輝度点滅の検出を行っても良い。
【００６４】
（ステップＳ１２２）
ノイズ検知部１２は、ステップＳ１２１で行ったブロック単位での輝度点滅の検出の結果に基づいて、ブロック単位での輝度点滅があるか否かを判定する。ノイズ検知部１２は、ブロック単位での輝度点滅があると判定するとステップＳ１２３に進み、ブロック単位での輝度点滅がないと判定すると、一連の処理を終了する。
【００６５】
（ステップＳ１２３）
ノイズ検知部１２は、フレーム輝度点滅判定部３３により、フレーム単位で輝度点滅の検出を行う。フレーム輝度点滅判定部３３は、フレーム単位で、そのフレーム内において輝度点滅が検出された領域の数をカウントし、領域の数が所定の閾値より大きい場合には、そのフレームには輝度点滅ノイズが含まれると判定する。閾値は、検知対象の点滅ノイズの性質に応じて定められる。本実施形態では、「１フレームの所定の面積以上の頻度」の点滅ノイズが検知対象であるため、例えば、閾値が５である場合には、輝度点滅が検出された領域の数が５以上、すなわち、フレームの２０％以上の領域において輝度点滅が発生している場合に、そのフレームに輝度点滅ノイズが含まれていると判定する。
【００６６】
このように、面積に閾値を設けて点滅ノイズが含まれるか否かを判定することにより、離散的に発生する点滅ノイズも、まとまって発生する点滅ノイズも検知することが可能になる。
【００６７】
（ステップＳ１２４）
ノイズ検知部１２は、ステップＳ１２３で行ったフレーム単位での輝度点滅の検出の結果に基づいて、フレーム単位での輝度点滅があるか否かを判定する。ノイズ検知部１２は、フレーム単位での輝度点滅があると判定するとステップＳ１２５に進み、フレーム単位での輝度点滅がないと判定すると、一連の処理を終了する。
【００６８】
（ステップＳ１２５）
ノイズ検知部１２は、輝度点滅判定部３４により、フレーム単位の輝度点滅について、所定の時間内の点滅回数が閾値Ｔｔ以上であるか否かを判定する。ノイズ検知部１２は、所定の時間内の点滅回数が閾値Ｔｔ以上であると判定するとステップＳ１２６に進み、所定の時間内の点滅回数が閾値Ｔｔ未満であると判定すると、一連の処理を終了する。
【００６９】
閾値Ｔｈは、検知対象の点滅ノイズの性質に応じて定められる。本実施形態では、「１秒間に３回以上」の点滅ノイズが検知対象であるため、１秒間の点滅回数の閾値Ｔｈ＝３となる。
【００７０】
（ステップＳ１２６）
ノイズ検知部１２は、判別内容として、輝度点滅ノイズが存在することを示す情報（発生フレームＮｏ、発生時刻など）を、バス１６を介してＣＰＵ１３に出力し、一連の処理を終了する。
【００７１】
このような処理を行うことにより、例えば、３秒間に、１回のみフレーム単位の輝度点滅が発生した場合には、輝度点滅ノイズは存在しないと判定されることになる。
【００７２】
次に、図４の流れ図を参照しつつ、ステップＳ１０６の色点滅検出処理時の色点滅ノイズ検知部２３における色点滅ノイズの検知の動作例を説明する。なお、色点滅ノイズの検知は、図３を参照して説明した輝度点滅ノイズの検知と共通する処理を含むため、以下では、輝度点滅ノイズの検知と異なる部分についてのみ説明する。
【００７３】
（ステップＳ１３１）
ノイズ検知部１２は、ブロック色点滅検出部３９により、ステップＳ１０４で算出した色情報に関する評価値（Ｅｃ(１)〜Ｅｃ(２５)）を用いて、上述した図３のステップＳ１２１と同様の処理を行い、ブロック単位で色点滅の検出を行う。
【００７４】
（ステップＳ１３２）
ノイズ検知部１２は、ステップＳ１３１で行ったブロック単位での色点滅の検出の結果に基づいて、ブロック単位での色点滅があるか否かを判定する。ノイズ検知部１２は、ブロック単位での色点滅があると判定するとステップＳ１３３に進み、ブロック単位での色点滅がないと判定すると、一連の処理を終了する。
【００７５】
（ステップＳ１３３）
ノイズ検知部１２は、フレーム色点滅判定部４０により、上述した図３のステップＳ１２３と同様の処理を行い、フレーム単位で色点滅の検出を行う。
【００７６】
（ステップＳ１３４）
ノイズ検知部１２は、ステップＳ１３３で行ったフレーム単位での色点滅の検出の結果に基づいて、フレーム単位での色点滅があるか否かを判定する。ノイズ検知部１２は、フレーム単位での色点滅があると判定するとステップＳ１３５に進み、フレーム単位での色点滅がないと判定すると、一連の処理を終了する。
【００７７】
（ステップＳ１３５）
ノイズ検知部１２は、色点滅判定部４１により、フレーム単位の色点滅について、所定の時間内の点滅回数が閾値Ｔｔ以上であるか否かを判定する。ノイズ検知部１２は、所定の時間内の点滅回数が閾値Ｔｔ以上であると判定するとステップＳ１３６に進み、所定の時間内の点滅回数が閾値Ｔｔ未満であると判定すると、一連の処理を終了する。
【００７８】
（ステップＳ１３６）
ノイズ検知部１２は、判別内容として、色点滅ノイズが存在することを示す情報（発生フレームＮｏ、発生時刻など）を、バス１６を介してＣＰＵ１３に出力し、一連の処理を終了する。
【００７９】
なお、色点滅ノイズの検出に用いる各閾値等は、図３を参照して説明した輝度点滅ノイズの検出に用いる各閾値等と同じであっても良いし、異なっても良い。
【００８０】
また、上述した例では、輝度点滅ノイズの検知と色点滅ノイズの検知とを、それぞれ独立して行う例を示したが、両者の検知結果を複合的に判断してノイズの検知を行っても良い。また、一方の検知結果を他方の検知に反映させても良い。
【００８１】
また、上述の例では、１フレームの画像データを取得するたびに、一連の検知処理を行う例を示したが、数フレームの画像データを取得するごとに、一連の検知処理を行っても良いし、すべてのフレームを取得した後に、一連の検知処理を行っても良い。この場合、例えば、図１０に示した差分値の変化の状態を示すグラフをブロック数分作成し、これらのグラフを総合的に解析することにより、より詳細な点滅ノイズの検知を行うこともできる。
【００８２】
また、例えば、連続するフレーム間で点滅ノイズの形状などが微妙に変化した場合であっても、確実に点滅ノイズとして検知するために、図１１に示す処理をさらに行っても良い。図１１中のステップ番号は、図３中のステップ番号に対応する。図１１に示すように、ステップＳ１２１のブロック単位での輝度点滅の検出を行った結果、Ｆ（ｎ−１）およびＦ（ｎ）の間で、点滅ノイズが微妙に移動している場合、ステップＳ１２３のフレーム単位での輝度点滅の検出を行うと、輝度点滅が検出された領域の数が５以下となるため、Ｆ（ｎ−１）およびＦ（ｎ）の両方において、輝度点滅は検出されない。そこで、図１１に示すように、ステップＳ１２１＊として、１つ前のフレームにおけるブロック単位での輝度点滅との論理和の算出（ＯＲ合成）を行う。このような処理を行うことにより、例えば、Ｆ（ｎ）において輝度点滅が検出された領域の数が５以上となるため、Ｆ（ｎ）においてフレーム単位の輝度点滅を検出することができる。なお、本実施形態において検知対象とした点滅ノイズは、２フレーム連続で含まれるということはない。そこで、上述した処理を行った際に、２フレーム連続でフレーム単位での輝度点滅が検出された場合には、何れかのフレームの輝度点滅を無視し、一方のフレームの輝度点滅のみを有効とすると良い。
【００８３】
そして、ノイズの検知の結果は、アラーム出力部１４を介したユーザへの報知に用いられても良いし、入出力Ｉ／Ｆ1を介してノイズ検知装置１１の外部に出力されても良い。また、対象動画像のタグ情報などに、検知したノイズの種類などを示す情報として記録しても良い。
【００８４】
また、上述の例で説明した各処理は、ハードウエアで行っても良いし、ＣＰＵ１３によるソフトウェアで行っても良い。
【００８５】
上記のように、本実施形態のノイズ検知装置は、処理の対象となる対象動画像の情報を取得し、対象動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する。そして、領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する。さらに、複数枚の画像間において、現在の画像における特徴量と、１つ前の画像における特徴量との差分に基づいて領域の特徴量の変化が増加又は減少であるかを判定し、判定した状態に基づき特徴量の変化量を算出する。そして、判定した状態が増加から減少を経て、その他の任意の状態に変化した場合に、特徴量の変化量に基づいて、動画像の任意の領域に領域ノイズが含まれるか否かを判定し、判定結果に基づいて、動画像に点滅ノイズが含まれるか否かの判定を行うものである。
【００８６】
よって、本実施形態の構成によれば、動画像に含まれる点滅ノイズが画像において局部的に含まれる場合であっても、その点滅ノイズを検知することができる。また、経時変化に基づいて状態を判定し、状態に応じて点滅ノイズの検知を行うことにより、誤検出や検出漏れを防ぐことができる。そのため、動画像に含まれる点滅ノイズを、精度良く的確に自動で検知することができる。
【００８７】
また、本実施形態によれば、動画像を構成するそれぞれの画像単位で点滅ノイズが含まれるか否かを判定し、判定結果に基づいて、対象動画像に点滅ノイズが含まれるか否かの判定を行う。そのため、局所的に発生する点滅ノイズと全体的に発生する点滅ノイズとの両方を区別して、検知することが可能となる。
【００８８】
なお、上述した例では、ユーザによるプログラム実行指示に応じて、一連の処理を実行する例を示したが、本発明はこの例に限定されない。例えば、ノイズ検知装置１１が何らかの動画像の画像データを読み込むたびに、自動で一連の処理を実行しても良い。
【００８９】
＜実施形態の補足事項＞
（１）上記実施形態で説明した各処理や各閾値などは一例であり本発明はこの例に限定されない。
【００９０】
例えば、上記実施形態では、「鮮やかな赤色の点滅」が、「１フレームの所定の面積以上の頻度」で、「１秒間に３回以上」発生する点滅ノイズを検知対象として挙げたが、他の性質を有する点滅ノイズを検知対象としても良い。例えば、「シアンの点滅」などを検知対象としても良い。赤色以外の点滅ノイズを検知対象とする際には、その性質に応じて各種テーブルや閾値を定めれば良い。また、複数色の色点滅ノイズを検知対象としても良い。このような場合には、それぞれの色の色点滅ノイズを独立に検出すれば良い。
【００９１】
また、上記実施形態では、ＹＨＳＶ変換部２１により、色空間をＨＳＶ色空間に変換した後に一連の処理を行う例を示したが、ＨＳＶ色空間以外の色空間に変換する構成としても良い。
【００９２】
また、上記実施形態では、ブロック単位、フレーム単位、動画像単位の順で点滅ノイズの検出を行う例を示したが、検知対象の動画像が複数フィールドからなる場合には、ブロック単位、フィールド単位、動画像単位の順で点滅ノイズの検出を行っても良い。また、フレーム単位で点滅ノイズの検出を省略し、ブロック単位で点滅ノイズの検出を行った結果に基づいて、動画像全体に点滅ノイズが含まれるか否かの判定を行っても良い。
【００９３】
（２）上記実施形態で説明したノイズ検知装置による処理を実行するノイズ検知プログラムも本発明の具体的態様として有効である。このノイズ検知プログラムは、磁気ディスクなどの記憶媒体に記憶されたものであっても良いし、インターネットなどを介してダウンロード可能なものであっても良い。また、上記実施形態で説明したノイズ検知装置を備えた画像処理装置や再生装置（例えば、フォトビューアー、デジタルフォトフレーム、各種印刷装置など）も本発明の具体的態様として有効である。上述した再生装置においては、画像の再生を行う際に一連の処理を実行する構成としても良い。
【００９４】
（３）上記実施形態の各画像処理および各判定の方法は一例であり、本発明はこの例に限定されない。
【００９５】
以上の詳細な説明により、実施形態の特徴点および利点は明らかになるであろう。これは、特許請求の範囲が、その精神および権利範囲を逸脱しない範囲で前述のような実施形態の特徴点および利点にまで及ぶことを意図する。また、当該技術分野において通常の知識を有する者であれば、あらゆる改良および変更に容易に想到できるはずであり、発明性を有する実施形態の範囲を前述したものに限定する意図はなく、実施形態に開示された範囲に含まれる適当な改良物および均等物によることも可能である。
【符号の説明】
【００９６】
１１…ノイズ検知装置、１２…ノイズ検知部、１３…ＣＰＵ
【特許請求の範囲】
【請求項１】
処理の対象となる動画像の情報を取得する取得部と、
前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割部と、
前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出部と、
前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定部と、
前記状態判定部により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出部と、
前記状態判定部により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定部と、
前記領域ノイズ判定部の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定部と
を備えることを特徴とするノイズ検知装置。
【請求項２】
請求項１に記載のノイズ検知装置において、
前記状態判定部は、現在の画像における前記特徴量と１つ前の画像における前記特徴量との差分が予め定められた閾値を越えないときには、１つ前の判定を維持する
ことを特徴とするノイズ検知装置。
【請求項３】
請求項１または請求項２に記載のノイズ検知装置において、
前記特徴量変化算出部は、前記状態判定部により判定した前記状態が１つ前の画像における前記状態と同一のときは前記差分の値を累積する
ことを特徴とするノイズ検知装置。
【請求項４】
請求項１から請求項３の何れか一項に記載のノイズ検知装置において、
前記状態判定部は前記増加もしくは前記減少のどちらかの状態を所定時間維持した場合に定常状態と判定する
ことを特徴とするノイズ検知装置。
【請求項５】
請求項１から請求項４の何れか一項に記載のノイズ検知装置において、
前記ノイズ判定部は、前記領域ノイズ判定部による判定結果に基づいて、前記動画像を構成するそれぞれの画像単位で前記点滅ノイズが含まれるか否かを判定し、判定結果に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行う
ことを特徴とするノイズ検知装置。
【請求項６】
請求項１から請求項５の何れか一項に記載のノイズ検知装置において、
前記ノイズ判定部は、前記画像単位で前記点滅ノイズが含まれるか否かを判定した判定結果に基づいて、前記対象動画像において、所定の時間内に所定の回数以上の前記点滅ノイズが含まれるか否かの判定を行う
ことを特徴とするノイズ検知装置。
【請求項７】
請求項１から請求項６の何れか一項に記載のノイズ検知装置において、
前記領域ノイズ判定部は、前記特徴量の変化量が所定の閾値より大きい場合に、前記対象動画像の前記任意の領域に前記点滅ノイズが含まれると判定する
ことを特徴とするノイズ検知装置。
【請求項８】
請求項１から請求項７の何れか一項に記載のノイズ検知装置において、
前記ノイズ判定部は、前記特徴量変化算出部により算出された前記特徴量の変化量に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行う際に、連続する少なくとも２枚の前記画像における前記判定結果を加味して判定を行う
ことを特徴とするノイズ検知装置。
【請求項９】
請求項１から請求項８の何れか１項に記載のノイズ検知装置において、
前記算出部は、前記特徴量として、前記画像の輝度に関する特徴量と、前記画像の色情報に関する特徴量との少なくとも一方を算出する
ことを特徴とするノイズ検知装置。
【請求項１０】
動画像を記録する記録部と、
前記動画像を再生する再生部と、
請求項１から請求項９の何れか１項に記載のノイズ検知装置とを備え、
前記取得部は、前記記録部から前記対象動画像の情報を取得する
ことを特徴とする再生装置。
【請求項１１】
処理の対象となる動画像の情報を取得する取得処理と、
前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割処理と、
前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出処理と、
前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定処理と、
前記状態判定処理により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出処理と、
前記状態判定処理により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定処理と、
前記領域ノイズ判定処理の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定処理と
をコンピュータに実行させるノイズ検知プログラム。
【請求項１】
処理の対象となる動画像の情報を取得する取得部と、
前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割部と、
前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出部と、
前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定部と、
前記状態判定部により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出部と、
前記状態判定部により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定部と、
前記領域ノイズ判定部の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定部と
を備えることを特徴とするノイズ検知装置。
【請求項２】
請求項１に記載のノイズ検知装置において、
前記状態判定部は、現在の画像における前記特徴量と１つ前の画像における前記特徴量との差分が予め定められた閾値を越えないときには、１つ前の判定を維持する
ことを特徴とするノイズ検知装置。
【請求項３】
請求項１または請求項２に記載のノイズ検知装置において、
前記特徴量変化算出部は、前記状態判定部により判定した前記状態が１つ前の画像における前記状態と同一のときは前記差分の値を累積する
ことを特徴とするノイズ検知装置。
【請求項４】
請求項１から請求項３の何れか一項に記載のノイズ検知装置において、
前記状態判定部は前記増加もしくは前記減少のどちらかの状態を所定時間維持した場合に定常状態と判定する
ことを特徴とするノイズ検知装置。
【請求項５】
請求項１から請求項４の何れか一項に記載のノイズ検知装置において、
前記ノイズ判定部は、前記領域ノイズ判定部による判定結果に基づいて、前記動画像を構成するそれぞれの画像単位で前記点滅ノイズが含まれるか否かを判定し、判定結果に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行う
ことを特徴とするノイズ検知装置。
【請求項６】
請求項１から請求項５の何れか一項に記載のノイズ検知装置において、
前記ノイズ判定部は、前記画像単位で前記点滅ノイズが含まれるか否かを判定した判定結果に基づいて、前記対象動画像において、所定の時間内に所定の回数以上の前記点滅ノイズが含まれるか否かの判定を行う
ことを特徴とするノイズ検知装置。
【請求項７】
請求項１から請求項６の何れか一項に記載のノイズ検知装置において、
前記領域ノイズ判定部は、前記特徴量の変化量が所定の閾値より大きい場合に、前記対象動画像の前記任意の領域に前記点滅ノイズが含まれると判定する
ことを特徴とするノイズ検知装置。
【請求項８】
請求項１から請求項７の何れか一項に記載のノイズ検知装置において、
前記ノイズ判定部は、前記特徴量変化算出部により算出された前記特徴量の変化量に基づいて、前記対象動画像に前記点滅ノイズが含まれるか否かの判定を行う際に、連続する少なくとも２枚の前記画像における前記判定結果を加味して判定を行う
ことを特徴とするノイズ検知装置。
【請求項９】
請求項１から請求項８の何れか１項に記載のノイズ検知装置において、
前記算出部は、前記特徴量として、前記画像の輝度に関する特徴量と、前記画像の色情報に関する特徴量との少なくとも一方を算出する
ことを特徴とするノイズ検知装置。
【請求項１０】
動画像を記録する記録部と、
前記動画像を再生する再生部と、
請求項１から請求項９の何れか１項に記載のノイズ検知装置とを備え、
前記取得部は、前記記録部から前記対象動画像の情報を取得する
ことを特徴とする再生装置。
【請求項１１】
処理の対象となる動画像の情報を取得する取得処理と、
前記動画像を構成する複数枚の画像のそれぞれを、複数の領域に分割する分割処理と、
前記領域ごとに、検知対象の点滅ノイズに関する特徴量を算出する算出処理と、
前記複数枚の画像間において、現在の画像における前記特徴量と、１つ前の画像における前記特徴量との差分に基づいて前記領域の前記特徴量の変化が増加又は減少であるかを判定する状態判定処理と、
前記状態判定処理により判定した前記状態に基づき前記特徴量の変化量を算出する特徴量変化算出処理と、
前記状態判定処理により判定した状態が前記増加から前記減少を経て、その他の任意の状態に変化した場合に、前記特徴量の変化量に基づいて、前記動画像の前記任意の領域に領域ノイズが含まれるか否かを判定する領域ノイズ判定処理と、
前記領域ノイズ判定処理の判定結果に基づいて、前記動画像に前記点滅ノイズが含まれるか否かの判定を行うノイズ判定処理と
をコンピュータに実行させるノイズ検知プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１３−１０６２０７（Ｐ２０１３−１０６２０７Ａ）
【公開日】平成２５年５月３０日（２０１３．５．３０）
【国際特許分類】
【出願番号】特願２０１１−２４９０３７（Ｐ２０１１−２４９０３７）
【出願日】平成２３年１１月１４日（２０１１．１１．１４）
【出願人】（５９２２１７０９３）株式会社ニコンシステム (102)
【Ｆターム（参考）】
【公開日】平成２５年５月３０日（２０１３．５．３０）
【国際特許分類】
【出願日】平成２３年１１月１４日（２０１１．１１．１４）
【出願人】（５９２２１７０９３）株式会社ニコンシステム (102)
【Ｆターム（参考）】
[ Back to top ]