画像処理装置及びその制御方法
【課題】 スーパーインポーズ画像の画質低下の抑制と、シネマ映像の検出精度の向上を実現する画像処理装置及びその制御方法を提供する。
【解決手段】 各フィールド映像を複数のブロックに分割し、ブロック毎にシネマ映像かどうか検出する。そして、所定の期間における検出結果に基づいて、各ブロックを、シネマ映像である可能性に応じた複数の度合のいずれかに分類する。そして、シネマ映像である可能性が最も高い度合いや、最も低い度合いに分類されたブロックの割合または数により、全画面を対象としたシネマ処理の適用（Ｏｎ）、不適用（Ｏｆｆ）を決定する。具体的には、シネマ映像でないという可能性が最も高い度合に分類されたブロックが所定割合又は所定数存在する場合にシネマ処理の適用を決定する。
【解決手段】 各フィールド映像を複数のブロックに分割し、ブロック毎にシネマ映像かどうか検出する。そして、所定の期間における検出結果に基づいて、各ブロックを、シネマ映像である可能性に応じた複数の度合のいずれかに分類する。そして、シネマ映像である可能性が最も高い度合いや、最も低い度合いに分類されたブロックの割合または数により、全画面を対象としたシネマ処理の適用（Ｏｎ）、不適用（Ｏｆｆ）を決定する。具体的には、シネマ映像でないという可能性が最も高い度合に分類されたブロックが所定割合又は所定数存在する場合にシネマ処理の適用を決定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びその制御方法に関し、特にテレシネ映像信号の検出を行う画像処理装置及びその制御方法に関する。
【背景技術】
【０００２】
フィルム撮影された映画など、フレームレート２４Ｈｚ（２４フレーム／秒）の映像を、テレビジョンフォーマットの３０フレーム／秒（フィールドレート６０Ｈｚ）の映像に変換することを、テレシネ変換という。例えば、テレシネ変換として代表的な２−３プルダウン方式は、２４Ｈｚ映像の連続した２フレームを、６０Ｈｚ映像の連続した５フィールドに置き換えることにより、２４Ｈｚの映像を６０Ｈｚの映像に変換する方式である。２４Ｈｚ映像の１フレーム目を６０Ｈｚ映像の２フィールドで読み出し、２フレーム目を６０Ｈｚ映像の３フィールドで読み出す。
【０００３】
テレシネ変換された６０Ｈｚ映像（以下、シネマ映像）には、６０Ｈｚの動きがあるテロップなどのスーパーインポーズ画像や、６０Ｈｚで変化するランダムノイズ（以下、ノイズ）が含まれる場合がある。ランダムノイズは、例えばテレシネ変換によって発生しうる。
【０００４】
ここで、スーパーインポーズ画像が追加されたシネマ映像を検出し、インタレース−プログレッシブ（ＩＰ）変換など、シネマ映像に対して適用する予め定められた画像処理（シネマ処理）を行うと、スーパーインポーズ画像部分に画質低下が発生する。この画質低下はコーミングノイズと呼ばれる。シネマ処理におけるＩＰ変換とは、シネマ映像作成時のプルダウンシーケンスにあわせて前後フィールドより補間してインタレース映像からプログレッシブ映像を生成するものである。スーパーインポーズ画像での画質低下を防止するため、特許文献１では、１フレーム画像をシネマ映像部とスーパーインポーズ画像部に領域分割し、シネマ映像部にはシネマ処理を適用し、スーパーインポーズ画像部にはシネマ処理を適用しない。
【０００５】
また、フレーム間の相関からシネマ映像の自動検出を行うことが知られているが、ノイズを含んだシネマ映像は、非シネマ映像と誤判定がされる場合がある。そのため、特許文献２では、シネマ映像に含まれるノイズが多い時は、フレーム間が相関していると判定され易くなるように判定用の閾値を変更することで、ノイズが含まれる場合でもシネマ映像の検出精度を向上させることが開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００５−１２４９８号公報
【特許文献２】特開平１０−９３９３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１の方法では、スーパーインポーズ画像を含んだシネマ映像において、シネマ処理される領域とされない領域との境界で、処理の違いが視認できてしまうという問題がある。
【０００８】
また、特許文献２の方法では、ノイズがあるシネマ映像の検出精度は向上するが、ノイズがある非シネマ映像をシネマ映像と誤検出する確率も増加してしまう。両者はトレードオフの関係にあり、適切な判定用の閾値を設定することは困難であった。
【０００９】
本発明はこのような従来技術の課題に鑑みなされたものであり、スーパーインポーズ画像の画質低下の抑制と、シネマ映像の検出精度の向上を実現する画像処理装置及びその制御方法の提供を目的とする。
【課題を解決するための手段】
【００１０】
上述の目的は、フィールド単位の入力映像の各フィールド映像を複数のブロックに分割する分割手段と、複数のブロックの各々について、入力映像がテレシネ変換されたシネマ映像であるかどうかを検出する検出手段と、入力映像の所定数の連続するフィールド映像に対する検出手段による検出結果に応じて、複数のブロックを、シネマ映像である可能性に応じた複数の度合のいずれかに分類する分類手段と、分類手段による分類の結果に基づいて、シネマ映像に対して適用する予め定められた画像処理であるシネマ処理を、入力映像の全画面に対して適用するか否かを決定する決定手段と、決定手段の決定に従って、入力映像に対してシネマ処理又はシネマ処理とは異なる画像処理を適用する画像処理手段と、を有し、決定手段は、複数のブロックのうち、分類手段によってシネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、シネマ処理の適用を決定することを特徴とする画像処理装置によって達成される。
【発明の効果】
【００１１】
このような構成により、本発明によれば、スーパーインポーズ画像の画質低下の抑制と、シネマ映像の検出精度の向上を実現することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施形態に係る画像処理装置の機能構成例を示すブロック図。
【図２】図１の画面分割部における分割方法の例を示す図。
【図３】図１の統計量取得部におけるヒストグラム取得方法の例を示す図。
【図４】図１の統計量取得部１０３の機能構成例を示すブロック図。
【図５】２−３プルダウン方式によるシネマ映像のフィールドシーケンスと、統計量取得部がヒストグラムを取得するフィールド画像の組み合わせを示す図。
【図６】同一画像間の差分ヒストグラムと、異なる画像間の差分ヒストグラムの例を示す図。
【図７】本発明の第１の実施形態におけるシネマ処理決定部の動作を説明するためのフローチャート。
【図８】本発明の第２の実施形態におけるシネマ処理決定部の動作を説明するためのフローチャート。
【発明を実施するための形態】
【００１３】
（第１の実施形態）
以下、図面を参照しながら、本発明に係る画像処理装置及びその制御方法を、その好適かつ例示的な実施形態に基づいて詳細に説明する。
図１は、本発明の実施形態に係る画像処理装置１００の機能構成例を示すブロック図である。画像処理装置１００は、画面分割部１０２、統計量取得部１０３、検出率算出部１０４、検出率分類部１０５、シネマ処理決定部１０６、及び画像処理部１０７を有する。なお、これら各部の１つ以上は、ＣＰＵがソフトウェアを実行することにより実施されてもよいし、専用のハードウェア（ＡＳＩＣなど）によって実施されてもよい。
【００１４】
画面分割部１０２は、入力映像１０１の１フレームを複数のブロックに分割する。本実施形態では図２に示すように、水平方向に４等分、垂直方向に２等分して、８ブロックに分割する。このように、画面分割部１０２は、各ブロックの水平、垂直のサイズが等しくなるように１フレームを分割する。図２に示す例では、１フレームの水平画素数は２０４８画素、垂直画素数は１０８０画素であるため、各ブロックの水平サイズは５１２画素、垂直サイズは５４０画素である。なお、均等に分割できない場合は、各ブロックのサイズができるだけ等しくなるように分割してもよい。
【００１５】
統計量取得部１０３は、画面分割部１０２で分割されたブロック毎にフレーム差分ヒストグラムを取得する。図３に、統計量取得部１０３の構成例を示す。フレームメモリ３０２により、入力映像１０１を１フレーム遅延させる。差分算出部３０３は画素信号３０１とフレームメモリ３０２の出力より、同位置の画素毎に差分値を算出する。ヒストグラム取得部３０４は、差分算出部３０３が算出した差分値を、画面分割部１０２から供給される分割情報に基づいてブロック毎に分類し、ヒストグラムを取得（作成）する。ヒストグラムは図４に示すように、フレーム差分値ごとの度数分布を示す。なお、度数を算出するフレーム差分値の幅は、適宜定めることができる。
【００１６】
検出率算出部１０４は、統計量取得部１０３が作成したヒストグラムに基づいて、シネマ映像の検出率をブロック毎に算出する。ここでは、シネマ映像の検出が２−３プルダウンの検出であるとして説明する。ただし、２−２プルダウンなど他のテレシネ変換の検出であってもよい。図５は、２−３プルダウン方式によるシネマ映像の構成例を示す図である。このように、インターレス信号において１フィールド毎に映像が切り替わっており、同一映像（映像Ａ，Ｃ，Ｅ）が連続する３フィールドと、同一映像（映像Ｂ，Ｄ）が連続する２フィールドが交互含まれている。ここで１フレーム＝２フィールドである。
【００１７】
このようなフィールド単位のシネマ映像において、１フレーム期間ずれた（１フィールドおき）のフィールド映像の差分は、（１）〜（１１）に示すフィールドの組み合わせで算出される。図５からわかるように、（１）、（６）、（１１）の組み合わせは同一映像のフィールドからなり、残りは異なる映像のフィールドの組み合わせからなる。このように、１フレーム期間ずれた（１フィールドおき）のフィールド映像が、５回に１回、同一映像フィールドの組み合わせ、４回は異なる映像フィールドの組み合わせが連続する映像シーケンスを検出することで、２−３プルダウン方式のシネマ映像を検出する。このような、２−３プルダウン方式に特徴的な映像シーケンスを以下、５フィールドシーケンスという。なお、５フィールドシーケンスは図５の（１）〜（５）のように、先頭に同一映像フィールドの組み合わせがくる場合だけではなく、（２）〜（６）、（３）〜（７）、（４）〜（８）、（５）〜（９）のような並びであってもよい。つまり、異なる映像のフィールドの組み合わせの４回連続と、同一映像フィールドの繰り返しが１回というシーケンスの繰り返しが検出できればよい。
【００１８】
このように、本実施形態では、フィールド単位の入力映像について、１フィールド置きの２フィールド間の差分値のヒストグラムをブロック毎に求め、差分値の度数分布からシネマ映像に特定のフィールドシーケンスをブロック毎に検出する。
【００１９】
１フレームごとの映像が同一か異なるかの判定は、統計量取得部１０３が作成したヒストグラムを用いて行う。２つの同一映像に対するフレーム差分のヒストグラムは、映像間の相関が高いため、フレーム差分値が小さい領域に度数が集中する図６（ａ）のような度数分布となる。図６（ａ）はフレーム差分値０に度数が集中する分布であり、フレーム差がほとんど無いことが分かる為、同一映像と判定できる。
【００２０】
一方、異なる２つの映像に対するフレーム差分のヒストグラムは、図６（ｂ）のような度数分布となる。図６（ｂ）はフレーム差分値が大きい領域に度数が集中する分布となっており、フレーム差が大きい為、差異画像と判定できる。
【００２１】
検出率算出部１０４は、所定数の連続するフィールド映像（本実施形態では６０フィールドとする）に対し、５フィールドシーケンスが検出された回数によって検出率を算出する。検出率算出部１０４は、ブロック毎に検出率を算出する。例えば、５フィールドシーケンスが連続する６０フィールドの区間で検出された回数が１２回なら１００％、０回検出されれば０％とする。また、３回ならば２５％として、９回ならば７５％とする。なお、連続する６０フィールドにおいて、すべて同一映像のフィールドの組み合わせが検出された場合には、検出率は０％とせずに静止画と判定し、静止画を表す特定の値（例えば「静」）とする。
【００２２】
例えば、シネマ映像でありながら検出率０％を示すブロックは、５フィールドシーケンスでは無いスーパーインポーズ画像であることが考えられる。また、２５％や７５％の検出率が発生する場合、ノイズの影響により同一映像と判定できないシーケンスがある程度含まれていることが考えられる。
【００２３】
なお、本実施形態ではシネマ映像の検出率を算出する所定数の連続するフィールド映像として６０フィールドの場合を例示したが、検出率の精度を上げる為に６０フィールドより多くのフィールドに対して算出しても良い。また、検出スピードを上げる為に６０フィールド未満のフィールドに対して算出しても良い。
【００２４】
検出率分類部１０５は、検出率算出部１０４でブロック毎に算出した検出率を例えば３段階の度合（ランク）に分類する。本実施形態では検出率分類部１０５は、検出率１００％〜８１％を「高」、８０％〜２０％を「中」、１９％〜０％を「低」とする。なお、検出率「静」は「中」に分類する。このように、シネマ映像である可能性が高いと判断されるブロックは度合「高」に、シネマ映像である可能性が低いと判断されるブロックは度合「低」に、どちらか判別が難しいブロックは度合「中」にそれぞれ分類される。なお、検出率の範囲と度合との関係の対応づけは検出方法などに依存するため、実験などによる経験的な基準によって適宜決定することができる。
【００２５】
シネマ処理決定部１０６は、検出率分類部１０５が分類したブロック毎の検出率の度合の組み合わせにより、全画面に対するシネマ処理のＯｎ／Ｏｆｆ（適用／不適用）を決定する。決定方法を図７のフローチャートを用いて説明する。
【００２６】
ブロック毎の検出率度合「高」、「中」、「低」が、検出率分類部１０５からシネマ処理決定部１０６に入力される（Ｓ７０１）。シネマ処理決定部１０６は、度合「低」のブロックが１つ以上存在するか判定する（Ｓ７０２）。存在する場合、シネマ処理決定部１０６は、全画面シネマ処理をＯｆｆと決定する（Ｓ７０４）。
【００２７】
一方、度合が「低」のブロックが存在しない場合、シネマ処理決定部１０６は、度合が「高」のブロックが１つ以上存在するか判定する（Ｓ７０３）。存在する場合、シネマ処理決定部１０６は、全画面シネマ処理をＯｎと決定する（Ｓ７０５）。Ｓ７０３にて度合「高」のブロックが存在しない場合、すべてのブロックが度合「中」である為、シネマ処理決定部１０６は全画面シネマ処理をＯｆｆに決定する（Ｓ７０４）。
【００２８】
度合「低」のブロックが存在する場合、例えば、シネマ映像にスーパーインポーズ画像が追加された映像であることが考えられる。そのため、シネマ処理（特にＩＰ変換）を行うことによるスーパーインポーズ画像の画像低下を防止するため、シネマ処理をＯｆｆと決定する。また、全画面単位でシネマ処理の適用をＯｎ、Ｏｆｆするため、ブロック単位でＯｎ、Ｏｆｆさせた場合に生じる処理境界の問題は発生しない。
【００２９】
度合「高」のブロックが存在しない場合、すべてのブロックの検出率の度合が「中」である。この場合、ノイズなどの要因により、シネマ映像かどうかの判定が難しい映像であると判断できる。この場合、非シネマ映像をシネマ映像と誤検出してしまうと、画質低下が大きくみえてしまうため、画質低下を発生させないことを優先し、やはりシネマ処理をＯｆｆに決定する。
【００３０】
度合「低」のブロックが存在せず、かつ度合「高」のブロックが存在する映像は、スーパーインポーズ画像を含まず、かつシネマ映像ブロックが１つ以上ある映像である。この場合、シネマ処理決定部１０６は全画面に対するシネマ処理をＯｎにする。その理由は、ノイズによりシネマ映像判定が難しい度合「中」のブロックが存在しても、シネマ映像である確率が高い、度合「高」のブロックが１つでもあれば、全画面がシネマ映像である可能性が高い為である。
【００３１】
画像処理部１０７は、シネマ処理決定部１０６の決定に従い、入力映像に対して画像処理を適用する。本実施形態ではシネマ映像に対して適用する予め定められた画像処理（シネマ処理）の一例として、ＩＰ変換を行うものとする。画像処理部１０７は、シネマ処理Ｏｎの場合、５フィールドシーケンスの位相に応じて前後フィールドより補間を行う。例えば、図５の４フィールド目の映像ＢをＩＰ変換する場合、３フィールド目の映像Ａではなく、５フィールド目の映像Ｂを使用して補間を行う。また、５フィールド目の映像Ｂについては、４フィールド目の映像Ｂを使用して補間を行う。２フィールド目の映像Ａの補間は、１フィールド目か３フィールド目の映像Ａを用いる。このような補間方法によりフリッカーの無いＩＰ変換が可能になる。また、シネマ処理Ｏｆｆの場合、画像処理部１０７は、シネマ処理とは異なる画像処理の一例として、動き適応型のＩＰ変換を行う。動き適応型のＩＰ変換とは、画面内で動きがあるところはフィールド内補間を行い、動きがないところはフィールド間補間を行うものである。
【００３２】
なお、本実施形態においては、度合「低」のブロックが１つあればシネマ処理をＯｆｆとしたが、予め定められた数もしくは割合存在する場合にシネマ処理をＯｆｆと決定してもよい。同様に、度合「高」のブロックについても、予め定められた数もしくは割合存在する場合にシネマ処理をＯｎと決定してもよい。例えばブロックの数が多い場合や、検出率を求めるフィールド数が少ない場合、度合「高」や「低」のブロックが１つだけ存在することによりシネマ処理のＯｎ、Ｏｆｆを決定するよりも、ある程度の割合（数）の存在をもって決定した方が信頼性が高くなる。
【００３３】
以上説明したように、本実施形態によれば、各フィールド映像を複数のブロックに分割し、ブロック毎にシネマ映像かどうか検出する。そして、所定の期間における検出結果に基づいて、各ブロックを、シネマ映像である可能性に応じた複数の度合のいずれかに分類する。そして、シネマ映像である可能性が最も高い度合いや、最も低い度合いに分類されたブロックの割合または数により、全画面を対象としたシネマ処理の適用（Ｏｎ）、不適用（Ｏｆｆ）を決定する。具体的には、シネマ映像でないという可能性が最も高い度合に分類されたブロックが所定割合又は所定数存在する場合にシネマ処理の適用を決定する。これにより、スーパーインポーズ画像を含んだシネマ映像に対する画質低下を抑制しつつ、ノイズによるシネマ映像の誤判定を低減することができる。
【００３４】
（第２の実施形態）
次に、本発明の第２の実施形態について説明する。本実施形態に係る画像処理装置は、第１の実施形態に係る画像処理装置と、検出率分類部１０５とシネマ処理決定部１０６の動作のみが異なるため、これらの動作についてのみ説明する。
第１の実施形態では、検出率算出部１０４において検出率「静」を出力した場合、検出率分類部１０５はそのブロックを度合「中」に分類したが、本実施形態では度合「静」に分類する。すなわち、本実施形態における検出率分類部１０５は「高」「中」「低」「静」の４つの度合（レベル）に各ブロックを分類する。
【００３５】
そして、シネマ処理決定部１０６は、この４段階の度合の組み合わせに応じてシネマ処理のＯｎ、Ｏｆｆを決定する。この決定方法を図８のフローチャートを用いて説明する。図８において、図７と同じ処理には同じ参照数字を付して説明を省略する。図８では、Ｓ８０６とＳ８０７が新たに追加されているので、この追加処理について重点的に説明する。
【００３６】
Ｓ８０６においてシネマ処理決定部１０６は、度合「中」に分類されたブロックが１つ以上存在する場合は、シネマ処理をＯｆｆに決定する。上述の通り、度合「中」に分類されるブロックは、ノイズの影響を受けている可能性があり、シネマ映像の判定が難しい。そのため、誤検出によるシネマ処理の適用によって画質低下を発生させないことを優先し、シネマ処理決定部１０６はシネマ処理をＯｆｆに決定する。なお、ブロック毎にシネマ処理のＯｎ、Ｏｆｆを決定すると上述の通り処理を適用したブロックと適用しないブロックの境界が見えてしまうため、全画面単位でシネマ処理のＯｎ、Ｏｆｆを決定する。
【００３７】
Ｓ８０６において度合「中」に分類されたブロックが存在しない場合は、すべてのブロックが度合「静」に分類されている。これは画面全体が、シネマ映像検出期間（本実施形態では連続する６０フィールド）において静止画であることを示している。この場合、シネマ処理決定部１０６は、静止画になる直前の決定結果を保持する（Ｓ８０７）。これは、静止画の場合はシネマ映像かどうかの判定ができないためである。直前の決定結果を保持することで、例えば動画中に静止画が挿入されているような映像において、動画に戻った際に、元の動画と同様のシネマ処理をすぐに適用することが可能になる。
【００３８】
（その他の実施形態）
上述したシネマ映像の検出方法は、２−３プルダウン方式でテレシネ変換されたシネマ映像の検出方法の一例であったが、本発明はシネマ映像のテレシネ変換方法やシネマ映像の検出方法には依存しない。シネマ映像の検出と検出率の算出をブロック単位で行うことができれば、シネマ映像の検出方法は公知の任意の方法を採用しうる。
【００３９】
例えば、複数のテレシネ変換方法に対応するため、異なる複数の方法でシネマ映像の検出を行うようにし、その中の１つによる検出結果を用いるようにしてもよい。例えば、検出率の度合が「高」に分類されるブロックが最も多い検出結果を用いたり、「中」に分類されるブロックが最も少ない検出結果を用いるなど、状況に応じた条件で１つの検出結果を選択することができる。
【００４０】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【技術分野】
【０００１】
本発明は、画像処理装置及びその制御方法に関し、特にテレシネ映像信号の検出を行う画像処理装置及びその制御方法に関する。
【背景技術】
【０００２】
フィルム撮影された映画など、フレームレート２４Ｈｚ（２４フレーム／秒）の映像を、テレビジョンフォーマットの３０フレーム／秒（フィールドレート６０Ｈｚ）の映像に変換することを、テレシネ変換という。例えば、テレシネ変換として代表的な２−３プルダウン方式は、２４Ｈｚ映像の連続した２フレームを、６０Ｈｚ映像の連続した５フィールドに置き換えることにより、２４Ｈｚの映像を６０Ｈｚの映像に変換する方式である。２４Ｈｚ映像の１フレーム目を６０Ｈｚ映像の２フィールドで読み出し、２フレーム目を６０Ｈｚ映像の３フィールドで読み出す。
【０００３】
テレシネ変換された６０Ｈｚ映像（以下、シネマ映像）には、６０Ｈｚの動きがあるテロップなどのスーパーインポーズ画像や、６０Ｈｚで変化するランダムノイズ（以下、ノイズ）が含まれる場合がある。ランダムノイズは、例えばテレシネ変換によって発生しうる。
【０００４】
ここで、スーパーインポーズ画像が追加されたシネマ映像を検出し、インタレース−プログレッシブ（ＩＰ）変換など、シネマ映像に対して適用する予め定められた画像処理（シネマ処理）を行うと、スーパーインポーズ画像部分に画質低下が発生する。この画質低下はコーミングノイズと呼ばれる。シネマ処理におけるＩＰ変換とは、シネマ映像作成時のプルダウンシーケンスにあわせて前後フィールドより補間してインタレース映像からプログレッシブ映像を生成するものである。スーパーインポーズ画像での画質低下を防止するため、特許文献１では、１フレーム画像をシネマ映像部とスーパーインポーズ画像部に領域分割し、シネマ映像部にはシネマ処理を適用し、スーパーインポーズ画像部にはシネマ処理を適用しない。
【０００５】
また、フレーム間の相関からシネマ映像の自動検出を行うことが知られているが、ノイズを含んだシネマ映像は、非シネマ映像と誤判定がされる場合がある。そのため、特許文献２では、シネマ映像に含まれるノイズが多い時は、フレーム間が相関していると判定され易くなるように判定用の閾値を変更することで、ノイズが含まれる場合でもシネマ映像の検出精度を向上させることが開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００５−１２４９８号公報
【特許文献２】特開平１０−９３９３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１の方法では、スーパーインポーズ画像を含んだシネマ映像において、シネマ処理される領域とされない領域との境界で、処理の違いが視認できてしまうという問題がある。
【０００８】
また、特許文献２の方法では、ノイズがあるシネマ映像の検出精度は向上するが、ノイズがある非シネマ映像をシネマ映像と誤検出する確率も増加してしまう。両者はトレードオフの関係にあり、適切な判定用の閾値を設定することは困難であった。
【０００９】
本発明はこのような従来技術の課題に鑑みなされたものであり、スーパーインポーズ画像の画質低下の抑制と、シネマ映像の検出精度の向上を実現する画像処理装置及びその制御方法の提供を目的とする。
【課題を解決するための手段】
【００１０】
上述の目的は、フィールド単位の入力映像の各フィールド映像を複数のブロックに分割する分割手段と、複数のブロックの各々について、入力映像がテレシネ変換されたシネマ映像であるかどうかを検出する検出手段と、入力映像の所定数の連続するフィールド映像に対する検出手段による検出結果に応じて、複数のブロックを、シネマ映像である可能性に応じた複数の度合のいずれかに分類する分類手段と、分類手段による分類の結果に基づいて、シネマ映像に対して適用する予め定められた画像処理であるシネマ処理を、入力映像の全画面に対して適用するか否かを決定する決定手段と、決定手段の決定に従って、入力映像に対してシネマ処理又はシネマ処理とは異なる画像処理を適用する画像処理手段と、を有し、決定手段は、複数のブロックのうち、分類手段によってシネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、シネマ処理の適用を決定することを特徴とする画像処理装置によって達成される。
【発明の効果】
【００１１】
このような構成により、本発明によれば、スーパーインポーズ画像の画質低下の抑制と、シネマ映像の検出精度の向上を実現することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施形態に係る画像処理装置の機能構成例を示すブロック図。
【図２】図１の画面分割部における分割方法の例を示す図。
【図３】図１の統計量取得部におけるヒストグラム取得方法の例を示す図。
【図４】図１の統計量取得部１０３の機能構成例を示すブロック図。
【図５】２−３プルダウン方式によるシネマ映像のフィールドシーケンスと、統計量取得部がヒストグラムを取得するフィールド画像の組み合わせを示す図。
【図６】同一画像間の差分ヒストグラムと、異なる画像間の差分ヒストグラムの例を示す図。
【図７】本発明の第１の実施形態におけるシネマ処理決定部の動作を説明するためのフローチャート。
【図８】本発明の第２の実施形態におけるシネマ処理決定部の動作を説明するためのフローチャート。
【発明を実施するための形態】
【００１３】
（第１の実施形態）
以下、図面を参照しながら、本発明に係る画像処理装置及びその制御方法を、その好適かつ例示的な実施形態に基づいて詳細に説明する。
図１は、本発明の実施形態に係る画像処理装置１００の機能構成例を示すブロック図である。画像処理装置１００は、画面分割部１０２、統計量取得部１０３、検出率算出部１０４、検出率分類部１０５、シネマ処理決定部１０６、及び画像処理部１０７を有する。なお、これら各部の１つ以上は、ＣＰＵがソフトウェアを実行することにより実施されてもよいし、専用のハードウェア（ＡＳＩＣなど）によって実施されてもよい。
【００１４】
画面分割部１０２は、入力映像１０１の１フレームを複数のブロックに分割する。本実施形態では図２に示すように、水平方向に４等分、垂直方向に２等分して、８ブロックに分割する。このように、画面分割部１０２は、各ブロックの水平、垂直のサイズが等しくなるように１フレームを分割する。図２に示す例では、１フレームの水平画素数は２０４８画素、垂直画素数は１０８０画素であるため、各ブロックの水平サイズは５１２画素、垂直サイズは５４０画素である。なお、均等に分割できない場合は、各ブロックのサイズができるだけ等しくなるように分割してもよい。
【００１５】
統計量取得部１０３は、画面分割部１０２で分割されたブロック毎にフレーム差分ヒストグラムを取得する。図３に、統計量取得部１０３の構成例を示す。フレームメモリ３０２により、入力映像１０１を１フレーム遅延させる。差分算出部３０３は画素信号３０１とフレームメモリ３０２の出力より、同位置の画素毎に差分値を算出する。ヒストグラム取得部３０４は、差分算出部３０３が算出した差分値を、画面分割部１０２から供給される分割情報に基づいてブロック毎に分類し、ヒストグラムを取得（作成）する。ヒストグラムは図４に示すように、フレーム差分値ごとの度数分布を示す。なお、度数を算出するフレーム差分値の幅は、適宜定めることができる。
【００１６】
検出率算出部１０４は、統計量取得部１０３が作成したヒストグラムに基づいて、シネマ映像の検出率をブロック毎に算出する。ここでは、シネマ映像の検出が２−３プルダウンの検出であるとして説明する。ただし、２−２プルダウンなど他のテレシネ変換の検出であってもよい。図５は、２−３プルダウン方式によるシネマ映像の構成例を示す図である。このように、インターレス信号において１フィールド毎に映像が切り替わっており、同一映像（映像Ａ，Ｃ，Ｅ）が連続する３フィールドと、同一映像（映像Ｂ，Ｄ）が連続する２フィールドが交互含まれている。ここで１フレーム＝２フィールドである。
【００１７】
このようなフィールド単位のシネマ映像において、１フレーム期間ずれた（１フィールドおき）のフィールド映像の差分は、（１）〜（１１）に示すフィールドの組み合わせで算出される。図５からわかるように、（１）、（６）、（１１）の組み合わせは同一映像のフィールドからなり、残りは異なる映像のフィールドの組み合わせからなる。このように、１フレーム期間ずれた（１フィールドおき）のフィールド映像が、５回に１回、同一映像フィールドの組み合わせ、４回は異なる映像フィールドの組み合わせが連続する映像シーケンスを検出することで、２−３プルダウン方式のシネマ映像を検出する。このような、２−３プルダウン方式に特徴的な映像シーケンスを以下、５フィールドシーケンスという。なお、５フィールドシーケンスは図５の（１）〜（５）のように、先頭に同一映像フィールドの組み合わせがくる場合だけではなく、（２）〜（６）、（３）〜（７）、（４）〜（８）、（５）〜（９）のような並びであってもよい。つまり、異なる映像のフィールドの組み合わせの４回連続と、同一映像フィールドの繰り返しが１回というシーケンスの繰り返しが検出できればよい。
【００１８】
このように、本実施形態では、フィールド単位の入力映像について、１フィールド置きの２フィールド間の差分値のヒストグラムをブロック毎に求め、差分値の度数分布からシネマ映像に特定のフィールドシーケンスをブロック毎に検出する。
【００１９】
１フレームごとの映像が同一か異なるかの判定は、統計量取得部１０３が作成したヒストグラムを用いて行う。２つの同一映像に対するフレーム差分のヒストグラムは、映像間の相関が高いため、フレーム差分値が小さい領域に度数が集中する図６（ａ）のような度数分布となる。図６（ａ）はフレーム差分値０に度数が集中する分布であり、フレーム差がほとんど無いことが分かる為、同一映像と判定できる。
【００２０】
一方、異なる２つの映像に対するフレーム差分のヒストグラムは、図６（ｂ）のような度数分布となる。図６（ｂ）はフレーム差分値が大きい領域に度数が集中する分布となっており、フレーム差が大きい為、差異画像と判定できる。
【００２１】
検出率算出部１０４は、所定数の連続するフィールド映像（本実施形態では６０フィールドとする）に対し、５フィールドシーケンスが検出された回数によって検出率を算出する。検出率算出部１０４は、ブロック毎に検出率を算出する。例えば、５フィールドシーケンスが連続する６０フィールドの区間で検出された回数が１２回なら１００％、０回検出されれば０％とする。また、３回ならば２５％として、９回ならば７５％とする。なお、連続する６０フィールドにおいて、すべて同一映像のフィールドの組み合わせが検出された場合には、検出率は０％とせずに静止画と判定し、静止画を表す特定の値（例えば「静」）とする。
【００２２】
例えば、シネマ映像でありながら検出率０％を示すブロックは、５フィールドシーケンスでは無いスーパーインポーズ画像であることが考えられる。また、２５％や７５％の検出率が発生する場合、ノイズの影響により同一映像と判定できないシーケンスがある程度含まれていることが考えられる。
【００２３】
なお、本実施形態ではシネマ映像の検出率を算出する所定数の連続するフィールド映像として６０フィールドの場合を例示したが、検出率の精度を上げる為に６０フィールドより多くのフィールドに対して算出しても良い。また、検出スピードを上げる為に６０フィールド未満のフィールドに対して算出しても良い。
【００２４】
検出率分類部１０５は、検出率算出部１０４でブロック毎に算出した検出率を例えば３段階の度合（ランク）に分類する。本実施形態では検出率分類部１０５は、検出率１００％〜８１％を「高」、８０％〜２０％を「中」、１９％〜０％を「低」とする。なお、検出率「静」は「中」に分類する。このように、シネマ映像である可能性が高いと判断されるブロックは度合「高」に、シネマ映像である可能性が低いと判断されるブロックは度合「低」に、どちらか判別が難しいブロックは度合「中」にそれぞれ分類される。なお、検出率の範囲と度合との関係の対応づけは検出方法などに依存するため、実験などによる経験的な基準によって適宜決定することができる。
【００２５】
シネマ処理決定部１０６は、検出率分類部１０５が分類したブロック毎の検出率の度合の組み合わせにより、全画面に対するシネマ処理のＯｎ／Ｏｆｆ（適用／不適用）を決定する。決定方法を図７のフローチャートを用いて説明する。
【００２６】
ブロック毎の検出率度合「高」、「中」、「低」が、検出率分類部１０５からシネマ処理決定部１０６に入力される（Ｓ７０１）。シネマ処理決定部１０６は、度合「低」のブロックが１つ以上存在するか判定する（Ｓ７０２）。存在する場合、シネマ処理決定部１０６は、全画面シネマ処理をＯｆｆと決定する（Ｓ７０４）。
【００２７】
一方、度合が「低」のブロックが存在しない場合、シネマ処理決定部１０６は、度合が「高」のブロックが１つ以上存在するか判定する（Ｓ７０３）。存在する場合、シネマ処理決定部１０６は、全画面シネマ処理をＯｎと決定する（Ｓ７０５）。Ｓ７０３にて度合「高」のブロックが存在しない場合、すべてのブロックが度合「中」である為、シネマ処理決定部１０６は全画面シネマ処理をＯｆｆに決定する（Ｓ７０４）。
【００２８】
度合「低」のブロックが存在する場合、例えば、シネマ映像にスーパーインポーズ画像が追加された映像であることが考えられる。そのため、シネマ処理（特にＩＰ変換）を行うことによるスーパーインポーズ画像の画像低下を防止するため、シネマ処理をＯｆｆと決定する。また、全画面単位でシネマ処理の適用をＯｎ、Ｏｆｆするため、ブロック単位でＯｎ、Ｏｆｆさせた場合に生じる処理境界の問題は発生しない。
【００２９】
度合「高」のブロックが存在しない場合、すべてのブロックの検出率の度合が「中」である。この場合、ノイズなどの要因により、シネマ映像かどうかの判定が難しい映像であると判断できる。この場合、非シネマ映像をシネマ映像と誤検出してしまうと、画質低下が大きくみえてしまうため、画質低下を発生させないことを優先し、やはりシネマ処理をＯｆｆに決定する。
【００３０】
度合「低」のブロックが存在せず、かつ度合「高」のブロックが存在する映像は、スーパーインポーズ画像を含まず、かつシネマ映像ブロックが１つ以上ある映像である。この場合、シネマ処理決定部１０６は全画面に対するシネマ処理をＯｎにする。その理由は、ノイズによりシネマ映像判定が難しい度合「中」のブロックが存在しても、シネマ映像である確率が高い、度合「高」のブロックが１つでもあれば、全画面がシネマ映像である可能性が高い為である。
【００３１】
画像処理部１０７は、シネマ処理決定部１０６の決定に従い、入力映像に対して画像処理を適用する。本実施形態ではシネマ映像に対して適用する予め定められた画像処理（シネマ処理）の一例として、ＩＰ変換を行うものとする。画像処理部１０７は、シネマ処理Ｏｎの場合、５フィールドシーケンスの位相に応じて前後フィールドより補間を行う。例えば、図５の４フィールド目の映像ＢをＩＰ変換する場合、３フィールド目の映像Ａではなく、５フィールド目の映像Ｂを使用して補間を行う。また、５フィールド目の映像Ｂについては、４フィールド目の映像Ｂを使用して補間を行う。２フィールド目の映像Ａの補間は、１フィールド目か３フィールド目の映像Ａを用いる。このような補間方法によりフリッカーの無いＩＰ変換が可能になる。また、シネマ処理Ｏｆｆの場合、画像処理部１０７は、シネマ処理とは異なる画像処理の一例として、動き適応型のＩＰ変換を行う。動き適応型のＩＰ変換とは、画面内で動きがあるところはフィールド内補間を行い、動きがないところはフィールド間補間を行うものである。
【００３２】
なお、本実施形態においては、度合「低」のブロックが１つあればシネマ処理をＯｆｆとしたが、予め定められた数もしくは割合存在する場合にシネマ処理をＯｆｆと決定してもよい。同様に、度合「高」のブロックについても、予め定められた数もしくは割合存在する場合にシネマ処理をＯｎと決定してもよい。例えばブロックの数が多い場合や、検出率を求めるフィールド数が少ない場合、度合「高」や「低」のブロックが１つだけ存在することによりシネマ処理のＯｎ、Ｏｆｆを決定するよりも、ある程度の割合（数）の存在をもって決定した方が信頼性が高くなる。
【００３３】
以上説明したように、本実施形態によれば、各フィールド映像を複数のブロックに分割し、ブロック毎にシネマ映像かどうか検出する。そして、所定の期間における検出結果に基づいて、各ブロックを、シネマ映像である可能性に応じた複数の度合のいずれかに分類する。そして、シネマ映像である可能性が最も高い度合いや、最も低い度合いに分類されたブロックの割合または数により、全画面を対象としたシネマ処理の適用（Ｏｎ）、不適用（Ｏｆｆ）を決定する。具体的には、シネマ映像でないという可能性が最も高い度合に分類されたブロックが所定割合又は所定数存在する場合にシネマ処理の適用を決定する。これにより、スーパーインポーズ画像を含んだシネマ映像に対する画質低下を抑制しつつ、ノイズによるシネマ映像の誤判定を低減することができる。
【００３４】
（第２の実施形態）
次に、本発明の第２の実施形態について説明する。本実施形態に係る画像処理装置は、第１の実施形態に係る画像処理装置と、検出率分類部１０５とシネマ処理決定部１０６の動作のみが異なるため、これらの動作についてのみ説明する。
第１の実施形態では、検出率算出部１０４において検出率「静」を出力した場合、検出率分類部１０５はそのブロックを度合「中」に分類したが、本実施形態では度合「静」に分類する。すなわち、本実施形態における検出率分類部１０５は「高」「中」「低」「静」の４つの度合（レベル）に各ブロックを分類する。
【００３５】
そして、シネマ処理決定部１０６は、この４段階の度合の組み合わせに応じてシネマ処理のＯｎ、Ｏｆｆを決定する。この決定方法を図８のフローチャートを用いて説明する。図８において、図７と同じ処理には同じ参照数字を付して説明を省略する。図８では、Ｓ８０６とＳ８０７が新たに追加されているので、この追加処理について重点的に説明する。
【００３６】
Ｓ８０６においてシネマ処理決定部１０６は、度合「中」に分類されたブロックが１つ以上存在する場合は、シネマ処理をＯｆｆに決定する。上述の通り、度合「中」に分類されるブロックは、ノイズの影響を受けている可能性があり、シネマ映像の判定が難しい。そのため、誤検出によるシネマ処理の適用によって画質低下を発生させないことを優先し、シネマ処理決定部１０６はシネマ処理をＯｆｆに決定する。なお、ブロック毎にシネマ処理のＯｎ、Ｏｆｆを決定すると上述の通り処理を適用したブロックと適用しないブロックの境界が見えてしまうため、全画面単位でシネマ処理のＯｎ、Ｏｆｆを決定する。
【００３７】
Ｓ８０６において度合「中」に分類されたブロックが存在しない場合は、すべてのブロックが度合「静」に分類されている。これは画面全体が、シネマ映像検出期間（本実施形態では連続する６０フィールド）において静止画であることを示している。この場合、シネマ処理決定部１０６は、静止画になる直前の決定結果を保持する（Ｓ８０７）。これは、静止画の場合はシネマ映像かどうかの判定ができないためである。直前の決定結果を保持することで、例えば動画中に静止画が挿入されているような映像において、動画に戻った際に、元の動画と同様のシネマ処理をすぐに適用することが可能になる。
【００３８】
（その他の実施形態）
上述したシネマ映像の検出方法は、２−３プルダウン方式でテレシネ変換されたシネマ映像の検出方法の一例であったが、本発明はシネマ映像のテレシネ変換方法やシネマ映像の検出方法には依存しない。シネマ映像の検出と検出率の算出をブロック単位で行うことができれば、シネマ映像の検出方法は公知の任意の方法を採用しうる。
【００３９】
例えば、複数のテレシネ変換方法に対応するため、異なる複数の方法でシネマ映像の検出を行うようにし、その中の１つによる検出結果を用いるようにしてもよい。例えば、検出率の度合が「高」に分類されるブロックが最も多い検出結果を用いたり、「中」に分類されるブロックが最も少ない検出結果を用いるなど、状況に応じた条件で１つの検出結果を選択することができる。
【００４０】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【特許請求の範囲】
【請求項１】
フィールド単位の入力映像の各フィールド映像を複数のブロックに分割する分割手段と、
前記複数のブロックの各々について、前記入力映像がテレシネ変換されたシネマ映像であるかどうかを検出する検出手段と、
前記入力映像の所定数の連続するフィールド映像に対する前記検出手段による検出結果に応じて、前記複数のブロックを、前記シネマ映像である可能性に応じた複数の度合のいずれかに分類する分類手段と、
前記分類手段による分類の結果に基づいて、前記シネマ映像に対して適用する予め定められた画像処理であるシネマ処理を、前記入力映像の全画面に対して適用するか否かを決定する決定手段と、
前記決定手段の決定に従って、前記入力映像に対して前記シネマ処理又は前記シネマ処理とは異なる画像処理を適用する画像処理手段と、を有し、
前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、前記シネマ処理の適用を決定することを特徴とする画像処理装置。
【請求項２】
前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も低い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、前記シネマ映像である可能性が最も高い度合いに分類されたブロックの数によらず、前記シネマ処理の不適用を決定することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も低い度合いに分類されたブロックが予め定められた数もしくは割合存在せず、かつ前記シネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在しない場合には、前記シネマ処理の不適用を決定することを特徴とする請求項１または請求項２記載の画像処理装置。
【請求項４】
前記分類手段は、前記検出手段の検出結果に基づいて静止画と判断されるブロックについては、静止画であることを示す度合に分類し、
前記決定手段は、前記複数のブロックの全てが前記静止画であることを示す度合に分類されている場合には、前記複数のブロックの全てが前記静止画であることを示す度合に分類される直前の決定結果を保持することを特徴とする請求項１乃至請求項３のいずれか１項に記載の画像処理装置。
【請求項５】
前記検出手段が、前記シネマ映像に特徴的なフィールドシーケンスを有するかどうかを前記ブロック毎に検出することにより、前記入力映像が前記シネマ映像であるかどうかを前記ブロック毎に検出し、
前記分類手段は、前記所定数の連続するフィールド映像について、前記検出手段が前記フィールドシーケンスを検出した回数に応じて、前記複数のブロックを、前記シネマ映像である可能性に応じた複数の度合のいずれかに分類する、ことを特徴とする請求項１乃至請求項４のいずれか１項に記載の画像処理装置。
【請求項６】
前記検出手段が、前記入力映像の各フィールド映像について、１フレーム期間ずれたフィールド映像との画素の差分値のヒストグラムから、前記各フィールド映像と前記１フレーム期間ずれたフィールド映像が同一映像フィールドか否かを判定することにより、前記入力映像のフィールドシーケンスを検出し、当該検出したフィールドシーケンスが前記シネマ映像に特徴的なフィールドシーケンスを有するかどうかを前記ブロック毎に検出することにより、前記入力映像が前記シネマ映像であるかどうかを前記ブロック毎に検出することを特徴とする請求項５記載の画像処理装置。
【請求項７】
分割手段が、フィールド単位の入力映像の各フィールド映像を複数のブロックに分割する分割工程と、
検出手段が、前記複数のブロックの各々について、前記入力映像がテレシネ変換されたシネマ映像であるかどうかを検出する検出工程と、
分類手段が、前記入力映像の所定数の連続するフィールド映像に対する前記検出手段による検出結果に応じて、前記複数のブロックを、前記シネマ映像である可能性に応じた複数の度合のいずれかに分類する分類工程と、
前記分類工程における分類の結果に基づいて、決定手段が、前記シネマ映像に対して適用する予め定められた画像処理であるシネマ処理を、前記入力映像の全画面に対して適用するか否かを決定する決定工程と、
前記決定工程における決定に従って、画像処理手段が、前記入力映像に対して前記シネマ処理又は前記シネマ処理とは異なる画像処理を適用する画像処理工程と、を有し、
前記決定工程において、前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、前記シネマ処理の適用を決定することを特徴とする画像処理装置の制御方法。
【請求項８】
コンピュータを、請求項１乃至請求項６のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【請求項１】
フィールド単位の入力映像の各フィールド映像を複数のブロックに分割する分割手段と、
前記複数のブロックの各々について、前記入力映像がテレシネ変換されたシネマ映像であるかどうかを検出する検出手段と、
前記入力映像の所定数の連続するフィールド映像に対する前記検出手段による検出結果に応じて、前記複数のブロックを、前記シネマ映像である可能性に応じた複数の度合のいずれかに分類する分類手段と、
前記分類手段による分類の結果に基づいて、前記シネマ映像に対して適用する予め定められた画像処理であるシネマ処理を、前記入力映像の全画面に対して適用するか否かを決定する決定手段と、
前記決定手段の決定に従って、前記入力映像に対して前記シネマ処理又は前記シネマ処理とは異なる画像処理を適用する画像処理手段と、を有し、
前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、前記シネマ処理の適用を決定することを特徴とする画像処理装置。
【請求項２】
前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も低い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、前記シネマ映像である可能性が最も高い度合いに分類されたブロックの数によらず、前記シネマ処理の不適用を決定することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も低い度合いに分類されたブロックが予め定められた数もしくは割合存在せず、かつ前記シネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在しない場合には、前記シネマ処理の不適用を決定することを特徴とする請求項１または請求項２記載の画像処理装置。
【請求項４】
前記分類手段は、前記検出手段の検出結果に基づいて静止画と判断されるブロックについては、静止画であることを示す度合に分類し、
前記決定手段は、前記複数のブロックの全てが前記静止画であることを示す度合に分類されている場合には、前記複数のブロックの全てが前記静止画であることを示す度合に分類される直前の決定結果を保持することを特徴とする請求項１乃至請求項３のいずれか１項に記載の画像処理装置。
【請求項５】
前記検出手段が、前記シネマ映像に特徴的なフィールドシーケンスを有するかどうかを前記ブロック毎に検出することにより、前記入力映像が前記シネマ映像であるかどうかを前記ブロック毎に検出し、
前記分類手段は、前記所定数の連続するフィールド映像について、前記検出手段が前記フィールドシーケンスを検出した回数に応じて、前記複数のブロックを、前記シネマ映像である可能性に応じた複数の度合のいずれかに分類する、ことを特徴とする請求項１乃至請求項４のいずれか１項に記載の画像処理装置。
【請求項６】
前記検出手段が、前記入力映像の各フィールド映像について、１フレーム期間ずれたフィールド映像との画素の差分値のヒストグラムから、前記各フィールド映像と前記１フレーム期間ずれたフィールド映像が同一映像フィールドか否かを判定することにより、前記入力映像のフィールドシーケンスを検出し、当該検出したフィールドシーケンスが前記シネマ映像に特徴的なフィールドシーケンスを有するかどうかを前記ブロック毎に検出することにより、前記入力映像が前記シネマ映像であるかどうかを前記ブロック毎に検出することを特徴とする請求項５記載の画像処理装置。
【請求項７】
分割手段が、フィールド単位の入力映像の各フィールド映像を複数のブロックに分割する分割工程と、
検出手段が、前記複数のブロックの各々について、前記入力映像がテレシネ変換されたシネマ映像であるかどうかを検出する検出工程と、
分類手段が、前記入力映像の所定数の連続するフィールド映像に対する前記検出手段による検出結果に応じて、前記複数のブロックを、前記シネマ映像である可能性に応じた複数の度合のいずれかに分類する分類工程と、
前記分類工程における分類の結果に基づいて、決定手段が、前記シネマ映像に対して適用する予め定められた画像処理であるシネマ処理を、前記入力映像の全画面に対して適用するか否かを決定する決定工程と、
前記決定工程における決定に従って、画像処理手段が、前記入力映像に対して前記シネマ処理又は前記シネマ処理とは異なる画像処理を適用する画像処理工程と、を有し、
前記決定工程において、前記決定手段は、前記複数のブロックのうち、前記分類手段によって前記シネマ映像である可能性が最も高い度合いに分類されたブロックが予め定められた数もしくは割合存在する場合には、前記シネマ処理の適用を決定することを特徴とする画像処理装置の制御方法。
【請求項８】
コンピュータを、請求項１乃至請求項６のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１２−１０５０２４（Ｐ２０１２−１０５０２４Ａ）
【公開日】平成２４年５月３１日（２０１２．５．３１）
【国際特許分類】
【出願番号】特願２０１０−２５１２７９（Ｐ２０１０−２５１２７９）
【出願日】平成２２年１１月９日（２０１０．１１．９）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２４年５月３１日（２０１２．５．３１）
【国際特許分類】
【出願日】平成２２年１１月９日（２０１０．１１．９）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]