映像評価装置、映像フレームレート決定装置、映像評価方法、映像フレームレート決定方法、映像評価プログラム及び映像フレームレート決定プログラム
【課題】映像の動き特徴量、当該映像のフレームレート及び当該映像を構成するフレーム画像における空間周波数の分析結果を考慮して、当該映像の動きの滑らかさを評価する。
【解決手段】映像評価装置１０は、入力された映像を構成するフレーム画像に基づいて映像の動き特徴量を抽出する動き特徴量抽出部１０２と、入力された映像のフレームレートを取得するフレームレート取得部１０３と、入力された映像を構成するフレーム画像における空間周波数を分析する空間周波数分析部１０４と、前記動き特徴量と前記フレームレートと前記空間周波数の分析結果とを用いて映像の動きの滑らかさを示す評価値を算出する評価部１０５とを具備する。
【解決手段】映像評価装置１０は、入力された映像を構成するフレーム画像に基づいて映像の動き特徴量を抽出する動き特徴量抽出部１０２と、入力された映像のフレームレートを取得するフレームレート取得部１０３と、入力された映像を構成するフレーム画像における空間周波数を分析する空間周波数分析部１０４と、前記動き特徴量と前記フレームレートと前記空間周波数の分析結果とを用いて映像の動きの滑らかさを示す評価値を算出する評価部１０５とを具備する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置、映像評価方法及び映像評価プログラムに関する。
【０００２】
また、本発明は、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定装置、映像フレームレート決定方法及び映像フレームレート決定プログラムに関する。
【背景技術】
【０００３】
一般的に、「映像」に対する取得、蓄積、伝送、表示、符号化及び復号化を含む処理は、１秒あたりのフレーム数が一定である状態で、すなわち、固定フレームレートで行われている。
【０００４】
例えば、米国及び日本で採用されている全国テレビジョン標準委員会（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｔａｎｄａｒｄｓ Ｃｏｍｍｉｔｔｅｅ：ＮＴＳＣ）規格では、フレームレートは、２９.９７ｆｐｓと定義されており、ヨーロッパで採用されている全国テレビション標準委員会によって確立された位相交番ライン（Ｐｈａｓｅ Ａｌｔｅｒｎａｔｉｎｇ Ｌｉｎｅ：ＰＡＬ）規格では、フレームレートは、２５ｆｐｓと定義されている（非特許文献１参照）。
【０００５】
また、２４ｆｐｓや１５ｆｐｓの固定フレームレートで、上述の映像に対する処理が行われる場合もある。
【０００６】
ここで、「映像」とは、単一の静止画像である「フレーム画像」が複数連続することにより構成されるものであり、「フレームレート」とは、１秒あたりに処理されるフレーム画像数であり、「ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ）」とは、フレームレートを表す単位である。
【０００７】
固定フレームレートで処理される映像において、１秒あたりに処理されるフレーム画像数が増加すると、連続するフレーム画像の時間間隔が短くなるため、より滑らかな動きの映像として処理することが可能となる。
【０００８】
例えば、３０ｆｐｓのフレームレートで処理される映像は、１５ｆｐｓのフレームレートで処理される映像に比べて、映像の動きを時間的により細かく表現できるため、滑らかな動きの映像となる。
【０００９】
一方で、固定フレームレートで処理される映像において、１秒あたりに処理されるフレーム画像数が増加すると、単位時間あたりの処理量、処理に伴うデータ量及び電力消費量が増加する。
【００１０】
例えば、映像の取得においては、フレームレートが増加することにより、単位時間あたりに取得すべきフレーム画像数が増加し、単位時間あたりの処理量及び処理に伴う電力消費量が増加する。
【００１１】
また、映像の蓄積においては、フレームレートが増加することにより、単位時間あたりに蓄積すべきフレーム数が増加し、単位時間あたりの処理に伴うデータ量が増加する。
【００１２】
また、映像の処理量やデータ量に応じて、フレームレートを可変にする映像処理方法が存在する。
【００１３】
例えば、映像の符号化においては、符号化すべきデータ量が多い場合には、符号化時のバッファメモリの占有量が規定値を超えてしまうため、フレームレートを削減して、単位時間あたりに符号化するフレーム数を削減する（特許文献１参照）。
【非特許文献１】Ｒｅｃｏｍｍｅｎｄａｔｉｏｎ ＩＴＵ-Ｒ ＢＴ.４７０-６、Ｃｏｎｖｅｎｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎａｌ Ｓｙｓｔｅｍｓ
【特許文献１】特開平１１-２０５７９１号公報
【発明の開示】
【発明が解決しようとする課題】
【００１４】
しかしながら、固定フレームレートで、映像に対する処理を行う場合、滑らかな動きを実現するために、処理を行うためのフレームレートを高くすると、処理量、処理に伴うデータ量及び電力消費量が増加するという問題点があった。
【００１５】
逆に、固定フレームレートで、映像に対する処理を行う場合に、処理量、処理に伴うデータ量及び電力消費量を低減するために、フレームレートを低くすると、映像の動きの滑らかさが低下し、ギクシャクした動きの映像となってしまうという問題点があった。
【００１６】
また、可変フレームレートで、映像に対する処理を行う場合にも、映像の動きの滑らかさを考慮せずに、処理量や処理に伴うデータ量のみに応じて、フレームレート（処理を行うフレームの時間間隔）を変化させると、同様に、映像の動きの滑らかさが低下し、ギクシャクした動きの映像となってしまうという問題点があった。
【００１７】
ここで、映像の動きの滑らかさは、映像の持つ特徴に関係がある。例えば、映像の動きが全く無い場合や、映像の動きが非常に小さい場合は、フレームレートを低くしても、動きの滑らかさは低下しない。
【００１８】
また、一般的に、映像における空間周波数が高い場合、その動きを正確に把握するには、フレームレートを高くする必要があり、フレームレートを低くすると、動きの滑らかさが低下する。
【００１９】
そこで、本発明は、上述の課題に鑑みてなされたものであり、映像の動き特徴量、当該映像のフレームレート及び当該映像を構成するフレーム画像における空間周波数の分析結果を考慮して、当該映像の動きの滑らかさを評価することによって、当該映像の特徴に応じた、より高い精度の動きの滑らかさの評価を行うことができる映像評価装置、映像評価方法及び映像評価プログラムを提供することを目的とする。
【００２０】
また、本発明は、動きの滑らかさを示す評価値を一定以上に保つフレームレートを決定する映像フレームレート決定装置、映像フレームレート決定方法及び映像フレームレート決定プログラムを提供することを目的とする。
【課題を解決するための手段】
【００２１】
本発明の第１の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、入力された前記映像のフレームレートを取得するフレームレート取得部と、入力された前記映像を構成するフレーム画像における空間周波数を分析する空間周波数分析部と、抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを要旨とする。
【００２２】
本発明の第２の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、入力された前記映像のフレームレートを取得するフレームレート取得部と、抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する空間周波数範囲決定部と、入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを要旨とする。
【００２３】
本発明の第２の特徴において、前記空間周波数決定部は、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定してもよい。
【００２４】
本発明の第３の特徴は、本発明の第１又は第２の特徴に係る映像評価装置を具備しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定装置であって、前記映像を蓄積する蓄積部と、前記映像の第１のフレームレートを発生するフレームレート発生部と、前記蓄積部に蓄積されている前記映像と、前記フレームレート発生部により発生された前記第１のフレームレートとを含む映像信号を生成する映像信号生成部と、前記映像評価装置により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定するフレームレート決定部とを具備することを要旨とする。
【００２５】
本発明の第４の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、入力された前記映像のフレームレートを取得する工程と、入力された前記映像を構成するフレーム画像における空間周波数を分析する工程と、抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを要旨とする。
【００２６】
本発明の第５の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、入力された前記映像のフレームレートを取得する工程と、抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する工程と、入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを要旨とする。
【００２７】
本発明の第５の特徴において、前記空間周波数範囲を決定する工程において、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定してもよい。
【００２８】
本発明の第６の特徴は、本発明の第４又は第５の特徴に係る映像評価方法を有しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定方法であって、前記映像の第１のフレームレートを発生する工程と、蓄積部に蓄積されている前記映像と、前記フレームレートを発生する工程において発生された前記第１のフレームレートとを含む映像信号を生成する工程と、前記映像評価方法により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定する工程とを有することを要旨とする。
【００２９】
本発明の第７の特徴は、コンピュータを、本発明の第１又は第２の特徴に係る映像評価装置として機能させる映像評価装置であることを要旨とする。
【００３０】
本発明の第８の特徴は、コンピュータを、本発明の第３の特徴に係る映像フレームレート決定装置として機能させる映像フレームレート決定プログラムであることを要旨とする。
【発明の効果】
【００３１】
以上説明したように、本発明によれば、映像の動き特徴量、当該映像のフレームレート及び当該映像を構成するフレーム画像における空間周波数の分析結果を考慮して、当該映像の動きの滑らかさを評価することによって、当該映像の特徴に応じた、より高い精度の動きの滑らかさの評価を行うことができる映像評価装置、映像評価方法及び映像評価プログラムを提供することができる。
【００３２】
また、本発明によれば、動きの滑らかさを示す評価値を一定以上に保つフレームレートを決定する映像フレームレート決定装置、映像フレームレート決定方法及び映像フレームレート決定プログラムを提供するができる。
【発明を実施するための最良の形態】
【００３３】
（本発明の第１の実施形態に係る映像評価装置）
図１乃至図８を参照して、本発明の第１の実施形態に係る映像評価装置１０の構成について説明する。
【００３４】
本実施形態に係る映像評価装置１０は、複数のフレーム画像により構成される映像の動きの滑らかさを評価するように構成されている。
【００３５】
映像評価装置１０は、物理的には、ＣＰＵ（中央処理装置）や、メモリ等の記憶装置や、通信装置等を備えるコンピュータにより実現されていてもよい。また、映像評価装置１０は、携帯電話等の移動体通信端末により実現されていてもよい。すなわち、映像評価装置１０には、情報処理を行うことが可能な装置が、広く適用され得る。
【００３６】
図１に示すように、映像評価装置１０は、その機能的な構成要素として、入力部１０１と、動き特徴量抽出部１０２と、フレームレート取得部１０３と、空間周波数分析部１０４と、評価部１０５とを備えている。
【００３７】
入力部１０１は、外部から入力された映像信号１０７を取得するように構成されている。
【００３８】
なお、映像信号１０７は、単一の静止画像であるフレーム画像が複数連続することにより構成される映像と、当該映像のフレームレートに関する情報を含む信号である。
【００３９】
入力部１０１は、外部から入力された映像信号１０７の中から抽出した映像を複数のフレーム画像１０８に分解し、分解したフレーム画像１０８を動き特徴量抽出部１０２へ出力するように構成されている。
【００４０】
また、入力部１０１は、外部から入力された映像信号１０７の中から抽出したフレームレートに関する情報１０９をフレームレート取得部１０３へ出力するように構成されている。
【００４１】
また、入力部１０１は、外部から入力された映像信号１０７の中から抽出した映像を複数のフレーム画像１１０に分解し、分解したフレーム画像１１０を空間周波数分析部１０４へ出力するように構成されている。
【００４２】
動き特徴量抽出部１０２は、入力部１０１により入力されたフレーム画像１０８に基づいて、当該映像の動き特徴量１１１を抽出し、抽出した当該映像の動き特徴量１１１を評価部１０５へ出力するように構成されている。
【００４３】
具体的には、第１に、動き特徴量抽出部１０２は、入力部１０１から、連続する２枚のフレーム画像を読み込む。説明のため、この連続する２枚のフレーム画像を、順に、フレーム画像Ｐ０、フレーム画像Ｐ１と名付ける。
【００４４】
第２に、動き特徴量抽出部１０２は、入力部１０１から読み込んだフレーム画像Ｐ１を、一定の大きさ（８画素ｘ８画素）のブロックに分割する。
【００４５】
第３に、動き特徴量抽出部１０２は、フレーム画像Ｐ１のフレーム画像の各ブロックについて、フレーム画像Ｐ０の所定の探索範囲内で類似する画像信号パターンを、ブロックマッチングによって探索する。
【００４６】
第４に、動き特徴量抽出部１０２は、フレーム画像Ｐ１におけるブロックの画像信号パターンと、当該画像信号パターンに最も類似するフレーム画像Ｐ０における画像信号パターンとの間の空間的な変位量である動きベクトルを検出する。図２は、ブロックマッチングによる動きベクトルの探索の様子を表す図である。
【００４７】
第５に、動き特徴量抽出部１０２は、フレーム画像Ｐ１の各ブロックの動きベクトルを用いて、フレーム画像Ｐ１の各ブロックのｘ方向及びｙ方向の動きの大きさを計算する。
【００４８】
図２では、フレーム画像Ｐ１の当該ブロックの動きベクトルは、（ＭＶｘ、ＭＶｙ）であり、当該ブロックのｘ方向及びｙ方向の動きの大きさは、それぞれ、｜ＭＶｘ｜、｜ＭＶｙ｜（｜｜は、絶対値を算出する記号とする）となる。
【００４９】
第６に、動き特徴量抽出部１０２は、フレーム画像Ｐ１における全てのブロックのｘ方向及びｙ方向の動きの大きさの中で、ｘ方向及びｙ方向それぞれの動きの大きさの最大値｜ＭＶｘ｜ｍａｘ及び｜ＭＶｙ｜ｍａｘを、動き特徴量１１１として評価部１０５へ出力する。
【００５０】
フレームレート取得部１０３は、入力部１０１により入力されたフレームレートに関する情報１０９から、上述の映像のフレームレート１１２を取得して、評価部１０５へ出力するように構成されている。
【００５１】
具体的には、入力部１０１により入力されたフレームレートに関する情報１０９が、フレームレートの値そのものである場合、フレームレート取得部１０３は、当該フレームレートの値ｆを、フレームレート１１２として評価部１０５へ出力するように構成されている。
【００５２】
また、入力部１０１により入力されたフレームレートに関する情報１０９が、連続するフレーム画像の時間間隔である場合、フレームレート取得部１０３は、連続するフレーム画像の時間間隔から計算したフレームレートを、フレームレート１１２として評価部１０５へ出力するように構成されている。
【００５３】
なお、連続するフレームの時間間隔が、ｓ秒である場合、フレームレートの値ｆは、１/ｓ（ｆｐｓ）によって計算される。
【００５４】
また、フレームレート取得部１０３が、入力部１０１により入力されたフレームレートに関する情報１０９からフレームレートを計算する方法は、上記の方法には限定されない。
【００５５】
空間周波数分析部１０４は、入力部１０１により入力されたフレーム画像１１０における空間周波数を分析するように構成されている。
【００５６】
具体的には、空間周波数分析部１０４は、入力部１０１により入力されたフレーム画像１１０内で各空間周波数における電力の累積値を算出し、算出した電力の累積値を、空間周波数特徴量１１３（空間周波数の分析結果）として評価部１０５へ出力するように構成されている。
【００５７】
図３を用いて、空間周波数分析部１０４の機能について具体的に説明する。図３に示すように、空間周波数分析部１０４は、２次元フーリエ変換部１０４１と、累積値算出部１０４２とを具備する。
【００５８】
２次元フーリエ変換部１０４１が、入力部１０１により入力されたフレーム画像Ｐ１（１０４１）に対して２次元フーリエ変換処理を施すことによって、各周波数における電力１０４３を計算して、累積値算出部１０４２へ出力する用に構成されている。
【００５９】
図４（ａ）は、入力部１０１により入力されたフレーム画像Ｐ１を示し、図４（ｂ）は、当該フレーム画像Ｐ１に対して２次元フーリエ変換処理を施すことによって各周波数における電力１０４３の計算結果を含む２次元フーリエ変換画像Ｆ１を示す。
【００６０】
累積値算出部１０４２は、２次元フーリエ変換部１０４１により入力された各周波数における電力１０４３を用いて、図４（ｃ）に示すように、水平方向（ｘ方向）の空間周波数μにおけるν方向の全ての電力を足し合わせ、空間周波数μにおける電力の累積値であるμ成分累積値を算出するように構成されている。
【００６１】
また、累積値算出部１０４２は、２次元フーリエ変換部１０４１により入力された各周波数における電力１０４３を用いて、図４（ｄ）に示すように、垂直方向（ｙ方向）の空間周波数νにおけるμ方向の全ての電力を足し合わせ、空間周波数νにおける電力の累積値であるν成分累積値を算出するように構成されている。
【００６２】
また、累積値算出部１０４２は、算出したμ成分累積値及びν成分累積値を、空間周波数特徴量１１３（空間周波数の分析結果）として評価部１０５へ出力するように構成されている。
【００６３】
評価部１０５は、動き特徴量抽出部１０２により抽出された動き特徴量と、フレームレート取得部１０３により取得されたフレームレートと、空間周波数分析部１０４からの空間周波数特徴量１１３（空間周波数の分析結果）とを用いて、入力された映像の動きの滑らかさを示す評価値１１４を算出して出力するように構成されている。
【００６４】
具体的には、評価部１０５は、動き特徴量抽出部１０２から入力されたｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘ及びｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘと、フレームレート取得部１０３から入力されたフレームレートの値ｆと、空間周波数分析部１０４から入力されたμ成分累積値及びν成分累積値とを用いて、評価値１１４を算出するように構成されている。
【００６５】
図５を用いて、評価部１０５の機能について詳細に説明する。図５に示すように、評価部１０５は、メモリ１０５０１と、μ方向空間周波数範囲決定部１０５０２と、ｘ方向動きの滑らかさ値算出部１０５０３と、ν方向空間周波数範囲決定部１０５０４と、ｙ方向動きの滑らかさ値算出部１０５０５と、評価値算出部１０５０６とを具備している。
【００６６】
μ方向空間周波数範囲決定部１０５０２は、動き特徴量抽出部１０２から入力された動き特徴量１１１の中から抽出されたｘ方向の動きの大きさ（速さ）｜ＭＶｘ｜ｍａｘと、フレームレート取得部１０３から入力されたフレームレートの値ｆ（１１２）とを用いて、μ方向空間周波数範囲情報１０５０７を取得して、ｘ方向動きの滑らかさ値算出部１０５０３へ出力するように構成されている。
【００６７】
具体的には、μ方向空間周波数範囲決定部１０５０２は、メモリ１０５０１内に予め蓄積されている「ｘ方向のナイキスト境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向のナイキスト境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ１を取得する。
【００６８】
また、μ方向空間周波数範囲決定部１０５０２は、メモリ１０５０１内に予め蓄積されている「動きの滑らかさ境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向の動きの滑らかさ境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ０を取得する。
【００６９】
そして、μ方向空間周波数範囲決定部１０５０２は、取得したμ０及びμ１を、μ方向空間周波数範囲情報１０５０７としてｘ方向動きの滑らかさ値算出部１０５０３へ出力する。
【００７０】
ここで、「フレームレートｆにおけるｘ方向のナイキスト境界線」は、所定のフレームレートｆにおいて、映像のｘ方向の動きを正しく表示できる境界を示すものである。
【００７１】
例えば、「フレームレートｆにおけるｘ方向のナイキスト境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｘ｜ｍａｘ）を有する映像の動きを正しく表示できる空間周波数の限界値μ１を示す。
【００７２】
すなわち、「フレームレートｆにおけるｘ方向のナイキスト境界線」は、水平方向（ｘ方向）に空間周波数μを持ち、かつ、ｘ方向の動きの大きさが|ＭＶｘ｜である映像を、フレームレートｆで表示した場合に、当該映像のｘ方向の見かけ上の動きの大きさが|ＭＶｘ｜に保たれる境界である。
【００７３】
なお、映像は、かかる境界線より上部の領域では、静止して見えたり、逆方向に動いて見えたり、|ＭＶｘ｜とは異なる動きの大きさで動いて見えたりする。
【００７４】
また、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」は、ｘ方向の動きの滑らかさに関する映像品質境界線であり、所定のフレームレートｆにおいて、映像のｘ方向の動きが滑らかと感じられる限界の動きの大きさと空間周波数との関係を示すものである。
【００７５】
例えば、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｘ｜ｍａｘ）を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す。
【００７６】
なお、かかる境界線より上部では、ｘ方向の映像の動きがギクシャクして見える。
【００７７】
また、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」は、フレームレートｆにおいて、水平方向（ｘ方向）に空間周波数μを持つ映像のｘ方向の動きの大きさを変化させた場合に、映像の動きがギクシャクして見えるかどうかについて判断する主観評価で予め決定される。
【００７８】
メモリ１０５０１内には、各フレームレートにおけるｘ方向のナイキスト境界線及び動きの滑らかさ境界線が、それぞれｘ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報として予め蓄積されている。
【００７９】
同様に、ν方向空間周波数範囲決定部１０５０４は、動き特徴量抽出部１０２から入力された動き特徴量１１１の中から抽出されたｙ方向の動きの大きさ（速さ）｜ＭＶｙ｜ｍａｘと、フレームレート取得部１０３から入力されたフレームレートの値ｆ（１１２）とを用いて、ν方向空間周波数範囲情報１０５０８を取得して、ｙ方向動きの滑らかさ値算出部１０５０５へ出力するように構成されている。
【００８０】
具体的には、ν方向空間周波数範囲決定部１０５０４は、メモリ１０５０１内に予め蓄積されている「ｙ方向のナイキスト境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向のナイキスト境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν１を取得する。
【００８１】
また、ν方向空間周波数範囲決定部１０５０４は、メモリ１０５０１内に予め蓄積されている「動きの滑らかさ境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向の動きの滑らかさ境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν０を取得する。
【００８２】
そして、ν方向空間周波数範囲決定部１０５０４は、取得したν０及びν１を、ν方向空間周波数範囲情報１０５０８としてｙ方向動きの滑らかさ値算出部１０５０５へ出力する。
【００８３】
ここで、「フレームレートｆにおけるｙ方向のナイキスト境界線」は、所定のフレームレートｆにおいて、映像のｙ方向の動きを正しく表示できる境界を示すものである。
【００８４】
例えば、「フレームレートｆにおけるｙ方向のナイキスト境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｙ｜ｍａｘ）を有する映像の動きを正しく表示できる空間周波数の限界値ν１を示す。
【００８５】
すなわち、「フレームレートｆにおけるｙ方向のナイキスト境界線」は、垂直方向（ｙ方向）に空間周波数νを持ち、かつ、ｙ方向の動きの大きさが|ＭＶｙ｜である映像を、フレームレートｆで表示した場合に、当該映像のｙ方向の見かけ上の動きの大きさが|ＭＶｙ｜に保たれる境界である。
【００８６】
なお、映像は、かかる境界線より上部の領域では、静止して見えたり、逆方向に動いて見えたり、|ＭＶｙ｜とは異なる動きの大きさで動いて見えたりする。
【００８７】
また、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」は、ｙ方向の動きの滑らかさに関する映像品質境界線であり、所定のフレームレートｆにおいて、映像のｙ方向の動きが滑らかと感じられる限界の動きの大きさと空間周波数との関係を示すものである。
【００８８】
例えば、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｙ｜ｍａｘ）を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す。
【００８９】
なお、かかる境界線より上部では、ｙ方向の映像の動きがギクシャクして見える。
【００９０】
また、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」は、フレームレートｆにおいて、垂直方向（ｙ方向）に空間周波数νを持つ映像のｙ方向の動きの大きさを変化させた場合に、映像の動きがギクシャクして見えるかどうかについて判断する主観評価で予め決定される。
【００９１】
メモリ１０５０１内には、各フレームレートにおけるｙ方向のナイキスト境界線及び動きの滑らかさ境界線が、それぞれｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報として予め蓄積されている。
【００９２】
ｘ方向動きの滑らかさ値算出部１０５０３は、空間周波数分析部１０４から入力された空間周波数特徴量１１３の中から抽出したμ成分累積値と、μ方向空間周波数範囲決定部１０５２から入力されたμ方向空間周波数範囲情報１０５０７とを用いて、μ０からμ１の間のμ方向空間周波数範囲内のμ成分累積値を全て加算することによって、ｘ方向の動きの滑らかさ値Ｓｘ（１０５０９）を算出して、評価値算出部１０５０６へ出力するように構成されている。
【００９３】
また、ｙ方向動きの滑らかさ値算出部１０５０５は、空間周波数分析部１０４から入力された空間周波数特徴量１１３の中から抽出したν成分累積値と、ν方向空間周波数範囲決定部１０５０４から入力されたν方向空間周波数範囲情報１０５０８とを用いて、ν０からν１の間のν方向空間周波数範囲内のν成分累積値を全て加算することによって、ｙ方向の動きの滑らかさ値（Ｓｙ）１０５１０を算出して、評価値算出部１０５０６へ出力するように構成されている。
【００９４】
図８（ａ）は、ｘ方向の動きの滑らかさ値Ｓｘを算出するために加算する累積値の領域を示す図であり、図８（ｂ）は、ｙ方向の動きの滑らかさ値Ｓｙを算出するために加算する累積値の領域を示す図である。
【００９５】
評価値算出部１０５０６は、ｘ方向動きの滑らかさ値算出部１０５０３から入力されたｘ方向の動きの滑らかさ値１０５０９と、ｙ方向動きの滑らかさ値算出部１０５０５から入力されたｙ方向の動きの滑らかさ値１０５１０とを比較し、大きい方を当該フレーム画像における動きの滑らかさ値Ｓとするように構成されている。
【００９６】
また、評価値算出部１０５０６は、動きの滑らかさ値Ｓと所定閾値とを比較し、当該フレーム画像における動きの滑らかさの評価値Ｅを算出するように構成されている。
【００９７】
具体的には、評価値算出部１０５３は、所定のフレーム画像における動きの滑らかさ値（信号強度値）を「Ｓ」とし、所定閾値を「Ｔ」とする場合、動きの滑らかさを示す評価値を「Ｅ」を「Ｔ−Ｓ」によって算出するように構成されている。
【００９８】
さらに、評価値算出部１０５０６は、全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値を算出して、動きの滑らかさを示す評価値１１４として出力する。
【００９９】
（本発明の第１の実施形態に係る映像評価方法）
以下、図９乃至図１１を参照して、本実施形態に係る映像評価方法について説明する。
【０１００】
第１に、図９を参照して、本実施形態に係る映像評価方法の全体動作について説明する。
【０１０１】
図９に示すように、ステップＳ９０１において、入力部１０１が、外部から入力された映像と、当該映像のフレームレートに関する情報を読み込む。
【０１０２】
ステップＳ９０２において、動き特徴量抽出部１０１が、当該映像の動き特徴量を抽出する。
【０１０３】
ステップＳ９０３において、フレームレート取得部１０３が、入力されたフレームレートに関する情報から、当該映像のフレームレートを取得する。
【０１０４】
ステップＳ９０４において、空間周波数分析部１０４が、当該映像を構成するフレーム画像における空間周波数特徴量について分析する。
【０１０５】
ステップＳ９０５において、評価部１０５が、当該映像の動き特徴量と、当該空間周波数特徴量と、当該映像のフレームレートとを用いて、入力された映像の動きの滑らかさについて評価する。
【０１０６】
第２に、図１０を参照して、空間周波数分析部１０４の処理方法について説明する。
【０１０７】
図１０に示すように、ステップＳ１００１において、２次元フーリエ変換部１０４１が、入力された映像に対して２次元フーリエ変換処理を施すことによって、各周波数における電力を計算する。
【０１０８】
ステップＳ１００２１において、累積値算出部１０４２が、各周波数における電力を用いて、水平方向の空間周波数μにおけるν方向の全ての電力を足し合わせることによって空間周波数μにおける電力の累積値であるμ成分累積値を算出する。
【０１０９】
また、ステップＳ１００２２において、累積値算出部１０４２が、垂直方向の空間周波数νにおけるμ方向の全ての電力を足し合わせることによって空間周波数νにおける電力の累積値であるν成分累積値を算出する。
【０１１０】
ここで、ステップＳ１００２１とステップＳ１００２２を合わせて、ステップＳ１００２とする。
【０１１１】
第３に、図１１を参照して、評価部１０５の処理方法について説明する。
【０１１２】
図１１に示すように、ステップＳ１１０１１において、μ方向空間周波数範囲決定部１０５０２が、映像のｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘと、フレームレートｆとを用いて、メモリ１０５０１内に予め蓄積されているｘ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する。
【０１１３】
ステップＳ１１０１２において、μ方向空間周波数範囲決定部１０５０２が、取得した「ナイキスト境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向のナイキスト境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ１を取得する。
【０１１４】
また、ステップＳ１１０１３において、μ方向空間周波数範囲決定部１０５０２が、取得した「動きの滑らかさ境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向の動きの滑らかさ境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ０を取得する。
【０１１５】
ステップＳ１１０１４において、μ方向空間周波数範囲決定部１０５０２が、μ方向空間周波数範囲をμ０からμ１に決定する。
【０１１６】
ここで、ステップＳ１１０１１〜ステップＳ１１０１４をまとめてステップＳ１１０１とする。
【０１１７】
ステップＳ１１０２１において、ν方向空間周波数範囲決定部１０５０４が、映像のｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘと、フレームレートｆとを用いて、メモリ１０５０１内に予め蓄積されているｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する。
【０１１８】
ステップＳ１１０２２において、ν方向空間周波数範囲決定部１０５０４が、取得した「ナイキスト境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向のナイキスト境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν１を取得する。
【０１１９】
また、ステップＳ１１０２３において、ν方向空間周波数範囲決定部１０５０４が、取得した「動きの滑らかさ境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向の動きの滑らかさ境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν０を取得する。
【０１２０】
ステップＳ１１０２４において、ν方向空間周波数範囲決定部１０５０４が、ν方向空間周波数範囲をν０からν１に決定する。
【０１２１】
ここで、ステップＳ１１０２１〜ステップＳ１１０２４をまとめてステップＳ１１０２とする。
【０１２２】
ステップＳ１１０３において、ｘ方向動きの滑らかさ値算出部１０５０３が、μ０からμ１の間のμ方向空間周波数範囲内のμ成分累積値を全て加算することによってｘ方向の動きの滑らかさ値Ｓｘを算出する。
【０１２３】
また、ステップＳ１１０４において、ｙ方向動きの滑らかさ値算出部１０５０５が、ν０からν１の間のν方向空間周波数範囲内のν成分累積値を全て加算することによってｙ方向の動きの滑らかさ値Ｓｙを算出する。
【０１２４】
ステップＳ１１０５１において、評価値算出部１０５０６が、ｘ方向の動きの滑らかさ値Ｓｘとｙ方向の動きの滑らかさ値Ｓｙとを比較する。
【０１２５】
ｘ方向の動きの滑らかさ値Ｓｘが、ｙ方向の動きの滑らかさ値Ｓｙより大きい場合は、ステップＳ１１０５２において、評価値算出部１０５０６が、当該フレーム画像における動きの滑らかさ値Ｓを、ｘ方向の動きの滑らかさ値Ｓｘとする。
【０１２６】
それ以外の場合は、ステップＳ１１０５３において、評価値算出部１０５０６が、当該フレーム画像における動きの滑らかさ値Ｓを、ｙ方向の動きの滑らかさ値Ｓｙとする。
【０１２７】
ステップＳ１１０５４において、評価値算出部１０５０６が、当該フレーム画像における動きの滑らかさを示す評価値Ｅを、所定閾値Ｔを用いて、「Ｓ−Ｔ」によって算出する。
【０１２８】
ステップＳ１１０５５において、評価値算出部１０５０６が、全てのフレーム画像における動きの滑らかさをします評価値Ｅの平均値を算出する）。
【０１２９】
ここで、ステップＳ１１０５１〜Ｓ１１０５５をまとめてステップＳ１１０５とする。
【０１３０】
（本発明の第１の実施形態に係る映像評価プログラム）
図１２を参照して、コンピュータを、上述した本実施形態に係る映像評価装置１０として機能させるための映像評価プログラム５０について説明する。
【０１３１】
図１２に示すように、映像評価プログラム５０は、処理を統括するメインモジュールプログラム１２０１と、入力ジュール１２０２と、動き特徴量抽出モジュール１２０３と、フレームレート取得モジュール１２０４と、空間周波数分析モジュール１２０５と、評価モジュール１２０６とを備える。
【０１３２】
入力ジュール１２０２、動き特徴量抽出モジュール１２０３、フレームレート取得モジュール１２０４、空間周波数分析モジュール１２０５及び評価モジュール１２０６がコンピュータに行わせる機能は、それぞれ対応する入力部１０１、動き特徴量抽出部１０２、フレームレート取得部１０３、空間周波数分析部１０４、評価部１０５の機能と同様である。
【０１３３】
なお、映像評価プログラム５０は、例えば、ＣＤ−ＲＯＭ、ＤＶＤ或いはＲＯＭ等の記憶媒体又は半導体メモリによって提供される。
【０１３４】
また、映像評価プログラム４０は、搬送波に重畳されたコンピュータデータ信号としてネットワークを介して提供されるものであってもよい。
【０１３５】
（本発明の第１の実施形態に係る映像評価装置の作用・効果）
本実施形態に係る映像評価装置１０によれば、入力部１０１が、外部から入力された映像信号の中から抽出した映像を複数のフレーム画像及びフレームレートに関する情報に分離して出力し、動き特徴量抽出部１０２が、入力されたフレーム画像に基づいて当該映像の動き特徴量を抽出し、フレームレート取得部１０３が、入力されたフレームレートに関する情報からフレームレートを取得し、空間周波数分析部１０４が、入力されたフレーム画像における空間周波数特徴量を算出し、評価部１０５が、動き特徴量と空間周波数特徴量とフレームレートから、入力された当該映像の動きの滑らかさを評価するので、映像の動き特徴量、フレームレート及び空間周波数を考慮して、より高い精度の動きの滑らかさの評価を行うことができる。
【０１３６】
（変更例１）
なお、映像信号１０７は、複数のフレーム画像により構成される映像や、当該映像のフレームレートに関する情報の他に、当該映像の動きに関する情報や、当該映像の空間周波数に関する情報を含む信号であってもよい。
【０１３７】
かかる場合、動き特徴量抽出部１０２は、入力部１０１により入力された当該映像の動きに関する情報から、直接、動き特徴量を算出して評価部１０５へ出力するように構成されていてもよい。
【０１３８】
また、空間周波数分析部１０４は、入力部１０１により入力された当該映像の空間周波数に関する情報から、直接、空間周波数特徴量を算出して評価部１０５へ出力するように構成されていてもよい。
【０１３９】
また、動き特徴量抽出部１０２は、必ずしも、８画素ｘ８画素のブロック単位で、動きベクトルの検出を行うように構成されている必要はなく、任意の大きさのブロック単位で、動きベクトルの検出を行うように構成されていてもよい。
【０１４０】
また、動き特徴量抽出部１０２は、必ずしも、ブロック単位で、動きベクトルの検出を行うように構成されている必要はない。
【０１４１】
例えば、動き特徴量抽出部１０２は、フレーム画像全体で、動き探索を行って、フレーム画像ごとに、１つの動きベクトルを検出するように構成されていてもよい。
【０１４２】
また、動き特徴量抽出部１０２は、フレーム画像内の１画素ごとに、動きベクトルを検出するように構成されていてもよい。
【０１４３】
また、動き特徴量抽出部１０２は、フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに、動きベクトルを検出するように構成されていてもよい。
【０１４４】
また、動き特徴量抽出部１０２は、動き探索の方法として、必ずしもブロックマッチングを用いる必要はなく、濃度勾配法やその他のあらゆる映像の動きの変位量を検出する方法を用いることができる。
【０１４５】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、各フレーム画像の各ブロックのｘ方向及びｙ方向の動きベクトルの大きさの最大値には限らず、平均値、中間値、最小値又は最頻値であってもよい。
【０１４６】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、各フレーム画像単位で検出された１つの動きベクトルのｘ方向及びｙ方向の大きさであってもよい。
【０１４７】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、各フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに検出した動きベクトルのｘ方向及びｙ方向の大きさの最大値、平均値、中間値、最小値又は最頻値であってもよい。
【０１４８】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、必ずしも、フレーム画像単位で、ｘ方向及びｙ方向にそれぞれ１つである必要はなく、ブロック単位又はオブジェクト単位で、ｘ方向及びｙ方向にそれぞれ１つであってもよい。
【０１４９】
かかる場合、空間周波数分析部１０４によって出力される空間周波数特徴量は、それぞれ、各フレーム画像のブロックごとに分析した空間周波数特徴量であってもよいし、各フレーム画像を当該フレーム画像内のオブジェクト領域に分割し、オブジェクト領域ごとに分析した空間周波数特徴量であってもよい。
【０１５０】
さらに、かかる場合、評価部１０５によって算出されるｘ方向及びｙ方向の動きの滑らかさ値は、それぞれ、ブロック単位又はオブジェクト単位ごとに１つであってもよい。
【０１５１】
かかる場合、評価部１０５は、あるフレーム画像におけるブロック単位又はオブジェクト単位ごとに１つ算出されたｘ方向及びｙ方向の動きの滑らかさ値の中での最大の動きの滑らかさ値を、当該フレーム画像における動きの滑らかさ値Ｓとしてもよい。
【０１５２】
また、特徴量抽出部１０２によって出力される動き特徴量は、必ずしも、ｘ方向及びｙ方向でそれぞれ１つである必要はなく、任意の直交する２つの方向にそれぞれ１つであってもよい。
【０１５３】
かかる場合、空間周波数分析部１０４によって出力される空間周波数特徴量は、必ずしも、μ方向及びν方向である必要はなく、特徴量抽出部１０２で動き特徴量を抽出した任意の直交する２つの方向について分析した空間周波数特徴量であってもよい。
【０１５４】
また、かかる場合、評価部１０５によって算出される動きの滑らかさ値は、必ずしも、ｘ方向及びｙ方向である必要はなく、特徴量抽出部１０２で動き特徴量を抽出した任意の直交する２つの方向について算出してもよい。
【０１５５】
また、空間周波数分析部１０４によって算出される各周波数における電力は、必ずしも、２次元フーリエ画像を用いて算出する必要はなく、フレーム画像の各周波数における電力量を算出するあらゆる方法を用いることができる。
【０１５６】
また、評価部１０５によってメモリ内に予め蓄積されているｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する方法は、ルックアップテーブルを参照する方法であってもよいし、ナイキスト境界線情報及び動きの滑らかさ境界線情報を表す数式を保持しておき、その数式から導き出してもよい。
【０１５７】
また、評価部１０５によって算出される動きの滑らかさ値は、必ずしも、ｘ方向の動きの滑らかさ値及びｙ方向の動きの滑らかさ値のうちの大きい方の値である必要はなく、ｘ方向の動きの滑らかさ値とｙ方向の動きの滑らかさ値との和又は平均値、或いは、ｘ方向の動きの滑らかさ値及びｙ方向の動きの滑らかさ値のうちの小さい方の値であってもよい。
【０１５８】
また、評価部１０５によって算出される各フレーム画像の動きの滑らかさを示す評価値Ｅは、必ずしも、動きの滑らかさ値Ｓと所定閾値Ｔとを用いて、「Ｓ−Ｔ」により算出しなくてもよい。
【０１５９】
評価部１０５によって算出される各フレーム画像における動きの滑らかさを示す評価値Ｅは、動きの滑らかさ値Ｓが大きくなるほど、当該評価値Ｅが小さくなるあらゆる関数を用いてもよい。
【０１６０】
また、評価部１０５によって算出される各フレーム画像の動きの滑らかさを示す評価値Ｅは、動きの滑らかさ値Ｓと所定閾値Ｔとを比較し、その大小関係によって一定値に決定してもよい。
【０１６１】
また、評価部１０５によって出力される評価値は、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値には限らず、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの最大値、中間値、最小値又は最頻値であってもよい。
【０１６２】
また、評価部１０５によって出力される評価値は、必ずしも、入力された映像信号に含まれる全てのフレーム画像を通して１つの評価値である必要はなく、何枚かのフレーム画像、１枚ごとのフレーム画像、各フレーム画像のブロック単位又は各フレーム画像のオブジェクト単位に、１つの評価値であってもよい。
【０１６３】
（本発明の第２の実施形態に係る映像評価装置）
図１３乃至図１６を参照して、本発明の第２の実施形態に係る映像評価装置２０について説明する。以下、本実施形態に係る映像評価装置２０について、上述の第１の実施形態に係る映像評価装置１０との相違点に着目して説明する。
【０１６４】
図１３に示すように、映像評価装置２０は、その機能的な構成要素として、入力部１３０１と、動き特徴量抽出部１３０２と、フレームレート取得部１３０３と、空間周波数範囲決定部１３０４と、評価部１３０５とを備えている。
【０１６５】
入力部１３０１は、外部から入力された映像信号１３０６の中から抽出した映像を複数のフレーム画像１３０７に分解して、動き特徴量抽出部１３０２へ出力するように構成されている。
【０１６６】
また、入力部１３０１は、外部から入力された映像信号１３０６の中から抽出した映像を複数のフレーム画像１３０８に分解して、評価部１３０５へ出力するように構成されている。
【０１６７】
また、入力部１３０１は、外部から入力された映像信号１３０６の中から抽出したフレームレートに関する情報１３０９をフレームレート取得部１３０３へ出力するように構成されている。
【０１６８】
動き特徴量抽出部１３０２は、入力部１３０１により入力されたフレーム画像１３０７に基づいて、入力された映像の動き特徴量を抽出し、動き特徴量１３１０として空間周波数範囲決定部１３０４へ出力するように構成されている。
【０１６９】
具体的には、動き特徴量抽出部１３０２は、上述の動き特徴量抽出部１０２と同様の方法で、入力された映像の動き特徴量を抽出するように構成されている。
【０１７０】
フレームレート取得部１３０３は、入力部１３０１により入力されたフレームレートに関する情報１３０９から、入力された映像のフレームレート１３１１を取得し、空間周波数範囲決定部１３０４へ出力するように構成されている。
【０１７１】
具体的には、フレームレート取得部１３０３は、上述のフレームレート取得部１０３と同様の方法で、入力された映像のフレームレート１３１１を取得するように構成されている。
【０１７２】
空間周波数範囲決定部１３０４は、動き特徴量抽出部１３０２から入力された動き特徴量１３１０と、フレームレート取得部１３０３から入力されたフレームレート１３１１とを用いて、映像の動きの滑らかさについての評価の対象となる空間周波数範囲を決定し、決定した空間周波数範囲を示す空間周波数範囲情報１３１２を評価部１３０５へ出力するように構成されている。
【０１７３】
図１４を参照して、空間周波数範囲決定部１３０４が空間周波数範囲情報１３１２を決定する方法について具体的に説明する。
【０１７４】
図１４に示すように、空間周波数範囲決定部１３０４は、メモリ１３０４１と、ナイキスト境界周波数検出部１３０４２と、動きの滑らかさ境界周波数検出部１３０４３と、空間周波数範囲情報決定部１３０４４とを具備している。
【０１７５】
メモリ１３０４１には、各フレームレートにおけるｘ方向及びｙ方向のナイキスト境界線情報と、動きの滑らかさ境界線（動きの滑らかさに関する映像品質境界）情報とが保存されている。
【０１７６】
かかる各フレームレートにおけるｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報は、上述の第１の実施形態における評価部１０５のメモリ１０５０１内に予め蓄積されているｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報と同一である。
【０１７７】
ナイキスト境界周波数検出部１３０４２は、動き特徴量抽出部１３０２から入力された動き特徴量１３１０と、フレームレート取得部１３０３から入力されたフレームレート１３１１とを用いて、動き特徴量１３１０に対応する「フレームレートｆにおけるｘ方向及びｙ方向のナイキスト境界線」上の空間周波数をメモリ１３０４１から取得し、ナイキスト境界周波数１３０４５として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１７８】
すなわち、ナイキスト境界周波数検出部１３０４２は、フレームレートｆにおけるｘ方向の動きの大きさが｜ＭＶｘ｜ｍａｘである場合、図６に示すように、「フレームレートｆにおけるｘ方向のナイキスト境界線」上の空間周波数μ１をメモリ１３０４１から取得するように構成されている。
【０１７９】
また、ナイキスト境界周波数検出部１３０４２は、フレームレートｆにおけるｙ方向の動きの大きさが｜ＭＶｙ｜ｍａｘである場合、図７に示すように、「フレームレートｆにおけるｙ方向のナイキスト境界線」上の空間周波数ν１をメモリ１３０４１から取得するように構成されている。
【０１８０】
ナイキスト境界周波数検出部１３０４２は、空間周波数μ１及びν１を、ナイキスト境界周波数１３０４５として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１８１】
動きの滑らかさ境界周波数検出部１３０４３は、動き特徴量抽出部１３０２から入力された動き特徴量１３１０と、フレームレート取得部１３０３から入力されたフレームレート１３１１とを用いて、動き特徴量１３１０に対応する「フレームレートｆにおけるｘ方向及びｙ方向の動きの滑らかさ境界線」上の空間周波数をメモリ１３０４１から取得し、動きの滑らかさ境界周波数１３０４６として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１８２】
すなわち、動きの滑らかさ周波数検出部１３０４３は、フレームレートｆにおけるｘ方向の動きの大きさが｜ＭＶｘ｜ｍａｘである場合、図６に示すように、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」上の空間周波数μ０をメモリ１３０４１から取得するように構成されている。
【０１８３】
また、動きの滑らかさ境界周波数検出部１３０４３は、フレームレートｆにおけるｙ方向の動きの大きさが｜ＭＶｙ｜ｍａｘである場合、図７に示すように、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」上の空間周波数ν０をメモリ１３０４１から取得するように構成されている。
【０１８４】
動きの滑らかさ境界周波数検出部１３０４３は、空間周波数μ０及びν０を、動きの滑らかさ境界周波数１３０４６として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１８５】
空間周波数範囲情報決定部１３０４４は、ナイキスト境界周波数検出部１３０４２から入力されたナイキスト境界周波数１３０４５と、動きの滑らかさ境界周波数検出部１３０４３から入力された動きの滑らかさ境界周波数１３０４６とを用いて、空間周波数範囲情報１３１２を決定し、空間周波数範囲決定部１３０４の出力として出力するように構成されている。
【０１８６】
すなわち、図６に示すように、ｘ方向のナイキスト境界線周波数がμ１であり、ｘ方向の動きの滑らかさ境界線周波数がμ０であった場合、空間周波数範囲情報決定部１３０４４は、ｘ方向の空間周波数範囲情報をμ０≦μ≦μ１と決定する。
【０１８７】
また、図７に示すように、ｙ方向のナイキスト境界線周波数がν１であり、ｙ方向の動きの滑らかさ境界線周波数がν０であった場合、空間周波数範囲情報決定部１３０４４は、ｙ方向の空間周波数範囲情報をν０≦ν≦ν１と決定する。
【０１８８】
評価部１３０５は、入力部１３０１により入力されたフレーム画像１３０８と、空間周波数範囲決定部１３０４により入力された空間周波数範囲情報１３１２とに基づいて、入力された前記映像を構成するフレーム画像における空間周波数範囲内の信号強度値を算出し、かかる信号強度値と所定閾値との比較結果に基づいて、当該映像の動きの滑らかさを示す評価値を算出して、評価装置２０の出力として評価値１３１４を出力するように構成されている。
【０１８９】
図１５に示すように、評価部１３０５は、２次元フーリエ変換部１３０５１と、信号強度値算出部１３０５２と、評価値算出部１３０５３とを具備している。
【０１９０】
２次元フーリエ変換部１３０５１は、入力部１３０１により入力されたフレーム画像１３０８に対して２次元フーリエ変換処理を施して、各周波数における電力を含む２次元フーリエ画像１３０５４を作成し、信号強度値算出部１３０５２へ出力するように構成されている。
【０１９１】
信号強度値算出部１３０５２は、２次元フーリエ変換部１３０５１により入力された２次元フーリエ画像１３０５４と、空間周波数範囲決定部１３０４により入力された空間周波数範囲情報１３１２とを用いて、信号強度値１３０５５を算出し、評価値算出部１３０５３へ出力するように構成されている。
【０１９２】
図１６を用いて、信号強度値算出部１３０５２による信号強度値の算出方法について具体的に説明する。
【０１９３】
図１６（ａ）は、ｘ方向の信号強度値の算出方法を説明するための図であり、図１６（ｂ）は、ｙ方向の信号強度値の算出方法を説明するための図である。
【０１９４】
第１に、信号強度値算出部１３０５２は、２次元フーリエ画像１３０５４の各周波数成分の電力について、ｘ方向の空間周波数μにおけるν方向の全ての電力を足し合わせることによって、空間周波数μにおける電力の累積値であるμ成分累積値を算出する。
【０１９５】
第２に、信号強度値算出部１３０５２は、空間周波数範囲情報１３１２を用いて、ｘ方向の空間周波数範囲であるμ０≦μ≦μ１におけるμ成分累積値（図１６（ａ）における破線斜線部）を足し合わせることによって、ｘ方向の信号強度値を算出する。
【０１９６】
第３に、信号強度値算出部１３０５２は、２次元フーリエ画像１３０５４の各周波数成分の電力について、ｙ方向の空間周波数νにおけるμ方向の全ての電力を足し合わせすることによって、空間周波数νにおける電力の累積値であるν成分累積値を算出する。
【０１９７】
第４に、信号強度値算出部１３０５２は、空間周波数範囲情報１３１２を用いて、ｙ方向の空間周波数範囲であるν０≦ν≦ν１においてν成分累積値（図１６（ｂ）における実線斜線部）を足し合わせることによって、ｙ方向の信号強度値を算出する。
【０１９８】
第５に、信号強度値算出部１３０５２は、ｘ方向の信号強度とｙ方向の信号強度とを比較し、大きい方の値を信号強度値１３０５５として評価値算出部１３０５３へ出力する。
【０１９９】
評価値算出部１３０５３は、信号強度値算出部１３０５２から入力された信号強度値１３０５５と所定閾値との比較結果を、評価値１３１４を出力するように構成されている。
【０２００】
具体的には、評価値算出部１３０５３は、あるフレーム画像における信号強度値を「Ｓ」とし、所定閾値を「Ｔ」とする場合、動きの滑らかさの評価値Ｅを「Ｔ−Ｓ」により算出するように構成されている。
【０２０１】
さらに、評価値算出部１３０５３は、全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値を算出し、動きの滑らかさの評価値１３１４として出力するように構成されている。
【０２０２】
（本発明の第２の実施形態に係る映像評価方法）
以下、図１７乃至図１９を参照して、本実施形態に係る映像評価方法について説明する。
【０２０３】
第１に、図１７を参照して、本実施形態に係る映像評価方法の全体動作について説明する。
【０２０４】
図１７に示すように、ステップＳ１８０１において、入力部１３０１が、外部から入力された映像と、当該映像のフレームレートに関する情報を読み込む。
【０２０５】
ステップＳ１８０２において、動き特徴量抽出部１３０２が、当該映像の動き特徴量を抽出する。
【０２０６】
ステップＳ１８０３において、フレームレート取得部１３０３が、入力されたフレームレートに関する情報に基づいて、当該映像のフレームレートを取得する。
【０２０７】
ステップＳ１８０４において、空間周波数範囲決定部１３０４が、当該映像の動きの滑らかさを評価する対象となる空間周波数範囲を決定する。
【０２０８】
ステップＳ１８０５において、評価部１３０５が、当該映像の動きの滑らかさについて評価する。
【０２０９】
第２に、図１８を参照して、空間周波数範囲決定部１３０４の処理方法について説明する。
【０２１０】
図１８に示すように、ステップＳ１９０１において、空間周波数範囲決定部１３０４は、入力された映像の動き特徴量及びフレームレートを読み込む。
【０２１１】
ステップＳ１９０２において、ナイキスト境界周波数検出部１３０４２が、当該フレームレートにおける動き特徴量に対応するナイキスト境界周波数を、メモリ１３０４１から検出する。
【０２１２】
ステップＳ１９０３において、動きの滑らかさ境界周波数検出部１３０４３が、当該フレームレートにおける当該動き特徴量に対応する動きの滑らかさ境界周波数を、メモリ１３０４１から検出する。
【０２１３】
ステップＳ１９０４において、空間周波数範囲情報決定部１３０４４が、ナイキスト境界周波数と動きの滑らかさ境界周波数との間の空間周波数範囲を示す空間周波数範囲情報として決定する。
【０２１４】
第３に、図１９を参照して、評価部１３０５の処理方法について説明する。
【０２１５】
図１９に示すように、ステップＳ２００１において、２次元フーリエ変換部１３０５１が、入力されたフレーム画像に対して２次元フーリエ変換処理を施す。
【０２１６】
ステップＳ２００２１において、信号強度値算出部１３０５２が、上述の空間周波数範囲内における２次元フーリエ画像の各周波数成分の電力を累積して、電力の累積値を算出する。
【０２１７】
ステップＳ２００２２において、信号強度値算出部１３０５２が、空間周波数範囲内における電力の累積値を全て足し合わせることによって信号強度値を算出する。
【０２１８】
ここで、ステップ２００２１とステップ２００２２をあわせてステップＳ２００２とする。
【０２１９】
ステップＳ２００３１において、評価値算出部１３０５３が、算出した信号強度値と所定の閾値との比較結果に基づいて、各フレーム画像における評価値を算出する。
【０２２０】
ステップＳ２００３２において、評価値算出部１３０５３が、全てのフレーム画像における動きの滑らかさを示す評価値の平均値を算出し、動きの滑らかさを示す評価値として出力する。
【０２２１】
ここで、ステップＳ２０３２１とステップＳ２０３２２をあわせてステップＳ２０３２とする。
【０２２２】
（本発明の第２の実施形態に係る映像評価プログラム）
図２０を参照して、コンピュータを、上述した本実施形態に係る映像評価装置２０として機能させるための映像評価プログラム６０について説明する。
【０２２３】
図２０に示すように、映像評価プログラム６０は、処理を統括するメインモジュールプログラム２１０１と、入力モジュール２１０２と、動き特徴量抽出モジュール２１０３と、フレームレート取得モジュール２１０４と、空間周波数範囲決定モジュール２１０５と、評価モジュール２１０６とを備える。
【０２２４】
入力モジュール２１０２、動き特徴量抽出モジュール２１０３、フレームレート取得モジュール２１０４、空間周波数範囲決定モジュール２１０５及び評価モジュール２１０６が、コンピュータに行わせる機能は、それぞれ対応の入力部１３０１、動き特徴量抽出部１３０２、フレームレート取得部１３０３、空間周波数範囲決定部１３０４及び評価部１３０５の機能と同様である。
【０２２５】
なお、映像評価プログラム６０は、例えば、ＣＤ−ＲＯＭ、ＤＶＤ或いはＲＯＭ等の記憶媒体又は半導体メモリによって提供される。
【０２２６】
また、映像評価プログラム６０は、搬送波に重畳されたコンピュータデータ信号としてネットワークを介して提供されるものであってもよい。
【０２２７】
（本発明の第２の実施形態に係る映像評価装置の作用・効果）
本実施形態に係る映像評価装置２０によれば、入力部１３０１が、外部から入力された映像信号の中から抽出された映像を複数のフレーム画像及びフレームレートに関する情報を出力し、動き特徴量抽出部１３０２が、入力されたフレーム画像に基づいて当該映像の動き特徴量を抽出し、フレームレート取得部１３０３が、入力されたフレームレートに関する情報に基づいて当該映像のフレームレートを取得し、空間周波数範囲決定部１３０４が、当該映像の動きの滑らかさを評価する対象となる空間周波数範囲を決定し、評価部１３０５が、フレーム画像における当該空間周波数範囲内の信号強度値を算出し、かかる信号強度値と所定の閾値とを比較することによって、当該映像の動きに関する品質を評価するので、当該映像のフレームレートと当該映像の動き特徴量と空間周波数情報とに応じた、より高い精度の動きの滑らかさについて評価を行うことができる。
【０２２８】
また、本実施形態に係る映像評価装置２０によれば、空間周波数範囲決定部１３０４が、映像の動きを正しく表示できる境界であるナイキスト境界線と、当該映像の動きに関する品質が一定以上に保たれる境界である動きの滑らかさ境界線を用いて、当該映像の評価の対象となる空間周波数範囲を決定するので、当該映像の動きの滑らかさに関係する空間周波数の範囲に着目した評価を行うことができる。
【０２２９】
（変更例２）
なお、映像信号１３０６は、複数のフレーム画像により構成される映像や、当該映像のフレームレートに関する情報の他に、当該映像の動きに関する情報を含む信号であってもよい。
【０２３０】
かかる場合、動き特徴量抽出部１３０２は、入力部１３０１により入力された当該映像の動きに関する情報から、直接、動き特徴量を算出して空間周波数範囲決定部１３０４へ出力するように構成されていてもよい。
【０２３１】
また、動き特徴量抽出部１３０２は、必ずしも、８画素ｘ８画素のブロック単位で、動きベクトルの検出を行うように構成されている必要はなく、任意の大きさのブロック単位で、動きベクトルの検出を行うように構成されていてもよい。
【０２３２】
また、動き特徴量抽出部１３０２は、必ずしも、ブロック単位で、動きベクトルの検出を行うように構成されている必要はない。
【０２３３】
例えば、動き特徴量抽出部１３０２は、フレーム画像全体で、動き探索を行って、フレーム画像ごとに、１つの動きベクトルを検出するように構成されていてもよい。
【０２３４】
また、動き特徴量抽出部１３０２は、フレーム画像内の１画素ごとに、動きベクトルを検出するように構成されていてもよい。
【０２３５】
また、動き特徴量抽出部１３０２は、フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに、動きベクトルを検出するように構成されていてもよい。
【０２３６】
また、動き特徴量抽出部１３０２は、動き探索の方法として、必ずしもブロックマッチングを用いる必要はなく、濃度勾配法やその他のあらゆる映像の動きの変位量を検出する方法を用いることができる。
【０２３７】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、各フレーム画像の各ブロックのｘ方向及びｙ方向の動きベクトルの大きさの最大値には限らず、平均値、中間値、最小値又は最頻値であってもよい。
【０２３８】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、各フレーム画像単位で検出された１つの動きベクトルのｘ方向及びｙ方向の大きさであってもよい。
【０２３９】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、各フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに検出した動きベクトルのｘ方向及びｙ方向の大きさの最大値、平均値、中間値、最小値又は最頻値であってもよい。
【０２４０】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、必ずしも、フレーム画像単位で、ｘ方向及びｙ方向にそれぞれ１つである必要はなく、ブロック単位又はオブジェクト単位で、ｘ方向及びｙ方向にそれぞれ１つであってもよい。
【０２４１】
かかる場合、空間周波数範囲決定部１３０４によって出力される空間周波数範囲情報は、それぞれ、各フレーム画像のブロックごとに決定した空間周波数範囲情報であってもよいし、各フレーム画像を当該フレーム画像内のオブジェクト領域に分割し、オブジェクト領域ごとに決定した空間周波数範囲情報であってもよい。
【０２４２】
さらに、かかる場合、評価部１３０５によって算出されるｘ方向及びｙ方向の信号強度値は、それぞれ、ブロック単位又はオブジェクト単位ごとに１つであってもよい。
【０２４３】
かかる場合、評価部１３０５は、あるフレーム画像におけるブロック単位又はオブジェクト単位ごとに１つ算出されたｘ方向及びｙ方向の信号強度値の中での最大の信号強度値を、当該フレーム画像における信号強度値としてもよい。
【０２４４】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、必ずしも、ｘ方向及びｙ方向でそれぞれ１つである必要はなく、任意の直交する２つの方向にそれぞれ１つであってもよい。
【０２４５】
かかる場合、空間周波数範囲決定部１３０４によって出力される空間周波数範囲情報は、必ずしも、ｘ方向及びｙ方向である必要はなく、動き特徴量抽出部１３０２で動き特徴量を抽出した任意の直交する２つの方向について決定した空間周波数範囲情報であってもよい。
【０２４６】
また、かかる場合、評価部１３０５によって算出される信号強度値は、必ずしも、ｘ方向及びｙ方向である必要はなく、動き特徴量抽出部１３０２で動き特徴量を抽出した任意の直交する２つの方向について算出してもよい。
【０２４７】
また、空間周波数範囲決定部１３０４によってメモリ内に予め蓄積されているｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する方法は、ルックアップテーブルを参照する方法であってもよいし、ナイキスト境界線情報及び動きの滑らかさ境界線情報を表す数式を保持しておき、その数式から導き出してもよい。
【０２４８】
また、評価部１３０５によって算出される信号強度値は、必ずしも、２次元フーリエ画像を用いて算出する必要はなく、フレーム画像の各周波数における電力量を算出するあらゆる方法を用いることができる。
【０２４９】
また、評価部１３０５によって算出される信号強度値は、必ずしも、ｘ方向の信号強度値及びｙ方向の信号強度値のうちの大きい方の値である必要はなく、ｘ方向の信号強度値とｙ方向の信号強度値との和又は平均値、或いは、ｘ方向の信号強度値及びｙ方向の信号強度値のうちの小さい方の値であってもよい。
【０２５０】
また、評価部１３０５によって算出される各フレーム画像の動きの滑らかさを示す評価値Ｅは、必ずしも、信号強度値Ｓと所定閾値Ｔとを用いて、「Ｓ−Ｔ」により算出しなくてもよい。
【０２５１】
評価部１３０５によって算出される各フレーム画像における動きの滑らかさを示す評価値Ｅは、信号強度値Ｓが大きくなるほど、当該評価値Ｅが小さくなるあらゆる関数を用いてもよい。
【０２５２】
また、評価部１３０５によって算出される各フレーム画像の動きの滑らかさの評価値Ｅは、信号強度値Ｓと所定閾値Ｔとを比較し、その大小関係によって一定値に決定してもよい。
【０２５３】
また、評価部１３０５によって出力される評価値は、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値には限らず、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの最大値、中間値、最小値又は最頻値であってもよい。
【０２５４】
また、評価部１３０５によって出力される評価値は、必ずしも、入力された映像信号に含まれる全てのフレーム画像を通して１つの評価値である必要はなく、何枚かのフレーム画像、１枚ごとのフレーム画像、各フレーム画像のブロック単位又は各フレーム画像のオブジェクト単位に、１つの評価値であってもよい。
【０２５５】
（本発明の第３の実施形態に係る映像フレームレート決定装置）
図２１を参照して、本発明の第３の実施形態に係る映像フレームレート決定装置２２０について説明する。
【０２５６】
本実施形態に係る映像フレームレート決定装置２２０は、物理的には、ＣＰＵ(中央処理装置)や、メモリといった記憶装置や、通信装置等を備えるコンピュータにより実現されていてもよい。
【０２５７】
また、映像フレームレート決定装置２２０は、携帯電話といった移動体通信端末により実現されていてもよい。すなわち、映像フレームレート決定装置２２０には、情報処理可能な装置が広く適用され得る。
【０２５８】
図２１に示すように、映像フレームレート決定装置２２０は、機能的に、蓄積部２２０１と、フレームレート発生部２２０２と、映像信号生成部２２０３と、映像信号評価部２２０４と、フレームレート決定部２２０５とを備えている。
【０２５９】
なお、映像フレームレート決定装置２２０は、複数のフレーム画像２２０８により構成される映像２２０６のフレームレート２２１１を決定するように構成されている。
【０２６０】
蓄積部２２０１は、フレームレート２２１１を決定すべき対象である映像２２０６を取得して蓄積するように構成されている。
【０２６１】
また、蓄積部２２０１は、フレームレート発生部２２０２から入力されるフレームレート２２０７に応じて、蓄積されている映像２２０６を構成する複数のフレーム画像２２０８を抽出して、映像信号生成部２２０３へ出力するように構成されている。
【０２６２】
フレームレート発生部２２０２は、動きの滑らかさについて評価するための対象である第１のフレームレート２２０７を発生し、蓄積部２２０１と映像信号生成部２２０３とフレームレート決定部２２０５とに出力するように構成されている。
【０２６３】
映像信号生成部２２０３は、蓄積部２２０１から入力されたフレーム画像２２０８（蓄積部２２０１に蓄積されている映像２２０６）と、フレームレート発生部２２０２から入力されたフレームレート２２０７とを含む映像信号２２０９を生成して、映像信号評価部２２０４に出力するように構成されている。
【０２６４】
映像信号評価部２２０４は、映像信号生成部２２０３から入力された映像信号２２０９を用いて、当該映像信号２２０９に含まれている映像の動きの滑らかさについて評価することによって、上述の評価値２２１０を算出してフレームレート決定部２２０５へ出力するように構成されている。
【０２６５】
なお、映像信号評価部２２０４は、上述の第１の実施形態に係る映像評価装置１０又は第２の実施形態に係る映像評価装置２０の機能と同一の機能を有しているものとする。
【０２６６】
フレームレート決定部２２０５は、フレームレート発生部２２０２から入力されたフレームレート２２０７と、映像信号評価部２２０４から入力された評価値２２１０とを用いて、上述の映像に対する処理を行う第２のフレームレートであるフレームレート２２１１を決定して出力するように構成されている。
【０２６７】
具体的には、フレームレート決定部２２０５は、フレームレート発生部２２０２から入力されたフレームレート２２０７と、映像信号評価部２２０４から入力された評価値２２１０とある一定値との関係とを用いて、第２のフレームレート２２１１を決定するように構成されている。
【０２６８】
フレームレート決定部２２０５は、映像信号評価部２２０４から入力された評価値２２１０が、ある一定値より大きくなる場合は、第２のフレームレート２２１１を、第１のフレームレート２２０７とある一定値との差に比例して小さくして出力する。
【０２６９】
また、フレームレート決定部２２０５は、映像信号評価部２２０４から入力された評価値２２１０が、ある一定値より小さくなる場合は、第２のフレームレート２２１１を、第１のフレームレート２２０７とある一定値との差に比例して大きくして出力する。
【０２７０】
また、本実施形態に係る映像フレームレート決定装置２２０において、フレームレート発生部２２０２が、多様な値の第１のフレームレート２２０７を発生し、映像信号評価部２２０４において算出した評価値２２１０が、上述のある一定値と一致した場合、フレームレート決定部２２０５が、第２のフレームレート２２１１として、第１のフレームレート２２０７と同一のフレームレートを出力するようにしてもよい。
【０２７１】
なお、フレームレート決定部２２０５における比較に用いられる上述のある一定値は、予め決定されておいてもよいし、外部から与えられてもよい。
【０２７２】
また、フレームレート発生部２２０２により発生される第１のフレームレート２２０７は、予め決定されておいてもよいし、外部から与えられてもよい。
【０２７３】
また、フレームレート発生部２２０２は、予め決定されておいた複数のフレームレートの中から、１つ以上のフレームレートを選択して発生するように構成されていてもよい。
【０２７４】
（本発明の第３の実施形態に係る映像フレームレート決定方法）
図２２を参照して、本実施形態に係る映像フレームレート決定方法について説明する。
【０２７５】
図２２に示すように、ステップＳ２３０１において、フレームレート発生部２１０２が、第１のフレームレートを発生する。
【０２７６】
ステップＳ２３０２において、蓄積部２２０１が、かかる第１のフレームレートで、蓄積されているフレーム画像を抽出する。
【０２７７】
ステップＳ２３０３において、映像信号生成部２２０３が、蓄積部２２０１から抽出した複数のフレーム画像を用いて映像を生成し、生成した映像及び当該映像の滑らかさを評価するための第１のフレームレートを含む映像信号を生成する。
【０２７８】
ステップＳ２３０４において、映像信号評価部２２０４が、かかる映像信号に含まれる映像の動きの滑らかさについて評価する。
【０２７９】
ステップＳ２３０５において、フレームレート決定部２２０５が、フレームレート発生部２２０２から入力された第１のフレームレートと、映像信号評価部２２０４から入力された評価値Ｅとを用いて、当該映像に対する処理を行う第２のフレームレートを決定する。
【０２８０】
（本発明の第３の実施形態に係る映像フレームレート決定プログラム）
図２３を参照して、コンピュータを、上述の第３の実施形態に係る映像フレームレート決定装置２２０として機能させるための映像フレームレート決定プログラム２４０について説明する。
【０２８１】
図２４に示すように、映像フレームレート決定プログラム２４０は、処理を統括するメインモジュールプログラム２４０１と、蓄積モジュール２４０２と、フレームレート発生モジュール２４０３と、映像信号生成モジュール２４０４と、映像信号評価モジュール２４０５と、フレームレート決定モジュール２４０６とを備える。
【０２８２】
蓄積モジュール２４０２、フレームレート発生モジュール２４０３、映像信号生成モジュール２４０４、映像信号評価モジュール２４０５及びフレームレート決定モジュール２４０６が、コンピュータに行わせる機能は、それぞれ対応する蓄積部２２０１、フレームレート発生部２２０２、映像信号生成部２２０３、映像信号評価部２２０４及びフレームレート決定部２２０５の機能と同様である。
【０２８３】
なお、映像フレームレート決定プログラム２４０は、例えば、ＣＤ−ＲＯＭやＤＶＤ或いはＲＯＭ等の記憶媒体又は半導体メモリによって提供される。
【０２８４】
また、映像フレームレート決定プログラム２４０は、搬送波に重畳されたコンピュータデータ信号としてネットワークを介して提供されるものであってもよい。
【０２８５】
（本発明の第３の実施形態に係る映像フレームレート決定装置の作用・効果）
本実施形態に係る映像フレームレート決定装置２２によれば、映像信号評価部２２０４が、フレームレート発生部２２０２により発生された第１のフレームレートにおける映像の滑らかさについて評価し、第２のフレームレート２２１１を決定するため、映像の動きの滑らかさを示す評価値を用いて、当該映像の動きの滑らかさがある一定値（評価値）となるように、当該映像のフレームレートを決定することができる。
【図面の簡単な説明】
【０２８６】
【図１】本発明の第１の実施形態に係る映像評価装置の構成を示す機能ブロック図である。
【図２】ブロックマッチングによる動きベクトルの探索の様子を表す図である。
【図３】本発明の第１の実施形態に係る映像評価装置の空間周波数分析部の構成を示す機能ブロック図である。
【図４】（ａ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部に入力されたフレーム画像の一例を示す図であり、（ｂ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部に入力されたフレーム画像を２次元フーリエ変換することによって得られた２次元フーリエ変換画像の一例を示す図であり、（ｃ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部において、水平方向（ｘ方向）の空間周波数μにおける２次元フーリエ変換画像の電力の累積値であるμ成分累積値を算出する方法を表す図であり、（ｄ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部において、垂直方向（ｙ方向）の空間周波数νにおける２次元フーリエ変換画像の電力の累積値であるν成分累積値を算出する方法を表す図である。
【図５】本発明の第１の実施形態に係る映像評価装置の評価部の構成を示す機能ブロック図である。
【図６】本発明の第１の実施形態に係る映像評価装置の評価部において、ｘ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報から、μ方向空間周波数範囲情報を取得する方法を表す図である。
【図７】本発明の第１の実施形態に係る映像評価装置の評価部において、ｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報から、ν方向空間周波数範囲情報を取得する方法を表す図である。
【図８】（ａ）は、本発明の第１の実施形態に係る映像評価装置の評価部において、ｘ方向の動きの滑らかさ値Ｓｘを算出するために加算する累積値の領域を示す図であり、（ｂ）は、本発明の第１の実施形態に係る映像評価装置の評価部において、ｙ方向の動きの滑らかさ値Ｓｙを算出するために加算する累積値の領域を示す図であり、
【図９】本発明の第１の実施形態に係る映像評価方法を説明するフローチャートである。
【図１０】本発明の第１の実施形態に係る映像評価方法における空間周波数分析部の処理方法を説明するフローチャートである。
【図１１】本発明の第１の実施形態に係る映像評価方法における評価部の処理方法を説明するフローチャートである。
【図１２】本発明の第１の実施形態に係る映像評価プログラムを示す図である。
【図１３】本発明の第２の実施形態に係る映像評価装置の構成を示す機能ブロック図である。
【図１４】本発明の第２の実施形態に係る映像評価装置の空間周波数範囲決定部の構成を示す機能ブロック図である。
【図１５】本発明の第２の実施形態に係る映像評価装置の評価部の構成を示す機能ブロック図である。
【図１６】（ａ）は、本発明の第２の実施形態に係る映像評価装置の評価部において、ｘ方向の信号強度値を算出するために加算する累積値の領域を示す図であり、（ｂ）は、本発明の第２の実施形態に係る映像評価装置の評価部において、ｙ方向の信号強度値を算出するために加算する累積値の領域を示す図である。
【図１７】本発明の第２の実施形態に係る映像評価方法を説明するフローチャートである。
【図１８】本発明の第２の実施形態に係る映像評価方法における空間周波数範囲決定部の処理方法を説明するフローチャートである。
【図１９】本発明の第２の実施形態に係る映像評価方法における評価部の処理方法を説明するフローチャートである。
【図２０】本発明の第２の実施形態に係る映像評価プログラムを示す図である。
【図２１】本発明の第３の実施形態に係る映像フレームレート決定装置の構成を示す機能ブロック図である。
【図２２】本発明の第３の実施形態に係る映像フレームレート決定方法を説明するフローチャートである。
【図２３】本発明の第３の実施形態に係る映像フレームレート決定プログラムを示す図である。
【符号の説明】
【０２８７】
１０、２０…映像評価装置
１０１、１３０１…入力部
１０２、１３０２…動き特徴量抽出部
１０３、１３０３…フレームレート取得部
１０４…空間周波数分析部
１０４１、１３０５１…２次元フーリエ変換部
１０４２…累積値算出部
１３０４…空間周波数範囲決定部
１３０４２…ナイキスト境界周波数検出部
１３０４３…動きの滑らかさ境界周波数検出部
１３０４４…周波数範囲情報決定部
１０５、１３０５…評価部
１０５０１、１３０４１…メモリ
１０５０２…μ方向空間周波数範囲決定部
１０５０３…ｘ方向動きの滑らかさ値算出部
１０５０４…ν方向空間周波数範囲決定部
１０５０５…ｙ方向動きの滑らかさ値算出部
１０５０６、１３０５３…評価値算出部
１３０５２…信号強度値算出部
２２０…映像フレームレート決定装置
２２０１…蓄積部
２２０２…フレームレート発生部
２２０３…映像信号生成部
２２０４…映像信号評価部
２２０５…フレームレート決定部
５０、６０…映像評価プログラム
１２０１、２１０１、２４０１…メインモジュール
１２０２、２１０２…入力モジュール
１２０３、２１０３…動き特徴量抽出モジュール
１２０４、２１０４…フレームレート取得モジュール
１２０５…空間周波数分析モジュール
１２０６、２１０６…評価モジュール
２１０５…空間周波数範囲決定モジュール
２４０…映像フレームレート決定プログラム
２４０２…蓄積モジュール
２４０３…フレームレート発生モジュール
２４０４…映像信号生成モジュール
２４０５…映像信号評価モジュール
２４０６…フレームレート決定モジュール
【技術分野】
【０００１】
本発明は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置、映像評価方法及び映像評価プログラムに関する。
【０００２】
また、本発明は、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定装置、映像フレームレート決定方法及び映像フレームレート決定プログラムに関する。
【背景技術】
【０００３】
一般的に、「映像」に対する取得、蓄積、伝送、表示、符号化及び復号化を含む処理は、１秒あたりのフレーム数が一定である状態で、すなわち、固定フレームレートで行われている。
【０００４】
例えば、米国及び日本で採用されている全国テレビジョン標準委員会（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｔａｎｄａｒｄｓ Ｃｏｍｍｉｔｔｅｅ：ＮＴＳＣ）規格では、フレームレートは、２９.９７ｆｐｓと定義されており、ヨーロッパで採用されている全国テレビション標準委員会によって確立された位相交番ライン（Ｐｈａｓｅ Ａｌｔｅｒｎａｔｉｎｇ Ｌｉｎｅ：ＰＡＬ）規格では、フレームレートは、２５ｆｐｓと定義されている（非特許文献１参照）。
【０００５】
また、２４ｆｐｓや１５ｆｐｓの固定フレームレートで、上述の映像に対する処理が行われる場合もある。
【０００６】
ここで、「映像」とは、単一の静止画像である「フレーム画像」が複数連続することにより構成されるものであり、「フレームレート」とは、１秒あたりに処理されるフレーム画像数であり、「ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ）」とは、フレームレートを表す単位である。
【０００７】
固定フレームレートで処理される映像において、１秒あたりに処理されるフレーム画像数が増加すると、連続するフレーム画像の時間間隔が短くなるため、より滑らかな動きの映像として処理することが可能となる。
【０００８】
例えば、３０ｆｐｓのフレームレートで処理される映像は、１５ｆｐｓのフレームレートで処理される映像に比べて、映像の動きを時間的により細かく表現できるため、滑らかな動きの映像となる。
【０００９】
一方で、固定フレームレートで処理される映像において、１秒あたりに処理されるフレーム画像数が増加すると、単位時間あたりの処理量、処理に伴うデータ量及び電力消費量が増加する。
【００１０】
例えば、映像の取得においては、フレームレートが増加することにより、単位時間あたりに取得すべきフレーム画像数が増加し、単位時間あたりの処理量及び処理に伴う電力消費量が増加する。
【００１１】
また、映像の蓄積においては、フレームレートが増加することにより、単位時間あたりに蓄積すべきフレーム数が増加し、単位時間あたりの処理に伴うデータ量が増加する。
【００１２】
また、映像の処理量やデータ量に応じて、フレームレートを可変にする映像処理方法が存在する。
【００１３】
例えば、映像の符号化においては、符号化すべきデータ量が多い場合には、符号化時のバッファメモリの占有量が規定値を超えてしまうため、フレームレートを削減して、単位時間あたりに符号化するフレーム数を削減する（特許文献１参照）。
【非特許文献１】Ｒｅｃｏｍｍｅｎｄａｔｉｏｎ ＩＴＵ-Ｒ ＢＴ.４７０-６、Ｃｏｎｖｅｎｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎａｌ Ｓｙｓｔｅｍｓ
【特許文献１】特開平１１-２０５７９１号公報
【発明の開示】
【発明が解決しようとする課題】
【００１４】
しかしながら、固定フレームレートで、映像に対する処理を行う場合、滑らかな動きを実現するために、処理を行うためのフレームレートを高くすると、処理量、処理に伴うデータ量及び電力消費量が増加するという問題点があった。
【００１５】
逆に、固定フレームレートで、映像に対する処理を行う場合に、処理量、処理に伴うデータ量及び電力消費量を低減するために、フレームレートを低くすると、映像の動きの滑らかさが低下し、ギクシャクした動きの映像となってしまうという問題点があった。
【００１６】
また、可変フレームレートで、映像に対する処理を行う場合にも、映像の動きの滑らかさを考慮せずに、処理量や処理に伴うデータ量のみに応じて、フレームレート（処理を行うフレームの時間間隔）を変化させると、同様に、映像の動きの滑らかさが低下し、ギクシャクした動きの映像となってしまうという問題点があった。
【００１７】
ここで、映像の動きの滑らかさは、映像の持つ特徴に関係がある。例えば、映像の動きが全く無い場合や、映像の動きが非常に小さい場合は、フレームレートを低くしても、動きの滑らかさは低下しない。
【００１８】
また、一般的に、映像における空間周波数が高い場合、その動きを正確に把握するには、フレームレートを高くする必要があり、フレームレートを低くすると、動きの滑らかさが低下する。
【００１９】
そこで、本発明は、上述の課題に鑑みてなされたものであり、映像の動き特徴量、当該映像のフレームレート及び当該映像を構成するフレーム画像における空間周波数の分析結果を考慮して、当該映像の動きの滑らかさを評価することによって、当該映像の特徴に応じた、より高い精度の動きの滑らかさの評価を行うことができる映像評価装置、映像評価方法及び映像評価プログラムを提供することを目的とする。
【００２０】
また、本発明は、動きの滑らかさを示す評価値を一定以上に保つフレームレートを決定する映像フレームレート決定装置、映像フレームレート決定方法及び映像フレームレート決定プログラムを提供することを目的とする。
【課題を解決するための手段】
【００２１】
本発明の第１の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、入力された前記映像のフレームレートを取得するフレームレート取得部と、入力された前記映像を構成するフレーム画像における空間周波数を分析する空間周波数分析部と、抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを要旨とする。
【００２２】
本発明の第２の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、入力された前記映像のフレームレートを取得するフレームレート取得部と、抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する空間周波数範囲決定部と、入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを要旨とする。
【００２３】
本発明の第２の特徴において、前記空間周波数決定部は、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定してもよい。
【００２４】
本発明の第３の特徴は、本発明の第１又は第２の特徴に係る映像評価装置を具備しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定装置であって、前記映像を蓄積する蓄積部と、前記映像の第１のフレームレートを発生するフレームレート発生部と、前記蓄積部に蓄積されている前記映像と、前記フレームレート発生部により発生された前記第１のフレームレートとを含む映像信号を生成する映像信号生成部と、前記映像評価装置により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定するフレームレート決定部とを具備することを要旨とする。
【００２５】
本発明の第４の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、入力された前記映像のフレームレートを取得する工程と、入力された前記映像を構成するフレーム画像における空間周波数を分析する工程と、抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを要旨とする。
【００２６】
本発明の第５の特徴は、複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、入力された前記映像のフレームレートを取得する工程と、抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する工程と、入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを要旨とする。
【００２７】
本発明の第５の特徴において、前記空間周波数範囲を決定する工程において、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定してもよい。
【００２８】
本発明の第６の特徴は、本発明の第４又は第５の特徴に係る映像評価方法を有しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定方法であって、前記映像の第１のフレームレートを発生する工程と、蓄積部に蓄積されている前記映像と、前記フレームレートを発生する工程において発生された前記第１のフレームレートとを含む映像信号を生成する工程と、前記映像評価方法により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定する工程とを有することを要旨とする。
【００２９】
本発明の第７の特徴は、コンピュータを、本発明の第１又は第２の特徴に係る映像評価装置として機能させる映像評価装置であることを要旨とする。
【００３０】
本発明の第８の特徴は、コンピュータを、本発明の第３の特徴に係る映像フレームレート決定装置として機能させる映像フレームレート決定プログラムであることを要旨とする。
【発明の効果】
【００３１】
以上説明したように、本発明によれば、映像の動き特徴量、当該映像のフレームレート及び当該映像を構成するフレーム画像における空間周波数の分析結果を考慮して、当該映像の動きの滑らかさを評価することによって、当該映像の特徴に応じた、より高い精度の動きの滑らかさの評価を行うことができる映像評価装置、映像評価方法及び映像評価プログラムを提供することができる。
【００３２】
また、本発明によれば、動きの滑らかさを示す評価値を一定以上に保つフレームレートを決定する映像フレームレート決定装置、映像フレームレート決定方法及び映像フレームレート決定プログラムを提供するができる。
【発明を実施するための最良の形態】
【００３３】
（本発明の第１の実施形態に係る映像評価装置）
図１乃至図８を参照して、本発明の第１の実施形態に係る映像評価装置１０の構成について説明する。
【００３４】
本実施形態に係る映像評価装置１０は、複数のフレーム画像により構成される映像の動きの滑らかさを評価するように構成されている。
【００３５】
映像評価装置１０は、物理的には、ＣＰＵ（中央処理装置）や、メモリ等の記憶装置や、通信装置等を備えるコンピュータにより実現されていてもよい。また、映像評価装置１０は、携帯電話等の移動体通信端末により実現されていてもよい。すなわち、映像評価装置１０には、情報処理を行うことが可能な装置が、広く適用され得る。
【００３６】
図１に示すように、映像評価装置１０は、その機能的な構成要素として、入力部１０１と、動き特徴量抽出部１０２と、フレームレート取得部１０３と、空間周波数分析部１０４と、評価部１０５とを備えている。
【００３７】
入力部１０１は、外部から入力された映像信号１０７を取得するように構成されている。
【００３８】
なお、映像信号１０７は、単一の静止画像であるフレーム画像が複数連続することにより構成される映像と、当該映像のフレームレートに関する情報を含む信号である。
【００３９】
入力部１０１は、外部から入力された映像信号１０７の中から抽出した映像を複数のフレーム画像１０８に分解し、分解したフレーム画像１０８を動き特徴量抽出部１０２へ出力するように構成されている。
【００４０】
また、入力部１０１は、外部から入力された映像信号１０７の中から抽出したフレームレートに関する情報１０９をフレームレート取得部１０３へ出力するように構成されている。
【００４１】
また、入力部１０１は、外部から入力された映像信号１０７の中から抽出した映像を複数のフレーム画像１１０に分解し、分解したフレーム画像１１０を空間周波数分析部１０４へ出力するように構成されている。
【００４２】
動き特徴量抽出部１０２は、入力部１０１により入力されたフレーム画像１０８に基づいて、当該映像の動き特徴量１１１を抽出し、抽出した当該映像の動き特徴量１１１を評価部１０５へ出力するように構成されている。
【００４３】
具体的には、第１に、動き特徴量抽出部１０２は、入力部１０１から、連続する２枚のフレーム画像を読み込む。説明のため、この連続する２枚のフレーム画像を、順に、フレーム画像Ｐ０、フレーム画像Ｐ１と名付ける。
【００４４】
第２に、動き特徴量抽出部１０２は、入力部１０１から読み込んだフレーム画像Ｐ１を、一定の大きさ（８画素ｘ８画素）のブロックに分割する。
【００４５】
第３に、動き特徴量抽出部１０２は、フレーム画像Ｐ１のフレーム画像の各ブロックについて、フレーム画像Ｐ０の所定の探索範囲内で類似する画像信号パターンを、ブロックマッチングによって探索する。
【００４６】
第４に、動き特徴量抽出部１０２は、フレーム画像Ｐ１におけるブロックの画像信号パターンと、当該画像信号パターンに最も類似するフレーム画像Ｐ０における画像信号パターンとの間の空間的な変位量である動きベクトルを検出する。図２は、ブロックマッチングによる動きベクトルの探索の様子を表す図である。
【００４７】
第５に、動き特徴量抽出部１０２は、フレーム画像Ｐ１の各ブロックの動きベクトルを用いて、フレーム画像Ｐ１の各ブロックのｘ方向及びｙ方向の動きの大きさを計算する。
【００４８】
図２では、フレーム画像Ｐ１の当該ブロックの動きベクトルは、（ＭＶｘ、ＭＶｙ）であり、当該ブロックのｘ方向及びｙ方向の動きの大きさは、それぞれ、｜ＭＶｘ｜、｜ＭＶｙ｜（｜｜は、絶対値を算出する記号とする）となる。
【００４９】
第６に、動き特徴量抽出部１０２は、フレーム画像Ｐ１における全てのブロックのｘ方向及びｙ方向の動きの大きさの中で、ｘ方向及びｙ方向それぞれの動きの大きさの最大値｜ＭＶｘ｜ｍａｘ及び｜ＭＶｙ｜ｍａｘを、動き特徴量１１１として評価部１０５へ出力する。
【００５０】
フレームレート取得部１０３は、入力部１０１により入力されたフレームレートに関する情報１０９から、上述の映像のフレームレート１１２を取得して、評価部１０５へ出力するように構成されている。
【００５１】
具体的には、入力部１０１により入力されたフレームレートに関する情報１０９が、フレームレートの値そのものである場合、フレームレート取得部１０３は、当該フレームレートの値ｆを、フレームレート１１２として評価部１０５へ出力するように構成されている。
【００５２】
また、入力部１０１により入力されたフレームレートに関する情報１０９が、連続するフレーム画像の時間間隔である場合、フレームレート取得部１０３は、連続するフレーム画像の時間間隔から計算したフレームレートを、フレームレート１１２として評価部１０５へ出力するように構成されている。
【００５３】
なお、連続するフレームの時間間隔が、ｓ秒である場合、フレームレートの値ｆは、１/ｓ（ｆｐｓ）によって計算される。
【００５４】
また、フレームレート取得部１０３が、入力部１０１により入力されたフレームレートに関する情報１０９からフレームレートを計算する方法は、上記の方法には限定されない。
【００５５】
空間周波数分析部１０４は、入力部１０１により入力されたフレーム画像１１０における空間周波数を分析するように構成されている。
【００５６】
具体的には、空間周波数分析部１０４は、入力部１０１により入力されたフレーム画像１１０内で各空間周波数における電力の累積値を算出し、算出した電力の累積値を、空間周波数特徴量１１３（空間周波数の分析結果）として評価部１０５へ出力するように構成されている。
【００５７】
図３を用いて、空間周波数分析部１０４の機能について具体的に説明する。図３に示すように、空間周波数分析部１０４は、２次元フーリエ変換部１０４１と、累積値算出部１０４２とを具備する。
【００５８】
２次元フーリエ変換部１０４１が、入力部１０１により入力されたフレーム画像Ｐ１（１０４１）に対して２次元フーリエ変換処理を施すことによって、各周波数における電力１０４３を計算して、累積値算出部１０４２へ出力する用に構成されている。
【００５９】
図４（ａ）は、入力部１０１により入力されたフレーム画像Ｐ１を示し、図４（ｂ）は、当該フレーム画像Ｐ１に対して２次元フーリエ変換処理を施すことによって各周波数における電力１０４３の計算結果を含む２次元フーリエ変換画像Ｆ１を示す。
【００６０】
累積値算出部１０４２は、２次元フーリエ変換部１０４１により入力された各周波数における電力１０４３を用いて、図４（ｃ）に示すように、水平方向（ｘ方向）の空間周波数μにおけるν方向の全ての電力を足し合わせ、空間周波数μにおける電力の累積値であるμ成分累積値を算出するように構成されている。
【００６１】
また、累積値算出部１０４２は、２次元フーリエ変換部１０４１により入力された各周波数における電力１０４３を用いて、図４（ｄ）に示すように、垂直方向（ｙ方向）の空間周波数νにおけるμ方向の全ての電力を足し合わせ、空間周波数νにおける電力の累積値であるν成分累積値を算出するように構成されている。
【００６２】
また、累積値算出部１０４２は、算出したμ成分累積値及びν成分累積値を、空間周波数特徴量１１３（空間周波数の分析結果）として評価部１０５へ出力するように構成されている。
【００６３】
評価部１０５は、動き特徴量抽出部１０２により抽出された動き特徴量と、フレームレート取得部１０３により取得されたフレームレートと、空間周波数分析部１０４からの空間周波数特徴量１１３（空間周波数の分析結果）とを用いて、入力された映像の動きの滑らかさを示す評価値１１４を算出して出力するように構成されている。
【００６４】
具体的には、評価部１０５は、動き特徴量抽出部１０２から入力されたｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘ及びｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘと、フレームレート取得部１０３から入力されたフレームレートの値ｆと、空間周波数分析部１０４から入力されたμ成分累積値及びν成分累積値とを用いて、評価値１１４を算出するように構成されている。
【００６５】
図５を用いて、評価部１０５の機能について詳細に説明する。図５に示すように、評価部１０５は、メモリ１０５０１と、μ方向空間周波数範囲決定部１０５０２と、ｘ方向動きの滑らかさ値算出部１０５０３と、ν方向空間周波数範囲決定部１０５０４と、ｙ方向動きの滑らかさ値算出部１０５０５と、評価値算出部１０５０６とを具備している。
【００６６】
μ方向空間周波数範囲決定部１０５０２は、動き特徴量抽出部１０２から入力された動き特徴量１１１の中から抽出されたｘ方向の動きの大きさ（速さ）｜ＭＶｘ｜ｍａｘと、フレームレート取得部１０３から入力されたフレームレートの値ｆ（１１２）とを用いて、μ方向空間周波数範囲情報１０５０７を取得して、ｘ方向動きの滑らかさ値算出部１０５０３へ出力するように構成されている。
【００６７】
具体的には、μ方向空間周波数範囲決定部１０５０２は、メモリ１０５０１内に予め蓄積されている「ｘ方向のナイキスト境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向のナイキスト境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ１を取得する。
【００６８】
また、μ方向空間周波数範囲決定部１０５０２は、メモリ１０５０１内に予め蓄積されている「動きの滑らかさ境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向の動きの滑らかさ境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ０を取得する。
【００６９】
そして、μ方向空間周波数範囲決定部１０５０２は、取得したμ０及びμ１を、μ方向空間周波数範囲情報１０５０７としてｘ方向動きの滑らかさ値算出部１０５０３へ出力する。
【００７０】
ここで、「フレームレートｆにおけるｘ方向のナイキスト境界線」は、所定のフレームレートｆにおいて、映像のｘ方向の動きを正しく表示できる境界を示すものである。
【００７１】
例えば、「フレームレートｆにおけるｘ方向のナイキスト境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｘ｜ｍａｘ）を有する映像の動きを正しく表示できる空間周波数の限界値μ１を示す。
【００７２】
すなわち、「フレームレートｆにおけるｘ方向のナイキスト境界線」は、水平方向（ｘ方向）に空間周波数μを持ち、かつ、ｘ方向の動きの大きさが|ＭＶｘ｜である映像を、フレームレートｆで表示した場合に、当該映像のｘ方向の見かけ上の動きの大きさが|ＭＶｘ｜に保たれる境界である。
【００７３】
なお、映像は、かかる境界線より上部の領域では、静止して見えたり、逆方向に動いて見えたり、|ＭＶｘ｜とは異なる動きの大きさで動いて見えたりする。
【００７４】
また、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」は、ｘ方向の動きの滑らかさに関する映像品質境界線であり、所定のフレームレートｆにおいて、映像のｘ方向の動きが滑らかと感じられる限界の動きの大きさと空間周波数との関係を示すものである。
【００７５】
例えば、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｘ｜ｍａｘ）を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す。
【００７６】
なお、かかる境界線より上部では、ｘ方向の映像の動きがギクシャクして見える。
【００７７】
また、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」は、フレームレートｆにおいて、水平方向（ｘ方向）に空間周波数μを持つ映像のｘ方向の動きの大きさを変化させた場合に、映像の動きがギクシャクして見えるかどうかについて判断する主観評価で予め決定される。
【００７８】
メモリ１０５０１内には、各フレームレートにおけるｘ方向のナイキスト境界線及び動きの滑らかさ境界線が、それぞれｘ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報として予め蓄積されている。
【００７９】
同様に、ν方向空間周波数範囲決定部１０５０４は、動き特徴量抽出部１０２から入力された動き特徴量１１１の中から抽出されたｙ方向の動きの大きさ（速さ）｜ＭＶｙ｜ｍａｘと、フレームレート取得部１０３から入力されたフレームレートの値ｆ（１１２）とを用いて、ν方向空間周波数範囲情報１０５０８を取得して、ｙ方向動きの滑らかさ値算出部１０５０５へ出力するように構成されている。
【００８０】
具体的には、ν方向空間周波数範囲決定部１０５０４は、メモリ１０５０１内に予め蓄積されている「ｙ方向のナイキスト境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向のナイキスト境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν１を取得する。
【００８１】
また、ν方向空間周波数範囲決定部１０５０４は、メモリ１０５０１内に予め蓄積されている「動きの滑らかさ境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向の動きの滑らかさ境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν０を取得する。
【００８２】
そして、ν方向空間周波数範囲決定部１０５０４は、取得したν０及びν１を、ν方向空間周波数範囲情報１０５０８としてｙ方向動きの滑らかさ値算出部１０５０５へ出力する。
【００８３】
ここで、「フレームレートｆにおけるｙ方向のナイキスト境界線」は、所定のフレームレートｆにおいて、映像のｙ方向の動きを正しく表示できる境界を示すものである。
【００８４】
例えば、「フレームレートｆにおけるｙ方向のナイキスト境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｙ｜ｍａｘ）を有する映像の動きを正しく表示できる空間周波数の限界値ν１を示す。
【００８５】
すなわち、「フレームレートｆにおけるｙ方向のナイキスト境界線」は、垂直方向（ｙ方向）に空間周波数νを持ち、かつ、ｙ方向の動きの大きさが|ＭＶｙ｜である映像を、フレームレートｆで表示した場合に、当該映像のｙ方向の見かけ上の動きの大きさが|ＭＶｙ｜に保たれる境界である。
【００８６】
なお、映像は、かかる境界線より上部の領域では、静止して見えたり、逆方向に動いて見えたり、|ＭＶｙ｜とは異なる動きの大きさで動いて見えたりする。
【００８７】
また、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」は、ｙ方向の動きの滑らかさに関する映像品質境界線であり、所定のフレームレートｆにおいて、映像のｙ方向の動きが滑らかと感じられる限界の動きの大きさと空間周波数との関係を示すものである。
【００８８】
例えば、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」は、所定のフレームレートｆにおいて所定の動き特徴量（|ＭＶｙ｜ｍａｘ）を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す。
【００８９】
なお、かかる境界線より上部では、ｙ方向の映像の動きがギクシャクして見える。
【００９０】
また、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」は、フレームレートｆにおいて、垂直方向（ｙ方向）に空間周波数νを持つ映像のｙ方向の動きの大きさを変化させた場合に、映像の動きがギクシャクして見えるかどうかについて判断する主観評価で予め決定される。
【００９１】
メモリ１０５０１内には、各フレームレートにおけるｙ方向のナイキスト境界線及び動きの滑らかさ境界線が、それぞれｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報として予め蓄積されている。
【００９２】
ｘ方向動きの滑らかさ値算出部１０５０３は、空間周波数分析部１０４から入力された空間周波数特徴量１１３の中から抽出したμ成分累積値と、μ方向空間周波数範囲決定部１０５２から入力されたμ方向空間周波数範囲情報１０５０７とを用いて、μ０からμ１の間のμ方向空間周波数範囲内のμ成分累積値を全て加算することによって、ｘ方向の動きの滑らかさ値Ｓｘ（１０５０９）を算出して、評価値算出部１０５０６へ出力するように構成されている。
【００９３】
また、ｙ方向動きの滑らかさ値算出部１０５０５は、空間周波数分析部１０４から入力された空間周波数特徴量１１３の中から抽出したν成分累積値と、ν方向空間周波数範囲決定部１０５０４から入力されたν方向空間周波数範囲情報１０５０８とを用いて、ν０からν１の間のν方向空間周波数範囲内のν成分累積値を全て加算することによって、ｙ方向の動きの滑らかさ値（Ｓｙ）１０５１０を算出して、評価値算出部１０５０６へ出力するように構成されている。
【００９４】
図８（ａ）は、ｘ方向の動きの滑らかさ値Ｓｘを算出するために加算する累積値の領域を示す図であり、図８（ｂ）は、ｙ方向の動きの滑らかさ値Ｓｙを算出するために加算する累積値の領域を示す図である。
【００９５】
評価値算出部１０５０６は、ｘ方向動きの滑らかさ値算出部１０５０３から入力されたｘ方向の動きの滑らかさ値１０５０９と、ｙ方向動きの滑らかさ値算出部１０５０５から入力されたｙ方向の動きの滑らかさ値１０５１０とを比較し、大きい方を当該フレーム画像における動きの滑らかさ値Ｓとするように構成されている。
【００９６】
また、評価値算出部１０５０６は、動きの滑らかさ値Ｓと所定閾値とを比較し、当該フレーム画像における動きの滑らかさの評価値Ｅを算出するように構成されている。
【００９７】
具体的には、評価値算出部１０５３は、所定のフレーム画像における動きの滑らかさ値（信号強度値）を「Ｓ」とし、所定閾値を「Ｔ」とする場合、動きの滑らかさを示す評価値を「Ｅ」を「Ｔ−Ｓ」によって算出するように構成されている。
【００９８】
さらに、評価値算出部１０５０６は、全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値を算出して、動きの滑らかさを示す評価値１１４として出力する。
【００９９】
（本発明の第１の実施形態に係る映像評価方法）
以下、図９乃至図１１を参照して、本実施形態に係る映像評価方法について説明する。
【０１００】
第１に、図９を参照して、本実施形態に係る映像評価方法の全体動作について説明する。
【０１０１】
図９に示すように、ステップＳ９０１において、入力部１０１が、外部から入力された映像と、当該映像のフレームレートに関する情報を読み込む。
【０１０２】
ステップＳ９０２において、動き特徴量抽出部１０１が、当該映像の動き特徴量を抽出する。
【０１０３】
ステップＳ９０３において、フレームレート取得部１０３が、入力されたフレームレートに関する情報から、当該映像のフレームレートを取得する。
【０１０４】
ステップＳ９０４において、空間周波数分析部１０４が、当該映像を構成するフレーム画像における空間周波数特徴量について分析する。
【０１０５】
ステップＳ９０５において、評価部１０５が、当該映像の動き特徴量と、当該空間周波数特徴量と、当該映像のフレームレートとを用いて、入力された映像の動きの滑らかさについて評価する。
【０１０６】
第２に、図１０を参照して、空間周波数分析部１０４の処理方法について説明する。
【０１０７】
図１０に示すように、ステップＳ１００１において、２次元フーリエ変換部１０４１が、入力された映像に対して２次元フーリエ変換処理を施すことによって、各周波数における電力を計算する。
【０１０８】
ステップＳ１００２１において、累積値算出部１０４２が、各周波数における電力を用いて、水平方向の空間周波数μにおけるν方向の全ての電力を足し合わせることによって空間周波数μにおける電力の累積値であるμ成分累積値を算出する。
【０１０９】
また、ステップＳ１００２２において、累積値算出部１０４２が、垂直方向の空間周波数νにおけるμ方向の全ての電力を足し合わせることによって空間周波数νにおける電力の累積値であるν成分累積値を算出する。
【０１１０】
ここで、ステップＳ１００２１とステップＳ１００２２を合わせて、ステップＳ１００２とする。
【０１１１】
第３に、図１１を参照して、評価部１０５の処理方法について説明する。
【０１１２】
図１１に示すように、ステップＳ１１０１１において、μ方向空間周波数範囲決定部１０５０２が、映像のｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘと、フレームレートｆとを用いて、メモリ１０５０１内に予め蓄積されているｘ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する。
【０１１３】
ステップＳ１１０１２において、μ方向空間周波数範囲決定部１０５０２が、取得した「ナイキスト境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向のナイキスト境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ１を取得する。
【０１１４】
また、ステップＳ１１０１３において、μ方向空間周波数範囲決定部１０５０２が、取得した「動きの滑らかさ境界線情報」に基づいて、図６に示すように、フレームレートｆにおけるｘ方向の動きの滑らかさ境界線上で、ｘ方向の動きの大きさ｜ＭＶｘ｜ｍａｘにおける点の空間周波数μ０を取得する。
【０１１５】
ステップＳ１１０１４において、μ方向空間周波数範囲決定部１０５０２が、μ方向空間周波数範囲をμ０からμ１に決定する。
【０１１６】
ここで、ステップＳ１１０１１〜ステップＳ１１０１４をまとめてステップＳ１１０１とする。
【０１１７】
ステップＳ１１０２１において、ν方向空間周波数範囲決定部１０５０４が、映像のｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘと、フレームレートｆとを用いて、メモリ１０５０１内に予め蓄積されているｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する。
【０１１８】
ステップＳ１１０２２において、ν方向空間周波数範囲決定部１０５０４が、取得した「ナイキスト境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向のナイキスト境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν１を取得する。
【０１１９】
また、ステップＳ１１０２３において、ν方向空間周波数範囲決定部１０５０４が、取得した「動きの滑らかさ境界線情報」に基づいて、図７に示すように、フレームレートｆにおけるｙ方向の動きの滑らかさ境界線上で、ｙ方向の動きの大きさ｜ＭＶｙ｜ｍａｘにおける点の空間周波数ν０を取得する。
【０１２０】
ステップＳ１１０２４において、ν方向空間周波数範囲決定部１０５０４が、ν方向空間周波数範囲をν０からν１に決定する。
【０１２１】
ここで、ステップＳ１１０２１〜ステップＳ１１０２４をまとめてステップＳ１１０２とする。
【０１２２】
ステップＳ１１０３において、ｘ方向動きの滑らかさ値算出部１０５０３が、μ０からμ１の間のμ方向空間周波数範囲内のμ成分累積値を全て加算することによってｘ方向の動きの滑らかさ値Ｓｘを算出する。
【０１２３】
また、ステップＳ１１０４において、ｙ方向動きの滑らかさ値算出部１０５０５が、ν０からν１の間のν方向空間周波数範囲内のν成分累積値を全て加算することによってｙ方向の動きの滑らかさ値Ｓｙを算出する。
【０１２４】
ステップＳ１１０５１において、評価値算出部１０５０６が、ｘ方向の動きの滑らかさ値Ｓｘとｙ方向の動きの滑らかさ値Ｓｙとを比較する。
【０１２５】
ｘ方向の動きの滑らかさ値Ｓｘが、ｙ方向の動きの滑らかさ値Ｓｙより大きい場合は、ステップＳ１１０５２において、評価値算出部１０５０６が、当該フレーム画像における動きの滑らかさ値Ｓを、ｘ方向の動きの滑らかさ値Ｓｘとする。
【０１２６】
それ以外の場合は、ステップＳ１１０５３において、評価値算出部１０５０６が、当該フレーム画像における動きの滑らかさ値Ｓを、ｙ方向の動きの滑らかさ値Ｓｙとする。
【０１２７】
ステップＳ１１０５４において、評価値算出部１０５０６が、当該フレーム画像における動きの滑らかさを示す評価値Ｅを、所定閾値Ｔを用いて、「Ｓ−Ｔ」によって算出する。
【０１２８】
ステップＳ１１０５５において、評価値算出部１０５０６が、全てのフレーム画像における動きの滑らかさをします評価値Ｅの平均値を算出する）。
【０１２９】
ここで、ステップＳ１１０５１〜Ｓ１１０５５をまとめてステップＳ１１０５とする。
【０１３０】
（本発明の第１の実施形態に係る映像評価プログラム）
図１２を参照して、コンピュータを、上述した本実施形態に係る映像評価装置１０として機能させるための映像評価プログラム５０について説明する。
【０１３１】
図１２に示すように、映像評価プログラム５０は、処理を統括するメインモジュールプログラム１２０１と、入力ジュール１２０２と、動き特徴量抽出モジュール１２０３と、フレームレート取得モジュール１２０４と、空間周波数分析モジュール１２０５と、評価モジュール１２０６とを備える。
【０１３２】
入力ジュール１２０２、動き特徴量抽出モジュール１２０３、フレームレート取得モジュール１２０４、空間周波数分析モジュール１２０５及び評価モジュール１２０６がコンピュータに行わせる機能は、それぞれ対応する入力部１０１、動き特徴量抽出部１０２、フレームレート取得部１０３、空間周波数分析部１０４、評価部１０５の機能と同様である。
【０１３３】
なお、映像評価プログラム５０は、例えば、ＣＤ−ＲＯＭ、ＤＶＤ或いはＲＯＭ等の記憶媒体又は半導体メモリによって提供される。
【０１３４】
また、映像評価プログラム４０は、搬送波に重畳されたコンピュータデータ信号としてネットワークを介して提供されるものであってもよい。
【０１３５】
（本発明の第１の実施形態に係る映像評価装置の作用・効果）
本実施形態に係る映像評価装置１０によれば、入力部１０１が、外部から入力された映像信号の中から抽出した映像を複数のフレーム画像及びフレームレートに関する情報に分離して出力し、動き特徴量抽出部１０２が、入力されたフレーム画像に基づいて当該映像の動き特徴量を抽出し、フレームレート取得部１０３が、入力されたフレームレートに関する情報からフレームレートを取得し、空間周波数分析部１０４が、入力されたフレーム画像における空間周波数特徴量を算出し、評価部１０５が、動き特徴量と空間周波数特徴量とフレームレートから、入力された当該映像の動きの滑らかさを評価するので、映像の動き特徴量、フレームレート及び空間周波数を考慮して、より高い精度の動きの滑らかさの評価を行うことができる。
【０１３６】
（変更例１）
なお、映像信号１０７は、複数のフレーム画像により構成される映像や、当該映像のフレームレートに関する情報の他に、当該映像の動きに関する情報や、当該映像の空間周波数に関する情報を含む信号であってもよい。
【０１３７】
かかる場合、動き特徴量抽出部１０２は、入力部１０１により入力された当該映像の動きに関する情報から、直接、動き特徴量を算出して評価部１０５へ出力するように構成されていてもよい。
【０１３８】
また、空間周波数分析部１０４は、入力部１０１により入力された当該映像の空間周波数に関する情報から、直接、空間周波数特徴量を算出して評価部１０５へ出力するように構成されていてもよい。
【０１３９】
また、動き特徴量抽出部１０２は、必ずしも、８画素ｘ８画素のブロック単位で、動きベクトルの検出を行うように構成されている必要はなく、任意の大きさのブロック単位で、動きベクトルの検出を行うように構成されていてもよい。
【０１４０】
また、動き特徴量抽出部１０２は、必ずしも、ブロック単位で、動きベクトルの検出を行うように構成されている必要はない。
【０１４１】
例えば、動き特徴量抽出部１０２は、フレーム画像全体で、動き探索を行って、フレーム画像ごとに、１つの動きベクトルを検出するように構成されていてもよい。
【０１４２】
また、動き特徴量抽出部１０２は、フレーム画像内の１画素ごとに、動きベクトルを検出するように構成されていてもよい。
【０１４３】
また、動き特徴量抽出部１０２は、フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに、動きベクトルを検出するように構成されていてもよい。
【０１４４】
また、動き特徴量抽出部１０２は、動き探索の方法として、必ずしもブロックマッチングを用いる必要はなく、濃度勾配法やその他のあらゆる映像の動きの変位量を検出する方法を用いることができる。
【０１４５】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、各フレーム画像の各ブロックのｘ方向及びｙ方向の動きベクトルの大きさの最大値には限らず、平均値、中間値、最小値又は最頻値であってもよい。
【０１４６】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、各フレーム画像単位で検出された１つの動きベクトルのｘ方向及びｙ方向の大きさであってもよい。
【０１４７】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、各フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに検出した動きベクトルのｘ方向及びｙ方向の大きさの最大値、平均値、中間値、最小値又は最頻値であってもよい。
【０１４８】
また、動き特徴量抽出部１０２によって出力される動き特徴量は、必ずしも、フレーム画像単位で、ｘ方向及びｙ方向にそれぞれ１つである必要はなく、ブロック単位又はオブジェクト単位で、ｘ方向及びｙ方向にそれぞれ１つであってもよい。
【０１４９】
かかる場合、空間周波数分析部１０４によって出力される空間周波数特徴量は、それぞれ、各フレーム画像のブロックごとに分析した空間周波数特徴量であってもよいし、各フレーム画像を当該フレーム画像内のオブジェクト領域に分割し、オブジェクト領域ごとに分析した空間周波数特徴量であってもよい。
【０１５０】
さらに、かかる場合、評価部１０５によって算出されるｘ方向及びｙ方向の動きの滑らかさ値は、それぞれ、ブロック単位又はオブジェクト単位ごとに１つであってもよい。
【０１５１】
かかる場合、評価部１０５は、あるフレーム画像におけるブロック単位又はオブジェクト単位ごとに１つ算出されたｘ方向及びｙ方向の動きの滑らかさ値の中での最大の動きの滑らかさ値を、当該フレーム画像における動きの滑らかさ値Ｓとしてもよい。
【０１５２】
また、特徴量抽出部１０２によって出力される動き特徴量は、必ずしも、ｘ方向及びｙ方向でそれぞれ１つである必要はなく、任意の直交する２つの方向にそれぞれ１つであってもよい。
【０１５３】
かかる場合、空間周波数分析部１０４によって出力される空間周波数特徴量は、必ずしも、μ方向及びν方向である必要はなく、特徴量抽出部１０２で動き特徴量を抽出した任意の直交する２つの方向について分析した空間周波数特徴量であってもよい。
【０１５４】
また、かかる場合、評価部１０５によって算出される動きの滑らかさ値は、必ずしも、ｘ方向及びｙ方向である必要はなく、特徴量抽出部１０２で動き特徴量を抽出した任意の直交する２つの方向について算出してもよい。
【０１５５】
また、空間周波数分析部１０４によって算出される各周波数における電力は、必ずしも、２次元フーリエ画像を用いて算出する必要はなく、フレーム画像の各周波数における電力量を算出するあらゆる方法を用いることができる。
【０１５６】
また、評価部１０５によってメモリ内に予め蓄積されているｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する方法は、ルックアップテーブルを参照する方法であってもよいし、ナイキスト境界線情報及び動きの滑らかさ境界線情報を表す数式を保持しておき、その数式から導き出してもよい。
【０１５７】
また、評価部１０５によって算出される動きの滑らかさ値は、必ずしも、ｘ方向の動きの滑らかさ値及びｙ方向の動きの滑らかさ値のうちの大きい方の値である必要はなく、ｘ方向の動きの滑らかさ値とｙ方向の動きの滑らかさ値との和又は平均値、或いは、ｘ方向の動きの滑らかさ値及びｙ方向の動きの滑らかさ値のうちの小さい方の値であってもよい。
【０１５８】
また、評価部１０５によって算出される各フレーム画像の動きの滑らかさを示す評価値Ｅは、必ずしも、動きの滑らかさ値Ｓと所定閾値Ｔとを用いて、「Ｓ−Ｔ」により算出しなくてもよい。
【０１５９】
評価部１０５によって算出される各フレーム画像における動きの滑らかさを示す評価値Ｅは、動きの滑らかさ値Ｓが大きくなるほど、当該評価値Ｅが小さくなるあらゆる関数を用いてもよい。
【０１６０】
また、評価部１０５によって算出される各フレーム画像の動きの滑らかさを示す評価値Ｅは、動きの滑らかさ値Ｓと所定閾値Ｔとを比較し、その大小関係によって一定値に決定してもよい。
【０１６１】
また、評価部１０５によって出力される評価値は、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値には限らず、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの最大値、中間値、最小値又は最頻値であってもよい。
【０１６２】
また、評価部１０５によって出力される評価値は、必ずしも、入力された映像信号に含まれる全てのフレーム画像を通して１つの評価値である必要はなく、何枚かのフレーム画像、１枚ごとのフレーム画像、各フレーム画像のブロック単位又は各フレーム画像のオブジェクト単位に、１つの評価値であってもよい。
【０１６３】
（本発明の第２の実施形態に係る映像評価装置）
図１３乃至図１６を参照して、本発明の第２の実施形態に係る映像評価装置２０について説明する。以下、本実施形態に係る映像評価装置２０について、上述の第１の実施形態に係る映像評価装置１０との相違点に着目して説明する。
【０１６４】
図１３に示すように、映像評価装置２０は、その機能的な構成要素として、入力部１３０１と、動き特徴量抽出部１３０２と、フレームレート取得部１３０３と、空間周波数範囲決定部１３０４と、評価部１３０５とを備えている。
【０１６５】
入力部１３０１は、外部から入力された映像信号１３０６の中から抽出した映像を複数のフレーム画像１３０７に分解して、動き特徴量抽出部１３０２へ出力するように構成されている。
【０１６６】
また、入力部１３０１は、外部から入力された映像信号１３０６の中から抽出した映像を複数のフレーム画像１３０８に分解して、評価部１３０５へ出力するように構成されている。
【０１６７】
また、入力部１３０１は、外部から入力された映像信号１３０６の中から抽出したフレームレートに関する情報１３０９をフレームレート取得部１３０３へ出力するように構成されている。
【０１６８】
動き特徴量抽出部１３０２は、入力部１３０１により入力されたフレーム画像１３０７に基づいて、入力された映像の動き特徴量を抽出し、動き特徴量１３１０として空間周波数範囲決定部１３０４へ出力するように構成されている。
【０１６９】
具体的には、動き特徴量抽出部１３０２は、上述の動き特徴量抽出部１０２と同様の方法で、入力された映像の動き特徴量を抽出するように構成されている。
【０１７０】
フレームレート取得部１３０３は、入力部１３０１により入力されたフレームレートに関する情報１３０９から、入力された映像のフレームレート１３１１を取得し、空間周波数範囲決定部１３０４へ出力するように構成されている。
【０１７１】
具体的には、フレームレート取得部１３０３は、上述のフレームレート取得部１０３と同様の方法で、入力された映像のフレームレート１３１１を取得するように構成されている。
【０１７２】
空間周波数範囲決定部１３０４は、動き特徴量抽出部１３０２から入力された動き特徴量１３１０と、フレームレート取得部１３０３から入力されたフレームレート１３１１とを用いて、映像の動きの滑らかさについての評価の対象となる空間周波数範囲を決定し、決定した空間周波数範囲を示す空間周波数範囲情報１３１２を評価部１３０５へ出力するように構成されている。
【０１７３】
図１４を参照して、空間周波数範囲決定部１３０４が空間周波数範囲情報１３１２を決定する方法について具体的に説明する。
【０１７４】
図１４に示すように、空間周波数範囲決定部１３０４は、メモリ１３０４１と、ナイキスト境界周波数検出部１３０４２と、動きの滑らかさ境界周波数検出部１３０４３と、空間周波数範囲情報決定部１３０４４とを具備している。
【０１７５】
メモリ１３０４１には、各フレームレートにおけるｘ方向及びｙ方向のナイキスト境界線情報と、動きの滑らかさ境界線（動きの滑らかさに関する映像品質境界）情報とが保存されている。
【０１７６】
かかる各フレームレートにおけるｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報は、上述の第１の実施形態における評価部１０５のメモリ１０５０１内に予め蓄積されているｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報と同一である。
【０１７７】
ナイキスト境界周波数検出部１３０４２は、動き特徴量抽出部１３０２から入力された動き特徴量１３１０と、フレームレート取得部１３０３から入力されたフレームレート１３１１とを用いて、動き特徴量１３１０に対応する「フレームレートｆにおけるｘ方向及びｙ方向のナイキスト境界線」上の空間周波数をメモリ１３０４１から取得し、ナイキスト境界周波数１３０４５として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１７８】
すなわち、ナイキスト境界周波数検出部１３０４２は、フレームレートｆにおけるｘ方向の動きの大きさが｜ＭＶｘ｜ｍａｘである場合、図６に示すように、「フレームレートｆにおけるｘ方向のナイキスト境界線」上の空間周波数μ１をメモリ１３０４１から取得するように構成されている。
【０１７９】
また、ナイキスト境界周波数検出部１３０４２は、フレームレートｆにおけるｙ方向の動きの大きさが｜ＭＶｙ｜ｍａｘである場合、図７に示すように、「フレームレートｆにおけるｙ方向のナイキスト境界線」上の空間周波数ν１をメモリ１３０４１から取得するように構成されている。
【０１８０】
ナイキスト境界周波数検出部１３０４２は、空間周波数μ１及びν１を、ナイキスト境界周波数１３０４５として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１８１】
動きの滑らかさ境界周波数検出部１３０４３は、動き特徴量抽出部１３０２から入力された動き特徴量１３１０と、フレームレート取得部１３０３から入力されたフレームレート１３１１とを用いて、動き特徴量１３１０に対応する「フレームレートｆにおけるｘ方向及びｙ方向の動きの滑らかさ境界線」上の空間周波数をメモリ１３０４１から取得し、動きの滑らかさ境界周波数１３０４６として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１８２】
すなわち、動きの滑らかさ周波数検出部１３０４３は、フレームレートｆにおけるｘ方向の動きの大きさが｜ＭＶｘ｜ｍａｘである場合、図６に示すように、「フレームレートｆにおけるｘ方向の動きの滑らかさ境界線」上の空間周波数μ０をメモリ１３０４１から取得するように構成されている。
【０１８３】
また、動きの滑らかさ境界周波数検出部１３０４３は、フレームレートｆにおけるｙ方向の動きの大きさが｜ＭＶｙ｜ｍａｘである場合、図７に示すように、「フレームレートｆにおけるｙ方向の動きの滑らかさ境界線」上の空間周波数ν０をメモリ１３０４１から取得するように構成されている。
【０１８４】
動きの滑らかさ境界周波数検出部１３０４３は、空間周波数μ０及びν０を、動きの滑らかさ境界周波数１３０４６として空間周波数範囲情報決定部１３０４４へ出力するように構成されている。
【０１８５】
空間周波数範囲情報決定部１３０４４は、ナイキスト境界周波数検出部１３０４２から入力されたナイキスト境界周波数１３０４５と、動きの滑らかさ境界周波数検出部１３０４３から入力された動きの滑らかさ境界周波数１３０４６とを用いて、空間周波数範囲情報１３１２を決定し、空間周波数範囲決定部１３０４の出力として出力するように構成されている。
【０１８６】
すなわち、図６に示すように、ｘ方向のナイキスト境界線周波数がμ１であり、ｘ方向の動きの滑らかさ境界線周波数がμ０であった場合、空間周波数範囲情報決定部１３０４４は、ｘ方向の空間周波数範囲情報をμ０≦μ≦μ１と決定する。
【０１８７】
また、図７に示すように、ｙ方向のナイキスト境界線周波数がν１であり、ｙ方向の動きの滑らかさ境界線周波数がν０であった場合、空間周波数範囲情報決定部１３０４４は、ｙ方向の空間周波数範囲情報をν０≦ν≦ν１と決定する。
【０１８８】
評価部１３０５は、入力部１３０１により入力されたフレーム画像１３０８と、空間周波数範囲決定部１３０４により入力された空間周波数範囲情報１３１２とに基づいて、入力された前記映像を構成するフレーム画像における空間周波数範囲内の信号強度値を算出し、かかる信号強度値と所定閾値との比較結果に基づいて、当該映像の動きの滑らかさを示す評価値を算出して、評価装置２０の出力として評価値１３１４を出力するように構成されている。
【０１８９】
図１５に示すように、評価部１３０５は、２次元フーリエ変換部１３０５１と、信号強度値算出部１３０５２と、評価値算出部１３０５３とを具備している。
【０１９０】
２次元フーリエ変換部１３０５１は、入力部１３０１により入力されたフレーム画像１３０８に対して２次元フーリエ変換処理を施して、各周波数における電力を含む２次元フーリエ画像１３０５４を作成し、信号強度値算出部１３０５２へ出力するように構成されている。
【０１９１】
信号強度値算出部１３０５２は、２次元フーリエ変換部１３０５１により入力された２次元フーリエ画像１３０５４と、空間周波数範囲決定部１３０４により入力された空間周波数範囲情報１３１２とを用いて、信号強度値１３０５５を算出し、評価値算出部１３０５３へ出力するように構成されている。
【０１９２】
図１６を用いて、信号強度値算出部１３０５２による信号強度値の算出方法について具体的に説明する。
【０１９３】
図１６（ａ）は、ｘ方向の信号強度値の算出方法を説明するための図であり、図１６（ｂ）は、ｙ方向の信号強度値の算出方法を説明するための図である。
【０１９４】
第１に、信号強度値算出部１３０５２は、２次元フーリエ画像１３０５４の各周波数成分の電力について、ｘ方向の空間周波数μにおけるν方向の全ての電力を足し合わせることによって、空間周波数μにおける電力の累積値であるμ成分累積値を算出する。
【０１９５】
第２に、信号強度値算出部１３０５２は、空間周波数範囲情報１３１２を用いて、ｘ方向の空間周波数範囲であるμ０≦μ≦μ１におけるμ成分累積値（図１６（ａ）における破線斜線部）を足し合わせることによって、ｘ方向の信号強度値を算出する。
【０１９６】
第３に、信号強度値算出部１３０５２は、２次元フーリエ画像１３０５４の各周波数成分の電力について、ｙ方向の空間周波数νにおけるμ方向の全ての電力を足し合わせすることによって、空間周波数νにおける電力の累積値であるν成分累積値を算出する。
【０１９７】
第４に、信号強度値算出部１３０５２は、空間周波数範囲情報１３１２を用いて、ｙ方向の空間周波数範囲であるν０≦ν≦ν１においてν成分累積値（図１６（ｂ）における実線斜線部）を足し合わせることによって、ｙ方向の信号強度値を算出する。
【０１９８】
第５に、信号強度値算出部１３０５２は、ｘ方向の信号強度とｙ方向の信号強度とを比較し、大きい方の値を信号強度値１３０５５として評価値算出部１３０５３へ出力する。
【０１９９】
評価値算出部１３０５３は、信号強度値算出部１３０５２から入力された信号強度値１３０５５と所定閾値との比較結果を、評価値１３１４を出力するように構成されている。
【０２００】
具体的には、評価値算出部１３０５３は、あるフレーム画像における信号強度値を「Ｓ」とし、所定閾値を「Ｔ」とする場合、動きの滑らかさの評価値Ｅを「Ｔ−Ｓ」により算出するように構成されている。
【０２０１】
さらに、評価値算出部１３０５３は、全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値を算出し、動きの滑らかさの評価値１３１４として出力するように構成されている。
【０２０２】
（本発明の第２の実施形態に係る映像評価方法）
以下、図１７乃至図１９を参照して、本実施形態に係る映像評価方法について説明する。
【０２０３】
第１に、図１７を参照して、本実施形態に係る映像評価方法の全体動作について説明する。
【０２０４】
図１７に示すように、ステップＳ１８０１において、入力部１３０１が、外部から入力された映像と、当該映像のフレームレートに関する情報を読み込む。
【０２０５】
ステップＳ１８０２において、動き特徴量抽出部１３０２が、当該映像の動き特徴量を抽出する。
【０２０６】
ステップＳ１８０３において、フレームレート取得部１３０３が、入力されたフレームレートに関する情報に基づいて、当該映像のフレームレートを取得する。
【０２０７】
ステップＳ１８０４において、空間周波数範囲決定部１３０４が、当該映像の動きの滑らかさを評価する対象となる空間周波数範囲を決定する。
【０２０８】
ステップＳ１８０５において、評価部１３０５が、当該映像の動きの滑らかさについて評価する。
【０２０９】
第２に、図１８を参照して、空間周波数範囲決定部１３０４の処理方法について説明する。
【０２１０】
図１８に示すように、ステップＳ１９０１において、空間周波数範囲決定部１３０４は、入力された映像の動き特徴量及びフレームレートを読み込む。
【０２１１】
ステップＳ１９０２において、ナイキスト境界周波数検出部１３０４２が、当該フレームレートにおける動き特徴量に対応するナイキスト境界周波数を、メモリ１３０４１から検出する。
【０２１２】
ステップＳ１９０３において、動きの滑らかさ境界周波数検出部１３０４３が、当該フレームレートにおける当該動き特徴量に対応する動きの滑らかさ境界周波数を、メモリ１３０４１から検出する。
【０２１３】
ステップＳ１９０４において、空間周波数範囲情報決定部１３０４４が、ナイキスト境界周波数と動きの滑らかさ境界周波数との間の空間周波数範囲を示す空間周波数範囲情報として決定する。
【０２１４】
第３に、図１９を参照して、評価部１３０５の処理方法について説明する。
【０２１５】
図１９に示すように、ステップＳ２００１において、２次元フーリエ変換部１３０５１が、入力されたフレーム画像に対して２次元フーリエ変換処理を施す。
【０２１６】
ステップＳ２００２１において、信号強度値算出部１３０５２が、上述の空間周波数範囲内における２次元フーリエ画像の各周波数成分の電力を累積して、電力の累積値を算出する。
【０２１７】
ステップＳ２００２２において、信号強度値算出部１３０５２が、空間周波数範囲内における電力の累積値を全て足し合わせることによって信号強度値を算出する。
【０２１８】
ここで、ステップ２００２１とステップ２００２２をあわせてステップＳ２００２とする。
【０２１９】
ステップＳ２００３１において、評価値算出部１３０５３が、算出した信号強度値と所定の閾値との比較結果に基づいて、各フレーム画像における評価値を算出する。
【０２２０】
ステップＳ２００３２において、評価値算出部１３０５３が、全てのフレーム画像における動きの滑らかさを示す評価値の平均値を算出し、動きの滑らかさを示す評価値として出力する。
【０２２１】
ここで、ステップＳ２０３２１とステップＳ２０３２２をあわせてステップＳ２０３２とする。
【０２２２】
（本発明の第２の実施形態に係る映像評価プログラム）
図２０を参照して、コンピュータを、上述した本実施形態に係る映像評価装置２０として機能させるための映像評価プログラム６０について説明する。
【０２２３】
図２０に示すように、映像評価プログラム６０は、処理を統括するメインモジュールプログラム２１０１と、入力モジュール２１０２と、動き特徴量抽出モジュール２１０３と、フレームレート取得モジュール２１０４と、空間周波数範囲決定モジュール２１０５と、評価モジュール２１０６とを備える。
【０２２４】
入力モジュール２１０２、動き特徴量抽出モジュール２１０３、フレームレート取得モジュール２１０４、空間周波数範囲決定モジュール２１０５及び評価モジュール２１０６が、コンピュータに行わせる機能は、それぞれ対応の入力部１３０１、動き特徴量抽出部１３０２、フレームレート取得部１３０３、空間周波数範囲決定部１３０４及び評価部１３０５の機能と同様である。
【０２２５】
なお、映像評価プログラム６０は、例えば、ＣＤ−ＲＯＭ、ＤＶＤ或いはＲＯＭ等の記憶媒体又は半導体メモリによって提供される。
【０２２６】
また、映像評価プログラム６０は、搬送波に重畳されたコンピュータデータ信号としてネットワークを介して提供されるものであってもよい。
【０２２７】
（本発明の第２の実施形態に係る映像評価装置の作用・効果）
本実施形態に係る映像評価装置２０によれば、入力部１３０１が、外部から入力された映像信号の中から抽出された映像を複数のフレーム画像及びフレームレートに関する情報を出力し、動き特徴量抽出部１３０２が、入力されたフレーム画像に基づいて当該映像の動き特徴量を抽出し、フレームレート取得部１３０３が、入力されたフレームレートに関する情報に基づいて当該映像のフレームレートを取得し、空間周波数範囲決定部１３０４が、当該映像の動きの滑らかさを評価する対象となる空間周波数範囲を決定し、評価部１３０５が、フレーム画像における当該空間周波数範囲内の信号強度値を算出し、かかる信号強度値と所定の閾値とを比較することによって、当該映像の動きに関する品質を評価するので、当該映像のフレームレートと当該映像の動き特徴量と空間周波数情報とに応じた、より高い精度の動きの滑らかさについて評価を行うことができる。
【０２２８】
また、本実施形態に係る映像評価装置２０によれば、空間周波数範囲決定部１３０４が、映像の動きを正しく表示できる境界であるナイキスト境界線と、当該映像の動きに関する品質が一定以上に保たれる境界である動きの滑らかさ境界線を用いて、当該映像の評価の対象となる空間周波数範囲を決定するので、当該映像の動きの滑らかさに関係する空間周波数の範囲に着目した評価を行うことができる。
【０２２９】
（変更例２）
なお、映像信号１３０６は、複数のフレーム画像により構成される映像や、当該映像のフレームレートに関する情報の他に、当該映像の動きに関する情報を含む信号であってもよい。
【０２３０】
かかる場合、動き特徴量抽出部１３０２は、入力部１３０１により入力された当該映像の動きに関する情報から、直接、動き特徴量を算出して空間周波数範囲決定部１３０４へ出力するように構成されていてもよい。
【０２３１】
また、動き特徴量抽出部１３０２は、必ずしも、８画素ｘ８画素のブロック単位で、動きベクトルの検出を行うように構成されている必要はなく、任意の大きさのブロック単位で、動きベクトルの検出を行うように構成されていてもよい。
【０２３２】
また、動き特徴量抽出部１３０２は、必ずしも、ブロック単位で、動きベクトルの検出を行うように構成されている必要はない。
【０２３３】
例えば、動き特徴量抽出部１３０２は、フレーム画像全体で、動き探索を行って、フレーム画像ごとに、１つの動きベクトルを検出するように構成されていてもよい。
【０２３４】
また、動き特徴量抽出部１３０２は、フレーム画像内の１画素ごとに、動きベクトルを検出するように構成されていてもよい。
【０２３５】
また、動き特徴量抽出部１３０２は、フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに、動きベクトルを検出するように構成されていてもよい。
【０２３６】
また、動き特徴量抽出部１３０２は、動き探索の方法として、必ずしもブロックマッチングを用いる必要はなく、濃度勾配法やその他のあらゆる映像の動きの変位量を検出する方法を用いることができる。
【０２３７】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、各フレーム画像の各ブロックのｘ方向及びｙ方向の動きベクトルの大きさの最大値には限らず、平均値、中間値、最小値又は最頻値であってもよい。
【０２３８】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、各フレーム画像単位で検出された１つの動きベクトルのｘ方向及びｙ方向の大きさであってもよい。
【０２３９】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、各フレーム画像を、当該フレーム画像内のオブジェクト領域ごとに分割し、オブジェクト領域ごとに検出した動きベクトルのｘ方向及びｙ方向の大きさの最大値、平均値、中間値、最小値又は最頻値であってもよい。
【０２４０】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、必ずしも、フレーム画像単位で、ｘ方向及びｙ方向にそれぞれ１つである必要はなく、ブロック単位又はオブジェクト単位で、ｘ方向及びｙ方向にそれぞれ１つであってもよい。
【０２４１】
かかる場合、空間周波数範囲決定部１３０４によって出力される空間周波数範囲情報は、それぞれ、各フレーム画像のブロックごとに決定した空間周波数範囲情報であってもよいし、各フレーム画像を当該フレーム画像内のオブジェクト領域に分割し、オブジェクト領域ごとに決定した空間周波数範囲情報であってもよい。
【０２４２】
さらに、かかる場合、評価部１３０５によって算出されるｘ方向及びｙ方向の信号強度値は、それぞれ、ブロック単位又はオブジェクト単位ごとに１つであってもよい。
【０２４３】
かかる場合、評価部１３０５は、あるフレーム画像におけるブロック単位又はオブジェクト単位ごとに１つ算出されたｘ方向及びｙ方向の信号強度値の中での最大の信号強度値を、当該フレーム画像における信号強度値としてもよい。
【０２４４】
また、動き特徴量抽出部１３０２によって出力される動き特徴量は、必ずしも、ｘ方向及びｙ方向でそれぞれ１つである必要はなく、任意の直交する２つの方向にそれぞれ１つであってもよい。
【０２４５】
かかる場合、空間周波数範囲決定部１３０４によって出力される空間周波数範囲情報は、必ずしも、ｘ方向及びｙ方向である必要はなく、動き特徴量抽出部１３０２で動き特徴量を抽出した任意の直交する２つの方向について決定した空間周波数範囲情報であってもよい。
【０２４６】
また、かかる場合、評価部１３０５によって算出される信号強度値は、必ずしも、ｘ方向及びｙ方向である必要はなく、動き特徴量抽出部１３０２で動き特徴量を抽出した任意の直交する２つの方向について算出してもよい。
【０２４７】
また、空間周波数範囲決定部１３０４によってメモリ内に予め蓄積されているｘ方向及びｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報を取得する方法は、ルックアップテーブルを参照する方法であってもよいし、ナイキスト境界線情報及び動きの滑らかさ境界線情報を表す数式を保持しておき、その数式から導き出してもよい。
【０２４８】
また、評価部１３０５によって算出される信号強度値は、必ずしも、２次元フーリエ画像を用いて算出する必要はなく、フレーム画像の各周波数における電力量を算出するあらゆる方法を用いることができる。
【０２４９】
また、評価部１３０５によって算出される信号強度値は、必ずしも、ｘ方向の信号強度値及びｙ方向の信号強度値のうちの大きい方の値である必要はなく、ｘ方向の信号強度値とｙ方向の信号強度値との和又は平均値、或いは、ｘ方向の信号強度値及びｙ方向の信号強度値のうちの小さい方の値であってもよい。
【０２５０】
また、評価部１３０５によって算出される各フレーム画像の動きの滑らかさを示す評価値Ｅは、必ずしも、信号強度値Ｓと所定閾値Ｔとを用いて、「Ｓ−Ｔ」により算出しなくてもよい。
【０２５１】
評価部１３０５によって算出される各フレーム画像における動きの滑らかさを示す評価値Ｅは、信号強度値Ｓが大きくなるほど、当該評価値Ｅが小さくなるあらゆる関数を用いてもよい。
【０２５２】
また、評価部１３０５によって算出される各フレーム画像の動きの滑らかさの評価値Ｅは、信号強度値Ｓと所定閾値Ｔとを比較し、その大小関係によって一定値に決定してもよい。
【０２５３】
また、評価部１３０５によって出力される評価値は、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの平均値には限らず、入力された映像信号に含まれる全てのフレーム画像における動きの滑らかさを示す評価値Ｅの最大値、中間値、最小値又は最頻値であってもよい。
【０２５４】
また、評価部１３０５によって出力される評価値は、必ずしも、入力された映像信号に含まれる全てのフレーム画像を通して１つの評価値である必要はなく、何枚かのフレーム画像、１枚ごとのフレーム画像、各フレーム画像のブロック単位又は各フレーム画像のオブジェクト単位に、１つの評価値であってもよい。
【０２５５】
（本発明の第３の実施形態に係る映像フレームレート決定装置）
図２１を参照して、本発明の第３の実施形態に係る映像フレームレート決定装置２２０について説明する。
【０２５６】
本実施形態に係る映像フレームレート決定装置２２０は、物理的には、ＣＰＵ(中央処理装置)や、メモリといった記憶装置や、通信装置等を備えるコンピュータにより実現されていてもよい。
【０２５７】
また、映像フレームレート決定装置２２０は、携帯電話といった移動体通信端末により実現されていてもよい。すなわち、映像フレームレート決定装置２２０には、情報処理可能な装置が広く適用され得る。
【０２５８】
図２１に示すように、映像フレームレート決定装置２２０は、機能的に、蓄積部２２０１と、フレームレート発生部２２０２と、映像信号生成部２２０３と、映像信号評価部２２０４と、フレームレート決定部２２０５とを備えている。
【０２５９】
なお、映像フレームレート決定装置２２０は、複数のフレーム画像２２０８により構成される映像２２０６のフレームレート２２１１を決定するように構成されている。
【０２６０】
蓄積部２２０１は、フレームレート２２１１を決定すべき対象である映像２２０６を取得して蓄積するように構成されている。
【０２６１】
また、蓄積部２２０１は、フレームレート発生部２２０２から入力されるフレームレート２２０７に応じて、蓄積されている映像２２０６を構成する複数のフレーム画像２２０８を抽出して、映像信号生成部２２０３へ出力するように構成されている。
【０２６２】
フレームレート発生部２２０２は、動きの滑らかさについて評価するための対象である第１のフレームレート２２０７を発生し、蓄積部２２０１と映像信号生成部２２０３とフレームレート決定部２２０５とに出力するように構成されている。
【０２６３】
映像信号生成部２２０３は、蓄積部２２０１から入力されたフレーム画像２２０８（蓄積部２２０１に蓄積されている映像２２０６）と、フレームレート発生部２２０２から入力されたフレームレート２２０７とを含む映像信号２２０９を生成して、映像信号評価部２２０４に出力するように構成されている。
【０２６４】
映像信号評価部２２０４は、映像信号生成部２２０３から入力された映像信号２２０９を用いて、当該映像信号２２０９に含まれている映像の動きの滑らかさについて評価することによって、上述の評価値２２１０を算出してフレームレート決定部２２０５へ出力するように構成されている。
【０２６５】
なお、映像信号評価部２２０４は、上述の第１の実施形態に係る映像評価装置１０又は第２の実施形態に係る映像評価装置２０の機能と同一の機能を有しているものとする。
【０２６６】
フレームレート決定部２２０５は、フレームレート発生部２２０２から入力されたフレームレート２２０７と、映像信号評価部２２０４から入力された評価値２２１０とを用いて、上述の映像に対する処理を行う第２のフレームレートであるフレームレート２２１１を決定して出力するように構成されている。
【０２６７】
具体的には、フレームレート決定部２２０５は、フレームレート発生部２２０２から入力されたフレームレート２２０７と、映像信号評価部２２０４から入力された評価値２２１０とある一定値との関係とを用いて、第２のフレームレート２２１１を決定するように構成されている。
【０２６８】
フレームレート決定部２２０５は、映像信号評価部２２０４から入力された評価値２２１０が、ある一定値より大きくなる場合は、第２のフレームレート２２１１を、第１のフレームレート２２０７とある一定値との差に比例して小さくして出力する。
【０２６９】
また、フレームレート決定部２２０５は、映像信号評価部２２０４から入力された評価値２２１０が、ある一定値より小さくなる場合は、第２のフレームレート２２１１を、第１のフレームレート２２０７とある一定値との差に比例して大きくして出力する。
【０２７０】
また、本実施形態に係る映像フレームレート決定装置２２０において、フレームレート発生部２２０２が、多様な値の第１のフレームレート２２０７を発生し、映像信号評価部２２０４において算出した評価値２２１０が、上述のある一定値と一致した場合、フレームレート決定部２２０５が、第２のフレームレート２２１１として、第１のフレームレート２２０７と同一のフレームレートを出力するようにしてもよい。
【０２７１】
なお、フレームレート決定部２２０５における比較に用いられる上述のある一定値は、予め決定されておいてもよいし、外部から与えられてもよい。
【０２７２】
また、フレームレート発生部２２０２により発生される第１のフレームレート２２０７は、予め決定されておいてもよいし、外部から与えられてもよい。
【０２７３】
また、フレームレート発生部２２０２は、予め決定されておいた複数のフレームレートの中から、１つ以上のフレームレートを選択して発生するように構成されていてもよい。
【０２７４】
（本発明の第３の実施形態に係る映像フレームレート決定方法）
図２２を参照して、本実施形態に係る映像フレームレート決定方法について説明する。
【０２７５】
図２２に示すように、ステップＳ２３０１において、フレームレート発生部２１０２が、第１のフレームレートを発生する。
【０２７６】
ステップＳ２３０２において、蓄積部２２０１が、かかる第１のフレームレートで、蓄積されているフレーム画像を抽出する。
【０２７７】
ステップＳ２３０３において、映像信号生成部２２０３が、蓄積部２２０１から抽出した複数のフレーム画像を用いて映像を生成し、生成した映像及び当該映像の滑らかさを評価するための第１のフレームレートを含む映像信号を生成する。
【０２７８】
ステップＳ２３０４において、映像信号評価部２２０４が、かかる映像信号に含まれる映像の動きの滑らかさについて評価する。
【０２７９】
ステップＳ２３０５において、フレームレート決定部２２０５が、フレームレート発生部２２０２から入力された第１のフレームレートと、映像信号評価部２２０４から入力された評価値Ｅとを用いて、当該映像に対する処理を行う第２のフレームレートを決定する。
【０２８０】
（本発明の第３の実施形態に係る映像フレームレート決定プログラム）
図２３を参照して、コンピュータを、上述の第３の実施形態に係る映像フレームレート決定装置２２０として機能させるための映像フレームレート決定プログラム２４０について説明する。
【０２８１】
図２４に示すように、映像フレームレート決定プログラム２４０は、処理を統括するメインモジュールプログラム２４０１と、蓄積モジュール２４０２と、フレームレート発生モジュール２４０３と、映像信号生成モジュール２４０４と、映像信号評価モジュール２４０５と、フレームレート決定モジュール２４０６とを備える。
【０２８２】
蓄積モジュール２４０２、フレームレート発生モジュール２４０３、映像信号生成モジュール２４０４、映像信号評価モジュール２４０５及びフレームレート決定モジュール２４０６が、コンピュータに行わせる機能は、それぞれ対応する蓄積部２２０１、フレームレート発生部２２０２、映像信号生成部２２０３、映像信号評価部２２０４及びフレームレート決定部２２０５の機能と同様である。
【０２８３】
なお、映像フレームレート決定プログラム２４０は、例えば、ＣＤ−ＲＯＭやＤＶＤ或いはＲＯＭ等の記憶媒体又は半導体メモリによって提供される。
【０２８４】
また、映像フレームレート決定プログラム２４０は、搬送波に重畳されたコンピュータデータ信号としてネットワークを介して提供されるものであってもよい。
【０２８５】
（本発明の第３の実施形態に係る映像フレームレート決定装置の作用・効果）
本実施形態に係る映像フレームレート決定装置２２によれば、映像信号評価部２２０４が、フレームレート発生部２２０２により発生された第１のフレームレートにおける映像の滑らかさについて評価し、第２のフレームレート２２１１を決定するため、映像の動きの滑らかさを示す評価値を用いて、当該映像の動きの滑らかさがある一定値（評価値）となるように、当該映像のフレームレートを決定することができる。
【図面の簡単な説明】
【０２８６】
【図１】本発明の第１の実施形態に係る映像評価装置の構成を示す機能ブロック図である。
【図２】ブロックマッチングによる動きベクトルの探索の様子を表す図である。
【図３】本発明の第１の実施形態に係る映像評価装置の空間周波数分析部の構成を示す機能ブロック図である。
【図４】（ａ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部に入力されたフレーム画像の一例を示す図であり、（ｂ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部に入力されたフレーム画像を２次元フーリエ変換することによって得られた２次元フーリエ変換画像の一例を示す図であり、（ｃ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部において、水平方向（ｘ方向）の空間周波数μにおける２次元フーリエ変換画像の電力の累積値であるμ成分累積値を算出する方法を表す図であり、（ｄ）は、本発明の第１の実施形態に係る映像評価装置の空間周波数分析部において、垂直方向（ｙ方向）の空間周波数νにおける２次元フーリエ変換画像の電力の累積値であるν成分累積値を算出する方法を表す図である。
【図５】本発明の第１の実施形態に係る映像評価装置の評価部の構成を示す機能ブロック図である。
【図６】本発明の第１の実施形態に係る映像評価装置の評価部において、ｘ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報から、μ方向空間周波数範囲情報を取得する方法を表す図である。
【図７】本発明の第１の実施形態に係る映像評価装置の評価部において、ｙ方向のナイキスト境界線情報及び動きの滑らかさ境界線情報から、ν方向空間周波数範囲情報を取得する方法を表す図である。
【図８】（ａ）は、本発明の第１の実施形態に係る映像評価装置の評価部において、ｘ方向の動きの滑らかさ値Ｓｘを算出するために加算する累積値の領域を示す図であり、（ｂ）は、本発明の第１の実施形態に係る映像評価装置の評価部において、ｙ方向の動きの滑らかさ値Ｓｙを算出するために加算する累積値の領域を示す図であり、
【図９】本発明の第１の実施形態に係る映像評価方法を説明するフローチャートである。
【図１０】本発明の第１の実施形態に係る映像評価方法における空間周波数分析部の処理方法を説明するフローチャートである。
【図１１】本発明の第１の実施形態に係る映像評価方法における評価部の処理方法を説明するフローチャートである。
【図１２】本発明の第１の実施形態に係る映像評価プログラムを示す図である。
【図１３】本発明の第２の実施形態に係る映像評価装置の構成を示す機能ブロック図である。
【図１４】本発明の第２の実施形態に係る映像評価装置の空間周波数範囲決定部の構成を示す機能ブロック図である。
【図１５】本発明の第２の実施形態に係る映像評価装置の評価部の構成を示す機能ブロック図である。
【図１６】（ａ）は、本発明の第２の実施形態に係る映像評価装置の評価部において、ｘ方向の信号強度値を算出するために加算する累積値の領域を示す図であり、（ｂ）は、本発明の第２の実施形態に係る映像評価装置の評価部において、ｙ方向の信号強度値を算出するために加算する累積値の領域を示す図である。
【図１７】本発明の第２の実施形態に係る映像評価方法を説明するフローチャートである。
【図１８】本発明の第２の実施形態に係る映像評価方法における空間周波数範囲決定部の処理方法を説明するフローチャートである。
【図１９】本発明の第２の実施形態に係る映像評価方法における評価部の処理方法を説明するフローチャートである。
【図２０】本発明の第２の実施形態に係る映像評価プログラムを示す図である。
【図２１】本発明の第３の実施形態に係る映像フレームレート決定装置の構成を示す機能ブロック図である。
【図２２】本発明の第３の実施形態に係る映像フレームレート決定方法を説明するフローチャートである。
【図２３】本発明の第３の実施形態に係る映像フレームレート決定プログラムを示す図である。
【符号の説明】
【０２８７】
１０、２０…映像評価装置
１０１、１３０１…入力部
１０２、１３０２…動き特徴量抽出部
１０３、１３０３…フレームレート取得部
１０４…空間周波数分析部
１０４１、１３０５１…２次元フーリエ変換部
１０４２…累積値算出部
１３０４…空間周波数範囲決定部
１３０４２…ナイキスト境界周波数検出部
１３０４３…動きの滑らかさ境界周波数検出部
１３０４４…周波数範囲情報決定部
１０５、１３０５…評価部
１０５０１、１３０４１…メモリ
１０５０２…μ方向空間周波数範囲決定部
１０５０３…ｘ方向動きの滑らかさ値算出部
１０５０４…ν方向空間周波数範囲決定部
１０５０５…ｙ方向動きの滑らかさ値算出部
１０５０６、１３０５３…評価値算出部
１３０５２…信号強度値算出部
２２０…映像フレームレート決定装置
２２０１…蓄積部
２２０２…フレームレート発生部
２２０３…映像信号生成部
２２０４…映像信号評価部
２２０５…フレームレート決定部
５０、６０…映像評価プログラム
１２０１、２１０１、２４０１…メインモジュール
１２０２、２１０２…入力モジュール
１２０３、２１０３…動き特徴量抽出モジュール
１２０４、２１０４…フレームレート取得モジュール
１２０５…空間周波数分析モジュール
１２０６、２１０６…評価モジュール
２１０５…空間周波数範囲決定モジュール
２４０…映像フレームレート決定プログラム
２４０２…蓄積モジュール
２４０３…フレームレート発生モジュール
２４０４…映像信号生成モジュール
２４０５…映像信号評価モジュール
２４０６…フレームレート決定モジュール
【特許請求の範囲】
【請求項１】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、
入力された前記映像のフレームレートを取得するフレームレート取得部と、
入力された前記映像を構成するフレーム画像における空間周波数を分析する空間周波数分析部と、
抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを特徴とする映像評価装置。
【請求項２】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、
入力された前記映像のフレームレートを取得するフレームレート取得部と、
抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する空間周波数範囲決定部と、
入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを特徴とする映像評価装置。
【請求項３】
前記空間周波数決定部は、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定することを特徴とする請求項２に記載の映像評価装置。
【請求項４】
請求項１乃至３のいずれか一項に記載の映像評価装置を具備しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定装置であって、
前記映像を蓄積する蓄積部と、
前記映像の第１のフレームレートを発生するフレームレート発生部と、
前記蓄積部に蓄積されている前記映像と、前記フレームレート発生部により発生された前記第１のフレームレートとを含む映像信号を生成する映像信号生成部と、
前記映像評価装置により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定するフレームレート決定部とを具備することを特徴とする映像フレームレート決定装置。
【請求項５】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、
入力された前記映像のフレームレートを取得する工程と、
入力された前記映像を構成するフレーム画像における空間周波数を分析する工程と、
抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを特徴とする映像評価方法。
【請求項６】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、
入力された前記映像のフレームレートを取得する工程と、
抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する工程と、
入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを特徴とする映像評価方法。
【請求項７】
前記空間周波数範囲を決定する工程において、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定することを特徴とする請求項６に記載の映像評価方法。
【請求項８】
請求項５乃至７のいずれか一項に記載の映像評価方法を有しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定方法であって、
前記映像の第１のフレームレートを発生する工程と、
蓄積部に蓄積されている前記映像と、前記フレームレートを発生する工程において発生された前記第１のフレームレートとを含む映像信号を生成する工程と、
前記映像評価方法により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定する工程とを有することを特徴とする映像フレームレート決定方法。
【請求項９】
コンピュータを、
請求項１乃至３のいずれか一項に記載の映像評価装置として機能させることを特徴とする映像評価プログラム。
【請求項１０】
コンピュータを、
請求項４に記載の映像フレームレート決定装置として機能させることを特徴とする映像フレームレート決定プログラム。
【請求項１】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、
入力された前記映像のフレームレートを取得するフレームレート取得部と、
入力された前記映像を構成するフレーム画像における空間周波数を分析する空間周波数分析部と、
抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを特徴とする映像評価装置。
【請求項２】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価装置であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する動き特徴量抽出部と、
入力された前記映像のフレームレートを取得するフレームレート取得部と、
抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する空間周波数範囲決定部と、
入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する評価部とを具備することを特徴とする映像評価装置。
【請求項３】
前記空間周波数決定部は、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定することを特徴とする請求項２に記載の映像評価装置。
【請求項４】
請求項１乃至３のいずれか一項に記載の映像評価装置を具備しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定装置であって、
前記映像を蓄積する蓄積部と、
前記映像の第１のフレームレートを発生するフレームレート発生部と、
前記蓄積部に蓄積されている前記映像と、前記フレームレート発生部により発生された前記第１のフレームレートとを含む映像信号を生成する映像信号生成部と、
前記映像評価装置により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定するフレームレート決定部とを具備することを特徴とする映像フレームレート決定装置。
【請求項５】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、
入力された前記映像のフレームレートを取得する工程と、
入力された前記映像を構成するフレーム画像における空間周波数を分析する工程と、
抽出された前記動き特徴量と、取得された前記フレームレートと、前記空間周波数の分析結果とを用いて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを特徴とする映像評価方法。
【請求項６】
複数のフレーム画像により構成される映像の動きの滑らかさを評価する映像評価方法であって、
入力された前記映像を構成するフレーム画像に基づいて、該映像の動き特徴量を抽出する工程と、
入力された前記映像のフレームレートを取得する工程と、
抽出された前記動き特徴量と、取得された前記フレームレートとを用いて、前記映像の評価の対象となる空間周波数範囲を決定する工程と、
入力された前記映像を構成するフレーム画像における前記空間周波数範囲内の信号強度値と所定閾値との比較結果に基づいて、前記映像の動きの滑らかさを示す評価値を算出する工程とを有することを特徴とする映像評価方法。
【請求項７】
前記空間周波数範囲を決定する工程において、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きを正しく表示できる空間周波数の限界値を示すナイキスト境界線と、所定のフレームレートにおいて所定の動き特徴量を有する映像の動きに関する品質が一定以上に保たれる空間周波数の限界値を示す映像品質境界線とを用いて、前記空間周波数範囲を決定することを特徴とする請求項６に記載の映像評価方法。
【請求項８】
請求項５乃至７のいずれか一項に記載の映像評価方法を有しており、複数のフレーム画像により構成される映像のフレームレートを決定する映像フレームレート決定方法であって、
前記映像の第１のフレームレートを発生する工程と、
蓄積部に蓄積されている前記映像と、前記フレームレートを発生する工程において発生された前記第１のフレームレートとを含む映像信号を生成する工程と、
前記映像評価方法により算出された前記評価値を用いて、前記映像の第２のフレームレートを決定する工程とを有することを特徴とする映像フレームレート決定方法。
【請求項９】
コンピュータを、
請求項１乃至３のいずれか一項に記載の映像評価装置として機能させることを特徴とする映像評価プログラム。
【請求項１０】
コンピュータを、
請求項４に記載の映像フレームレート決定装置として機能させることを特徴とする映像フレームレート決定プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【公開番号】特開２００８−７２６６５（Ｐ２００８−７２６６５Ａ）
【公開日】平成２０年３月２７日（２００８．３．２７）
【国際特許分類】
【出願番号】特願２００６−２５１７７９（Ｐ２００６−２５１７７９）
【出願日】平成１８年９月１５日（２００６．９．１５）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【出願人】（８０３０００１１５）学校法人東京理科大学 (545)
【Ｆターム（参考）】
【公開日】平成２０年３月２７日（２００８．３．２７）
【国際特許分類】
【出願日】平成１８年９月１５日（２００６．９．１５）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【出願人】（８０３０００１１５）学校法人東京理科大学 (545)
【Ｆターム（参考）】
[ Back to top ]