映像比較監視システム、映像比較監視方法、映像比較監視プログラム及び映像比較監視プログラム用記録媒体
【課題】リアルタイムに比較監視を行い、その結果をオフラインで検証し、比較条件にフィードバックして、２つの映像ストリームを人間の知覚に近いレベルでリアルタイムに比較すること。
【解決手段】人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較する。
【解決手段】人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像を比較して監視する技術に関する。
【背景技術】
【０００２】
現在では、従来の地上波アナログ放送と共に、高精細性、高音質・多機能性、双方向性等の様々な利便的特徴から、ＭＰＥＧ２の信号圧縮方式を採用した地上波デジタル放送が開始されている。
【０００３】
通常、このような地上波デジタル放送は無線通信ネットワークを通じてユーザに提供されるが、放送されている地上波デジタル放送をリアルタイムに捕捉し、Ｈ．２６４の圧縮形式で圧縮した後に、ＩＰ化した時系列な複数の画像データ（フレームという場合もある）を再送信することにより、光回線等の有線通信ネットワークを通じて地上波デジタル放送を擬似的に提供することが可能となっている（非特許文献１，２参照）。
【０００４】
図７は、従来の映像比較監視システムを概略的に示す図である。図７（ａ）はリアルタイムで映像比較監視するシステムを示し、図７（ｂ）はオフラインで映像比較するシステムを示している。
【０００５】
リアルタイム型の映像比較監視システムでは、放送されている地上波デジタル放送の放送用映像ストリームＡを捕捉し、放送用映像ストリームＡを構成している複数の放送用画像データＡを時系列順にバッファＡに書き込むと共に、ＩＰ再送信されている再送信用映像ストリームＢを捕捉し、再送信用映像ストリームＢを構成している複数の再送信用画像データＢを時系列順にバッファＢに書き込み、各バッファＡ，Ｂから各放送用画像データＡと各再送信用画像データＢとをそれぞれ取得して画像データ単位（フレーム単位）で比較し、予め設定されている比較監視パラメータの値に合致するか否かをリアルタイムに判定して、合致しない再送信用画像データＢをエラーとして検知していた。
【０００６】
その後、エラー検知された再送信用画像データＢが人間の目から見てエラーに値するか否かを判断し、エラー検知に値しない場合には比較監視パラメータの値を調整して、以降同様の再送信用画像データＢが送信された際にはエラー検知しないようにすることで再送信用画像データを監視していた。
【０００７】
このような従来のリアルタイム型の映像比較監視システムによれば、リアルタイムに画像データを比較するため、放送のような映像ストリームの監視には好適である。しかしながら、再度同様の映像ストリームが出現するとは限らないため、調整後の比較監視パラメータの値を検証することは不可能であり、実際に人間の目で見て障害があるか否かを判断可能な視聴監視レベルまで比較監視パラメータを調整することは困難であった。
【０００８】
一方、オフライン型の映像比較システムでは、上記複数の放送用画像データＡと上記複数の再送信用画像データＢとをデータ蓄積部に逐次一旦蓄積しておき、必要に応じて放送用画像データＡと再送信用画像データＢとをデータ蓄積部から読み出して所定の比較アルゴリズムを用いて画像比較を行い、予め設定されている比較パラメータに合致するか否かを判定し、合致しない場合に再送信用画像データＢをエラーとして検知していた。
【０００９】
このような従来のオフライン型の映像比較システムによれば、リアルタイム性が求められないため、比較処理時間を必要とする比較アルゴリズムを採用することが可能であり、比較アルゴリズムの比較監視パラメータを何度も調整して画像比較を繰り返して詳細に行うことができ、画像データの相違箇所を正確に評価することが可能である。しかしながら、原則として二度と同じ画像データが出現しない放送のような絶えず変化する映像ストリームをリアルタイムに監視する用途には不向きであった。
【００１０】
そこで、２つの映像ストリームのリアルタイムでの映像比較監視を人間による視聴監視に近いレベルで実施できるように、リアルタイム型の映像比較監視システムからエラー検知を受けたオペレータが、画像データを蓄積したオフライン型の映像比較システムを使用して、エラー検知時刻から目的の画像データを検索し、エラー検知が妥当であるか否かを比較アルゴリズムを用いて比較監視パラメータを可変しながら具体的に判断し、その判断結果に基づいてリアルタイム型の映像比較監視システムの比較監視パラメータを調整することを繰り返し行うことも可能であった。
【先行技術文献】
【非特許文献】
【００１１】
【非特許文献１】「IPTV規定 地上デジタルテレビジョン放送 IP再送信運用規定」、有限責任中間法人IPTVフォーラム、2008年12月8日発行、IPTVFJ STD-0005、1.1版
【非特許文献２】「IPTV規定 BSデジタル放送 IP再送信運用規定」、一般社団法人IPTVフォーラム、2009年9月30日発行、IPTVFJ STD-0009、1.0版
【発明の概要】
【発明が解決しようとする課題】
【００１２】
比較監視に用いられる処理には画像処理、画像認識、その他メタ情報を用いることが考えられるが、人間の極めて複雑な視聴感覚に近づけるような画像比較処理を自動で行うには、様々な比較アルゴリズムを導入して比較監視パラメータの調整をその都度行う必要があるため、単純な既存施術の組み合わせでは画像比較処理が煩雑且つ高負荷となり、膨大な時間を要するという問題があった。
【００１３】
また、このような問題に起因して、様々な比較アルゴリズムの導入や比較監視パラメータの変更等を迅速に対応することが困難となり、次々と対処すべき事象が発生する監視現場ではエラー検知の妥当性の調査がされずに保留された状態の監視結果が存在するという問題もあった。
【００１４】
本発明は、上記を鑑みてなされたものであり、リアルタイムに比較監視を行い、その結果をオフラインで検証し、比較条件にフィードバックして、２つの映像ストリームを人間の知覚に近いレベルでリアルタイムに比較することを課題とする。
【課題を解決するための手段】
【００１５】
請求項１に記載の本発明は、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを蓄積する画像データ蓄積手段と、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録するリアルタイム型映像比較監視手段と、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定するオフライン型追比較検証手段と、を有することを特徴とする。
【００１６】
本発明によれば、複数の放送用画像データと複数の再送信用画像データとを、放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、その第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行うため、リアルタイムでの監視を実現しながら、人間の視聴感覚に近づけるような複数の比較処理をリアルタイム監視向けに短時間で実現することが可能となる。
【００１７】
本発明によれば、画像比較結果記録手段から各識別情報を読み出して、その各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを画像データ蓄積手段から取得するため、リアルタイム型映像比較監視手段とオフライン型追比較検証手段との間で、対象となる画像データの時間ズレや検出結果の差異等の発生を防止することが可能となる。
【００１８】
請求項２に記載の本発明は、前記比較が、前記放送用画像データと前記再送信用画像データとの近似度又は相違度の比較であることを特徴とする。
【００１９】
請求項３に記載の本発明は、前記オフライン型追比較検証手段が、比較される前記放送用画像データ及び前記再送信用画像データと前記比較の結果とを表示する表示手段と、前記比較条件として設定されるパラメータの値の変更の入力を受け付ける変更入力受付手段と、を有し、前記パラメータの値は、前記表示手段に表示された前記比較の結果に基づいて、前記変更入力受付手段で入力が受け付けられたユーザによって変更された値であることを特徴とする。
【００２０】
本発明によれば、パラメータの値は、表示手段に表示された比較の結果に基づいて、変更入力受付手段で入力が受け付けられたユーザによって変更された値であるため、リアルタイム型映像比較監視手段における以降の比較処理を、より人間の視聴感覚に近いものにすることが可能となる。
【００２１】
請求項４に記載の本発明は、前記オフライン型追比較検証手段が、前記パラメータの値が変更される毎に、前記比較を行って当該比較の結果を表示することを特徴とする。
【００２２】
請求項５に記載の本発明は、前記オフライン型追比較検証手段が、比較される前記放送用画像データと前記再送信用画像データとに時系列的に前後する複数の放送用画像データと複数の再送信用画像データとを前記画像データ蓄積手段から更に取得して再生することを特徴とする。
【００２３】
請求項６に記載の本発明は、前記オフライン型追比較検証手段が、コマ送り再生、繰り返し再生のうちいずれか１以上を行うことを特徴とする。
【００２４】
本発明によれば、コマ送り再生、繰り返し再生のうちいずれか１以上を行うため、エラー判定結果を容易且つ適宜適切に確認することが可能となる。
【００２５】
請求項７に記載の本発明は、前記リアルタイム型映像比較監視手段が、前記放送用映像ストリームとして放送されている各放送用画像データの各放送時刻と、前記再送信用映像ストリームとして再送信されている各再送信用画像データの各再送信時刻とから前記それぞれ追い掛けて再生されるまでの遅延時間の最小値を設定しておき、前記比較処理が重い場合には、当該比較処理に要する時間に応じて前記遅延時間を増大して前記追い掛けて再生し、前記比較処理が軽い場合には、前記遅延時間の最小値になるまで当該比較処理に要する処理速度に応じて早送り再生することを特徴とする。
【００２６】
請求項８に記載の本発明は、前記リアルタイム型映像比較監視手段が、少なくとも１以上の放送用画像データからなる第１画像群を複数選択すると共に、少なくとも１以上の再送信用画像データからなる第２画像群を複数選択し、前記複数の第１画像群のうちいずれかの第１画像群と前記複数の第２画像群のうちいずれかの第２画像群とを任意に比較して相関度を求め、最も相関度の高い第１画像群と第２画像群とにそれぞれ含まれる放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする。
【００２７】
請求項９に記載の本発明は、前記リアルタイム型映像比較監視手段が、放送時及び再送信時に付与されている時刻情報の値が最も近い放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする。
【００２８】
請求項１０に記載の本発明は、前記リアルタイム型映像比較監視手段が、前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとを更に比較処理時間の短い比較アルゴリズムを用いて第３比較する比較処理を行い、当該第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を前記画像比較結果記録手段に記録する、及び／又は、前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報と、前記第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報との両方を前記画像比較結果記録手段に記録する、ことを特徴とする。
【００２９】
請求項１１に記載の本発明は、前記放送用映像ストリームは、地上波デジタル放送又はＢＳデジタル放送の映像ストリームであり、前記再送信用映像ストリームは、当該地上波デジタル放送又は当該ＢＳデジタル放送のうちいずれかの放送の映像ストリームをＨ．２６４で圧縮した映像ストリームであって、当該放送に追従して送信されていることを特徴とする。
【００３０】
請求項１２に記載の本発明は、前記再送信用映像ストリームが、ケーブルテレビで再送信されることを特徴とする。
【００３１】
請求項１３に記載の本発明は、コンピュータにより、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１のステップと、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２のステップと、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３のステップと、を有することを特徴とする。
【００３２】
請求項１４に記載の本発明は、コンピュータに、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、を実行させることを特徴とする。
【００３３】
請求項１５に記載の本発明は、コンピュータに、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、を実行させるための映像比較監視プログラムを記録したコンピュータ読み取り可能な記録媒体であることを特徴とする。
【発明の効果】
【００３４】
本発明によれば、リアルタイムに比較監視を行い、その結果をオフラインで検証し、比較条件にフィードバックして、２つの映像ストリームを人間の知覚に近いレベルでリアルタイムに比較することができる。
【図面の簡単な説明】
【００３５】
【図１】映像比較監視システムの機能ブロック構成を示す図である。
【図２】映像比較監視部で画像データの比較監視を行うまでの処理フローを説明する図である。
【図３】映像比較監視部で画像データの比較監視を行うまでの処理フローを説明する図である。
【図４】相関性のある２つの画像データを時間差をもって取得した場合における画像マッチング処理を説明する図である。
【図５】追比較検証部で相違検出結果を検証するまでの処理フローを説明する図である。
【図６】追比較検証部での比較監視パラメータの変更による動画像の比較検証までの処理フローを説明する図である。
【図７】従来の映像比較監視システムを概略的に示す図である。
【発明を実施するための形態】
【００３６】
以下、発明を実施するための一実施の形態について、図面を用いて説明する。
【００３７】
図１は、映像比較監視システムの機能ブロック構成を示す図である。この映像比較監視システムは、２つの映像ストリームを収集してリアルタイムで同時に蓄積するデータ蓄積部１と、蓄積された２つの映像ストリームをリアルタイムで比較処理して監視する映像比較監視部３と、映像比較監視部３による比較結果でエラー検知された映像ストリームをオフライン（ノンリアルタイム）で比較検証し、比較監視パラメータを変更してエラー検知の妥当性を追って比較検証する追比較検証部５とで構成されている。以下、これら各機能部の機能及び処理フローを説明した後に、本映像比較監視システムの効果について説明する。
【００３８】
データ蓄積部１は、同時記録データＡ蓄積部１１と、同時記録データＢ蓄積部１２とで構成されており、放送されている地上波デジタル放送の映像ストリーム（以下、ストリームＡという）をリアルタイムで捕捉して、ストリームＡとして流れている複数の放送用画像データを時系列順に同時記録データＡ蓄積部１１に蓄積すると同時に、ストリームＡをＨ．２６４で圧縮してＩＰ化し、ストリームＡの放送に追従してＩＰ再送信されているＩＰ再送信用映像ストリーム（以下、ストリームＢという）をリアルタイムで捕捉して、ストリームＢとして流れている複数の再送信用画像データを時系列順に同時記録データＢ蓄積部１２に蓄積する機能を有している。
【００３９】
また、データ蓄積部１は、リアルタイムに蓄積された放送用画像データと再送信用画像データとを、即時に、映像比較監視部３に送出する機能を有している。さらに、データ蓄積部１は、追比較検証部５からの要求に応じて、蓄積された放送用画像データと再送信用画像データとを追比較検証部５に送出する機能をも有している。
【００４０】
次に、映像比較監視部３について説明する。映像比較監視部３は、２つの動画像デコード機能部３１，３２と、比較処理管理機能部３３と、映像比較結果記録部３４と、アラーム出力機能部３５とで構成されている。
【００４１】
動画像デコード機能部３１は、同時記録データＡ蓄積部１１に蓄積された全ての放送用画像データを時系列順で読み出して、各放送用画像データをデコード処理し、放送用画像データのストリーミング再生（以下、追い掛け再生という）開始時刻をストリームＡの放送時刻に近い実時刻に設定しておき、デコード処理された各放送用画像データを、設定された追い掛け再生開始時刻から再生させる機能を有している。
【００４２】
動画像デコード機能部３２は、同時記録データＢ蓄積部１２に蓄積された全ての再送信用画像データに対し、追い掛け再生開始時刻をストリームＢの再送信時刻に近い実時刻に設定しておき、デコード処理された各再送信用画像データを、設定された追い掛け再生開始時刻から再生させる機能を有している。
【００４３】
比較処理管理機能部３３は、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較する比較処理を繰り返し、上記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を映像比較結果記録部３４に記録する機能を有している。
【００４４】
具体的には、比較条件として複数の比較監視パラメータＰ１を準備し、その比較監視パラメータＰ１の閾値を予め設定しておき、第１の比較アリゴリズムを用いて放送用画像データと再送信用画像データとの近似度を計算し（第１比較）、計算された近似度が設定された閾値を超えない場合（又は、相違度が閾値を超える場合。以下同様。）にはエラーとして検知する。その後、エラー検出された放送用画像データと再送信用画像データとの近似度を、第１の比較アルゴリズムの次に処理時間の短い第２の比較アルゴリズム（第１の比較アルゴリズムの処理時間よりも長い処理時間の比較アルゴリズム）を用いて計算し（第２比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知する。そして、第２比較でエラー検知された放送用画像データと再送信用画像データとの各識別情報を障害画像として比較結果記録部３４に記録する。
【００４５】
更に、比較処理管理機能部３３は、上記第２比較でエラー検出された放送用画像データと再送信用画像データとの近似度を、更に比較処理時間の短い第３の比較アルゴリズム（第２の比較アルゴリズムの処理時間よりも長い処理時間の比較アルゴリズム）を用いて計算し（第３比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知することも可能である。その場合には、第３比較でエラー検知された放送用画像データと再送信用画像データとの各識別情報を障害画像として比較結果記録部３４に記録する。
【００４６】
なお、各比較処理が行われる度に、エラー検知された放送用画像データの識別情報と再送信用画像データの識別情報とを映像比較結果記録部３４に記録することも可能である。すなわち、第１比較と第２比較と第３比較とでそれぞれエラー検知された全て又は任意の放送用画像データの識別情報と再送信用画像データの識別情報とを比較結果記録部３４に記録するようにしてもよい。
【００４７】
また、上記第２比較でエラー検出された放送用画像データと再送信用画像データとのみではなく、上記第１比較（又は上記第１比較及び第２比較）でエラー検出された放送用画像データと再送信用画像データとの近似度を、第３の比較アルゴリズムを用いて計算するようにしてもよい。
【００４８】
なお、上記比較監視パラメータＰ１としては、例えば、複数階調の輝度値、濃淡値、彩度値、明度値、テクスチャ等を用いることが可能である。また、上記比較処理は、画像データの全領域ではなく、特定の一領域のみを対象に比較することも可能である。さらに、後段の比較処理では、前段の比較処理でエラー検知した画像データに加えて、時系列的に前後する複数の画像データをデータ蓄積部１から読み出して、読み出された複数の画像データをも合わせて比較処理を行うことも可能である。なお、人間の視覚特性を考慮した比較アルゴリズム、換言すれば、人間の視覚検知に近づけることが可能な映像比較アルゴリズムは既に公知技術であることを明示しておく。
【００４９】
映像比較結果記録部３４は、比較処理管理機能部３３による比較処理の結果、エラー検知された場合（放送用画像データと再送信用画像データとの間に相違箇所があった場合。以下同様。）に、そのエラー検知された放送用画像データと再送信用画像データとの各識別情報を記録する機能を有している。そのような識別情報としては、例えば、各画像データに付与されている画像番号、各画像データに付与されているＰＴＳ（Presentation Time Stamp：提示時刻タイムスタンプ）、データ蓄積部１に蓄積された時刻等を一例に挙げることができる。
【００５０】
アラーム出力機能部３５は、比較処理管理機能部３３による比較処理の結果、エラー検知された場合に、比較アルゴリズム毎にレベル分けした音やパトランプ等で外部に通知する機能を有している。
【００５１】
次に、追比較検証部５について説明する。追比較検証部５は、映像比較結果指定機能部５１と、再生日時指定機能部５２と、同時記録データ読出機能部５３と、２つの動画像デコード機能部５４，５５と、比較処理管理機能部５６と、追比較監視結果表示機能部５７と、ボタン指定機能部５８と、比較監視パラメータ調整機能部５９と、比較監視パラメータ読出／書込機能部６０とで構成されている。
【００５２】
映像比較結果指定機能部５１は、映像比較監視部３の映像比較結果記録部３４から読み込んだ識別情報に基づいて映像比較結果の一覧を生成して画面に表示し、ユーザによって任意の映像比較結果が選択された場合に、その選択された映像比較結果情報を同時記録データ読出機能部５３に送信する機能を有している。例えば、「７月１５日（水）１４：３８：４１ 映像相違エラー」の表示が選択可能に表示される。
【００５３】
再生日時指定機能部５２は、日時指定再生ボタンを押下可能に表示し、ユーザにより日時指定再生ボタンが押下られ、再生したい動画像の再生開始日時が指定入力された場合に、指定入力された再生開始日時を同時記録データ読出機能部５３に送信する機能を有している。
【００５４】
同時記録データ読出機能部５３は、映像比較結果指定機能部５１と、再生日時指定機能部５２と、ボタン指定機能部５８（詳細は後述する）とから送信された各情報に基づいて、選択されたエラー検知に係る放送用画像データと、指定入力された時間範囲の複数の放送用画像データとをデータ蓄積部１の同時記録データＡ蓄積部１１から読み出して動画像デコード機能部５４に送信すると共に、選択されたエラー検知に係る再送信用画像データと、指定入力された時間範囲の複数の再送信用画像データとを同時記録データＢ蓄積部１２から読み出して動画像デコード機能部５５に送信する機能を有している。
【００５５】
動画像デコード機能部５４は、同時記録データ読出機能部５３によって送信されたエラー検知対象の放送用画像データを含む複数の放送用画像データをデコード処理し、再生する機能を有している。
【００５６】
動画像デコード機能部５５は、同時記録データ読出機能部５３によって送信されたエラー検知対象の再送信用画像データを含む複数の再送信用画像データをデコード処理し、再生する機能を有している。
【００５７】
比較処理管理機能部５６は、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較する比較処理を繰り返す機能を有している。
【００５８】
具体的には、映像比較監視部３の比較監視パラメータＰ１と同様の比較監視パラメータＰ２を比較条件として準備し、その比較監視パラメータＰ２の閾値も比較監視パラメータＰ１の閾値と同様の閾値を設定しておき、第１の比較アリゴリズムを用いて放送用画像データと再送信用画像データとの近似度を計算し（第１比較）、計算された近似度が設定された閾値を超えない場合（又は、相違度が閾値を超える場合。以下同様。）にはエラーとして検知する。その後、エラー検出された放送用画像データと再送信用画像データとの近似度を、第１の比較アルゴリズムよりも処理時間の長い第２の比較アルゴリズムを用いて計算し（第２比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知する。
【００５９】
更に、比較処理管理機能部５６は、上記第２比較でエラー検出された放送用画像データと再送信用画像データとの近似度を、更に比較処理時間の短い第３の比較アルゴリズムを用いて計算し（第３比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知することも可能である。
【００６０】
なお、各比較処理が行われる度に、エラー検知結果を後述する追比較監視結果表示機能部５７により画面表示させるようにすることも可能である。
【００６１】
また、上記第２比較でエラー検出された放送用画像データと再送信用画像データとのみではなく、上記第１比較（又は上記第１比較及び第２比較）でエラー検出された放送用画像データと再送信用画像データとの近似度を、第３の比較アルゴリズムを用いて計算するようにしてもよい。
【００６２】
なお、上記比較監視パラメータＰ２としては、例えば、複数階調の輝度値、濃淡値、彩度値、明度値、テクスチャ等を用いることが可能である。また、上記比較処理は、画像データの全領域ではなく、特定の一領域のみを対象に比較することも可能である。さらに、後段の比較処理では、前段の比較処理でエラー検知した画像データに加えて、時系列的に前後する複数の画像データをデータ蓄積部１から読み出して、読み出された複数の画像データをも合わせて比較処理を行うことも可能である。
【００６３】
追比較監視結果表示機能部５７は、比較処理管理機能部５６によって再生されながら比較処理される放送用画像データと再送信用画像データを画面に表示し、比較処理結果についても識別可能に画面に表示する機能を有している。なお、比較処理結果としてエラー検知された箇所（相違点があった箇所）には、明暗や色付け等が施され、どの比較監視パラメータでエラーを検出したかを画面に同時に表示する。
【００６４】
ボタン指定機能部５８は、再生ボタン、一時停止ボタン、早送りボタン、巻き戻しボタン、５秒前から再生ボタン、繰り返し再生ボタン等を押下可能に表示し、オペレータ（以下、単にユーザという）により任意のボタンが押下られた場合に、押下られたボタンに係るボタン情報を同時記録データ読出機能部５３に送信する機能を有している。なお、同時記録データ読出機能部５３は、送信されたボタン情報に応じて動画像デコード機能部５４，５５の再生処理を制御する。例えば、放送用画像データと再送信用画像データとの再生に対して、一時停止、コマ送り再生、繰り返し再生等の制御が可能となる。
【００６５】
比較監視パラメータ調整機能部５９は、比較条件として設定される比較監視パラメータＰ２の閾値の変更の入力を受け付けて、ユーザによって比較監視パラメータＰ２の閾値が調整された場合に、比較監視パラメータＰ２の閾値を再設定する機能を有している。すなわち、ユーザによって、放送用画像データと再送信用画像データとを一時停止した状態で、比較監視パラメータＰ２の閾値として表示されている数値やインジケータ上の設定バーが変更された場合や、各々の比較監視パラメータＰ２を選択し、画面上で相違箇所として判断させたい／判断させたくない場所をマウスでクリックされた場合に、比較監視パラメータＰ２の閾値の変更を反映する機能を有している。
【００６６】
比較監視パラメータ読出／書込機能部６０は、比較条件として映像比較監視部３で管理している比較監視パラメータＰ１の情報を追比較検証部５で管理している比較監視パラメータＰ２に反映する機能や、追比較検証部５での追比較検証により変更された比較監視パラメータＰ２を映像比較監視部３の比較監視パラメータＰ１に反映する機能を有している。
【００６７】
次に、本映像比較監視システムの処理フローについて説明する。まず、図２，図３を用いて、映像比較監視部３で画像データの比較監視を行うまでの処理フローについて説明する。
【００６８】
最初に、データ蓄積部１により、放送されているストリームＡと再送信されているストリームＢとがリアルタイムで捕捉され、ストリームＡとして流れる複数の放送用画像データが、各放送用画像データの放送時刻にそれぞれ関連付けられてリアルタイムに同時記録データＡ蓄積部１１に蓄積されると同時に、ストリームＢとして流れる複数の再送信用画像データが、各再送信用画像データの再送信時刻にそれぞれ関連付けられてリアルタイムに同時記録データＢ蓄積部１２に蓄積される（Ｓ１）。
【００６９】
次いで、データ蓄積部１により、リアルタイムに蓄積された複数の放送用画像データと複数の再送信用画像データとが映像比較監視部３に即時に送出され、動画像デコード機能部３１により、複数の放送用画像データがデコード処理され、ストリームＡの放送に追い掛けて再生されると同時に、動画像デコード機能部３２により、複数の再送信用画像データがデコード処理され、ストリームＢの再送信に追い掛けて再生される（Ｓ２）。
【００７０】
次いで、比較処理管理機能部３３により、追い掛け再生されている各放送用画像データと各再送信用画像データとを用い、第１の比較アルゴリズムを用いて、各画像データ（各フレーム）の時刻情報（例えば、前述したＰＴＳ等）の値が最も近い画像データ同士の近似度が計算される（Ｓ３）。
【００７１】
次いで、Ｓ３での計算の結果、計算された近似度が設定された閾値を超えない場合（画像データ間で相違箇所を検出した場合）には、比較処理管理機能部３３により、エラーとして検知されて、エラー検知された放送用画像データの識別情報と再送信用画像データの識別情報とが映像比較結果記録部３４に記録され、アラーム出力機能部３５により、音やパトランプ等で外部に通知される（Ｓ４）。
【００７２】
次いで、エラー検知された画像データ同士を対象として、第１の比較アルゴリズムの次に処理時間の短い第２の比較アルゴリズムを用いて、Ｓ３とＳ４との処理が繰り返される（Ｓ５）。
【００７３】
なお、Ｓ２の処理で説明した追い掛け再生は、通常の追い掛け再生又はベストエフォート型追い掛け再生のいずれでもよい。ここで、ベストエフォート型追い掛け再生とは、ストリームＡとして放送されている各放送用画像データの各放送時刻と、ストリームＢとして再送信されている各再送信用画像データの各再送信時刻とから、データ蓄積部１から送出された各放送用画像データと各再送信用画像データとをそれぞれ追い掛けて再生するまでの遅延時間の最小値を設定しておき、上記Ｓ３乃至Ｓ５の各比較処理が重い場合には、その比較処理に要する時間に応じて遅延時間を増大して追い掛けて再生を行い、その比較処理が軽い場合には、遅延時間の最小値になるまで当該比較処理に要する処理速度に応じて早送り再生を実施することをいう。また、通常の追い掛け再生とは、各放送時刻又は各再送信時刻からの遅延時間を一定に保持しながら再生することをいう。ベストエフォート型追い掛け再生は、遅延時間の最小値に小さい値を設定しているため、通常の追い掛け再生よりも監視のリアルタイム性を向上することができ、比較アルゴリズムに求められるリアルタイム性（すなわち、必ず一定時間内で処理を終了することができる性能）要件を緩和することが可能となる。
【００７４】
また、Ｓ３の処理では、各画像データの時刻情報の値が最も近い画像データ同士の近似度を計算するとして説明したが、少なくとも１以上の放送用画像データからなる第１画像群を複数選択すると共に、少なくとも１以上の再送信用画像データからなる第２画像群を複数選択し、複数の第１画像群のうちいずれかの第１画像群と複数の第２画像群のうちいずれかの第２画像群とを任意に比較して相関度を求め、最も相関度の高い第１画像群と第２画像群とにそれぞれ含まれる放送用画像データと再送信用画像データとを用いて近似度を計算するようにしてもよい。
【００７５】
例えば、複数の放送用画像データから、時刻ｎ〜時刻ｎ＋２の放送用画像データを有する第１ａ画像群、時刻ｎ＋１〜時刻ｎ＋３の放送用画像データを有する第１ｂ画像群、時刻ｎ＋２〜時刻ｎ＋４の放送用画像データを有する第１ｃ画像群を選択する。同様に、複数の再送信用画像データから、時刻ｍ〜時刻ｍ＋２の再送信用画像データを有する第２ａ画像群、時刻ｍ＋１〜時刻ｍ＋３の再送信用画像データを有する第２ｂ画像群、時刻ｍ＋２〜時刻ｍ＋４の再送信用画像データを有する第２ｃ画像群を選択する（ｎは、ｍと同じであっても異なってもよい）。そして、第１ｂ画像群の平均輝度値に対する第２ａ画像群〜第２ｃ画像群の各平均輝度値を順次比較していき、最も近い平均輝度値を有する第２画像群（差分輝度値が最も小さい第２画像群）を最も相関度の高い画像群とする。なお、この相関度の計算は、輝度値のみではなく、画像の類似比較処理に用いられる全ての要素（組み合わせを含む）を利用可能であることは言うまでもない。
【００７６】
より具体的に、図４を参照しながら説明する。図４は、相関性のある２つの画像データを時間差をもって取得した場合における画像マッチング処理を説明する図である。
【００７７】
ストリームＡ，Ｂから時刻ｔの時に取得した放送用画像データ，再送信用画像データをＰｉｃ（Ａ，ｔ），Ｐｉｃ（Ｂ，ｔ）とし、ストリームＡとストリームＢとには時間差があるものとする。Ｐｉｃ（Ａ，ｔ）にマッチするＰｉｃ（Ｂ，ｔ）を求める場合、Ｐｉｃ（Ｂ，ｔ＋ｎ）のｎの値を１つずつ加算又は減算しながら平均輝度値の差分を計算していき、その差分が最小となるＰｉｃ（Ｂ，ｔ）を最も相関度の高いものとする。
【００７８】
但し、ストリームＡにおける時刻ｔ＋１と時刻ｔ＋２との画像データのように、同じ画像が連続する場合もあるため、１つの画像のみで行ったマッチング判定の信頼性は低い。そこで、例えば、図４の下段に示すように、連続する複数の画像データを１つの画像群とし、ストリームＡの画像群とストリームＢの画像群との輝度差の合計が最小となる画像群を求めるようにしてもよい。
【００７９】
続いて、図５を用いて、追比較検証部５で相違検出結果を検証するまでの処理フローについて説明する。
【００８０】
最初に、映像比較結果指定機能部５１により、映像比較監視部３の映像比較結果記録部３４からエラー検知に係る識別情報が取得され、映像比較結果の一覧が生成されて選択可能に画面に表示され、再生日時指定機能部５２により、再生したい動画像の再生開始日時が指定入力可能に表示される（Ｓ１１）。これにより、ユーザによって、確認したい動画像データが選択又は指定されることになる。
【００８１】
次いで、同時記録データ読出機能部５３により、ユーザによって選択された映像比較結果に対応する、又は指定された時刻情報に対応する、各放送用画像データが同時記録データＡ蓄積部１１から読み出されて動画像デコード機能部５４に送信されると共に、各再送信用画像データが同時記録データＢ蓄積部１２から読み出されて動画像デコード機能部５５に送信され、各動画像デコード機能部５４，５５によりデコード処理される（Ｓ１２）。
【００８２】
次いで、各動画像デコード機能部５４，５５により、比較監視パラメータＰ２が取り出され、各放送用画像データと各再送信用画像データとがそれぞれ再生されながら、比較処理管理機能部５６により、取り出された比較監視パラメータＰ２を用いて、各放送用画像データと各再送信用画像データとがそれぞれ比較処理される（Ｓ１３）。なお、比較結果は、追比較監視結果表示機能部５７により、エラー検知された箇所（相違点があった箇所）については、明暗や色付け等が施され、どの比較監視パラメータでエラーを検出したかが画面に同時に表示される。これにより、ユーザは、映像比較監視部３によってエラー検知された再送信用画像データにおける放送用画像データとの相違箇所を把握することが可能となる。
【００８３】
続いて、図６を用いて、追比較検証部５での比較監視パラメータＰ２の変更による動画像の比較検証までの処理フローについて説明する。
【００８４】
最初に、ユーザによって一時停止ボタンが押下られて放送用画像データと再送信用画像データとが再生後一時停止した状態になった場合に、比較監視パラメータ調整機能部５９により、比較条件として設定される比較監視パラメータＰ２の閾値の変更の入力が受付可能に制御される（Ｓ２１）。ユーザの視点から説明すると、放送用画像データと再送信用画像データとを再生した後に、一時停止した状態で、比較監視パラメータＰ２の閾値を変更することが可能となる。
【００８５】
次いで、ユーザによって、比較監視パラメータＰ２の閾値として表示されている数値やインジケータ上の設定バーが変更された場合や、各々の比較監視パラメータＰ２を選択し、画面上で相違箇所として判断させたい／判断させたくない場所をマウスでクリックされた場合に、比較監視パラメータ調整機能部５９により、このような変更に基づいて比較監視パラメータＰ２の閾値が変更される（Ｓ２２）。
【００８６】
次いで、比較監視パラメータＰ２の閾値が変更された後、ユーザによって再生ボタンが押下された場合に、動画像デコード機能部５４，５５により、放送用画像データと再送信用画像データとの再生が再開され、比較処理管理機能部５６により、変更後の比較監視パラメータＰ２の閾値で、再度比較処理される（Ｓ２３）。
【００８７】
なお、再度の比較処理にエラー検知された場合には、比較処理管理機能部５６により、追比較検証部５の映像比較結果蓄積部（不図示）に記録され、追比較監視結果表示機能部５７により、相違箇所が画面に表示される。
【００８８】
また、Ｓ２２における比較監視パラメータＰ２の閾値の変更は何回でも可能であり、Ｓ２３における再度の比較処理は、比較監視パラメータＰ２の閾値が変更される毎に繰り返し行われ、比較処理結果はその都度画面表示される。
【００８９】
続いて、追比較検証部５による映像比較監視部３の比較監視パラメータＰ１の閾値の変更までの処理フローについて説明する。
【００９０】
最初に、追比較検証部５の比較監視パラメータ調整機能部５９によって比較監視パラメータＰ２の閾値が変更され、ユーザによって監視設定ボタン（図５，図６参照）が押下られた場合に、比較監視パラメータ読出／書込機能部６０により、変更後の比較監視パラメータＰ２が読み出され、映像比較監視部３の比較監視パラメータＰ１が更新される（Ｓ３１）。
【００９１】
次いで、映像比較監視部３により、更新後の比較監視パラメータＰ２を用いて、上述したＳ１〜Ｓ５の処理が行われる（Ｓ３２）。
【００９２】
本実施の形態によれば、放送用画像データの追い掛け再生開始時刻をストリームＡの放送時刻に近い実時刻に設定し、再送信用画像データの追い掛け再生開始時刻をストリームＢの再送信時刻に近い実時刻に設定しているので、リアルタイムでの監視を実現が可能であり、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較するので、リアルタイムでの監視を実現しながら、人間の視聴感覚に近づけるような複数の比較処理をリアルタイム監視向けに短時間で実現することが可能となる。
【００９３】
本実施の形態によれば、オフライン型の追比較検証部５で監視結果を閲覧する際には、リアルタイム型の映像比較監視部３での比較監視結果に対応する画像データをデータ蓄積部１から取得するので、リアルタイム型の映像比較監視部３とオフライン型の追比較検証部５との間で、対象となる画像データの時間ズレや検出結果の差異等の発生を防止することが可能となる。
【００９４】
本実施の形態によれば、オフライン型の追比較検証部５で映像比較監視部３での監視結果を検証する際において、再生ボタン、一時停止ボタン、早送りボタン、巻き戻しボタン、５秒前から再生ボタン等のいずれかのボタンがユーザにより押下られた場合に、押下られたボタン情報に応じて放送用画像データと再送信用画像データとを制御するため、画面上で相違箇所を閲覧しつつ、エラー判定結果を容易且つ適宜適切に確認することが可能となり、人間の視聴感覚に基づいて変更（調整）された比較監視パラメータＰ２が比較監視パラメータＰ１に反映されるので、映像比較監視部３における以降のリアルタイム監視を、より人間の視聴感覚に近いものにすることが可能となる。
【００９５】
本実施の形態によれば、人間の主観に依存する比較監視パラメータを試行錯誤しながら調整可能な環境の実現が可能となり、比較監視パラメータの調整作業に要する時間を大幅に削減することが可能となる。また、試行錯誤しながら比較監視パラメータの調整を行う作業に時間がかかり過ぎるために比較監視パラメータの調整機能が実質的に利用されないといった事態を防止することが可能となる。
【００９６】
本実施の形態によれば、放送用画像データと再送信用画像データとが保存されているので、一時的に比較処理が遅れた場合や、動画像デコーダ等の障害により比較処理に瞬断が発生した場合でも、後から追い掛け再生し、実時刻に追いついて監視欠落部分を無くすことが可能である。また、リアルタイム処理が困難な複雑な比較処理に関しても、時間差は生じるものの、欠落部分なく監視することが可能となるので、動画像デコーダ等の安定性や比較アルゴリズムの処理速度についての要求レベルが下がり、様々な動画像デコーダや比較アルゴリズムが利用可能となる。
【００９７】
本実施の形態によれば、放送用画像データと再送信用画像データとが保存されているので、データ蓄積部１と、映像比較監視部３と、追比較検証部５とを各々あらかじめ独立させておくことにより、監視欠落期間なく各機能部単位で交換が可能となるので、保守運用時の作業面の負担だけではなく、映像比較監視部３と追比較検証部５との冗長化設計における費用面の負担も軽減される。
【００９８】
本実施の形態によれば、映像配信事業者は、配信する映像の同時録画装置を利用していることが多く、その同時録画装置がデータ蓄積部１と同等の機能を有する場合には、新たにデータ蓄積部１を導入する必要がなく、既存のリソースを有効活用した効率のよい映像比較監視システムの構築が可能となる。
【００９９】
本実施の形態によれば、２つの映像ストリームに時差が存在する場合であっても、その２つの映像ストリームの比較対象画像データのマッチングができる前提で、保存されている画像データから比較監視することが可能であるため、例えば、国内時差が存在する国等での映像配信や、地域間配信における番組編成上発生する時差放送においても有効である。
【０１００】
本実施の形態によれば、オフライン比較における比較監視パラメータの変更に対して、発生する映像比較結果ログ量の増減も調整することが可能となり、オペレータが対応しきれないほど相違検出が頻発した場合など、比較監視の比較監視パラメータを変更し、障害検知レベルを保ちながら、実質的に対応可能な検出量に抑えるといった、障害検知レベルと運用作業量とのバランス調整が容易となる。
【０１０１】
なお、追比較検証部５の動画像デコード機能部５４，５５として、異なる複数のデコーダを用いることにより、デコーダの性能によって比較結果の差異を確認するようにしてもよい。また、追比較検証部５の比較処理管理機能部５６に新たな比較アルゴリズムを導入し、既存の比較アルゴリズムとの性能差の検証や比較監視パラメータＰ２の調整を、映像比較監視部３に反映する前に実施するようにしてもよい。更に、データ蓄積部１と、映像比較監視部３と、追比較検証部５とは、それぞれ異なる場所に存在してもよいし、比較監視パラメータ数を変更（増加減）することも可能である。
【０１０２】
なお、本実施の形態では、地上波デジタル放送の映像ストリーム（ストリームＡ）と、ストリームＡをＨ．２６４で圧縮してＩＰ化し、ストリームＡの放送に追従してＩＰ再送信されているＩＰ再送信用映像ストリーム（ストリームＢ）との映像を監視する場合について説明したが、地上波デジタル放送以外で放送されている映像を監視する場合についても、本映像比較監視システムを利用可能であることはいうまでもない。例えば、ストリームＡを、ＢＳデジタル放送やＣＳデジタル放送としてもよいし、ストリームＢを、地上波，ＢＳ，ＣＳデジタル放送のＩＰ再送信としてもよい。また、ストリームＡやストリームＢとして放送又は再送信される映像は、ケーブルテレビで放送又は再送信されるものであってもよい。
【０１０３】
最後に、本実施の形態で説明した映像比較監視システムは、コンピュータで構成され、各機能部の各処理はプログラムで実行されるようになっている。また、上記各処理動作をプログラムとして例えばコンパクトディスクやフロッピー（登録商標）ディスク等の記録媒体に記録して、この記録媒体をコンピュータに組み込んだり、若しくは記録媒体に記録されたプログラムを、任意の通信回線を介してコンピュータにダウンロードしたり、又は記録媒体からインストールし、該プログラムでコンピュータを動作させることにより、上述した各処理動作を映像比較監視システムとして機能させることができるのは勿論である。
【０１０４】
また、同時記録データＡ蓄積部１１、同時記録データＢ蓄積部１２、映像比較結果記録部３４としては、例えば、一次メモリや二次メモリ、ハードディスク、更には通信ネットワークを介して電気的に接続可能な外部の記憶装置を用いて実現可能である。
【符号の説明】
【０１０５】
１…データ蓄積部（画像データ蓄積手段）
１１…同時記録データＡ蓄積部
１２…同時記録データＢ蓄積部
３…映像比較監視部（リアルタイム型映像比較監視手段）
３１，３２…動画像デコード機能部
３３…比較処理管理機能部
３４…映像比較結果記録部
３５…アラーム出力機能部
５…追比較検証部（オフライン型追比較検証手段）
５１…映像比較結果指定機能部
５２…再生日時指定機能部
５３…同時記録データ読出機能部
５４，５５…動画像デコード機能部
５６…比較処理管理機能部
５７…追比較監視結果表示機能部
５８…ボタン指定機能部
５９…比較監視パラメータ調整機能部
６０…比較監視パラメータ読出／書込機能部
Ｓ１〜Ｓ５…ステップ
Ｓ１１〜Ｓ１３…ステップ
Ｓ２１〜Ｓ２３…ステップ
Ｓ３１〜Ｓ３２…ステップ
【技術分野】
【０００１】
本発明は、映像を比較して監視する技術に関する。
【背景技術】
【０００２】
現在では、従来の地上波アナログ放送と共に、高精細性、高音質・多機能性、双方向性等の様々な利便的特徴から、ＭＰＥＧ２の信号圧縮方式を採用した地上波デジタル放送が開始されている。
【０００３】
通常、このような地上波デジタル放送は無線通信ネットワークを通じてユーザに提供されるが、放送されている地上波デジタル放送をリアルタイムに捕捉し、Ｈ．２６４の圧縮形式で圧縮した後に、ＩＰ化した時系列な複数の画像データ（フレームという場合もある）を再送信することにより、光回線等の有線通信ネットワークを通じて地上波デジタル放送を擬似的に提供することが可能となっている（非特許文献１，２参照）。
【０００４】
図７は、従来の映像比較監視システムを概略的に示す図である。図７（ａ）はリアルタイムで映像比較監視するシステムを示し、図７（ｂ）はオフラインで映像比較するシステムを示している。
【０００５】
リアルタイム型の映像比較監視システムでは、放送されている地上波デジタル放送の放送用映像ストリームＡを捕捉し、放送用映像ストリームＡを構成している複数の放送用画像データＡを時系列順にバッファＡに書き込むと共に、ＩＰ再送信されている再送信用映像ストリームＢを捕捉し、再送信用映像ストリームＢを構成している複数の再送信用画像データＢを時系列順にバッファＢに書き込み、各バッファＡ，Ｂから各放送用画像データＡと各再送信用画像データＢとをそれぞれ取得して画像データ単位（フレーム単位）で比較し、予め設定されている比較監視パラメータの値に合致するか否かをリアルタイムに判定して、合致しない再送信用画像データＢをエラーとして検知していた。
【０００６】
その後、エラー検知された再送信用画像データＢが人間の目から見てエラーに値するか否かを判断し、エラー検知に値しない場合には比較監視パラメータの値を調整して、以降同様の再送信用画像データＢが送信された際にはエラー検知しないようにすることで再送信用画像データを監視していた。
【０００７】
このような従来のリアルタイム型の映像比較監視システムによれば、リアルタイムに画像データを比較するため、放送のような映像ストリームの監視には好適である。しかしながら、再度同様の映像ストリームが出現するとは限らないため、調整後の比較監視パラメータの値を検証することは不可能であり、実際に人間の目で見て障害があるか否かを判断可能な視聴監視レベルまで比較監視パラメータを調整することは困難であった。
【０００８】
一方、オフライン型の映像比較システムでは、上記複数の放送用画像データＡと上記複数の再送信用画像データＢとをデータ蓄積部に逐次一旦蓄積しておき、必要に応じて放送用画像データＡと再送信用画像データＢとをデータ蓄積部から読み出して所定の比較アルゴリズムを用いて画像比較を行い、予め設定されている比較パラメータに合致するか否かを判定し、合致しない場合に再送信用画像データＢをエラーとして検知していた。
【０００９】
このような従来のオフライン型の映像比較システムによれば、リアルタイム性が求められないため、比較処理時間を必要とする比較アルゴリズムを採用することが可能であり、比較アルゴリズムの比較監視パラメータを何度も調整して画像比較を繰り返して詳細に行うことができ、画像データの相違箇所を正確に評価することが可能である。しかしながら、原則として二度と同じ画像データが出現しない放送のような絶えず変化する映像ストリームをリアルタイムに監視する用途には不向きであった。
【００１０】
そこで、２つの映像ストリームのリアルタイムでの映像比較監視を人間による視聴監視に近いレベルで実施できるように、リアルタイム型の映像比較監視システムからエラー検知を受けたオペレータが、画像データを蓄積したオフライン型の映像比較システムを使用して、エラー検知時刻から目的の画像データを検索し、エラー検知が妥当であるか否かを比較アルゴリズムを用いて比較監視パラメータを可変しながら具体的に判断し、その判断結果に基づいてリアルタイム型の映像比較監視システムの比較監視パラメータを調整することを繰り返し行うことも可能であった。
【先行技術文献】
【非特許文献】
【００１１】
【非特許文献１】「IPTV規定 地上デジタルテレビジョン放送 IP再送信運用規定」、有限責任中間法人IPTVフォーラム、2008年12月8日発行、IPTVFJ STD-0005、1.1版
【非特許文献２】「IPTV規定 BSデジタル放送 IP再送信運用規定」、一般社団法人IPTVフォーラム、2009年9月30日発行、IPTVFJ STD-0009、1.0版
【発明の概要】
【発明が解決しようとする課題】
【００１２】
比較監視に用いられる処理には画像処理、画像認識、その他メタ情報を用いることが考えられるが、人間の極めて複雑な視聴感覚に近づけるような画像比較処理を自動で行うには、様々な比較アルゴリズムを導入して比較監視パラメータの調整をその都度行う必要があるため、単純な既存施術の組み合わせでは画像比較処理が煩雑且つ高負荷となり、膨大な時間を要するという問題があった。
【００１３】
また、このような問題に起因して、様々な比較アルゴリズムの導入や比較監視パラメータの変更等を迅速に対応することが困難となり、次々と対処すべき事象が発生する監視現場ではエラー検知の妥当性の調査がされずに保留された状態の監視結果が存在するという問題もあった。
【００１４】
本発明は、上記を鑑みてなされたものであり、リアルタイムに比較監視を行い、その結果をオフラインで検証し、比較条件にフィードバックして、２つの映像ストリームを人間の知覚に近いレベルでリアルタイムに比較することを課題とする。
【課題を解決するための手段】
【００１５】
請求項１に記載の本発明は、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを蓄積する画像データ蓄積手段と、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録するリアルタイム型映像比較監視手段と、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定するオフライン型追比較検証手段と、を有することを特徴とする。
【００１６】
本発明によれば、複数の放送用画像データと複数の再送信用画像データとを、放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、その第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行うため、リアルタイムでの監視を実現しながら、人間の視聴感覚に近づけるような複数の比較処理をリアルタイム監視向けに短時間で実現することが可能となる。
【００１７】
本発明によれば、画像比較結果記録手段から各識別情報を読み出して、その各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを画像データ蓄積手段から取得するため、リアルタイム型映像比較監視手段とオフライン型追比較検証手段との間で、対象となる画像データの時間ズレや検出結果の差異等の発生を防止することが可能となる。
【００１８】
請求項２に記載の本発明は、前記比較が、前記放送用画像データと前記再送信用画像データとの近似度又は相違度の比較であることを特徴とする。
【００１９】
請求項３に記載の本発明は、前記オフライン型追比較検証手段が、比較される前記放送用画像データ及び前記再送信用画像データと前記比較の結果とを表示する表示手段と、前記比較条件として設定されるパラメータの値の変更の入力を受け付ける変更入力受付手段と、を有し、前記パラメータの値は、前記表示手段に表示された前記比較の結果に基づいて、前記変更入力受付手段で入力が受け付けられたユーザによって変更された値であることを特徴とする。
【００２０】
本発明によれば、パラメータの値は、表示手段に表示された比較の結果に基づいて、変更入力受付手段で入力が受け付けられたユーザによって変更された値であるため、リアルタイム型映像比較監視手段における以降の比較処理を、より人間の視聴感覚に近いものにすることが可能となる。
【００２１】
請求項４に記載の本発明は、前記オフライン型追比較検証手段が、前記パラメータの値が変更される毎に、前記比較を行って当該比較の結果を表示することを特徴とする。
【００２２】
請求項５に記載の本発明は、前記オフライン型追比較検証手段が、比較される前記放送用画像データと前記再送信用画像データとに時系列的に前後する複数の放送用画像データと複数の再送信用画像データとを前記画像データ蓄積手段から更に取得して再生することを特徴とする。
【００２３】
請求項６に記載の本発明は、前記オフライン型追比較検証手段が、コマ送り再生、繰り返し再生のうちいずれか１以上を行うことを特徴とする。
【００２４】
本発明によれば、コマ送り再生、繰り返し再生のうちいずれか１以上を行うため、エラー判定結果を容易且つ適宜適切に確認することが可能となる。
【００２５】
請求項７に記載の本発明は、前記リアルタイム型映像比較監視手段が、前記放送用映像ストリームとして放送されている各放送用画像データの各放送時刻と、前記再送信用映像ストリームとして再送信されている各再送信用画像データの各再送信時刻とから前記それぞれ追い掛けて再生されるまでの遅延時間の最小値を設定しておき、前記比較処理が重い場合には、当該比較処理に要する時間に応じて前記遅延時間を増大して前記追い掛けて再生し、前記比較処理が軽い場合には、前記遅延時間の最小値になるまで当該比較処理に要する処理速度に応じて早送り再生することを特徴とする。
【００２６】
請求項８に記載の本発明は、前記リアルタイム型映像比較監視手段が、少なくとも１以上の放送用画像データからなる第１画像群を複数選択すると共に、少なくとも１以上の再送信用画像データからなる第２画像群を複数選択し、前記複数の第１画像群のうちいずれかの第１画像群と前記複数の第２画像群のうちいずれかの第２画像群とを任意に比較して相関度を求め、最も相関度の高い第１画像群と第２画像群とにそれぞれ含まれる放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする。
【００２７】
請求項９に記載の本発明は、前記リアルタイム型映像比較監視手段が、放送時及び再送信時に付与されている時刻情報の値が最も近い放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする。
【００２８】
請求項１０に記載の本発明は、前記リアルタイム型映像比較監視手段が、前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとを更に比較処理時間の短い比較アルゴリズムを用いて第３比較する比較処理を行い、当該第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を前記画像比較結果記録手段に記録する、及び／又は、前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報と、前記第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報との両方を前記画像比較結果記録手段に記録する、ことを特徴とする。
【００２９】
請求項１１に記載の本発明は、前記放送用映像ストリームは、地上波デジタル放送又はＢＳデジタル放送の映像ストリームであり、前記再送信用映像ストリームは、当該地上波デジタル放送又は当該ＢＳデジタル放送のうちいずれかの放送の映像ストリームをＨ．２６４で圧縮した映像ストリームであって、当該放送に追従して送信されていることを特徴とする。
【００３０】
請求項１２に記載の本発明は、前記再送信用映像ストリームが、ケーブルテレビで再送信されることを特徴とする。
【００３１】
請求項１３に記載の本発明は、コンピュータにより、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１のステップと、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２のステップと、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３のステップと、を有することを特徴とする。
【００３２】
請求項１４に記載の本発明は、コンピュータに、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、を実行させることを特徴とする。
【００３３】
請求項１５に記載の本発明は、コンピュータに、放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、を実行させるための映像比較監視プログラムを記録したコンピュータ読み取り可能な記録媒体であることを特徴とする。
【発明の効果】
【００３４】
本発明によれば、リアルタイムに比較監視を行い、その結果をオフラインで検証し、比較条件にフィードバックして、２つの映像ストリームを人間の知覚に近いレベルでリアルタイムに比較することができる。
【図面の簡単な説明】
【００３５】
【図１】映像比較監視システムの機能ブロック構成を示す図である。
【図２】映像比較監視部で画像データの比較監視を行うまでの処理フローを説明する図である。
【図３】映像比較監視部で画像データの比較監視を行うまでの処理フローを説明する図である。
【図４】相関性のある２つの画像データを時間差をもって取得した場合における画像マッチング処理を説明する図である。
【図５】追比較検証部で相違検出結果を検証するまでの処理フローを説明する図である。
【図６】追比較検証部での比較監視パラメータの変更による動画像の比較検証までの処理フローを説明する図である。
【図７】従来の映像比較監視システムを概略的に示す図である。
【発明を実施するための形態】
【００３６】
以下、発明を実施するための一実施の形態について、図面を用いて説明する。
【００３７】
図１は、映像比較監視システムの機能ブロック構成を示す図である。この映像比較監視システムは、２つの映像ストリームを収集してリアルタイムで同時に蓄積するデータ蓄積部１と、蓄積された２つの映像ストリームをリアルタイムで比較処理して監視する映像比較監視部３と、映像比較監視部３による比較結果でエラー検知された映像ストリームをオフライン（ノンリアルタイム）で比較検証し、比較監視パラメータを変更してエラー検知の妥当性を追って比較検証する追比較検証部５とで構成されている。以下、これら各機能部の機能及び処理フローを説明した後に、本映像比較監視システムの効果について説明する。
【００３８】
データ蓄積部１は、同時記録データＡ蓄積部１１と、同時記録データＢ蓄積部１２とで構成されており、放送されている地上波デジタル放送の映像ストリーム（以下、ストリームＡという）をリアルタイムで捕捉して、ストリームＡとして流れている複数の放送用画像データを時系列順に同時記録データＡ蓄積部１１に蓄積すると同時に、ストリームＡをＨ．２６４で圧縮してＩＰ化し、ストリームＡの放送に追従してＩＰ再送信されているＩＰ再送信用映像ストリーム（以下、ストリームＢという）をリアルタイムで捕捉して、ストリームＢとして流れている複数の再送信用画像データを時系列順に同時記録データＢ蓄積部１２に蓄積する機能を有している。
【００３９】
また、データ蓄積部１は、リアルタイムに蓄積された放送用画像データと再送信用画像データとを、即時に、映像比較監視部３に送出する機能を有している。さらに、データ蓄積部１は、追比較検証部５からの要求に応じて、蓄積された放送用画像データと再送信用画像データとを追比較検証部５に送出する機能をも有している。
【００４０】
次に、映像比較監視部３について説明する。映像比較監視部３は、２つの動画像デコード機能部３１，３２と、比較処理管理機能部３３と、映像比較結果記録部３４と、アラーム出力機能部３５とで構成されている。
【００４１】
動画像デコード機能部３１は、同時記録データＡ蓄積部１１に蓄積された全ての放送用画像データを時系列順で読み出して、各放送用画像データをデコード処理し、放送用画像データのストリーミング再生（以下、追い掛け再生という）開始時刻をストリームＡの放送時刻に近い実時刻に設定しておき、デコード処理された各放送用画像データを、設定された追い掛け再生開始時刻から再生させる機能を有している。
【００４２】
動画像デコード機能部３２は、同時記録データＢ蓄積部１２に蓄積された全ての再送信用画像データに対し、追い掛け再生開始時刻をストリームＢの再送信時刻に近い実時刻に設定しておき、デコード処理された各再送信用画像データを、設定された追い掛け再生開始時刻から再生させる機能を有している。
【００４３】
比較処理管理機能部３３は、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較する比較処理を繰り返し、上記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を映像比較結果記録部３４に記録する機能を有している。
【００４４】
具体的には、比較条件として複数の比較監視パラメータＰ１を準備し、その比較監視パラメータＰ１の閾値を予め設定しておき、第１の比較アリゴリズムを用いて放送用画像データと再送信用画像データとの近似度を計算し（第１比較）、計算された近似度が設定された閾値を超えない場合（又は、相違度が閾値を超える場合。以下同様。）にはエラーとして検知する。その後、エラー検出された放送用画像データと再送信用画像データとの近似度を、第１の比較アルゴリズムの次に処理時間の短い第２の比較アルゴリズム（第１の比較アルゴリズムの処理時間よりも長い処理時間の比較アルゴリズム）を用いて計算し（第２比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知する。そして、第２比較でエラー検知された放送用画像データと再送信用画像データとの各識別情報を障害画像として比較結果記録部３４に記録する。
【００４５】
更に、比較処理管理機能部３３は、上記第２比較でエラー検出された放送用画像データと再送信用画像データとの近似度を、更に比較処理時間の短い第３の比較アルゴリズム（第２の比較アルゴリズムの処理時間よりも長い処理時間の比較アルゴリズム）を用いて計算し（第３比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知することも可能である。その場合には、第３比較でエラー検知された放送用画像データと再送信用画像データとの各識別情報を障害画像として比較結果記録部３４に記録する。
【００４６】
なお、各比較処理が行われる度に、エラー検知された放送用画像データの識別情報と再送信用画像データの識別情報とを映像比較結果記録部３４に記録することも可能である。すなわち、第１比較と第２比較と第３比較とでそれぞれエラー検知された全て又は任意の放送用画像データの識別情報と再送信用画像データの識別情報とを比較結果記録部３４に記録するようにしてもよい。
【００４７】
また、上記第２比較でエラー検出された放送用画像データと再送信用画像データとのみではなく、上記第１比較（又は上記第１比較及び第２比較）でエラー検出された放送用画像データと再送信用画像データとの近似度を、第３の比較アルゴリズムを用いて計算するようにしてもよい。
【００４８】
なお、上記比較監視パラメータＰ１としては、例えば、複数階調の輝度値、濃淡値、彩度値、明度値、テクスチャ等を用いることが可能である。また、上記比較処理は、画像データの全領域ではなく、特定の一領域のみを対象に比較することも可能である。さらに、後段の比較処理では、前段の比較処理でエラー検知した画像データに加えて、時系列的に前後する複数の画像データをデータ蓄積部１から読み出して、読み出された複数の画像データをも合わせて比較処理を行うことも可能である。なお、人間の視覚特性を考慮した比較アルゴリズム、換言すれば、人間の視覚検知に近づけることが可能な映像比較アルゴリズムは既に公知技術であることを明示しておく。
【００４９】
映像比較結果記録部３４は、比較処理管理機能部３３による比較処理の結果、エラー検知された場合（放送用画像データと再送信用画像データとの間に相違箇所があった場合。以下同様。）に、そのエラー検知された放送用画像データと再送信用画像データとの各識別情報を記録する機能を有している。そのような識別情報としては、例えば、各画像データに付与されている画像番号、各画像データに付与されているＰＴＳ（Presentation Time Stamp：提示時刻タイムスタンプ）、データ蓄積部１に蓄積された時刻等を一例に挙げることができる。
【００５０】
アラーム出力機能部３５は、比較処理管理機能部３３による比較処理の結果、エラー検知された場合に、比較アルゴリズム毎にレベル分けした音やパトランプ等で外部に通知する機能を有している。
【００５１】
次に、追比較検証部５について説明する。追比較検証部５は、映像比較結果指定機能部５１と、再生日時指定機能部５２と、同時記録データ読出機能部５３と、２つの動画像デコード機能部５４，５５と、比較処理管理機能部５６と、追比較監視結果表示機能部５７と、ボタン指定機能部５８と、比較監視パラメータ調整機能部５９と、比較監視パラメータ読出／書込機能部６０とで構成されている。
【００５２】
映像比較結果指定機能部５１は、映像比較監視部３の映像比較結果記録部３４から読み込んだ識別情報に基づいて映像比較結果の一覧を生成して画面に表示し、ユーザによって任意の映像比較結果が選択された場合に、その選択された映像比較結果情報を同時記録データ読出機能部５３に送信する機能を有している。例えば、「７月１５日（水）１４：３８：４１ 映像相違エラー」の表示が選択可能に表示される。
【００５３】
再生日時指定機能部５２は、日時指定再生ボタンを押下可能に表示し、ユーザにより日時指定再生ボタンが押下られ、再生したい動画像の再生開始日時が指定入力された場合に、指定入力された再生開始日時を同時記録データ読出機能部５３に送信する機能を有している。
【００５４】
同時記録データ読出機能部５３は、映像比較結果指定機能部５１と、再生日時指定機能部５２と、ボタン指定機能部５８（詳細は後述する）とから送信された各情報に基づいて、選択されたエラー検知に係る放送用画像データと、指定入力された時間範囲の複数の放送用画像データとをデータ蓄積部１の同時記録データＡ蓄積部１１から読み出して動画像デコード機能部５４に送信すると共に、選択されたエラー検知に係る再送信用画像データと、指定入力された時間範囲の複数の再送信用画像データとを同時記録データＢ蓄積部１２から読み出して動画像デコード機能部５５に送信する機能を有している。
【００５５】
動画像デコード機能部５４は、同時記録データ読出機能部５３によって送信されたエラー検知対象の放送用画像データを含む複数の放送用画像データをデコード処理し、再生する機能を有している。
【００５６】
動画像デコード機能部５５は、同時記録データ読出機能部５３によって送信されたエラー検知対象の再送信用画像データを含む複数の再送信用画像データをデコード処理し、再生する機能を有している。
【００５７】
比較処理管理機能部５６は、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較する比較処理を繰り返す機能を有している。
【００５８】
具体的には、映像比較監視部３の比較監視パラメータＰ１と同様の比較監視パラメータＰ２を比較条件として準備し、その比較監視パラメータＰ２の閾値も比較監視パラメータＰ１の閾値と同様の閾値を設定しておき、第１の比較アリゴリズムを用いて放送用画像データと再送信用画像データとの近似度を計算し（第１比較）、計算された近似度が設定された閾値を超えない場合（又は、相違度が閾値を超える場合。以下同様。）にはエラーとして検知する。その後、エラー検出された放送用画像データと再送信用画像データとの近似度を、第１の比較アルゴリズムよりも処理時間の長い第２の比較アルゴリズムを用いて計算し（第２比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知する。
【００５９】
更に、比較処理管理機能部５６は、上記第２比較でエラー検出された放送用画像データと再送信用画像データとの近似度を、更に比較処理時間の短い第３の比較アルゴリズムを用いて計算し（第３比較）、計算された近似度が上記閾値を超えない場合にはエラーとして検知することも可能である。
【００６０】
なお、各比較処理が行われる度に、エラー検知結果を後述する追比較監視結果表示機能部５７により画面表示させるようにすることも可能である。
【００６１】
また、上記第２比較でエラー検出された放送用画像データと再送信用画像データとのみではなく、上記第１比較（又は上記第１比較及び第２比較）でエラー検出された放送用画像データと再送信用画像データとの近似度を、第３の比較アルゴリズムを用いて計算するようにしてもよい。
【００６２】
なお、上記比較監視パラメータＰ２としては、例えば、複数階調の輝度値、濃淡値、彩度値、明度値、テクスチャ等を用いることが可能である。また、上記比較処理は、画像データの全領域ではなく、特定の一領域のみを対象に比較することも可能である。さらに、後段の比較処理では、前段の比較処理でエラー検知した画像データに加えて、時系列的に前後する複数の画像データをデータ蓄積部１から読み出して、読み出された複数の画像データをも合わせて比較処理を行うことも可能である。
【００６３】
追比較監視結果表示機能部５７は、比較処理管理機能部５６によって再生されながら比較処理される放送用画像データと再送信用画像データを画面に表示し、比較処理結果についても識別可能に画面に表示する機能を有している。なお、比較処理結果としてエラー検知された箇所（相違点があった箇所）には、明暗や色付け等が施され、どの比較監視パラメータでエラーを検出したかを画面に同時に表示する。
【００６４】
ボタン指定機能部５８は、再生ボタン、一時停止ボタン、早送りボタン、巻き戻しボタン、５秒前から再生ボタン、繰り返し再生ボタン等を押下可能に表示し、オペレータ（以下、単にユーザという）により任意のボタンが押下られた場合に、押下られたボタンに係るボタン情報を同時記録データ読出機能部５３に送信する機能を有している。なお、同時記録データ読出機能部５３は、送信されたボタン情報に応じて動画像デコード機能部５４，５５の再生処理を制御する。例えば、放送用画像データと再送信用画像データとの再生に対して、一時停止、コマ送り再生、繰り返し再生等の制御が可能となる。
【００６５】
比較監視パラメータ調整機能部５９は、比較条件として設定される比較監視パラメータＰ２の閾値の変更の入力を受け付けて、ユーザによって比較監視パラメータＰ２の閾値が調整された場合に、比較監視パラメータＰ２の閾値を再設定する機能を有している。すなわち、ユーザによって、放送用画像データと再送信用画像データとを一時停止した状態で、比較監視パラメータＰ２の閾値として表示されている数値やインジケータ上の設定バーが変更された場合や、各々の比較監視パラメータＰ２を選択し、画面上で相違箇所として判断させたい／判断させたくない場所をマウスでクリックされた場合に、比較監視パラメータＰ２の閾値の変更を反映する機能を有している。
【００６６】
比較監視パラメータ読出／書込機能部６０は、比較条件として映像比較監視部３で管理している比較監視パラメータＰ１の情報を追比較検証部５で管理している比較監視パラメータＰ２に反映する機能や、追比較検証部５での追比較検証により変更された比較監視パラメータＰ２を映像比較監視部３の比較監視パラメータＰ１に反映する機能を有している。
【００６７】
次に、本映像比較監視システムの処理フローについて説明する。まず、図２，図３を用いて、映像比較監視部３で画像データの比較監視を行うまでの処理フローについて説明する。
【００６８】
最初に、データ蓄積部１により、放送されているストリームＡと再送信されているストリームＢとがリアルタイムで捕捉され、ストリームＡとして流れる複数の放送用画像データが、各放送用画像データの放送時刻にそれぞれ関連付けられてリアルタイムに同時記録データＡ蓄積部１１に蓄積されると同時に、ストリームＢとして流れる複数の再送信用画像データが、各再送信用画像データの再送信時刻にそれぞれ関連付けられてリアルタイムに同時記録データＢ蓄積部１２に蓄積される（Ｓ１）。
【００６９】
次いで、データ蓄積部１により、リアルタイムに蓄積された複数の放送用画像データと複数の再送信用画像データとが映像比較監視部３に即時に送出され、動画像デコード機能部３１により、複数の放送用画像データがデコード処理され、ストリームＡの放送に追い掛けて再生されると同時に、動画像デコード機能部３２により、複数の再送信用画像データがデコード処理され、ストリームＢの再送信に追い掛けて再生される（Ｓ２）。
【００７０】
次いで、比較処理管理機能部３３により、追い掛け再生されている各放送用画像データと各再送信用画像データとを用い、第１の比較アルゴリズムを用いて、各画像データ（各フレーム）の時刻情報（例えば、前述したＰＴＳ等）の値が最も近い画像データ同士の近似度が計算される（Ｓ３）。
【００７１】
次いで、Ｓ３での計算の結果、計算された近似度が設定された閾値を超えない場合（画像データ間で相違箇所を検出した場合）には、比較処理管理機能部３３により、エラーとして検知されて、エラー検知された放送用画像データの識別情報と再送信用画像データの識別情報とが映像比較結果記録部３４に記録され、アラーム出力機能部３５により、音やパトランプ等で外部に通知される（Ｓ４）。
【００７２】
次いで、エラー検知された画像データ同士を対象として、第１の比較アルゴリズムの次に処理時間の短い第２の比較アルゴリズムを用いて、Ｓ３とＳ４との処理が繰り返される（Ｓ５）。
【００７３】
なお、Ｓ２の処理で説明した追い掛け再生は、通常の追い掛け再生又はベストエフォート型追い掛け再生のいずれでもよい。ここで、ベストエフォート型追い掛け再生とは、ストリームＡとして放送されている各放送用画像データの各放送時刻と、ストリームＢとして再送信されている各再送信用画像データの各再送信時刻とから、データ蓄積部１から送出された各放送用画像データと各再送信用画像データとをそれぞれ追い掛けて再生するまでの遅延時間の最小値を設定しておき、上記Ｓ３乃至Ｓ５の各比較処理が重い場合には、その比較処理に要する時間に応じて遅延時間を増大して追い掛けて再生を行い、その比較処理が軽い場合には、遅延時間の最小値になるまで当該比較処理に要する処理速度に応じて早送り再生を実施することをいう。また、通常の追い掛け再生とは、各放送時刻又は各再送信時刻からの遅延時間を一定に保持しながら再生することをいう。ベストエフォート型追い掛け再生は、遅延時間の最小値に小さい値を設定しているため、通常の追い掛け再生よりも監視のリアルタイム性を向上することができ、比較アルゴリズムに求められるリアルタイム性（すなわち、必ず一定時間内で処理を終了することができる性能）要件を緩和することが可能となる。
【００７４】
また、Ｓ３の処理では、各画像データの時刻情報の値が最も近い画像データ同士の近似度を計算するとして説明したが、少なくとも１以上の放送用画像データからなる第１画像群を複数選択すると共に、少なくとも１以上の再送信用画像データからなる第２画像群を複数選択し、複数の第１画像群のうちいずれかの第１画像群と複数の第２画像群のうちいずれかの第２画像群とを任意に比較して相関度を求め、最も相関度の高い第１画像群と第２画像群とにそれぞれ含まれる放送用画像データと再送信用画像データとを用いて近似度を計算するようにしてもよい。
【００７５】
例えば、複数の放送用画像データから、時刻ｎ〜時刻ｎ＋２の放送用画像データを有する第１ａ画像群、時刻ｎ＋１〜時刻ｎ＋３の放送用画像データを有する第１ｂ画像群、時刻ｎ＋２〜時刻ｎ＋４の放送用画像データを有する第１ｃ画像群を選択する。同様に、複数の再送信用画像データから、時刻ｍ〜時刻ｍ＋２の再送信用画像データを有する第２ａ画像群、時刻ｍ＋１〜時刻ｍ＋３の再送信用画像データを有する第２ｂ画像群、時刻ｍ＋２〜時刻ｍ＋４の再送信用画像データを有する第２ｃ画像群を選択する（ｎは、ｍと同じであっても異なってもよい）。そして、第１ｂ画像群の平均輝度値に対する第２ａ画像群〜第２ｃ画像群の各平均輝度値を順次比較していき、最も近い平均輝度値を有する第２画像群（差分輝度値が最も小さい第２画像群）を最も相関度の高い画像群とする。なお、この相関度の計算は、輝度値のみではなく、画像の類似比較処理に用いられる全ての要素（組み合わせを含む）を利用可能であることは言うまでもない。
【００７６】
より具体的に、図４を参照しながら説明する。図４は、相関性のある２つの画像データを時間差をもって取得した場合における画像マッチング処理を説明する図である。
【００７７】
ストリームＡ，Ｂから時刻ｔの時に取得した放送用画像データ，再送信用画像データをＰｉｃ（Ａ，ｔ），Ｐｉｃ（Ｂ，ｔ）とし、ストリームＡとストリームＢとには時間差があるものとする。Ｐｉｃ（Ａ，ｔ）にマッチするＰｉｃ（Ｂ，ｔ）を求める場合、Ｐｉｃ（Ｂ，ｔ＋ｎ）のｎの値を１つずつ加算又は減算しながら平均輝度値の差分を計算していき、その差分が最小となるＰｉｃ（Ｂ，ｔ）を最も相関度の高いものとする。
【００７８】
但し、ストリームＡにおける時刻ｔ＋１と時刻ｔ＋２との画像データのように、同じ画像が連続する場合もあるため、１つの画像のみで行ったマッチング判定の信頼性は低い。そこで、例えば、図４の下段に示すように、連続する複数の画像データを１つの画像群とし、ストリームＡの画像群とストリームＢの画像群との輝度差の合計が最小となる画像群を求めるようにしてもよい。
【００７９】
続いて、図５を用いて、追比較検証部５で相違検出結果を検証するまでの処理フローについて説明する。
【００８０】
最初に、映像比較結果指定機能部５１により、映像比較監視部３の映像比較結果記録部３４からエラー検知に係る識別情報が取得され、映像比較結果の一覧が生成されて選択可能に画面に表示され、再生日時指定機能部５２により、再生したい動画像の再生開始日時が指定入力可能に表示される（Ｓ１１）。これにより、ユーザによって、確認したい動画像データが選択又は指定されることになる。
【００８１】
次いで、同時記録データ読出機能部５３により、ユーザによって選択された映像比較結果に対応する、又は指定された時刻情報に対応する、各放送用画像データが同時記録データＡ蓄積部１１から読み出されて動画像デコード機能部５４に送信されると共に、各再送信用画像データが同時記録データＢ蓄積部１２から読み出されて動画像デコード機能部５５に送信され、各動画像デコード機能部５４，５５によりデコード処理される（Ｓ１２）。
【００８２】
次いで、各動画像デコード機能部５４，５５により、比較監視パラメータＰ２が取り出され、各放送用画像データと各再送信用画像データとがそれぞれ再生されながら、比較処理管理機能部５６により、取り出された比較監視パラメータＰ２を用いて、各放送用画像データと各再送信用画像データとがそれぞれ比較処理される（Ｓ１３）。なお、比較結果は、追比較監視結果表示機能部５７により、エラー検知された箇所（相違点があった箇所）については、明暗や色付け等が施され、どの比較監視パラメータでエラーを検出したかが画面に同時に表示される。これにより、ユーザは、映像比較監視部３によってエラー検知された再送信用画像データにおける放送用画像データとの相違箇所を把握することが可能となる。
【００８３】
続いて、図６を用いて、追比較検証部５での比較監視パラメータＰ２の変更による動画像の比較検証までの処理フローについて説明する。
【００８４】
最初に、ユーザによって一時停止ボタンが押下られて放送用画像データと再送信用画像データとが再生後一時停止した状態になった場合に、比較監視パラメータ調整機能部５９により、比較条件として設定される比較監視パラメータＰ２の閾値の変更の入力が受付可能に制御される（Ｓ２１）。ユーザの視点から説明すると、放送用画像データと再送信用画像データとを再生した後に、一時停止した状態で、比較監視パラメータＰ２の閾値を変更することが可能となる。
【００８５】
次いで、ユーザによって、比較監視パラメータＰ２の閾値として表示されている数値やインジケータ上の設定バーが変更された場合や、各々の比較監視パラメータＰ２を選択し、画面上で相違箇所として判断させたい／判断させたくない場所をマウスでクリックされた場合に、比較監視パラメータ調整機能部５９により、このような変更に基づいて比較監視パラメータＰ２の閾値が変更される（Ｓ２２）。
【００８６】
次いで、比較監視パラメータＰ２の閾値が変更された後、ユーザによって再生ボタンが押下された場合に、動画像デコード機能部５４，５５により、放送用画像データと再送信用画像データとの再生が再開され、比較処理管理機能部５６により、変更後の比較監視パラメータＰ２の閾値で、再度比較処理される（Ｓ２３）。
【００８７】
なお、再度の比較処理にエラー検知された場合には、比較処理管理機能部５６により、追比較検証部５の映像比較結果蓄積部（不図示）に記録され、追比較監視結果表示機能部５７により、相違箇所が画面に表示される。
【００８８】
また、Ｓ２２における比較監視パラメータＰ２の閾値の変更は何回でも可能であり、Ｓ２３における再度の比較処理は、比較監視パラメータＰ２の閾値が変更される毎に繰り返し行われ、比較処理結果はその都度画面表示される。
【００８９】
続いて、追比較検証部５による映像比較監視部３の比較監視パラメータＰ１の閾値の変更までの処理フローについて説明する。
【００９０】
最初に、追比較検証部５の比較監視パラメータ調整機能部５９によって比較監視パラメータＰ２の閾値が変更され、ユーザによって監視設定ボタン（図５，図６参照）が押下られた場合に、比較監視パラメータ読出／書込機能部６０により、変更後の比較監視パラメータＰ２が読み出され、映像比較監視部３の比較監視パラメータＰ１が更新される（Ｓ３１）。
【００９１】
次いで、映像比較監視部３により、更新後の比較監視パラメータＰ２を用いて、上述したＳ１〜Ｓ５の処理が行われる（Ｓ３２）。
【００９２】
本実施の形態によれば、放送用画像データの追い掛け再生開始時刻をストリームＡの放送時刻に近い実時刻に設定し、再送信用画像データの追い掛け再生開始時刻をストリームＢの再送信時刻に近い実時刻に設定しているので、リアルタイムでの監視を実現が可能であり、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ比較し、その比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて比較するので、リアルタイムでの監視を実現しながら、人間の視聴感覚に近づけるような複数の比較処理をリアルタイム監視向けに短時間で実現することが可能となる。
【００９３】
本実施の形態によれば、オフライン型の追比較検証部５で監視結果を閲覧する際には、リアルタイム型の映像比較監視部３での比較監視結果に対応する画像データをデータ蓄積部１から取得するので、リアルタイム型の映像比較監視部３とオフライン型の追比較検証部５との間で、対象となる画像データの時間ズレや検出結果の差異等の発生を防止することが可能となる。
【００９４】
本実施の形態によれば、オフライン型の追比較検証部５で映像比較監視部３での監視結果を検証する際において、再生ボタン、一時停止ボタン、早送りボタン、巻き戻しボタン、５秒前から再生ボタン等のいずれかのボタンがユーザにより押下られた場合に、押下られたボタン情報に応じて放送用画像データと再送信用画像データとを制御するため、画面上で相違箇所を閲覧しつつ、エラー判定結果を容易且つ適宜適切に確認することが可能となり、人間の視聴感覚に基づいて変更（調整）された比較監視パラメータＰ２が比較監視パラメータＰ１に反映されるので、映像比較監視部３における以降のリアルタイム監視を、より人間の視聴感覚に近いものにすることが可能となる。
【００９５】
本実施の形態によれば、人間の主観に依存する比較監視パラメータを試行錯誤しながら調整可能な環境の実現が可能となり、比較監視パラメータの調整作業に要する時間を大幅に削減することが可能となる。また、試行錯誤しながら比較監視パラメータの調整を行う作業に時間がかかり過ぎるために比較監視パラメータの調整機能が実質的に利用されないといった事態を防止することが可能となる。
【００９６】
本実施の形態によれば、放送用画像データと再送信用画像データとが保存されているので、一時的に比較処理が遅れた場合や、動画像デコーダ等の障害により比較処理に瞬断が発生した場合でも、後から追い掛け再生し、実時刻に追いついて監視欠落部分を無くすことが可能である。また、リアルタイム処理が困難な複雑な比較処理に関しても、時間差は生じるものの、欠落部分なく監視することが可能となるので、動画像デコーダ等の安定性や比較アルゴリズムの処理速度についての要求レベルが下がり、様々な動画像デコーダや比較アルゴリズムが利用可能となる。
【００９７】
本実施の形態によれば、放送用画像データと再送信用画像データとが保存されているので、データ蓄積部１と、映像比較監視部３と、追比較検証部５とを各々あらかじめ独立させておくことにより、監視欠落期間なく各機能部単位で交換が可能となるので、保守運用時の作業面の負担だけではなく、映像比較監視部３と追比較検証部５との冗長化設計における費用面の負担も軽減される。
【００９８】
本実施の形態によれば、映像配信事業者は、配信する映像の同時録画装置を利用していることが多く、その同時録画装置がデータ蓄積部１と同等の機能を有する場合には、新たにデータ蓄積部１を導入する必要がなく、既存のリソースを有効活用した効率のよい映像比較監視システムの構築が可能となる。
【００９９】
本実施の形態によれば、２つの映像ストリームに時差が存在する場合であっても、その２つの映像ストリームの比較対象画像データのマッチングができる前提で、保存されている画像データから比較監視することが可能であるため、例えば、国内時差が存在する国等での映像配信や、地域間配信における番組編成上発生する時差放送においても有効である。
【０１００】
本実施の形態によれば、オフライン比較における比較監視パラメータの変更に対して、発生する映像比較結果ログ量の増減も調整することが可能となり、オペレータが対応しきれないほど相違検出が頻発した場合など、比較監視の比較監視パラメータを変更し、障害検知レベルを保ちながら、実質的に対応可能な検出量に抑えるといった、障害検知レベルと運用作業量とのバランス調整が容易となる。
【０１０１】
なお、追比較検証部５の動画像デコード機能部５４，５５として、異なる複数のデコーダを用いることにより、デコーダの性能によって比較結果の差異を確認するようにしてもよい。また、追比較検証部５の比較処理管理機能部５６に新たな比較アルゴリズムを導入し、既存の比較アルゴリズムとの性能差の検証や比較監視パラメータＰ２の調整を、映像比較監視部３に反映する前に実施するようにしてもよい。更に、データ蓄積部１と、映像比較監視部３と、追比較検証部５とは、それぞれ異なる場所に存在してもよいし、比較監視パラメータ数を変更（増加減）することも可能である。
【０１０２】
なお、本実施の形態では、地上波デジタル放送の映像ストリーム（ストリームＡ）と、ストリームＡをＨ．２６４で圧縮してＩＰ化し、ストリームＡの放送に追従してＩＰ再送信されているＩＰ再送信用映像ストリーム（ストリームＢ）との映像を監視する場合について説明したが、地上波デジタル放送以外で放送されている映像を監視する場合についても、本映像比較監視システムを利用可能であることはいうまでもない。例えば、ストリームＡを、ＢＳデジタル放送やＣＳデジタル放送としてもよいし、ストリームＢを、地上波，ＢＳ，ＣＳデジタル放送のＩＰ再送信としてもよい。また、ストリームＡやストリームＢとして放送又は再送信される映像は、ケーブルテレビで放送又は再送信されるものであってもよい。
【０１０３】
最後に、本実施の形態で説明した映像比較監視システムは、コンピュータで構成され、各機能部の各処理はプログラムで実行されるようになっている。また、上記各処理動作をプログラムとして例えばコンパクトディスクやフロッピー（登録商標）ディスク等の記録媒体に記録して、この記録媒体をコンピュータに組み込んだり、若しくは記録媒体に記録されたプログラムを、任意の通信回線を介してコンピュータにダウンロードしたり、又は記録媒体からインストールし、該プログラムでコンピュータを動作させることにより、上述した各処理動作を映像比較監視システムとして機能させることができるのは勿論である。
【０１０４】
また、同時記録データＡ蓄積部１１、同時記録データＢ蓄積部１２、映像比較結果記録部３４としては、例えば、一次メモリや二次メモリ、ハードディスク、更には通信ネットワークを介して電気的に接続可能な外部の記憶装置を用いて実現可能である。
【符号の説明】
【０１０５】
１…データ蓄積部（画像データ蓄積手段）
１１…同時記録データＡ蓄積部
１２…同時記録データＢ蓄積部
３…映像比較監視部（リアルタイム型映像比較監視手段）
３１，３２…動画像デコード機能部
３３…比較処理管理機能部
３４…映像比較結果記録部
３５…アラーム出力機能部
５…追比較検証部（オフライン型追比較検証手段）
５１…映像比較結果指定機能部
５２…再生日時指定機能部
５３…同時記録データ読出機能部
５４，５５…動画像デコード機能部
５６…比較処理管理機能部
５７…追比較監視結果表示機能部
５８…ボタン指定機能部
５９…比較監視パラメータ調整機能部
６０…比較監視パラメータ読出／書込機能部
Ｓ１〜Ｓ５…ステップ
Ｓ１１〜Ｓ１３…ステップ
Ｓ２１〜Ｓ２３…ステップ
Ｓ３１〜Ｓ３２…ステップ
【特許請求の範囲】
【請求項１】
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを蓄積する画像データ蓄積手段と、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録するリアルタイム型映像比較監視手段と、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定するオフライン型追比較検証手段と、
を有することを特徴とする映像比較監視システム。
【請求項２】
前記比較は、前記放送用画像データと前記再送信用画像データとの近似度又は相違度の比較であることを特徴とする請求項１に記載の映像比較監視システム。
【請求項３】
前記オフライン型追比較検証手段は、
比較される前記放送用画像データ及び前記再送信用画像データと前記比較の結果とを表示する表示手段と、前記比較条件として設定されるパラメータの値の変更の入力を受け付ける変更入力受付手段と、を有し、
前記パラメータの値は、
前記表示手段に表示された前記比較の結果に基づいて、前記変更入力受付手段で入力が受け付けられたユーザによって変更された値であることを特徴とする請求項１又は２に記載の映像比較監視システム。
【請求項４】
前記オフライン型追比較検証手段は、
前記パラメータの値が変更される毎に、前記比較を行って当該比較の結果を表示することを特徴とする請求項３に記載の映像比較監視システム。
【請求項５】
前記オフライン型追比較検証手段は、
比較される前記放送用画像データと前記再送信用画像データとに時系列的に前後する複数の放送用画像データと複数の再送信用画像データとを前記画像データ蓄積手段から更に取得して再生することを特徴とする請求項１乃至４のいずれか１項に記載の映像比較監視システム。
【請求項６】
前記オフライン型追比較検証手段は、
コマ送り再生、繰り返し再生のうちいずれか１以上を行うことを特徴とする請求項５に記載の映像比較監視システム。
【請求項７】
前記リアルタイム型映像比較監視手段は、
前記放送用映像ストリームとして放送されている各放送用画像データの各放送時刻と、前記再送信用映像ストリームとして再送信されている各再送信用画像データの各再送信時刻とから前記それぞれ追い掛けて再生されるまでの遅延時間の最小値を設定しておき、前記比較処理が重い場合には、当該比較処理に要する時間に応じて前記遅延時間を増大して前記追い掛けて再生し、前記比較処理が軽い場合には、前記遅延時間の最小値になるまで当該比較処理に要する処理速度に応じて早送り再生することを特徴とする請求項１乃至６のいずれか１項に記載の映像比較監視システム。
【請求項８】
前記リアルタイム型映像比較監視手段は、
少なくとも１以上の放送用画像データからなる第１画像群を複数選択すると共に、少なくとも１以上の再送信用画像データからなる第２画像群を複数選択し、前記複数の第１画像群のうちいずれかの第１画像群と前記複数の第２画像群のうちいずれかの第２画像群とを任意に比較して相関度を求め、最も相関度の高い第１画像群と第２画像群とにそれぞれ含まれる放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする請求項１乃至７のいずれか１項に記載の映像比較監視システム。
【請求項９】
前記リアルタイム型映像比較監視手段は、
放送時及び再送信時に付与されている時刻情報の値が最も近い放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする請求項１乃至７のいずれか１項に記載の映像比較監視システム。
【請求項１０】
前記リアルタイム型映像比較監視手段は、
前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとを更に比較処理時間の短い比較アルゴリズムを用いて第３比較する比較処理を行い、当該第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を前記画像比較結果記録手段に記録する、及び／又は、
前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報と、前記第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報との両方を前記画像比較結果記録手段に記録する、
ことを特徴とする請求項１乃至９のいずれか１項に記載の映像比較監視システム。
【請求項１１】
前記放送用映像ストリームは、地上波デジタル放送又はＢＳデジタル放送の映像ストリームであり、
前記再送信用映像ストリームは、当該地上波デジタル放送又は当該ＢＳデジタル放送のうちいずれかの放送の映像ストリームをＨ．２６４で圧縮した映像ストリームであって、当該放送に追従して送信されていることを特徴とする請求項１乃至１０のいずれか１項に記載の映像比較監視システム。
【請求項１２】
前記再送信用映像ストリームは、
ケーブルテレビで再送信されることを特徴とする請求項１１に記載の映像比較監視システム。
【請求項１３】
コンピュータにより、
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１のステップと、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２のステップと、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３のステップと、
を有することを特徴とする映像比較監視方法。
【請求項１４】
コンピュータに、
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、
を実行させることを特徴とする映像比較監視プログラム。
【請求項１５】
コンピュータに、
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、
を実行させるための映像比較監視プログラムを記録したコンピュータ読み取り可能な映像比較監視プログラム用記録媒体。
【請求項１】
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを蓄積する画像データ蓄積手段と、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録するリアルタイム型映像比較監視手段と、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定するオフライン型追比較検証手段と、
を有することを特徴とする映像比較監視システム。
【請求項２】
前記比較は、前記放送用画像データと前記再送信用画像データとの近似度又は相違度の比較であることを特徴とする請求項１に記載の映像比較監視システム。
【請求項３】
前記オフライン型追比較検証手段は、
比較される前記放送用画像データ及び前記再送信用画像データと前記比較の結果とを表示する表示手段と、前記比較条件として設定されるパラメータの値の変更の入力を受け付ける変更入力受付手段と、を有し、
前記パラメータの値は、
前記表示手段に表示された前記比較の結果に基づいて、前記変更入力受付手段で入力が受け付けられたユーザによって変更された値であることを特徴とする請求項１又は２に記載の映像比較監視システム。
【請求項４】
前記オフライン型追比較検証手段は、
前記パラメータの値が変更される毎に、前記比較を行って当該比較の結果を表示することを特徴とする請求項３に記載の映像比較監視システム。
【請求項５】
前記オフライン型追比較検証手段は、
比較される前記放送用画像データと前記再送信用画像データとに時系列的に前後する複数の放送用画像データと複数の再送信用画像データとを前記画像データ蓄積手段から更に取得して再生することを特徴とする請求項１乃至４のいずれか１項に記載の映像比較監視システム。
【請求項６】
前記オフライン型追比較検証手段は、
コマ送り再生、繰り返し再生のうちいずれか１以上を行うことを特徴とする請求項５に記載の映像比較監視システム。
【請求項７】
前記リアルタイム型映像比較監視手段は、
前記放送用映像ストリームとして放送されている各放送用画像データの各放送時刻と、前記再送信用映像ストリームとして再送信されている各再送信用画像データの各再送信時刻とから前記それぞれ追い掛けて再生されるまでの遅延時間の最小値を設定しておき、前記比較処理が重い場合には、当該比較処理に要する時間に応じて前記遅延時間を増大して前記追い掛けて再生し、前記比較処理が軽い場合には、前記遅延時間の最小値になるまで当該比較処理に要する処理速度に応じて早送り再生することを特徴とする請求項１乃至６のいずれか１項に記載の映像比較監視システム。
【請求項８】
前記リアルタイム型映像比較監視手段は、
少なくとも１以上の放送用画像データからなる第１画像群を複数選択すると共に、少なくとも１以上の再送信用画像データからなる第２画像群を複数選択し、前記複数の第１画像群のうちいずれかの第１画像群と前記複数の第２画像群のうちいずれかの第２画像群とを任意に比較して相関度を求め、最も相関度の高い第１画像群と第２画像群とにそれぞれ含まれる放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする請求項１乃至７のいずれか１項に記載の映像比較監視システム。
【請求項９】
前記リアルタイム型映像比較監視手段は、
放送時及び再送信時に付与されている時刻情報の値が最も近い放送用画像データと再送信用画像データとを用いて前記比較処理を行うことを特徴とする請求項１乃至７のいずれか１項に記載の映像比較監視システム。
【請求項１０】
前記リアルタイム型映像比較監視手段は、
前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとを更に比較処理時間の短い比較アルゴリズムを用いて第３比較する比較処理を行い、当該第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を前記画像比較結果記録手段に記録する、及び／又は、
前記第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報と、前記第３比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報との両方を前記画像比較結果記録手段に記録する、
ことを特徴とする請求項１乃至９のいずれか１項に記載の映像比較監視システム。
【請求項１１】
前記放送用映像ストリームは、地上波デジタル放送又はＢＳデジタル放送の映像ストリームであり、
前記再送信用映像ストリームは、当該地上波デジタル放送又は当該ＢＳデジタル放送のうちいずれかの放送の映像ストリームをＨ．２６４で圧縮した映像ストリームであって、当該放送に追従して送信されていることを特徴とする請求項１乃至１０のいずれか１項に記載の映像比較監視システム。
【請求項１２】
前記再送信用映像ストリームは、
ケーブルテレビで再送信されることを特徴とする請求項１１に記載の映像比較監視システム。
【請求項１３】
コンピュータにより、
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１のステップと、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２のステップと、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３のステップと、
を有することを特徴とする映像比較監視方法。
【請求項１４】
コンピュータに、
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、
を実行させることを特徴とする映像比較監視プログラム。
【請求項１５】
コンピュータに、
放送されている放送用映像ストリームを捕捉し、前記放送用映像ストリームとして流れる複数の放送用画像データを蓄積すると共に、前記放送用映像ストリームを圧縮して再送信されている再送信用映像ストリームを捕捉し、前記再送信用映像ストリームとして流れる複数の再送信用画像データを画像データ蓄積手段に蓄積する第１の手順と、
前記複数の放送用画像データと前記複数の再送信用画像データとを前記画像データ蓄積手段からそれぞれ読み出して、前記放送用映像ストリームの放送と前記再送信用映像ストリームの再送信とにそれぞれ追い掛けて再生し、人間の視覚特性を考慮した複数の比較アルゴリズムのうち、比較処理時間の短い比較アルゴリズムを用いて各放送用画像データと各再送信用画像データとをそれぞれ第１比較し、当該第１比較の結果、予め設定された比較条件に合致しない放送用画像データと再送信用画像データとを次に比較処理時間の短い比較アルゴリズムを用いて第２比較する比較処理を行い、当該第２比較の結果、前記比較条件に合致しない放送用画像データと再送信用画像データとの各識別情報を画像比較結果記録手段に記録する第２の手順と、
前記画像比較結果記録手段から前記各識別情報を読み出して、当該各識別情報にそれぞれ対応する放送用画像データと再送信用画像データとを前記画像データ蓄積手段から取得し、前記複数の比較アルゴリズムのうちいずれか１以上を用いて当該放送用画像データと当該再送信用画像データとを比較し、当該比較の結果に基づいて前記比較条件を変更して、変更後の比較条件を前記リアルタイム型映像比較監視手段の比較条件に設定する第３の手順と、
を実行させるための映像比較監視プログラムを記録したコンピュータ読み取り可能な映像比較監視プログラム用記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１１−２４４２７８（Ｐ２０１１−２４４２７８Ａ）
【公開日】平成２３年１２月１日（２０１１．１２．１）
【国際特許分類】
【出願番号】特願２０１０−１１５６１１（Ｐ２０１０−１１５６１１）
【出願日】平成２２年５月１９日（２０１０．５．１９）
【出願人】（５００１９７１４３）株式会社ＮＴＴぷらら (4)
【出願人】（３９８０３５６０４）株式会社トラフィック・シム (8)
【出願人】（３９９０３５７６６）エヌ・ティ・ティ・コミュニケーションズ株式会社 (321)
【Ｆターム（参考）】
【公開日】平成２３年１２月１日（２０１１．１２．１）
【国際特許分類】
【出願日】平成２２年５月１９日（２０１０．５．１９）
【出願人】（５００１９７１４３）株式会社ＮＴＴぷらら (4)
【出願人】（３９８０３５６０４）株式会社トラフィック・シム (8)
【出願人】（３９９０３５７６６）エヌ・ティ・ティ・コミュニケーションズ株式会社 (321)
【Ｆターム（参考）】
[ Back to top ]