ビデオコンテンツ解析装置及び方法
【課題】特定区間の認定が誤り無く行え、特定区間とその隣の区間との識別を正確にできるようする。
【解決手段】この発明の装置のイベント検出部１０１は、デコーディングユニット３によりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出する。イベント時刻情報格納部１０１２は、前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納する。複数イベント区間特定部１０３は、隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する。そして、映像種別識別部１０４は、グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する。
【解決手段】この発明の装置のイベント検出部１０１は、デコーディングユニット３によりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出する。イベント時刻情報格納部１０１２は、前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納する。複数イベント区間特定部１０３は、隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する。そして、映像種別識別部１０４は、グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、ビデオコンテンツ解析装置及び方法に関するものであり、映像・音声データの途中に含まれる特定の信号区間を検出し、映像・音声データの編集を行う場合に有効である。
【背景技術】
【０００２】
テレビジョン放送信号には、プログラムの境界、あるいはプログラムの途中においてコマーシャル（ＣＭ）タイムが設けられている。今、ここでは１つのＣＭが放送される区間をＣＭ区間とし、複数のＣＭが次々と放送される区間をグループＣＭ区間と称することにする。記録再生装置において、前記ＣＭ区間を検出する方法として、プログラム本編とＣＭ区間との間のブラックフレームを検出するとともに、グループＣＭ区間では隣り合うＣＭ区間の間にあるブラックフレームを検出する方法がある。ブラックフレームの検出タイミングを参照してグループＣＭ区間の全体をスキップし、プログラム本編のみを再生することができる。
【０００３】
しかしブラックフレームのフレーム数は番組よって異なる場合があり、複数のＣＭ区間が連続している場合、そのスキップ長に誤差が生じることがあり、プログラム本編に不要な映像が混入することがある。
【０００４】
またＣＭ区間を検出する方法として、次のような方法が開発されている（特許文献１）。音声信号を用いて音声レベルが、所定時間、閾値以下の区間を無音部として判定し、無音部と次の無音部との時間間隔が一定時間（Ａ：たとえば１５秒）の倍数であるかどうかを判定する。次に時間間隔が一定時間（Ａ）の倍数であれば、無音部の検出をカウントし、前記無音部のカウント数が閾値（Ｂ）個以上あれば、最初と最後に現れた無音部に対して、区切り情報を設定する。しかし無音部（音声レベルが閾値以下の区間）の時間長は必ずしも一定とは限らない。このために、無音部と次の無音部との時間間隔を測定する場合、各無音部の基準時刻の設定位置が問題となる。つまり無音部の先頭、終端のどの位置を基準時刻とするかにより、前記時間間隔の測定結果が不正確となることがある。測定結果が不正確な場合、ＣＭ区間とプログラム本編との区分が不正確になる。
【特許文献１】ＵＳ２００６／０２６３０６２Ａ１
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来の技術であると、ＣＭ区間をスキップした連続再生映像の途中で一部に無関係のフレーム映像（ＣＭ区間の残留像）が見えることがある。そこで上記のＣＭなどの特定区間をさらに正確に検出したいという要望がある。
【０００６】
この発明では、上記の事情に鑑みてなされたもので、特定区間の認定が誤り無く行え、特定区間とその隣の区間との識別を正確にできるようにしたビデオコンテンツ解析装置及び方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
この発明は、映像・音声データをデコードするデコーディングユニットと、前記デコーディングユニットによりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出するイベント検出部と、前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納するイベント時刻情報格納部と、隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する複数イベント区間特定部と、グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と有することを特徴とする。
【発明の効果】
【０００８】
上記の手段によると、複数のイベント区間をグループ化する上で、イベント区間の解析用時刻の間隔が用いられる。この間隔が所定の条件を満たすことを判定した上で、先頭のイベント区間から最後のイベント区間の映像を第１の種別とする。イベント区間の長さが変動しても、グループとしての複数のイベント区間の検出が正確となるため、イベント区間の検出ミスが低減され、複数のイベント区間の範囲確定が正確となり、第１の種別と第２の種別の映像の識別が正確となる。
【発明を実施するための最良の形態】
【０００９】
以下、図面を参照してこの発明の実施の形態を説明する。図１はこの発明が適用された信号処理装置の構成例である。この信号処理装置は、例えばデジタルテレビジョン受信装置、あるいは情報記録再生装置などに適用可能である。
【００１０】
チューナ１は、例えばデジタル放送信号を受信し、受信信号を復調し、復調出力をトランスポートデコーダ２に供給する。トランスポートデコーダ２で選択された番組の映像データ・音声データはパケット毎にオーディオビデオ（ＡＶ）デコーダ３に入力されて復調される。ＡＶデコーディングユニット３で復調された音声出力は、出力端子４Ａに出力され、映像出力は、出力端子４Ｐに出力される。出力端子４Ｐの映像データには、合成回路５にて、オンスクリーンディスプレイ（ＯＳＤ）コントローラ６からの映像データが合成される場合もある。
【００１１】
ＳＤＲＡＭ８は、例えば受信信号のエラー訂正処理などを行うときに、一時的にデータを格納する場合に利用される。また、ＥＥＰＲＯＭ９は、例えば装置の機能を実行するプログラムあるいはパラメータなどを保存しておくために利用される。
【００１２】
１０は、メインバスであり、上記のトランスポートデコーダ２、ＡＶデコーディングユニット３、ＯＳＤコントローラ６、ＳＤＲＡＭ８、ＥＥＰＲＯＭ９などに接続されている。そしてメインバス１０には、装置を統括する制御部としてのＣＰＵ１１が接続されている。さらにこの装置は、バス１０を介して外部機器と接続することが可能である。このためにメインバス１０には、モデムインターフェース１２ａ，リモコンインターフェース１２ｂ、ＡＴＡＰＩインターフェース１２ｃが接続されている。インターフェース１２ｃを介してハードディスクドライブ（ＨＤＤ）１３を接続することも可能である。
【００１３】
トランスポートストリームデコーダ２で分離されたＡＶストリームは、ＡＴＡＰＩインターフェース１２ｃを介して、ＨＤＤ１３に記録することができる。再生時時には、ＨＤＤ１３から読み出されたＡＶストリームがＡＶデコーディングユニット３でデコードされる。
【００１４】
ＡＶデコーディングユニット３は、トランスポートストリームからオーディオ信号、ビデオ信号を再生することができる。またＤＶＤ規格のオーディオストリーム、ビデオストリームからもオーディオ信号、ビデオ信号を再生することができる。また更に他の規格の信号からオーディオ信号、ビデオ信号を再生できるように構成されていてもよい。
【００１５】
またメインバス１０には、ＡＶエンコーダ１４が接続され、このＡＶエンコーダ１４は、映像データを記録媒体に記録するために所定のフォーマット（例えばＤＶＤ規格、トランスポートストリーム、ベースバンド、その他）に変換することができる。変換されたＡＶ情報は、例えばＨＤＤ１３に記録される。
【００１６】
さらにインターフェース１５を介して、ＤＶＤドライブ１６が接続されていてもよい。そしてＤＶＤ規格の情報は、ＤＶＤドライブ１６を介して光ディスクに記録される、あるいは光ディスクから再生されるようにしてもよい。
【００１７】
ＣＰＵ１１は、上記した各ブロックを統括して制御する。またＣＰＵ１１内部には、イベント検出部１０１、イベント時刻情報格納部１０２、複数イベント区間特定部１０３、映像種別識別部１０４が設けられている。
【００１８】
イベント検出部１０１は、ＡＶデコーディングユニット３によりデコードされた映像の中で、特定の特徴が生じた区間をイベント区間として検出する。イベント時刻情報格納部１０２は、検出したイベント区間の開始時刻、終了時刻、その間の解析用時刻を格納する。解析用時刻は、開始時刻と終了時刻の中央の中央時刻が望ましいが中央時刻にさらに±αの時刻であってもよい。
【００１９】
複数イベント区間特定部１０３は、隣り合うイベント区間に対して求められた隣り合う解析用時刻の間隔が所定の条件を満たす場合に、隣り合うイベント区間を特定する。映像種別識別部１０４は、特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する部分である。そして識別情報を生成することもできる。この識別情報は、１つの管理情報としてＡＶエンコーダ１４でエンコードされた圧縮映像データに関連付けられる。そして圧縮映像データとともに識別情報は、例えば、ＨＤＤ１３に記録される。
【００２０】
図２はイベント検出方法の一例を示している。イベント検出部１０１にあっては、デコードされたビデオデータをフレーム単位で監視し、フレーム全体が特定の色（例えば青）であるか否かを判定する。この場合、必ずしも青とは限らず、他の色でもよく、１フレームが単色であるか否かを判定するよういしてもよい。そして、フレーム全体が特定の色（単色）に変化したときを、特徴が発生した時刻（ｔ１）、特定の色から通常のビデオ内容に変化したときを特徴が消失した時刻（ｔ３）とする。さらに時刻ｔ１とｔ３の解析用時刻を計算し解析用時刻（ｔ２）とする。解析用時刻は例えば、ｔ１とｔ３の中間の時刻である。そして時刻ｔ１からｔ３までをイベント区間（ＥＶ）として定義する。
【００２１】
上記のようにイベント区間を検出すると、例えば図３の例のように、複数のイベント区間（ＥＶ１、ＥＶ２，ＥＶ３、ＥＶ４）を検出することができる。イベント時刻情報格納部１０２は、それぞれのイベント区間の特徴が発生した時刻、特徴が消失した時刻、その解析用時刻を一時的に格納する。そして、複数イベント区間特定部１０３により、隣り合うイベント区の中央時刻間の時間差がｎ秒か又はその倍数秒であるかを判断する。そして、隣り合うイベント区の中央時刻間の時間差がｎ秒か又はその倍数秒であれば、この期間を複数イベント区間として特定する。
【００２２】
さらに映像種別識別部１０４は、特定された複数のイベント区間のうち先頭のイベント区間の開始時刻から最後のイベント区間の終了時刻までの映像を第１の種別として、それ以外の映像を第２の種別として識別する。
【００２３】
図３の例は、グループとしての複数のイベント区間を特定する場合、隣り合うイベント区間の解析用時刻間の時間差がｎ秒か又はその倍数秒であることを条件にした。しかしこれに限定されるものではない。ｎ秒としては、たとえば１０秒、２０秒、３０秒などがある。
【００２４】
図４の例は、隣り合うイベント区間の解析用時刻間の時間差がｎ秒以内であることを条件にして、グループとしての複数のイベント区間の範囲を認定する例である。
【００２５】
上記したように、イベント区間の解析用時刻の間隔が、所定の条件を満たすことを判定した上で、先頭のイベント区間から最後のイベント区間の映像を第１の種別としている。このためにイベント区間の検出ミスが低減され、複数のイベント区間の範囲確定が正確となり、第１の種別と第２の種別の映像の識別が正確となる。
【００２６】
ＣＭによっては、短いイベント区間，長いイベント区間があり、一律に、イベントの先頭のみの情報からＣＭ区間を特定すると、ＣＭ区間の検出ミスが生じることがある。しかしこの発明であると、イベント区間の解析用時刻間を測定しているので、このような検出ミスが低減される。
【００２７】
次に本発明では、映像種別識別部１０４は、複数のイベント区間のうち先頭のイベント区間の開始時刻から最後のイベント区間の終了時刻までを映像の第１の種別として、それ以外を映像の第２の種別として設定する。このために、正確にフレーム単位で映像の第１の種別と、それ以外の映像の第２の種別とが分離識別される。この様子を示した図が図５である。即ち、複数のイベント区間のうち先頭のイベント区間（ＥＶ１）の開始時刻から最後のイベント区間（ＥＶ４）の終了時刻までを映像の第１の種別の区間として設定できる。
【００２８】
上記の実施の形態では、イベント区間を検出するためにフレーム全体が単色であるか否かを判定した。しかしこれに限らず、以下のような方法であってもよい。即ち、ＣＭ期間の始まりと終わりには一瞬無音期間が存在するので、この期間を先のイベント区間と同様な検出結果として利用するのである。なおここで、無音期間検出は、完全な音声レベルゼロを意味するのではなく、音声レベルが所定レベル以下になったことを検出することである。
【００２９】
図６と図７は、無音部を検出することで無音イベント区間を検出するときの動作と制御部１１の内部を示している。この場合も無音部の開始時刻、終了時刻を判定し、次に、開始時刻と終了時刻との解析用時刻を計算により求めて、メモリに格納する。
【００３０】
ビデオ信号には、プログラム本編の途中に第１回目のコマーシャルとしてＣＭ１，ＣＭ２，ＣＭ３，ＣＭ４存在し、第２回目のコマーシャルとしてＣＭ５，ＣＭ６，ＣＭ７が存在する例を示している。コマーシャルの境目にはイベント区間ＥＶ１１−ＥＶ１９が存在する。
【００３１】
無音部イベント検出部２０１は、オーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定している。イベント時刻情報格納部１０２は、検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納する。
【００３２】
以後の処理は、図１に示した実施の形態と同様である。つまり、制御部１１内には、隣り合う無音イベント区間に対して求められた隣り合う解析用時刻の間隔が所定の条件を満たす場合に、隣り合うイベント区間をグループ内として特定する複数イベント区間特定部１０３と、特定された複数のイベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と１０４有する。
【００３３】
図８、図９は、図１の実施形態と、図６、図７の実施形態を合体した実施の形態である。映像の全フレームが単色に変化したときであり、かつオーディオ信号レベルが所定の閾値以下に変化したときをイベント区間の開始と判定し、映像の全フレームが単色から通常画像状態に変化したときであり、かつオーディオ信号レベルが所定の閾値以下から以上に変化したときをイベント区間の終了と判定する例である。
【００３４】
この実施の形態によれば、誤って検出された不要なイベント区間ＥＶＡ５、ＥＶＡ７，ＥＶＰ７，ＥＶＰ１１が存在しても、これらのイベント区間が採用されることはない。制御部１１内には、図９に示すようにイベント検出部１０１、無音イベント検出部２０１、イベント時刻情報格納部１０２、複数イベント区間特定部１０３、映像種別識別部１０４が存在する。
【００３５】
図１０には、第１の実施の形態の動作フローチャートを示している。ビデオタイトルの先頭からの再生が開始されると、時間カウンタがスタートする（ステップＳＡ１）。全フレームが単色になったかどうかの判定が行なわれ（（ステップＳＡ２）る。単色なったときイベント区間の始まりと認識し、開始時刻を格納する（ステップＳＡ３）。ビデオタイトルの再生が終了したかどうかをチェックしつつ（（ステップＳＡ４）、全フレーム単色検出状態から通常画像検出状態に変化したからどうかを判定する（ステップＳＡ５）。
【００３６】
ビデオタイトルが終了したら動作が終了する。全フレーム単色検出状態から通常画像検出状態に変化したら、終了時刻を格納し（ステップＳＡ６）、次に中間の解析用時刻を計算して、イベント時刻情報格納部１０２に格納する（ステップＳＡ７）。
【００３７】
つぎのステップではグループ内としての前回の解析用時刻情報が存在するかどうかを判定し、なければ、今回が最初のイベント区間であるとして認識し（ステップＳＡ１０）、次のイベント区間のサーチに移行する（ステップＳＡ１１→ＳＡ２）。
【００３８】
ステップＳＡ８において、グループ内としての前回の解析用時刻情報が存在する場合は、前回の解析用時刻と今回の解析用時刻との差が所定の条件を満足しているかどうかを判定する（ステップＳＡ９）。満足している場合には、今回のイベント区間をグループ内のものとして特定し、次のイベント区間の検索に移行する。
【００３９】
前回の解析用時刻と今回の解析用時刻との差が所定の条件を満足していない場合は、今回のイベント区間がグループ内ではないと判定し、今まで検出した複数のイベント区間を決定し、最初（先頭）のイベント区間の開始時刻、最後のイベント区間の終了時刻を決定する（ステップＳＡ１２）。
【００４０】
次にステップＳＡ１３に移行して、映像種別の確定を行ない、今までのイベント区間情報をクリアし（ステップＳＡ１４）、ステップＳＡ２に戻る。次の複数のイベント区間の検索に移行する。
【００４１】
図１１は、図８に示した実施形態に対応するフローチャートである。
【００４２】
ビデオタイトルの先頭からの再生が開始されると、時間カウンタがスタートする（ステップＳＣ１）。音声レベルが閾値以下になったかどうかの判定が行なわれ（ステップＳＣ２）る。閾値以下になったときイベント区間の始まりと認識し、開始時刻を格納する（ステップＳＣ３）。ビデオタイトルの再生が終了したかどうかをチェックしつつ（（ステップＳＣ４）、音声レベルが閾値以下の状態から閾値以上に変化したか、その変化するまでの時間間隔は十分かの判定がなされる（ステップＳＣ５）。時間間隔が一定の幅を持つことを確認する理由は、ノイズに反応しないためである。
【００４３】
ビデオタイトルが終了したら動作が終了する。音声レベルが閾値以下の状態から閾値以上に変化したら、終了時刻を格納し（ステップＳＣ６）、次に中間の解析用時刻を計算して、イベント時刻情報格納部１０２に格納する（ステップＳＣ７）。
【００４４】
つぎのステップではグループ内としての前回の解析用時刻情報が存在するかどうかを判定し、なければ、今回が最初のイベント区間であるとして認識し（ステップＳＣ１０）、次のイベント区間のサーチに移行する（ステップＳＣ１１→ＳＣ２）。
【００４５】
ステップＳＣ８において、グループ内としての前回の中間の解析用時刻情報が存在する場合は、前回の解析用時刻と今回の中間の解析用時刻との差が所定の条件を満足しているかどうかを判定する（ステップＳＣ９）。満足している場合には、今回のイベント区間をグループ内のものとして特定し、次のイベント区間の検索に移行する。
【００４６】
前回の解析用時刻と今回の解析用時刻との差が所定の条件を満足していない場合は、今回のイベント区間がグループ内ではないと判定し、今まで検出した複数のイベント区間を決定し、最初（先頭）のイベント区間の開始時刻、最後のイベント区間の終了時刻を決定する（ステップＳＣ１２）。
【００４７】
次にステップＳＡ１３に移行して、映像種別の確定を行ない、今までのイベント区間情報をクリアし（ステップＳＣ１４）、ステップＳＡ２に戻る。次の複数のイベント区間の検索に移行する。
【００４８】
図１２は、図１０と図１１の実施の形態が一体化された例である。図１０との違いは、ステップＳＡ２とステップＳＡ３の間にステップＳＢ１が設けられ、音声レベルが閾値以下か動かを判定している。またステップＳＡ５とＳＡ６の間に音声レベルが閾値以下から閾値以上に変化したどうかを判定している点である。そのたの部分は図１０と同じである。
【００４９】
上記した映像の種別確定は、例えばチューナからの受信信号が図１のＡＶデコーダでデコードされているビデオ信号に対して行われる。そして圧縮処理されたＡＶデータに関連付けて映像種別情報もハードディスクに記録される。または、ハードディスクに記録されているトラスポートストリームが、ＡＶデコーダでデコードされるとともにビデオ信号に同期する映像種別情報も成生される。そして圧縮処理されたＡＶデータに関連つけて映像種別情報もハードディスクに記録される。圧縮処理されたＡＶデータがＡＶデコーダでデコードされたときは、映像種別情報も参照され、映像の第１の種別の部分がスキップされ、映像の第２の種別の部分だけが出力される。あるいは逆に映像の第１の種別の部分のみが出力されるようにしてもよい。この種別の選択は、利用者が操作部を介して任意に設定することができる。
【００５０】
上記したようにこの発明によれば、イベント区間の解析用時刻の間隔が、前記所定の条件を満たすことを判定した上で、先頭のイベント区間から最後のイベント区間の映像を第１の種別とするので、イベント区間の検出ミスが低減され、複数のイベント区間の範囲確定が正確となり、第１の種別と第２の種別の映像の識別が正確となる。イベント区間が変動してもグループとしての複数のイベント区間の検出が正確となる。
【００５１】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００５２】
【図１】この発明が適用された信号処理装置の構成例を示す図である。
【図２】イベント検出方法の一例を示す図である。
【図３】グループとしての複数のイベント区間を特定する場合の条件例を示す説明図である。
【図４】グループとしての複数のイベント区間を特定する場合の他の条件例を示す説明図である。
【図５】グループとしての複数のイベント区間を映像の第１の種別とし、他の部分を映像の第２の種別とするときの分割点を示す説明図である。
【図６】無音イベント区間を検出するときの動作タイミングチャートの例を示す図である。
【図７】図６の無音イベント区間を検出するときの動作タイミングチャートを得る制御部の構成例を示す図である。
【図８】単色のイベント区間と無音イベント区間を検出するときの動作タイミングチャートの例を示す図である。
【図９】図８の単色のイベント区間と無音イベント区間を検出するときの動作タイミングチャートを得る制御部の構成例を示す図である。
【図１０】単色のイベント区間を検出するときのフローチャートの例を示す図である。
【図１１】無音部のイベント区間を検出するときのフローチャートの例を示す図である。
【図１２】単色のイベント区間と無音イベント区間を検出するときフローチャートの例を示す図である。
【符号の説明】
【００５３】
１・・・チューナ、２・・・トランスポートデコーダ、３・・・ＡＶデコーディングユニット、１１・・・制御部、１３・・・ハードディスクドライブ、１０１・・・イベント検出部、１０２・・・イベント時刻情報格納部、１０３・・・複数イベント区間特定部、１０４・・・映像種別識別部、２０１・・・無音イベント検出部。
【技術分野】
【０００１】
この発明は、ビデオコンテンツ解析装置及び方法に関するものであり、映像・音声データの途中に含まれる特定の信号区間を検出し、映像・音声データの編集を行う場合に有効である。
【背景技術】
【０００２】
テレビジョン放送信号には、プログラムの境界、あるいはプログラムの途中においてコマーシャル（ＣＭ）タイムが設けられている。今、ここでは１つのＣＭが放送される区間をＣＭ区間とし、複数のＣＭが次々と放送される区間をグループＣＭ区間と称することにする。記録再生装置において、前記ＣＭ区間を検出する方法として、プログラム本編とＣＭ区間との間のブラックフレームを検出するとともに、グループＣＭ区間では隣り合うＣＭ区間の間にあるブラックフレームを検出する方法がある。ブラックフレームの検出タイミングを参照してグループＣＭ区間の全体をスキップし、プログラム本編のみを再生することができる。
【０００３】
しかしブラックフレームのフレーム数は番組よって異なる場合があり、複数のＣＭ区間が連続している場合、そのスキップ長に誤差が生じることがあり、プログラム本編に不要な映像が混入することがある。
【０００４】
またＣＭ区間を検出する方法として、次のような方法が開発されている（特許文献１）。音声信号を用いて音声レベルが、所定時間、閾値以下の区間を無音部として判定し、無音部と次の無音部との時間間隔が一定時間（Ａ：たとえば１５秒）の倍数であるかどうかを判定する。次に時間間隔が一定時間（Ａ）の倍数であれば、無音部の検出をカウントし、前記無音部のカウント数が閾値（Ｂ）個以上あれば、最初と最後に現れた無音部に対して、区切り情報を設定する。しかし無音部（音声レベルが閾値以下の区間）の時間長は必ずしも一定とは限らない。このために、無音部と次の無音部との時間間隔を測定する場合、各無音部の基準時刻の設定位置が問題となる。つまり無音部の先頭、終端のどの位置を基準時刻とするかにより、前記時間間隔の測定結果が不正確となることがある。測定結果が不正確な場合、ＣＭ区間とプログラム本編との区分が不正確になる。
【特許文献１】ＵＳ２００６／０２６３０６２Ａ１
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来の技術であると、ＣＭ区間をスキップした連続再生映像の途中で一部に無関係のフレーム映像（ＣＭ区間の残留像）が見えることがある。そこで上記のＣＭなどの特定区間をさらに正確に検出したいという要望がある。
【０００６】
この発明では、上記の事情に鑑みてなされたもので、特定区間の認定が誤り無く行え、特定区間とその隣の区間との識別を正確にできるようにしたビデオコンテンツ解析装置及び方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
この発明は、映像・音声データをデコードするデコーディングユニットと、前記デコーディングユニットによりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出するイベント検出部と、前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納するイベント時刻情報格納部と、隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する複数イベント区間特定部と、グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と有することを特徴とする。
【発明の効果】
【０００８】
上記の手段によると、複数のイベント区間をグループ化する上で、イベント区間の解析用時刻の間隔が用いられる。この間隔が所定の条件を満たすことを判定した上で、先頭のイベント区間から最後のイベント区間の映像を第１の種別とする。イベント区間の長さが変動しても、グループとしての複数のイベント区間の検出が正確となるため、イベント区間の検出ミスが低減され、複数のイベント区間の範囲確定が正確となり、第１の種別と第２の種別の映像の識別が正確となる。
【発明を実施するための最良の形態】
【０００９】
以下、図面を参照してこの発明の実施の形態を説明する。図１はこの発明が適用された信号処理装置の構成例である。この信号処理装置は、例えばデジタルテレビジョン受信装置、あるいは情報記録再生装置などに適用可能である。
【００１０】
チューナ１は、例えばデジタル放送信号を受信し、受信信号を復調し、復調出力をトランスポートデコーダ２に供給する。トランスポートデコーダ２で選択された番組の映像データ・音声データはパケット毎にオーディオビデオ（ＡＶ）デコーダ３に入力されて復調される。ＡＶデコーディングユニット３で復調された音声出力は、出力端子４Ａに出力され、映像出力は、出力端子４Ｐに出力される。出力端子４Ｐの映像データには、合成回路５にて、オンスクリーンディスプレイ（ＯＳＤ）コントローラ６からの映像データが合成される場合もある。
【００１１】
ＳＤＲＡＭ８は、例えば受信信号のエラー訂正処理などを行うときに、一時的にデータを格納する場合に利用される。また、ＥＥＰＲＯＭ９は、例えば装置の機能を実行するプログラムあるいはパラメータなどを保存しておくために利用される。
【００１２】
１０は、メインバスであり、上記のトランスポートデコーダ２、ＡＶデコーディングユニット３、ＯＳＤコントローラ６、ＳＤＲＡＭ８、ＥＥＰＲＯＭ９などに接続されている。そしてメインバス１０には、装置を統括する制御部としてのＣＰＵ１１が接続されている。さらにこの装置は、バス１０を介して外部機器と接続することが可能である。このためにメインバス１０には、モデムインターフェース１２ａ，リモコンインターフェース１２ｂ、ＡＴＡＰＩインターフェース１２ｃが接続されている。インターフェース１２ｃを介してハードディスクドライブ（ＨＤＤ）１３を接続することも可能である。
【００１３】
トランスポートストリームデコーダ２で分離されたＡＶストリームは、ＡＴＡＰＩインターフェース１２ｃを介して、ＨＤＤ１３に記録することができる。再生時時には、ＨＤＤ１３から読み出されたＡＶストリームがＡＶデコーディングユニット３でデコードされる。
【００１４】
ＡＶデコーディングユニット３は、トランスポートストリームからオーディオ信号、ビデオ信号を再生することができる。またＤＶＤ規格のオーディオストリーム、ビデオストリームからもオーディオ信号、ビデオ信号を再生することができる。また更に他の規格の信号からオーディオ信号、ビデオ信号を再生できるように構成されていてもよい。
【００１５】
またメインバス１０には、ＡＶエンコーダ１４が接続され、このＡＶエンコーダ１４は、映像データを記録媒体に記録するために所定のフォーマット（例えばＤＶＤ規格、トランスポートストリーム、ベースバンド、その他）に変換することができる。変換されたＡＶ情報は、例えばＨＤＤ１３に記録される。
【００１６】
さらにインターフェース１５を介して、ＤＶＤドライブ１６が接続されていてもよい。そしてＤＶＤ規格の情報は、ＤＶＤドライブ１６を介して光ディスクに記録される、あるいは光ディスクから再生されるようにしてもよい。
【００１７】
ＣＰＵ１１は、上記した各ブロックを統括して制御する。またＣＰＵ１１内部には、イベント検出部１０１、イベント時刻情報格納部１０２、複数イベント区間特定部１０３、映像種別識別部１０４が設けられている。
【００１８】
イベント検出部１０１は、ＡＶデコーディングユニット３によりデコードされた映像の中で、特定の特徴が生じた区間をイベント区間として検出する。イベント時刻情報格納部１０２は、検出したイベント区間の開始時刻、終了時刻、その間の解析用時刻を格納する。解析用時刻は、開始時刻と終了時刻の中央の中央時刻が望ましいが中央時刻にさらに±αの時刻であってもよい。
【００１９】
複数イベント区間特定部１０３は、隣り合うイベント区間に対して求められた隣り合う解析用時刻の間隔が所定の条件を満たす場合に、隣り合うイベント区間を特定する。映像種別識別部１０４は、特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する部分である。そして識別情報を生成することもできる。この識別情報は、１つの管理情報としてＡＶエンコーダ１４でエンコードされた圧縮映像データに関連付けられる。そして圧縮映像データとともに識別情報は、例えば、ＨＤＤ１３に記録される。
【００２０】
図２はイベント検出方法の一例を示している。イベント検出部１０１にあっては、デコードされたビデオデータをフレーム単位で監視し、フレーム全体が特定の色（例えば青）であるか否かを判定する。この場合、必ずしも青とは限らず、他の色でもよく、１フレームが単色であるか否かを判定するよういしてもよい。そして、フレーム全体が特定の色（単色）に変化したときを、特徴が発生した時刻（ｔ１）、特定の色から通常のビデオ内容に変化したときを特徴が消失した時刻（ｔ３）とする。さらに時刻ｔ１とｔ３の解析用時刻を計算し解析用時刻（ｔ２）とする。解析用時刻は例えば、ｔ１とｔ３の中間の時刻である。そして時刻ｔ１からｔ３までをイベント区間（ＥＶ）として定義する。
【００２１】
上記のようにイベント区間を検出すると、例えば図３の例のように、複数のイベント区間（ＥＶ１、ＥＶ２，ＥＶ３、ＥＶ４）を検出することができる。イベント時刻情報格納部１０２は、それぞれのイベント区間の特徴が発生した時刻、特徴が消失した時刻、その解析用時刻を一時的に格納する。そして、複数イベント区間特定部１０３により、隣り合うイベント区の中央時刻間の時間差がｎ秒か又はその倍数秒であるかを判断する。そして、隣り合うイベント区の中央時刻間の時間差がｎ秒か又はその倍数秒であれば、この期間を複数イベント区間として特定する。
【００２２】
さらに映像種別識別部１０４は、特定された複数のイベント区間のうち先頭のイベント区間の開始時刻から最後のイベント区間の終了時刻までの映像を第１の種別として、それ以外の映像を第２の種別として識別する。
【００２３】
図３の例は、グループとしての複数のイベント区間を特定する場合、隣り合うイベント区間の解析用時刻間の時間差がｎ秒か又はその倍数秒であることを条件にした。しかしこれに限定されるものではない。ｎ秒としては、たとえば１０秒、２０秒、３０秒などがある。
【００２４】
図４の例は、隣り合うイベント区間の解析用時刻間の時間差がｎ秒以内であることを条件にして、グループとしての複数のイベント区間の範囲を認定する例である。
【００２５】
上記したように、イベント区間の解析用時刻の間隔が、所定の条件を満たすことを判定した上で、先頭のイベント区間から最後のイベント区間の映像を第１の種別としている。このためにイベント区間の検出ミスが低減され、複数のイベント区間の範囲確定が正確となり、第１の種別と第２の種別の映像の識別が正確となる。
【００２６】
ＣＭによっては、短いイベント区間，長いイベント区間があり、一律に、イベントの先頭のみの情報からＣＭ区間を特定すると、ＣＭ区間の検出ミスが生じることがある。しかしこの発明であると、イベント区間の解析用時刻間を測定しているので、このような検出ミスが低減される。
【００２７】
次に本発明では、映像種別識別部１０４は、複数のイベント区間のうち先頭のイベント区間の開始時刻から最後のイベント区間の終了時刻までを映像の第１の種別として、それ以外を映像の第２の種別として設定する。このために、正確にフレーム単位で映像の第１の種別と、それ以外の映像の第２の種別とが分離識別される。この様子を示した図が図５である。即ち、複数のイベント区間のうち先頭のイベント区間（ＥＶ１）の開始時刻から最後のイベント区間（ＥＶ４）の終了時刻までを映像の第１の種別の区間として設定できる。
【００２８】
上記の実施の形態では、イベント区間を検出するためにフレーム全体が単色であるか否かを判定した。しかしこれに限らず、以下のような方法であってもよい。即ち、ＣＭ期間の始まりと終わりには一瞬無音期間が存在するので、この期間を先のイベント区間と同様な検出結果として利用するのである。なおここで、無音期間検出は、完全な音声レベルゼロを意味するのではなく、音声レベルが所定レベル以下になったことを検出することである。
【００２９】
図６と図７は、無音部を検出することで無音イベント区間を検出するときの動作と制御部１１の内部を示している。この場合も無音部の開始時刻、終了時刻を判定し、次に、開始時刻と終了時刻との解析用時刻を計算により求めて、メモリに格納する。
【００３０】
ビデオ信号には、プログラム本編の途中に第１回目のコマーシャルとしてＣＭ１，ＣＭ２，ＣＭ３，ＣＭ４存在し、第２回目のコマーシャルとしてＣＭ５，ＣＭ６，ＣＭ７が存在する例を示している。コマーシャルの境目にはイベント区間ＥＶ１１−ＥＶ１９が存在する。
【００３１】
無音部イベント検出部２０１は、オーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定している。イベント時刻情報格納部１０２は、検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納する。
【００３２】
以後の処理は、図１に示した実施の形態と同様である。つまり、制御部１１内には、隣り合う無音イベント区間に対して求められた隣り合う解析用時刻の間隔が所定の条件を満たす場合に、隣り合うイベント区間をグループ内として特定する複数イベント区間特定部１０３と、特定された複数のイベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と１０４有する。
【００３３】
図８、図９は、図１の実施形態と、図６、図７の実施形態を合体した実施の形態である。映像の全フレームが単色に変化したときであり、かつオーディオ信号レベルが所定の閾値以下に変化したときをイベント区間の開始と判定し、映像の全フレームが単色から通常画像状態に変化したときであり、かつオーディオ信号レベルが所定の閾値以下から以上に変化したときをイベント区間の終了と判定する例である。
【００３４】
この実施の形態によれば、誤って検出された不要なイベント区間ＥＶＡ５、ＥＶＡ７，ＥＶＰ７，ＥＶＰ１１が存在しても、これらのイベント区間が採用されることはない。制御部１１内には、図９に示すようにイベント検出部１０１、無音イベント検出部２０１、イベント時刻情報格納部１０２、複数イベント区間特定部１０３、映像種別識別部１０４が存在する。
【００３５】
図１０には、第１の実施の形態の動作フローチャートを示している。ビデオタイトルの先頭からの再生が開始されると、時間カウンタがスタートする（ステップＳＡ１）。全フレームが単色になったかどうかの判定が行なわれ（（ステップＳＡ２）る。単色なったときイベント区間の始まりと認識し、開始時刻を格納する（ステップＳＡ３）。ビデオタイトルの再生が終了したかどうかをチェックしつつ（（ステップＳＡ４）、全フレーム単色検出状態から通常画像検出状態に変化したからどうかを判定する（ステップＳＡ５）。
【００３６】
ビデオタイトルが終了したら動作が終了する。全フレーム単色検出状態から通常画像検出状態に変化したら、終了時刻を格納し（ステップＳＡ６）、次に中間の解析用時刻を計算して、イベント時刻情報格納部１０２に格納する（ステップＳＡ７）。
【００３７】
つぎのステップではグループ内としての前回の解析用時刻情報が存在するかどうかを判定し、なければ、今回が最初のイベント区間であるとして認識し（ステップＳＡ１０）、次のイベント区間のサーチに移行する（ステップＳＡ１１→ＳＡ２）。
【００３８】
ステップＳＡ８において、グループ内としての前回の解析用時刻情報が存在する場合は、前回の解析用時刻と今回の解析用時刻との差が所定の条件を満足しているかどうかを判定する（ステップＳＡ９）。満足している場合には、今回のイベント区間をグループ内のものとして特定し、次のイベント区間の検索に移行する。
【００３９】
前回の解析用時刻と今回の解析用時刻との差が所定の条件を満足していない場合は、今回のイベント区間がグループ内ではないと判定し、今まで検出した複数のイベント区間を決定し、最初（先頭）のイベント区間の開始時刻、最後のイベント区間の終了時刻を決定する（ステップＳＡ１２）。
【００４０】
次にステップＳＡ１３に移行して、映像種別の確定を行ない、今までのイベント区間情報をクリアし（ステップＳＡ１４）、ステップＳＡ２に戻る。次の複数のイベント区間の検索に移行する。
【００４１】
図１１は、図８に示した実施形態に対応するフローチャートである。
【００４２】
ビデオタイトルの先頭からの再生が開始されると、時間カウンタがスタートする（ステップＳＣ１）。音声レベルが閾値以下になったかどうかの判定が行なわれ（ステップＳＣ２）る。閾値以下になったときイベント区間の始まりと認識し、開始時刻を格納する（ステップＳＣ３）。ビデオタイトルの再生が終了したかどうかをチェックしつつ（（ステップＳＣ４）、音声レベルが閾値以下の状態から閾値以上に変化したか、その変化するまでの時間間隔は十分かの判定がなされる（ステップＳＣ５）。時間間隔が一定の幅を持つことを確認する理由は、ノイズに反応しないためである。
【００４３】
ビデオタイトルが終了したら動作が終了する。音声レベルが閾値以下の状態から閾値以上に変化したら、終了時刻を格納し（ステップＳＣ６）、次に中間の解析用時刻を計算して、イベント時刻情報格納部１０２に格納する（ステップＳＣ７）。
【００４４】
つぎのステップではグループ内としての前回の解析用時刻情報が存在するかどうかを判定し、なければ、今回が最初のイベント区間であるとして認識し（ステップＳＣ１０）、次のイベント区間のサーチに移行する（ステップＳＣ１１→ＳＣ２）。
【００４５】
ステップＳＣ８において、グループ内としての前回の中間の解析用時刻情報が存在する場合は、前回の解析用時刻と今回の中間の解析用時刻との差が所定の条件を満足しているかどうかを判定する（ステップＳＣ９）。満足している場合には、今回のイベント区間をグループ内のものとして特定し、次のイベント区間の検索に移行する。
【００４６】
前回の解析用時刻と今回の解析用時刻との差が所定の条件を満足していない場合は、今回のイベント区間がグループ内ではないと判定し、今まで検出した複数のイベント区間を決定し、最初（先頭）のイベント区間の開始時刻、最後のイベント区間の終了時刻を決定する（ステップＳＣ１２）。
【００４７】
次にステップＳＡ１３に移行して、映像種別の確定を行ない、今までのイベント区間情報をクリアし（ステップＳＣ１４）、ステップＳＡ２に戻る。次の複数のイベント区間の検索に移行する。
【００４８】
図１２は、図１０と図１１の実施の形態が一体化された例である。図１０との違いは、ステップＳＡ２とステップＳＡ３の間にステップＳＢ１が設けられ、音声レベルが閾値以下か動かを判定している。またステップＳＡ５とＳＡ６の間に音声レベルが閾値以下から閾値以上に変化したどうかを判定している点である。そのたの部分は図１０と同じである。
【００４９】
上記した映像の種別確定は、例えばチューナからの受信信号が図１のＡＶデコーダでデコードされているビデオ信号に対して行われる。そして圧縮処理されたＡＶデータに関連付けて映像種別情報もハードディスクに記録される。または、ハードディスクに記録されているトラスポートストリームが、ＡＶデコーダでデコードされるとともにビデオ信号に同期する映像種別情報も成生される。そして圧縮処理されたＡＶデータに関連つけて映像種別情報もハードディスクに記録される。圧縮処理されたＡＶデータがＡＶデコーダでデコードされたときは、映像種別情報も参照され、映像の第１の種別の部分がスキップされ、映像の第２の種別の部分だけが出力される。あるいは逆に映像の第１の種別の部分のみが出力されるようにしてもよい。この種別の選択は、利用者が操作部を介して任意に設定することができる。
【００５０】
上記したようにこの発明によれば、イベント区間の解析用時刻の間隔が、前記所定の条件を満たすことを判定した上で、先頭のイベント区間から最後のイベント区間の映像を第１の種別とするので、イベント区間の検出ミスが低減され、複数のイベント区間の範囲確定が正確となり、第１の種別と第２の種別の映像の識別が正確となる。イベント区間が変動してもグループとしての複数のイベント区間の検出が正確となる。
【００５１】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００５２】
【図１】この発明が適用された信号処理装置の構成例を示す図である。
【図２】イベント検出方法の一例を示す図である。
【図３】グループとしての複数のイベント区間を特定する場合の条件例を示す説明図である。
【図４】グループとしての複数のイベント区間を特定する場合の他の条件例を示す説明図である。
【図５】グループとしての複数のイベント区間を映像の第１の種別とし、他の部分を映像の第２の種別とするときの分割点を示す説明図である。
【図６】無音イベント区間を検出するときの動作タイミングチャートの例を示す図である。
【図７】図６の無音イベント区間を検出するときの動作タイミングチャートを得る制御部の構成例を示す図である。
【図８】単色のイベント区間と無音イベント区間を検出するときの動作タイミングチャートの例を示す図である。
【図９】図８の単色のイベント区間と無音イベント区間を検出するときの動作タイミングチャートを得る制御部の構成例を示す図である。
【図１０】単色のイベント区間を検出するときのフローチャートの例を示す図である。
【図１１】無音部のイベント区間を検出するときのフローチャートの例を示す図である。
【図１２】単色のイベント区間と無音イベント区間を検出するときフローチャートの例を示す図である。
【符号の説明】
【００５３】
１・・・チューナ、２・・・トランスポートデコーダ、３・・・ＡＶデコーディングユニット、１１・・・制御部、１３・・・ハードディスクドライブ、１０１・・・イベント検出部、１０２・・・イベント時刻情報格納部、１０３・・・複数イベント区間特定部、１０４・・・映像種別識別部、２０１・・・無音イベント検出部。
【特許請求の範囲】
【請求項１】
映像・音声データをデコードするデコーディングユニットと、
前記デコーディングユニットによりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出するイベント検出部と、
前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納するイベント時刻情報格納部と、
隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する複数イベント区間特定部と、
グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と有するビデオコンテンツ解析装置。
【請求項２】
前記映像種別識別部は、前記複数の前記イベント区間のうち先頭のイベント区間の開始時刻から最後のイベント区間の終了時刻までを前記映像の第１の種別として、それ以外を前記映像の第２の種別として設定することを特徴とする請求項１記載のビデオコンテンツ解析装置。
【請求項３】
前記特定の特徴部を検出する前記イベント検出部は、
映像の全フレームが単色に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したときを前記イベント区間の終了と判定していることを特徴とする請求項２記載のビデオコンテンツ解析装置。
【請求項４】
前記特定の特徴部を検出する前記イベント検出部は、
オーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定していることを特徴とする請求項２記載のビデオコンテンツ解析装置。
【請求項５】
前記特定の特徴部を検出する前記イベント検出部は、映像の全フレームが単色に変化したときであり、かつオーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したときであり、かつ前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定していることを特徴とする請求項２記載のビデオコンテンツ解析装置。
【請求項６】
前記映像の第１の種別は、コマーシャルメッセージであることを特徴とする請求項２に記載のビデオコンテンツ解析装置。
【請求項７】
映像・音声データをデコードするデコーディングユニットと、
前記デコーディングユニットによりデコードされた映像の中で、映像の全フレームが単色に変化したとき及び又はオーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したとき及び又は前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定してイベント区間を検出するイベント検出部と、
前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納するイベント時刻情報格納部と、
隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する複数イベント区間特定部と、
グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と有するビデオコンテンツ解析装置。
【請求項８】
前記映像の第１の種別は、コマーシャルメッセージであることを特徴とする請求項７記載のビデオコンテンツ解析装置。
【請求項９】
映像・音声データをデコードするデコーディングユニットと、このデコーディングユニットを制御する制御部とを有する装置のビデオコンテンツ解析方法であって、
前記制御部では、
前記デコーディングユニットによりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出し、
前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納し、
隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定し、
グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別すことを特徴とするビデオコンテンツ解析方法。
【請求項１０】
前記特定の特徴は、映像の全フレームが単色に変化したとき及び又はオーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したとき及び又は前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定してイベント区間を特定することを特徴とする請求項９記載のビデオコンテンツ解析方法。
【請求項１】
映像・音声データをデコードするデコーディングユニットと、
前記デコーディングユニットによりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出するイベント検出部と、
前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納するイベント時刻情報格納部と、
隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する複数イベント区間特定部と、
グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と有するビデオコンテンツ解析装置。
【請求項２】
前記映像種別識別部は、前記複数の前記イベント区間のうち先頭のイベント区間の開始時刻から最後のイベント区間の終了時刻までを前記映像の第１の種別として、それ以外を前記映像の第２の種別として設定することを特徴とする請求項１記載のビデオコンテンツ解析装置。
【請求項３】
前記特定の特徴部を検出する前記イベント検出部は、
映像の全フレームが単色に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したときを前記イベント区間の終了と判定していることを特徴とする請求項２記載のビデオコンテンツ解析装置。
【請求項４】
前記特定の特徴部を検出する前記イベント検出部は、
オーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定していることを特徴とする請求項２記載のビデオコンテンツ解析装置。
【請求項５】
前記特定の特徴部を検出する前記イベント検出部は、映像の全フレームが単色に変化したときであり、かつオーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したときであり、かつ前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定していることを特徴とする請求項２記載のビデオコンテンツ解析装置。
【請求項６】
前記映像の第１の種別は、コマーシャルメッセージであることを特徴とする請求項２に記載のビデオコンテンツ解析装置。
【請求項７】
映像・音声データをデコードするデコーディングユニットと、
前記デコーディングユニットによりデコードされた映像の中で、映像の全フレームが単色に変化したとき及び又はオーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したとき及び又は前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定してイベント区間を検出するイベント検出部と、
前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納するイベント時刻情報格納部と、
隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定する複数イベント区間特定部と、
グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別する映像種別識別部と有するビデオコンテンツ解析装置。
【請求項８】
前記映像の第１の種別は、コマーシャルメッセージであることを特徴とする請求項７記載のビデオコンテンツ解析装置。
【請求項９】
映像・音声データをデコードするデコーディングユニットと、このデコーディングユニットを制御する制御部とを有する装置のビデオコンテンツ解析方法であって、
前記制御部では、
前記デコーディングユニットによりデコードされた映像の中で、特定の特徴が生じている区間をイベント区間として検出し、
前記検出したイベント区間の開始時刻及び終了時刻と、この開始時刻と終了時刻の間の解析用時刻を求めて格納し、
隣り合う前記イベント区間の２つの解析用時刻の間隔が所定の条件を満たす場合に、前記隣り合うイベント区間をグループ内として特定し、
グループ内として特定された複数の前記イベント区間のうち先頭イベント区間から最終イベント区間までを映像の第１の種別、その他を映像の第２の種別として識別すことを特徴とするビデオコンテンツ解析方法。
【請求項１０】
前記特定の特徴は、映像の全フレームが単色に変化したとき及び又はオーディオ信号レベルが所定の閾値以下に変化したときを前記イベント区間の開始、前記映像の全フレームが単色から通常画像状態に変化したとき及び又は前記オーディオ信号レベルが前記所定の閾値以下から以上に変化したときを前記イベント区間の終了と判定してイベント区間を特定することを特徴とする請求項９記載のビデオコンテンツ解析方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２００９−２９０３３０（Ｐ２００９−２９０３３０Ａ）
【公開日】平成２１年１２月１０日（２００９．１２．１０）
【国際特許分類】
【出願番号】特願２００８−１３８３９５（Ｐ２００８−１３８３９５）
【出願日】平成２０年５月２７日（２００８．５．２７）
【特許番号】特許第４３７２２０２号（Ｐ４３７２２０２）
【特許公報発行日】平成２１年１１月２５日（２００９．１１．２５）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２１年１２月１０日（２００９．１２．１０）
【国際特許分類】
【出願日】平成２０年５月２７日（２００８．５．２７）
【特許番号】特許第４３７２２０２号（Ｐ４３７２２０２）
【特許公報発行日】平成２１年１１月２５日（２００９．１１．２５）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]