イベント終了点抽出装置、イベント終了点抽出方法および抽出プログラム
【課題】ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出するイベント終了点抽出装置を提供する。
【解決手段】イベント終了点抽出装置１００は、イベント開始時間が決定されたスポーツ映像を記憶するスポーツ映像記憶部１０１と、スポーツ映像記憶部１０１のスポーツ映像から、イベント開始時間以降のカット点を検出するカット点検出部１０２と、カット点検出部１０２に検出されたカット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部１０４と、カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部１１２と、出現パターン記憶部１１２を参照して、分類された種別の出現パターンに対応するイベント終了点を抽出するイベント終了点抽出部１１１と、イベント終了点抽出部１１１に抽出されたイベント終了点およびイベント開始点を出力する出力部１１３とを含む。
【解決手段】イベント終了点抽出装置１００は、イベント開始時間が決定されたスポーツ映像を記憶するスポーツ映像記憶部１０１と、スポーツ映像記憶部１０１のスポーツ映像から、イベント開始時間以降のカット点を検出するカット点検出部１０２と、カット点検出部１０２に検出されたカット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部１０４と、カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部１１２と、出現パターン記憶部１１２を参照して、分類された種別の出現パターンに対応するイベント終了点を抽出するイベント終了点抽出部１１１と、イベント終了点抽出部１１１に抽出されたイベント終了点およびイベント開始点を出力する出力部１１３とを含む。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、イベント終了点抽出装置に係り、特に視聴対象となるスポーツ映像のイベント終了点を抽出するイベント終了点抽出装置に関するものである。
【背景技術】
【０００２】
近年、野球中継などの映像をダイジェスト視聴するために、その映像に含まれる特定のシーンを抽出することがある。このような状況下、従来の装置においては、映像のカット長の長さから特定のシーンを抽出している。具体的には、従来の装置は、まず、カット長が短い区間をアクションのある映像シーンに分類し、他方、カット長が長い区間を穏やかな映像シーンに分類する。そして、この装置は、その映像の動きの激しさを加味したうえで、上記アクションのある映像シーンなどを正確に抽出する（例えば、特許文献１）。
また、従来の他の装置においては、映像の複数のカットからなるカット長の合計が１５秒または３０秒になるカットを抽出する。そして、この装置は、そのカットの先頭と最後尾に無音声区間があれば、その区間をＣＭのシーンとして抽出する（例えば、特許文献２）。
【０００３】
【特許文献１】特開２００６−１４０８４号公報
【特許文献２】特開平８−３３９３７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１および特許文献２に記載の装置では、いずれも、長短のカット長を含む一連のシーンを１つのまとまりのあるシーンとして抽出することができず、その結果、ダイジェスト視聴の対象となるスポーツ映像に含まれるイベント終了点を正確に抽出することができないという不都合があった。
そこで、本発明は、上述した不都合を解決するためになされたものであり、その目的は、ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出することである。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明は、イベント開始点が決定されたスポーツ映像を記憶するスポーツ映像記憶部と、上記スポーツ映像記憶部の上記スポーツ映像から上記イベント開始点以降のカット点を検出するカット点検出部と、上記カット点検出部に検出された上記カット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部と、上記カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部と、上記出現パターン記憶部を参照して、上記分類された種別の出現パターンに対応するイベント終了点を抽出するイベント終了点抽出部と、上記イベント終了点抽出部に抽出されたイベント終了点を上記イベント開始点に対応付けて出力する出力部と、を含む。
【発明の効果】
【０００６】
本発明によれば、ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出することができる。
【発明を実施するための最良の形態】
【０００７】
以下、本発明の実施の形態について図１ないし図５に基づいて説明する。
図１は、本発明の実施の形態におけるイベント終了点抽出装置の構成例を示すブロック図である。
図１において、イベント終了点抽出装置（以下「抽出装置」という）１００は、スポーツ映像記憶部１０１、カット点検出部１０２、カット点記憶部１０３、カット長分類部１０４および分類基準記憶部１０５を有する。さらに、この抽出装置１００は、テロップ検出部１０６、テロップ記憶部１０７、第１の分類補正部（分類補正部）１０８、第２の分類補正部（分類補正部）１０９および第３の分類補正部（分類補正部）１１０を有する。
また、この抽出装置１００は、イベント終了時間抽出部（イベント終了点抽出部）１１１、出現パターン記憶部１１２および出力部１１３を有する。なお、本実施の形態においては、抽出装置１００として、例えば、サーバ装置を用いた場合を例にして説明するが、パーソナルコンピュータなどのコンピュータを適用してもよい。
【０００８】
スポーツ映像記憶部１０１は、ダイジェスト視聴の対象となるスポーツ映像を記憶する。具体的には、図２に示すように、スポーツ映像記憶部１０１は、時間軸ｔで構成されたフレーム単位のスポーツ映像（動画）を記憶する。そして、このスポーツ映像には、映像シーンに応じて、各種テロップが適宜含まれている。
本実施の形態においては、スポーツ映像は、例えば、プロ野球中継の映像とするので、この映像に含まれるテロップには、ＳＢＯ、進塁状況、対戦スコア、イニング（例えば２回表）などの種類がある。なお、ＳＢＯは、ストライクカウント（Ｓ）、ボールカウント（Ｂ）およびアウトカウント（Ｏ）の略である。
図２では、あるフレームのスポーツ映像ｄ１に、ＳＢＯテロップＴ１、進塁状況テロップＴ２、スコアテロップＴ３およびイニングテロップＴ４が含まれている状況が例示されている。なお、テロップというのは表示の意であり、その形態は問わないものとする。
【０００９】
さらに、図２のスポーツ映像は、イベント開始時間（イベント開始点）ＩＮがあらかじめ決定されている。イベント開始時間ＩＮというのは、ダイジェスト視聴の対象となる映像シーンの開始時間、すなわち当該映像シーンを開始するフレームの位置（時刻）を意味する。例えば、イベント開始時間ＩＮとして、投球開始の映像シーンを表すフレームの位置などが想定される。
なお、イベント開始時間ＩＮとして、例えば、スポーツ映像の先頭フレームからの経過時間（時刻）を用いることとするが、その位置が特定できれば、その形態は問わない。例えば、再生カウンタのカウンタ値をイベント開示時間ＩＮに用いてもよい（後述するカット点、イベント終了時間も同様）。
【００１０】
なお、図２において、第１カット点、第２カット点および第３カット点が、イベント開始時間ＩＮから所定の時間を経過した後に出現するカット点として例示されている。さらに、第１カット長、第２カット長および第３カット長が示されている。第１カット長は、イベント開始時間ＩＮと第１カット長との間の区間を表し、第２カット長は、第１カット点と第２カット点との間の区間を表す。また、第３カット長は、第２カット点と第３カット点との間の区間を表す。
そして、第１カット長が中時間として示され、また、第２カット長および第３カット長がともに短時間として示されているが、これらの点は、後述する。
【００１１】
図１に戻って、カット点検出部１０２は、スポーツ映像記憶部１０１からスポーツ映像を読み出して、イベント開始時間ＩＮ以降のカット点を検出してカット点記憶部１０３に登録する。カット点というのは、映像シーンの変わり目を意味する。例えば、あるカメラからの中継が別のカメラへ切り替えられたときは、別のカメラに中継され最初に撮影された時点のフレームの位置が、カット点に該当する。
なお、本実施の形態においては、上述したカット点の検出方法として、例えば、１台のカメラから撮影された連続するフレーム集合の境界を検出する方法を用いる（特許文献１参照）が、それ以外の公知の検出方法を適用してもよい。
このように構成することにより、カット点検出部１０２は、例えば、図２に示したように、イベント開始時間ＩＮから所定の時間が経過した時点のフレームの位置を順次、第１カット点、第２カット点および第３カット点として検出することが可能となる。
【００１２】
カット長分類部１０４は、分類基準記憶部１０５の分類基準を参照して、カット点記憶部１０３の連続する各カット点間のカット長の種別を分類する。本実施の形態においては、カット長の種別として、カット長の短長に応じて、短い方から「短（第１の種別）」、「中（第２の種別）」および「長（第３の種別）」の３つがある場合について説明するが、これらの種別は２つあるいは４つ以上としてもよい。
【００１３】
ここで、分類基準記憶部１０５の分類基準の一例を図３に示す。
図３の分類基準は、分類およびカット長の項目で構成されている。そして、分類の項目には、「短」、「中」および「長」の３つの種別が指定され、カット長の項目には、該当するカット長の範囲が時間表記で指定されている。
【００１４】
具体的には、「短」の分類には、例えば、０秒以上２．０秒（プラスマイナスα）未満のカット長が指定され、「中」の分類には、２．０秒（プラスマイナスα）以上４．０秒未満のカット長が指定されている。このため、カット長が、２．０秒プラスマイナスαの範囲（あらかじめ指定された時間）にある場合、そのカット長は、「短」および「中」の双方に属することになる。つまり、これは、次のような理由に基づく。
すなわち、カット長が、上記あらかじめ指定された時間を有する場合、そのカット長の映像シーンの内容を問わずに、そのカット長のもつ時間だけで、当該カット長の種別を「短」または「中」の一方に分類することが困難だからである。
そこで、本発明においては、後述する第１の分類補正部１０８、第２の分類補正部１０９または第３の分類補正部１１０において、上述したテロップの表示パターンによりそのカット長の映像シーンを考慮した上で、上述したカット長（「短」および「中」の双方に属すもの）の種別をどちらかの種別に補正する処理を行う。これにより、すべてのカット長の種別を正確に分類することが可能となる。
【００１５】
なお、上述したあらかじめ指定された時間（例えば、２．０秒プラスマイナスα、特にαの値）は、スポーツ映像の種類や映像シーンの具体的な内容などを加味した上で決定することが望ましい。
【００１６】
このように構成することにより、カット長分類部１０４は、図３の分類基準に従って、カット点記憶部１０３の連続する各カット点間のカット長の種別を分類する（図１参照）。そして、この分類の結果、カット長が、あらかじめ設定された時間を有する場合（２つの種別に属する場合）、カット長分類部１０４は、その旨（イベント開始時間ＩＮ以降の各カット点およびカット長の各分類種別を含む）を、後述する第１の分類補正部１０８に通知する。
【００１７】
図１に戻って、テロップ検出部１０６は、スポーツ映像記憶部１０のスポーツ映像から、上述したテロップ（図２参照）を検出してテロップ記憶部１０７に登録する。このとき登録されたテロップは、例えば、スポーツ映像の先頭フレームからの経過時間に対応付けられている。
【００１８】
第１の分類補正部１０８は、カット長分類部１０４に分類されたカット長があらかじめ設定された時間を有する場合、三振の映像シーンを示唆する特定のテロップの表示パターンに基づいて、第１カット長、および、イベント開始時間ＩＮから最初に出現する「中」のカット長の次に出現するカット長の分類種別を補正（例えば、あらかじめ設定された「短」の種別へ補正）してその種別を分類する。ここでいう表示パターンとして、次の２パターンがあらかじめ設定されている。
【００１９】
すなわち、第１の表示パターンは、２ストライクからチェンジへ移行するＳＢＯテロップ（特定のテロップ）Ｔ１、および、イニングが変わるイニングテロップ（特定のテロップ、例えば２回表→２回裏）Ｔ４の組み合わせからなる表示パターン（特定のテロップの表示パターン）である。
第２の表示パターンは、２ストライクからアウトカウントが１つ増えるＳＢＯテロップ（特定のテロップ）Ｔ１、アウトカウントが１つ増えたときに走者がいない進塁状況テロップ（特定のテロップ）Ｔ２、および、得点が変化しないスコアテロップ（特定のテロップ）Ｔ３の組み合わせからなる表示パターン（特定のテロップの表示パターン）である。
なお、上述した特定のテロップは、第１の分類補正部１０８によって、テロップ記憶部１０７から読み出される。
【００２０】
第２の分類補正部１０９は、打者交代の映像シーンを示唆する特定のテロップの表示パターンに基づいて、第１カット長のみの分類種別を補正（例えば、あらかじめ設定された「短」の種別へ補正）してその種別を分類する。ここでいう表示パターンは、次のとおりである。すなわち、ストライクカウントまたはアウトカウントが０以外になっているＳＢＯテロップ（特定のテロップ）Ｔ１の表示パターンである。なお、ＳＢＯテロップＴ１は、第２の分類補正部１０９によって、テロップ記憶部１０７から読み出される。
【００２１】
第３の分類補正部１１０は、得点追加の映像シーンを示唆する特定のテロップの表示パターンに基づいて、第３カット長（ランナーホームインの映像シーン）の分類種別を補正（例えば、あらかじめ設定された「短」の種別へ補正）してその種別を分類する。ここでいう表示パターンは、次のとおりである。すなわち、得点が入ったことを表すスコアテロップ（特定のテロップ）Ｔ３の表示パターンである。なお、ＳＢＯテロップＴ１は、第３の分類補正部１１０によって、テロップ記憶部１０７から読み出される。
【００２２】
イベント終了時間抽出部１１１は、出現パターン記憶部１１２の出現パターンを参照して、カット長分類部１０４、第１の分類補正部１０８、第２の分類補正部１０９または第３の分類補正部１１０（これら各部の組み合わせを含む）に分類された種別の出現パターンに対応するイベント終了時間（イベント終了点）を抽出する。
【００２３】
ここで、出現パターン記憶部１１２の出現パターンを図４に示す。
図４の２つの出現パターンは、出現パターン記憶部１１２に記憶されている。図４（ａ）に示す出現パターンとして、イベント開始時間ＩＮ（不図示）から「長」の種別が最初に出現するパターンが示されている。そして、その「長」の種別に属するカット長の終了点がイベント終了時間ＯＵＴとして対応付けられている。したがって、イベント終了時間抽出部１１１は、上記分類された種別の出現パターンが、図４（ａ）の出現パターンになる場合、「長」の種別に属するカット長の終了点をイベント終了時間ＯＵＴとして抽出する。
また、図４（ｂ）に示す出現パターンとして、イベント開始時間ＩＮ（不図示）から「長」の種別が最初に出現するまでの間に、「中」の種別が連続して出現するパターンが示されている。そして、その最初の「中」の種別に属するカット長の終了点がイベント終了時間ＯＵＴとして対応付けられている。したがって、イベント終了時間抽出部１１１は、上記分類された種別の出現パターンが、図４（ｂ）の出現パターンになる場合、最初の「中」の種別に属するカット長の終了点をイベント終了時間ＯＵＴとして抽出する。
【００２４】
図１に戻って、出力部１１３は、イベント終了時間抽出部１１１に抽出されたイベント終了時間ＯＵＴおよびそのイベント開始時間ＩＮを外部装置（例えばコンピュータ）に出力する。
【００２５】
なお、本実施の形態において、上述した各記憶部１０１、１０３、１０５、１０７、１１２としては、メモリやハードディスクなどの記憶装置が該当する。また、上述した各部１０２、１０６、１０８〜１１１、１１３としては、ＣＰＵなどの処理装置が該当する。
そして、上述した各部１０２、１０６、１０８〜１１１、１１３は、上述した記憶装置に格納された抽出プログラムに従って動作する。この抽出プログラムは、ＣＤ−ＲＯＭなどのコンピュータ読み取り可能な媒体から読み出されたものであってもよい。
【００２６】
次に、抽出装置１００の処理手順について図５に基づいて説明する。
図５は、抽出装置１００の処理手順の一例を示すフローチャートである。ここでは、ダイジェスト視聴の対象となるスポーツ映像（図２参照）がスポーツ映像記憶部１０１に記憶されているものとして説明する。
まず、カット点抽出部１０２は、スポーツ映像記憶部１０１からスポーツ映像（イベント開始時間ＩＮを含む）を読み出して、イベント開始時間ＩＮ以降のカット点を検出する（ステップＳ１０１）。このとき検出されたカット点は、カット点検出部１０２によってカット点記憶部１０３に記憶される。
【００２７】
続いて、テロップ検出部１０６（抽出装置１００）は、スポーツ映像記憶部１０１からスポーツ映像を読み出し、そのスポーツ映像から、各フレームのスポーツ映像に含まれているテロップをすべて検出する（ステップＳ１０２）。このとき検出されたテロップは、テロップ検出部１０６によってテロップ記憶部１０７に記憶される。
【００２８】
次に、カット長分類部１０４は、カット点検出部１０２に検出されたイベント開始時間ＩＮ以降のカット点をカット点記憶部１０３から取得し、分類基準記憶部１０５の分類基準（図３参照）に基づいて、連続するカット点間のカット長を分類する（ステップＳ１０３）。具体的には、カット長分類部１０４は、分類基準記憶部１０５の分類基準（図３参照）に基づいて、連続するカット点間のカット長の時間に対応する種別（「短」、「中」、「長」）を分類する。
【００２９】
次に、第１の分類補正部１０８（抽出装置１００）は、カット長分類部１０４に分類されたカット長があらかじめ指定された時間（例えば、図３の２．０プラスマイナスα）を有する場合、当該カット長、すなわち、第１カット長、および、イベント開始時間ＩＮから最初に出現する「中」のカット長の次に出現するカット長に三振の可能性があるかどうかを判断する（ステップＳ１０４）。
具体的には、第１の分類補正部１０８は、三振の映像シーンを示唆する特定のテロップの表示パターン（前述した第１〜第２の表示パターンのいずれか）が当該カット長にあるかどうかを判断する。なお、ステップＳ１０４において、あらかじめ指定された時間をもつカット長がなければ、ステップＳ１０３からステップＳ１１０へスキップするようにしてもよい。
【００３０】
そして、上記判断の結果、三振の映像シーンを示唆する特定のテロップの表示パターンがなく、三振の可能性がないと判断された場合（ステップＳ１０４のＮｏ）、第１の分類補正部１０８は、判断対象の当該カット長の種別を「短」に補正して分類し（ステップＳ１０５）、ステップＳ１０６に進む。これにより、あらかじめ指定された時間をもつカット長（例えば、第１カット点と第２カット点との間のカット長）の種別が、「短」に補正されることになる。
【００３１】
他方、三振の可能性があると判断された場合（ステップＳ１０４のＹｅｓ）、ステップＳ１０６に進む。なお、ステップＳ１０６に進む場合、第１の分類補正部１０８は、例えば、イベント開始時間ＩＮ以降の各カット点およびカット長の各分類（種別補正済みのものを含む）を、第２の分類補正部１０９に渡す。
【００３２】
ステップＳ１０６において、第２の分類補正部１０９（抽出装置１００）は、カット長分類部１０４に分類されたカット長があらかじめ指定された時間（例えば、２．０プラスマイナスα）を有する場合、当該カット長、すなわち第１カット長に打者の交代があるかどうかを判断する。
具体的には、第２の分類補正部１０９は、打者交代の映像シーンを示唆する特定のテロップの表示パターン（ストライクカウントまたはアウトカウントが０になっているＳＢＯテロップＴ１の表示パターン）が当該カット長にあるかどうかを判断する。
【００３３】
そして、上記判断の結果、打者交代の映像シーンを示唆する特定のテロップの表示パターンがなく、打者の交代がないと判断された場合（ステップＳ１０６のＮｏ）、第２の分類補正部１０９は、判断対象の当該カット長の種別を「短」に補正して分類し（ステップＳ１０７）、ステップＳ１０８に進む。これにより、あらかじめ指定された時間をもつカット長（例えば、第１カット点と第２カット点との間のカット長）の種別が、「短」に補正されることになる。
【００３４】
他方、打者の交代があると判断された場合（ステップＳ１０６のＹｅｓ）、ステップＳ１０８に進む。なお、ステップＳ１０８に進む場合、第２の分類補正部１０９は、例えば、イベント開始時間ＩＮ以降の各カット点およびカット長の各分類（ステップＳ１０５、Ｓ１０７により種別補正済みのものを含む）を、第３の分類補正部１１０に渡す。
【００３５】
ステップＳ１０８において、第３の分類補正部１１０（抽出装置１００）は、カット長分類部１０４に分類されたカット長があらかじめ指定された時間（例えば、２．０プラスマイナスα）を有する場合、当該カット長、すなわち第３カット長に得点の追加があるかどうかを判断する。
具体的には、第３の分類補正部１１０は、得点追加の映像シーンを示唆する特定のテロップの表示パターン（得点が入ったことを表すスコアテロップＴ３の表示パターン）が当該カット長にあるかどうかを判断する。
【００３６】
そして、上記判断の結果、得点追加の映像シーンを示唆する特定のテロップの表示パターンがなく、得点の追加がないと判断された場合（ステップＳ１０８のＮｏ）、第３の分類補正部１１０は、判断対象の当該カット長の種別を「短」に補正して分類し（ステップＳ１０９）、ステップＳ１１０に進む。これにより、あらかじめ指定された時間をもつカット長（例えば、第３カット点と第４カット点との間のカット長）の種別が、「短」に補正されることになる。
【００３７】
他方、得点の追加があると判断された場合（ステップＳ１０８のＹｅｓ）、ステップＳ１１０に進む。なお、ステップＳ１１０に進む場合、第３の分類補正部１１０は、例えば、イベント開始時間ＩＮ以降の各カット点およびカット長の各分類（ステップＳ１０５、Ｓ１０７、Ｓ１０９により種別補正済みのものを含む）を、イベント終了時間抽出部１１１に渡す。
【００３８】
ステップＳ１１０において、イベント終了時間抽出部１１１は、出現パターン記憶部１１２の出現パターン（図４）を参照して、ステップＳ１０３（ステップＳ１０５、Ｓ１０７、Ｓ１０９を含む）で分類された種別の出現パターンに対応するイベント終了時間ＯＵＴを抽出する。
例えば、抽出対象となる上記分類された種別の出現パターンが、図４（ａ）の出現パターンの場合、イベント終了時間抽出部１１１は、「長」の種別に属するカット長の終了点をイベント終了時間ＯＵＴとして抽出する。これにより、「短」や「中」「長」の種別を有するカット長から構成される一連のシーンのうちのある種別（例えば「長」）に属するカット長の終了点が、イベント終了時間ＯＵＴとして抽出される。
【００３９】
その後、出力部１１３（抽出装置１００）が、イベント終了時間抽出部１１１に抽出されたイベント終了時間ＯＵＴをそのイベント開始時間ＩＮとともに、外部装置（例えばコンピュータ）へ出力する。これにより、ダイジェスト視聴の対象となるスポーツ映像のイベント終了時間ＯＵＴが外部へ出力されることとなる。
【００４０】
以上のように、本実施の形態によると、抽出装置１００は、スポーツ映像記憶部１０１のスポーツ映像から、イベント開始時間ＩＮ以降のカット点を検出するカット点検出部１０２と、カット点検出部１０２に検出されたカット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部１０４と、出現パターン記憶部１１２を参照して、分類された種別の出現パターンに対応するイベント終了時間ＯＵＴを抽出するイベント終了時間抽出部１１１と、イベント終了時間抽出部１１１に抽出されたイベント終了時間およびそのイベント開始時間ＩＮを出力する出力部１１３とを含む。これにより、出現パターン記憶部１１２の出現パターンを一連の映像シーンとした上で、その映像シーンの中から、ある時間を有するカット長の終了点（あるいは開始点）がイベント終了時間ＯＵＴとして抽出される。したがって、ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出することができる。
【００４１】
なお、本発明は、上述した実施の形態に限られず、本発明の趣旨を逸脱しない限り、そのシステム構成（データ構成を含む）および処理手順を変更してもよい。例えば、図５においては、ステップＳ１０４、Ｓ１０６およびＳ１０８における各判断処理が行われる場合について説明したが、ステップＳ１０３における分類処理において、分類されたカット長があらかじめ指定された時間（例えば、２．０プラスマイナスα）を有しない場合、ステップＳ１０３からステップＳ１１０へスキップしてもよい。
また、図５においては、ステップＳ１０４、Ｓ１０６、Ｓ１０８の順にステップ処理を行う場合について説明したが、これらの順序は、逆にしてもよいし、入れ替えて変更してもよい。
さらに、図５のステップＳ１０４〜Ｓ１０９においては、第１の分類補正部１０８、第２の分類補正部１０９および第３の分類補正部１１０が処理を行う場合について説明したが、例えば、そのうちの任意の１つの分類補正部が処理を行うようにしてもよいし、あるいは、任意の２つの分類補正部を組み合わせて処理を行うようにしてもよい。
【００４２】
また、抽出装置１００は、１台のコンピュータの場合について説明したが、複数台のコンピュータを用いて分散処理するように構成してもよい。さらに、抽出装置１００は、ＬＳＩ(Large Scale Integration)で実現するようにしてもよいし、１チップ化してもよい。
【００４３】
さらに、スポーツ映像が、野球中継の映像の場合で説明したが、例えば、カット長の種別を決めることが可能なテロップを含むスポーツ映像であれば、アメリカンフットボールやバスケットなどのスポーツ映像に適用してもよい。
【図面の簡単な説明】
【００４４】
【図１】本発明の実施の形態におけるイベント終了点抽出装置の構成例を示すブロック図である。
【図２】図１のスポーツ映像記憶部のスポーツ映像の一例を示す図である。
【図３】図１の分類基準記憶部の分類基準の一例を示す図である。
【図４】図１の出現パターン記憶部の出現パターンの一例を示す図である。
【図５】図１のイベント終了点抽出装置の処理手順の一例を示す図である。
【符号の説明】
【００４５】
１００ イベント終了点抽出装置
１０１ スポーツ映像記憶部
１０２ カット点検出部
１０３ カット点記憶部
１０４ カット長分類部
１０５ 分類基準記憶部
１０６ テロップ検出部
１０７ テロップ記憶部
１０８ 第１の分類補正部
１０９ 第２の分類補正部
１１０ 第３の分類補正部
１１１ イベント終了時間抽出部
１１２ 出現パターン記憶部
１１３ 出力部
【技術分野】
【０００１】
本発明は、イベント終了点抽出装置に係り、特に視聴対象となるスポーツ映像のイベント終了点を抽出するイベント終了点抽出装置に関するものである。
【背景技術】
【０００２】
近年、野球中継などの映像をダイジェスト視聴するために、その映像に含まれる特定のシーンを抽出することがある。このような状況下、従来の装置においては、映像のカット長の長さから特定のシーンを抽出している。具体的には、従来の装置は、まず、カット長が短い区間をアクションのある映像シーンに分類し、他方、カット長が長い区間を穏やかな映像シーンに分類する。そして、この装置は、その映像の動きの激しさを加味したうえで、上記アクションのある映像シーンなどを正確に抽出する（例えば、特許文献１）。
また、従来の他の装置においては、映像の複数のカットからなるカット長の合計が１５秒または３０秒になるカットを抽出する。そして、この装置は、そのカットの先頭と最後尾に無音声区間があれば、その区間をＣＭのシーンとして抽出する（例えば、特許文献２）。
【０００３】
【特許文献１】特開２００６−１４０８４号公報
【特許文献２】特開平８−３３９３７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１および特許文献２に記載の装置では、いずれも、長短のカット長を含む一連のシーンを１つのまとまりのあるシーンとして抽出することができず、その結果、ダイジェスト視聴の対象となるスポーツ映像に含まれるイベント終了点を正確に抽出することができないという不都合があった。
そこで、本発明は、上述した不都合を解決するためになされたものであり、その目的は、ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出することである。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明は、イベント開始点が決定されたスポーツ映像を記憶するスポーツ映像記憶部と、上記スポーツ映像記憶部の上記スポーツ映像から上記イベント開始点以降のカット点を検出するカット点検出部と、上記カット点検出部に検出された上記カット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部と、上記カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部と、上記出現パターン記憶部を参照して、上記分類された種別の出現パターンに対応するイベント終了点を抽出するイベント終了点抽出部と、上記イベント終了点抽出部に抽出されたイベント終了点を上記イベント開始点に対応付けて出力する出力部と、を含む。
【発明の効果】
【０００６】
本発明によれば、ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出することができる。
【発明を実施するための最良の形態】
【０００７】
以下、本発明の実施の形態について図１ないし図５に基づいて説明する。
図１は、本発明の実施の形態におけるイベント終了点抽出装置の構成例を示すブロック図である。
図１において、イベント終了点抽出装置（以下「抽出装置」という）１００は、スポーツ映像記憶部１０１、カット点検出部１０２、カット点記憶部１０３、カット長分類部１０４および分類基準記憶部１０５を有する。さらに、この抽出装置１００は、テロップ検出部１０６、テロップ記憶部１０７、第１の分類補正部（分類補正部）１０８、第２の分類補正部（分類補正部）１０９および第３の分類補正部（分類補正部）１１０を有する。
また、この抽出装置１００は、イベント終了時間抽出部（イベント終了点抽出部）１１１、出現パターン記憶部１１２および出力部１１３を有する。なお、本実施の形態においては、抽出装置１００として、例えば、サーバ装置を用いた場合を例にして説明するが、パーソナルコンピュータなどのコンピュータを適用してもよい。
【０００８】
スポーツ映像記憶部１０１は、ダイジェスト視聴の対象となるスポーツ映像を記憶する。具体的には、図２に示すように、スポーツ映像記憶部１０１は、時間軸ｔで構成されたフレーム単位のスポーツ映像（動画）を記憶する。そして、このスポーツ映像には、映像シーンに応じて、各種テロップが適宜含まれている。
本実施の形態においては、スポーツ映像は、例えば、プロ野球中継の映像とするので、この映像に含まれるテロップには、ＳＢＯ、進塁状況、対戦スコア、イニング（例えば２回表）などの種類がある。なお、ＳＢＯは、ストライクカウント（Ｓ）、ボールカウント（Ｂ）およびアウトカウント（Ｏ）の略である。
図２では、あるフレームのスポーツ映像ｄ１に、ＳＢＯテロップＴ１、進塁状況テロップＴ２、スコアテロップＴ３およびイニングテロップＴ４が含まれている状況が例示されている。なお、テロップというのは表示の意であり、その形態は問わないものとする。
【０００９】
さらに、図２のスポーツ映像は、イベント開始時間（イベント開始点）ＩＮがあらかじめ決定されている。イベント開始時間ＩＮというのは、ダイジェスト視聴の対象となる映像シーンの開始時間、すなわち当該映像シーンを開始するフレームの位置（時刻）を意味する。例えば、イベント開始時間ＩＮとして、投球開始の映像シーンを表すフレームの位置などが想定される。
なお、イベント開始時間ＩＮとして、例えば、スポーツ映像の先頭フレームからの経過時間（時刻）を用いることとするが、その位置が特定できれば、その形態は問わない。例えば、再生カウンタのカウンタ値をイベント開示時間ＩＮに用いてもよい（後述するカット点、イベント終了時間も同様）。
【００１０】
なお、図２において、第１カット点、第２カット点および第３カット点が、イベント開始時間ＩＮから所定の時間を経過した後に出現するカット点として例示されている。さらに、第１カット長、第２カット長および第３カット長が示されている。第１カット長は、イベント開始時間ＩＮと第１カット長との間の区間を表し、第２カット長は、第１カット点と第２カット点との間の区間を表す。また、第３カット長は、第２カット点と第３カット点との間の区間を表す。
そして、第１カット長が中時間として示され、また、第２カット長および第３カット長がともに短時間として示されているが、これらの点は、後述する。
【００１１】
図１に戻って、カット点検出部１０２は、スポーツ映像記憶部１０１からスポーツ映像を読み出して、イベント開始時間ＩＮ以降のカット点を検出してカット点記憶部１０３に登録する。カット点というのは、映像シーンの変わり目を意味する。例えば、あるカメラからの中継が別のカメラへ切り替えられたときは、別のカメラに中継され最初に撮影された時点のフレームの位置が、カット点に該当する。
なお、本実施の形態においては、上述したカット点の検出方法として、例えば、１台のカメラから撮影された連続するフレーム集合の境界を検出する方法を用いる（特許文献１参照）が、それ以外の公知の検出方法を適用してもよい。
このように構成することにより、カット点検出部１０２は、例えば、図２に示したように、イベント開始時間ＩＮから所定の時間が経過した時点のフレームの位置を順次、第１カット点、第２カット点および第３カット点として検出することが可能となる。
【００１２】
カット長分類部１０４は、分類基準記憶部１０５の分類基準を参照して、カット点記憶部１０３の連続する各カット点間のカット長の種別を分類する。本実施の形態においては、カット長の種別として、カット長の短長に応じて、短い方から「短（第１の種別）」、「中（第２の種別）」および「長（第３の種別）」の３つがある場合について説明するが、これらの種別は２つあるいは４つ以上としてもよい。
【００１３】
ここで、分類基準記憶部１０５の分類基準の一例を図３に示す。
図３の分類基準は、分類およびカット長の項目で構成されている。そして、分類の項目には、「短」、「中」および「長」の３つの種別が指定され、カット長の項目には、該当するカット長の範囲が時間表記で指定されている。
【００１４】
具体的には、「短」の分類には、例えば、０秒以上２．０秒（プラスマイナスα）未満のカット長が指定され、「中」の分類には、２．０秒（プラスマイナスα）以上４．０秒未満のカット長が指定されている。このため、カット長が、２．０秒プラスマイナスαの範囲（あらかじめ指定された時間）にある場合、そのカット長は、「短」および「中」の双方に属することになる。つまり、これは、次のような理由に基づく。
すなわち、カット長が、上記あらかじめ指定された時間を有する場合、そのカット長の映像シーンの内容を問わずに、そのカット長のもつ時間だけで、当該カット長の種別を「短」または「中」の一方に分類することが困難だからである。
そこで、本発明においては、後述する第１の分類補正部１０８、第２の分類補正部１０９または第３の分類補正部１１０において、上述したテロップの表示パターンによりそのカット長の映像シーンを考慮した上で、上述したカット長（「短」および「中」の双方に属すもの）の種別をどちらかの種別に補正する処理を行う。これにより、すべてのカット長の種別を正確に分類することが可能となる。
【００１５】
なお、上述したあらかじめ指定された時間（例えば、２．０秒プラスマイナスα、特にαの値）は、スポーツ映像の種類や映像シーンの具体的な内容などを加味した上で決定することが望ましい。
【００１６】
このように構成することにより、カット長分類部１０４は、図３の分類基準に従って、カット点記憶部１０３の連続する各カット点間のカット長の種別を分類する（図１参照）。そして、この分類の結果、カット長が、あらかじめ設定された時間を有する場合（２つの種別に属する場合）、カット長分類部１０４は、その旨（イベント開始時間ＩＮ以降の各カット点およびカット長の各分類種別を含む）を、後述する第１の分類補正部１０８に通知する。
【００１７】
図１に戻って、テロップ検出部１０６は、スポーツ映像記憶部１０のスポーツ映像から、上述したテロップ（図２参照）を検出してテロップ記憶部１０７に登録する。このとき登録されたテロップは、例えば、スポーツ映像の先頭フレームからの経過時間に対応付けられている。
【００１８】
第１の分類補正部１０８は、カット長分類部１０４に分類されたカット長があらかじめ設定された時間を有する場合、三振の映像シーンを示唆する特定のテロップの表示パターンに基づいて、第１カット長、および、イベント開始時間ＩＮから最初に出現する「中」のカット長の次に出現するカット長の分類種別を補正（例えば、あらかじめ設定された「短」の種別へ補正）してその種別を分類する。ここでいう表示パターンとして、次の２パターンがあらかじめ設定されている。
【００１９】
すなわち、第１の表示パターンは、２ストライクからチェンジへ移行するＳＢＯテロップ（特定のテロップ）Ｔ１、および、イニングが変わるイニングテロップ（特定のテロップ、例えば２回表→２回裏）Ｔ４の組み合わせからなる表示パターン（特定のテロップの表示パターン）である。
第２の表示パターンは、２ストライクからアウトカウントが１つ増えるＳＢＯテロップ（特定のテロップ）Ｔ１、アウトカウントが１つ増えたときに走者がいない進塁状況テロップ（特定のテロップ）Ｔ２、および、得点が変化しないスコアテロップ（特定のテロップ）Ｔ３の組み合わせからなる表示パターン（特定のテロップの表示パターン）である。
なお、上述した特定のテロップは、第１の分類補正部１０８によって、テロップ記憶部１０７から読み出される。
【００２０】
第２の分類補正部１０９は、打者交代の映像シーンを示唆する特定のテロップの表示パターンに基づいて、第１カット長のみの分類種別を補正（例えば、あらかじめ設定された「短」の種別へ補正）してその種別を分類する。ここでいう表示パターンは、次のとおりである。すなわち、ストライクカウントまたはアウトカウントが０以外になっているＳＢＯテロップ（特定のテロップ）Ｔ１の表示パターンである。なお、ＳＢＯテロップＴ１は、第２の分類補正部１０９によって、テロップ記憶部１０７から読み出される。
【００２１】
第３の分類補正部１１０は、得点追加の映像シーンを示唆する特定のテロップの表示パターンに基づいて、第３カット長（ランナーホームインの映像シーン）の分類種別を補正（例えば、あらかじめ設定された「短」の種別へ補正）してその種別を分類する。ここでいう表示パターンは、次のとおりである。すなわち、得点が入ったことを表すスコアテロップ（特定のテロップ）Ｔ３の表示パターンである。なお、ＳＢＯテロップＴ１は、第３の分類補正部１１０によって、テロップ記憶部１０７から読み出される。
【００２２】
イベント終了時間抽出部１１１は、出現パターン記憶部１１２の出現パターンを参照して、カット長分類部１０４、第１の分類補正部１０８、第２の分類補正部１０９または第３の分類補正部１１０（これら各部の組み合わせを含む）に分類された種別の出現パターンに対応するイベント終了時間（イベント終了点）を抽出する。
【００２３】
ここで、出現パターン記憶部１１２の出現パターンを図４に示す。
図４の２つの出現パターンは、出現パターン記憶部１１２に記憶されている。図４（ａ）に示す出現パターンとして、イベント開始時間ＩＮ（不図示）から「長」の種別が最初に出現するパターンが示されている。そして、その「長」の種別に属するカット長の終了点がイベント終了時間ＯＵＴとして対応付けられている。したがって、イベント終了時間抽出部１１１は、上記分類された種別の出現パターンが、図４（ａ）の出現パターンになる場合、「長」の種別に属するカット長の終了点をイベント終了時間ＯＵＴとして抽出する。
また、図４（ｂ）に示す出現パターンとして、イベント開始時間ＩＮ（不図示）から「長」の種別が最初に出現するまでの間に、「中」の種別が連続して出現するパターンが示されている。そして、その最初の「中」の種別に属するカット長の終了点がイベント終了時間ＯＵＴとして対応付けられている。したがって、イベント終了時間抽出部１１１は、上記分類された種別の出現パターンが、図４（ｂ）の出現パターンになる場合、最初の「中」の種別に属するカット長の終了点をイベント終了時間ＯＵＴとして抽出する。
【００２４】
図１に戻って、出力部１１３は、イベント終了時間抽出部１１１に抽出されたイベント終了時間ＯＵＴおよびそのイベント開始時間ＩＮを外部装置（例えばコンピュータ）に出力する。
【００２５】
なお、本実施の形態において、上述した各記憶部１０１、１０３、１０５、１０７、１１２としては、メモリやハードディスクなどの記憶装置が該当する。また、上述した各部１０２、１０６、１０８〜１１１、１１３としては、ＣＰＵなどの処理装置が該当する。
そして、上述した各部１０２、１０６、１０８〜１１１、１１３は、上述した記憶装置に格納された抽出プログラムに従って動作する。この抽出プログラムは、ＣＤ−ＲＯＭなどのコンピュータ読み取り可能な媒体から読み出されたものであってもよい。
【００２６】
次に、抽出装置１００の処理手順について図５に基づいて説明する。
図５は、抽出装置１００の処理手順の一例を示すフローチャートである。ここでは、ダイジェスト視聴の対象となるスポーツ映像（図２参照）がスポーツ映像記憶部１０１に記憶されているものとして説明する。
まず、カット点抽出部１０２は、スポーツ映像記憶部１０１からスポーツ映像（イベント開始時間ＩＮを含む）を読み出して、イベント開始時間ＩＮ以降のカット点を検出する（ステップＳ１０１）。このとき検出されたカット点は、カット点検出部１０２によってカット点記憶部１０３に記憶される。
【００２７】
続いて、テロップ検出部１０６（抽出装置１００）は、スポーツ映像記憶部１０１からスポーツ映像を読み出し、そのスポーツ映像から、各フレームのスポーツ映像に含まれているテロップをすべて検出する（ステップＳ１０２）。このとき検出されたテロップは、テロップ検出部１０６によってテロップ記憶部１０７に記憶される。
【００２８】
次に、カット長分類部１０４は、カット点検出部１０２に検出されたイベント開始時間ＩＮ以降のカット点をカット点記憶部１０３から取得し、分類基準記憶部１０５の分類基準（図３参照）に基づいて、連続するカット点間のカット長を分類する（ステップＳ１０３）。具体的には、カット長分類部１０４は、分類基準記憶部１０５の分類基準（図３参照）に基づいて、連続するカット点間のカット長の時間に対応する種別（「短」、「中」、「長」）を分類する。
【００２９】
次に、第１の分類補正部１０８（抽出装置１００）は、カット長分類部１０４に分類されたカット長があらかじめ指定された時間（例えば、図３の２．０プラスマイナスα）を有する場合、当該カット長、すなわち、第１カット長、および、イベント開始時間ＩＮから最初に出現する「中」のカット長の次に出現するカット長に三振の可能性があるかどうかを判断する（ステップＳ１０４）。
具体的には、第１の分類補正部１０８は、三振の映像シーンを示唆する特定のテロップの表示パターン（前述した第１〜第２の表示パターンのいずれか）が当該カット長にあるかどうかを判断する。なお、ステップＳ１０４において、あらかじめ指定された時間をもつカット長がなければ、ステップＳ１０３からステップＳ１１０へスキップするようにしてもよい。
【００３０】
そして、上記判断の結果、三振の映像シーンを示唆する特定のテロップの表示パターンがなく、三振の可能性がないと判断された場合（ステップＳ１０４のＮｏ）、第１の分類補正部１０８は、判断対象の当該カット長の種別を「短」に補正して分類し（ステップＳ１０５）、ステップＳ１０６に進む。これにより、あらかじめ指定された時間をもつカット長（例えば、第１カット点と第２カット点との間のカット長）の種別が、「短」に補正されることになる。
【００３１】
他方、三振の可能性があると判断された場合（ステップＳ１０４のＹｅｓ）、ステップＳ１０６に進む。なお、ステップＳ１０６に進む場合、第１の分類補正部１０８は、例えば、イベント開始時間ＩＮ以降の各カット点およびカット長の各分類（種別補正済みのものを含む）を、第２の分類補正部１０９に渡す。
【００３２】
ステップＳ１０６において、第２の分類補正部１０９（抽出装置１００）は、カット長分類部１０４に分類されたカット長があらかじめ指定された時間（例えば、２．０プラスマイナスα）を有する場合、当該カット長、すなわち第１カット長に打者の交代があるかどうかを判断する。
具体的には、第２の分類補正部１０９は、打者交代の映像シーンを示唆する特定のテロップの表示パターン（ストライクカウントまたはアウトカウントが０になっているＳＢＯテロップＴ１の表示パターン）が当該カット長にあるかどうかを判断する。
【００３３】
そして、上記判断の結果、打者交代の映像シーンを示唆する特定のテロップの表示パターンがなく、打者の交代がないと判断された場合（ステップＳ１０６のＮｏ）、第２の分類補正部１０９は、判断対象の当該カット長の種別を「短」に補正して分類し（ステップＳ１０７）、ステップＳ１０８に進む。これにより、あらかじめ指定された時間をもつカット長（例えば、第１カット点と第２カット点との間のカット長）の種別が、「短」に補正されることになる。
【００３４】
他方、打者の交代があると判断された場合（ステップＳ１０６のＹｅｓ）、ステップＳ１０８に進む。なお、ステップＳ１０８に進む場合、第２の分類補正部１０９は、例えば、イベント開始時間ＩＮ以降の各カット点およびカット長の各分類（ステップＳ１０５、Ｓ１０７により種別補正済みのものを含む）を、第３の分類補正部１１０に渡す。
【００３５】
ステップＳ１０８において、第３の分類補正部１１０（抽出装置１００）は、カット長分類部１０４に分類されたカット長があらかじめ指定された時間（例えば、２．０プラスマイナスα）を有する場合、当該カット長、すなわち第３カット長に得点の追加があるかどうかを判断する。
具体的には、第３の分類補正部１１０は、得点追加の映像シーンを示唆する特定のテロップの表示パターン（得点が入ったことを表すスコアテロップＴ３の表示パターン）が当該カット長にあるかどうかを判断する。
【００３６】
そして、上記判断の結果、得点追加の映像シーンを示唆する特定のテロップの表示パターンがなく、得点の追加がないと判断された場合（ステップＳ１０８のＮｏ）、第３の分類補正部１１０は、判断対象の当該カット長の種別を「短」に補正して分類し（ステップＳ１０９）、ステップＳ１１０に進む。これにより、あらかじめ指定された時間をもつカット長（例えば、第３カット点と第４カット点との間のカット長）の種別が、「短」に補正されることになる。
【００３７】
他方、得点の追加があると判断された場合（ステップＳ１０８のＹｅｓ）、ステップＳ１１０に進む。なお、ステップＳ１１０に進む場合、第３の分類補正部１１０は、例えば、イベント開始時間ＩＮ以降の各カット点およびカット長の各分類（ステップＳ１０５、Ｓ１０７、Ｓ１０９により種別補正済みのものを含む）を、イベント終了時間抽出部１１１に渡す。
【００３８】
ステップＳ１１０において、イベント終了時間抽出部１１１は、出現パターン記憶部１１２の出現パターン（図４）を参照して、ステップＳ１０３（ステップＳ１０５、Ｓ１０７、Ｓ１０９を含む）で分類された種別の出現パターンに対応するイベント終了時間ＯＵＴを抽出する。
例えば、抽出対象となる上記分類された種別の出現パターンが、図４（ａ）の出現パターンの場合、イベント終了時間抽出部１１１は、「長」の種別に属するカット長の終了点をイベント終了時間ＯＵＴとして抽出する。これにより、「短」や「中」「長」の種別を有するカット長から構成される一連のシーンのうちのある種別（例えば「長」）に属するカット長の終了点が、イベント終了時間ＯＵＴとして抽出される。
【００３９】
その後、出力部１１３（抽出装置１００）が、イベント終了時間抽出部１１１に抽出されたイベント終了時間ＯＵＴをそのイベント開始時間ＩＮとともに、外部装置（例えばコンピュータ）へ出力する。これにより、ダイジェスト視聴の対象となるスポーツ映像のイベント終了時間ＯＵＴが外部へ出力されることとなる。
【００４０】
以上のように、本実施の形態によると、抽出装置１００は、スポーツ映像記憶部１０１のスポーツ映像から、イベント開始時間ＩＮ以降のカット点を検出するカット点検出部１０２と、カット点検出部１０２に検出されたカット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部１０４と、出現パターン記憶部１１２を参照して、分類された種別の出現パターンに対応するイベント終了時間ＯＵＴを抽出するイベント終了時間抽出部１１１と、イベント終了時間抽出部１１１に抽出されたイベント終了時間およびそのイベント開始時間ＩＮを出力する出力部１１３とを含む。これにより、出現パターン記憶部１１２の出現パターンを一連の映像シーンとした上で、その映像シーンの中から、ある時間を有するカット長の終了点（あるいは開始点）がイベント終了時間ＯＵＴとして抽出される。したがって、ダイジェスト視聴の対象となるスポーツ映像のイベント終了点を正確に抽出することができる。
【００４１】
なお、本発明は、上述した実施の形態に限られず、本発明の趣旨を逸脱しない限り、そのシステム構成（データ構成を含む）および処理手順を変更してもよい。例えば、図５においては、ステップＳ１０４、Ｓ１０６およびＳ１０８における各判断処理が行われる場合について説明したが、ステップＳ１０３における分類処理において、分類されたカット長があらかじめ指定された時間（例えば、２．０プラスマイナスα）を有しない場合、ステップＳ１０３からステップＳ１１０へスキップしてもよい。
また、図５においては、ステップＳ１０４、Ｓ１０６、Ｓ１０８の順にステップ処理を行う場合について説明したが、これらの順序は、逆にしてもよいし、入れ替えて変更してもよい。
さらに、図５のステップＳ１０４〜Ｓ１０９においては、第１の分類補正部１０８、第２の分類補正部１０９および第３の分類補正部１１０が処理を行う場合について説明したが、例えば、そのうちの任意の１つの分類補正部が処理を行うようにしてもよいし、あるいは、任意の２つの分類補正部を組み合わせて処理を行うようにしてもよい。
【００４２】
また、抽出装置１００は、１台のコンピュータの場合について説明したが、複数台のコンピュータを用いて分散処理するように構成してもよい。さらに、抽出装置１００は、ＬＳＩ(Large Scale Integration)で実現するようにしてもよいし、１チップ化してもよい。
【００４３】
さらに、スポーツ映像が、野球中継の映像の場合で説明したが、例えば、カット長の種別を決めることが可能なテロップを含むスポーツ映像であれば、アメリカンフットボールやバスケットなどのスポーツ映像に適用してもよい。
【図面の簡単な説明】
【００４４】
【図１】本発明の実施の形態におけるイベント終了点抽出装置の構成例を示すブロック図である。
【図２】図１のスポーツ映像記憶部のスポーツ映像の一例を示す図である。
【図３】図１の分類基準記憶部の分類基準の一例を示す図である。
【図４】図１の出現パターン記憶部の出現パターンの一例を示す図である。
【図５】図１のイベント終了点抽出装置の処理手順の一例を示す図である。
【符号の説明】
【００４５】
１００ イベント終了点抽出装置
１０１ スポーツ映像記憶部
１０２ カット点検出部
１０３ カット点記憶部
１０４ カット長分類部
１０５ 分類基準記憶部
１０６ テロップ検出部
１０７ テロップ記憶部
１０８ 第１の分類補正部
１０９ 第２の分類補正部
１１０ 第３の分類補正部
１１１ イベント終了時間抽出部
１１２ 出現パターン記憶部
１１３ 出力部
【特許請求の範囲】
【請求項１】
イベント開始点が決定されたスポーツ映像を記憶するスポーツ映像記憶部と、
前記スポーツ映像記憶部の前記スポーツ映像から、前記イベント開始点以降のカット点を検出するカット点検出部と、
前記カット点検出部に検出された前記カット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部と、
前記カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部と、
前記出現パターン記憶部を参照して、前記分類された種別の出現パターンに対応するイベント終了点を抽出するイベント終了点抽出部と、
前記イベント終了点抽出部に抽出されたイベント終了点および前記イベント開始点を出力する出力部と、
を含む、イベント終了点抽出装置。
【請求項２】
前記カット長の種別として、前記カット長の短い順に、第１の種別、第２の種別および第３の種別があり、
前記出現パターン記憶部の前記出現パターンとして、前記イベント開始点から前記第３の種別が最初に出現するパターンが記憶され、当該第３の種別に属するカット長の終了点が前記イベント終了点として対応付けられている、
請求項１に記載のイベント終了点抽出装置。
【請求項３】
前記カット長の種別として、前記カット長の短い順に、第１の種別、第２の種別および第３の種別があり、
前記出現パターン記憶部の前記出現パターンとして、前記イベント開始点から前記第３の種別が最初に出現するまでの間に、前記第２の種別が連続して出現するパターンが記憶され、最初の前記第２の種別に属するカット長の終了点が前記イベント終了点として対応付けられている、
請求項１に記載のイベント終了点抽出装置。
【請求項４】
前記スポーツ映像記憶部の前記スポーツ映像にはテロップが含まれ、
前記スポーツ映像記憶部の前記スポーツ映像に含まれる前記テロップを検出するテロップ検出部と、
前記テロップ検出部に検出された前記テロップを記憶するテロップ記憶部と、
前記カット長分類部に分類されたカット長があらかじめ指定された時間を有する場合、前記テロップ記憶部の前記テロップの表示パターンに基づいて、当該カット長の分類種別を、あらかじめ設定された種別に補正して分類する分類補正部と、をさらに含む、
請求項１ないし請求項３に記載のイベント終了点抽出装置。
【請求項５】
前記スポーツ映像が野球中継の映像の場合、
前記テロップの表示パターンとして、三振の映像シーンを示唆する特定のテロップの表示パターンがあらかじめ設定され、
前記分類補正部は、前記カット長の分類種別を補正する場合、前記三振の映像シーンを示唆する特定のテロップの表示パターンが前記カット長になければ、当該カット長の分類種別を補正する、
請求項４に記載のイベント終了点抽出装置。
【請求項６】
前記スポーツ映像が野球中継の映像の場合、
前記テロップの表示パターンとして、打者交代の映像シーンを示唆する特定のテロップの表示パターンがあらかじめ設定され、
前記分類種別補正部は、前記カット長の分類種別を補正する場合、前記打者交代の映像シーンを示唆する特定のテロップの表示パターンが前記カット長になければ、当該カット長の分類種別を補正する、
請求項４に記載のイベント終了点抽出装置。
【請求項７】
前記スポーツ映像が野球中継の映像の場合、
前記テロップの表示パターンとして、得点追加の映像シーンを示唆する特定のテロップの表示パターンがあらかじめ設定され、
前記分類種別補正部は、前記カット長の分類種別を補正する場合、前記得点追加の映像シーンを示唆する特定のテロップの表示パターンが前記カット長になければ、当該カット長の分類種別を補正する、
請求項４に記載のイベント終了点抽出装置。
【請求項８】
イベント開始点が決定されたスポーツ映像を記憶するスポーツ映像記憶部を含むコンピュータに用いられるイベント終了点抽出方法であって、
前記コンピュータは、
前記スポーツ映像記憶部の前記スポーツ映像から、前記イベント開始点以降のカット点を検出するステップと、
前記検出した前記カット点間のカット長の種別をそのカット長の短長に応じて分類するステップと、
前記カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部を参照して、前記分類した種別の出現パターンに対応するイベント終了点を抽出するステップと、
前記抽出したイベント終了点および前記イベント開始点を出力するステップと、
を含む、イベント終了点抽出方法。
【請求項９】
前記スポーツ映像記憶部の前記スポーツ映像にはテロップが含まれ、
前記コンピュータは、
前記スポーツ映像記憶部の前記スポーツ映像に含まれる前記テロップを検出するステップと、
前記カット長分類部に分類されたカット長があらかじめ指定された時間を有する場合、前記検出したテロップの表示パターンに基づいて、当該カット長の分類種別を補正してその種別を分類するステップと、をさらに含む、
請求項８に記載のイベント終了点抽出方法。
【請求項１０】
請求項８または請求項９に記載のイベント抽出方法をコンピュータに実行させるための抽出プログラム。
【請求項１】
イベント開始点が決定されたスポーツ映像を記憶するスポーツ映像記憶部と、
前記スポーツ映像記憶部の前記スポーツ映像から、前記イベント開始点以降のカット点を検出するカット点検出部と、
前記カット点検出部に検出された前記カット点間のカット長の種別をそのカット長の短長に応じて分類するカット長分類部と、
前記カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部と、
前記出現パターン記憶部を参照して、前記分類された種別の出現パターンに対応するイベント終了点を抽出するイベント終了点抽出部と、
前記イベント終了点抽出部に抽出されたイベント終了点および前記イベント開始点を出力する出力部と、
を含む、イベント終了点抽出装置。
【請求項２】
前記カット長の種別として、前記カット長の短い順に、第１の種別、第２の種別および第３の種別があり、
前記出現パターン記憶部の前記出現パターンとして、前記イベント開始点から前記第３の種別が最初に出現するパターンが記憶され、当該第３の種別に属するカット長の終了点が前記イベント終了点として対応付けられている、
請求項１に記載のイベント終了点抽出装置。
【請求項３】
前記カット長の種別として、前記カット長の短い順に、第１の種別、第２の種別および第３の種別があり、
前記出現パターン記憶部の前記出現パターンとして、前記イベント開始点から前記第３の種別が最初に出現するまでの間に、前記第２の種別が連続して出現するパターンが記憶され、最初の前記第２の種別に属するカット長の終了点が前記イベント終了点として対応付けられている、
請求項１に記載のイベント終了点抽出装置。
【請求項４】
前記スポーツ映像記憶部の前記スポーツ映像にはテロップが含まれ、
前記スポーツ映像記憶部の前記スポーツ映像に含まれる前記テロップを検出するテロップ検出部と、
前記テロップ検出部に検出された前記テロップを記憶するテロップ記憶部と、
前記カット長分類部に分類されたカット長があらかじめ指定された時間を有する場合、前記テロップ記憶部の前記テロップの表示パターンに基づいて、当該カット長の分類種別を、あらかじめ設定された種別に補正して分類する分類補正部と、をさらに含む、
請求項１ないし請求項３に記載のイベント終了点抽出装置。
【請求項５】
前記スポーツ映像が野球中継の映像の場合、
前記テロップの表示パターンとして、三振の映像シーンを示唆する特定のテロップの表示パターンがあらかじめ設定され、
前記分類補正部は、前記カット長の分類種別を補正する場合、前記三振の映像シーンを示唆する特定のテロップの表示パターンが前記カット長になければ、当該カット長の分類種別を補正する、
請求項４に記載のイベント終了点抽出装置。
【請求項６】
前記スポーツ映像が野球中継の映像の場合、
前記テロップの表示パターンとして、打者交代の映像シーンを示唆する特定のテロップの表示パターンがあらかじめ設定され、
前記分類種別補正部は、前記カット長の分類種別を補正する場合、前記打者交代の映像シーンを示唆する特定のテロップの表示パターンが前記カット長になければ、当該カット長の分類種別を補正する、
請求項４に記載のイベント終了点抽出装置。
【請求項７】
前記スポーツ映像が野球中継の映像の場合、
前記テロップの表示パターンとして、得点追加の映像シーンを示唆する特定のテロップの表示パターンがあらかじめ設定され、
前記分類種別補正部は、前記カット長の分類種別を補正する場合、前記得点追加の映像シーンを示唆する特定のテロップの表示パターンが前記カット長になければ、当該カット長の分類種別を補正する、
請求項４に記載のイベント終了点抽出装置。
【請求項８】
イベント開始点が決定されたスポーツ映像を記憶するスポーツ映像記憶部を含むコンピュータに用いられるイベント終了点抽出方法であって、
前記コンピュータは、
前記スポーツ映像記憶部の前記スポーツ映像から、前記イベント開始点以降のカット点を検出するステップと、
前記検出した前記カット点間のカット長の種別をそのカット長の短長に応じて分類するステップと、
前記カット長の種別の出現パターンをイベント終了点に対応付けて記憶する出現パターン記憶部を参照して、前記分類した種別の出現パターンに対応するイベント終了点を抽出するステップと、
前記抽出したイベント終了点および前記イベント開始点を出力するステップと、
を含む、イベント終了点抽出方法。
【請求項９】
前記スポーツ映像記憶部の前記スポーツ映像にはテロップが含まれ、
前記コンピュータは、
前記スポーツ映像記憶部の前記スポーツ映像に含まれる前記テロップを検出するステップと、
前記カット長分類部に分類されたカット長があらかじめ指定された時間を有する場合、前記検出したテロップの表示パターンに基づいて、当該カット長の分類種別を補正してその種別を分類するステップと、をさらに含む、
請求項８に記載のイベント終了点抽出方法。
【請求項１０】
請求項８または請求項９に記載のイベント抽出方法をコンピュータに実行させるための抽出プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２００７−３３５９８４（Ｐ２００７−３３５９８４Ａ）
【公開日】平成１９年１２月２７日（２００７．１２．２７）
【国際特許分類】
【出願番号】特願２００６−１６２５９１（Ｐ２００６−１６２５９１）
【出願日】平成１８年６月１２日（２００６．６．１２）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成１９年１２月２７日（２００７．１２．２７）
【国際特許分類】
【出願日】平成１８年６月１２日（２００６．６．１２）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]