映像コンテンツ編集装置，映像コンテンツ編集方法および映像コンテンツ編集プログラム
【課題】編集するシーンの始点と終点を一つ一つ設定しなくても，適切なシーンを編集できるようにする。
【解決手段】編集対象となる映像について，映像インデキシング部１２により事前にポイント型アノテーションと区間型アノテーションを検出し，これらをもとに映像を事前セグメントに分割する。映像情報提示部１４により映像と事前セグメント，アノテーションを提示するとともに，利用者アノテーション受付部１５により，利用者がコメントなどのアノテーションを付与するインタフェースを提供する。映像編集処理部１６により編集映像に採用する映像区間を決めるときには，利用者が指定した事前セグメント，アノテーションに対して所定の映像区間設定ルールを適用し，映像区間の始点と終点を自動で決定する。
【解決手段】編集対象となる映像について，映像インデキシング部１２により事前にポイント型アノテーションと区間型アノテーションを検出し，これらをもとに映像を事前セグメントに分割する。映像情報提示部１４により映像と事前セグメント，アノテーションを提示するとともに，利用者アノテーション受付部１５により，利用者がコメントなどのアノテーションを付与するインタフェースを提供する。映像編集処理部１６により編集映像に採用する映像区間を決めるときには，利用者が指定した事前セグメント，アノテーションに対して所定の映像区間設定ルールを適用し，映像区間の始点と終点を自動で決定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は，映像の一部の区間である映像シーンを選択し，選択したシーンを連続再生できるようにして新しい映像コンテンツを制作する映像コンテンツ編集装置や方法に関するものである。
【背景技術】
【０００２】
従来、映像を編集する場合に，何らかの方法で映像シーンを特定し，特定したシーンをつなげることで１本の映像を制作することが行われている。特定された映像シーンをつなげた映像を実際に作成しなくても，ＵＲＬ（Uniform Resource Locator）などで関連付けられた映像シーンを順次参照して再生する方法もある。
【０００３】
映像シーンの特定方法として，非特許文献１には，映像を予め事前セグメントに分割しておき，所望の事前セグメントを選択し，選択した事前セグメントを順次再生するプレイリストを用意することで編集映像を生成する方法が示されている。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】嶌田聡, 東正造, 寺中晶郁, 小島明, “映像シーン連動型コミュニケーションからのノウハウ百科事典の生成”，電子情報通信学会 ＡＩ研究会，AI2008-70 ，p.35-40 ，2009．
【発明の概要】
【発明が解決しようとする課題】
【０００５】
映像編集を行うには，採用する映像シーンを特定する必要があるが，一般的な映像編集では，編集するシーンの始点と終点とを手動で設定しており，採用するシーンの始点と終点を指定することに手間がかかることが問題である。
【０００６】
非特許文献１に記載されている方法は，シーン区間を設定する手間がかからないが，適切なシーンを選定することが困難である。例えば，事前セグメントが１分程度の区間に分割されている場合，採用区間として事前セグメント中の１０秒程度の区間を利用したいときには，残りの５０秒の不要なシーンが編集映像に含まれてしまう。一方，事前セグメントを１０秒程度に分割しておくと，採用区間として１分程度の区間が必要な場合には，多くの事前セグメントを選択しなければならないので手間がかかる。
【０００７】
本発明は，これらの問題を解決し，編集するシーンの始点と終点を設定する煩わしさをなくすとともに，適切なシーンを編集できるようにするための技術を提供することを目的としている。
【課題を解決するための手段】
【０００８】
本発明では，上記目的を達成するために，映像を事前にセグメントに分割しておいた区間と，自動または手動で付与したアノテーションを用いて映像シーンの編集が行えるようにする。
【０００９】
このため，本発明は，映像を入力して編集する映像コンテンツ編集装置において，入力した映像を解析し，予め定められた映像または映像に付随する音声の特徴に基づくポイント型アノテーションまたは区間型アノテーションとしてのイベントを検出し，検出したイベントをもとに前記映像を時間的に連続した区間に分割した事前セグメントを定義する映像インデキシング手段と，前記映像と前記事前セグメントと前記ポイント型アノテーションまたは区間型アノテーションとを関連付けて記憶装置に記憶し蓄積するデータ蓄積管理手段と，前記映像を再生し，利用者に提示する映像情報提示手段と，前記映像情報提示手段による映像の再生シーンに対して，利用者からのコメント登録または再生時刻へのマークを行うポイント型アノテーションの入力を受け付けるユーザインタフェースと，映像中の特定イベントに関する区間型アノテーションの入力を受け付けるユーザインタフェースとを持ち，前記ポイント型アノテーションを受け付けた場合には，該ポイント型アノテーションとアノテーションが付与された映像メディア時刻とを，前記データ蓄積管理手段に登録し，前記区間型アノテーションを受け付けた場合には，該区間型アノテーションとアノテーションが付与された映像メディア区間とを，前記データ蓄積管理手段に登録する利用者アノテーション受付手段と，編集映像の作成時に採用する映像区間を，前記データ蓄積管理手段に登録されている前記事前セグメント，前記ポイント型アノテーションおよび前記区間型アノテーションを用いて利用者に指定させるユーザインタフェースを持ち，利用者に指定された事前セグメント，ポイント型アノテーションまたは区間型アノテーションをもとに，予め定められた映像区間設定ルールに従って編集映像に採用する映像区間を決定して映像を編集する映像編集処理手段とを備えることを特徴とする。
【発明の効果】
【００１０】
上記の手段を備えることにより，本発明によれば，映像を事前にセグメントに分割しておいた区間と，自動または手動で付与したアノテーションを選定するだけで，編集映像に採用する区間を適切に特定できるので，編集するシーンの始点と終点を設定しなくても容易にシーンを編集することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の一実施例における装置構成を説明するための図である。
【図２】データ蓄積管理部で管理されているデータの例を示す図である。
【図３】本実施例の全体の処理フローチャートである。
【図４】映像登録の処理手順の例を示す図である。
【図５】利用者によるアノテーション付与の処理手順の例を示す図である。
【図６】映像編集の処理手順の例を示す図である。
【図７】映像情報を提示し，利用者アノテーションを受け付けるユーザインタフェースの例を示す図である。
【図８】編集映像のプレビュー画面の例を示す図である。
【図９】映像コンテンツ生成の例を示す図である。
【発明を実施するための形態】
【００１２】
以下，図面を用いて，本発明の実施の形態を詳細に説明する。
【００１３】
図１は，本発明の一実施例における装置構成を説明するための図である。同図に示す映像コンテンツ編集装置１０は，映像取得部１１，映像インデキシング部１２，データ蓄積管理部１３，映像情報提示部１４，利用者アノテーション受付部１５，映像編集処理部１６，映像・事前セグメント・アノテーション・編集映像記憶部１７から構成される。
【００１４】
映像取得部１１は，映像ファイルを読み取り，読み取った映像を映像インデキシング部１２に出力する。
【００１５】
映像インデキシング部１２は，映像取得部１１より受け取った映像から予め設定しておいたイベントを検出する。映像から自動的に検出できるイベントとして，突発音などのポイント型アノテーションや，シーンチェンジ，カメラワーク区間，テロップ区間，音声区間，顔出現区間などの区間型アノテーションがある。次に，映像インデキシング部１２は，検出したイベントを用いて事前セグメントを定義する。例えば，ポイント型アノテーションの映像メディア時刻，および区間型アノテーションの始点および終点の各映像メディア時刻で映像を小区間に区切り，これらの細分化したイベント区間を映像再生時刻の順に統合していき，予め設定しておいた区間長を越えれば１つの事前セグメント区間とする方法で定義すればよい。また，イベント区間を統合するときに，イベントの種類などによって統合する区間に優先度を設けたり，例えばシーンチェンジなどの特定のイベント区間の始点または終点部分では区間を統合しないというような所定のルールに従って事前セグメントを定めてもよい。検出したポイント型アノテーションや区間型アノテーション，事前セグメント，および映像をデータ蓄積管理部１３に出力する。
【００１６】
データ蓄積管理部１３は，映像・事前セグメント・アノテーション・編集映像記憶部（以下，単に記憶部という）１７により，映像インデキシング部１２から出力された映像と事前セグメントや自動付与されたアノテーションを管理しておき，これらのデータを映像情報提示部１４や映像編集処理部１６からの要求に応じて転送する。また，利用者アノテーション受付部１５から受け取ったアノテーションを記憶部１７で管理しておき，映像編集処理部１６からの要求に応じて転送する。映像編集処理部１６から編集映像を受け取ると，それを記憶部１７に格納し管理しておく。
【００１７】
映像情報提示部１４は，データ蓄積管理部１３に映像と事前セグメントやアノテーションの転送要求を出して受け取ると，利用者に映像の一覧を提示したり，選択された映像を再生したりする。
【００１８】
利用者アノテーション受付部１５は，映像の再生シーンに対してコメント登録や再生時刻へのマークのポイント型アノテーションの付与を受け付け，付与されたときの映像再生時刻とともに受け付けたアノテーションをデータ蓄積管理部１３に出力する。また，映像中の特定イベント区間を表す区間型アノテーションの付与を受け付けた場合には，付与された映像区間とともに受け付けたアノテーションをデータ蓄積管理部１３に出力する。
【００１９】
映像編集処理部１６は，映像編集を行うために採用する映像区間を，事前セグメントやアノテーションを選択することで指定するユーザインタフェースを提供して，指定された事前セグメントやアノテーションから編集映像を生成し，編集映像をデータ蓄積管理部１３に出力する。
【００２０】
次に，データ蓄積管理部１３において，図２に示すデータが管理されている場合を例に各部の動作について説明する。図２は，２つの映像，映像Ａと映像Ｂに対する管理データの例を示す。図２（ａ）は，映像インデキシング部１２で定義された事前セグメントで，映像Ａは３つの事前セグメント，映像Ｂは４つの事前セグメントがそれぞれ定義された場合の例である。
【００２１】
図２（ｂ）は，ポイント型アノテーションの例で，映像Ａについては３つのコメントと１つのマークが利用者アノテーション受付部１５で利用者により登録された場合の例を示している。コメント登録されたときには，コメント内容を「概要」で管理している。また，映像Ｂについては，３つのコメントが利用者アノテーション受付部１５で利用者により登録され，１つの突発音が映像インデキシング部１２で検出された場合を示している。
【００２２】
図２（ｃ）は，区間型アノテーションの例で，映像Ａについては，工程１と工程３という２つのイベントと，映像シーンに対する描画という１つの区間が利用者アノテーション受付部１５で利用者により登録され，テロップとナレーションの区間が映像インデキシング部１２で検出された場合を示している。テロップ文字認識結果とナレーション認識結果を「概要」で管理している。また，映像Ｂについては，工程２と工程４という２つのイベントと，映像シーンに対する描画という１つの区間が利用者アノテーション受付部１５で利用者により登録され，ズーミングのカメラワークと顔出現区間が映像インデキシング部１２で検出された場合を示している。
【００２３】
本実施例の全体の処理フローを図３に示す。まず，ステップＳ１では，映像登録を行う。この登録処理により，映像，事前セグメント，自動付与されるポイント型と区間型のアノテーションがデータ蓄積管理部１３で管理される。次のステップＳ２では，利用者アノテーションの受付および付与を行う。この処理により，利用者が付与するポイント型と区間型のアノテーションがデータ蓄積管理部１３で管理される。最後に，ステップＳ３では，データ蓄積管理部１３で管理されている事前セグメント，ポイント型アノテーションと区間型アノテーションを用いて映像編集を行う。
【００２４】
ステップＳ１，Ｓ２，Ｓ３の各処理の詳細について，図４，図５，図６を用いて説明する。
【００２５】
図４は，映像登録の処理手順の例を示している。まず，ステップＳ１１では，映像取得部１１により映像を読み取る。次に，ステップＳ１２では，映像インデキシング部１２により，例えば図２（ａ）に示すように，映像Ａについてはテロップ提示とナレーションを，映像Ｂについてはカメラワーク，顔出現と突発音の各イベントを検出する。また，ステップＳ１３では，映像インデキシング部１２により事前セグメントを定義する。続いて，ステップＳ１４では，映像インデキシング部１２で検出したイベントに関するアノテーションや事前セグメントなどのメタデータ，および，映像をデータ蓄積管理部１３に登録する。以上の処理で，映像登録が完了する。
【００２６】
図５は，利用者によるアノテーション付与の処理手順の例を示している。ステップＳ２１では，映像情報提示部１４は，データ蓄積管理部１３で管理している映像の一覧を提示し，利用者が視聴したい映像を選択できるユーザインタフェースを提供する。続いて，ステップＳ２２では，映像情報提示部１４は，利用者が選択した映像をデータ蓄積管理部１３から受け取り，その映像を再生する。事前セグメントや自動付与アノテーションを図７に示すように提示すると，利用者がアノテーションを付与しやすくなり有効である。なお，図７に示すユーザインタフェースの詳細については後述する。
【００２７】
ステップＳ２３では，利用者アノテーション受付部１５は，映像再生しながら利用者アノテーションを受け付けられるように図７に示すユーザインタフェースを提供し，利用者からのアノテーションを受け付ける。ステップＳ２４では，利用者アノテーション受付部１５は，利用者から受け付けたアノテーションをデータ蓄積管理部１３に登録する。
【００２８】
次に，ステップＳ２５では，利用者からの映像視聴の終了指示があったかどうかを判定し，映像視聴を終了する場合には，アノテーション付与の処理を終了する。映像視聴を終了しない場合には，ステップＳ２１へ戻り，同様に処理を繰り返す。以上の処理により，アノテーション付与が完了する。
【００２９】
図７は，表示装置に映像情報を提示し，利用者アノテーションを受け付けるユーザインタフェースの例を示している。図７において，７０は映像を再生して表示する映像提示領域である。７１は映像再生制御用のボタン等が配置された操作インタフェース部である。７２はポイント型アノテーションや区間型アノテーションの入力を受け付けるためのインタフェース部である。７３は自動または手動により設定されたポイント型アノテーションや区間型アノテーションの始点，終点等を提示するマーク提示部である。７４は事前セグメント区間提示部である。７５はコメントのタイトル入力欄である。７６はコメント入力欄である。７７は既に登録されている登録コメントの提示部である。７８は自動検出したイベントの提示部である。
【００３０】
例えば，映像の一覧（図示省略）から利用者が映像を選択すると，映像情報提示部１４は，その映像を画面内の映像提示領域７０に表示する。また，データ蓄積管理部１３から取得した事前セグメント，ポイント型アノテーション，区間型アノテーションに従って，事前セグメント区間提示部７４，マーク提示部７３等にそれらの情報を表示する。
【００３１】
利用者は，操作インタフェース部７１に配置されたボタン操作により，編集対象映像の再生開始，停止，早送り，逆戻し等の制御を行うことができる。また，マウス等のポインティングデバイスによるマーク提示部７３中のクリック操作やドラッグ操作，もしくはインタフェース部７２におけるボタン操作によって，ポイント型アノテーションとしての映像メディア時刻を指定するマークの追加／削除，区間型アノテーションの設定入力を行うことができる。
【００３２】
また，タイトル入力欄７５，コメント入力欄７６にマウスオーバーすると，映像再生が停止するので，ここでタイトルとコメントをこれらの欄に入力し，書込みボタンをクリックすると，再生停止されている映像メディア時刻に対して入力したコメントがポイント型アノテーションの一つとしてデータ蓄積管理部１３に登録される。
【００３３】
提示部７７には，再生している映像メディア時刻に合わせて利用者自身または他の利用者が登録したコメントが提示され，また，提示部７８には，テロップ検出などにより自動検出したイベントの情報が提示される。これらの提示部７７，７８について，意見交換ができるような掲示板機能を持たせるような実施も可能である。
【００３４】
図６は，映像編集の処理手順の例を示している。ステップＳ３１では，映像情報提示部１４により視聴できる映像の一覧が選択されたときに，利用者が視聴したい編集対象となる映像を選択する。ステップＳ３２では，映像情報提示部１４により選択した映像を再生する。このとき，データ蓄積管理部１３で管理している事前セグメントやアノテーションを，図７に示すように映像再生と関連付けて提示する。
【００３５】
ステップＳ３３では，映像編集処理部１６により，編集映像に採用する映像区間を，事前セグメントやアノテーションを選択することで指定する入力を受け付ける。図７の提示例において，例えば，マウスの右ボタンをクリックするなどの操作で編集映像に採用することを指示するインタフェースを設ければよい。選択されたアノテーションなどと，実際に編集映像に採用される映像区間との関係は，次のような映像区間設定ルールを設定しておくことが有効である。
【００３６】
［ルール１］：事前セグメントが選択された場合には，選択された事前セグメントを映像区間とする。
【００３７】
［ルール２］：区間型アノテーションが選択された場合には，選択された区間型アノテーションの区間を編集映像に採用する映像区間とする。
【００３８】
［ルール３］：ポイント型アノテーションが選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻から，選択されたポイント型アノテーションが属する事前セグメント区間の終点までの区間を，編集映像に採用する映像区間とする。
【００３９】
［ルール４］：区間型アノテーションまたはポイント型アノテーションが複数選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの始点の時刻の中で最も早い時刻を映像区間の始点とし，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの終点の時刻の中で最も遅い時刻を映像区間の終点とする映像区間を，編集映像に採用する映像区間とする。
【００４０】
以上のルールに従って，選択された映像区間のリストを提示する編集映像のプレビュー画面の例を図８に示す。図８では，編集映像への採用区間として，映像Ａのユーザコメント１，事前セグメント３が単独で選択され，映像Ｂのユーザコメント１とユーザコメント２が関連付けられて選択された場合の例を示している。最初の区間１は，映像Ａのユーザコメント１の付与時刻から事前セグメント１の終点まで，次の区間２は，映像Ａの事前セグメント３の区間，最後の区間３は，映像Ｂのユーザコメント１の付与時刻からユーザコメント２の付与時刻までの区間である。合計３つの映像区間が選択された順に提示される。各映像区間の再生順を変えたい場合には，シーンのクリックとドラッグで簡単に変更できるようにしておくと効果的である。
【００４１】
次に，利用者からの映像編集の終了指示があったかどうかを判定し，映像編集を終了する場合には，処理を終了する。映像編集を終了しない場合には，ステップＳ３１へ戻り，同様に処理を繰り返す。以上の処理により，映像編集が完了する。
【００４２】
以上説明したとおり，映像編集の処理が行われるので，編集するシーンの始点と終点を一つ一つ設定しなくても適切なシーンを編集することができる。
【００４３】
さらに，本発明をＷｅｂアプリケーションとして実現し，複数の利用者がアノテーションを付与したり，他人のアノテーションに対して返信コメントを付与できるようにして議論したりできるようにすれば，映像シーン選択の選択肢が増えることや，複数の利用者間で協調的に映像編集を行ったりすることができる。
【００４４】
図９は，映像コンテンツ生成の例を示している。図９に示すように，編集映像に対して，タイトル，概要，まとめなどを記載できるようにテンプレート化し，各区間のコメント内容を編集できるようにすれば，よりわかりやすい映像コンテンツを容易に編集することができる。さらに，図９に示されたような編集映像を表現する形態を定義しておく場合に（以下，トピックと呼ぶ），図６のステップＳ３３において，事前セグメントやアノテーションを選択することで編集映像に採用する映像区間を指定するときに，どのトピックに挿入するのかを同時に指定できるようなインタフェースを提供すれば，効率的に編集できるようになる。
【００４５】
以上の映像コンテンツ編集の処理は，コンピュータとソフトウェアプログラムとによっても実現することができ，そのプログラムをコンピュータ読み取り可能な記録媒体に記録することも，ネットワークを通して提供することも可能である。
【符号の説明】
【００４６】
１０ 映像コンテンツ編集装置
１１ 映像取得部
１２ 映像インデキシング部
１３ データ蓄積管理部
１４ 映像情報提示部
１５ 利用者アノテーション受付部
１６ 映像編集処理部
１７ 映像・事前セグメント・アノテーション・編集映像記憶部
【技術分野】
【０００１】
本発明は，映像の一部の区間である映像シーンを選択し，選択したシーンを連続再生できるようにして新しい映像コンテンツを制作する映像コンテンツ編集装置や方法に関するものである。
【背景技術】
【０００２】
従来、映像を編集する場合に，何らかの方法で映像シーンを特定し，特定したシーンをつなげることで１本の映像を制作することが行われている。特定された映像シーンをつなげた映像を実際に作成しなくても，ＵＲＬ（Uniform Resource Locator）などで関連付けられた映像シーンを順次参照して再生する方法もある。
【０００３】
映像シーンの特定方法として，非特許文献１には，映像を予め事前セグメントに分割しておき，所望の事前セグメントを選択し，選択した事前セグメントを順次再生するプレイリストを用意することで編集映像を生成する方法が示されている。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】嶌田聡, 東正造, 寺中晶郁, 小島明, “映像シーン連動型コミュニケーションからのノウハウ百科事典の生成”，電子情報通信学会 ＡＩ研究会，AI2008-70 ，p.35-40 ，2009．
【発明の概要】
【発明が解決しようとする課題】
【０００５】
映像編集を行うには，採用する映像シーンを特定する必要があるが，一般的な映像編集では，編集するシーンの始点と終点とを手動で設定しており，採用するシーンの始点と終点を指定することに手間がかかることが問題である。
【０００６】
非特許文献１に記載されている方法は，シーン区間を設定する手間がかからないが，適切なシーンを選定することが困難である。例えば，事前セグメントが１分程度の区間に分割されている場合，採用区間として事前セグメント中の１０秒程度の区間を利用したいときには，残りの５０秒の不要なシーンが編集映像に含まれてしまう。一方，事前セグメントを１０秒程度に分割しておくと，採用区間として１分程度の区間が必要な場合には，多くの事前セグメントを選択しなければならないので手間がかかる。
【０００７】
本発明は，これらの問題を解決し，編集するシーンの始点と終点を設定する煩わしさをなくすとともに，適切なシーンを編集できるようにするための技術を提供することを目的としている。
【課題を解決するための手段】
【０００８】
本発明では，上記目的を達成するために，映像を事前にセグメントに分割しておいた区間と，自動または手動で付与したアノテーションを用いて映像シーンの編集が行えるようにする。
【０００９】
このため，本発明は，映像を入力して編集する映像コンテンツ編集装置において，入力した映像を解析し，予め定められた映像または映像に付随する音声の特徴に基づくポイント型アノテーションまたは区間型アノテーションとしてのイベントを検出し，検出したイベントをもとに前記映像を時間的に連続した区間に分割した事前セグメントを定義する映像インデキシング手段と，前記映像と前記事前セグメントと前記ポイント型アノテーションまたは区間型アノテーションとを関連付けて記憶装置に記憶し蓄積するデータ蓄積管理手段と，前記映像を再生し，利用者に提示する映像情報提示手段と，前記映像情報提示手段による映像の再生シーンに対して，利用者からのコメント登録または再生時刻へのマークを行うポイント型アノテーションの入力を受け付けるユーザインタフェースと，映像中の特定イベントに関する区間型アノテーションの入力を受け付けるユーザインタフェースとを持ち，前記ポイント型アノテーションを受け付けた場合には，該ポイント型アノテーションとアノテーションが付与された映像メディア時刻とを，前記データ蓄積管理手段に登録し，前記区間型アノテーションを受け付けた場合には，該区間型アノテーションとアノテーションが付与された映像メディア区間とを，前記データ蓄積管理手段に登録する利用者アノテーション受付手段と，編集映像の作成時に採用する映像区間を，前記データ蓄積管理手段に登録されている前記事前セグメント，前記ポイント型アノテーションおよび前記区間型アノテーションを用いて利用者に指定させるユーザインタフェースを持ち，利用者に指定された事前セグメント，ポイント型アノテーションまたは区間型アノテーションをもとに，予め定められた映像区間設定ルールに従って編集映像に採用する映像区間を決定して映像を編集する映像編集処理手段とを備えることを特徴とする。
【発明の効果】
【００１０】
上記の手段を備えることにより，本発明によれば，映像を事前にセグメントに分割しておいた区間と，自動または手動で付与したアノテーションを選定するだけで，編集映像に採用する区間を適切に特定できるので，編集するシーンの始点と終点を設定しなくても容易にシーンを編集することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の一実施例における装置構成を説明するための図である。
【図２】データ蓄積管理部で管理されているデータの例を示す図である。
【図３】本実施例の全体の処理フローチャートである。
【図４】映像登録の処理手順の例を示す図である。
【図５】利用者によるアノテーション付与の処理手順の例を示す図である。
【図６】映像編集の処理手順の例を示す図である。
【図７】映像情報を提示し，利用者アノテーションを受け付けるユーザインタフェースの例を示す図である。
【図８】編集映像のプレビュー画面の例を示す図である。
【図９】映像コンテンツ生成の例を示す図である。
【発明を実施するための形態】
【００１２】
以下，図面を用いて，本発明の実施の形態を詳細に説明する。
【００１３】
図１は，本発明の一実施例における装置構成を説明するための図である。同図に示す映像コンテンツ編集装置１０は，映像取得部１１，映像インデキシング部１２，データ蓄積管理部１３，映像情報提示部１４，利用者アノテーション受付部１５，映像編集処理部１６，映像・事前セグメント・アノテーション・編集映像記憶部１７から構成される。
【００１４】
映像取得部１１は，映像ファイルを読み取り，読み取った映像を映像インデキシング部１２に出力する。
【００１５】
映像インデキシング部１２は，映像取得部１１より受け取った映像から予め設定しておいたイベントを検出する。映像から自動的に検出できるイベントとして，突発音などのポイント型アノテーションや，シーンチェンジ，カメラワーク区間，テロップ区間，音声区間，顔出現区間などの区間型アノテーションがある。次に，映像インデキシング部１２は，検出したイベントを用いて事前セグメントを定義する。例えば，ポイント型アノテーションの映像メディア時刻，および区間型アノテーションの始点および終点の各映像メディア時刻で映像を小区間に区切り，これらの細分化したイベント区間を映像再生時刻の順に統合していき，予め設定しておいた区間長を越えれば１つの事前セグメント区間とする方法で定義すればよい。また，イベント区間を統合するときに，イベントの種類などによって統合する区間に優先度を設けたり，例えばシーンチェンジなどの特定のイベント区間の始点または終点部分では区間を統合しないというような所定のルールに従って事前セグメントを定めてもよい。検出したポイント型アノテーションや区間型アノテーション，事前セグメント，および映像をデータ蓄積管理部１３に出力する。
【００１６】
データ蓄積管理部１３は，映像・事前セグメント・アノテーション・編集映像記憶部（以下，単に記憶部という）１７により，映像インデキシング部１２から出力された映像と事前セグメントや自動付与されたアノテーションを管理しておき，これらのデータを映像情報提示部１４や映像編集処理部１６からの要求に応じて転送する。また，利用者アノテーション受付部１５から受け取ったアノテーションを記憶部１７で管理しておき，映像編集処理部１６からの要求に応じて転送する。映像編集処理部１６から編集映像を受け取ると，それを記憶部１７に格納し管理しておく。
【００１７】
映像情報提示部１４は，データ蓄積管理部１３に映像と事前セグメントやアノテーションの転送要求を出して受け取ると，利用者に映像の一覧を提示したり，選択された映像を再生したりする。
【００１８】
利用者アノテーション受付部１５は，映像の再生シーンに対してコメント登録や再生時刻へのマークのポイント型アノテーションの付与を受け付け，付与されたときの映像再生時刻とともに受け付けたアノテーションをデータ蓄積管理部１３に出力する。また，映像中の特定イベント区間を表す区間型アノテーションの付与を受け付けた場合には，付与された映像区間とともに受け付けたアノテーションをデータ蓄積管理部１３に出力する。
【００１９】
映像編集処理部１６は，映像編集を行うために採用する映像区間を，事前セグメントやアノテーションを選択することで指定するユーザインタフェースを提供して，指定された事前セグメントやアノテーションから編集映像を生成し，編集映像をデータ蓄積管理部１３に出力する。
【００２０】
次に，データ蓄積管理部１３において，図２に示すデータが管理されている場合を例に各部の動作について説明する。図２は，２つの映像，映像Ａと映像Ｂに対する管理データの例を示す。図２（ａ）は，映像インデキシング部１２で定義された事前セグメントで，映像Ａは３つの事前セグメント，映像Ｂは４つの事前セグメントがそれぞれ定義された場合の例である。
【００２１】
図２（ｂ）は，ポイント型アノテーションの例で，映像Ａについては３つのコメントと１つのマークが利用者アノテーション受付部１５で利用者により登録された場合の例を示している。コメント登録されたときには，コメント内容を「概要」で管理している。また，映像Ｂについては，３つのコメントが利用者アノテーション受付部１５で利用者により登録され，１つの突発音が映像インデキシング部１２で検出された場合を示している。
【００２２】
図２（ｃ）は，区間型アノテーションの例で，映像Ａについては，工程１と工程３という２つのイベントと，映像シーンに対する描画という１つの区間が利用者アノテーション受付部１５で利用者により登録され，テロップとナレーションの区間が映像インデキシング部１２で検出された場合を示している。テロップ文字認識結果とナレーション認識結果を「概要」で管理している。また，映像Ｂについては，工程２と工程４という２つのイベントと，映像シーンに対する描画という１つの区間が利用者アノテーション受付部１５で利用者により登録され，ズーミングのカメラワークと顔出現区間が映像インデキシング部１２で検出された場合を示している。
【００２３】
本実施例の全体の処理フローを図３に示す。まず，ステップＳ１では，映像登録を行う。この登録処理により，映像，事前セグメント，自動付与されるポイント型と区間型のアノテーションがデータ蓄積管理部１３で管理される。次のステップＳ２では，利用者アノテーションの受付および付与を行う。この処理により，利用者が付与するポイント型と区間型のアノテーションがデータ蓄積管理部１３で管理される。最後に，ステップＳ３では，データ蓄積管理部１３で管理されている事前セグメント，ポイント型アノテーションと区間型アノテーションを用いて映像編集を行う。
【００２４】
ステップＳ１，Ｓ２，Ｓ３の各処理の詳細について，図４，図５，図６を用いて説明する。
【００２５】
図４は，映像登録の処理手順の例を示している。まず，ステップＳ１１では，映像取得部１１により映像を読み取る。次に，ステップＳ１２では，映像インデキシング部１２により，例えば図２（ａ）に示すように，映像Ａについてはテロップ提示とナレーションを，映像Ｂについてはカメラワーク，顔出現と突発音の各イベントを検出する。また，ステップＳ１３では，映像インデキシング部１２により事前セグメントを定義する。続いて，ステップＳ１４では，映像インデキシング部１２で検出したイベントに関するアノテーションや事前セグメントなどのメタデータ，および，映像をデータ蓄積管理部１３に登録する。以上の処理で，映像登録が完了する。
【００２６】
図５は，利用者によるアノテーション付与の処理手順の例を示している。ステップＳ２１では，映像情報提示部１４は，データ蓄積管理部１３で管理している映像の一覧を提示し，利用者が視聴したい映像を選択できるユーザインタフェースを提供する。続いて，ステップＳ２２では，映像情報提示部１４は，利用者が選択した映像をデータ蓄積管理部１３から受け取り，その映像を再生する。事前セグメントや自動付与アノテーションを図７に示すように提示すると，利用者がアノテーションを付与しやすくなり有効である。なお，図７に示すユーザインタフェースの詳細については後述する。
【００２７】
ステップＳ２３では，利用者アノテーション受付部１５は，映像再生しながら利用者アノテーションを受け付けられるように図７に示すユーザインタフェースを提供し，利用者からのアノテーションを受け付ける。ステップＳ２４では，利用者アノテーション受付部１５は，利用者から受け付けたアノテーションをデータ蓄積管理部１３に登録する。
【００２８】
次に，ステップＳ２５では，利用者からの映像視聴の終了指示があったかどうかを判定し，映像視聴を終了する場合には，アノテーション付与の処理を終了する。映像視聴を終了しない場合には，ステップＳ２１へ戻り，同様に処理を繰り返す。以上の処理により，アノテーション付与が完了する。
【００２９】
図７は，表示装置に映像情報を提示し，利用者アノテーションを受け付けるユーザインタフェースの例を示している。図７において，７０は映像を再生して表示する映像提示領域である。７１は映像再生制御用のボタン等が配置された操作インタフェース部である。７２はポイント型アノテーションや区間型アノテーションの入力を受け付けるためのインタフェース部である。７３は自動または手動により設定されたポイント型アノテーションや区間型アノテーションの始点，終点等を提示するマーク提示部である。７４は事前セグメント区間提示部である。７５はコメントのタイトル入力欄である。７６はコメント入力欄である。７７は既に登録されている登録コメントの提示部である。７８は自動検出したイベントの提示部である。
【００３０】
例えば，映像の一覧（図示省略）から利用者が映像を選択すると，映像情報提示部１４は，その映像を画面内の映像提示領域７０に表示する。また，データ蓄積管理部１３から取得した事前セグメント，ポイント型アノテーション，区間型アノテーションに従って，事前セグメント区間提示部７４，マーク提示部７３等にそれらの情報を表示する。
【００３１】
利用者は，操作インタフェース部７１に配置されたボタン操作により，編集対象映像の再生開始，停止，早送り，逆戻し等の制御を行うことができる。また，マウス等のポインティングデバイスによるマーク提示部７３中のクリック操作やドラッグ操作，もしくはインタフェース部７２におけるボタン操作によって，ポイント型アノテーションとしての映像メディア時刻を指定するマークの追加／削除，区間型アノテーションの設定入力を行うことができる。
【００３２】
また，タイトル入力欄７５，コメント入力欄７６にマウスオーバーすると，映像再生が停止するので，ここでタイトルとコメントをこれらの欄に入力し，書込みボタンをクリックすると，再生停止されている映像メディア時刻に対して入力したコメントがポイント型アノテーションの一つとしてデータ蓄積管理部１３に登録される。
【００３３】
提示部７７には，再生している映像メディア時刻に合わせて利用者自身または他の利用者が登録したコメントが提示され，また，提示部７８には，テロップ検出などにより自動検出したイベントの情報が提示される。これらの提示部７７，７８について，意見交換ができるような掲示板機能を持たせるような実施も可能である。
【００３４】
図６は，映像編集の処理手順の例を示している。ステップＳ３１では，映像情報提示部１４により視聴できる映像の一覧が選択されたときに，利用者が視聴したい編集対象となる映像を選択する。ステップＳ３２では，映像情報提示部１４により選択した映像を再生する。このとき，データ蓄積管理部１３で管理している事前セグメントやアノテーションを，図７に示すように映像再生と関連付けて提示する。
【００３５】
ステップＳ３３では，映像編集処理部１６により，編集映像に採用する映像区間を，事前セグメントやアノテーションを選択することで指定する入力を受け付ける。図７の提示例において，例えば，マウスの右ボタンをクリックするなどの操作で編集映像に採用することを指示するインタフェースを設ければよい。選択されたアノテーションなどと，実際に編集映像に採用される映像区間との関係は，次のような映像区間設定ルールを設定しておくことが有効である。
【００３６】
［ルール１］：事前セグメントが選択された場合には，選択された事前セグメントを映像区間とする。
【００３７】
［ルール２］：区間型アノテーションが選択された場合には，選択された区間型アノテーションの区間を編集映像に採用する映像区間とする。
【００３８】
［ルール３］：ポイント型アノテーションが選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻から，選択されたポイント型アノテーションが属する事前セグメント区間の終点までの区間を，編集映像に採用する映像区間とする。
【００３９】
［ルール４］：区間型アノテーションまたはポイント型アノテーションが複数選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの始点の時刻の中で最も早い時刻を映像区間の始点とし，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの終点の時刻の中で最も遅い時刻を映像区間の終点とする映像区間を，編集映像に採用する映像区間とする。
【００４０】
以上のルールに従って，選択された映像区間のリストを提示する編集映像のプレビュー画面の例を図８に示す。図８では，編集映像への採用区間として，映像Ａのユーザコメント１，事前セグメント３が単独で選択され，映像Ｂのユーザコメント１とユーザコメント２が関連付けられて選択された場合の例を示している。最初の区間１は，映像Ａのユーザコメント１の付与時刻から事前セグメント１の終点まで，次の区間２は，映像Ａの事前セグメント３の区間，最後の区間３は，映像Ｂのユーザコメント１の付与時刻からユーザコメント２の付与時刻までの区間である。合計３つの映像区間が選択された順に提示される。各映像区間の再生順を変えたい場合には，シーンのクリックとドラッグで簡単に変更できるようにしておくと効果的である。
【００４１】
次に，利用者からの映像編集の終了指示があったかどうかを判定し，映像編集を終了する場合には，処理を終了する。映像編集を終了しない場合には，ステップＳ３１へ戻り，同様に処理を繰り返す。以上の処理により，映像編集が完了する。
【００４２】
以上説明したとおり，映像編集の処理が行われるので，編集するシーンの始点と終点を一つ一つ設定しなくても適切なシーンを編集することができる。
【００４３】
さらに，本発明をＷｅｂアプリケーションとして実現し，複数の利用者がアノテーションを付与したり，他人のアノテーションに対して返信コメントを付与できるようにして議論したりできるようにすれば，映像シーン選択の選択肢が増えることや，複数の利用者間で協調的に映像編集を行ったりすることができる。
【００４４】
図９は，映像コンテンツ生成の例を示している。図９に示すように，編集映像に対して，タイトル，概要，まとめなどを記載できるようにテンプレート化し，各区間のコメント内容を編集できるようにすれば，よりわかりやすい映像コンテンツを容易に編集することができる。さらに，図９に示されたような編集映像を表現する形態を定義しておく場合に（以下，トピックと呼ぶ），図６のステップＳ３３において，事前セグメントやアノテーションを選択することで編集映像に採用する映像区間を指定するときに，どのトピックに挿入するのかを同時に指定できるようなインタフェースを提供すれば，効率的に編集できるようになる。
【００４５】
以上の映像コンテンツ編集の処理は，コンピュータとソフトウェアプログラムとによっても実現することができ，そのプログラムをコンピュータ読み取り可能な記録媒体に記録することも，ネットワークを通して提供することも可能である。
【符号の説明】
【００４６】
１０ 映像コンテンツ編集装置
１１ 映像取得部
１２ 映像インデキシング部
１３ データ蓄積管理部
１４ 映像情報提示部
１５ 利用者アノテーション受付部
１６ 映像編集処理部
１７ 映像・事前セグメント・アノテーション・編集映像記憶部
【特許請求の範囲】
【請求項１】
映像を入力して編集する映像コンテンツ編集装置において，
入力した映像を解析し，予め定められた映像または映像に付随する音声の特徴に基づくポイント型アノテーションまたは区間型アノテーションとしてのイベントを検出し，検出したイベントをもとに前記映像を時間的に連続した区間に分割した事前セグメントを定義する映像インデキシング手段と，
前記映像と前記事前セグメントと前記ポイント型アノテーションまたは区間型アノテーションとを関連付けて記憶装置に記憶し蓄積するデータ蓄積管理手段と，
前記映像を再生し，利用者に提示する映像情報提示手段と，
前記映像情報提示手段による映像の再生シーンに対して，利用者からのコメント登録または再生時刻へのマークを行うポイント型アノテーションの入力を受け付けるユーザインタフェースと，映像中の特定イベントに関する区間型アノテーションの入力を受け付けるユーザインタフェースとを持ち，前記ポイント型アノテーションを受け付けた場合には，該ポイント型アノテーションとアノテーションが付与された映像メディア時刻とを，前記データ蓄積管理手段に登録し，前記区間型アノテーションを受け付けた場合には，該区間型アノテーションとアノテーションが付与された映像メディア区間とを，前記データ蓄積管理手段に登録する利用者アノテーション受付手段と，
編集映像の作成時に採用する映像区間を，前記データ蓄積管理手段に登録されている前記事前セグメント，前記ポイント型アノテーションおよび前記区間型アノテーションを用いて利用者に指定させるユーザインタフェースを持ち，利用者に指定された事前セグメント，ポイント型アノテーションまたは区間型アノテーションをもとに，予め定められた映像区間設定ルールに従って編集映像に採用する映像区間を決定して映像を編集する映像編集処理手段とを備える
ことを特徴とする映像コンテンツ編集装置。
【請求項２】
請求項１記載の映像コンテンツ編集装置において，
前記映像編集処理手段が用いる前記映像区間設定ルールは，
前記事前セグメントが選択された場合には，選択された事前セグメントを編集映像に採用する映像区間とするルールと，
前記区間型アノテーションが選択された場合には，選択された区間型アノテーションの区間を編集映像に採用する映像区間とするルールと，
前記ポイント型アノテーションが選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻から，選択されたポイント型アノテーションが属する事前セグメント区間の終点までの区間を，編集映像に採用する映像区間とするルールと，
前記区間型アノテーションまたは前記ポイント型アノテーションが複数選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの始点の時刻の中で最も早い時刻を映像区間の始点とし，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの終点の時刻の中で最も遅い時刻を映像区間の終点とする映像区間を，編集映像に採用する映像区間とするルールの，少なくともいずれか複数のルールを含む
ことを特徴とする映像コンテンツ編集装置。
【請求項３】
映像を入力して編集する映像コンテンツ編集方法において，
入力した映像を解析し，予め定められた映像または映像に付随する音声の特徴に基づくポイント型アノテーションまたは区間型アノテーションとしてのイベントを検出し，検出したイベントをもとに前記映像を時間的に連続した区間に分割した事前セグメントを定義する映像インデキシング過程と，
映像の編集に用いる情報を記憶装置に記憶して管理するデータ蓄積管理手段に，前記映像と前記事前セグメントと前記ポイント型アノテーションまたは区間型アノテーションとを関連付けて登録する過程と，
前記映像を再生し，利用者に提示する映像情報提示過程と，
前記映像情報提示過程による映像の再生シーンに対して，利用者からのコメント登録または再生時刻へのマークを行うポイント型アノテーションの入力を受け付けるユーザインタフェースと，映像中の特定イベントに関する区間型アノテーションの入力を受け付けるユーザインタフェースとを持ち，前記ポイント型アノテーションを受け付けた場合には，該ポイント型アノテーションとアノテーションが付与された映像メディア時刻とを，前記データ蓄積管理手段に登録し，前記区間型アノテーションを受け付けた場合には，該区間型アノテーションとアノテーションが付与された映像メディア区間とを，前記データ蓄積管理手段に登録する利用者アノテーション受付過程と，
編集映像の作成時に採用する映像区間を，前記データ蓄積管理手段に登録されている前記事前セグメント，前記ポイント型アノテーションおよび前記区間型アノテーションを用いて利用者に指定させるユーザインタフェースを持ち，利用者に指定された事前セグメント，ポイント型アノテーションまたは区間型アノテーションをもとに，予め定められた映像区間設定ルールに従って編集映像に採用する映像区間を決定して映像を編集する映像編集処理過程とを有する
ことを特徴とする映像コンテンツ編集方法。
【請求項４】
請求項３記載の映像コンテンツ編集方法において，
前記映像編集処理過程が用いる前記映像区間設定ルールは，
前記事前セグメントが選択された場合には，選択された事前セグメントを編集映像に採用する映像区間とするルールと，
前記区間型アノテーションが選択された場合には，選択された区間型アノテーションの区間を編集映像に採用する映像区間とするルールと，
前記ポイント型アノテーションが選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻から，選択されたポイント型アノテーションが属する事前セグメント区間の終点までの区間を，編集映像に採用する映像区間とするルールと，
前記区間型アノテーションまたは前記ポイント型アノテーションが複数選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの始点の時刻の中で最も早い時刻を映像区間の始点とし，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの終点の時刻の中で最も遅い時刻を映像区間の終点とする映像区間を，編集映像に採用する映像区間とするルールの，少なくともいずれか複数のルールを含む
ことを特徴とする映像コンテンツ編集方法。
【請求項５】
請求項３または請求項４に記載の映像コンテンツ編集方法を，コンピュータに実行させるための映像コンテンツ編集プログラム。
【請求項１】
映像を入力して編集する映像コンテンツ編集装置において，
入力した映像を解析し，予め定められた映像または映像に付随する音声の特徴に基づくポイント型アノテーションまたは区間型アノテーションとしてのイベントを検出し，検出したイベントをもとに前記映像を時間的に連続した区間に分割した事前セグメントを定義する映像インデキシング手段と，
前記映像と前記事前セグメントと前記ポイント型アノテーションまたは区間型アノテーションとを関連付けて記憶装置に記憶し蓄積するデータ蓄積管理手段と，
前記映像を再生し，利用者に提示する映像情報提示手段と，
前記映像情報提示手段による映像の再生シーンに対して，利用者からのコメント登録または再生時刻へのマークを行うポイント型アノテーションの入力を受け付けるユーザインタフェースと，映像中の特定イベントに関する区間型アノテーションの入力を受け付けるユーザインタフェースとを持ち，前記ポイント型アノテーションを受け付けた場合には，該ポイント型アノテーションとアノテーションが付与された映像メディア時刻とを，前記データ蓄積管理手段に登録し，前記区間型アノテーションを受け付けた場合には，該区間型アノテーションとアノテーションが付与された映像メディア区間とを，前記データ蓄積管理手段に登録する利用者アノテーション受付手段と，
編集映像の作成時に採用する映像区間を，前記データ蓄積管理手段に登録されている前記事前セグメント，前記ポイント型アノテーションおよび前記区間型アノテーションを用いて利用者に指定させるユーザインタフェースを持ち，利用者に指定された事前セグメント，ポイント型アノテーションまたは区間型アノテーションをもとに，予め定められた映像区間設定ルールに従って編集映像に採用する映像区間を決定して映像を編集する映像編集処理手段とを備える
ことを特徴とする映像コンテンツ編集装置。
【請求項２】
請求項１記載の映像コンテンツ編集装置において，
前記映像編集処理手段が用いる前記映像区間設定ルールは，
前記事前セグメントが選択された場合には，選択された事前セグメントを編集映像に採用する映像区間とするルールと，
前記区間型アノテーションが選択された場合には，選択された区間型アノテーションの区間を編集映像に採用する映像区間とするルールと，
前記ポイント型アノテーションが選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻から，選択されたポイント型アノテーションが属する事前セグメント区間の終点までの区間を，編集映像に採用する映像区間とするルールと，
前記区間型アノテーションまたは前記ポイント型アノテーションが複数選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの始点の時刻の中で最も早い時刻を映像区間の始点とし，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの終点の時刻の中で最も遅い時刻を映像区間の終点とする映像区間を，編集映像に採用する映像区間とするルールの，少なくともいずれか複数のルールを含む
ことを特徴とする映像コンテンツ編集装置。
【請求項３】
映像を入力して編集する映像コンテンツ編集方法において，
入力した映像を解析し，予め定められた映像または映像に付随する音声の特徴に基づくポイント型アノテーションまたは区間型アノテーションとしてのイベントを検出し，検出したイベントをもとに前記映像を時間的に連続した区間に分割した事前セグメントを定義する映像インデキシング過程と，
映像の編集に用いる情報を記憶装置に記憶して管理するデータ蓄積管理手段に，前記映像と前記事前セグメントと前記ポイント型アノテーションまたは区間型アノテーションとを関連付けて登録する過程と，
前記映像を再生し，利用者に提示する映像情報提示過程と，
前記映像情報提示過程による映像の再生シーンに対して，利用者からのコメント登録または再生時刻へのマークを行うポイント型アノテーションの入力を受け付けるユーザインタフェースと，映像中の特定イベントに関する区間型アノテーションの入力を受け付けるユーザインタフェースとを持ち，前記ポイント型アノテーションを受け付けた場合には，該ポイント型アノテーションとアノテーションが付与された映像メディア時刻とを，前記データ蓄積管理手段に登録し，前記区間型アノテーションを受け付けた場合には，該区間型アノテーションとアノテーションが付与された映像メディア区間とを，前記データ蓄積管理手段に登録する利用者アノテーション受付過程と，
編集映像の作成時に採用する映像区間を，前記データ蓄積管理手段に登録されている前記事前セグメント，前記ポイント型アノテーションおよび前記区間型アノテーションを用いて利用者に指定させるユーザインタフェースを持ち，利用者に指定された事前セグメント，ポイント型アノテーションまたは区間型アノテーションをもとに，予め定められた映像区間設定ルールに従って編集映像に採用する映像区間を決定して映像を編集する映像編集処理過程とを有する
ことを特徴とする映像コンテンツ編集方法。
【請求項４】
請求項３記載の映像コンテンツ編集方法において，
前記映像編集処理過程が用いる前記映像区間設定ルールは，
前記事前セグメントが選択された場合には，選択された事前セグメントを編集映像に採用する映像区間とするルールと，
前記区間型アノテーションが選択された場合には，選択された区間型アノテーションの区間を編集映像に採用する映像区間とするルールと，
前記ポイント型アノテーションが選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻から，選択されたポイント型アノテーションが属する事前セグメント区間の終点までの区間を，編集映像に採用する映像区間とするルールと，
前記区間型アノテーションまたは前記ポイント型アノテーションが複数選択された場合には，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの始点の時刻の中で最も早い時刻を映像区間の始点とし，選択されたポイント型アノテーションが付与された映像メディア時刻と選択された区間型アノテーションの終点の時刻の中で最も遅い時刻を映像区間の終点とする映像区間を，編集映像に採用する映像区間とするルールの，少なくともいずれか複数のルールを含む
ことを特徴とする映像コンテンツ編集方法。
【請求項５】
請求項３または請求項４に記載の映像コンテンツ編集方法を，コンピュータに実行させるための映像コンテンツ編集プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１１−１５５３２９（Ｐ２０１１−１５５３２９Ａ）
【公開日】平成２３年８月１１日（２０１１．８．１１）
【国際特許分類】
【出願番号】特願２０１０−１３７７３（Ｐ２０１０−１３７７３）
【出願日】平成２２年１月２６日（２０１０．１．２６）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
【公開日】平成２３年８月１１日（２０１１．８．１１）
【国際特許分類】
【出願日】平成２２年１月２６日（２０１０．１．２６）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
[ Back to top ]