再生制御装置、再生制御方法およびプログラム
【課題】スロー再生に適したシーンを検出してスロー再生する。
【解決手段】再生制御装置１０は、動画像を再生する再生部１２２と、再生部１２２により再生された動画像フレームを動画像記憶部１２６に所定時間分記録する記録部１２４と、動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部１２８と、特徴パターンテーブルの特徴パターンに対応する、動画像記憶部１２６に記憶された動画像フレームに含まれる特徴パターンを抽出する抽出部１３４と、抽出部１３４により抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部１２６に記憶されている動画像フレームの再生を制御する再生制御部１３６と、を備える。
【解決手段】再生制御装置１０は、動画像を再生する再生部１２２と、再生部１２２により再生された動画像フレームを動画像記憶部１２６に所定時間分記録する記録部１２４と、動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部１２８と、特徴パターンテーブルの特徴パターンに対応する、動画像記憶部１２６に記憶された動画像フレームに含まれる特徴パターンを抽出する抽出部１３４と、抽出部１３４により抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部１２６に記憶されている動画像フレームの再生を制御する再生制御部１３６と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、再生制御装置、再生制御方法およびプログラムに関する。
【背景技術】
【０００２】
近年、民生用のビデオカメラが広く普及し、多くの一般家庭でビデオカメラを保有し、子供の成長記録や、各種イベント等日常的な生活を記録に残すことが一般的になってきている。ビデオカメラに求められる機能としては、表示装置へのハイビジョン化に伴う高画質化や、テープやＤＶＤからハードディスクへの長時間記録などが挙げられる。また、通常より高速なフレームレートで撮影して、再生時にスロー再生を行う機能を搭載したビデオカメラも登場している。
【０００３】
例えば、フレームレートを変えて生成された動画像について、再生時に再生速度を容易に調整できる技術が開示されている（例えば、特許文献１）。特に、放送コンテンツにおいては、重要なシーンや強調したいシーンをスロー再生する手法が一般的に用いられている。ユーザ側においてもスロー再生という手法によって面白い映像効果を手軽に実現して、画質以外で映像の価値を高めることが可能となってきている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−１８０２９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、従来、ビデオカメラを有するユーザは、記録した動画情報を再生する際に、撮影した映像をそのまま再生する視聴方法が一般的であった。一部の上級者については、撮影したコンテンツに、テロップを挿入したりスロー再生をするなど種々の映像効果を編集により加えたりすることで、付加価値を高めて映像を楽しむことがなされている。しかし、上記の編集作業を行うためには、ソフトウェアやハードウェアなどのビデオ編集環境を整える必要があり、上級者であっても編集作業に長時間かかるという問題があった。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、スロー再生に適したシーンを検出してスロー再生することが可能な、新規かつ改良された再生制御装置、再生制御方法およびプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明のある観点によれば、動画像を再生する再生部と、再生部により再生された動画像フレームを動画像記憶部に所定時間分記録する記録部と、動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、特徴パターンテーブルの特徴パターンに対応する、動画像記憶部に記憶された動画像フレームに含まれる特徴パターンを抽出する抽出部と、抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、を備える、再生制御装置が提供される。
【０００７】
また、再生制御部は、特徴パターンテーブルの特徴パターンに対応する動画像をスロー再生させるようにしてもよい。
【０００８】
また、再生制御部は、パラメータテーブルの再生パラメータに基づいて、スロー再生速度、スロー再生時間およびスロー再生範囲を決定するようにしてもよい。
【０００９】
また、再生制御部は、特徴パターンテーブルの特徴パターンに対応する動画像のスロー再生時に、スロー再生の開始指示を入力させる開始指示画面を表示させるようにしてもよい。
【００１０】
また、再生制御部は、再生パラメータを含む開始指示画面を表示させるようにしてもよい。
【００１１】
また、再生制御部は、ユーザ操作に応じて変更された再生パラメータに基づいて、スロー再生を制御するようにしてもよい。
【００１２】
また、パラメータテーブルには、再生パラメータと動画像フレームとともに再生可能な音楽情報とが関連付けて記憶されており、再生制御部は、パラメータに含まれる音楽情報に基づいて、動画像フレームのスロー再生時に音楽情報を再生させるようにしてもよい。
【００１３】
また、上記課題を解決するために、本発明の別の観点によれば、動画像記憶部に所定時間分記録された動画像フレームの再生を制御する再生制御方法において、テーブル記憶部に記憶されている動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルの特徴パターンに対応する、動画像記憶部に記憶された動画像フレームに含まれる特徴パターンを抽出するステップと、抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部に記憶されている動画像フレームの再生を制御するステップと、を含む、再生制御方法が提供される。
【００１４】
また、上記課題を解決するために、本発明の別の観点によれば、コンピュータを、動画像を再生する再生部と、再生部により再生された動画像フレームを動画像記憶部に所定時間分記録する記録部と、動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、特徴パターンテーブルの特徴パターンに対応する、動画像記憶部に記憶された動画像フレームに含まれる特徴パターンを抽出する抽出部と、抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、を備える、再生制御装置として機能させる、プログラムが提供される。
【発明の効果】
【００１５】
以上説明したように本発明によれば、スロー再生に適したシーンを検出してスロー再生することができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態にかかる再生制御装置のハードウェア構成の一例を示した説明図である。
【図２】同実施形態にかかる再生制御装置の機能構成を示すブロック図である。
【図３】同実施形態にかかる特徴パターンテーブルの内容について説明する説明図である。
【図４】同実施形態にかかるユーザに提示する選択画面を説明する説明図である。
【図５】同実施形態にかかるパラメータテーブルの内容を説明する説明図である。
【図６】同実施形態にかかるスロー再生画面について説明する説明図である。
【図７】同実施形態にかかるロー再生の開始指示画面について説明する説明図である。
【図８】同実施形態にかかる動画像フレームの生成について説明する説明図である。
【図９】同実施形態にかかる再生制御装置の動作の詳細を示すフローチャートである。
【発明を実施するための形態】
【００１７】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１８】
また、以下に示す順序に従って、当該「発明を実施するための最良の形態」を説明する。
〔１〕本実施形態の目的
〔２〕再生制御装置のハードウェア構成
〔３〕再生制御装置の機能構成
〔４〕再生制御装置の動作の詳細
【００１９】
〔１〕本実施形態の目的
まず、本実施形態の目的について説明する。近年、民生用のビデオカメラが広く普及し、多くの一般家庭でビデオカメラを保有し、子供の成長記録や、各種イベント等日常的な生活を記録に残すことが一般的になってきている。ビデオカメラに求められる機能としては、表示装置へのハイビジョン化に伴う高画質化や、テープやＤＶＤからハードディスクへの長時間記録などが挙げられる。また、通常より高速なフレームレートで撮影して、再生時にスロー再生を行う機能を搭載したビデオカメラも登場している。
【００２０】
例えば、フレームレートを変えて生成された動画像について、再生時に再生速度を容易に調整できる技術が開示されている。特に、放送コンテンツにおいては、重要なシーンや強調したいシーンをスロー再生する手法が一般的に用いられている。ユーザ側においてもスロー再生という手法によって面白い映像効果を手軽に実現して、画質以外で映像の価値を高めることが可能となってきている。
【００２１】
ところで、従来、ビデオカメラを有するユーザは、記録した動画情報を再生する際に、撮影した映像をそのまま再生する視聴方法が一般的であった。一部の上級者については、撮影したコンテンツに、テロップを挿入したりスロー再生をするなど種々の映像効果を編集により加えたりすることで、付加価値を高めて映像を楽しむことがなされている。しかし、上記の編集作業を行うためには、ソフトウェアやハードウェアなどのビデオ編集環境を整える必要があり、上級者であっても編集作業に長時間かかるという問題があった。
【００２２】
そこで、上記のような問題を一着眼点として、本実施形態にかかる再生制御装置１０が創作されるに至った。本実施形態にかかる再生制御装置１０によれば、スロー再生に適したシーンを検出してスロー再生することができる。
【００２３】
ここで、再生制御装置１０の表示制御処理の概要について説明する。再生制御装置１０は、動画像の再生時に、一時的に動画像フレームの一部を蓄積しながら再生を行う。一時的に蓄積する動画像フレームから動画像の特徴を抽出して、スロー再生に効果的なシーンとして設定されている特徴パターンを参照する。そして、パターンマッチングすることによりスロー効果を付加するシーンを自動的に抽出する。スロー再生に効果的なシーンとは、例えば、運動会でのゴールの瞬間や、かけっこの転倒シーン、子供の泣く瞬間などが挙げられる。また、車窓からみた風景や、鳥が羽ばたく瞬間など印象に残るシーンが挙げられる。
【００２４】
そして、抽出したスロー効果を付加するシーンについて、自動的にスロー再生を行う。また、抽出したスロー効果を付加するシーンについては、スロー再生を促す文字や記号等の表示とともにユーザに提供するようにしてもよい。ユーザは、スロー再生を促す表示の提供を受けて、リモートコントローラ等の入力装置によりスロー再生を指示する。スロー再生を行う回数や時間等は、予め設定されたパラメータに基づいて抽出されたシーンに合った回数や時間などで再生される。再生パラメータは、ユーザ操作に応じて変更できるようにしてもよい。
【００２５】
また、通常、スロー再生の際には、音楽情報は再生されないことが一般的であるが、本実施形態では、動画像をスロー再生するとともに、予めセットされた音楽を再生することができる。例えば、効果的なシーンとして設定されている特徴パターンごとに、該シーンにふさわしい音楽情報を設定しておくようにしてもよい。これにより、スロー再生された映像によりいっそう印象的な効果を与えることが可能となる。スロー再生とともに再生される音楽情報は、ユーザにより追加的に設定されるようにしてもよい。
【００２６】
従来の編集操作では、編集する際にスロー再生に適したシーンを見つけ出す必要があった。特に、長時間撮影された動画像についてスロー再生に適したシーンを見つけ出すためには、動画像の頭から再生する必要があり相当な時間がかかってしまう。しかし、本実施形態にかかる再生制御装置１０は、撮影された動画像のなかから、スロー再生に適したシーンを自動的に抽出することができる。そして、再生時に抽出した動画像をスロー再生することにより、上記のような印象的なシーンを効果的に再生することが可能となる。また、スロー再生を行う際に、ユーザにスロー再生を行うか否かの選択を促すようにしてもよい。これにより、ユーザは自動的に抽出された印象的なシーンのなかから、所望のシーンについてスロー再生することが可能となる。
【００２７】
また、再生制御装置１０としては、ＰＣ（Ｐｅｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）を例示することができるが、ＰＣに限定されず、再生制御装置１０は、編集装置や再生装置等の映像機器であってもよい。本実施形態では、再生制御装置１０と撮像装置や映像記録装置とは別体の装置として構成したが、再生制御装置１０と撮像装置と一体の装置として構成したり、は映像記録装置と一体の装置として構成したりするようにしてもよい。本実施形態においては、再生制御装置１０とは別体の撮像装置によって撮像された映像等が外部から入力される構成となっている。
【００２８】
また、再生制御装置１０は、家庭用映像処理装置（ＤＶＤレコーダ、ビデオデッキなど）、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、家庭用ゲーム機器、家電機器などの情報処理装置であってもよい。また、携帯電話、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）、携帯用音楽再生装置、携帯用映像処理装置、携帯用ゲーム機器などの情報処理装置であってもよい。
【００２９】
〔２〕再生制御装置のハードウェア構成
以上、本実施形態の目的について説明した。次に、図１を参照して、再生制御装置１０のハードウェア構成について説明する。図１は、本実施形態にかかる再生制御装置１０のハードウェア構成の一例を示した説明図である。
【００３０】
再生制御装置１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３と、ホストバス１０４と、ブリッジ１０５と、外部バス１０６と、インタフェース１０７と、入力装置１０８と、出力装置１０９と、ストレージ装置（ＨＤＤ）１１０と、ドライブ１１１と、通信装置１１２とを備える。
【００３１】
ＣＰＵ１０１は、演算処理装置および制御装置として機能し、各種プログラムに従って再生制御装置１０内の動作全般を制御する。また、ＣＰＵ１０１は、マイクロプロセッサであってもよい。ＲＯＭ１０２は、ＣＰＵ１０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ１０３は、ＣＰＵ１０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバスなどから構成されるホストバス１０４により相互に接続されている。
【００３２】
ホストバス１０４は、ブリッジ１０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス１０６に接続されている。なお、必ずしもホストバス１０４、ブリッジ１０５および外部バス１０６を分離構成する必要はなく、一のバスにこれらの機能を実装してもよい。
【００３３】
入力装置１０８は、例えば、マウス、キーボード、タッチパネル、ボタン、マイク、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ１０１に出力する入力制御回路などから構成されている。再生制御装置１０のユーザは、該入力装置１０８を操作することにより、再生制御装置１０に対して各種のデータを入力したり処理動作を指示したりすることができる。
【００３４】
出力装置１０９は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｓｐｌａｙ）装置およびランプなどの表示装置と、スピーカおよびヘッドホンなどの音声出力装置で構成される。出力装置１０９は、例えば、再生されたコンテンツを出力する。具体的には、表示装置は再生された映像データ等の各種情報をテキストまたはイメージで表示する。一方、音声出力装置は、再生された音声データ等を音声に変換して出力する。
【００３５】
ストレージ装置１１０は、本実施形態にかかる再生制御装置１０の記憶部の一例として構成されたデータ格納用の装置であり、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含むことができる。ストレージ装置１１０は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）で構成される。このストレージ装置１１０は、ハードディスクを駆動し、ＣＰＵ１０１が実行するプログラムや各種データを格納する。
【００３６】
ドライブ１１１は、記憶媒体用リーダライタであり、再生制御装置１０に内蔵、あるいは外付けされる。ドライブ１１１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体１２０に記録されている情報を読み出して、ＲＡＭ１０３に出力する。
【００３７】
通信装置１１２は、例えば、通信網５０に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置１１２は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ワイヤレスＵＳＢ対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。
【００３８】
〔３〕再生制御装置の機能構成
以上、再生制御装置１０のハードウェア構成について説明した。次に、図２を参照して、再生制御装置１０の機能構成について説明する。図２は、再生制御装置１０の機能構成を示すブロック図である。図２に示したように、再生制御装置１０は、再生部１２２、記録部１２４、動画像記憶部１２６、テーブル記憶部１２８、入力部１３２、抽出部１３４、再生制御部１３６などを備える。
【００３９】
再生部１２２は、動画像を再生して、再生した動画像を記録部１２４に提供する機能を有する。再生部１２２により再生される動画像は、再生制御装置１０とは別体の記憶装置（図示せず）に記録されていてもよい。記憶装置は、テープ、ＨＤＤ等の磁気ディスク、ＣＤ、ＤＶＤ、ＢＤ等の光ディスク、メモリスティック、ＳＤカード、フラッシュメモリカード、ＳＳＤ等の半導体記録装置などを例示できる。また、再生部１２２により再生される動画像は、再生制御装置１０とは別体の撮像装置等から入力されてもよい。再生部１２２は、記憶装置に記憶されている動画像の情報もしくは撮像装置等から入力される動画像の情報から映像信号を再生して記録部１２４に提供する。
【００４０】
記録部１２４は、再生部１２２から提供された動画像の情報を動画像記憶部１２６に所定時間分記録する機能を有する。すなわち、記録部１２４は、所定時間分の動画像フレームを動画像記憶部１２６に記録する。
【００４１】
テーブル記憶部１２８には、特徴パターンテーブル１２９、パラメータテーブル１３０などが記憶されている。特徴パターンテーブル１２９は、所定のシーン毎に特徴パターンを対応付けているテーブルである。パラメータテーブル１３０は、特徴パターンに対応する再生パラメータを対応づけているテーブルである。特徴パターンとは、再生された動画像に含まれる特徴的なシーンなどであって、スロー効果を付加するのに適したシーンである。
【００４２】
ここで、図３を参照して、特徴パターンテーブル１２９の内容について説明する。図３は、特徴パターンテーブル１２０の内容について説明する説明図である。例えば、図３に示したように、スロー効果を付加するのに適したシーンとして運動会が挙げられる。図３に示したように、運動会の特徴パターンは、例えば、時間情報として動画像を撮影した時期が１０月１０日前後、音情報として大勢の子供の声、色情報として青空と土色、また、被写体が紅白帽を被っている、人の数が多いなどが挙げられる。また、入学式の場合には、時間情報として動画像を撮影した時期が４月、音情報として室内反響や大勢の人の声、桜の木の画像が含まれているなどが挙げられる。
【００４３】
また、顔検出技術を用いて、被写体の表情の変化の情報を特徴パターンのひとつとしてもよい。例えば、子供の泣く瞬間のシーンについて、泣き顔の表情の情報と泣き声の音声情報を特徴パターンとしてもよい。また、車窓から見た風景のシーンについて、風景画像の速度ベクトルの大きさを特徴パターンとしてもよい。同様に、被写体の動作の運動パラメータを特徴パターンとしてもよい。例えば、鳥が羽ばたくシーンについて、被写体の運動パラメータと、羽音の音声情報を特徴パターンとしてもよい。
【００４４】
また、結婚式のシーンでは、音情報として賛美歌等の音声情報を特徴パターンとしてもよいし、フラッシュによる画面の一部の輝度変化を特徴パターンとしてもよい。また、コマやフラフープなどの物体が回転するシーンの場合には、特定パターンの繰り返し情報を特徴パターンとしてもよい。また、再生された動画像から認識される文字情報を特定パターンとするようにしてもよい。
【００４５】
後述する抽出部１３４は、シーン毎に設定された特定パターンに基づいて、スロー再生に適した動画像を抽出することとなる。抽出部１３４によるスロー再生に適した動画像の抽出については、後で詳細に説明する。
【００４６】
また、どのようなシーンをスロー再生するかについて、予めユーザにより設定するようにしてもよい。例えば、図４に示したような選択画面をユーザに提示するようにしてもよい。図４は、ユーザに提示する選択画面の一例である。例えば、選択画面１３００において、シーン１３０１、被写体１３０２、動作１３０３などから所望の項目を選択されるようにする。例えば、シーン１３０１として、運動会、旅行、入学式、卒業式、スポーツ、結婚式、車窓などからスロー再生にしたいシーンを選択させるようにしてもよい。
【００４７】
また、例えば、被写体１３０２として、本人、妻、子供、動物、乗り物などからスロー再生にしたい被写体を選択させるようにしてもよい。また、動作１３０３として、表情変化、転倒、走る、飛ぶ、スイングなどからスロー再生にしたい動作を選択させるようにしてもよい。ユーザにより選択された項目について、特徴パターンテーブル１２９が生成されるようにしてもよい。
【００４８】
次に、図５を参照して、パラメータテーブル１３０の内容について説明する。図５は、パラメータテーブル１３０の内容を説明する説明図である。図５に示したように、パラメータテーブル１３０には、スロー再生に適したシーン毎に、どのようにスロー再生するかについてのスロー再生パラメータが設定されている。例えば、「運動会」の「子供」（被写体）が「走る」（動作）シーンであった場合には、再生パラメータは、再生速度２倍、再生回数１回、再生時間１０秒、再生開始位置５秒前、音楽ＯＮとなる。したがって、後述する再生制御部１３６は、この再生パラメータに基づいて、動画像のスロー再生を行うこととなる。再生制御部１３６による動画像のスロー再生については、後で詳細に説明する。
【００４９】
図２に戻り、再生制御装置１０の機能構成の説明を続ける。入力部１３２は、ユーザ操作の入力を受け付ける機能を有し、上記した入力装置１０８の一例である。入力部１３２は、例えば、ユーザ操作により、後述するスロー再生開始指示を受け付ける。
【００５０】
抽出部１３４は、特徴パターンテーブル１２９の特徴パターンに対応する、動画像記憶部１２６に記憶された動画像フレームに含まれる特徴パターンを抽出する機能を有する。上記したように、動画像記憶部１２６には、所定時間分の動画像フレームを記録されている。したがって、抽出部１３４は、所定時間分の動画像フレームから、動画像の特徴的なパターンを抽出する。そして抽出した特徴的なパターンと、特徴パターンテーブル１２９に記憶されている特徴パターンとを比較する。動画像から抽出した特徴的なパターンと特徴パターンテーブル１２９に記憶されている特徴パターンとが一致する場合には、当該動画像の情報を再生制御部１３６に提供する。
【００５１】
動画像の特徴的なパターンの抽出は、予め特徴的なパターンが学習された特徴抽出器によって行うようにしてもよい。すなわち、シーンに関わらず、笑顔を検出したり、特定の個人の顔を検出したり、所定の速さより早い物体の動きを検出したり、輝度の変化を検出したりした場合には、これらを特徴的なパターンとして抽出する。
【００５２】
また、上記したように、ユーザにより予め特徴パターンが設定された場合には、動画像から抽出した特徴的なパターンとユーザにより予め設定された特徴パターンが一致するか否かを判定する。ユーザによる特徴パターンの選択は、動画像の再生前に行うようにしてもよいし、動画像の再生中にいつでも行うことができるようにしてもよい。ユーザにより特徴パターンが選択されることにより、特徴パターンテーブル１２９に記憶されているすべての特徴的なシーンについてではなく、ユーザ所望のシーンにマッチングする動画像が抽出されることとなる。
【００５３】
また、撮影時の手振れや操作ミスなどによる撮影時の効果が動画像の特徴パターンとして認識されてしまう場合が考えられる。この場合、例えば、予めフォーカスが合ってない場合の動画像の特徴や手振れしている場合の動画像の特徴を記憶しておき、これらの動画像の特徴と一致する場合には、手振れや操作ミスが生じた動画像として除外するようにしてもよい。フォーカスが合ってない場合の動画像の特徴は、例えば、空間周波数などから検出することが可能である。また、手振れしているシーンの特徴は、映像全体の上下方向の動きベクトルにより検出することが可能である。
【００５４】
再生制御部１３６は、抽出部１３４から提供された動画像フレームを、該動画像の特徴パターンに対応する再生パラメータに基づいて表示装置２０に再生させる機能を有する。上記したように、パラメータテーブル１３０には、スロー再生に効果的なシーンの特徴パターンに再生パラメータが対応づけられている。したがって、再生制御部１３６は、抽出部１３４から提供された動画像フレームをスロー再生させる。例えば、「運動会」で「子供」が「走る」シーンは「２倍」の速度で再生することが設定されていた場合には、動画像フレームを２倍の速度でスロー再生させる。同様に、再生する回数、再生時間、再生開始位置についても再生パラメータに設定されている回数および時間等に基づいて決定してスロー再生させる。
【００５５】
図６に、再生制御部１３６により表示装置２０に表示されるスロー再生画面について説明する。図６は、表示装置２０に表示されるスロー再生画面について説明する説明図である。図６は、運動会で子供が走るシーンがスロー再生されている表示画面の一例である。図６に示したように、表示画面３００には、赤と白の帽子を被った４人の子供が走っている動画像３０４が表示され、表示画面３００の上部には、「ＳＬＯＷ！！」の文言が表示されている。
【００５６】
表示画面３００の上部に「ＳＬＯＷ！！」が表示されていることにより、動画像３０４がスロー再生されていることがわかる。上記したように、動画像３０４の再生速度、再生時間および再生開始位置および再生終了位置を示す再生範囲については、パラメータテーブル１３０に記憶されている再生パラメータに基づいて決定される。運動会において子供が走るシーンがスロー再生されることにより、運動会を撮像して通常通り再生するよりも印象的なシーンをより効果的に再生することが可能となる。
【００５７】
また、再生制御部１３６は、動画像のスロー再生時に、ユーザによりスロー再生の開始指示を入力させる開始指示画面を表示させるようにしてもよい。ここで、図７を参照して、スロー再生の開始指示画面について説明する。図７は、スロー再生の開始指示画面について説明する説明図である。図７に示したように、例えば、表示画面３１０に結婚式のシーンの動画像が特徴パターンテーブルに記憶されている特徴パターンと一致した場合に、当該結婚式のシーンの動画像がスロー再生に適した画面としてスロー再生される。このとき、表示画面の上部にスロー再生を開始するか否かを選択するための開始指示画面３１２を表示させるようにしてもよい。
【００５８】
これにより、スロー再生に適した画面が抽出部１３４により抽出され、再生制御部１３６により再生される際に、ユーザの選択に応じてスロー再生させることができる。したがって、特徴的なシーンのすべてがスロー再生されるのではなく、ユーザに選択された所望の特徴的なシーンのみスロー再生されることとなる。結婚式の動画像１３１とともに、開始指示画面３１２を提示されたユーザは、スロー再生をさせる場合には「Ｙｅｓ」を選択し、スロー再生をさせない場合には「Ｎｏ」を選択する。
【００５９】
ユーザ入力により「Ｙｅｓ」が選択された場合には、再生制御部１３６は、再生パラメータに基づいて結婚式の動画像１３１をスロー再生させる。また、ユーザ入力により「Ｎｏ」が選択された場合には、再生制御部１３６は、結婚式の動画像１３１を通常の速度で再生させる。また、再生制御部１３６は、スロー再生に適した動画像とともに、再生パラメータを含む開始指示画面を表示させるようにしてもよい。例えば、動画像とともに再生速度、再生回数、再生時間等を表示して、ユーザにより選択させるようにしてもよい。例えば、各シーンに適した再生速度等のパラメータの数値をデフォルトとして表示画面に表示させ、ユーザにより当該数値を増減させるようにしてもよい。また、スロー再生中に画面をタッチしたりキーボードの矢印キーを押下したりして、パラメータの数値を変更させるようにしてもよい。
【００６０】
再生制御部１３６は、ユーザにより再生速度等のパラメータの数値が変更された場合には、その変更されたパラメータの数値に基づいて動画像をスロー再生させる。また、動画像に適した音楽情報を提供するパラメータが設定されている場合には、動画像のスロー再生ともに設定されている音楽情報を再生させるか否かを選択させるようにしてもよい。さらに予め設定された音楽情報を、ユーザ操作に応じて変更させるようにしてもよい。また、ユーザ操作に応じて変更された音楽情報を、新たに特徴的な動画像のシーンに関連付けて記憶させるようにしてもよい。
【００６１】
次に、再生制御部１３６による動画像フレームの生成について説明する。図８は、再生制御部１３６による動画像フレームの生成について説明する説明図である。図８に示したように、例えば、再生制御部１３６は、動画像フレームを２倍の速度で再生する場合には、スロー再生を開始する動画像フレームからスロー再生を終了する動画像フレームについって、同じフレームを２枚ずつ生成して表示装置２０に提供する。
【００６２】
例えば、動画像フレーム「１」〜「６」までの範囲でスロー再生する場合には、「１」〜「６」までの動画像フレームを２倍生成して、「１１２２３３４４５５６６」の順で再生させるようにする。これにより、「１」〜「６」までの範囲の動画像が表示装置２０において２倍の速度でスロー再生されることとなる。同様に、４倍の速度で再生させる場合には、スロー再生させる動画像フレームを４倍生成して表示装置２０に提供する。上記したように、スロー再生させる速度は、スロー再生中に変更するようにしもよい。また、スロー再生開始後に、スロー再生を中止して、通常の速度で再生させるようにしてもよい。
【００６３】
〔４〕再生制御装置の動作の詳細
以上、再生制御装置１０の機能構成について説明した。次に、図９を参照して、再生制御装置１０の動作の詳細について説明する。図９は、再生制御装置１０の動作の詳細を示すフローチャートである。
【００６４】
図９に示したように、まず、再生部１２２は、磁気ディスク等の記憶媒体に記憶されている動画像の情報を再生する（Ｓ１０２）。上記したように、ステップＳ１０２において再生される動画像は、記憶媒体に記憶されていてもよいし、再生制御装置１０とは別体の装置からストリーム配信等により入力されてもよい。
【００６５】
そして、記録部１２４は、動画像記憶部１２６に映像データ（動画像フレーム）を蓄積する（Ｓ１０４）。抽出部１３４は、ステップＳ１０４において抽出された映像データから特徴的な画像部分を抽出する（Ｓ１０６）。ステップＳ１０６において抽出する特徴的な画像部分とは、上記したように、例えば、顔の表情を検出する特徴抽出器により笑顔や泣き顔を含む画像や、特定の個人の顔を認識している特徴抽出器により特定の個人の顔を含む画像などである。また、物体の動きを検出する特徴抽出器により、所定の速さより早い動きをする物体を含む画像を抽出してもよい。また輝度の変化量の大きい画像を抽出して、フラッシュが多く焚かれている画像を抽出してもよい。
【００６６】
次に、ステップＳ１０６において抽出した特徴パターンと、特徴パターンテーブル１２９に記憶されている特徴パターンとを比較する（Ｓ１０８）。上記したように、特徴パターンテーブル１２９には、スロー再生に適したシーンの特徴パターンが記憶されている。したがって、この特徴パターンと一致する特徴パターンを含む動画像は、スロー再生に適した動画像となる。ステップＳ１０８において抽出された動画像の特徴パターンと特徴パターンテーブル１２９の特徴パターンとを比較した結果、当該映像データがスロー再生すべきデータか否かを判定する（Ｓ１１０）。
【００６７】
ステップＳ１１０において、抽出部１３４により抽出された映像データがスロー再生すべきデータであると判定された場合には、自動再生が設定されているか否かを判定する（Ｓ１１２）。ステップＳ１１２において、自動再生が設定されているか否かは、パラメータテーブルの各シーンの再生テーブルとともに設定してもよいし、特徴パターンテーブルの各シーンに関連付けて自動再生の可否を設定するようにしてもよい。ステップＳ１１０において、抽出部１３４により抽出された映像データがスロー再生すべきデータではないと判定された場合には、ステップＳ１２０の処理を実行する。ステップＳ１２０の処理については後述する。
【００６８】
ステップＳ１１２において、抽出部１３４により抽出された映像データが、自動再生が設定されている映像データであると判定された場合には、パラメータテーブル１３０に基づいて、スロー再生の再生速度、再生回数、再生開始位置、再生時間等を設定する（Ｓ１１４）。
【００６９】
ステップＳ１１２において、抽出部１３４により抽出された映像データが、自動再生が設定されていない映像データであると判定された場合には、表示画面にスロー再生を促す表示を出力する（Ｓ１１６）。ステップＳ１１６においては、スロー再生に適した映像データとともに、スロー再生を促す表示を表示させてもよい。そして、ユーザによりスロー再生入力があったか否かを判定する（Ｓ１１８）。
【００７０】
そして、ステップＳ１１８において、ユーザによりスロー再生入力があったと判定された場合には、パラメータテーブル１３０に基づいて、スロー再生の再生速度、再生回数、再生開始位置、再生時間等を設定する（Ｓ１１４）。ステップＳ１１８において、ユーザによりスロー再生入力がなかったと判定された場合には、ステップＳ１２０の処理を実行する。
【００７１】
そして、ステップＳ１２０において、映像再生処理を実行する（Ｓ１２０）。ステップＳ１２０においては、上記したように、ステップＳ１１４においてスロー再生速度等のスロー再生パラメータが設定された場合には、映像データをスロー再生する。一方、スロー再生速度等のスロー再生パラメータが設定されなかった場合には、映像データを通常の速度で再生する。そして、すべての映像データを再生したか否かを判定して（Ｓ１２２）、すべての映像データを再生していない場合には、ステップＳ１０２の処理に戻る。ステップＳ１２２において、すべての映像データを再生したと判定された場合には、処理を終了する。
【００７２】
以上再生制御装置１０の動作の詳細について説明した。本実施形態によれば、再生された動画像フレームから特徴パターンテーブルに対応する特徴パターンを抽出して、当該特徴パターンに対応する再生パラメータに基づいて動画像フレームをスロー再生することが可能となる。これにより、自動的にスロー再生に適した動画像を抽出して、当該動画像のシーンに合った再生速度等により動画像を再生することが可能となる。ユーザは、撮像した動画像の編集、加工等をしなくとも、自動的に印象的なシーンをスロー再生させて、付加価値の高い再生を行うことが可能となる。
【００７３】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【００７４】
例えば、本明細書の再生制御装置１０の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、再生制御装置１０の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【００７５】
また、再生制御装置１０に内蔵されるＣＰＵ１０１、ＲＯＭ１０２およびＲＡＭ１０３などのハードウェアを、上述した再生制御装置１０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。また、図２の機能ブロック図で示したそれぞれの機能ブロックをハードウェアで構成することで、一連の処理をハードウェアで実現することもできる。
【符号の説明】
【００７６】
１０ 再生制御装置
１２２ 再生部
１２４ 記録部
１２６ 動画像記憶部
１２８ テーブル記憶部
１２９ 特徴パターンテーブル
１３０ パラメータテーブル
１３２ 入力部
１３４ 抽出部
１３６ 再生制御部
【技術分野】
【０００１】
本発明は、再生制御装置、再生制御方法およびプログラムに関する。
【背景技術】
【０００２】
近年、民生用のビデオカメラが広く普及し、多くの一般家庭でビデオカメラを保有し、子供の成長記録や、各種イベント等日常的な生活を記録に残すことが一般的になってきている。ビデオカメラに求められる機能としては、表示装置へのハイビジョン化に伴う高画質化や、テープやＤＶＤからハードディスクへの長時間記録などが挙げられる。また、通常より高速なフレームレートで撮影して、再生時にスロー再生を行う機能を搭載したビデオカメラも登場している。
【０００３】
例えば、フレームレートを変えて生成された動画像について、再生時に再生速度を容易に調整できる技術が開示されている（例えば、特許文献１）。特に、放送コンテンツにおいては、重要なシーンや強調したいシーンをスロー再生する手法が一般的に用いられている。ユーザ側においてもスロー再生という手法によって面白い映像効果を手軽に実現して、画質以外で映像の価値を高めることが可能となってきている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−１８０２９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、従来、ビデオカメラを有するユーザは、記録した動画情報を再生する際に、撮影した映像をそのまま再生する視聴方法が一般的であった。一部の上級者については、撮影したコンテンツに、テロップを挿入したりスロー再生をするなど種々の映像効果を編集により加えたりすることで、付加価値を高めて映像を楽しむことがなされている。しかし、上記の編集作業を行うためには、ソフトウェアやハードウェアなどのビデオ編集環境を整える必要があり、上級者であっても編集作業に長時間かかるという問題があった。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、スロー再生に適したシーンを検出してスロー再生することが可能な、新規かつ改良された再生制御装置、再生制御方法およびプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明のある観点によれば、動画像を再生する再生部と、再生部により再生された動画像フレームを動画像記憶部に所定時間分記録する記録部と、動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、特徴パターンテーブルの特徴パターンに対応する、動画像記憶部に記憶された動画像フレームに含まれる特徴パターンを抽出する抽出部と、抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、を備える、再生制御装置が提供される。
【０００７】
また、再生制御部は、特徴パターンテーブルの特徴パターンに対応する動画像をスロー再生させるようにしてもよい。
【０００８】
また、再生制御部は、パラメータテーブルの再生パラメータに基づいて、スロー再生速度、スロー再生時間およびスロー再生範囲を決定するようにしてもよい。
【０００９】
また、再生制御部は、特徴パターンテーブルの特徴パターンに対応する動画像のスロー再生時に、スロー再生の開始指示を入力させる開始指示画面を表示させるようにしてもよい。
【００１０】
また、再生制御部は、再生パラメータを含む開始指示画面を表示させるようにしてもよい。
【００１１】
また、再生制御部は、ユーザ操作に応じて変更された再生パラメータに基づいて、スロー再生を制御するようにしてもよい。
【００１２】
また、パラメータテーブルには、再生パラメータと動画像フレームとともに再生可能な音楽情報とが関連付けて記憶されており、再生制御部は、パラメータに含まれる音楽情報に基づいて、動画像フレームのスロー再生時に音楽情報を再生させるようにしてもよい。
【００１３】
また、上記課題を解決するために、本発明の別の観点によれば、動画像記憶部に所定時間分記録された動画像フレームの再生を制御する再生制御方法において、テーブル記憶部に記憶されている動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルの特徴パターンに対応する、動画像記憶部に記憶された動画像フレームに含まれる特徴パターンを抽出するステップと、抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部に記憶されている動画像フレームの再生を制御するステップと、を含む、再生制御方法が提供される。
【００１４】
また、上記課題を解決するために、本発明の別の観点によれば、コンピュータを、動画像を再生する再生部と、再生部により再生された動画像フレームを動画像記憶部に所定時間分記録する記録部と、動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、特徴パターンテーブルの特徴パターンに対応する、動画像記憶部に記憶された動画像フレームに含まれる特徴パターンを抽出する抽出部と、抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、を備える、再生制御装置として機能させる、プログラムが提供される。
【発明の効果】
【００１５】
以上説明したように本発明によれば、スロー再生に適したシーンを検出してスロー再生することができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態にかかる再生制御装置のハードウェア構成の一例を示した説明図である。
【図２】同実施形態にかかる再生制御装置の機能構成を示すブロック図である。
【図３】同実施形態にかかる特徴パターンテーブルの内容について説明する説明図である。
【図４】同実施形態にかかるユーザに提示する選択画面を説明する説明図である。
【図５】同実施形態にかかるパラメータテーブルの内容を説明する説明図である。
【図６】同実施形態にかかるスロー再生画面について説明する説明図である。
【図７】同実施形態にかかるロー再生の開始指示画面について説明する説明図である。
【図８】同実施形態にかかる動画像フレームの生成について説明する説明図である。
【図９】同実施形態にかかる再生制御装置の動作の詳細を示すフローチャートである。
【発明を実施するための形態】
【００１７】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１８】
また、以下に示す順序に従って、当該「発明を実施するための最良の形態」を説明する。
〔１〕本実施形態の目的
〔２〕再生制御装置のハードウェア構成
〔３〕再生制御装置の機能構成
〔４〕再生制御装置の動作の詳細
【００１９】
〔１〕本実施形態の目的
まず、本実施形態の目的について説明する。近年、民生用のビデオカメラが広く普及し、多くの一般家庭でビデオカメラを保有し、子供の成長記録や、各種イベント等日常的な生活を記録に残すことが一般的になってきている。ビデオカメラに求められる機能としては、表示装置へのハイビジョン化に伴う高画質化や、テープやＤＶＤからハードディスクへの長時間記録などが挙げられる。また、通常より高速なフレームレートで撮影して、再生時にスロー再生を行う機能を搭載したビデオカメラも登場している。
【００２０】
例えば、フレームレートを変えて生成された動画像について、再生時に再生速度を容易に調整できる技術が開示されている。特に、放送コンテンツにおいては、重要なシーンや強調したいシーンをスロー再生する手法が一般的に用いられている。ユーザ側においてもスロー再生という手法によって面白い映像効果を手軽に実現して、画質以外で映像の価値を高めることが可能となってきている。
【００２１】
ところで、従来、ビデオカメラを有するユーザは、記録した動画情報を再生する際に、撮影した映像をそのまま再生する視聴方法が一般的であった。一部の上級者については、撮影したコンテンツに、テロップを挿入したりスロー再生をするなど種々の映像効果を編集により加えたりすることで、付加価値を高めて映像を楽しむことがなされている。しかし、上記の編集作業を行うためには、ソフトウェアやハードウェアなどのビデオ編集環境を整える必要があり、上級者であっても編集作業に長時間かかるという問題があった。
【００２２】
そこで、上記のような問題を一着眼点として、本実施形態にかかる再生制御装置１０が創作されるに至った。本実施形態にかかる再生制御装置１０によれば、スロー再生に適したシーンを検出してスロー再生することができる。
【００２３】
ここで、再生制御装置１０の表示制御処理の概要について説明する。再生制御装置１０は、動画像の再生時に、一時的に動画像フレームの一部を蓄積しながら再生を行う。一時的に蓄積する動画像フレームから動画像の特徴を抽出して、スロー再生に効果的なシーンとして設定されている特徴パターンを参照する。そして、パターンマッチングすることによりスロー効果を付加するシーンを自動的に抽出する。スロー再生に効果的なシーンとは、例えば、運動会でのゴールの瞬間や、かけっこの転倒シーン、子供の泣く瞬間などが挙げられる。また、車窓からみた風景や、鳥が羽ばたく瞬間など印象に残るシーンが挙げられる。
【００２４】
そして、抽出したスロー効果を付加するシーンについて、自動的にスロー再生を行う。また、抽出したスロー効果を付加するシーンについては、スロー再生を促す文字や記号等の表示とともにユーザに提供するようにしてもよい。ユーザは、スロー再生を促す表示の提供を受けて、リモートコントローラ等の入力装置によりスロー再生を指示する。スロー再生を行う回数や時間等は、予め設定されたパラメータに基づいて抽出されたシーンに合った回数や時間などで再生される。再生パラメータは、ユーザ操作に応じて変更できるようにしてもよい。
【００２５】
また、通常、スロー再生の際には、音楽情報は再生されないことが一般的であるが、本実施形態では、動画像をスロー再生するとともに、予めセットされた音楽を再生することができる。例えば、効果的なシーンとして設定されている特徴パターンごとに、該シーンにふさわしい音楽情報を設定しておくようにしてもよい。これにより、スロー再生された映像によりいっそう印象的な効果を与えることが可能となる。スロー再生とともに再生される音楽情報は、ユーザにより追加的に設定されるようにしてもよい。
【００２６】
従来の編集操作では、編集する際にスロー再生に適したシーンを見つけ出す必要があった。特に、長時間撮影された動画像についてスロー再生に適したシーンを見つけ出すためには、動画像の頭から再生する必要があり相当な時間がかかってしまう。しかし、本実施形態にかかる再生制御装置１０は、撮影された動画像のなかから、スロー再生に適したシーンを自動的に抽出することができる。そして、再生時に抽出した動画像をスロー再生することにより、上記のような印象的なシーンを効果的に再生することが可能となる。また、スロー再生を行う際に、ユーザにスロー再生を行うか否かの選択を促すようにしてもよい。これにより、ユーザは自動的に抽出された印象的なシーンのなかから、所望のシーンについてスロー再生することが可能となる。
【００２７】
また、再生制御装置１０としては、ＰＣ（Ｐｅｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）を例示することができるが、ＰＣに限定されず、再生制御装置１０は、編集装置や再生装置等の映像機器であってもよい。本実施形態では、再生制御装置１０と撮像装置や映像記録装置とは別体の装置として構成したが、再生制御装置１０と撮像装置と一体の装置として構成したり、は映像記録装置と一体の装置として構成したりするようにしてもよい。本実施形態においては、再生制御装置１０とは別体の撮像装置によって撮像された映像等が外部から入力される構成となっている。
【００２８】
また、再生制御装置１０は、家庭用映像処理装置（ＤＶＤレコーダ、ビデオデッキなど）、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、家庭用ゲーム機器、家電機器などの情報処理装置であってもよい。また、携帯電話、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）、携帯用音楽再生装置、携帯用映像処理装置、携帯用ゲーム機器などの情報処理装置であってもよい。
【００２９】
〔２〕再生制御装置のハードウェア構成
以上、本実施形態の目的について説明した。次に、図１を参照して、再生制御装置１０のハードウェア構成について説明する。図１は、本実施形態にかかる再生制御装置１０のハードウェア構成の一例を示した説明図である。
【００３０】
再生制御装置１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３と、ホストバス１０４と、ブリッジ１０５と、外部バス１０６と、インタフェース１０７と、入力装置１０８と、出力装置１０９と、ストレージ装置（ＨＤＤ）１１０と、ドライブ１１１と、通信装置１１２とを備える。
【００３１】
ＣＰＵ１０１は、演算処理装置および制御装置として機能し、各種プログラムに従って再生制御装置１０内の動作全般を制御する。また、ＣＰＵ１０１は、マイクロプロセッサであってもよい。ＲＯＭ１０２は、ＣＰＵ１０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ１０３は、ＣＰＵ１０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバスなどから構成されるホストバス１０４により相互に接続されている。
【００３２】
ホストバス１０４は、ブリッジ１０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス１０６に接続されている。なお、必ずしもホストバス１０４、ブリッジ１０５および外部バス１０６を分離構成する必要はなく、一のバスにこれらの機能を実装してもよい。
【００３３】
入力装置１０８は、例えば、マウス、キーボード、タッチパネル、ボタン、マイク、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ１０１に出力する入力制御回路などから構成されている。再生制御装置１０のユーザは、該入力装置１０８を操作することにより、再生制御装置１０に対して各種のデータを入力したり処理動作を指示したりすることができる。
【００３４】
出力装置１０９は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｓｐｌａｙ）装置およびランプなどの表示装置と、スピーカおよびヘッドホンなどの音声出力装置で構成される。出力装置１０９は、例えば、再生されたコンテンツを出力する。具体的には、表示装置は再生された映像データ等の各種情報をテキストまたはイメージで表示する。一方、音声出力装置は、再生された音声データ等を音声に変換して出力する。
【００３５】
ストレージ装置１１０は、本実施形態にかかる再生制御装置１０の記憶部の一例として構成されたデータ格納用の装置であり、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含むことができる。ストレージ装置１１０は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）で構成される。このストレージ装置１１０は、ハードディスクを駆動し、ＣＰＵ１０１が実行するプログラムや各種データを格納する。
【００３６】
ドライブ１１１は、記憶媒体用リーダライタであり、再生制御装置１０に内蔵、あるいは外付けされる。ドライブ１１１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体１２０に記録されている情報を読み出して、ＲＡＭ１０３に出力する。
【００３７】
通信装置１１２は、例えば、通信網５０に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置１１２は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ワイヤレスＵＳＢ対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。
【００３８】
〔３〕再生制御装置の機能構成
以上、再生制御装置１０のハードウェア構成について説明した。次に、図２を参照して、再生制御装置１０の機能構成について説明する。図２は、再生制御装置１０の機能構成を示すブロック図である。図２に示したように、再生制御装置１０は、再生部１２２、記録部１２４、動画像記憶部１２６、テーブル記憶部１２８、入力部１３２、抽出部１３４、再生制御部１３６などを備える。
【００３９】
再生部１２２は、動画像を再生して、再生した動画像を記録部１２４に提供する機能を有する。再生部１２２により再生される動画像は、再生制御装置１０とは別体の記憶装置（図示せず）に記録されていてもよい。記憶装置は、テープ、ＨＤＤ等の磁気ディスク、ＣＤ、ＤＶＤ、ＢＤ等の光ディスク、メモリスティック、ＳＤカード、フラッシュメモリカード、ＳＳＤ等の半導体記録装置などを例示できる。また、再生部１２２により再生される動画像は、再生制御装置１０とは別体の撮像装置等から入力されてもよい。再生部１２２は、記憶装置に記憶されている動画像の情報もしくは撮像装置等から入力される動画像の情報から映像信号を再生して記録部１２４に提供する。
【００４０】
記録部１２４は、再生部１２２から提供された動画像の情報を動画像記憶部１２６に所定時間分記録する機能を有する。すなわち、記録部１２４は、所定時間分の動画像フレームを動画像記憶部１２６に記録する。
【００４１】
テーブル記憶部１２８には、特徴パターンテーブル１２９、パラメータテーブル１３０などが記憶されている。特徴パターンテーブル１２９は、所定のシーン毎に特徴パターンを対応付けているテーブルである。パラメータテーブル１３０は、特徴パターンに対応する再生パラメータを対応づけているテーブルである。特徴パターンとは、再生された動画像に含まれる特徴的なシーンなどであって、スロー効果を付加するのに適したシーンである。
【００４２】
ここで、図３を参照して、特徴パターンテーブル１２９の内容について説明する。図３は、特徴パターンテーブル１２０の内容について説明する説明図である。例えば、図３に示したように、スロー効果を付加するのに適したシーンとして運動会が挙げられる。図３に示したように、運動会の特徴パターンは、例えば、時間情報として動画像を撮影した時期が１０月１０日前後、音情報として大勢の子供の声、色情報として青空と土色、また、被写体が紅白帽を被っている、人の数が多いなどが挙げられる。また、入学式の場合には、時間情報として動画像を撮影した時期が４月、音情報として室内反響や大勢の人の声、桜の木の画像が含まれているなどが挙げられる。
【００４３】
また、顔検出技術を用いて、被写体の表情の変化の情報を特徴パターンのひとつとしてもよい。例えば、子供の泣く瞬間のシーンについて、泣き顔の表情の情報と泣き声の音声情報を特徴パターンとしてもよい。また、車窓から見た風景のシーンについて、風景画像の速度ベクトルの大きさを特徴パターンとしてもよい。同様に、被写体の動作の運動パラメータを特徴パターンとしてもよい。例えば、鳥が羽ばたくシーンについて、被写体の運動パラメータと、羽音の音声情報を特徴パターンとしてもよい。
【００４４】
また、結婚式のシーンでは、音情報として賛美歌等の音声情報を特徴パターンとしてもよいし、フラッシュによる画面の一部の輝度変化を特徴パターンとしてもよい。また、コマやフラフープなどの物体が回転するシーンの場合には、特定パターンの繰り返し情報を特徴パターンとしてもよい。また、再生された動画像から認識される文字情報を特定パターンとするようにしてもよい。
【００４５】
後述する抽出部１３４は、シーン毎に設定された特定パターンに基づいて、スロー再生に適した動画像を抽出することとなる。抽出部１３４によるスロー再生に適した動画像の抽出については、後で詳細に説明する。
【００４６】
また、どのようなシーンをスロー再生するかについて、予めユーザにより設定するようにしてもよい。例えば、図４に示したような選択画面をユーザに提示するようにしてもよい。図４は、ユーザに提示する選択画面の一例である。例えば、選択画面１３００において、シーン１３０１、被写体１３０２、動作１３０３などから所望の項目を選択されるようにする。例えば、シーン１３０１として、運動会、旅行、入学式、卒業式、スポーツ、結婚式、車窓などからスロー再生にしたいシーンを選択させるようにしてもよい。
【００４７】
また、例えば、被写体１３０２として、本人、妻、子供、動物、乗り物などからスロー再生にしたい被写体を選択させるようにしてもよい。また、動作１３０３として、表情変化、転倒、走る、飛ぶ、スイングなどからスロー再生にしたい動作を選択させるようにしてもよい。ユーザにより選択された項目について、特徴パターンテーブル１２９が生成されるようにしてもよい。
【００４８】
次に、図５を参照して、パラメータテーブル１３０の内容について説明する。図５は、パラメータテーブル１３０の内容を説明する説明図である。図５に示したように、パラメータテーブル１３０には、スロー再生に適したシーン毎に、どのようにスロー再生するかについてのスロー再生パラメータが設定されている。例えば、「運動会」の「子供」（被写体）が「走る」（動作）シーンであった場合には、再生パラメータは、再生速度２倍、再生回数１回、再生時間１０秒、再生開始位置５秒前、音楽ＯＮとなる。したがって、後述する再生制御部１３６は、この再生パラメータに基づいて、動画像のスロー再生を行うこととなる。再生制御部１３６による動画像のスロー再生については、後で詳細に説明する。
【００４９】
図２に戻り、再生制御装置１０の機能構成の説明を続ける。入力部１３２は、ユーザ操作の入力を受け付ける機能を有し、上記した入力装置１０８の一例である。入力部１３２は、例えば、ユーザ操作により、後述するスロー再生開始指示を受け付ける。
【００５０】
抽出部１３４は、特徴パターンテーブル１２９の特徴パターンに対応する、動画像記憶部１２６に記憶された動画像フレームに含まれる特徴パターンを抽出する機能を有する。上記したように、動画像記憶部１２６には、所定時間分の動画像フレームを記録されている。したがって、抽出部１３４は、所定時間分の動画像フレームから、動画像の特徴的なパターンを抽出する。そして抽出した特徴的なパターンと、特徴パターンテーブル１２９に記憶されている特徴パターンとを比較する。動画像から抽出した特徴的なパターンと特徴パターンテーブル１２９に記憶されている特徴パターンとが一致する場合には、当該動画像の情報を再生制御部１３６に提供する。
【００５１】
動画像の特徴的なパターンの抽出は、予め特徴的なパターンが学習された特徴抽出器によって行うようにしてもよい。すなわち、シーンに関わらず、笑顔を検出したり、特定の個人の顔を検出したり、所定の速さより早い物体の動きを検出したり、輝度の変化を検出したりした場合には、これらを特徴的なパターンとして抽出する。
【００５２】
また、上記したように、ユーザにより予め特徴パターンが設定された場合には、動画像から抽出した特徴的なパターンとユーザにより予め設定された特徴パターンが一致するか否かを判定する。ユーザによる特徴パターンの選択は、動画像の再生前に行うようにしてもよいし、動画像の再生中にいつでも行うことができるようにしてもよい。ユーザにより特徴パターンが選択されることにより、特徴パターンテーブル１２９に記憶されているすべての特徴的なシーンについてではなく、ユーザ所望のシーンにマッチングする動画像が抽出されることとなる。
【００５３】
また、撮影時の手振れや操作ミスなどによる撮影時の効果が動画像の特徴パターンとして認識されてしまう場合が考えられる。この場合、例えば、予めフォーカスが合ってない場合の動画像の特徴や手振れしている場合の動画像の特徴を記憶しておき、これらの動画像の特徴と一致する場合には、手振れや操作ミスが生じた動画像として除外するようにしてもよい。フォーカスが合ってない場合の動画像の特徴は、例えば、空間周波数などから検出することが可能である。また、手振れしているシーンの特徴は、映像全体の上下方向の動きベクトルにより検出することが可能である。
【００５４】
再生制御部１３６は、抽出部１３４から提供された動画像フレームを、該動画像の特徴パターンに対応する再生パラメータに基づいて表示装置２０に再生させる機能を有する。上記したように、パラメータテーブル１３０には、スロー再生に効果的なシーンの特徴パターンに再生パラメータが対応づけられている。したがって、再生制御部１３６は、抽出部１３４から提供された動画像フレームをスロー再生させる。例えば、「運動会」で「子供」が「走る」シーンは「２倍」の速度で再生することが設定されていた場合には、動画像フレームを２倍の速度でスロー再生させる。同様に、再生する回数、再生時間、再生開始位置についても再生パラメータに設定されている回数および時間等に基づいて決定してスロー再生させる。
【００５５】
図６に、再生制御部１３６により表示装置２０に表示されるスロー再生画面について説明する。図６は、表示装置２０に表示されるスロー再生画面について説明する説明図である。図６は、運動会で子供が走るシーンがスロー再生されている表示画面の一例である。図６に示したように、表示画面３００には、赤と白の帽子を被った４人の子供が走っている動画像３０４が表示され、表示画面３００の上部には、「ＳＬＯＷ！！」の文言が表示されている。
【００５６】
表示画面３００の上部に「ＳＬＯＷ！！」が表示されていることにより、動画像３０４がスロー再生されていることがわかる。上記したように、動画像３０４の再生速度、再生時間および再生開始位置および再生終了位置を示す再生範囲については、パラメータテーブル１３０に記憶されている再生パラメータに基づいて決定される。運動会において子供が走るシーンがスロー再生されることにより、運動会を撮像して通常通り再生するよりも印象的なシーンをより効果的に再生することが可能となる。
【００５７】
また、再生制御部１３６は、動画像のスロー再生時に、ユーザによりスロー再生の開始指示を入力させる開始指示画面を表示させるようにしてもよい。ここで、図７を参照して、スロー再生の開始指示画面について説明する。図７は、スロー再生の開始指示画面について説明する説明図である。図７に示したように、例えば、表示画面３１０に結婚式のシーンの動画像が特徴パターンテーブルに記憶されている特徴パターンと一致した場合に、当該結婚式のシーンの動画像がスロー再生に適した画面としてスロー再生される。このとき、表示画面の上部にスロー再生を開始するか否かを選択するための開始指示画面３１２を表示させるようにしてもよい。
【００５８】
これにより、スロー再生に適した画面が抽出部１３４により抽出され、再生制御部１３６により再生される際に、ユーザの選択に応じてスロー再生させることができる。したがって、特徴的なシーンのすべてがスロー再生されるのではなく、ユーザに選択された所望の特徴的なシーンのみスロー再生されることとなる。結婚式の動画像１３１とともに、開始指示画面３１２を提示されたユーザは、スロー再生をさせる場合には「Ｙｅｓ」を選択し、スロー再生をさせない場合には「Ｎｏ」を選択する。
【００５９】
ユーザ入力により「Ｙｅｓ」が選択された場合には、再生制御部１３６は、再生パラメータに基づいて結婚式の動画像１３１をスロー再生させる。また、ユーザ入力により「Ｎｏ」が選択された場合には、再生制御部１３６は、結婚式の動画像１３１を通常の速度で再生させる。また、再生制御部１３６は、スロー再生に適した動画像とともに、再生パラメータを含む開始指示画面を表示させるようにしてもよい。例えば、動画像とともに再生速度、再生回数、再生時間等を表示して、ユーザにより選択させるようにしてもよい。例えば、各シーンに適した再生速度等のパラメータの数値をデフォルトとして表示画面に表示させ、ユーザにより当該数値を増減させるようにしてもよい。また、スロー再生中に画面をタッチしたりキーボードの矢印キーを押下したりして、パラメータの数値を変更させるようにしてもよい。
【００６０】
再生制御部１３６は、ユーザにより再生速度等のパラメータの数値が変更された場合には、その変更されたパラメータの数値に基づいて動画像をスロー再生させる。また、動画像に適した音楽情報を提供するパラメータが設定されている場合には、動画像のスロー再生ともに設定されている音楽情報を再生させるか否かを選択させるようにしてもよい。さらに予め設定された音楽情報を、ユーザ操作に応じて変更させるようにしてもよい。また、ユーザ操作に応じて変更された音楽情報を、新たに特徴的な動画像のシーンに関連付けて記憶させるようにしてもよい。
【００６１】
次に、再生制御部１３６による動画像フレームの生成について説明する。図８は、再生制御部１３６による動画像フレームの生成について説明する説明図である。図８に示したように、例えば、再生制御部１３６は、動画像フレームを２倍の速度で再生する場合には、スロー再生を開始する動画像フレームからスロー再生を終了する動画像フレームについって、同じフレームを２枚ずつ生成して表示装置２０に提供する。
【００６２】
例えば、動画像フレーム「１」〜「６」までの範囲でスロー再生する場合には、「１」〜「６」までの動画像フレームを２倍生成して、「１１２２３３４４５５６６」の順で再生させるようにする。これにより、「１」〜「６」までの範囲の動画像が表示装置２０において２倍の速度でスロー再生されることとなる。同様に、４倍の速度で再生させる場合には、スロー再生させる動画像フレームを４倍生成して表示装置２０に提供する。上記したように、スロー再生させる速度は、スロー再生中に変更するようにしもよい。また、スロー再生開始後に、スロー再生を中止して、通常の速度で再生させるようにしてもよい。
【００６３】
〔４〕再生制御装置の動作の詳細
以上、再生制御装置１０の機能構成について説明した。次に、図９を参照して、再生制御装置１０の動作の詳細について説明する。図９は、再生制御装置１０の動作の詳細を示すフローチャートである。
【００６４】
図９に示したように、まず、再生部１２２は、磁気ディスク等の記憶媒体に記憶されている動画像の情報を再生する（Ｓ１０２）。上記したように、ステップＳ１０２において再生される動画像は、記憶媒体に記憶されていてもよいし、再生制御装置１０とは別体の装置からストリーム配信等により入力されてもよい。
【００６５】
そして、記録部１２４は、動画像記憶部１２６に映像データ（動画像フレーム）を蓄積する（Ｓ１０４）。抽出部１３４は、ステップＳ１０４において抽出された映像データから特徴的な画像部分を抽出する（Ｓ１０６）。ステップＳ１０６において抽出する特徴的な画像部分とは、上記したように、例えば、顔の表情を検出する特徴抽出器により笑顔や泣き顔を含む画像や、特定の個人の顔を認識している特徴抽出器により特定の個人の顔を含む画像などである。また、物体の動きを検出する特徴抽出器により、所定の速さより早い動きをする物体を含む画像を抽出してもよい。また輝度の変化量の大きい画像を抽出して、フラッシュが多く焚かれている画像を抽出してもよい。
【００６６】
次に、ステップＳ１０６において抽出した特徴パターンと、特徴パターンテーブル１２９に記憶されている特徴パターンとを比較する（Ｓ１０８）。上記したように、特徴パターンテーブル１２９には、スロー再生に適したシーンの特徴パターンが記憶されている。したがって、この特徴パターンと一致する特徴パターンを含む動画像は、スロー再生に適した動画像となる。ステップＳ１０８において抽出された動画像の特徴パターンと特徴パターンテーブル１２９の特徴パターンとを比較した結果、当該映像データがスロー再生すべきデータか否かを判定する（Ｓ１１０）。
【００６７】
ステップＳ１１０において、抽出部１３４により抽出された映像データがスロー再生すべきデータであると判定された場合には、自動再生が設定されているか否かを判定する（Ｓ１１２）。ステップＳ１１２において、自動再生が設定されているか否かは、パラメータテーブルの各シーンの再生テーブルとともに設定してもよいし、特徴パターンテーブルの各シーンに関連付けて自動再生の可否を設定するようにしてもよい。ステップＳ１１０において、抽出部１３４により抽出された映像データがスロー再生すべきデータではないと判定された場合には、ステップＳ１２０の処理を実行する。ステップＳ１２０の処理については後述する。
【００６８】
ステップＳ１１２において、抽出部１３４により抽出された映像データが、自動再生が設定されている映像データであると判定された場合には、パラメータテーブル１３０に基づいて、スロー再生の再生速度、再生回数、再生開始位置、再生時間等を設定する（Ｓ１１４）。
【００６９】
ステップＳ１１２において、抽出部１３４により抽出された映像データが、自動再生が設定されていない映像データであると判定された場合には、表示画面にスロー再生を促す表示を出力する（Ｓ１１６）。ステップＳ１１６においては、スロー再生に適した映像データとともに、スロー再生を促す表示を表示させてもよい。そして、ユーザによりスロー再生入力があったか否かを判定する（Ｓ１１８）。
【００７０】
そして、ステップＳ１１８において、ユーザによりスロー再生入力があったと判定された場合には、パラメータテーブル１３０に基づいて、スロー再生の再生速度、再生回数、再生開始位置、再生時間等を設定する（Ｓ１１４）。ステップＳ１１８において、ユーザによりスロー再生入力がなかったと判定された場合には、ステップＳ１２０の処理を実行する。
【００７１】
そして、ステップＳ１２０において、映像再生処理を実行する（Ｓ１２０）。ステップＳ１２０においては、上記したように、ステップＳ１１４においてスロー再生速度等のスロー再生パラメータが設定された場合には、映像データをスロー再生する。一方、スロー再生速度等のスロー再生パラメータが設定されなかった場合には、映像データを通常の速度で再生する。そして、すべての映像データを再生したか否かを判定して（Ｓ１２２）、すべての映像データを再生していない場合には、ステップＳ１０２の処理に戻る。ステップＳ１２２において、すべての映像データを再生したと判定された場合には、処理を終了する。
【００７２】
以上再生制御装置１０の動作の詳細について説明した。本実施形態によれば、再生された動画像フレームから特徴パターンテーブルに対応する特徴パターンを抽出して、当該特徴パターンに対応する再生パラメータに基づいて動画像フレームをスロー再生することが可能となる。これにより、自動的にスロー再生に適した動画像を抽出して、当該動画像のシーンに合った再生速度等により動画像を再生することが可能となる。ユーザは、撮像した動画像の編集、加工等をしなくとも、自動的に印象的なシーンをスロー再生させて、付加価値の高い再生を行うことが可能となる。
【００７３】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【００７４】
例えば、本明細書の再生制御装置１０の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、再生制御装置１０の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【００７５】
また、再生制御装置１０に内蔵されるＣＰＵ１０１、ＲＯＭ１０２およびＲＡＭ１０３などのハードウェアを、上述した再生制御装置１０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。また、図２の機能ブロック図で示したそれぞれの機能ブロックをハードウェアで構成することで、一連の処理をハードウェアで実現することもできる。
【符号の説明】
【００７６】
１０ 再生制御装置
１２２ 再生部
１２４ 記録部
１２６ 動画像記憶部
１２８ テーブル記憶部
１２９ 特徴パターンテーブル
１３０ パラメータテーブル
１３２ 入力部
１３４ 抽出部
１３６ 再生制御部
【特許請求の範囲】
【請求項１】
動画像を再生する再生部と、
前記再生部により再生された前記動画像フレームを動画像記憶部に所定時間分記録する記録部と、
動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、前記特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、
前記特徴パターンテーブルの特徴パターンに対応する、前記動画像記憶部に記憶された前記動画像フレームに含まれる特徴パターンを抽出する抽出部と、
前記抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、前記動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、
を備える、再生制御装置。
【請求項２】
前記再生制御部は、前記特徴パターンテーブルの特徴パターンに対応する動画像をスロー再生させる、請求項１に記載の再生制御装置。
【請求項３】
前記再生制御部は、前記パラメータテーブルの再生パラメータに基づいて、スロー再生速度、スロー再生時間およびスロー再生範囲を決定する、請求項２に記載の再生制御装置。
【請求項４】
前記再生制御部は、前記特徴パターンテーブルの特徴パターンに対応する動画像のスロー再生時に、スロー再生の開始指示を入力させる開始指示画面を表示させる、請求項２に記載の再生制御装置。
【請求項５】
前記再生制御部は、前記再生パラメータを含む前記開始指示画面を表示させる、請求項４に記載の再生制御装置。
【請求項６】
前記再生制御部は、ユーザ操作に応じて変更された前記再生パラメータに基づいて、スロー再生を制御する、請求項２に記載の再生制御装置。
【請求項７】
前記パラメータテーブルには、前記再生パラメータと前記動画像フレームとともに再生可能な音楽情報とが関連付けて記憶されており、
前記再生制御部は、前記パラメータに含まれる音楽情報に基づいて、前記動画像フレームのスロー再生時に前記音楽情報を再生させる、請求項２に記載の再生制御装置。
【請求項８】
動画像記憶部に所定時間分記録された動画像フレームの再生を制御する再生制御方法において、
テーブル記憶部に記憶されている動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルの特徴パターンに対応する、前記動画像記憶部に記憶された前記動画像フレームに含まれる特徴パターンを抽出するステップと、
前記抽出された特徴パターンに対応する再生パラメータに基づいて、前記動画像記憶部に記憶されている動画像フレームの再生を制御するステップと、
を含む、再生制御方法。
【請求項９】
コンピュータを、
動画像を再生する再生部と、
前記再生部により再生された前記動画像フレームを動画像記憶部に所定時間分記録する記録部と、
動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、前記特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、
前記特徴パターンテーブルの特徴パターンに対応する、前記動画像記憶部に記憶された前記動画像フレームに含まれる特徴パターンを抽出する抽出部と、
前記抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、前記動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、
を備える、再生制御装置として機能させる、プログラム。
【請求項１】
動画像を再生する再生部と、
前記再生部により再生された前記動画像フレームを動画像記憶部に所定時間分記録する記録部と、
動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、前記特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、
前記特徴パターンテーブルの特徴パターンに対応する、前記動画像記憶部に記憶された前記動画像フレームに含まれる特徴パターンを抽出する抽出部と、
前記抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、前記動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、
を備える、再生制御装置。
【請求項２】
前記再生制御部は、前記特徴パターンテーブルの特徴パターンに対応する動画像をスロー再生させる、請求項１に記載の再生制御装置。
【請求項３】
前記再生制御部は、前記パラメータテーブルの再生パラメータに基づいて、スロー再生速度、スロー再生時間およびスロー再生範囲を決定する、請求項２に記載の再生制御装置。
【請求項４】
前記再生制御部は、前記特徴パターンテーブルの特徴パターンに対応する動画像のスロー再生時に、スロー再生の開始指示を入力させる開始指示画面を表示させる、請求項２に記載の再生制御装置。
【請求項５】
前記再生制御部は、前記再生パラメータを含む前記開始指示画面を表示させる、請求項４に記載の再生制御装置。
【請求項６】
前記再生制御部は、ユーザ操作に応じて変更された前記再生パラメータに基づいて、スロー再生を制御する、請求項２に記載の再生制御装置。
【請求項７】
前記パラメータテーブルには、前記再生パラメータと前記動画像フレームとともに再生可能な音楽情報とが関連付けて記憶されており、
前記再生制御部は、前記パラメータに含まれる音楽情報に基づいて、前記動画像フレームのスロー再生時に前記音楽情報を再生させる、請求項２に記載の再生制御装置。
【請求項８】
動画像記憶部に所定時間分記録された動画像フレームの再生を制御する再生制御方法において、
テーブル記憶部に記憶されている動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルの特徴パターンに対応する、前記動画像記憶部に記憶された前記動画像フレームに含まれる特徴パターンを抽出するステップと、
前記抽出された特徴パターンに対応する再生パラメータに基づいて、前記動画像記憶部に記憶されている動画像フレームの再生を制御するステップと、
を含む、再生制御方法。
【請求項９】
コンピュータを、
動画像を再生する再生部と、
前記再生部により再生された前記動画像フレームを動画像記憶部に所定時間分記録する記録部と、
動画像フレームに含まれる所定のシーン毎に特徴パターンを対応付けている特徴パターンテーブルと、前記特徴パターンに対応する再生パラメータを対応づけているパラメータテーブルとを記憶しているテーブル記憶部と、
前記特徴パターンテーブルの特徴パターンに対応する、前記動画像記憶部に記憶された前記動画像フレームに含まれる特徴パターンを抽出する抽出部と、
前記抽出部により抽出された特徴パターンに対応する再生パラメータに基づいて、前記動画像記憶部に記憶されている動画像フレームの再生を制御する再生制御部と、
を備える、再生制御装置として機能させる、プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１１−６６６０９（Ｐ２０１１−６６６０９Ａ）
【公開日】平成２３年３月３１日（２０１１．３．３１）
【国際特許分類】
【出願番号】特願２００９−２１４５０２（Ｐ２００９−２１４５０２）
【出願日】平成２１年９月１６日（２００９．９．１６）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２３年３月３１日（２０１１．３．３１）
【国際特許分類】
【出願日】平成２１年９月１６日（２００９．９．１６）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]