記録再生装置
【課題】記録再生装置における、ユーザの使用勝手の向上。
【解決手段】撮影によって順次生成されるフレーム画像信号を１つの動画データとしてメモリに記録し、該動画データを再生する際、動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号のうち、所定条件を満足するフレーム画像信号に該識別情報を割り当て、メモリに記録されている動画データを再生する際に、識別情報が割り当てられたフレーム画像信号の複数フレーム前のフレーム画像信号から再生を開始することを特徴とする。
【解決手段】撮影によって順次生成されるフレーム画像信号を１つの動画データとしてメモリに記録し、該動画データを再生する際、動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号のうち、所定条件を満足するフレーム画像信号に該識別情報を割り当て、メモリに記録されている動画データを再生する際に、識別情報が割り当てられたフレーム画像信号の複数フレーム前のフレーム画像信号から再生を開始することを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録再生装置に関し、特に例えばデジタルカメラに適用され、メモリに記録された画像信号を再生する、記録再生装置に関する。
【背景技術】
【０００２】
従来の記録再生装置においては、メモリに記録された長時間の動画の中から、使用者の所望のシーン、例えば感動的なシーンやお笑いシーンなどを検索する際に、視聴しながら所望のシーンを検索し、再生していたため、非常に時間が掛かっていた。
【特許文献１】特開２００３−３２６２０ 特許文献１には、シーンチェンジを検出してインデックスを作成し、動画に概要を付与して概要とインデックスの間のリンクを作成しておき、検索時には、検索式を与えて動画の概要を検索し、概要を読んでからリンクを用いて関連のあるインデックスを選択し、インデックスの各シーンを見ることが出来る動画管理装置が開示されている。
【０００３】
しかしながら、従来の動画管理装置では、自動的にシーンチェンジを検出してしまうため、使用者の主観に基づいたシーンが再生出来なかったり、使用者が望まないシーンを再生してしまう虞があった。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、上記の問題点を解決するもので、メモリに記録された動画データから使用者が所望するシーンを容易に再生することが出来る記録再生装置を提供するものである。
【課題を解決するための手段】
【０００５】
この発明に従う記録再生装置は、撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生するものであって、動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、メモリに記録されている動画データを再生する再生手段と、記動画データを再生する際、再生手段を制御して識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始する再生制御手段を備えることを特徴とする。
【０００６】
この発明によれば、動画データの記録中に識別情報の割り当て指示を受け付け、再生する際には、識別情報が割り当てられたフレーム画像信号群よりも複数フレーム前のフレーム画像信号から再生を開始する。従って、使用者からの割り当て指示が遅れた場合であっても、所望のシーンから再生することが出来る。
【０００７】
好ましくは、所定条件を満足するフレーム画像信号群は、割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群又は、割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群である。
【０００８】
この発明によれば、割り当て指示を受け付けたタイミング付近のフレーム画像信号群に割り当てられるため、使用者が所望するシーンをより早く検出し、再生をすることが出来る。
【０００９】
更に好ましくは、フレーム画像信号群は、フレーム内符号化及びフレーム間符号化で符号化された複数のフレーム画像信号で形成され、再生制御手段において動画データを再生する際、再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム内符号化されたフレーム画像信号から再生を開始する。
【００１０】
この発明によれば、フレーム内符号化されたフレーム画像信号から再生が開始されるため、使用者が所望するシーンをより早く再生することが出来る。
【００１１】
更に好ましくは、識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号に基づく縮小画像をマルチ表示するマルチ表示手段と、マルチ表示された縮小画像の中から任意の縮小画像を選択する選択手段とを更に備え、再生制御手段は再生手段を制御して、選択手段によって選択された縮小画像に対応するフレーム画像信号が属するフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始する。
【００１２】
この発明によれば、マルチ表示された複数の縮小画像の中から選択された縮小画像に対応するフレーム画像信号群の複数フレーム前のフレーム画像から開始するため、使用者が所望するシーンをより早く再生することが出来る。
【００１３】
更に好ましくは、メモリに記録されている複数の識別情報が割り当てられたフレーム画像信号群の代表フレーム画像信号を１フレームずつ順番に再生するフレーム再生手段を更に備える。
【００１４】
この発明によれば、使用者の所望するシーンのみをスライドショーのように再生することが出来る。
【００１５】
この発明に従う記録再生装置は、撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生するものであって、動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、メモリに記録されている動画データを再生する再生手段と、動画データを再生する際、再生手段を制御して識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号から再生を開始する再生制御手段を備え、所定条件を満足するフレーム画像信号群は、割り当て指示を受け付けた該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群である。
【発明の効果】
【００１６】
本発明の記録再生装置によれば、メモリに記録された動画データから使用者が所望するシーンを容易に再生することが出来る。
【図面の簡単な説明】
【００１７】
【図１】本実施例に係るデジタルカメラ１の回路構成の一部を示すブロック図である。
【図２】本実施例に係るデジタルカメラ１のファイル構成の一部を示す図解図である。
【図３】本実施例に係るデジタルカメラ１におけるフレーム画像信号の生成タイミングの一部を示す図解図である。
【図４】本実施例に係るデジタルカメラ１のファイル構成の他の一部を示す図解図である。
【図５】本実施例に係るＬＣＤ３２に表示されるマルチ表示の一例を示す図解図である。
【図６】本実施例に係る動画撮影タスクの手続の一例を示すフローチャートである。
【図７】本実施例に係る検出タスクの手続の一例を示すフローチャートである。
【図８】本実施例に係る再生制御タスクの手続の一例を示すフローチャートである。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の記録再生装置の一実施例として、デジタルカメラ１に実施した形態につき、図面に沿って具体的に説明する。
【００１９】
図１は、本実施例のデジタルカメラ１のブロック図を示している。デジタルカメラ１は、光学レンズを含むレンズ群１０及び図示しない絞りを含み、主要被写体の光学像はＣＰＵ２６による指示によって、図示しないモータ駆動部に制御されたレンズ群１０及び絞りを通して、ＣＭＯＳイメージャユニット１２に取り込まれる。
【００２０】
なお、本実施例では、イメージセンサとしてＣＭＯＳイメージャユニット１２を採用した形態で説明するが、ＣＣＤイメージャを採用しても良い。ＣＣＤイメージャを採用した場合は、相関２重サンプリング処理、ゲイン調整、クランプ処理、Ａ／Ｄ変換処理を含むＡＦＥ回路が追加される。
【００２１】
そして、ＣＰＵ２６に接続された図示しないタイミングジェネレータによって与えられる取り込みパルスによって、ＣＭＯＳイメージャユニット１２から１フレーム分のデジタル撮像信号が出力される。ここで、ＣＭＯＳイメージャユニット１２では、各画素で蓄積した電荷を増幅し、各画素から配線を使用して信号として読み出しを行い、該信号に対して、相関２重サンプリング処理、ゲイン調整、クランプ処理、Ａ／Ｄ変換処理を施す。該処理が施されたデジタル撮像信号は、画素毎にＲ、Ｇ、Ｂのいずれかの色信号を有し、ＣＰＵ２６の制御によって、バス４０を介してＳＤＲＡＭ１６に一旦格納される。
【００２２】
ＳＤＲＡＭ１６に一旦格納されたデジタル撮像信号は、ＣＰＵ２６の制御によって信号処理回路１４へ入力される。信号処理回路１４では、入力されたデジタル撮像信号に対して色分離処理を施し、更にＹＵＶ変換により、Ｙ、Ｕ、Ｖ信号に変換する。そして、信号処理回路１４で変換されたデジタル画像信号は、バス４０を介して、再びＳＤＲＡＭ１６へ格納される。このように、主要被写体の光学像がさまざまな処理を経てＳＤＲＡＭ１６に格納されるまでを撮像処理と定義する。
【００２３】
ＳＤＲＡＭ１６に格納されたデジタル画像信号は、ＣＰＵ２６の制御によりＬＣＤ３２へ出力可能である。ＬＣＤ３２は、図示しないＬＣＤドライバを含み、ＬＣＤドライバはＹ、Ｕ、Ｖ信号をＲＧＢ信号に変換して、ＬＣＤ３２にデジタル画像信号に基づく画像を表示させることが出来る。このように、ＳＤＲＡＭ１６に格納されたデジタル画像信号が、ＬＣＤ３２に画像として表示されるまでの処理を、表示処理と定義する。
【００２４】
また、撮像処理及び表示処理が順次繰り返して行われることによって、ＬＣＤ３２にスルー画像が表示される。なお、本実施例では、モニタとしてＬＣＤ３２を採用した形態を説明するが、有機ＥＬなどの表示デバイスを採用しても良い。
【００２５】
操作部２４は、モード選択ボタン２４ａ、レリーズボタン２４ｂ、カーソルキー２４ｃ、セットボタン２４ｄ、お気に入りシーンボタン２４ｅ及び表示切替ボタン２４ｆを備えている。使用者によってモード選択ボタン２４ａが操作されることによって、デジタルカメラ１が備える複数モードの一部である静止画撮影モード、動画撮影モード、再生モード及びお気に入りシーン再生モードの中からいずれか１つのモードを選択することが出来る。
【００２６】
モード選択ボタン２４ａによって静止画撮影モードが選択されると、上述した撮像処理が所定の解像度及びフレームレートに基づいて繰り返し実行され、かつ、表示処理が順次実行されることにより、ＬＣＤ３２にスルー画像が表示される。ＬＣＤ３２にスルー画像が表示されている状態で、使用者によってレリーズボタン２４ｂが押下されると、静止画撮影用の解像度に基づいて、上述した撮像処理が実行される。ＳＤＲＡＭ１６に格納されたデジタル画像信号は、ＣＰＵ２６の制御によってＪＰＥＧコーデック３０に入力され、ＪＰＥＧ方式で圧縮処理が施され、静止画圧縮画像データとしてＳＤＲＡＭ１６に格納される。それと並行して、デジタル画像信号に基づいてサムネイル画像信号を生成し、ＪＰＥＧコーデック３０を制御してＪＰＥＧ圧縮処理をサムネイル画像信号に対して施し、サムネイル圧縮画像データとしてＳＤＲＡＭ１６へ格納する。ＳＤＲＡＭ１６に格納されている静止画圧縮画像データとサムネイル圧縮画像データはＪＰＥＧファイルとして、外部メモリカード１８制御回路の制御により、外部メモリカード２０に格納される。
【００２７】
次に、モード選択ボタン２４ａによって動画撮影モードが選択されると、上述した撮像処理が所定の解像度及びフレームレートに基づいて繰り返し実行され、かつ、表示処理が順次実行されることにより、ＬＣＤ３２にスルー画像が表示される。本実施例では、動画撮影フレームレートを１０ｆｐｓとして説明する。
【００２８】
ＬＣＤ３２にスルー画像が表示されている状態で、使用者によってレリーズボタン２４ｂが押下されると、動画撮影用の解像度に基づいて、上述した撮像処理が順次実行される。そして、ＳＤＲＡＭ１６に格納された複数のデジタル画像信号は、ＣＰＵ２６の制御によって、ＭＰＥＧコーデック２８に入力され、ＭＰＥＧ４方式で圧縮処理が施され、ＩＤＲ（Ｉｎｓｔａｎｔａｎｅｏｕｓ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ）フレーム及び／又はＰ（Ｐｒｅｄｉｃｔｅｄ）フレームに基づく動画圧縮データとしてＳＤＲＡＭ１６に格納される。また、ＣＰＵ２６は、レリーズボタン２４ｂが押下されてから最初のフレームのデジタル画像信号に基づいてサムネイル画像信号を生成し、ＪＰＥＧコーデック３０を制御してＪＰＥＧ圧縮処理をサムネイル画像信号に対して施し、サムネイル圧縮画像データとしてＳＤＲＡＭ１６へ格納する。
【００２９】
ＣＰＵ２６は外部メモリカード制御回路１８を制御し、ＳＤＲＡＭ１６に格納されているサムネイル圧縮画像データ及び動画圧縮データを順次外部メモリカード２０へＭＰＥＧ４ ＡＶＣ／Ｈ．２６４（以後、ＭＰＥＧ４と称す）方式に従ってＭＰＥＧ４ファイルとして書き込む。図２はＭＰＥＧ４ファイルの構成を簡略的に図示したものである。図２を参照して説明すると、サムネイル圧縮画像データはメタデータエリアへ書き込まれ、動画圧縮データはメディアデータエリアへ書き込まれる。ここで、本実施例においては、ＳＤＲＡＭ１６に格納されているデータを外部メモリカード２０へＭＰＥＧ４ファイルとして書き込むまでの処理を記録処理と定義する。なお、本実施例では、記録媒体として、外部メモリカード２０を採用した形態を説明するが、デジタルカメラ１の内部にフラッシュメモリを設けたり、ハードディスクを設けても良い。
【００３０】
また、データはシーケンス単位で扱われ、各シーケンスは複数のアクセスユニットで構成される。アクセスユニットは、ＮＡＬユニットの集まりであり、ＮＡＬユニットの種類として、ＳＰＳ（シーケンス・パラメータ・セット）、ＰＰＳ（ピクチャ・パラメータ・セット）、ＳＥＩ（サプリメンタル・エンハンスメント情報）及びスライスがある。なお、複数のスライスでＩＤＲフレームやＰフレームが構成される。ここで、１つのＩＤＲフレームと９つのＰフレームから１つのＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅｓ）が形成される。動画撮影フレームレートは１０ｆｐｓであるため、再生フレームレートを１０ｆｐｓとすると、１ＧＯＰを再生するには１秒間を必要とする。なお、ＩＤＲフレームはイントラ符号化処理によって生成され、Ｐフレームはインター符号化処理によって形成される。
【００３１】
ＳＰＳは、シーケンスに関する情報であり、ＰＰＳは、フレームに関する情報である。ＳＥＩには複数のＳＥＩメッセージを格納することが可能であり、これらのＳＥＩメッセージは符号化されたデータの復号化には必須ではない付加情報である。なお、本実施例では、使用者によって定義可能なＵｓｅｒ ｄａｔａ ｕｎｒｅｇｉｓｔｅｒｅｄ ＳＥＩを使用する。以後ＳＥＩメッセージと略す。ＳＥＩメッセージに対して、お気に入りであることを示す付加情報を格納する。
【００３２】
使用者は動画撮影中に、気に入ったシーンに遭遇したとき、お気に入りシーンボタン２４ｅを押すことによって、押したタイミングのシーンまたは押したタイミング付近のシーンがお気に入りシーンであることを示す情報が動画データに格納される。そして、お気に入りシーン再生モードを選択することによって、お気に入りシーンを中心に動画データを再生することが出来る。次に、お気に入りシーンであることを示す情報の動画データへの格納方法について説明する。
【００３３】
図３は、お気に入りシーンボタン２４ｅが押下されるタイミングを示している。Ｖｓｙｎｃを基準として、撮像処理、表示処理や記録処理が実行される。
【００３４】
図３に示すように、お気に入りシーンボタン２４ｅがアクセスユニットａに属するＩＤＲフレームが生成されるタイミングで押下された場合には、アクセスユニットａに属するＳＥＩメッセージにお気に入りであることを示す付加情報を格納する。お気に入りシーンボタン２４ｅがアクセスユニットｄに属するＰフレームが生成されるタイミングで押下された場合には、アクセスユニットｄに属するＳＥＩメッセージにお気に入りであることを示す付加情報を格納する。この場合、お気に入りシーンボタン２４ｅの押下に応じてＣＰＵ２６内の図示しないレジスタのフラグＦｏの値を“１”に設定し、１ＧＯＰ分の撮像処理が終了した際に、Ｆｏの値が“１”であれば、ＳＥＩメッセージにお気に入りであることを示す付加情報を格納している。
【００３５】
図４は、ＳＥＩメッセージにお気に入りであることを示す付加情報が格納されたシーケンスを示している。図４で説明したように、アクセスユニットａ及びアクセスユニットｄに属するＳＥＩメッセージにお気に入りであることを示す付加情報が格納されている。図４では、お気に入りであることを示す付加情報を格納しているＳＥＩメッセージを、“ＳＥＩ ＊＊＊”として表現している。更に、各アクセスユニットに属するＩＤＲフレームをＡ〜Ｄとして表現している。また、動画撮影中にお気に入りシーンボタン２４ｅの最初の押下に応じて、メタデータにお気に入りシーンファイルであることを示す情報を、メタデータエリアに格納する。
【００３６】
こうして、再び使用者によってレリーズボタン２４ｂが押下されると、撮像処理、表示処理及び記録処理を終了する。なお、レリーズボタン２４ｂが押下されたとき、１ＧＯＰを形成するＩＤＲフレーム及び／またはＰフレームの総数が５フレーム分に満たない場合は、すぐに各処理を終了させるのではなく各処理を継続し、７フレーム分に満たした時点で動画撮影の終了処理を実行する。この動画撮影の終了処理には、撮像処理、表示処理及び記録処理を終了させる処理や、ファイルをクローズすることが含まれる。この場合、レリーズボタン２４ｄの押下に応じてＣＰＵ２６内の図示しないレジスタのフラグＦｓの値を“１”に設定し、前のフレーム撮像処理後に検出されたＦｓの値が“１”であれば、上記動画撮影の終了処理を実行する。次に、お気に入りシーン再生モードにおけるお気に入りシーンの再生方法について説明する。
【００３７】
さて、使用者によってモード選択ボタン２４ａが操作されることによって、再生モードが選択されると、外部メモリカード２０に格納されている複数のＪＰＥＧファイル及び／又はＭＰＥＧファイルの中から使用者が所望するファイルをＳＤＲＡＭ１６に格納し、ＪＰＥＧコーデック３０又はＭＰＥＧコーデック２８に入力させることによって、伸張処理が施され、バス４０を介してＬＣＤに出力される。
【００３８】
また、お気に入りシーン再生モードが選択されると、ＣＰＵ２６は、外部メモリカード制御回路１８を制御して、外部メモリカード２０に記録されている全てのＭＰＥＧ４ファイルのメタデータを解析して、お気に入りファイルであることを示す情報が格納されているＭＰＥＧ４ファイルを特定する。特定されたＭＰＥＧ４ファイルの各メタデータエリアに格納されているサムネイル圧縮画像データに基づくサムネイル画像をＬＣＤ３２にマルチ表示し、使用者によって選択されることにより、これから再生したい所望のお気に入りファイルが特定される。
【００３９】
再生したい所望のお気に入りファイルが特定されると、各アクセスユニットのＳＥＩを解析して、お気に入りであることを示す情報が格納されているアクセスユニットを特定する。次に、メタデータエリアからサムネイル圧縮画像データを検出し、特定されたアクセスユニットに属するＩＤＲフレームに基づく縮小画像とサムネイル画像を含んでマルチ表示する。
【００４０】
図５はサムネイル画像とＩＤＲフレームに基づく縮小画像がＬＣＤ３２に９分割でマルチ表示されている図である。図５では、図４のシーケンスに基づいて、お気に入りファイルの先頭画像であるＩＤＲフレームＡに基づくサムネイル画像Ａ´が左上に表示され、特定されたアクセスユニットに属するＩＤＲフレームＤに基づく縮小画像Ｄ´が、上中央に表示される。
【００４１】
そして、使用者によって縮小画像Ｄ´が選択されると、縮小画像Ｄ´の基となるＩＤＲフレームＤの３０フレーム前にあたるＩＤＲフレームＡから動画再生が始まる。なお、動画再生のフレームレートも、動画撮影のフレームレートと同じく１０ｆｐｓである。時系列で言い換えれば、ＩＤＲフレームＤを基準として３秒前のＩＤＲフレームから再生が開始されることとなる。
【００４２】
このように、お気に入りシーンが感動シーンであった場合などに、縮小画像の選択直後にお気に入りシーンが再生されるよりも、何秒間かの前置きがあったほうが使用者にとっては見やすいものとなる。また、本実施例では、選択されたＩＤＲフレームよりも３０フレーム前のＩＤＲフレームから再生を開始しているが、使用者によって２０フレーム前から再生を開始するように設定したり、３０フレーム後から再生を開始するように設定することが可能である。
【００４３】
次に、図６−図８に示すフローチャートを用いて、上述した動画撮影の処理及びお気に入りシーンの再生の処理について説明する。これらの処理は、ＣＰＵ２６がフラッシュメモリ２２に格納されているプログラムを実行することにより実現される処理である。図６は動画撮影メインタスク、図７は検出タスク、図８はお気に入りシーン再生制御タスクを表している。
【００４４】
ＣＰＵ２６は、図６に示す動画撮影メインタスクを実行することにより、動画撮影が開始され、お気に入りシーンボタン２４ｅが押下されることによってＳＥＩメッセージにお気に入りシーンであることを示す付加情報が格納される。
【００４５】
さて、動画撮影メインタスクの具体的な手続きについての説明に入る。モード選択ボタン２４ａによって動画撮影モードが選択され、レリーズボタン２４ｂが押下されると、ＣＰＵ２６はステップＳ１０１において、ＣＰＵ２６内に設けられたレジスタにカウント値Ｃに“０”を設定する。
【００４６】
次にステップＳ１０３へ進み、動画撮影初期化処理を実行する共に、検出タスクを起動させる。なお、動画撮影初期化処理は、動画ファイル（ＭＰＥＧファイル）をオープンする処理や、上述した動画撮影に必要なパラメータ（解像度やフレームレート）を設定する処理が含まれる。次にステップＳ１０５に進み、ＣＰＵ２６内に設けられたレジスタに格納されているフラグＦｓの値が“１”であるか否かを判別する。ステップＳ１０５においてＹＥＳと判別されると、ステップＳ１０６へ進み、動画撮影終了処理を実行して、本タスクを終了する。ステップＳ１０５においてＮＯと判別されると、ステップＳ１０７へ進み、１フレーム分の撮像処理を行う。そしてステップＳ１０９へ進み、カウント値Ｃをインクリメントする（Ｃ＝Ｃ＋１）。次にステップＳ１１１へ進み、カウント値が“１０”であるか否かを判別し、ＮＯと判断すると、ステップＳ１０５へ戻る。
【００４７】
ステップＳ１１１においてＹＥＳと判別されると、ステップＳ１１２へ進み、カウント値Ｃを“０”に設定し、ステップＳ１１３へ進む。ステップＳ１１３では、ＣＰＵ２６内に設けられたレジスタに格納されているお気に入りボタン押下フラグＦｏの値が“１”であるか否かを判別する。ステップＳ１１３においてＮＯと判別されると、ステップＳ１０５へ戻る。
【００４８】
ステップＳ１１３においてＹＥＳと判別されると、ステップＳ１１５へ進み、ＳＥＩメッセージにお気に入りであることを示す付加情報を格納する。そしてステップＳ１０５へ戻る。
【００４９】
次に図７を示すフローチャートを用いて、検出処理を説明する。この検出タスクを実行することにより、お気に入りシーンボタン２４ｅの押下や電源がオフされた操作などを検出し、ＣＰＵ２６内に設けられたレジスタに数値を設定する。
【００５０】
動画撮影メインタスクのステップＳ１０３で検出タスクが起動されると、まずステップＳ２０１において終了フラグＦｓとお気に入りフラグＦｏの値を夫々リセット（Ｆｓ＝０、Ｆｏ＝０に設定）する。次にステップＳ２０３へ進み、お気に入りシーンボタン２４ｅの押下が有ったか否かを判別し、ＮＯと判別するとステップＳ２０９へ進む。ステップＳ２０３でＹＥＳと判別されると、ステップＳ２０５へ進み、お気に入りフラグＦｏの値が“１”であるか否かを判別し、ＹＥＳと判別するとステップＳ２０９へ進み、ＮＯと判別するとステップＳ２０７へ進む。ステップＳ２０７では、お気に入りフラグＦｏの値を“１”（Ｆｏ＝１）に設定する。
【００５１】
ステップＳ２０９では、デジタルカメラ１に対して終了操作が有ったか否かを判別する。この終了操作として、レリーズボタン２４ｂに対する押下操作、及び図示しない電源ボタンに対する押下操作が挙げられる。ステップＳ２０９においてＹＥＳと判別するとステップＳ２１１へ進み、ＮＯと判別するとステップＳ２０３へ進む。
【００５２】
ステップＳ２１１では、カウント値Ｃの値が“７以上”（Ｃ≧７）であるか否かを判別し、ＹＥＳと判別されるまで該判別を繰り返す。ステップＳ２１１においてＹＥＳと判別されると、ステップＳ２１３へ進み、終了フラグＦｓの値を“１”に設定し、本タスクを終了する。
【００５３】
次に図８に示すフローチャートを用いて、再生制御処理を説明する。ＣＰＵ２６は、再生制御タスクを実行することにより、お気に入りシーンの再生を行う。
【００５４】
モード選択ボタン２４ａが操作されることによってお気に入りシーン再生モードが選択されると、ステップＳ３０１において、カーソルキー２４ｃやセットボタン２４ｄが操作されることによって、所望の動画ファイル（ＭＰＥＧファイル）が選択されたか否かを判別する。このとき、メタデータに格納されているお気に入りシーンを含むファイルであることを示す情報に該当する動画ファイル（ＭＰＥＧファイル）のサムネイル画像をマルチ表示し、使用者はマルチ表示されたサムネイル画像の中から、カーソルキー２４ｃやセットボタン２４ｄが操作されることによって、使用者が所望する動画ファイル（ＭＰＥＧファイル）が選択される。
【００５５】
さて、ステップＳ３０１でＹＥＳと判別されるまで、ステップＳ３０１の判別を繰り返し、ＹＥＳと判別されるとステップＳ３０３へ進む。
【００５６】
ステップＳ３０３において、選択された動画ファイル（ＭＰＥＧファイル）をオープンし、次のステップＳ３０５でファイル解析を行う。このファイル解析には、ＳＥＩメッセージの解析が含まれ、どのアクセスユニットにお気に入りシーンであることを示す付加情報が格納されているＳＥＩメッセージが属しているかを検出する。
【００５７】
次にステップＳ３０７へ進み、お気に入りシーンであることを示す付加情報が格納されているＳＥＩメッセージが属する複数のアクセスユニットから、夫々ＩＤＲフレームを抽出し、間引きなどの縮小処理を施して、マルチ表示を行う。
【００５８】
次にステップＳ３０９へ進み、使用者によってカーソルキー２４ｃやセットボタン２４ｄが操作されることによって、所望の縮小画像が選択されたか否かを判別する。ステップＳ３０９では、ＹＥＳと判別されるまで該判別を行い、ＹＥＳと判別されると、ステップＳ３１１へ進む。
【００５９】
ステップＳ３１１では、選択された縮小画像に対応するＩＤＲフレームが属するアクセスユニットを特定し、該アクセスユニットの時間軸上３つ前のアクセスユニットを特定する。次にステップＳ３１３へ進み、ステップＳ３１１において特定されたアクセスユニットから再生を開始し、ファイルの最終フレームまで再生されると、ステップＳ３１５へ進む。ステップＳ３１５では、モード選択ボタン２４ａが操作されることにより他のモードに設定されたか否かを判別し、ＹＥＳと判別すると本タスクを終了し、ＮＯと判別するとステップＳ３０１へ戻る。
【００６０】
以上説明したように、本実施例におけるデジタルカメラ１は、動画撮影中に使用者によってお気に入りシーンボタン２４ｅが押下されることにより、アクセスユニット毎のＳＥＩメッセージにお気に入りシーンであることを示す付加情報が格納される。また、お気に入りシーンボタン２４ｅが押下された時点で、動画ファイル（ＭＰＥＧファイル）のメタデータエリアにお気に入りシーンを示す付加情報が格納される。そして、お気に入りシーン再生モードが設定されると、まず、外部メモリカード２０に記録されている複数のファイルのメタデータを検索して、お気に入りシーンを示す付加情報を持つファイルを特定する。そして、複数存在する場合は、特定されたファイルのサムネイル画像をマルチ表示させる。使用者はマルチ表示されたサムネイル画像に基づき、所望の動画ファイル（ＭＰＥＧファイル）を選択する。
【００６１】
次に、選択された動画ファイル（ＭＰＥＧファイル）内のＳＥＩを分析することにより、お気に入りシーンを示す付加情報を持つアクセスユニットが特定され、該アクセスユニットに含まれるＩＤＲフレームに基づく縮小画像をマルチ表示させる。使用者は、マルチ表示された縮小画像の中から所望の縮小画像を選択することにより、選択された縮小画像に対応するＩＤＲフレームよりも時系列的に前のＩＤＲフレームを開始フレームとして再生を行う。
【００６２】
従って、撮影中にお気に入りシーン２４ａを押すタイミングが遅れてしまったとしても、再生時には何秒間か前から再生を開始するので、目的のシーンを見ることが出来る。また、所望するシーンが感動シーンの場合などに、再生直後に感動シーンが再生されるよりも、何秒間か前置きがあったほうが、使用者にとっては見やすいと期待出来る。更に、動画の中の使用者が見たいシーンだけを素早く検索することが出来る。これによれば、撮影したものの放置されて見直ししなかった使用者も過去の動画を見ようという気になることが期待出来る。
【００６３】
また、本実施例では、お気に入りシーンを示す情報が存在するアクセスユニットに属するＩＤＲフレームに基づく縮小画像を、１フレームずつ所定間隔でＬＣＤ３２に表示させるスライドショーに適用することが出来る。また、動画編集時にお気に入りシーンを示す情報が存在するアクセスユニットから前後数秒間の映像だけを繋げて１つのファイルを生成することが出来る。更に、お気に入りシーンを示す情報が存在するアクセスユニットから前後数秒間の映像だけリピートすることも出来る。
【符号の説明】
【００６４】
１０ ・・・ レンズ群
１２ ・・・ ＣＭＯＳイメージャユニット
１４ ・・・ 信号処理回路
１６ ・・・ ＳＤＲＡＭ
１８ ・・・ 外部メモリカード制御回路
２０ ・・・ 外部メモリカード
２２ ・・・ フラッシュメモリ
２４ ・・・ 操作部
２６ ・・・ ＣＰＵ
２８ ・・・ ＭＥＰＧコーデック
３０ ・・・ ＪＰＥＧコーデック
３２ ・・・ ＬＣＤ
【技術分野】
【０００１】
本発明は、記録再生装置に関し、特に例えばデジタルカメラに適用され、メモリに記録された画像信号を再生する、記録再生装置に関する。
【背景技術】
【０００２】
従来の記録再生装置においては、メモリに記録された長時間の動画の中から、使用者の所望のシーン、例えば感動的なシーンやお笑いシーンなどを検索する際に、視聴しながら所望のシーンを検索し、再生していたため、非常に時間が掛かっていた。
【特許文献１】特開２００３−３２６２０ 特許文献１には、シーンチェンジを検出してインデックスを作成し、動画に概要を付与して概要とインデックスの間のリンクを作成しておき、検索時には、検索式を与えて動画の概要を検索し、概要を読んでからリンクを用いて関連のあるインデックスを選択し、インデックスの各シーンを見ることが出来る動画管理装置が開示されている。
【０００３】
しかしながら、従来の動画管理装置では、自動的にシーンチェンジを検出してしまうため、使用者の主観に基づいたシーンが再生出来なかったり、使用者が望まないシーンを再生してしまう虞があった。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、上記の問題点を解決するもので、メモリに記録された動画データから使用者が所望するシーンを容易に再生することが出来る記録再生装置を提供するものである。
【課題を解決するための手段】
【０００５】
この発明に従う記録再生装置は、撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生するものであって、動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、メモリに記録されている動画データを再生する再生手段と、記動画データを再生する際、再生手段を制御して識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始する再生制御手段を備えることを特徴とする。
【０００６】
この発明によれば、動画データの記録中に識別情報の割り当て指示を受け付け、再生する際には、識別情報が割り当てられたフレーム画像信号群よりも複数フレーム前のフレーム画像信号から再生を開始する。従って、使用者からの割り当て指示が遅れた場合であっても、所望のシーンから再生することが出来る。
【０００７】
好ましくは、所定条件を満足するフレーム画像信号群は、割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群又は、割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群である。
【０００８】
この発明によれば、割り当て指示を受け付けたタイミング付近のフレーム画像信号群に割り当てられるため、使用者が所望するシーンをより早く検出し、再生をすることが出来る。
【０００９】
更に好ましくは、フレーム画像信号群は、フレーム内符号化及びフレーム間符号化で符号化された複数のフレーム画像信号で形成され、再生制御手段において動画データを再生する際、再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム内符号化されたフレーム画像信号から再生を開始する。
【００１０】
この発明によれば、フレーム内符号化されたフレーム画像信号から再生が開始されるため、使用者が所望するシーンをより早く再生することが出来る。
【００１１】
更に好ましくは、識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号に基づく縮小画像をマルチ表示するマルチ表示手段と、マルチ表示された縮小画像の中から任意の縮小画像を選択する選択手段とを更に備え、再生制御手段は再生手段を制御して、選択手段によって選択された縮小画像に対応するフレーム画像信号が属するフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始する。
【００１２】
この発明によれば、マルチ表示された複数の縮小画像の中から選択された縮小画像に対応するフレーム画像信号群の複数フレーム前のフレーム画像から開始するため、使用者が所望するシーンをより早く再生することが出来る。
【００１３】
更に好ましくは、メモリに記録されている複数の識別情報が割り当てられたフレーム画像信号群の代表フレーム画像信号を１フレームずつ順番に再生するフレーム再生手段を更に備える。
【００１４】
この発明によれば、使用者の所望するシーンのみをスライドショーのように再生することが出来る。
【００１５】
この発明に従う記録再生装置は、撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生するものであって、動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、メモリに記録されている動画データを再生する再生手段と、動画データを再生する際、再生手段を制御して識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号から再生を開始する再生制御手段を備え、所定条件を満足するフレーム画像信号群は、割り当て指示を受け付けた該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群である。
【発明の効果】
【００１６】
本発明の記録再生装置によれば、メモリに記録された動画データから使用者が所望するシーンを容易に再生することが出来る。
【図面の簡単な説明】
【００１７】
【図１】本実施例に係るデジタルカメラ１の回路構成の一部を示すブロック図である。
【図２】本実施例に係るデジタルカメラ１のファイル構成の一部を示す図解図である。
【図３】本実施例に係るデジタルカメラ１におけるフレーム画像信号の生成タイミングの一部を示す図解図である。
【図４】本実施例に係るデジタルカメラ１のファイル構成の他の一部を示す図解図である。
【図５】本実施例に係るＬＣＤ３２に表示されるマルチ表示の一例を示す図解図である。
【図６】本実施例に係る動画撮影タスクの手続の一例を示すフローチャートである。
【図７】本実施例に係る検出タスクの手続の一例を示すフローチャートである。
【図８】本実施例に係る再生制御タスクの手続の一例を示すフローチャートである。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の記録再生装置の一実施例として、デジタルカメラ１に実施した形態につき、図面に沿って具体的に説明する。
【００１９】
図１は、本実施例のデジタルカメラ１のブロック図を示している。デジタルカメラ１は、光学レンズを含むレンズ群１０及び図示しない絞りを含み、主要被写体の光学像はＣＰＵ２６による指示によって、図示しないモータ駆動部に制御されたレンズ群１０及び絞りを通して、ＣＭＯＳイメージャユニット１２に取り込まれる。
【００２０】
なお、本実施例では、イメージセンサとしてＣＭＯＳイメージャユニット１２を採用した形態で説明するが、ＣＣＤイメージャを採用しても良い。ＣＣＤイメージャを採用した場合は、相関２重サンプリング処理、ゲイン調整、クランプ処理、Ａ／Ｄ変換処理を含むＡＦＥ回路が追加される。
【００２１】
そして、ＣＰＵ２６に接続された図示しないタイミングジェネレータによって与えられる取り込みパルスによって、ＣＭＯＳイメージャユニット１２から１フレーム分のデジタル撮像信号が出力される。ここで、ＣＭＯＳイメージャユニット１２では、各画素で蓄積した電荷を増幅し、各画素から配線を使用して信号として読み出しを行い、該信号に対して、相関２重サンプリング処理、ゲイン調整、クランプ処理、Ａ／Ｄ変換処理を施す。該処理が施されたデジタル撮像信号は、画素毎にＲ、Ｇ、Ｂのいずれかの色信号を有し、ＣＰＵ２６の制御によって、バス４０を介してＳＤＲＡＭ１６に一旦格納される。
【００２２】
ＳＤＲＡＭ１６に一旦格納されたデジタル撮像信号は、ＣＰＵ２６の制御によって信号処理回路１４へ入力される。信号処理回路１４では、入力されたデジタル撮像信号に対して色分離処理を施し、更にＹＵＶ変換により、Ｙ、Ｕ、Ｖ信号に変換する。そして、信号処理回路１４で変換されたデジタル画像信号は、バス４０を介して、再びＳＤＲＡＭ１６へ格納される。このように、主要被写体の光学像がさまざまな処理を経てＳＤＲＡＭ１６に格納されるまでを撮像処理と定義する。
【００２３】
ＳＤＲＡＭ１６に格納されたデジタル画像信号は、ＣＰＵ２６の制御によりＬＣＤ３２へ出力可能である。ＬＣＤ３２は、図示しないＬＣＤドライバを含み、ＬＣＤドライバはＹ、Ｕ、Ｖ信号をＲＧＢ信号に変換して、ＬＣＤ３２にデジタル画像信号に基づく画像を表示させることが出来る。このように、ＳＤＲＡＭ１６に格納されたデジタル画像信号が、ＬＣＤ３２に画像として表示されるまでの処理を、表示処理と定義する。
【００２４】
また、撮像処理及び表示処理が順次繰り返して行われることによって、ＬＣＤ３２にスルー画像が表示される。なお、本実施例では、モニタとしてＬＣＤ３２を採用した形態を説明するが、有機ＥＬなどの表示デバイスを採用しても良い。
【００２５】
操作部２４は、モード選択ボタン２４ａ、レリーズボタン２４ｂ、カーソルキー２４ｃ、セットボタン２４ｄ、お気に入りシーンボタン２４ｅ及び表示切替ボタン２４ｆを備えている。使用者によってモード選択ボタン２４ａが操作されることによって、デジタルカメラ１が備える複数モードの一部である静止画撮影モード、動画撮影モード、再生モード及びお気に入りシーン再生モードの中からいずれか１つのモードを選択することが出来る。
【００２６】
モード選択ボタン２４ａによって静止画撮影モードが選択されると、上述した撮像処理が所定の解像度及びフレームレートに基づいて繰り返し実行され、かつ、表示処理が順次実行されることにより、ＬＣＤ３２にスルー画像が表示される。ＬＣＤ３２にスルー画像が表示されている状態で、使用者によってレリーズボタン２４ｂが押下されると、静止画撮影用の解像度に基づいて、上述した撮像処理が実行される。ＳＤＲＡＭ１６に格納されたデジタル画像信号は、ＣＰＵ２６の制御によってＪＰＥＧコーデック３０に入力され、ＪＰＥＧ方式で圧縮処理が施され、静止画圧縮画像データとしてＳＤＲＡＭ１６に格納される。それと並行して、デジタル画像信号に基づいてサムネイル画像信号を生成し、ＪＰＥＧコーデック３０を制御してＪＰＥＧ圧縮処理をサムネイル画像信号に対して施し、サムネイル圧縮画像データとしてＳＤＲＡＭ１６へ格納する。ＳＤＲＡＭ１６に格納されている静止画圧縮画像データとサムネイル圧縮画像データはＪＰＥＧファイルとして、外部メモリカード１８制御回路の制御により、外部メモリカード２０に格納される。
【００２７】
次に、モード選択ボタン２４ａによって動画撮影モードが選択されると、上述した撮像処理が所定の解像度及びフレームレートに基づいて繰り返し実行され、かつ、表示処理が順次実行されることにより、ＬＣＤ３２にスルー画像が表示される。本実施例では、動画撮影フレームレートを１０ｆｐｓとして説明する。
【００２８】
ＬＣＤ３２にスルー画像が表示されている状態で、使用者によってレリーズボタン２４ｂが押下されると、動画撮影用の解像度に基づいて、上述した撮像処理が順次実行される。そして、ＳＤＲＡＭ１６に格納された複数のデジタル画像信号は、ＣＰＵ２６の制御によって、ＭＰＥＧコーデック２８に入力され、ＭＰＥＧ４方式で圧縮処理が施され、ＩＤＲ（Ｉｎｓｔａｎｔａｎｅｏｕｓ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ）フレーム及び／又はＰ（Ｐｒｅｄｉｃｔｅｄ）フレームに基づく動画圧縮データとしてＳＤＲＡＭ１６に格納される。また、ＣＰＵ２６は、レリーズボタン２４ｂが押下されてから最初のフレームのデジタル画像信号に基づいてサムネイル画像信号を生成し、ＪＰＥＧコーデック３０を制御してＪＰＥＧ圧縮処理をサムネイル画像信号に対して施し、サムネイル圧縮画像データとしてＳＤＲＡＭ１６へ格納する。
【００２９】
ＣＰＵ２６は外部メモリカード制御回路１８を制御し、ＳＤＲＡＭ１６に格納されているサムネイル圧縮画像データ及び動画圧縮データを順次外部メモリカード２０へＭＰＥＧ４ ＡＶＣ／Ｈ．２６４（以後、ＭＰＥＧ４と称す）方式に従ってＭＰＥＧ４ファイルとして書き込む。図２はＭＰＥＧ４ファイルの構成を簡略的に図示したものである。図２を参照して説明すると、サムネイル圧縮画像データはメタデータエリアへ書き込まれ、動画圧縮データはメディアデータエリアへ書き込まれる。ここで、本実施例においては、ＳＤＲＡＭ１６に格納されているデータを外部メモリカード２０へＭＰＥＧ４ファイルとして書き込むまでの処理を記録処理と定義する。なお、本実施例では、記録媒体として、外部メモリカード２０を採用した形態を説明するが、デジタルカメラ１の内部にフラッシュメモリを設けたり、ハードディスクを設けても良い。
【００３０】
また、データはシーケンス単位で扱われ、各シーケンスは複数のアクセスユニットで構成される。アクセスユニットは、ＮＡＬユニットの集まりであり、ＮＡＬユニットの種類として、ＳＰＳ（シーケンス・パラメータ・セット）、ＰＰＳ（ピクチャ・パラメータ・セット）、ＳＥＩ（サプリメンタル・エンハンスメント情報）及びスライスがある。なお、複数のスライスでＩＤＲフレームやＰフレームが構成される。ここで、１つのＩＤＲフレームと９つのＰフレームから１つのＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅｓ）が形成される。動画撮影フレームレートは１０ｆｐｓであるため、再生フレームレートを１０ｆｐｓとすると、１ＧＯＰを再生するには１秒間を必要とする。なお、ＩＤＲフレームはイントラ符号化処理によって生成され、Ｐフレームはインター符号化処理によって形成される。
【００３１】
ＳＰＳは、シーケンスに関する情報であり、ＰＰＳは、フレームに関する情報である。ＳＥＩには複数のＳＥＩメッセージを格納することが可能であり、これらのＳＥＩメッセージは符号化されたデータの復号化には必須ではない付加情報である。なお、本実施例では、使用者によって定義可能なＵｓｅｒ ｄａｔａ ｕｎｒｅｇｉｓｔｅｒｅｄ ＳＥＩを使用する。以後ＳＥＩメッセージと略す。ＳＥＩメッセージに対して、お気に入りであることを示す付加情報を格納する。
【００３２】
使用者は動画撮影中に、気に入ったシーンに遭遇したとき、お気に入りシーンボタン２４ｅを押すことによって、押したタイミングのシーンまたは押したタイミング付近のシーンがお気に入りシーンであることを示す情報が動画データに格納される。そして、お気に入りシーン再生モードを選択することによって、お気に入りシーンを中心に動画データを再生することが出来る。次に、お気に入りシーンであることを示す情報の動画データへの格納方法について説明する。
【００３３】
図３は、お気に入りシーンボタン２４ｅが押下されるタイミングを示している。Ｖｓｙｎｃを基準として、撮像処理、表示処理や記録処理が実行される。
【００３４】
図３に示すように、お気に入りシーンボタン２４ｅがアクセスユニットａに属するＩＤＲフレームが生成されるタイミングで押下された場合には、アクセスユニットａに属するＳＥＩメッセージにお気に入りであることを示す付加情報を格納する。お気に入りシーンボタン２４ｅがアクセスユニットｄに属するＰフレームが生成されるタイミングで押下された場合には、アクセスユニットｄに属するＳＥＩメッセージにお気に入りであることを示す付加情報を格納する。この場合、お気に入りシーンボタン２４ｅの押下に応じてＣＰＵ２６内の図示しないレジスタのフラグＦｏの値を“１”に設定し、１ＧＯＰ分の撮像処理が終了した際に、Ｆｏの値が“１”であれば、ＳＥＩメッセージにお気に入りであることを示す付加情報を格納している。
【００３５】
図４は、ＳＥＩメッセージにお気に入りであることを示す付加情報が格納されたシーケンスを示している。図４で説明したように、アクセスユニットａ及びアクセスユニットｄに属するＳＥＩメッセージにお気に入りであることを示す付加情報が格納されている。図４では、お気に入りであることを示す付加情報を格納しているＳＥＩメッセージを、“ＳＥＩ ＊＊＊”として表現している。更に、各アクセスユニットに属するＩＤＲフレームをＡ〜Ｄとして表現している。また、動画撮影中にお気に入りシーンボタン２４ｅの最初の押下に応じて、メタデータにお気に入りシーンファイルであることを示す情報を、メタデータエリアに格納する。
【００３６】
こうして、再び使用者によってレリーズボタン２４ｂが押下されると、撮像処理、表示処理及び記録処理を終了する。なお、レリーズボタン２４ｂが押下されたとき、１ＧＯＰを形成するＩＤＲフレーム及び／またはＰフレームの総数が５フレーム分に満たない場合は、すぐに各処理を終了させるのではなく各処理を継続し、７フレーム分に満たした時点で動画撮影の終了処理を実行する。この動画撮影の終了処理には、撮像処理、表示処理及び記録処理を終了させる処理や、ファイルをクローズすることが含まれる。この場合、レリーズボタン２４ｄの押下に応じてＣＰＵ２６内の図示しないレジスタのフラグＦｓの値を“１”に設定し、前のフレーム撮像処理後に検出されたＦｓの値が“１”であれば、上記動画撮影の終了処理を実行する。次に、お気に入りシーン再生モードにおけるお気に入りシーンの再生方法について説明する。
【００３７】
さて、使用者によってモード選択ボタン２４ａが操作されることによって、再生モードが選択されると、外部メモリカード２０に格納されている複数のＪＰＥＧファイル及び／又はＭＰＥＧファイルの中から使用者が所望するファイルをＳＤＲＡＭ１６に格納し、ＪＰＥＧコーデック３０又はＭＰＥＧコーデック２８に入力させることによって、伸張処理が施され、バス４０を介してＬＣＤに出力される。
【００３８】
また、お気に入りシーン再生モードが選択されると、ＣＰＵ２６は、外部メモリカード制御回路１８を制御して、外部メモリカード２０に記録されている全てのＭＰＥＧ４ファイルのメタデータを解析して、お気に入りファイルであることを示す情報が格納されているＭＰＥＧ４ファイルを特定する。特定されたＭＰＥＧ４ファイルの各メタデータエリアに格納されているサムネイル圧縮画像データに基づくサムネイル画像をＬＣＤ３２にマルチ表示し、使用者によって選択されることにより、これから再生したい所望のお気に入りファイルが特定される。
【００３９】
再生したい所望のお気に入りファイルが特定されると、各アクセスユニットのＳＥＩを解析して、お気に入りであることを示す情報が格納されているアクセスユニットを特定する。次に、メタデータエリアからサムネイル圧縮画像データを検出し、特定されたアクセスユニットに属するＩＤＲフレームに基づく縮小画像とサムネイル画像を含んでマルチ表示する。
【００４０】
図５はサムネイル画像とＩＤＲフレームに基づく縮小画像がＬＣＤ３２に９分割でマルチ表示されている図である。図５では、図４のシーケンスに基づいて、お気に入りファイルの先頭画像であるＩＤＲフレームＡに基づくサムネイル画像Ａ´が左上に表示され、特定されたアクセスユニットに属するＩＤＲフレームＤに基づく縮小画像Ｄ´が、上中央に表示される。
【００４１】
そして、使用者によって縮小画像Ｄ´が選択されると、縮小画像Ｄ´の基となるＩＤＲフレームＤの３０フレーム前にあたるＩＤＲフレームＡから動画再生が始まる。なお、動画再生のフレームレートも、動画撮影のフレームレートと同じく１０ｆｐｓである。時系列で言い換えれば、ＩＤＲフレームＤを基準として３秒前のＩＤＲフレームから再生が開始されることとなる。
【００４２】
このように、お気に入りシーンが感動シーンであった場合などに、縮小画像の選択直後にお気に入りシーンが再生されるよりも、何秒間かの前置きがあったほうが使用者にとっては見やすいものとなる。また、本実施例では、選択されたＩＤＲフレームよりも３０フレーム前のＩＤＲフレームから再生を開始しているが、使用者によって２０フレーム前から再生を開始するように設定したり、３０フレーム後から再生を開始するように設定することが可能である。
【００４３】
次に、図６−図８に示すフローチャートを用いて、上述した動画撮影の処理及びお気に入りシーンの再生の処理について説明する。これらの処理は、ＣＰＵ２６がフラッシュメモリ２２に格納されているプログラムを実行することにより実現される処理である。図６は動画撮影メインタスク、図７は検出タスク、図８はお気に入りシーン再生制御タスクを表している。
【００４４】
ＣＰＵ２６は、図６に示す動画撮影メインタスクを実行することにより、動画撮影が開始され、お気に入りシーンボタン２４ｅが押下されることによってＳＥＩメッセージにお気に入りシーンであることを示す付加情報が格納される。
【００４５】
さて、動画撮影メインタスクの具体的な手続きについての説明に入る。モード選択ボタン２４ａによって動画撮影モードが選択され、レリーズボタン２４ｂが押下されると、ＣＰＵ２６はステップＳ１０１において、ＣＰＵ２６内に設けられたレジスタにカウント値Ｃに“０”を設定する。
【００４６】
次にステップＳ１０３へ進み、動画撮影初期化処理を実行する共に、検出タスクを起動させる。なお、動画撮影初期化処理は、動画ファイル（ＭＰＥＧファイル）をオープンする処理や、上述した動画撮影に必要なパラメータ（解像度やフレームレート）を設定する処理が含まれる。次にステップＳ１０５に進み、ＣＰＵ２６内に設けられたレジスタに格納されているフラグＦｓの値が“１”であるか否かを判別する。ステップＳ１０５においてＹＥＳと判別されると、ステップＳ１０６へ進み、動画撮影終了処理を実行して、本タスクを終了する。ステップＳ１０５においてＮＯと判別されると、ステップＳ１０７へ進み、１フレーム分の撮像処理を行う。そしてステップＳ１０９へ進み、カウント値Ｃをインクリメントする（Ｃ＝Ｃ＋１）。次にステップＳ１１１へ進み、カウント値が“１０”であるか否かを判別し、ＮＯと判断すると、ステップＳ１０５へ戻る。
【００４７】
ステップＳ１１１においてＹＥＳと判別されると、ステップＳ１１２へ進み、カウント値Ｃを“０”に設定し、ステップＳ１１３へ進む。ステップＳ１１３では、ＣＰＵ２６内に設けられたレジスタに格納されているお気に入りボタン押下フラグＦｏの値が“１”であるか否かを判別する。ステップＳ１１３においてＮＯと判別されると、ステップＳ１０５へ戻る。
【００４８】
ステップＳ１１３においてＹＥＳと判別されると、ステップＳ１１５へ進み、ＳＥＩメッセージにお気に入りであることを示す付加情報を格納する。そしてステップＳ１０５へ戻る。
【００４９】
次に図７を示すフローチャートを用いて、検出処理を説明する。この検出タスクを実行することにより、お気に入りシーンボタン２４ｅの押下や電源がオフされた操作などを検出し、ＣＰＵ２６内に設けられたレジスタに数値を設定する。
【００５０】
動画撮影メインタスクのステップＳ１０３で検出タスクが起動されると、まずステップＳ２０１において終了フラグＦｓとお気に入りフラグＦｏの値を夫々リセット（Ｆｓ＝０、Ｆｏ＝０に設定）する。次にステップＳ２０３へ進み、お気に入りシーンボタン２４ｅの押下が有ったか否かを判別し、ＮＯと判別するとステップＳ２０９へ進む。ステップＳ２０３でＹＥＳと判別されると、ステップＳ２０５へ進み、お気に入りフラグＦｏの値が“１”であるか否かを判別し、ＹＥＳと判別するとステップＳ２０９へ進み、ＮＯと判別するとステップＳ２０７へ進む。ステップＳ２０７では、お気に入りフラグＦｏの値を“１”（Ｆｏ＝１）に設定する。
【００５１】
ステップＳ２０９では、デジタルカメラ１に対して終了操作が有ったか否かを判別する。この終了操作として、レリーズボタン２４ｂに対する押下操作、及び図示しない電源ボタンに対する押下操作が挙げられる。ステップＳ２０９においてＹＥＳと判別するとステップＳ２１１へ進み、ＮＯと判別するとステップＳ２０３へ進む。
【００５２】
ステップＳ２１１では、カウント値Ｃの値が“７以上”（Ｃ≧７）であるか否かを判別し、ＹＥＳと判別されるまで該判別を繰り返す。ステップＳ２１１においてＹＥＳと判別されると、ステップＳ２１３へ進み、終了フラグＦｓの値を“１”に設定し、本タスクを終了する。
【００５３】
次に図８に示すフローチャートを用いて、再生制御処理を説明する。ＣＰＵ２６は、再生制御タスクを実行することにより、お気に入りシーンの再生を行う。
【００５４】
モード選択ボタン２４ａが操作されることによってお気に入りシーン再生モードが選択されると、ステップＳ３０１において、カーソルキー２４ｃやセットボタン２４ｄが操作されることによって、所望の動画ファイル（ＭＰＥＧファイル）が選択されたか否かを判別する。このとき、メタデータに格納されているお気に入りシーンを含むファイルであることを示す情報に該当する動画ファイル（ＭＰＥＧファイル）のサムネイル画像をマルチ表示し、使用者はマルチ表示されたサムネイル画像の中から、カーソルキー２４ｃやセットボタン２４ｄが操作されることによって、使用者が所望する動画ファイル（ＭＰＥＧファイル）が選択される。
【００５５】
さて、ステップＳ３０１でＹＥＳと判別されるまで、ステップＳ３０１の判別を繰り返し、ＹＥＳと判別されるとステップＳ３０３へ進む。
【００５６】
ステップＳ３０３において、選択された動画ファイル（ＭＰＥＧファイル）をオープンし、次のステップＳ３０５でファイル解析を行う。このファイル解析には、ＳＥＩメッセージの解析が含まれ、どのアクセスユニットにお気に入りシーンであることを示す付加情報が格納されているＳＥＩメッセージが属しているかを検出する。
【００５７】
次にステップＳ３０７へ進み、お気に入りシーンであることを示す付加情報が格納されているＳＥＩメッセージが属する複数のアクセスユニットから、夫々ＩＤＲフレームを抽出し、間引きなどの縮小処理を施して、マルチ表示を行う。
【００５８】
次にステップＳ３０９へ進み、使用者によってカーソルキー２４ｃやセットボタン２４ｄが操作されることによって、所望の縮小画像が選択されたか否かを判別する。ステップＳ３０９では、ＹＥＳと判別されるまで該判別を行い、ＹＥＳと判別されると、ステップＳ３１１へ進む。
【００５９】
ステップＳ３１１では、選択された縮小画像に対応するＩＤＲフレームが属するアクセスユニットを特定し、該アクセスユニットの時間軸上３つ前のアクセスユニットを特定する。次にステップＳ３１３へ進み、ステップＳ３１１において特定されたアクセスユニットから再生を開始し、ファイルの最終フレームまで再生されると、ステップＳ３１５へ進む。ステップＳ３１５では、モード選択ボタン２４ａが操作されることにより他のモードに設定されたか否かを判別し、ＹＥＳと判別すると本タスクを終了し、ＮＯと判別するとステップＳ３０１へ戻る。
【００６０】
以上説明したように、本実施例におけるデジタルカメラ１は、動画撮影中に使用者によってお気に入りシーンボタン２４ｅが押下されることにより、アクセスユニット毎のＳＥＩメッセージにお気に入りシーンであることを示す付加情報が格納される。また、お気に入りシーンボタン２４ｅが押下された時点で、動画ファイル（ＭＰＥＧファイル）のメタデータエリアにお気に入りシーンを示す付加情報が格納される。そして、お気に入りシーン再生モードが設定されると、まず、外部メモリカード２０に記録されている複数のファイルのメタデータを検索して、お気に入りシーンを示す付加情報を持つファイルを特定する。そして、複数存在する場合は、特定されたファイルのサムネイル画像をマルチ表示させる。使用者はマルチ表示されたサムネイル画像に基づき、所望の動画ファイル（ＭＰＥＧファイル）を選択する。
【００６１】
次に、選択された動画ファイル（ＭＰＥＧファイル）内のＳＥＩを分析することにより、お気に入りシーンを示す付加情報を持つアクセスユニットが特定され、該アクセスユニットに含まれるＩＤＲフレームに基づく縮小画像をマルチ表示させる。使用者は、マルチ表示された縮小画像の中から所望の縮小画像を選択することにより、選択された縮小画像に対応するＩＤＲフレームよりも時系列的に前のＩＤＲフレームを開始フレームとして再生を行う。
【００６２】
従って、撮影中にお気に入りシーン２４ａを押すタイミングが遅れてしまったとしても、再生時には何秒間か前から再生を開始するので、目的のシーンを見ることが出来る。また、所望するシーンが感動シーンの場合などに、再生直後に感動シーンが再生されるよりも、何秒間か前置きがあったほうが、使用者にとっては見やすいと期待出来る。更に、動画の中の使用者が見たいシーンだけを素早く検索することが出来る。これによれば、撮影したものの放置されて見直ししなかった使用者も過去の動画を見ようという気になることが期待出来る。
【００６３】
また、本実施例では、お気に入りシーンを示す情報が存在するアクセスユニットに属するＩＤＲフレームに基づく縮小画像を、１フレームずつ所定間隔でＬＣＤ３２に表示させるスライドショーに適用することが出来る。また、動画編集時にお気に入りシーンを示す情報が存在するアクセスユニットから前後数秒間の映像だけを繋げて１つのファイルを生成することが出来る。更に、お気に入りシーンを示す情報が存在するアクセスユニットから前後数秒間の映像だけリピートすることも出来る。
【符号の説明】
【００６４】
１０ ・・・ レンズ群
１２ ・・・ ＣＭＯＳイメージャユニット
１４ ・・・ 信号処理回路
１６ ・・・ ＳＤＲＡＭ
１８ ・・・ 外部メモリカード制御回路
２０ ・・・ 外部メモリカード
２２ ・・・ フラッシュメモリ
２４ ・・・ 操作部
２６ ・・・ ＣＰＵ
２８ ・・・ ＭＥＰＧコーデック
３０ ・・・ ＪＰＥＧコーデック
３２ ・・・ ＬＣＤ
【特許請求の範囲】
【請求項１】
撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生する記録再生装置であって、
前記動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、
前記メモリに記録されている動画データを再生する再生手段と、
前記動画データを再生する際、前記再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始する再生制御手段を備えることを特徴とする、記録再生装置。
【請求項２】
前記所定条件を満足するフレーム画像信号群は、前記割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群又は、前記割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群であることを特徴とする、請求項１記載の記録再生装置。
【請求項３】
前記フレーム画像信号群は、フレーム内符号化及びフレーム間符号化で符号化された複数のフレーム画像信号で形成され、
前記再生制御手段において前記動画データを再生する際、前記再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム内符号化されたフレーム画像信号から再生を開始することを特徴とする、請求項１又は２に記載の記録再生装置。
【請求項４】
前記識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号に基づく縮小画像をマルチ表示するマルチ表示手段と、
前記マルチ表示された縮小画像の中から任意の縮小画像を選択する選択手段とを更に備え、
前記再生制御手段は前記再生手段を制御して、前記選択手段によって選択された縮小画像に対応するフレーム画像信号が属するフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始することを特徴とする、請求項１乃至３のいずれかに記載の記録再生装置。
【請求項５】
前記メモリに記録されている複数の前記識別情報が割り当てられたフレーム画像信号群の代表フレーム画像信号を１フレームずつ順番に再生するフレーム再生手段を更に備えることを特徴とする、請求項１乃至４のいずれかに記載の記録再生装置。
【請求項６】
撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生する記録再生装置であって、
前記動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、
前記メモリに記録されている動画データを再生する再生手段と、
前記動画データを再生する際、前記再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号から再生を開始する再生制御手段を備え、
前記所定条件を満足するフレーム画像信号群は、前記割り当て指示を受け付けた該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群であることを特徴とする、記録再生装置。
【請求項１】
撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生する記録再生装置であって、
前記動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、
前記メモリに記録されている動画データを再生する再生手段と、
前記動画データを再生する際、前記再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始する再生制御手段を備えることを特徴とする、記録再生装置。
【請求項２】
前記所定条件を満足するフレーム画像信号群は、前記割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群又は、前記割り当て指示を受け付けたタイミング又は該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群であることを特徴とする、請求項１記載の記録再生装置。
【請求項３】
前記フレーム画像信号群は、フレーム内符号化及びフレーム間符号化で符号化された複数のフレーム画像信号で形成され、
前記再生制御手段において前記動画データを再生する際、前記再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群の複数フレーム前のフレーム内符号化されたフレーム画像信号から再生を開始することを特徴とする、請求項１又は２に記載の記録再生装置。
【請求項４】
前記識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号に基づく縮小画像をマルチ表示するマルチ表示手段と、
前記マルチ表示された縮小画像の中から任意の縮小画像を選択する選択手段とを更に備え、
前記再生制御手段は前記再生手段を制御して、前記選択手段によって選択された縮小画像に対応するフレーム画像信号が属するフレーム画像信号群の複数フレーム前のフレーム画像信号から再生を開始することを特徴とする、請求項１乃至３のいずれかに記載の記録再生装置。
【請求項５】
前記メモリに記録されている複数の前記識別情報が割り当てられたフレーム画像信号群の代表フレーム画像信号を１フレームずつ順番に再生するフレーム再生手段を更に備えることを特徴とする、請求項１乃至４のいずれかに記載の記録再生装置。
【請求項６】
撮影によってフレーム画像信号を順次生成する生成手段を備え、複数のフレーム画像信号で構成される複数のフレーム画像信号群で形成される動画データとしてメモリに記録し、該動画データを再生する記録再生装置であって、
前記動画データの記録中に識別情報の割り当て指示を受け付けると、該動画データを形成する複数のフレーム画像信号群のうち、所定条件を満足するフレーム画像信号群に該識別情報を割り当てる割り当て手段と、
前記メモリに記録されている動画データを再生する再生手段と、
前記動画データを再生する際、前記再生手段を制御して前記識別情報が割り当てられたフレーム画像信号群に属するフレーム画像信号から再生を開始する再生制御手段を備え、
前記所定条件を満足するフレーム画像信号群は、前記割り当て指示を受け付けた該タイミングの直近で生成されたフレーム画像信号が属するフレーム画像信号群より前のフレーム画像信号群であることを特徴とする、記録再生装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１２−２２７６１５（Ｐ２０１２−２２７６１５Ａ）
【公開日】平成２４年１１月１５日（２０１２．１１．１５）
【国際特許分類】
【出願番号】特願２０１１−９１４０１（Ｐ２０１１−９１４０１）
【出願日】平成２３年４月１５日（２０１１．４．１５）
【出願人】（０００００１８８９）三洋電機株式会社 (18,308)
【Ｆターム（参考）】
【公開日】平成２４年１１月１５日（２０１２．１１．１５）
【国際特許分類】
【出願日】平成２３年４月１５日（２０１１．４．１５）
【出願人】（０００００１８８９）三洋電機株式会社 (18,308)
【Ｆターム（参考）】
[ Back to top ]