画像再生装置、制御方法、制御プログラム及び記憶媒体
【課題】
静止画像と動画像を同時記録した後、静止画または動画像のどちらを視聴するのかを選択する煩雑さを解消する。
【解決手段】
再生形式判定部（１２７）は、動画像の顔認識位置の時間的変化が所定値より大きい場合、又は、動画像に付随する音声の音圧の時間的変化が所定値より大きい場合に、再生形式を動画像とし、それ以外では、再生形式を静止画とする。記録／再生制御部（１０４）は、操作者により選択された撮影データに対して、判定された再生形式で動画像又は静止画像を再生し、ＬＣＤ（１０９）に表示する。
静止画像と動画像を同時記録した後、静止画または動画像のどちらを視聴するのかを選択する煩雑さを解消する。
【解決手段】
再生形式判定部（１２７）は、動画像の顔認識位置の時間的変化が所定値より大きい場合、又は、動画像に付随する音声の音圧の時間的変化が所定値より大きい場合に、再生形式を動画像とし、それ以外では、再生形式を静止画とする。記録／再生制御部（１０４）は、操作者により選択された撮影データに対して、判定された再生形式で動画像又は静止画像を再生し、ＬＣＤ（１０９）に表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像再生装置、制御方法、制御プログラム及び記憶媒体に関し、特に、ビデオカメラ、デジタルカメラ等で撮影した動画像と静止画について、動画像と静止画のいずれかを選択再生する画像再生装置、制御方法、制御プログラム及び記憶媒体に関する。
【背景技術】
【０００２】
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００１−７８１３７号公報
【０００４】
従来のビデオカメラやデジタルカメラには、静止画と共に、その前後の動画像を自動的に記録できるものがある（例えば、特許文献１参照。）。撮影操作に使用するレリーズスイッチは、例えば、浅く押した半押し状態と、最後まで押した全押し状態の２段階になっており、半押しで動画像の記録を開始し、全押しで静止画を記録する。動画像の画像データはバッファメモリに取り込まれるが、バッファメモリの容量は有限であるので、容量を越えた場合は古いものから順に更新されていく。静止画の記録を実行してから一定時間経過後に、動画像の取り込みを終了する。そして、静止画および動画像の画像データを圧縮処理した圧縮データを、メモリカード等の記録媒体に記録する。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
静止画と動画像を自動的に同時記録した場合、記録された静止画と動画像を再生する方法に以下のような問題点がある。すなわち、一回の撮影で静止画と動画像の両方の画像データが生成されるが、再生時に、静止画と動画像のどちらを再生するかを選択する煩雑さが発生する。更には、鑑賞者がその選択を判断しきれない場合、例えば、静止画と動画像の両方を再生することになり、撮影内容の確認をしたい場合に視聴の手間が増えてしまう問題がある。
【０００６】
従来の、静止画または動画像のいずれか一方しか一度に記録できないカメラであれば、撮影者は、静止画記録モードまたは動画像記録モードのいずれかを選択して撮影することになる。また、再生時は、もちろん、その様に選択して記録された静止画または動画像のいずれかを鑑賞することになる。
【０００７】
本発明は、同時記録される動画像と静止画のどちらを再生するかの選択の煩雑さを軽減する画像再生装置、制御方法、制御プログラム及び記憶媒体を提示することを目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る画像再生装置は、動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体と、前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定手段と、前記再生形式判定手段の判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生手段とを有することを特徴とする。
【０００９】
本発明に係る画像再生装置の制御方法は、動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置の制御方法であって、前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定ステップと、前記再生形式判定ステップの判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生ステップとを有することを特徴とする。
【００１０】
本発明に係る画像再生装置の制御プログラムは、動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置により実行される制御プログラムであって、前記画像再生装置に前記動画像と前記静止画像のどちらを優先して再生するかを判定させる再生形式判定機能と、前記画像再生装置に、前記再生形式判定機能の判定結果に従い、前記動画像及び前記静止画の一方を選択させ再生させる再生手段とを実現させることを特徴とする。
【発明の効果】
【００１１】
本発明によれば、自動的に同時記録された静止画と動画像のうち、いずれかを優先して再生することで、静止画と動画像のいずれかを、推奨として視聴者に提供する。これにより、視聴者が静止画と動画像のどちらを視聴すべきかを判断する煩雑さを解消できる。
【００１２】
更には、視聴者が静止画と動画像のどちらを再生するのかを判断しきれずに、結局、静止画と動画像の両方を再生してしまい、再生内容を確認する手間が増えてしまうことも回避できる。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施の形態に係るビデオカメラのシステム構成を示すブロック図である。
【図２】本発明の実施の形態に係る記録処理の手順を説明するフローチャートである。
【図３】静止画と動画像の同時記録方法を説明する図である。
【図４】撮影データの構成を説明する図である。
【図５】メタデータの生成方法を説明する図である。
【図６】本発明の実施の形態に係る再生処理の手順を説明するフローチャートである。
【図７】再生形式判定後の撮影データの構成を説明する図である。
【図８】本発明の第２の実施の形態に係るビデオカメラのシステム構成を示すブロック図である。
【図９】再生インデックス画面の構成を説明する図である。
【図１０】再生形式変更操作後の再生インデックス画面の構成を説明する図である。
【発明を実施するための形態】
【００１４】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【実施例１】
【００１５】
図１は、本発明に係る画像再生装置の一実施例を組み込んだビデオカメラの概略構成ブロック図である。
【００１６】
本実施例のビデオカメラ１００において、レンズ１０１は、ビデオカメラ１００の撮影対象となる被写体の光学像を生成する。ＣＣＤ撮像素子１０２は、レンズ１０１による光学像を画像信号に変換する。カメラ信号処理部１０３は、ＣＣＤ撮像素子１０２の電気信号を映像信号として信号処理する。静止画像記録処理部１１８は、カメラ信号処理部１０３が信号処理した映像信号を静止画像として記録処理する。動画像記録処理部１１９は、カメラ信号処理部１０３が信号処理した映像信号を動画像として記録処理する。
【００１７】
マイク１３０は、ビデオカメラ１００の撮影対象となる被写体から発せられる音を収集して電気信号に変換する。音声記録処理部１２０は、マイク１３０の電気信号を音声として記録処理する。
【００１８】
記録／再生制御部１０４は、静止画像記録処理部１１８の記録処理する静止画像、動画像記録処理部１１９の記録処理する動画像及び音声記録処理部１２０の記録処理する音声の記録再生を制御する。データ管理部１２１は、静止画像記録処理部１１８により記録処理された静止画像、動画像記録処理部１１９により記録処理された動画像、音声記録処理部１２０により記録処理された音声をデータ管理する。
【００１９】
記録媒体制御部１０５は記録媒体に静止画像／動画像／音声を記録する為の制御を実行し、記録媒体１０６に静止画像／動画像／音声を記録させる。すなわち、記録媒体制御部１０５は、記録／再生制御部１０４からの記録すべきデータを記録媒体１０６に記録し、記録媒体１０６から読み出したデータを記録／再生制御部１０４に供給する。
【００２０】
記録媒体１０６に記録される撮影データ１１２は、静止画像データ１１３、動画像データ１１４、メタデータ１１６及び再生形式データ１１７で構成される。音声データ１１５は、動画像データ１１４に含まれる形式で記録される。再生形式データ１１７は、その再生形式データ１１７が含まれる撮影データ１１２に対して再生指示が為された時に、静止画像データ１１３と、音声データ１１５を含む動画像データ１１４のどちらを再生するかを指定する。再生形式データ１１７に設定されるデータは、「動画像」または「静止画」の何れかを示す値をとる。
【００２１】
メタデータ制御部１２５のメタデータ生成重畳処理部１２６は、静止画像記録処理部１１８、動画像記録処理部１１９及び音声記録処理部１２０によりそれぞれ処理される静止画像、動画像及び音声からメタデータを生成する。生成されたメタデータは、データ管理部１２１及び記録媒体制御部１０５を経由して、記録媒体１０６の撮影データ１１２に含まれるメタデータ１１６として記録される。再生形式判定部１２７は、記録媒体１０６に記録される撮影データ１１２に含まれるメタデータ１１６を参照し、メタデータ１１６に応じて再生形式を決定する。再生形式判定部１２７により決定された再生形式は、データ管理部１２１及び記録媒体制御部１０５を経由して、記録媒体１０６に記録される撮影データ１１２に含まれる再生形式データ１１７として記録される。
【００２２】
システム制御部１０７は、ビデオカメラ１００、記録／再生制御部１０４及びメタデータ制御部１２５を含むビデオカメラ１００全体を統括制御するマイクロコンピュータからなる。システム制御部１０７は、撮影スイッチ１１０及び撮影／再生モード切替えスイッチ１２９の状態を監視し、ビデオカメラ１００の操作者により操作が為されたかどうかを検出する。システム制御部１０７は、撮影スイッチ１１０又は撮影／再生モード切替えスイッチ１２９の操作に従い、ビデオカメラ１００、記録／再生制御部１０４及びメタデータ制御部１２５を制御する。
【００２３】
画像再生処理部１２２は、記録媒体１０６に記録された静止画像データ１１３及び動画像データ１１４を、記録媒体制御部１０５及びデータ管理部１２１を経由して読み出し、画像再生処理を行う。ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）装置１２３は、ビデオカメラ１００の制御状態を再生画像に重畳する。ＬＣＤ駆動装置１０８は、画像再生処理部１２２で生成された再生画像にＯＳＤ装置１２３による重畳表示が為された画像データに従いＬＣＤ（液晶表示装置）１０９を駆動して、画像表示させる。これにより、操作者は、再生画像およびビデオカメラ１００の制御状態をＬＣＤ１０９の画面上で確認できる。
【００２４】
音声再生処理部１２４は、記録媒体１０６に記録された撮影データ１１２に含まれる動画像データ１１４に更に含まれる音声データを記録媒体制御部１０５及びデータ管理部１２１を経由して読み出し、音声再生処理する。スピーカ１１１は、音声再生処理部１２４の処理した電気信号により再生音声を発する。これにより、操作者は再生音声を聴くことが出来る。
【００２５】
撮影／再生モード切替えスイッチ１２９が操作された時の動作を説明する。撮影／再生モード切替えスイッチ１２９が撮影モード側に操作されたことが検出されると、システム制御部１０７は、記録／再生制御部１０４の動作を撮影モード動作に制御する。また、ＣＣＤ撮像素子１０２及びカメラ信号処理部１０３が撮像動作を行い、撮像画像信号を静止画像記録処理部１１８と動画像記録処理部１１９へ送る。マイク１３０も動作し、音声信号を音声記録処理部１２０に送る。
【００２６】
撮影／再生モード切替えスイッチ１２９が再生モード側に操作されたことが検出されると、システム制御部１０７は、記録／再生制御部１０４の動作を再生モード動作に制御する。また、記録媒体１０６に記録されたメタデータ１１６が、記録媒体制御部１０５とデータ管理部１２１を介して、メタデータ制御部１２５の再生形式判定部１２７に供給され、再生形式が判定される。再生形式の判定結果は、再び、データ管理部１２１と記録媒体制御部１０５を経由して、記録媒体１０６に再生形式データ１１７として記録される。
【００２７】
撮影スイッチ１１０が操作された時の動作を説明する。撮影スイッチ１１０が押され、撮影者により撮影指示が為されたとする。撮影指示時点でカメラ信号処理部１０３から静止画像記録処理部１１８に送られた画像信号が、静止画像記録処理部１１８に静止画像データとして一時記憶される。同様に、カメラ信号処理部１０３から動画像記録処理部１１９に送られた画像信号が一定時間分の動画像として、動画像記録処理部１１９に動画像データとして一時記憶される。動画像記録処理部１１９に一時記録された一定時間分の動画像と同じ一定時間分の音声信号が、音声記録処理部１２０に音声データとして一時記録される。これら静止画像データ、動画像データ及び音声データは、データ管理部１２１に転送される。データ管理部１２１は、これらのデータを記録媒体１０６での記録管理に適したデータ形式に変換し、記録媒体制御部１０５を経由して記録媒体１０６に記録する。
【００２８】
メタデータ生成重畳処理部１２６が、記録媒体１０６に記録される静止画像データ、動画像データ及び音声データに対応したメタデータを生成する。メタデータ生成重畳処理部１２６はまた、データ管理部１２１が記録媒体１０６での記録管理に適したデータ形式への変換を行った時に生成されるメタデータの重畳も行う。
【００２９】
図２は、本実施例の記録処理手順のフローチャートである。Ｓ２０１で、システム制御部１０７は、撮影モード時処理を開始する。Ｓ２０２で、システム制御部１０７は、撮影スイッチ１１０が撮影者によって押されたかどうかを監視する。押されていないと判断された場合は、Ｓ２０２に戻り、撮影スイッチ１１０が押されたかどうかの監視を継続する。押されたと判断された場合は、Ｓ２０３で、システム制御部１０７は、動画像／静止画の同時記録を実行する。動画像／静止画の同時記録処理の詳細は後述する。Ｓ２０４で、記録した動画像／静止画に対応するメタデータを生成する。メタデータ生成処理の詳細は後述する。Ｓ２０５で、Ｓ２０３で記録された静止画と動画像、及び、Ｓ２０４で生成されたメタデータを、互いに関連付けて記録媒体１０６に記録する。記録処理の詳細は後述する。Ｓ２０６で、終了する。
【００３０】
図３は、動画像／静止画の同時記録処理（Ｓ２０３）のタイミングを説明する図である。３０１は処理内容を説明する基準とする為の時間軸を示す。３０２は撮影スイッチ１１０が撮影者により押し操作されるタイミングを示す。静止画像記録処理部１１８が、このタイミング３０２でカメラ信号処理部１０３から静止画像記録処理部１１８に送られる画像信号を記録処理する。そして、記録処理された静止画像データが、データ管理部１２１と記録媒体制御部１０５を経由して、記録媒体１０６に記録される。
【００３１】
３０３はショートクリップ動画像記録が行われる期間を示す。ここでは、動画像は、所定の一定時間分を記録後に自動終了するショートクリップ動画像として記録される。所定の一定時間とは、例えば、４秒間である。または、４秒間、８秒間、１６秒間又は３２秒間等と、複数の選択肢から撮影者が選択して設定する構成としても良い。本実施例では、図示するとおり、ショートクリップ動画像記録期間は、撮影スイッチが押されたタイミングを含む。
【００３２】
３０４はプリ記録期間を示す。プリ記録期間３０４は、例えば、２秒間である。２秒間、４秒間、８秒間又は１６秒間等と、複数の選択肢から撮影者が選択して設定する構成としても良い。本実施例では、ショートクリップ動画像記録期間３０３は、プリ記録期間３０４を含む。プリ記録期間３０４をショートクリップ動画像記録期間３０３よりも長い時間として設定することはできない。
【００３３】
撮影／再生モード切替えスイッチ１２９が撮影モード側に操作され、且つ、撮影スイッチ１１０が操作されていないとき、一定時間分の動画像が暫定的に、動画像記録処理部１１９の内部（又は記録媒体１０６）の一時記録領域に保持される。すなわち、動画像記録処理部１１９は、カメラ信号処理部１０３から動画像記録処理部１１９に送られる画像信号を、撮影スイッチ１１０が操作されていない時も、記録処理している。一時記録領域の容量は有限であり、プリ記録期間３０４は、その容量相当の期間よりも短い期間となる様に設定される。一時記録領域の空き容量が無くなると、古い動画像部分が消去され、これにより空いた記録領域に、カメラ信号処理部１０３から送られてくる最新の画像データが記録される。
【００３４】
撮影スイッチ１１０が操作されると、動画像記録処理部１１９は、一時記録領域に記録されたプリ記録期間３０４に相当する画像信号に加えて、その画像信号を含むショートクリップ記録期間に相当する画像信号を一時記録する。このように一時記録された動画像が、データ管理部１２１及び記録媒体制御部１０５を経由して記録媒体１０６に記録される。
【００３５】
撮像時のこのような記録処理により、記録媒体１０６には、動画像と、この動画像の取得中（又は撮像中）に取得（又は撮像）される静止画像が、記録される。
【００３６】
図４は、記録媒体１０６に記録されるデータの構成模式図を示す。４０１は撮影データＡ、４１１は撮影データＢ、４２１は撮影データＣである。撮影データＡ４０１、撮影データＢ４１１及び撮影データＣ４２１はそれぞれ、図１の撮影データ１１２に対応する。撮影スイッチ１１０の１回の操作毎に撮影データは１組作成される。図４では、撮影スイッチ１１０の３回の操作、つまり３回の撮影が為され、３組の撮影データＡ４０１、撮影データＢ４１１及び撮影データＣ４２１が作成されている。
【００３７】
撮影データＡ４０１は、静止画像データＡ４０２、動画像データＡ４０３、メタデータＡ４０４及び再生形式データＡ４０５を含む。撮影データＢ４１１は、静止画像データＢ４１２、動画像データＢ４１３、メタデータＢ４１４及び再生形式データＢ４１５を含む。撮影データＣ４２１は、静止画像データＣ４２２、動画像データＣ４２３、メタデータＣ４２４及び再生形式データＣ４２５を含む。静止画像データＡ４０２、静止画像データＢ４１２及び静止画像データＣ４２２はそれぞれ、図１の静止画像データ１１３に対応する。動画像データＡ４０３、動画像データＢ４１３及び動画像データＣ４２３は、図１の動画像データ１１４に対応する。メタデータＡ４０４、メタデータＢ４１４及びメタデータＣ４２４は、図１のメタデータ１１６に対応する。再生形式データＡ４０５、再生形式データＢ４１５及び再生形式データＣ４２５は、図１の再生形式データ１１７に対応する。
【００３８】
この説明では、メタデータＡ４０４には、時間的変化が大きいメタデータが格納されている。メタデータＢ４１４には、時間的変化が大きいメタデータが格納されている。メタデータＣ４２４には、時間的変化が小さいメタデータが格納されている。メタデータ生成処理の詳細は後述する。
【００３９】
また、再生形式データＡ４０５、再生形式データＢ４１５及び再生形式データＣ４２５はいずれも未設定状態であるとする。再生形式データ設定の詳細は後述する。
【００４０】
図５は、メタデータ生成重畳処理部１２６で実施されるメタデータ生成処理の説明図である。図５では、メタデータを顔認識位置のフレーム上の変化量としている。図５（ａ）は、変化が大きい場合を示し、図５（ｂ）は変化が小さい場合を示す。５０１、５０２、５０４及び５０５はそれぞれ動画像中の１フレームを抜き出したものである。フレーム５０１とフレーム５０２は、同一の動画像データから抜き出したものである。フレーム５０４とフレーム５０５は、同一の動画像データから抜き出したものである。５０３、５０６はフレームの時間的変化を示す矢印であり、フレーム５０１からフレーム５０２へ、また、フレーム５０４からフレーム５０５へ時間が進行している。
【００４１】
図５（ａ）は、移動する人物を撮影した場合であり、フレーム中で顔認識位置が変化している。フレーム５０１では、フレーム上の左端に顔認識位置が存在したが、フレーム５０２では、顔認識位置が中央右側まで変化しており、顔認識位置の変化量が大きい。その顔認識位置の時間的変化量を、メタデータに設定する。
【００４２】
図（ｂ）は、静止する樹木を撮影した場合で、顔認識されていない為、顔認識位置の変化量は無い。その顔認識位置の時間的変化量を、メタデータに設定する。
【００４３】
図６は、システム制御部１０７で実行される再生処理手順を説明するフローチャートである。
【００４４】
Ｓ６０１で、システム制御部１０７は、再生モード時処理の開始を示す。Ｓ６０２で、システム制御部１０７は、記録媒体１０６から動画像データを読み出させる。図４の撮影データ構成の場合、動画像データとしては、動画像データＡ４０３、動画像データＢ４１３及び動画像データＣ４２３がある。Ｓ６０３で、システム制御部１０７は、動画像データの撮影期間に撮影された静止画データを取得する。図４に示す撮影データ構成の場合、各動画像データの撮影期間に撮影された静止画データは、同一の撮影データとして分類管理されている。動画像データＡ４０３の撮影期間に撮影された静止画データは、静止画像データＡ４０２となる。動画像データＢ４１３の撮影期間に撮影された静止画データは、静止画像データＢ４１２となる。動画像データＣ４２３の撮影期間に撮影された静止画データは、静止画像データＣ４２２となる。
【００４５】
Ｓ６０４で、再生形式判定部１２７が、メタデータに関連付けて再生形式を決定する。再生形式決定の詳細は後述する。Ｓ６０５で、システム制御部１０７は、再生形式をチェックする。再生形式が動画像の場合、Ｓ６０６に進み、動画像データを選択して再生する。再生形式が静止画の場合、Ｓ６０７に進み、静止画データを選択して再生する。Ｓ６０８で、システム制御部１０７は、図６に示す処理を終了する。
【００４６】
図７は、再生形式が決定された後の、記録媒体１０６に記録されるデータの構成を示す。図４に対して異なる箇所は、再生形式データＡ７０５、再生形式データＢ７１５及び再生形式データＣ７２５である。
【００４７】
再生形式決定の詳細を説明する。本実施例では、顔認識位置の時間的変化量が所定値以上であった場合に、再生形式を動画像に設定し、顔認識位置の時間的変化量が所定値未満であった場合に、再生形式を静止画に設定する。この決定条件に従い、Ｓ６０４では再生形式を決定する。
【００４８】
例えば、撮影データＡ４０１で、メタデータＡ４０４に記録された顔認識位置の時間的変化量が所定値以上である場合、再生形式データＡ７０５は「動画像」と決定される。撮影データＢ４１１で、メタデータＢ４１４に記録された顔認識位置の時間的変化量が所定値以上である場合、再生形式データＢ７１５は「動画像」と決定される。撮影データＣ４２１で、メタデータＣ４２４に記録された顔認識位置の時間的変化量が所定値未満の場合、再生形式データＣ７２５は「静止画」と決定される。
【００４９】
画像の顔認識位置の時間的変化量が所定値より大きい場合に動画像形式と判定することにより、カメラの被写体としては人物を撮影する機会が多いが、人物の動きが比較的多い場合に動画像を優先して再生することができる。また、被写体人物の動きを動画像で鑑賞して楽しむことができる。この場合に静止画を優先して再生してしまうと、被写体人物の動きを鑑賞して楽しむことが出来ない。
【実施例２】
【００５０】
図８は、本発明の第２実施例であるビデオカメラの概略構成ブロック図である。図１に示す実施例と同じ構成要素には、同じ符号を付してある。図１に示す実施例に対して、図８に示すビデオカメラ１００ａには、静止画動画像切替えスイッチ８２８が追加されている。静止画動画像切替えスイッチ８２８は、撮影／再生モード切替えスイッチ１２９が再生モード側に操作されている時のみ、操作有効となるスイッチである。
【００５１】
システム制御部１０７ａは、静止画動画像切替えスイッチ８２８がビデオカメラ１００の操作者により操作された否かを監視する。静止画動画像切替えスイッチ８２８の操作が検出されると、システム制御部１０７ａは、ビデオカメラ１００ａ、記録／再生制御部１０４及びメタデータ制御部１２５を以下に説明するように制御する。すなわち、システム制御部１０７ａは、記録媒体１０６に記録される再生形式データ１１７を、記録媒体制御部１０５及びデータ管理部１２１を経由して読み出す。そして、読み出した再生形式データ１１７が「静止画」を示す場合には、「動画像」を示す値に変更し、「動画像」を示す場合には、「静止画」を示す値に変更する。そして、変更後の値が、データ管理部１２１と記録媒体制御部１０５を経由して、記録媒体１０６に再生形式データ１１７として記録される。
【００５２】
図９は、再生モード時にＬＣＤ１０９に表示される再生インデックス画面を示す。サムネイル画像９０１、９０２、９０３、９０４、９０５、９０６はそれぞれ、撮影データに対応する。すなわち、図７の撮影データＡ４０１にサムネイル画像９０１が対応する。同様に、撮影データＢ４１１にサムネイル画像９０２が対応し、撮影データＣ４２１にサムネイル画像９０３が対応する。
【００５３】
アイコン９０７、９０８、９０９、９１０、９１１、９１２は、各撮影データの再生形式を表示する。アイコン９０７、９０８、９１２は、再生形式が動画像であることを示す。アイコン９０９、９１０、９１１は、再生形式が静止画であることを示す。図７の撮影データＡ４０１は再生形式データＡ７０５に動画像が設定されており、サムネイル画像９０１には、再生形式が動画像であることを示すアイコン９０７が重畳して表示される。
【００５４】
再生インデックス画面９１３には、特定のサムネイル画像すなわち特定の撮影データを選択する為のカーソル９１４が表示される。カーソル９１４は、非図示の十字キー等を操作することで、再生インデックスに表示された複数のサムネイル画像上を、上下左右に移動して選択することができる。
【００５５】
操作者は再生したい撮影データを示すサムネイル画像にカーソル９１４を非図示の十字キー等操作によって合わせ、非図示の再生ボタン等を操作することにより、選択された撮影データの再生を指示できる。その際、再生形式データに応じた静止画または動画像が再生される。
【００５６】
再生形式が動画像であることを示すアイコン９０７が表示されたサムネイル画像９０１に、非図示の十字キー等を操作してカーソル９１４をあわせたとする。そして、非図示の再生ボタン等を操作すると、再生形式データＡ７０５には動画像が設定されているので、図６のＳ６０５の条件分岐に応じて、動画像データＡ４０３が再生される。
【００５７】
再生形式が静止画であることを示すアイコン９０９が表示されたサムネイル画像９０３に、非図示の十字キー等を操作してカーソル９１４をあわせたとする。そして、非図示の再生ボタン等を操作すると、再生形式データＣ７２５には動画像が設定されているので、図６のＳ６０５の条件分岐に応じて、静止画データＣ４２２が再生される。
【００５８】
サムネイル画像９０４、９０５、９０６に対応する再生形式データは、各サムネイル画像に対応する音声データに応じて決定している。具体的には、音声の音圧の時間的変化が所定値より大きい場合に動画像形式と判定している。サムネイル画像９０４、９０５については、音圧の時間的変化が所定値より小さいので、再生形式が静止画と判定される。サムネイル画像９０６については、音圧の時間的変化が所定値より大きいので、再生形式が動画像と判定される。
【００５９】
図１０は、再生モード時に表示される再生インデックス画面を示す。サムネイル画像９０４で代表される撮影データに対して、再生形式を変更した後を示す。図９との差異は、サムネイル画像９０４に付加されるアイコン１０１０が、再生形式として動画像を示すものに変更されている。
【００６０】
再生形式を変更する手順を説明する。カーソル９１４を、再生形式を変更したい撮影データを示すサムネイル画像に合わせる。そして、静止画動画像切替えスイッチ８２８を操作する。すると、対応する撮影データの再生形式データが、変更前が動画像形式であれば静止画形式に、変更前が静止画形式であれば動画像形式に、それぞれ変更される。その結果、サムネイル画像に付加表示されるアイコンも、再生形式データの変更に応じて動画像を示すアイコン又は静止画を示すアイコンに変更される。
【００６１】
再生形式が動画像であることを示すアイコン１０１０が表示されたサムネイル画像９０４に、非図示の十字キー等を操作してカーソル９１４をあわせたとする。そして、非図示の再生ボタン等を操作すると、アイコン１０１０に対応する非図示の再生形式データには動画像が設定されているので、図６のＳ６０５の条件分岐に応じて、アイコン１０１０に対応する動画像データが再生される。
【００６２】
再生形式データが撮影データの一部として、静止画／動画像の画像データに関連付けて記録されることにより、再生時に決定した再生形式を一度利用して破棄してしまうことが無くなる。そして、再生形式アイコンの表示又は再生形式をユーザインターフェースで変更する等、再生形式データの様々な活用が可能となる。
【００６３】
音声の音圧の時間的変化量が所定値より大きい場合に再生形式を動画像と判定することにより、再生時に動画像に付随して音声も再生され、音声を楽しむことが出来る。例えば、撮影時に複数人数の会話などが発生した場合、その発話により音圧の時間的変化量が所定値より大きくなるので、動画像形式を優先して再生することで、記録された会話内容を手軽に楽しむことができる。
【００６４】
上記実施例の一部の要素は、マイクロコンピュータ上で動作する制御プログラムとして実装できる。その場合、例えば、動画像と静止画像のどちらを優先して再生するかを判定する再生形式判定手段は、再生形式判定機能として実装される。また、動画像及び静止画の一方を選択的に再生する再生手段は、再生機能として実装される。
【００６５】
以上、本発明をその好適な実施例に基づいて詳述したが、本発明はこれら特定の実施例に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施例の一部を適宜組み合わせてもよい。
【００６６】
なお、システム制御部の制御は１つのハードウェアが行ってもよいし、複数のハードウェアが処理を分担することで、装置全体の制御を行ってもよい。
【００６７】
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施例の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
【技術分野】
【０００１】
本発明は、画像再生装置、制御方法、制御プログラム及び記憶媒体に関し、特に、ビデオカメラ、デジタルカメラ等で撮影した動画像と静止画について、動画像と静止画のいずれかを選択再生する画像再生装置、制御方法、制御プログラム及び記憶媒体に関する。
【背景技術】
【０００２】
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００１−７８１３７号公報
【０００４】
従来のビデオカメラやデジタルカメラには、静止画と共に、その前後の動画像を自動的に記録できるものがある（例えば、特許文献１参照。）。撮影操作に使用するレリーズスイッチは、例えば、浅く押した半押し状態と、最後まで押した全押し状態の２段階になっており、半押しで動画像の記録を開始し、全押しで静止画を記録する。動画像の画像データはバッファメモリに取り込まれるが、バッファメモリの容量は有限であるので、容量を越えた場合は古いものから順に更新されていく。静止画の記録を実行してから一定時間経過後に、動画像の取り込みを終了する。そして、静止画および動画像の画像データを圧縮処理した圧縮データを、メモリカード等の記録媒体に記録する。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
静止画と動画像を自動的に同時記録した場合、記録された静止画と動画像を再生する方法に以下のような問題点がある。すなわち、一回の撮影で静止画と動画像の両方の画像データが生成されるが、再生時に、静止画と動画像のどちらを再生するかを選択する煩雑さが発生する。更には、鑑賞者がその選択を判断しきれない場合、例えば、静止画と動画像の両方を再生することになり、撮影内容の確認をしたい場合に視聴の手間が増えてしまう問題がある。
【０００６】
従来の、静止画または動画像のいずれか一方しか一度に記録できないカメラであれば、撮影者は、静止画記録モードまたは動画像記録モードのいずれかを選択して撮影することになる。また、再生時は、もちろん、その様に選択して記録された静止画または動画像のいずれかを鑑賞することになる。
【０００７】
本発明は、同時記録される動画像と静止画のどちらを再生するかの選択の煩雑さを軽減する画像再生装置、制御方法、制御プログラム及び記憶媒体を提示することを目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る画像再生装置は、動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体と、前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定手段と、前記再生形式判定手段の判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生手段とを有することを特徴とする。
【０００９】
本発明に係る画像再生装置の制御方法は、動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置の制御方法であって、前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定ステップと、前記再生形式判定ステップの判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生ステップとを有することを特徴とする。
【００１０】
本発明に係る画像再生装置の制御プログラムは、動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置により実行される制御プログラムであって、前記画像再生装置に前記動画像と前記静止画像のどちらを優先して再生するかを判定させる再生形式判定機能と、前記画像再生装置に、前記再生形式判定機能の判定結果に従い、前記動画像及び前記静止画の一方を選択させ再生させる再生手段とを実現させることを特徴とする。
【発明の効果】
【００１１】
本発明によれば、自動的に同時記録された静止画と動画像のうち、いずれかを優先して再生することで、静止画と動画像のいずれかを、推奨として視聴者に提供する。これにより、視聴者が静止画と動画像のどちらを視聴すべきかを判断する煩雑さを解消できる。
【００１２】
更には、視聴者が静止画と動画像のどちらを再生するのかを判断しきれずに、結局、静止画と動画像の両方を再生してしまい、再生内容を確認する手間が増えてしまうことも回避できる。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施の形態に係るビデオカメラのシステム構成を示すブロック図である。
【図２】本発明の実施の形態に係る記録処理の手順を説明するフローチャートである。
【図３】静止画と動画像の同時記録方法を説明する図である。
【図４】撮影データの構成を説明する図である。
【図５】メタデータの生成方法を説明する図である。
【図６】本発明の実施の形態に係る再生処理の手順を説明するフローチャートである。
【図７】再生形式判定後の撮影データの構成を説明する図である。
【図８】本発明の第２の実施の形態に係るビデオカメラのシステム構成を示すブロック図である。
【図９】再生インデックス画面の構成を説明する図である。
【図１０】再生形式変更操作後の再生インデックス画面の構成を説明する図である。
【発明を実施するための形態】
【００１４】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【実施例１】
【００１５】
図１は、本発明に係る画像再生装置の一実施例を組み込んだビデオカメラの概略構成ブロック図である。
【００１６】
本実施例のビデオカメラ１００において、レンズ１０１は、ビデオカメラ１００の撮影対象となる被写体の光学像を生成する。ＣＣＤ撮像素子１０２は、レンズ１０１による光学像を画像信号に変換する。カメラ信号処理部１０３は、ＣＣＤ撮像素子１０２の電気信号を映像信号として信号処理する。静止画像記録処理部１１８は、カメラ信号処理部１０３が信号処理した映像信号を静止画像として記録処理する。動画像記録処理部１１９は、カメラ信号処理部１０３が信号処理した映像信号を動画像として記録処理する。
【００１７】
マイク１３０は、ビデオカメラ１００の撮影対象となる被写体から発せられる音を収集して電気信号に変換する。音声記録処理部１２０は、マイク１３０の電気信号を音声として記録処理する。
【００１８】
記録／再生制御部１０４は、静止画像記録処理部１１８の記録処理する静止画像、動画像記録処理部１１９の記録処理する動画像及び音声記録処理部１２０の記録処理する音声の記録再生を制御する。データ管理部１２１は、静止画像記録処理部１１８により記録処理された静止画像、動画像記録処理部１１９により記録処理された動画像、音声記録処理部１２０により記録処理された音声をデータ管理する。
【００１９】
記録媒体制御部１０５は記録媒体に静止画像／動画像／音声を記録する為の制御を実行し、記録媒体１０６に静止画像／動画像／音声を記録させる。すなわち、記録媒体制御部１０５は、記録／再生制御部１０４からの記録すべきデータを記録媒体１０６に記録し、記録媒体１０６から読み出したデータを記録／再生制御部１０４に供給する。
【００２０】
記録媒体１０６に記録される撮影データ１１２は、静止画像データ１１３、動画像データ１１４、メタデータ１１６及び再生形式データ１１７で構成される。音声データ１１５は、動画像データ１１４に含まれる形式で記録される。再生形式データ１１７は、その再生形式データ１１７が含まれる撮影データ１１２に対して再生指示が為された時に、静止画像データ１１３と、音声データ１１５を含む動画像データ１１４のどちらを再生するかを指定する。再生形式データ１１７に設定されるデータは、「動画像」または「静止画」の何れかを示す値をとる。
【００２１】
メタデータ制御部１２５のメタデータ生成重畳処理部１２６は、静止画像記録処理部１１８、動画像記録処理部１１９及び音声記録処理部１２０によりそれぞれ処理される静止画像、動画像及び音声からメタデータを生成する。生成されたメタデータは、データ管理部１２１及び記録媒体制御部１０５を経由して、記録媒体１０６の撮影データ１１２に含まれるメタデータ１１６として記録される。再生形式判定部１２７は、記録媒体１０６に記録される撮影データ１１２に含まれるメタデータ１１６を参照し、メタデータ１１６に応じて再生形式を決定する。再生形式判定部１２７により決定された再生形式は、データ管理部１２１及び記録媒体制御部１０５を経由して、記録媒体１０６に記録される撮影データ１１２に含まれる再生形式データ１１７として記録される。
【００２２】
システム制御部１０７は、ビデオカメラ１００、記録／再生制御部１０４及びメタデータ制御部１２５を含むビデオカメラ１００全体を統括制御するマイクロコンピュータからなる。システム制御部１０７は、撮影スイッチ１１０及び撮影／再生モード切替えスイッチ１２９の状態を監視し、ビデオカメラ１００の操作者により操作が為されたかどうかを検出する。システム制御部１０７は、撮影スイッチ１１０又は撮影／再生モード切替えスイッチ１２９の操作に従い、ビデオカメラ１００、記録／再生制御部１０４及びメタデータ制御部１２５を制御する。
【００２３】
画像再生処理部１２２は、記録媒体１０６に記録された静止画像データ１１３及び動画像データ１１４を、記録媒体制御部１０５及びデータ管理部１２１を経由して読み出し、画像再生処理を行う。ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）装置１２３は、ビデオカメラ１００の制御状態を再生画像に重畳する。ＬＣＤ駆動装置１０８は、画像再生処理部１２２で生成された再生画像にＯＳＤ装置１２３による重畳表示が為された画像データに従いＬＣＤ（液晶表示装置）１０９を駆動して、画像表示させる。これにより、操作者は、再生画像およびビデオカメラ１００の制御状態をＬＣＤ１０９の画面上で確認できる。
【００２４】
音声再生処理部１２４は、記録媒体１０６に記録された撮影データ１１２に含まれる動画像データ１１４に更に含まれる音声データを記録媒体制御部１０５及びデータ管理部１２１を経由して読み出し、音声再生処理する。スピーカ１１１は、音声再生処理部１２４の処理した電気信号により再生音声を発する。これにより、操作者は再生音声を聴くことが出来る。
【００２５】
撮影／再生モード切替えスイッチ１２９が操作された時の動作を説明する。撮影／再生モード切替えスイッチ１２９が撮影モード側に操作されたことが検出されると、システム制御部１０７は、記録／再生制御部１０４の動作を撮影モード動作に制御する。また、ＣＣＤ撮像素子１０２及びカメラ信号処理部１０３が撮像動作を行い、撮像画像信号を静止画像記録処理部１１８と動画像記録処理部１１９へ送る。マイク１３０も動作し、音声信号を音声記録処理部１２０に送る。
【００２６】
撮影／再生モード切替えスイッチ１２９が再生モード側に操作されたことが検出されると、システム制御部１０７は、記録／再生制御部１０４の動作を再生モード動作に制御する。また、記録媒体１０６に記録されたメタデータ１１６が、記録媒体制御部１０５とデータ管理部１２１を介して、メタデータ制御部１２５の再生形式判定部１２７に供給され、再生形式が判定される。再生形式の判定結果は、再び、データ管理部１２１と記録媒体制御部１０５を経由して、記録媒体１０６に再生形式データ１１７として記録される。
【００２７】
撮影スイッチ１１０が操作された時の動作を説明する。撮影スイッチ１１０が押され、撮影者により撮影指示が為されたとする。撮影指示時点でカメラ信号処理部１０３から静止画像記録処理部１１８に送られた画像信号が、静止画像記録処理部１１８に静止画像データとして一時記憶される。同様に、カメラ信号処理部１０３から動画像記録処理部１１９に送られた画像信号が一定時間分の動画像として、動画像記録処理部１１９に動画像データとして一時記憶される。動画像記録処理部１１９に一時記録された一定時間分の動画像と同じ一定時間分の音声信号が、音声記録処理部１２０に音声データとして一時記録される。これら静止画像データ、動画像データ及び音声データは、データ管理部１２１に転送される。データ管理部１２１は、これらのデータを記録媒体１０６での記録管理に適したデータ形式に変換し、記録媒体制御部１０５を経由して記録媒体１０６に記録する。
【００２８】
メタデータ生成重畳処理部１２６が、記録媒体１０６に記録される静止画像データ、動画像データ及び音声データに対応したメタデータを生成する。メタデータ生成重畳処理部１２６はまた、データ管理部１２１が記録媒体１０６での記録管理に適したデータ形式への変換を行った時に生成されるメタデータの重畳も行う。
【００２９】
図２は、本実施例の記録処理手順のフローチャートである。Ｓ２０１で、システム制御部１０７は、撮影モード時処理を開始する。Ｓ２０２で、システム制御部１０７は、撮影スイッチ１１０が撮影者によって押されたかどうかを監視する。押されていないと判断された場合は、Ｓ２０２に戻り、撮影スイッチ１１０が押されたかどうかの監視を継続する。押されたと判断された場合は、Ｓ２０３で、システム制御部１０７は、動画像／静止画の同時記録を実行する。動画像／静止画の同時記録処理の詳細は後述する。Ｓ２０４で、記録した動画像／静止画に対応するメタデータを生成する。メタデータ生成処理の詳細は後述する。Ｓ２０５で、Ｓ２０３で記録された静止画と動画像、及び、Ｓ２０４で生成されたメタデータを、互いに関連付けて記録媒体１０６に記録する。記録処理の詳細は後述する。Ｓ２０６で、終了する。
【００３０】
図３は、動画像／静止画の同時記録処理（Ｓ２０３）のタイミングを説明する図である。３０１は処理内容を説明する基準とする為の時間軸を示す。３０２は撮影スイッチ１１０が撮影者により押し操作されるタイミングを示す。静止画像記録処理部１１８が、このタイミング３０２でカメラ信号処理部１０３から静止画像記録処理部１１８に送られる画像信号を記録処理する。そして、記録処理された静止画像データが、データ管理部１２１と記録媒体制御部１０５を経由して、記録媒体１０６に記録される。
【００３１】
３０３はショートクリップ動画像記録が行われる期間を示す。ここでは、動画像は、所定の一定時間分を記録後に自動終了するショートクリップ動画像として記録される。所定の一定時間とは、例えば、４秒間である。または、４秒間、８秒間、１６秒間又は３２秒間等と、複数の選択肢から撮影者が選択して設定する構成としても良い。本実施例では、図示するとおり、ショートクリップ動画像記録期間は、撮影スイッチが押されたタイミングを含む。
【００３２】
３０４はプリ記録期間を示す。プリ記録期間３０４は、例えば、２秒間である。２秒間、４秒間、８秒間又は１６秒間等と、複数の選択肢から撮影者が選択して設定する構成としても良い。本実施例では、ショートクリップ動画像記録期間３０３は、プリ記録期間３０４を含む。プリ記録期間３０４をショートクリップ動画像記録期間３０３よりも長い時間として設定することはできない。
【００３３】
撮影／再生モード切替えスイッチ１２９が撮影モード側に操作され、且つ、撮影スイッチ１１０が操作されていないとき、一定時間分の動画像が暫定的に、動画像記録処理部１１９の内部（又は記録媒体１０６）の一時記録領域に保持される。すなわち、動画像記録処理部１１９は、カメラ信号処理部１０３から動画像記録処理部１１９に送られる画像信号を、撮影スイッチ１１０が操作されていない時も、記録処理している。一時記録領域の容量は有限であり、プリ記録期間３０４は、その容量相当の期間よりも短い期間となる様に設定される。一時記録領域の空き容量が無くなると、古い動画像部分が消去され、これにより空いた記録領域に、カメラ信号処理部１０３から送られてくる最新の画像データが記録される。
【００３４】
撮影スイッチ１１０が操作されると、動画像記録処理部１１９は、一時記録領域に記録されたプリ記録期間３０４に相当する画像信号に加えて、その画像信号を含むショートクリップ記録期間に相当する画像信号を一時記録する。このように一時記録された動画像が、データ管理部１２１及び記録媒体制御部１０５を経由して記録媒体１０６に記録される。
【００３５】
撮像時のこのような記録処理により、記録媒体１０６には、動画像と、この動画像の取得中（又は撮像中）に取得（又は撮像）される静止画像が、記録される。
【００３６】
図４は、記録媒体１０６に記録されるデータの構成模式図を示す。４０１は撮影データＡ、４１１は撮影データＢ、４２１は撮影データＣである。撮影データＡ４０１、撮影データＢ４１１及び撮影データＣ４２１はそれぞれ、図１の撮影データ１１２に対応する。撮影スイッチ１１０の１回の操作毎に撮影データは１組作成される。図４では、撮影スイッチ１１０の３回の操作、つまり３回の撮影が為され、３組の撮影データＡ４０１、撮影データＢ４１１及び撮影データＣ４２１が作成されている。
【００３７】
撮影データＡ４０１は、静止画像データＡ４０２、動画像データＡ４０３、メタデータＡ４０４及び再生形式データＡ４０５を含む。撮影データＢ４１１は、静止画像データＢ４１２、動画像データＢ４１３、メタデータＢ４１４及び再生形式データＢ４１５を含む。撮影データＣ４２１は、静止画像データＣ４２２、動画像データＣ４２３、メタデータＣ４２４及び再生形式データＣ４２５を含む。静止画像データＡ４０２、静止画像データＢ４１２及び静止画像データＣ４２２はそれぞれ、図１の静止画像データ１１３に対応する。動画像データＡ４０３、動画像データＢ４１３及び動画像データＣ４２３は、図１の動画像データ１１４に対応する。メタデータＡ４０４、メタデータＢ４１４及びメタデータＣ４２４は、図１のメタデータ１１６に対応する。再生形式データＡ４０５、再生形式データＢ４１５及び再生形式データＣ４２５は、図１の再生形式データ１１７に対応する。
【００３８】
この説明では、メタデータＡ４０４には、時間的変化が大きいメタデータが格納されている。メタデータＢ４１４には、時間的変化が大きいメタデータが格納されている。メタデータＣ４２４には、時間的変化が小さいメタデータが格納されている。メタデータ生成処理の詳細は後述する。
【００３９】
また、再生形式データＡ４０５、再生形式データＢ４１５及び再生形式データＣ４２５はいずれも未設定状態であるとする。再生形式データ設定の詳細は後述する。
【００４０】
図５は、メタデータ生成重畳処理部１２６で実施されるメタデータ生成処理の説明図である。図５では、メタデータを顔認識位置のフレーム上の変化量としている。図５（ａ）は、変化が大きい場合を示し、図５（ｂ）は変化が小さい場合を示す。５０１、５０２、５０４及び５０５はそれぞれ動画像中の１フレームを抜き出したものである。フレーム５０１とフレーム５０２は、同一の動画像データから抜き出したものである。フレーム５０４とフレーム５０５は、同一の動画像データから抜き出したものである。５０３、５０６はフレームの時間的変化を示す矢印であり、フレーム５０１からフレーム５０２へ、また、フレーム５０４からフレーム５０５へ時間が進行している。
【００４１】
図５（ａ）は、移動する人物を撮影した場合であり、フレーム中で顔認識位置が変化している。フレーム５０１では、フレーム上の左端に顔認識位置が存在したが、フレーム５０２では、顔認識位置が中央右側まで変化しており、顔認識位置の変化量が大きい。その顔認識位置の時間的変化量を、メタデータに設定する。
【００４２】
図（ｂ）は、静止する樹木を撮影した場合で、顔認識されていない為、顔認識位置の変化量は無い。その顔認識位置の時間的変化量を、メタデータに設定する。
【００４３】
図６は、システム制御部１０７で実行される再生処理手順を説明するフローチャートである。
【００４４】
Ｓ６０１で、システム制御部１０７は、再生モード時処理の開始を示す。Ｓ６０２で、システム制御部１０７は、記録媒体１０６から動画像データを読み出させる。図４の撮影データ構成の場合、動画像データとしては、動画像データＡ４０３、動画像データＢ４１３及び動画像データＣ４２３がある。Ｓ６０３で、システム制御部１０７は、動画像データの撮影期間に撮影された静止画データを取得する。図４に示す撮影データ構成の場合、各動画像データの撮影期間に撮影された静止画データは、同一の撮影データとして分類管理されている。動画像データＡ４０３の撮影期間に撮影された静止画データは、静止画像データＡ４０２となる。動画像データＢ４１３の撮影期間に撮影された静止画データは、静止画像データＢ４１２となる。動画像データＣ４２３の撮影期間に撮影された静止画データは、静止画像データＣ４２２となる。
【００４５】
Ｓ６０４で、再生形式判定部１２７が、メタデータに関連付けて再生形式を決定する。再生形式決定の詳細は後述する。Ｓ６０５で、システム制御部１０７は、再生形式をチェックする。再生形式が動画像の場合、Ｓ６０６に進み、動画像データを選択して再生する。再生形式が静止画の場合、Ｓ６０７に進み、静止画データを選択して再生する。Ｓ６０８で、システム制御部１０７は、図６に示す処理を終了する。
【００４６】
図７は、再生形式が決定された後の、記録媒体１０６に記録されるデータの構成を示す。図４に対して異なる箇所は、再生形式データＡ７０５、再生形式データＢ７１５及び再生形式データＣ７２５である。
【００４７】
再生形式決定の詳細を説明する。本実施例では、顔認識位置の時間的変化量が所定値以上であった場合に、再生形式を動画像に設定し、顔認識位置の時間的変化量が所定値未満であった場合に、再生形式を静止画に設定する。この決定条件に従い、Ｓ６０４では再生形式を決定する。
【００４８】
例えば、撮影データＡ４０１で、メタデータＡ４０４に記録された顔認識位置の時間的変化量が所定値以上である場合、再生形式データＡ７０５は「動画像」と決定される。撮影データＢ４１１で、メタデータＢ４１４に記録された顔認識位置の時間的変化量が所定値以上である場合、再生形式データＢ７１５は「動画像」と決定される。撮影データＣ４２１で、メタデータＣ４２４に記録された顔認識位置の時間的変化量が所定値未満の場合、再生形式データＣ７２５は「静止画」と決定される。
【００４９】
画像の顔認識位置の時間的変化量が所定値より大きい場合に動画像形式と判定することにより、カメラの被写体としては人物を撮影する機会が多いが、人物の動きが比較的多い場合に動画像を優先して再生することができる。また、被写体人物の動きを動画像で鑑賞して楽しむことができる。この場合に静止画を優先して再生してしまうと、被写体人物の動きを鑑賞して楽しむことが出来ない。
【実施例２】
【００５０】
図８は、本発明の第２実施例であるビデオカメラの概略構成ブロック図である。図１に示す実施例と同じ構成要素には、同じ符号を付してある。図１に示す実施例に対して、図８に示すビデオカメラ１００ａには、静止画動画像切替えスイッチ８２８が追加されている。静止画動画像切替えスイッチ８２８は、撮影／再生モード切替えスイッチ１２９が再生モード側に操作されている時のみ、操作有効となるスイッチである。
【００５１】
システム制御部１０７ａは、静止画動画像切替えスイッチ８２８がビデオカメラ１００の操作者により操作された否かを監視する。静止画動画像切替えスイッチ８２８の操作が検出されると、システム制御部１０７ａは、ビデオカメラ１００ａ、記録／再生制御部１０４及びメタデータ制御部１２５を以下に説明するように制御する。すなわち、システム制御部１０７ａは、記録媒体１０６に記録される再生形式データ１１７を、記録媒体制御部１０５及びデータ管理部１２１を経由して読み出す。そして、読み出した再生形式データ１１７が「静止画」を示す場合には、「動画像」を示す値に変更し、「動画像」を示す場合には、「静止画」を示す値に変更する。そして、変更後の値が、データ管理部１２１と記録媒体制御部１０５を経由して、記録媒体１０６に再生形式データ１１７として記録される。
【００５２】
図９は、再生モード時にＬＣＤ１０９に表示される再生インデックス画面を示す。サムネイル画像９０１、９０２、９０３、９０４、９０５、９０６はそれぞれ、撮影データに対応する。すなわち、図７の撮影データＡ４０１にサムネイル画像９０１が対応する。同様に、撮影データＢ４１１にサムネイル画像９０２が対応し、撮影データＣ４２１にサムネイル画像９０３が対応する。
【００５３】
アイコン９０７、９０８、９０９、９１０、９１１、９１２は、各撮影データの再生形式を表示する。アイコン９０７、９０８、９１２は、再生形式が動画像であることを示す。アイコン９０９、９１０、９１１は、再生形式が静止画であることを示す。図７の撮影データＡ４０１は再生形式データＡ７０５に動画像が設定されており、サムネイル画像９０１には、再生形式が動画像であることを示すアイコン９０７が重畳して表示される。
【００５４】
再生インデックス画面９１３には、特定のサムネイル画像すなわち特定の撮影データを選択する為のカーソル９１４が表示される。カーソル９１４は、非図示の十字キー等を操作することで、再生インデックスに表示された複数のサムネイル画像上を、上下左右に移動して選択することができる。
【００５５】
操作者は再生したい撮影データを示すサムネイル画像にカーソル９１４を非図示の十字キー等操作によって合わせ、非図示の再生ボタン等を操作することにより、選択された撮影データの再生を指示できる。その際、再生形式データに応じた静止画または動画像が再生される。
【００５６】
再生形式が動画像であることを示すアイコン９０７が表示されたサムネイル画像９０１に、非図示の十字キー等を操作してカーソル９１４をあわせたとする。そして、非図示の再生ボタン等を操作すると、再生形式データＡ７０５には動画像が設定されているので、図６のＳ６０５の条件分岐に応じて、動画像データＡ４０３が再生される。
【００５７】
再生形式が静止画であることを示すアイコン９０９が表示されたサムネイル画像９０３に、非図示の十字キー等を操作してカーソル９１４をあわせたとする。そして、非図示の再生ボタン等を操作すると、再生形式データＣ７２５には動画像が設定されているので、図６のＳ６０５の条件分岐に応じて、静止画データＣ４２２が再生される。
【００５８】
サムネイル画像９０４、９０５、９０６に対応する再生形式データは、各サムネイル画像に対応する音声データに応じて決定している。具体的には、音声の音圧の時間的変化が所定値より大きい場合に動画像形式と判定している。サムネイル画像９０４、９０５については、音圧の時間的変化が所定値より小さいので、再生形式が静止画と判定される。サムネイル画像９０６については、音圧の時間的変化が所定値より大きいので、再生形式が動画像と判定される。
【００５９】
図１０は、再生モード時に表示される再生インデックス画面を示す。サムネイル画像９０４で代表される撮影データに対して、再生形式を変更した後を示す。図９との差異は、サムネイル画像９０４に付加されるアイコン１０１０が、再生形式として動画像を示すものに変更されている。
【００６０】
再生形式を変更する手順を説明する。カーソル９１４を、再生形式を変更したい撮影データを示すサムネイル画像に合わせる。そして、静止画動画像切替えスイッチ８２８を操作する。すると、対応する撮影データの再生形式データが、変更前が動画像形式であれば静止画形式に、変更前が静止画形式であれば動画像形式に、それぞれ変更される。その結果、サムネイル画像に付加表示されるアイコンも、再生形式データの変更に応じて動画像を示すアイコン又は静止画を示すアイコンに変更される。
【００６１】
再生形式が動画像であることを示すアイコン１０１０が表示されたサムネイル画像９０４に、非図示の十字キー等を操作してカーソル９１４をあわせたとする。そして、非図示の再生ボタン等を操作すると、アイコン１０１０に対応する非図示の再生形式データには動画像が設定されているので、図６のＳ６０５の条件分岐に応じて、アイコン１０１０に対応する動画像データが再生される。
【００６２】
再生形式データが撮影データの一部として、静止画／動画像の画像データに関連付けて記録されることにより、再生時に決定した再生形式を一度利用して破棄してしまうことが無くなる。そして、再生形式アイコンの表示又は再生形式をユーザインターフェースで変更する等、再生形式データの様々な活用が可能となる。
【００６３】
音声の音圧の時間的変化量が所定値より大きい場合に再生形式を動画像と判定することにより、再生時に動画像に付随して音声も再生され、音声を楽しむことが出来る。例えば、撮影時に複数人数の会話などが発生した場合、その発話により音圧の時間的変化量が所定値より大きくなるので、動画像形式を優先して再生することで、記録された会話内容を手軽に楽しむことができる。
【００６４】
上記実施例の一部の要素は、マイクロコンピュータ上で動作する制御プログラムとして実装できる。その場合、例えば、動画像と静止画像のどちらを優先して再生するかを判定する再生形式判定手段は、再生形式判定機能として実装される。また、動画像及び静止画の一方を選択的に再生する再生手段は、再生機能として実装される。
【００６５】
以上、本発明をその好適な実施例に基づいて詳述したが、本発明はこれら特定の実施例に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施例の一部を適宜組み合わせてもよい。
【００６６】
なお、システム制御部の制御は１つのハードウェアが行ってもよいし、複数のハードウェアが処理を分担することで、装置全体の制御を行ってもよい。
【００６７】
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施例の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
【特許請求の範囲】
【請求項１】
動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体と、
前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定手段と、
前記再生形式判定手段の判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生手段
とを有することを特徴とする画像再生装置。
【請求項２】
前記再生形式判定手段は、前記記録媒体に、前記動画像及び前記静止画像に関連付けて記録されている再生形式データに基づいて判定を行うことを特徴とする請求項１に記載の画像再生装置。
【請求項３】
更に、前記再生形式データを変更する手段を具備することを特徴とする請求項２に記載の画像再生装置。
【請求項４】
前記再生形式判定手段は、前記動画像の顔認識位置の時間的変化が所定値より大きい場合に動画像形式での再生を判定することを特徴とする請求項１に記載の画像再生装置。
【請求項５】
前記再生形式判定手段は、前記動画像に付随する音声の音圧の時間的変化が所定値より大きい場合に動画像形式での再生を判定することを特徴とする請求項１に記載の画像再生装置。
【請求項６】
更に、前記再生形式判定手段の判定結果を表示する表示手段を具備することを特徴とする請求項１に記載の画像再生装置。
【請求項７】
動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置の制御方法であって、
前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定ステップと、
前記再生形式判定ステップの判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生ステップ
とを有することを特徴とする画像再生装置の制御方法。
【請求項８】
動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置により実行される制御プログラムであって、
前記画像再生装置に前記動画像と前記静止画像のどちらを優先して再生するかを判定させる再生形式判定機能と、
前記画像再生装置に、前記再生形式判定機能の判定結果に従い、前記動画像及び前記静止画の一方を選択させ再生させる再生機能
とを実現させることを特徴とする画像再生装置の制御プログラム。
【請求項９】
請求項８に記載の制御プログラムを格納する記憶媒体。
【請求項１】
動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体と、
前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定手段と、
前記再生形式判定手段の判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生手段
とを有することを特徴とする画像再生装置。
【請求項２】
前記再生形式判定手段は、前記記録媒体に、前記動画像及び前記静止画像に関連付けて記録されている再生形式データに基づいて判定を行うことを特徴とする請求項１に記載の画像再生装置。
【請求項３】
更に、前記再生形式データを変更する手段を具備することを特徴とする請求項２に記載の画像再生装置。
【請求項４】
前記再生形式判定手段は、前記動画像の顔認識位置の時間的変化が所定値より大きい場合に動画像形式での再生を判定することを特徴とする請求項１に記載の画像再生装置。
【請求項５】
前記再生形式判定手段は、前記動画像に付随する音声の音圧の時間的変化が所定値より大きい場合に動画像形式での再生を判定することを特徴とする請求項１に記載の画像再生装置。
【請求項６】
更に、前記再生形式判定手段の判定結果を表示する表示手段を具備することを特徴とする請求項１に記載の画像再生装置。
【請求項７】
動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置の制御方法であって、
前記動画像と前記静止画像のどちらを優先して再生するかを判定する再生形式判定ステップと、
前記再生形式判定ステップの判定結果に従い、前記動画像及び前記静止画の一方を選択して再生する再生ステップ
とを有することを特徴とする画像再生装置の制御方法。
【請求項８】
動画像及び前記動画像の取得中に取得される静止画像を記録する記録媒体を有する画像再生装置により実行される制御プログラムであって、
前記画像再生装置に前記動画像と前記静止画像のどちらを優先して再生するかを判定させる再生形式判定機能と、
前記画像再生装置に、前記再生形式判定機能の判定結果に従い、前記動画像及び前記静止画の一方を選択させ再生させる再生機能
とを実現させることを特徴とする画像再生装置の制御プログラム。
【請求項９】
請求項８に記載の制御プログラムを格納する記憶媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１１−１９３１８２（Ｐ２０１１−１９３１８２Ａ）
【公開日】平成２３年９月２９日（２０１１．９．２９）
【国際特許分類】
【出願番号】特願２０１０−５６９２１（Ｐ２０１０−５６９２１）
【出願日】平成２２年３月１５日（２０１０．３．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２３年９月２９日（２０１１．９．２９）
【国際特許分類】
【出願日】平成２２年３月１５日（２０１０．３．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]