映像記録装置及び映像再生装置とその制御方法
【課題】 ハイビジョン規格の映像、又はその解像度を落とした標準映像のいずれにおいても、その映像をＤＶＤ等のメディアにコピーして配布するには一長一短があった。
【解決手段】 符号化された第１の映像データを記録する記録部１０４と、その記録された第１の映像データの内、第１の映像データが本来有している特性で再生するデータ領域を指定する操作部１１６と、その指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生されるデータ領域に対応する第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する記録部１１０と、少なくともデータ領域に対応する第１の映像データをサーバにアップロードするネットワークインタフェース部１１４とを有する。
【解決手段】 符号化された第１の映像データを記録する記録部１０４と、その記録された第１の映像データの内、第１の映像データが本来有している特性で再生するデータ領域を指定する操作部１１６と、その指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生されるデータ領域に対応する第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する記録部１１０と、少なくともデータ領域に対応する第１の映像データをサーバにアップロードするネットワークインタフェース部１１４とを有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像データ或は動画データを記録メディアに記録する映像記録装置と、その二次的な記録メディアを装着して再生する映像再生装置と、その制御方法に関するものである。
【背景技術】
【０００２】
ビデオカメラ等で使用される映像記録用のメディアとして、ＶＨＳ，ＭｉｎｉＤＶなどの各種テープメディアやＤＶＤ等が使用されている。このようなメディアに記録される動画の解像度は、Ｄ１サイズ（720×480：NTSCの場合）が一般的であった。しかしながら最近では、コンスーマ向けのビデオカメラにおいてもハイビジョン化が進み、ＨＤサイズ（1440〜1920×1080）の記録が可能になってきている。この記録フォーマットとして、ＨＤＶ規格（従来のMiniDVテープにMPEG-2規格のビットストリームを記録する）をはじめ、記録メディアを限定しない方法が実用化されている。これには、Ｈ．２６４／ＭＰＥＧ−４ＡＶＣ規格のストリームを記録するＡＶＣＨＤ規格がある。またディジタル放送の普及により、据え置き型の映像記録／再生用として、Ｂｌｕ−ｒａｙディスクやＨＤ−ＤＶＤといったハイビジョン映像を長時間記録できるディスクも実用化されつつある。
【０００３】
コンスーマ向けビデオカメラ用の場合、記録する画像の解像度や画質と、記録可能時間及び記録メディアのコストや可搬性の関係には、トレードオフの関係が存在する。以下、簡単な例をあげる。
【０００４】
ＨＤＤを採用したカメラでは、映像を記録できる記憶容量が大きいため記録時間の点で比較的余裕がある。しかしながら、その撮影した映像を第三者に配布する場合には、ＤＶＤなどのメディアにコピーする必要がある。８ｃｍＤＶＤを採用する場合、ＳＤ解像度に対応したＤＶＤの映像レコーディング規格で、画質的に好適な６Ｍｂｐｓ程度のビットレートで記録すると、その片面に記録できる記録時間は約３０分となる。またＤＶＤにＡＶＣＨＤフォーマットでハイビジョン記録する場合には更にビットレートを高くする必要がある。このため、ＤＶＤに記録できる時間は、上述の場合と同等か、或は高画質モードでは更に短い２０分程度となる。またＡＶＣＨＤフォーマットで記録したＤＶＤの場合には、そのＤＶＤを第三者に配布してもそのＤＶＤを再生できる機器の普及度が低いため、その第三者がそのＤＶＤを再生できない可能性がある。
【０００５】
最近は上述の状況に鑑みて、ＨＤＤ及びＤＶＤドライブの両方を搭載したビデオカメラも実用化されてきている。このようなカメラでは、一次的にＨＤＤに映像を記録し、必要に応じてＨＤＤからＤＶＤへコピーしている。
【０００６】
特許文献１には、ＪＡＶＡを用いて、ディスク（メディア）に記録された字幕を、ネットワークからダウンロードした別の言語データと入れ替えるアプリケーションの例が示されている。ダウンロードされる字幕データはトランスポートストリーム化され、再生機においてタイムスタンプを制御することによりディスクの映像と同期して再生している。
【特許文献１】特開２００６−１０９４９４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
上述したような複数種の記憶メディアを装備し、ＤＶＤ等の二次記憶媒体にコピーできる装置では以下のような問題があった。
【０００８】
ハイビジョンの解像度で記録した映像ではそのデータのサイズが大きいため、ＤＶＤに記録できる映像の時間が短くなるため第三者に配布するには適していない。また、ハイビジョン規格に対応したＤＶＤが配布されても、そのＤＶＤを再生できる再生環境が整っていない場合もあるため、そのＤＶＤを受取ったユーザが再生できない等の問題もあった。そのような問題に対処するために、ＤＶＤにコピーする際に、その映像の解像度を低下させて再符号化を行って記録することも考えられる。しかし、これでは元のハイビジョン画質が失われるとともに、再符号化（再量子化）効果によりブロックノイズが発生してしまい、より画質が低下するという問題もあった。
【０００９】
以上説明したように、ハイビジョン規格の映像、又はその解像度を落とした標準映像のいずれにおいても、その映像をＤＶＤ等のメディアにコピーして配布するには一長一短があった。
【００１０】
本発明の目的は上述した従来の問題点を解決することにある。
【００１１】
本願発明の特徴は、記録メディアに、本来の特性を低下させた映像データを記録しておき、その再生中、指定された領域では本来の特性で映像データを表示再生できる技術を提供することにある。
【課題を解決するための手段】
【００１２】
上記目的を達成するために本発明の一態様に係る映像記録装置は以下のような構成を備える。即ち、
符号化された第１の映像データを記録する記録手段と、
前記記録手段に記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定手段と、
前記指定手段により指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録手段に記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する手段と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード手段と、
を有することを特徴とする。
【００１３】
上記目的を達成するために本発明の一態様に係る映像再生装置は以下のような構成を備える。即ち、
請求項１乃至３のいずれか１項に記載の映像記録装置で記録された前記記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得手段と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得手段により取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生手段と、
を有することを特徴とする。
【００１４】
上記目的を達成するために本発明の一態様に係る映像記録装置の制御方法は以下のような工程を備える。即ち、
映像データを記録する映像記録装置の制御方法であって、
符号化された第１の映像データを記録する記録工程と、
前記記録工程で記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定工程と、
前記指定工程で指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録工程で記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する工程と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード工程と、
を有することを特徴とする。
【００１５】
上記目的を達成するために本発明の一態様に係る映像再生装置の制御方法は以下のような工程を備える。即ち、
請求項１２に記載の映像記録装置の制御方法で記録された記録メディアから第２の映像データとアプレットとを再生する映像再生装置の制御方法であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得工程と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得工程で取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生工程と、
を有することを特徴とする。
【発明の効果】
【００１６】
本発明によれば、記録メディアに本来の特性を低下させた映像データを記録しておき、その再生中、指定された領域では本来の特性で映像データを表示再生できる。
【発明を実施するための最良の形態】
【００１７】
以下、添付図面を参照して本発明の好適な実施の形態を詳しく説明する。尚、以下の実施の形態は特許請求の範囲に係る本発明を限定するものでなく、また本実施の形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。
【００１８】
以下、本発明の実施の形態１について説明する。この実施の形態１に係る映像記録装置は、ハイビジョンの解像度（本来有している特性）で記録した映像データ（第１の映像データ）を、解像度変換（或はフォーマット変換）により、低解像度の映像データに変換する。そして、その映像データ（第２の映像データ）をＤＶＤ等の二次メディアに記録して第三者へ配布する。このとき、ハイライトシーンの再生時刻情報及びネットワークアクセスアプレット（或は同等のアプリケーション）を、その二次メディアに書き込んでおく。また、オリジナルのハイビジョン映像を記録している一次メディア（記録手段）にも同じハイライトシーン時間情報を記録しておく。
【００１９】
その後、そのオリジナルの映像の撮影者は、ハイライトシーンの映像を一次メディアからネットワークのサーバにアップロードする。一方、その二次メディアを再生する映像再生装置では、そのネットワークを介してサーバから、そのハイライトシーンのオリジナルのハイビジョンの映像データ（第１の映像データ）を受信する。そして、二次メディアに記憶されている標準の解像度のハイライトシーンの映像データ（第２の映像データ）を、その受信した映像データでシームレスに切り替えて再生する。これにより、オリジナルの撮影者によって指定されたハイライトシーンを高解像度で再生して視聴できるようになる。
【００２０】
［実施の形態１］
図１は、本発明の実施の形態１に係る映像記録装置の一例であるビデオカメラの構成例を示すブロック図である。
【００２１】
撮像部１０１は、光学レンズやエリアセンサを含み、撮影した映像を電気信号に変換して出力する。マイクロフォン１０２は、収音を行う。表示部８０６は、撮影済みの映像や、撮像部１０１が捉えている映像等を表示する。１０７はスピーカであり、音響の再生を行う。符号化部１０３は、撮影した映像や音響信号を符号化する。記録部１０４は、第１の記録部で、例えばＨＤＤ（ハードディスク）などである。復号化部１０５は符号化部１０３で符号化された映像データを復号する。解像度変換部１０８は、復号化部１０５で復号された映像データの解像度を変換する。符号化部１０９は、符号化部１０３とは異なるフォーマットで符号化するか、或はフォーマットは同じでもビットレート変更を行なって再符号化する。
【００２２】
これにより例えば、コピーしたＤＶＤを第三者へ配布する場合には、ＡＶＣＨＤ規格で記録したハイビジョンの解像度のオリジナルの映像データを復号化部１０５で復号し、解像度変換部１０８で、標準の解像度に変換（ダウンコンバート）する。そして再度、符号化部１０９で、ＭＰＥＧ−２メインプロファイルで符号化してＤＶＤに記録する。このＭＰＥＧ−２メインプロファイルの符号データであれば、そのＤＶＤは、全てのＤＶＤ再生装置で再生できるため、第三者に配布するのに好適である。記録部１１０は、このように、例えば第三者へ配布するような二次的なメディア（ＤＶＤ）に映像データを記録する記録部である。
【００２３】
一方、Ｂｌｕ−ｒａｙディスクや、ＨＤ−ＤＶＤディスク等のＲＯＭメディアでは、従来の単純な再生機能の他に、ユーザのインタラクションや、ネットワークを通じた付加サービスの機能を付加できる。以下、Ｂｌｕ−ｒａｙディスクの例で説明する。
【００２４】
Ｂｌｕ−ｒａｙディスクでは、予めＪＡＶＡアプレットをディスクに記録しておき、再生装置内でＪＡＶＡ ＶＭ（Virtual Machine）を動作させることにより、アプレットを起動して色々なユーザインタラクションが可能な再生を可能としている。具体的には、ユーザの操作により再生効果を変更したり、ネットワーク対応のアプレットでは、所定のサーバから追加コンテンツをダウンロードしながら、ローカルのメディアコンテンツのアップデートや追加コンテンツを再生できるようにしている。具体的には、字幕の言語の差し替えや、ディレクターズカットの配信、ピクチャインピクチャによる付加的なビデオの再生などを可能としている。
【００２５】
時間情報設定部１１１は、映像データにおけるハイライトシーンやハイビジョン表示等の時間を設定する。具体的には、ユーザは、オリジナルのハイビジョン映像を再生しながら、操作部１１６を操作してハイビジョンで表示したいシーンを探索する。
【００２６】
図３は、ハイライトシーンの内のハイビジョンで表示する区間（データ領域）の設定例を説明する図である。
【００２７】
図において、ＩＮ点を３０１、ＯＵＴ点を３０２として、これら点で囲まれる区間をハイビジョンで表示する区間として設定したものとする。尚、このハイビジョン表示の設定は、複数箇所であっても良い。こうして設定されたデータ領域の再生時間情報は時間情報設定部１１１で設定されて取得される。
【００２８】
記録部１１０によるＤＶＤへのコピー時には、従来例と同じように、記録部１０４で記録された映像を復号し、その解像度を変換した後、再び符号化して記録するという手順をとる。このとき、ハイビジョンで再生する時間情報の設定、及びオリジナルの映像を保持するサーバ上でのロケータ（映像データの設置場所）を指定し、かつ映像の再生を司るメソッド（アプレットの一つの機能単位のこと）を持つアプレットをアプレット作成部１１３により作成する。そして、その符号化した映像データとともに、これらの情報をＤＶＤに書き込む。こうしてコピーされたＤＶＤを配布することが可能になる。
【００２９】
また、ハイビジョン表示シーンの映像データは、ＤＶＤに書き込んだネットワーク上のロケータで特定されるアドレスのサーバに適宜アップロードしておく。このとき、オリジナルの長時間のハイビジョン映像は、そのファイルサイズが大きく、サーバの記録部（ＨＤＤ）の容量を消費するという問題があり、またアップロードに要する時間も膨大になる。よって本実施の形態１では、記録部１０４に記録したハイビジョンの映像データのうち、指定された一部のハイライトシーンを選択してサーバにアップロードする。これにより、サーバに保存されるハイビジョンデータのファイルのサイズを小さく抑え、アップロードにも負荷がかからないようにしている。
【００３０】
サーバ容量設定部１１２は、サーバ２１２（図２）の記憶装置の容量を設定しており、予めサーバ２１２へアクセスして、そのサーバへ格納できる映像データの容量の限度を設定する。これにより、この容量情報は、ユーザがハイビジョン対応の表示シーンを設定するときに参照する補助データとして使用することができる。ネットワークインタフェース（Ｉ／Ｆ）部１１４は、ネットワークとの間とのインタフェースを制御している。このネットワークインタフェース（Ｉ／Ｆ）部１１４を介して、サーバから容量情報を受取ったり、またオリジナルの映像データをサーバにアップロードすることができる。尚、以下の説明では、ハイライトシーンのうちのハイビジョンで表示するように設定した映像部分を、単にハイライトシーンとして説明する。
【００３１】
図２は、本実施の形態１に係る再生側の映像表示装置（映像再生装置）の構成を示すブロック図である。
【００３２】
二次メディア（ＤＶＤ）の配布先であるユーザ（再生側の映像表示装置）は、標準の解像度の映像のＤＶＤを再生できる機能を有しているものとする。またＪＡＶＡ ＶＭによって、書き込まれたアプレットが起動されると、ネットワーク接続の状況確認や、映像の再生に際して時間管理を行う。具体的には、再生時間が予め書き込まれたハイライトシーンに接近した場合には、ネットワークアクセス部２０２により、ネットワークの予め指定されているサーバ２１２から、ハイビジョン映像のダウンロードを試みる。もし映像データがサーバ２１２に存在しなければ、そのまま標準の解像度映像の再生を継続する。
【００３３】
一方、サーバ２１２にファイルが存在する場合は、そのハイライトシーンの映像のダウンロードを開始してキャッシュメモリ２１３に蓄積する。そしてハイライトシーンの表示直前になると、キャッシュメモリ２１３に蓄積されたハイビジョンの映像データを復号化部２０３で復号し、表示切替部２０９により、ハイビジョンの再生に切り替える。復号化部２０３，２０４のそれぞれは、ハイビジョン映像用の復号化部、標準解像度用の復号化部である。
【００３４】
このときＤＶＤに記録された映像データ、及び、ネットワークを介して配信されるオリジナルのハイビジョン映像間では、共通の再生時間管理情報を共有する。具体的には、ＭＰＥＧ−２ ＴＳ（トランスポートストリーム）中のＰＥＳ（Packetized Elementary Stream）に設置されたＤＴＳ（Decoder Time Stamp：復号時間）及びＰＴＳ（Presentation Time Stamp：表示時間)を検知して、切り替えることになる。
【００３５】
図４は、ＴＳの構造を説明する図である。
【００３６】
具体的には、アクセスユニット（再生単位）ごとにＰＥＳが構成され、各ＰＥＳにタイムスタンプが付加される。これを固定長（１８８バイト）化したものがＴＳとして構成される。尚、ＴＳでは、映像の他に音響データ等の他のメディアのＰＥＳが多重化される。本実施の形態では、ＤＶＤに保存された映像データと、ネットワークを介して配信される映像データのタイムスタンプとを比較することにより、表示切替え時のシームレスな同期再生を実現することが可能になる。
【００３７】
図２において、２０１はＪＡＶＡ ＶＭ，２０４はＪＡＶＡアプレット，２０５は記録・再生部である。通常の再生時には、記録／再生部２０５に装着されたＤＶＤの映像データが読み出され復号化部２０７により復号され、表示切替部２０９を介して表示部２１０、スピーカ２１１により再生・表示される。
【００３８】
このように、二次的なメディア（ＤＶＤ）に記録できる撮像装置（図１）と、その再生装置（図２）、及びネットワーク上のサーバ２１２を用いたシステム構成を採ることにより、各ユーザの再生環境に応じた映像データの配布（及び配信）が可能になる。またこのＤＶＤに書き込まれているアプレットが、ＪＡＶＡアプレット２０４とＪＡＶＡ ＶＭ２０１によって起動されると、ネットワークアクセス部２０２により、ネットワークとの接続の状況確認、サーバ２１２からの映像データの受信とその蓄積などを行う。そして映像の再生に関する時間管理を行う。そしてハイライトシーン時間管理部２０６によりハイライトシーンの時間になったと判断されると、キャッシュメモリ２１３に記憶しているハイライトシーンの映像データを読出す。そして復号化部２０３で復号して表示切替部２０９を介して表示部２１０、スピーカ２１１により再生する。
【００３９】
図５は、本実施の形態１に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【００４０】
この処理はユーザにより再生開始が指示されることにより開始され、まずステップＳ１で、ＪＡＶＡアプレット２０４によりネットワークにアクセスする。次にステップＳ２に進み、ネットワークを介してサーバ２１２にアクセス可能かどうかを判定する。サーバ２１２にアクセスできない場合にはステップＳ６に進み、ＤＶＤに記憶されている映像を再生する。一方、ステップＳ２でサーバ２１２にアクセス可能な場合はステップＳ３に進み、オリジナル映像の撮影者によって、サーバ２１２に、ハイライトシーンがアップロードされているかどうかを判定する。ここでハイライトシーンがアップロードされていない場合はステップＳ６に進み、ＤＶＤに記憶されている映像を再生する。ステップＳ３でハイライトシーンがアップロードされている場合はステップＳ４に進み、そのＤＶＤに書き込まれているハイライトシーンの時間情報を監視する。そしてハイライトシーン時間管理部２０６によりハイライトシーンの中の、設定されている再生時間になったかどうかを判定する。そしてハイライトシーンの再生時間になるとステップＳ５に進み、表示切替部２０９によりサーバ２１２からの映像データに切り替えて再生する。このときに厳密な同期をとるために、上記タイムスタンプにより制御を行う。一方、ハイライトシーンの時間でないときはステップＳ６に進み、ＤＶＤの映像を再生する。
【００４１】
図６は、ハイライトシーンをサーバからの映像データで表示・再生する例を説明する図である。
【００４２】
前述の図３で説明したように、ハイライトシーンが設定されていると、そのハイライトシーンをサーバ２１２からのハイビジョンの映像で表示する。そしてそのハイライトシーン以外の映像として、ＤＶＤから再生される標準の解像度の映像が表示される。
【００４３】
以上説明したように本実施の形態１によれば、指定されたハイライトシーンを高解像度で再生して視聴できるようになる。
【００４４】
またサーバにアップロードする映像データをハイライトシーンの内の、設定された区間のみの映像データとすることにより、ネットワークを介して伝送されるデータ量を低減でき、またサーバのメモリの占有量を削減できるという効果がある。
【００４５】
［実施の形態２］
図７は、本発明の実施の形態２を説明する図である。尚、この実施の形態２に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態１と同様であるため、その説明を省略する。
【００４６】
前述の実施の形態１では、ハイビジョンの映像データはサーバ２１２から配信されるため、必要なネットワーク帯域を確保できず映像が途切れる可能性がある。また映像データの配信にはＲＴＰ（Real Time Protocol）といった、リアルタイム性を重視した代わりにデータの連続性の欠落（エラー）を容認した配信が行われるケースが多い。
【００４７】
図７においては、このようなケースに鑑み、映像データが途切れた場合、或は、映像データにエラーが発生した場合には、その都度、二次メディア（ＤＶＤ）に記録された映像の再生に切り替えることを特徴としている。
【００４８】
図７の例では、ハイビジョンの映像の再生時にネットワークにエラーが発生してサーバからのデータの取得に失敗すると、そのエラーの間、ＤＶＤに記憶されている標準の解像度の映像データを再生している。
【００４９】
図８は、本発明の実施の形態２に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。この処理は、前述の実施の形態１に係る処理（図５）に、エラー時の処理を付加した制御処理を示している。ここでは前述の図５と共通するステップは同じ記号で示し、それらの説明を省略する。
【００５０】
ステップＳ１１では、ネットワークにエラーが発生したかどうかを判定し、エラーが発生するとステップＳ６に進んで、ＤＶＤに記憶された映像データの再生に切り替えている。
【００５１】
尚、このネットワークのエラーはネットワークアクセス部２０２で検知され、それによって表示切替部２０９による表示の切り換えが行われることにより実現される。
【００５２】
以上説明したように本実施の形態２によれば、ハイライトシーンの映像をサーバ２１２から受信してハイビジョン映像で再生しているときにネットワークにエラーが発生した場合に標準の映像で再生できる。これによりネットワークのエラーが発生したときには、解像度が低下しても映像（画像）の再生を続行できるという効果がある。
【００５３】
［実施の形態３］
図９は、本発明の実施の形態３を説明する図である。尚、この実施の形態３に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態１と同様であるため、その説明を省略する。
【００５４】
本実施の形態３では、解像度を変換して二次メディア（ＤＶＤ）に記録するときの画像サイズを縮小したスクイーズ記録を行っている。このスクイーズ記録とは、映像を水平方向にのみ圧縮し、４：３のアスペクト比を持った画像として記録する方式である。そして再生時には、ハイビジョンで再生可能なモニタ装置であれば、水平方向を拡張して映像を表示する。この方式であれば、撮像装置でアップコンバートした画像に比べて解像度が低いものの、常時、横長ハイビジョンサイズの画像が再生できる。このためモニタ上での同期外れが発生しないため、通常再生とハイライトシーンの再生との切り替えがより自然になる。また、それでも切り替えが不自然と思われるケースでは、表示の切り替えの際にフェードイン・フェードアウトなどのトランジェント効果を付加することにより、より自然な切り替えが可能となる。
【００５５】
［実施の形態４］
図１０は、本発明の実施の形態４を説明する図である。尚、この実施の形態４に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態１と同様であるため、その説明を省略する。
【００５６】
ＪＡＶＡアプレットには、元来、その仕様として、ポップアップ表示機能や表示レイアウトを制御する機能が備わっている。そこで二次メディア（ＤＶＤ）へ書き込むアプレットに、各種のポップアップ機能を含めることも可能である。具体的には、オリジナルの映像の撮影者が、その映像をアップロードをしていない場合には、ネットワークに接続してその所在がないことを確認した時点でその主旨を表す表示を行う。或は図１０に示すように、アップロードが完了している場合には、再生中にハイライトシーンの再生時刻が接近していることを示す表示１００１を、その再生時刻に到達する前に行うこと等が考えられる。また、再生装置がネットワークに接続されていない場合には、ユーザにネットワークとの接続をチェックさせ、ハイライトシーンのダウンロードを推奨するような表示を行うことも可能である。
【００５７】
尚、本実施の形態４は、ＪＡＶＡアプレットと、それを動作させる仮想マシンという前提で説明したが、ＪＡＶＡ環境でなくても実現可能であることは言うまでもない。
【００５８】
また、サーバ２１２にアップロードするハイライト映像の容量は、サーバの記憶装置（ＨＤＤ）の容量に関係している。このため、その記憶容量が十分な容量であれば、その映像データを全てハイビジョンの解像度でアップロードしても良い。また、サーバ２１２の記憶装置の容量に制限がある場合は、そのサーバ２１２にアップロードできる容量を本実施の形態に係る撮像装置に、予め記憶しておくのが望ましい。
【００５９】
［実施の形態５］
図１１は、本発明の実施の形態５に係るビデオカメラの構成を示すブロック図で、前述の図１と共通する部分は同じ記号で示し、それらの説明を省略する。
【００６０】
この実施の形態３では、記録部１１０による二次メディア（ＤＶＤ）へのコピー時、映像データの復号、音響ダウンミックス、そして再符号化といった手順を実行し、その再符号化した音響データをＤＶＤに書き込む。このとき前述の実施の形態１と同様に、ハイライトシーンの時間情報の設定を行う。更に、サーバ上でのロケータ（音響データの設置場所）を指定し、かつアプレット作成部１１３で、音響の再生を司るメソッド（アプレットの一つの機能単位）を持つアプレットを作成する。そして、これらをＤＶＤに音響符号化データとともに書き込む。
【００６１】
本実施の形態５に係る音響のダウンミックスとしては、５．１チャンネルの音響（本来有している特性）を２チャンネルの音響データへ変換するものとする。この変換の際には、図１２で示したダウンミックス部における説明で用いた式（１）、（２）を用いるものとする。このようにこの実施の形態５では、前述の実施の形態１では、ハイライトシーンをハイビジョンの映像で表示したのに対して、ハイライトシーンを５．１チャンネルで再生し、それ以外は２チャンネルの音響で再生することを特徴としている。
【００６２】
Lt＝L＋0.707×C＋0.707×Ls＋0.707×Rs …式（１）
Rt＝R＋0.707×C＋0.707×Ls＋0.707×Rs …式（２）
図１２は、実施の形態５に係る音響ダウンミックス部１１５の構成を説明するブロック図である。
【００６３】
音響再生部１２０１で再生された５．１チャンネルの音響データは、デコード部１２０２でデコードされて５．１チャンネルの各音響データに変換される。次にダウンミックス部１２０３は、この５．１チャンネルの音響データを２チャンネルの音響データ（Ｌｔ，Ｒｔ）に変換する。そしてエンコード部１２０４は、２チャンネルの音響データをエンコードして記録部１２０５により記録する。
【００６４】
ハイライトシーンのオリジナルの音響データは、ＤＶＤに書き込んだネットワーク上のロケータで同定されるサーバ２１２にアップロードしておく。このとき、オリジナルの長時間の５．１チャンネルの音響データはファイルサイズが大きく、サーバ２１２のＨＤＤのメモリ容量を消費するという問題があり、またアップロードに要する時間も膨大になってしまう。
【００６５】
そこで本実施の形態５では、ハイライトシーンを設定することにより、アップロードする音響データのファイルサイズを小さく抑え、アップロードにも負荷がかからないようにしている。また前述の実施の形態１と同様に、サーバ容量設定部１１２によりサーバ２１２にアップロードするデータの容量を設定する。これには予めサーバ２１２にアクセスし、サーバ２１２へ設定可能な音響データの容量の限度を設定しておき、ユーザがハイライトシーンを設定するときにその補助データとして使用することができる。
【００６６】
図１３は、本実施の形態５に係る再生装置の構成を示すブロック図である。尚、前述の図２と共通する部分は同じ記号で示している。前述の図２と比較すると、図１３では、図２の表示切替部２０９が音響切替部２１５に変更されている点が異なっている。
【００６７】
二次メディア（ＤＶＤ）が配布されるユーザは、通常の２チャンネル音響（ステレオ）の再生機能があれば、このＤＶＤを再生して視聴できる。またＪＡＶＡ ＶＭ２０１によって書き込まれたアプレットが起動され、ネットワークとの接続状況の確認や、音響再生における時間管理を行う。具体的には、再生時間が、ハイライトシーンに接近した場合には、ネットワークアクセス部２０２により、サーバ２１２から５．１チャンネルの音響データのダウンロードを試みる。もしサーバ２１２に音響データが存在しなければ、そのまま２チャンネル音響（ステレオ）の再生を継続する。一方、サーバ２１２に音響データが存在する場合は、サーバ２１２から音響データのダウンロードを開始し、キャッシュメモリ２１３に蓄積する。そしてハイライトシーン直前になった場合には、キャッシュメモリ２１３に蓄積された５．１チャンネルの音響データを復号し、音響切替部２１５により、５．１チャンネルの音響データの再生に切り替える。２０３，２０４は、各々５．１チャンネル音響データの復号化部、２チャンネル音響用の復号化部である。
【００６８】
このとき、ＤＶＤに記録された音響データ、及び、ネットワークを介してサーバ２１２から配信される５．１チャンネルの音響データとの間では、共通の再生時間の管理情報を共有する。具体的には、MPEG-2 TS中の、ＰＥＳに設置されたＤＴＳ及びＰＴＳを検知して切り替えることになる。ＴＳの構造は、前述の図４を参照されたい。
【００６９】
本実施の形態５では、ＤＶＤに記憶された標準の２チャンネルの音響データと、ネットワークから配信される音響データのタイムスタンプとを比較する。そしてハイライトシーンに切り替る音響切替のタイミングでシームレスに音響データを再生することが可能になる。
【００７０】
図１４は、実施の形態５に係るハイライトシーンの設定例を示す図である。
【００７１】
これは前述の図３に対応している。但し図３では、ハイビジョンの映像（画像）を対象にしていたのに対して、この図１４では、ハイライトシーンの設定例では、マルチチャンネル音響特性で再生するハイライトシーン（データ領域）を設定している点が異なっている。
【００７２】
図１５は、実施の形態５に係るハイライトシーンでのダウンミックスの音響データと、マルチチャンネルの音響データの切替を示す図である。
【００７３】
このように二次メディア（ＤＶＤ）に記録できる撮像装置と、その再生装置、及びネットワークの音響データのサーバ２１２を用いた構成をとることにより、各ユーザの再生環境に応じた音響データの配布（及び配信）が可能になる。
【００７４】
図１５の例では、マルチチャンネルでの音響再生が設定されたハイライトシーンのある区間では、マルチチャンネルの音響データで再生され、それ以外のシーンではダウンミックス（２チャンネル）の音響データを再生している。
【００７５】
図１６は、本発明の実施の形態５に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。この処理は、前述の実施の形態１に係る処理（図５）において、映像の切替に代えて音響データの切替を行う制御処理を示している。よって図１６のステップＳ２１〜Ｓ２４の処理は、図５のステップＳ１〜Ｓ４の処理と同じである。
【００７６】
この処理はユーザにより再生開始が指示されることにより開始され、まずステップＳ２１で、ＪＡＶＡアプレット２０４によりネットワークにアクセスする。次にステップＳ２２に進み、ネットワークを介してサーバ２１２にアクセス可能かどうかを判定する。サーバ２１２にアクセスできない場合にはステップＳ２６に進み、ＤＶＤに記憶されている音響データ（２チャンネル）を再生する。一方、ステップＳ２２でサーバ２１２にアクセス可能な場合はステップＳ２３に進み、サーバ２１２に、オリジナル映像のハイライトシーンの音響データ（５．１チャンネル）がアップロードされているかどうかを判定する。ここでハイライトシーンがアップロードされていない場合はステップＳ２６に進み、ＤＶＤに記憶されている音響データを再生する。ステップＳ２３でハイライトシーンがアップロードされている場合はステップＳ２４に進み、そのＤＶＤに書き込まれているハイライトシーンの時間情報を監視する。そして、ハイライトシーン時間管理部２０６により、設定されたハイライトシーンの再生時間になったかどうかを判定する。そしてハイライトシーンの再生時間になるとステップＳ２５に進み、音響切替部２１５によりサーバ２１２からの音響データに切り替えて再生する。このときに厳密な同期をとるために、上記タイムスタンプにより制御を行う。一方、ハイライトシーンの時間でないときはステップＳ２６に進み、ＤＶＤに記憶されている音響データを再生する。
【００７７】
以上説明したように本実施の形態５によれば、ハイライトシーンの内の、設定されている時間の間にマルチチャンの音響データを再生し、それ以外では通常の２チャンネルの音響データを再生することができる。
【００７８】
またサーバにアップロードする音響データをハイライトシーンの中の、指定された区間のみ音響データとすることにより、ネットワークを介して伝送されるデータ量を低減でき、またサーバのメモリの占有量を削減できるという効果がある。
【００７９】
［実施の形態６］
図１７は、本発明の実施の形態６を説明する図である。尚、この実施の形態６に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態５と同様であるため、その説明を省略する。
【００８０】
前述の実施の形態５では、マルチチャンネルである５．１チャンネルの音響データはネットワークを介して配信されるため、必要なネットワーク帯域を確保できず音響の再生が途切れるおそれがある。また、映像データや音響データの配信にはＲＴＰといった、リアルタイム性を重視し、データの連続性の欠落（エラー）を容認したデータ配信が行われるケースが多い。
【００８１】
図１７においては、このようなケースに鑑み、音響データが途切れた場合、或は、音響データにエラーが発生した場合には、その都度、二次メディア（ＤＶＤ）に記録された音響の再生に切り替えることを特徴としている。
【００８２】
図１７の例では、５．１チャンネルのマルチチャンネルの音響データの再生時にネットワークにエラーが発生すると、そのエラーの間、ＤＶＤに記憶されている標準の２チャンネルの音響データを再生している。
【００８３】
図１８は、本発明の実施の形態６に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。この処理は、前述の実施の形態５に係る処理（図１６）に、エラー時の処理を付加した制御処理を示している。ここでは前述の図１６と共通するステップは同じ記号で示し、それらの説明を省略する。
【００８４】
ステップＳ２７では、ネットワークにエラーが発生したかどうかを判定し、エラーが発生するとステップＳ２６に進んで、ＤＶＤに記憶された音響データの再生に切り替えている。
【００８５】
尚、このネットワークのエラーはネットワークアクセス部２０２で検知され、それによって音響切替部２１５による音響データの切り換えが行われることにより実現される。
【００８６】
以上説明したように本実施の形態６によれば、ハイライトシーンのマルチチャンネルの音響データをサーバ２１２から受信して再生しているときにネットワークにエラーが発生した場合に標準の２チャンネルの音響データで再生できる。これによりネットワークのエラーが発生したときには、音響データの質が低下しても音響の再生を続行できるという効果がある。
【００８７】
［実施の形態７］
図１９は、実施の形態７を説明する図である。
【００８８】
ＪＡＶＡアプレットには、元来、その仕様として、ポップアップ表示機能や表示レイアウトを制御する機能が備わっている。そこで、二次メディアへ書き込むアプレットに、各種のポップアップ機能を焼きこんでおくことも可能である。具体的には、オリジナルデータの撮影者が音響データをアップロードをしていない場合に、ネットワークに接続してその所在がないことを確認した時点でその主旨を示す情報を表示する。また或は、図１９に示すように、アップロードが完了している場合には、再生中にハイライトシーンが接近していることを、メッセージ１９０１で表示すること等が考えられる。また、ネットワーク接続されていない再生環境では、ユーザにネットワークへの接続をチェックし、ハイライトシーンのダウンロードを推奨する等の表示を行うようにしても良い。
【００８９】
尚、本実施の形態７では、ＪＡＶＡアプレットと、それを動作させる仮想マシンの前提で説明したが、ＪＡＶＡ環境でなくても実現可能である。
【００９０】
また、サーバに設置するハイライトシーンの音響データの容量は、サーバのＨＤＤなどの記憶装置の容量に関係する。よって、十分な容量があれば、全ての音響データをサーバ２１２にアップロードしてもよい。また容量に制限がある場合は、予め、サーバ２１２に設定できる容量を、本実施の形態に係る撮像装置に記録しておくことによって実現できる。
【００９１】
［実施の形態８］
次に本発明の実施の形態８について説明する。この実施の形態８では、一次メディア（ＨＤＤなど）動画データと静止画データとが記録されているとき、動画データのみを二次メディア（ＤＶＤ）にコピーして、そのＤＶＤを第三者に配布する。この場合、静止画の記録時間情報及びネットワークアクセスのアプレット（或は同等のアプリケーション）を、そのＤＶＤに書き込んでおく。また動画データと静止画データの両方を記録している一次メディアにも同じ静止画の記録時間情報を記録しておく。その後、適宜、オリジナルの映像の撮影者は、静止画データを一次メディアからネットワーク上のサーバにアップロードする。
【００９２】
一方、二次メディアの再生環境下で、ネットワーク経由で、その動画の記録中に記録した静止画データの配信画像と、ディスク上の動画データを切り替えて再生する機能を設ける。これにより、オリジナルの画像の撮影者によって指定された静止画データの再生を可能にして、動画中に記録した静止画の二次的な配布問題を解決する。
【００９３】
この実施の形態８に係るビデオカメラの構成は、前述の実施の形態１に係る図１の構成と同じであるため、その説明を省略する。
【００９４】
但し、この実施の形態８では、時間情報設定部１１１は、ユーザは動画データを再生しながら静止画が記録されている時刻を探索し、その探索した時刻を静止画の表示箇所として設定する点が図１とは異なっている。
【００９５】
図２１は、実施の形態８における静止画の表示箇所を指定する一例を説明する図である。
【００９６】
図において、動画中の静止画の開始点をIN１点としている。尚、この静止画の表示設定の開始点は、IN１点、IN２点のように複数箇所設定しても良い。
【００９７】
二次メディア（ＤＶＤ）へのコピー時には、映像データをＤＶＤに書き込む。このとき、静止画の表示の時間情報の設定、及びサーバ２１２でのロケータ（映像データの設置場所）を指定する。また映像の再生を司るメソッド（アプレット機能単位）を持つアプレットをその場で作成する。そしてＤＶＤに動画データとともに、そのアプレットを書き込む。こうして完成したＤＶＤを第三者に配布することが可能になる。
【００９８】
また静止画データは、ＤＶＤに書き込んだネットワーク上のロケータで同定される場所（サーバ２１２）に適宜アップロードしておく。尚、ここでサーバの容量を設定するサーバ容量設定部１１２によりサーバ２１２へアクセスし、そのサーバ２１２へロードできる映像データの容量限度を取得する。この容量データは、ユーザが静止画データの表示を設定するときにその補助データとして使用することができる。
【００９９】
図２０は、本発明の実施の形態８に係る再生側の映像表示装置の構成を示すブロック図である。ここで前述の図２の構成と共通する部分は同じ記号で示し、それらの説明を省略する。
【０１００】
二次メディア（ＤＶＤ）の配布先であるユーザ（再生側の映像表示装置）は、標準の解像度の映像のＤＶＤを再生できる機能を有しているものとする。またＪＡＶＡ ＶＭによって、書き込まれたアプレットが起動されると、ネットワーク接続の状況確認や、映像の再生に際して時間管理を行う。具体的には、静止画データ表示時刻管理部２１４は、再生時間が予め書き込まれた静止画データの記録時間に接近したかどうかを判定する。そして静止画データの記録時間に接近したと判定した場合は、ネットワークアクセス部２０２により、予め指定されたネットワークのサーバ２１２から、静止画データのダウンロードを試みる。もしその静止画データがサーバ２１２に存在しなければ、そのまま動画データの再生を継続する。
【０１０１】
一方、サーバ２１２に静止画データが存在する場合は、その静止画データのダウンロードを開始してキャッシュメモリ２１３に蓄積する。そして静止画の表示タイミングの直前になると、キャッシュメモリ２１３に蓄積された静止画データを復号化部２０３で復号し、表示切替部２０９により、動画から静止画の再生に切り替える。復号化部２０３，２０４のそれぞれは、ネットワークを介して配信された静止画データの復号化部、ＤＶＤに記録された動画データの復号化部である。
【０１０２】
このときＤＶＤに記録された動画データ、及び、ネットワークを介して配信される静止画データとは、共通の再生時間管理情報を共有する。具体的には、ＭＰＥＧ−２ ＴＳ中のＰＥＳに設置されたＤＴＳ及びＰＴＳを検知して、切り替えることになる。
【０１０３】
このように、二次メディアをもった撮像装置と、その再生装置、及びネットワーク上のサーバを用いたシステム構成をとることにより、各ユーザの再生環境に応じた映像データの配布が可能になる。
【０１０４】
図２２は、本実施の形態８に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【０１０５】
この処理はユーザにより再生開始が指示されることにより開始され、まずステップＳ３１で、ＪＡＶＡアプレット２０４によりネットワークにアクセスする。次にステップＳ３２に進み、ネットワークを介してサーバ２１２にアクセス可能かどうかを判定する。サーバ２１２にアクセスできない場合にはステップＳ３６に進み、ＤＶＤに記憶されている動画データを再生する。一方、ステップＳ３２でサーバ２１２にアクセス可能な場合はステップＳ３３に進み、オリジナル映像の撮影者によって、サーバ２１２に、静止画データがアップロードされているかどうかを判定する。ここで静止画データがサーバ２１２にアップロードされていない場合はステップＳ３６に進み、ＤＶＤに記憶されている動画像データを再生する。ステップＳ３３で静止画データがサーバ２１２にアップロードされている場合はステップＳ３４に進み、そのＤＶＤに書き込まれている静止画データの時間情報を監視する。そして静止画データ表示時刻管理部２１４により動画データの中の、設定されている静止画の表示時間になったかどうかを判定する。そして静止画の表示時間になるとステップＳ２５に進み、表示切替部２０９によりサーバ２１２からの静止画データの表示に切り替えて再生する。このときに厳密な同期をとるために、上記タイムスタンプにより制御を行う。一方、静止画データの表示時間でないときはステップＳ３６に進み、ＤＶＤに記録されている動画データを再生する。
【０１０６】
このような処理フローにより、ＤＶＤの動画データと、サーバからの静止画データとの表示切り替えを行うことができる。
【０１０７】
［実施の形態９］
次に本発明の実施の形態９について説明する。
【０１０８】
動画データと静止画データとを切り替える際に、例えば図２３に示すような、カメラシャッタ画像のようなエフェクトデータを用いて、静止画データを表示する。
【０１０９】
図２３は、本発明の実施の形態９に係る静止画表示の画像エフェクトの一例を説明する図である。
【０１１０】
このようなエフェクトデータを用いる場合には、静止画データだけでなく、このエフェクトデータを併せてサーバ２１２にアップロードしておく。そして、再生装置側で動画データから静止画データに切り替える際に、この画像エフェクトを表示して、静止画表示を引き立てることが可能である。
【０１１１】
また、静止画データと音響エフェクトデータとを併せてサーバ２１２にアップロードし、動画データから静止画データに切り替える際、その音響エフェクトを再生することにより、聴覚的に静止画を引き立てることもできる。
【０１１２】
更には、静止画データと画像エフェクトデータと音響エフェクトデータを併せてサーバ２１２にアップロードする。そして動画データから静止画データに切り替える際、これら画像エフェクト、音響エフェクトを再生することにより、視覚的にも聴覚的にも静止画を引き立てることが可能である。
【０１１３】
［実施の形態１０］
次に本発明の実施の形態１０を説明する。この実施の形態１０では前述の実施の形態４と同様に、静止画データの表示切替の直前に、動画から静止画に切り替ることを表示するものである。
【０１１４】
ＪＡＶＡアプレットには元来、ポップアップ表示制御機能や表示レイアウトを制御する機能が備わっている。そこで二次メディアへ書き込むアプレットに、各種のポップアップ機能を記録しておくことが可能である。具体的には、オリジナル映像の撮影者が静止画データをアップロードする前に、ネットワークに接続して、静止画の有無を示す情報を表示するように設定しても良い。また或は、図２４に示すように、アップロードが完了している場合には、動画の再生中に静止画データを表示する時刻が接近していることを示す表示を、その所定時間前に行うことなどが考えられる。また、再生装置がネットワークに接続されていない場合には、ユーザに、ネットワークとの接続をチェックし、静止画データのダウンロードを推奨するような表示を行っても良い。
【０１１５】
図２４は、実施の形態１０に係る表示制御例を示す図である。
【０１１６】
図において、動画データの表示中に、静止画データの表示タイミングのＮ秒前になると、「Ｎ秒後に静止画表示」というメッセージ２４００を表示部２１０に表示する。そして２４０１で静止画データを、予め決められた時間の間、表示する。そして次に２４０２で、静止画の表示により中断されていた動画データの続きを表示する。
【０１１７】
尚、本実施の形態１０では、ＪＡＶＡアプレットと、それを動作させる仮想マシンを前提に説明したが、ＪＡＶＡ環境でなくても実現可能である。
【０１１８】
また、サーバに登録する静止画データの容量は、サーバのＨＤＤの容量に関係するため、ＨＤＤが十分な容量を有していれば、動画及び静止画の全データをアップロードしても良い。また、サーバの記憶容量に制限がある場合は、予め、サーバに登録できるデータ容量を撮像装置に記憶しておいてもよい。
【０１１９】
（他の実施形態）
尚、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システム或いは装置に直接或いは遠隔から供給し、そのシステム或いは装置のコンピュータが該供給されたプログラムを読み出して実行することによっても達成され得る。その場合、プログラムの機能を有していれば、形態は、プログラムである必要はない。
【０１２０】
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明のクレームでは、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【０１２１】
プログラムを供給するための記録媒体としては、様々なものが使用できる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などである。
【０１２２】
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページからハードディスク等の記録媒体にダウンロードすることによっても供給できる。その場合、ダウンロードされるのは、本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルであってもよい。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明のクレームに含まれるものである。
【０１２３】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布する形態としても良い。その場合、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムが実行可能な形式でコンピュータにインストールされるようにする。
【０１２４】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される形態以外の形態でも実現可能である。例えば、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【０１２５】
更に、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれるようにしてもよい。この場合、その後で、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される。
【０１２６】
また、上記実施の形態では、映像記録装置を、撮影した画像を記録する映像記録装置の場合で説明したが本発明はそれに限定されるものでなく、ビデオを再生して録画できるビデオレコーダ或は、ハイビジョン放送や５．１チャンネルプログラムを受信してＨＤＤなどに記録できるテレビジョン受像機であっても良い。
【図面の簡単な説明】
【０１２７】
【図１】本発明の実施の形態１に係るビデオカメラの構成の一例を示すブロック図である。
【図２】本実施の形態１に係る再生側の映像表示装置の構成を示すブロック図である。
【図３】ハイライトシーンの内のハイビジョンで表示する区間の設定例を説明する図である。
【図４】ＴＳの構造を説明する図である。
【図５】本実施の形態１に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図６】ハイライトシーンをサーバからの映像データで表示・再生する例を説明する図である。
【図７】本発明の実施の形態２を説明する図である。
【図８】本発明の実施の形態２に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図９】本発明の実施の形態３を説明する図である。
【図１０】本発明の実施の形態４を説明する図である。
【図１１】本発明の実施の形態５に係るビデオカメラの構成を示すブロック図である。
【図１２】実施の形態５に係る音響ダウンミックス部の構成を説明するブロック図である。
【図１３】本実施の形態５に係る再生装置の構成を示すブロック図である。
【図１４】実施の形態５に係るハイライトシーンの設定例を示す図である。
【図１５】実施の形態５に係るハイライトシーンでのダウンミックスの音響データと、マルチチャンネルの音響データの切替を示す図である。
【図１６】本発明の実施の形態５に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図１７】本発明の実施の形態６を説明する図である。
【図１８】本発明の実施の形態６に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図１９】実施の形態７を説明する図である。
【図２０】本発明の実施の形態８に係る再生側の映像表示装置の構成を示すブロック図である。
【図２１】実施の形態８における静止画の表示箇所を指定する一例を説明する図である。
【図２２】本実施の形態８に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図２３】本発明の実施の形態９に係る静止画表示の画像エフェクトの一例を説明する図である。
【図２４】実施の形態１０に係る表示例を示す図である。
【技術分野】
【０００１】
本発明は、映像データ或は動画データを記録メディアに記録する映像記録装置と、その二次的な記録メディアを装着して再生する映像再生装置と、その制御方法に関するものである。
【背景技術】
【０００２】
ビデオカメラ等で使用される映像記録用のメディアとして、ＶＨＳ，ＭｉｎｉＤＶなどの各種テープメディアやＤＶＤ等が使用されている。このようなメディアに記録される動画の解像度は、Ｄ１サイズ（720×480：NTSCの場合）が一般的であった。しかしながら最近では、コンスーマ向けのビデオカメラにおいてもハイビジョン化が進み、ＨＤサイズ（1440〜1920×1080）の記録が可能になってきている。この記録フォーマットとして、ＨＤＶ規格（従来のMiniDVテープにMPEG-2規格のビットストリームを記録する）をはじめ、記録メディアを限定しない方法が実用化されている。これには、Ｈ．２６４／ＭＰＥＧ−４ＡＶＣ規格のストリームを記録するＡＶＣＨＤ規格がある。またディジタル放送の普及により、据え置き型の映像記録／再生用として、Ｂｌｕ−ｒａｙディスクやＨＤ−ＤＶＤといったハイビジョン映像を長時間記録できるディスクも実用化されつつある。
【０００３】
コンスーマ向けビデオカメラ用の場合、記録する画像の解像度や画質と、記録可能時間及び記録メディアのコストや可搬性の関係には、トレードオフの関係が存在する。以下、簡単な例をあげる。
【０００４】
ＨＤＤを採用したカメラでは、映像を記録できる記憶容量が大きいため記録時間の点で比較的余裕がある。しかしながら、その撮影した映像を第三者に配布する場合には、ＤＶＤなどのメディアにコピーする必要がある。８ｃｍＤＶＤを採用する場合、ＳＤ解像度に対応したＤＶＤの映像レコーディング規格で、画質的に好適な６Ｍｂｐｓ程度のビットレートで記録すると、その片面に記録できる記録時間は約３０分となる。またＤＶＤにＡＶＣＨＤフォーマットでハイビジョン記録する場合には更にビットレートを高くする必要がある。このため、ＤＶＤに記録できる時間は、上述の場合と同等か、或は高画質モードでは更に短い２０分程度となる。またＡＶＣＨＤフォーマットで記録したＤＶＤの場合には、そのＤＶＤを第三者に配布してもそのＤＶＤを再生できる機器の普及度が低いため、その第三者がそのＤＶＤを再生できない可能性がある。
【０００５】
最近は上述の状況に鑑みて、ＨＤＤ及びＤＶＤドライブの両方を搭載したビデオカメラも実用化されてきている。このようなカメラでは、一次的にＨＤＤに映像を記録し、必要に応じてＨＤＤからＤＶＤへコピーしている。
【０００６】
特許文献１には、ＪＡＶＡを用いて、ディスク（メディア）に記録された字幕を、ネットワークからダウンロードした別の言語データと入れ替えるアプリケーションの例が示されている。ダウンロードされる字幕データはトランスポートストリーム化され、再生機においてタイムスタンプを制御することによりディスクの映像と同期して再生している。
【特許文献１】特開２００６−１０９４９４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
上述したような複数種の記憶メディアを装備し、ＤＶＤ等の二次記憶媒体にコピーできる装置では以下のような問題があった。
【０００８】
ハイビジョンの解像度で記録した映像ではそのデータのサイズが大きいため、ＤＶＤに記録できる映像の時間が短くなるため第三者に配布するには適していない。また、ハイビジョン規格に対応したＤＶＤが配布されても、そのＤＶＤを再生できる再生環境が整っていない場合もあるため、そのＤＶＤを受取ったユーザが再生できない等の問題もあった。そのような問題に対処するために、ＤＶＤにコピーする際に、その映像の解像度を低下させて再符号化を行って記録することも考えられる。しかし、これでは元のハイビジョン画質が失われるとともに、再符号化（再量子化）効果によりブロックノイズが発生してしまい、より画質が低下するという問題もあった。
【０００９】
以上説明したように、ハイビジョン規格の映像、又はその解像度を落とした標準映像のいずれにおいても、その映像をＤＶＤ等のメディアにコピーして配布するには一長一短があった。
【００１０】
本発明の目的は上述した従来の問題点を解決することにある。
【００１１】
本願発明の特徴は、記録メディアに、本来の特性を低下させた映像データを記録しておき、その再生中、指定された領域では本来の特性で映像データを表示再生できる技術を提供することにある。
【課題を解決するための手段】
【００１２】
上記目的を達成するために本発明の一態様に係る映像記録装置は以下のような構成を備える。即ち、
符号化された第１の映像データを記録する記録手段と、
前記記録手段に記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定手段と、
前記指定手段により指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録手段に記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する手段と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード手段と、
を有することを特徴とする。
【００１３】
上記目的を達成するために本発明の一態様に係る映像再生装置は以下のような構成を備える。即ち、
請求項１乃至３のいずれか１項に記載の映像記録装置で記録された前記記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得手段と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得手段により取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生手段と、
を有することを特徴とする。
【００１４】
上記目的を達成するために本発明の一態様に係る映像記録装置の制御方法は以下のような工程を備える。即ち、
映像データを記録する映像記録装置の制御方法であって、
符号化された第１の映像データを記録する記録工程と、
前記記録工程で記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定工程と、
前記指定工程で指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録工程で記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する工程と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード工程と、
を有することを特徴とする。
【００１５】
上記目的を達成するために本発明の一態様に係る映像再生装置の制御方法は以下のような工程を備える。即ち、
請求項１２に記載の映像記録装置の制御方法で記録された記録メディアから第２の映像データとアプレットとを再生する映像再生装置の制御方法であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得工程と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得工程で取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生工程と、
を有することを特徴とする。
【発明の効果】
【００１６】
本発明によれば、記録メディアに本来の特性を低下させた映像データを記録しておき、その再生中、指定された領域では本来の特性で映像データを表示再生できる。
【発明を実施するための最良の形態】
【００１７】
以下、添付図面を参照して本発明の好適な実施の形態を詳しく説明する。尚、以下の実施の形態は特許請求の範囲に係る本発明を限定するものでなく、また本実施の形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。
【００１８】
以下、本発明の実施の形態１について説明する。この実施の形態１に係る映像記録装置は、ハイビジョンの解像度（本来有している特性）で記録した映像データ（第１の映像データ）を、解像度変換（或はフォーマット変換）により、低解像度の映像データに変換する。そして、その映像データ（第２の映像データ）をＤＶＤ等の二次メディアに記録して第三者へ配布する。このとき、ハイライトシーンの再生時刻情報及びネットワークアクセスアプレット（或は同等のアプリケーション）を、その二次メディアに書き込んでおく。また、オリジナルのハイビジョン映像を記録している一次メディア（記録手段）にも同じハイライトシーン時間情報を記録しておく。
【００１９】
その後、そのオリジナルの映像の撮影者は、ハイライトシーンの映像を一次メディアからネットワークのサーバにアップロードする。一方、その二次メディアを再生する映像再生装置では、そのネットワークを介してサーバから、そのハイライトシーンのオリジナルのハイビジョンの映像データ（第１の映像データ）を受信する。そして、二次メディアに記憶されている標準の解像度のハイライトシーンの映像データ（第２の映像データ）を、その受信した映像データでシームレスに切り替えて再生する。これにより、オリジナルの撮影者によって指定されたハイライトシーンを高解像度で再生して視聴できるようになる。
【００２０】
［実施の形態１］
図１は、本発明の実施の形態１に係る映像記録装置の一例であるビデオカメラの構成例を示すブロック図である。
【００２１】
撮像部１０１は、光学レンズやエリアセンサを含み、撮影した映像を電気信号に変換して出力する。マイクロフォン１０２は、収音を行う。表示部８０６は、撮影済みの映像や、撮像部１０１が捉えている映像等を表示する。１０７はスピーカであり、音響の再生を行う。符号化部１０３は、撮影した映像や音響信号を符号化する。記録部１０４は、第１の記録部で、例えばＨＤＤ（ハードディスク）などである。復号化部１０５は符号化部１０３で符号化された映像データを復号する。解像度変換部１０８は、復号化部１０５で復号された映像データの解像度を変換する。符号化部１０９は、符号化部１０３とは異なるフォーマットで符号化するか、或はフォーマットは同じでもビットレート変更を行なって再符号化する。
【００２２】
これにより例えば、コピーしたＤＶＤを第三者へ配布する場合には、ＡＶＣＨＤ規格で記録したハイビジョンの解像度のオリジナルの映像データを復号化部１０５で復号し、解像度変換部１０８で、標準の解像度に変換（ダウンコンバート）する。そして再度、符号化部１０９で、ＭＰＥＧ−２メインプロファイルで符号化してＤＶＤに記録する。このＭＰＥＧ−２メインプロファイルの符号データであれば、そのＤＶＤは、全てのＤＶＤ再生装置で再生できるため、第三者に配布するのに好適である。記録部１１０は、このように、例えば第三者へ配布するような二次的なメディア（ＤＶＤ）に映像データを記録する記録部である。
【００２３】
一方、Ｂｌｕ−ｒａｙディスクや、ＨＤ−ＤＶＤディスク等のＲＯＭメディアでは、従来の単純な再生機能の他に、ユーザのインタラクションや、ネットワークを通じた付加サービスの機能を付加できる。以下、Ｂｌｕ−ｒａｙディスクの例で説明する。
【００２４】
Ｂｌｕ−ｒａｙディスクでは、予めＪＡＶＡアプレットをディスクに記録しておき、再生装置内でＪＡＶＡ ＶＭ（Virtual Machine）を動作させることにより、アプレットを起動して色々なユーザインタラクションが可能な再生を可能としている。具体的には、ユーザの操作により再生効果を変更したり、ネットワーク対応のアプレットでは、所定のサーバから追加コンテンツをダウンロードしながら、ローカルのメディアコンテンツのアップデートや追加コンテンツを再生できるようにしている。具体的には、字幕の言語の差し替えや、ディレクターズカットの配信、ピクチャインピクチャによる付加的なビデオの再生などを可能としている。
【００２５】
時間情報設定部１１１は、映像データにおけるハイライトシーンやハイビジョン表示等の時間を設定する。具体的には、ユーザは、オリジナルのハイビジョン映像を再生しながら、操作部１１６を操作してハイビジョンで表示したいシーンを探索する。
【００２６】
図３は、ハイライトシーンの内のハイビジョンで表示する区間（データ領域）の設定例を説明する図である。
【００２７】
図において、ＩＮ点を３０１、ＯＵＴ点を３０２として、これら点で囲まれる区間をハイビジョンで表示する区間として設定したものとする。尚、このハイビジョン表示の設定は、複数箇所であっても良い。こうして設定されたデータ領域の再生時間情報は時間情報設定部１１１で設定されて取得される。
【００２８】
記録部１１０によるＤＶＤへのコピー時には、従来例と同じように、記録部１０４で記録された映像を復号し、その解像度を変換した後、再び符号化して記録するという手順をとる。このとき、ハイビジョンで再生する時間情報の設定、及びオリジナルの映像を保持するサーバ上でのロケータ（映像データの設置場所）を指定し、かつ映像の再生を司るメソッド（アプレットの一つの機能単位のこと）を持つアプレットをアプレット作成部１１３により作成する。そして、その符号化した映像データとともに、これらの情報をＤＶＤに書き込む。こうしてコピーされたＤＶＤを配布することが可能になる。
【００２９】
また、ハイビジョン表示シーンの映像データは、ＤＶＤに書き込んだネットワーク上のロケータで特定されるアドレスのサーバに適宜アップロードしておく。このとき、オリジナルの長時間のハイビジョン映像は、そのファイルサイズが大きく、サーバの記録部（ＨＤＤ）の容量を消費するという問題があり、またアップロードに要する時間も膨大になる。よって本実施の形態１では、記録部１０４に記録したハイビジョンの映像データのうち、指定された一部のハイライトシーンを選択してサーバにアップロードする。これにより、サーバに保存されるハイビジョンデータのファイルのサイズを小さく抑え、アップロードにも負荷がかからないようにしている。
【００３０】
サーバ容量設定部１１２は、サーバ２１２（図２）の記憶装置の容量を設定しており、予めサーバ２１２へアクセスして、そのサーバへ格納できる映像データの容量の限度を設定する。これにより、この容量情報は、ユーザがハイビジョン対応の表示シーンを設定するときに参照する補助データとして使用することができる。ネットワークインタフェース（Ｉ／Ｆ）部１１４は、ネットワークとの間とのインタフェースを制御している。このネットワークインタフェース（Ｉ／Ｆ）部１１４を介して、サーバから容量情報を受取ったり、またオリジナルの映像データをサーバにアップロードすることができる。尚、以下の説明では、ハイライトシーンのうちのハイビジョンで表示するように設定した映像部分を、単にハイライトシーンとして説明する。
【００３１】
図２は、本実施の形態１に係る再生側の映像表示装置（映像再生装置）の構成を示すブロック図である。
【００３２】
二次メディア（ＤＶＤ）の配布先であるユーザ（再生側の映像表示装置）は、標準の解像度の映像のＤＶＤを再生できる機能を有しているものとする。またＪＡＶＡ ＶＭによって、書き込まれたアプレットが起動されると、ネットワーク接続の状況確認や、映像の再生に際して時間管理を行う。具体的には、再生時間が予め書き込まれたハイライトシーンに接近した場合には、ネットワークアクセス部２０２により、ネットワークの予め指定されているサーバ２１２から、ハイビジョン映像のダウンロードを試みる。もし映像データがサーバ２１２に存在しなければ、そのまま標準の解像度映像の再生を継続する。
【００３３】
一方、サーバ２１２にファイルが存在する場合は、そのハイライトシーンの映像のダウンロードを開始してキャッシュメモリ２１３に蓄積する。そしてハイライトシーンの表示直前になると、キャッシュメモリ２１３に蓄積されたハイビジョンの映像データを復号化部２０３で復号し、表示切替部２０９により、ハイビジョンの再生に切り替える。復号化部２０３，２０４のそれぞれは、ハイビジョン映像用の復号化部、標準解像度用の復号化部である。
【００３４】
このときＤＶＤに記録された映像データ、及び、ネットワークを介して配信されるオリジナルのハイビジョン映像間では、共通の再生時間管理情報を共有する。具体的には、ＭＰＥＧ−２ ＴＳ（トランスポートストリーム）中のＰＥＳ（Packetized Elementary Stream）に設置されたＤＴＳ（Decoder Time Stamp：復号時間）及びＰＴＳ（Presentation Time Stamp：表示時間)を検知して、切り替えることになる。
【００３５】
図４は、ＴＳの構造を説明する図である。
【００３６】
具体的には、アクセスユニット（再生単位）ごとにＰＥＳが構成され、各ＰＥＳにタイムスタンプが付加される。これを固定長（１８８バイト）化したものがＴＳとして構成される。尚、ＴＳでは、映像の他に音響データ等の他のメディアのＰＥＳが多重化される。本実施の形態では、ＤＶＤに保存された映像データと、ネットワークを介して配信される映像データのタイムスタンプとを比較することにより、表示切替え時のシームレスな同期再生を実現することが可能になる。
【００３７】
図２において、２０１はＪＡＶＡ ＶＭ，２０４はＪＡＶＡアプレット，２０５は記録・再生部である。通常の再生時には、記録／再生部２０５に装着されたＤＶＤの映像データが読み出され復号化部２０７により復号され、表示切替部２０９を介して表示部２１０、スピーカ２１１により再生・表示される。
【００３８】
このように、二次的なメディア（ＤＶＤ）に記録できる撮像装置（図１）と、その再生装置（図２）、及びネットワーク上のサーバ２１２を用いたシステム構成を採ることにより、各ユーザの再生環境に応じた映像データの配布（及び配信）が可能になる。またこのＤＶＤに書き込まれているアプレットが、ＪＡＶＡアプレット２０４とＪＡＶＡ ＶＭ２０１によって起動されると、ネットワークアクセス部２０２により、ネットワークとの接続の状況確認、サーバ２１２からの映像データの受信とその蓄積などを行う。そして映像の再生に関する時間管理を行う。そしてハイライトシーン時間管理部２０６によりハイライトシーンの時間になったと判断されると、キャッシュメモリ２１３に記憶しているハイライトシーンの映像データを読出す。そして復号化部２０３で復号して表示切替部２０９を介して表示部２１０、スピーカ２１１により再生する。
【００３９】
図５は、本実施の形態１に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【００４０】
この処理はユーザにより再生開始が指示されることにより開始され、まずステップＳ１で、ＪＡＶＡアプレット２０４によりネットワークにアクセスする。次にステップＳ２に進み、ネットワークを介してサーバ２１２にアクセス可能かどうかを判定する。サーバ２１２にアクセスできない場合にはステップＳ６に進み、ＤＶＤに記憶されている映像を再生する。一方、ステップＳ２でサーバ２１２にアクセス可能な場合はステップＳ３に進み、オリジナル映像の撮影者によって、サーバ２１２に、ハイライトシーンがアップロードされているかどうかを判定する。ここでハイライトシーンがアップロードされていない場合はステップＳ６に進み、ＤＶＤに記憶されている映像を再生する。ステップＳ３でハイライトシーンがアップロードされている場合はステップＳ４に進み、そのＤＶＤに書き込まれているハイライトシーンの時間情報を監視する。そしてハイライトシーン時間管理部２０６によりハイライトシーンの中の、設定されている再生時間になったかどうかを判定する。そしてハイライトシーンの再生時間になるとステップＳ５に進み、表示切替部２０９によりサーバ２１２からの映像データに切り替えて再生する。このときに厳密な同期をとるために、上記タイムスタンプにより制御を行う。一方、ハイライトシーンの時間でないときはステップＳ６に進み、ＤＶＤの映像を再生する。
【００４１】
図６は、ハイライトシーンをサーバからの映像データで表示・再生する例を説明する図である。
【００４２】
前述の図３で説明したように、ハイライトシーンが設定されていると、そのハイライトシーンをサーバ２１２からのハイビジョンの映像で表示する。そしてそのハイライトシーン以外の映像として、ＤＶＤから再生される標準の解像度の映像が表示される。
【００４３】
以上説明したように本実施の形態１によれば、指定されたハイライトシーンを高解像度で再生して視聴できるようになる。
【００４４】
またサーバにアップロードする映像データをハイライトシーンの内の、設定された区間のみの映像データとすることにより、ネットワークを介して伝送されるデータ量を低減でき、またサーバのメモリの占有量を削減できるという効果がある。
【００４５】
［実施の形態２］
図７は、本発明の実施の形態２を説明する図である。尚、この実施の形態２に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態１と同様であるため、その説明を省略する。
【００４６】
前述の実施の形態１では、ハイビジョンの映像データはサーバ２１２から配信されるため、必要なネットワーク帯域を確保できず映像が途切れる可能性がある。また映像データの配信にはＲＴＰ（Real Time Protocol）といった、リアルタイム性を重視した代わりにデータの連続性の欠落（エラー）を容認した配信が行われるケースが多い。
【００４７】
図７においては、このようなケースに鑑み、映像データが途切れた場合、或は、映像データにエラーが発生した場合には、その都度、二次メディア（ＤＶＤ）に記録された映像の再生に切り替えることを特徴としている。
【００４８】
図７の例では、ハイビジョンの映像の再生時にネットワークにエラーが発生してサーバからのデータの取得に失敗すると、そのエラーの間、ＤＶＤに記憶されている標準の解像度の映像データを再生している。
【００４９】
図８は、本発明の実施の形態２に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。この処理は、前述の実施の形態１に係る処理（図５）に、エラー時の処理を付加した制御処理を示している。ここでは前述の図５と共通するステップは同じ記号で示し、それらの説明を省略する。
【００５０】
ステップＳ１１では、ネットワークにエラーが発生したかどうかを判定し、エラーが発生するとステップＳ６に進んで、ＤＶＤに記憶された映像データの再生に切り替えている。
【００５１】
尚、このネットワークのエラーはネットワークアクセス部２０２で検知され、それによって表示切替部２０９による表示の切り換えが行われることにより実現される。
【００５２】
以上説明したように本実施の形態２によれば、ハイライトシーンの映像をサーバ２１２から受信してハイビジョン映像で再生しているときにネットワークにエラーが発生した場合に標準の映像で再生できる。これによりネットワークのエラーが発生したときには、解像度が低下しても映像（画像）の再生を続行できるという効果がある。
【００５３】
［実施の形態３］
図９は、本発明の実施の形態３を説明する図である。尚、この実施の形態３に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態１と同様であるため、その説明を省略する。
【００５４】
本実施の形態３では、解像度を変換して二次メディア（ＤＶＤ）に記録するときの画像サイズを縮小したスクイーズ記録を行っている。このスクイーズ記録とは、映像を水平方向にのみ圧縮し、４：３のアスペクト比を持った画像として記録する方式である。そして再生時には、ハイビジョンで再生可能なモニタ装置であれば、水平方向を拡張して映像を表示する。この方式であれば、撮像装置でアップコンバートした画像に比べて解像度が低いものの、常時、横長ハイビジョンサイズの画像が再生できる。このためモニタ上での同期外れが発生しないため、通常再生とハイライトシーンの再生との切り替えがより自然になる。また、それでも切り替えが不自然と思われるケースでは、表示の切り替えの際にフェードイン・フェードアウトなどのトランジェント効果を付加することにより、より自然な切り替えが可能となる。
【００５５】
［実施の形態４］
図１０は、本発明の実施の形態４を説明する図である。尚、この実施の形態４に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態１と同様であるため、その説明を省略する。
【００５６】
ＪＡＶＡアプレットには、元来、その仕様として、ポップアップ表示機能や表示レイアウトを制御する機能が備わっている。そこで二次メディア（ＤＶＤ）へ書き込むアプレットに、各種のポップアップ機能を含めることも可能である。具体的には、オリジナルの映像の撮影者が、その映像をアップロードをしていない場合には、ネットワークに接続してその所在がないことを確認した時点でその主旨を表す表示を行う。或は図１０に示すように、アップロードが完了している場合には、再生中にハイライトシーンの再生時刻が接近していることを示す表示１００１を、その再生時刻に到達する前に行うこと等が考えられる。また、再生装置がネットワークに接続されていない場合には、ユーザにネットワークとの接続をチェックさせ、ハイライトシーンのダウンロードを推奨するような表示を行うことも可能である。
【００５７】
尚、本実施の形態４は、ＪＡＶＡアプレットと、それを動作させる仮想マシンという前提で説明したが、ＪＡＶＡ環境でなくても実現可能であることは言うまでもない。
【００５８】
また、サーバ２１２にアップロードするハイライト映像の容量は、サーバの記憶装置（ＨＤＤ）の容量に関係している。このため、その記憶容量が十分な容量であれば、その映像データを全てハイビジョンの解像度でアップロードしても良い。また、サーバ２１２の記憶装置の容量に制限がある場合は、そのサーバ２１２にアップロードできる容量を本実施の形態に係る撮像装置に、予め記憶しておくのが望ましい。
【００５９】
［実施の形態５］
図１１は、本発明の実施の形態５に係るビデオカメラの構成を示すブロック図で、前述の図１と共通する部分は同じ記号で示し、それらの説明を省略する。
【００６０】
この実施の形態３では、記録部１１０による二次メディア（ＤＶＤ）へのコピー時、映像データの復号、音響ダウンミックス、そして再符号化といった手順を実行し、その再符号化した音響データをＤＶＤに書き込む。このとき前述の実施の形態１と同様に、ハイライトシーンの時間情報の設定を行う。更に、サーバ上でのロケータ（音響データの設置場所）を指定し、かつアプレット作成部１１３で、音響の再生を司るメソッド（アプレットの一つの機能単位）を持つアプレットを作成する。そして、これらをＤＶＤに音響符号化データとともに書き込む。
【００６１】
本実施の形態５に係る音響のダウンミックスとしては、５．１チャンネルの音響（本来有している特性）を２チャンネルの音響データへ変換するものとする。この変換の際には、図１２で示したダウンミックス部における説明で用いた式（１）、（２）を用いるものとする。このようにこの実施の形態５では、前述の実施の形態１では、ハイライトシーンをハイビジョンの映像で表示したのに対して、ハイライトシーンを５．１チャンネルで再生し、それ以外は２チャンネルの音響で再生することを特徴としている。
【００６２】
Lt＝L＋0.707×C＋0.707×Ls＋0.707×Rs …式（１）
Rt＝R＋0.707×C＋0.707×Ls＋0.707×Rs …式（２）
図１２は、実施の形態５に係る音響ダウンミックス部１１５の構成を説明するブロック図である。
【００６３】
音響再生部１２０１で再生された５．１チャンネルの音響データは、デコード部１２０２でデコードされて５．１チャンネルの各音響データに変換される。次にダウンミックス部１２０３は、この５．１チャンネルの音響データを２チャンネルの音響データ（Ｌｔ，Ｒｔ）に変換する。そしてエンコード部１２０４は、２チャンネルの音響データをエンコードして記録部１２０５により記録する。
【００６４】
ハイライトシーンのオリジナルの音響データは、ＤＶＤに書き込んだネットワーク上のロケータで同定されるサーバ２１２にアップロードしておく。このとき、オリジナルの長時間の５．１チャンネルの音響データはファイルサイズが大きく、サーバ２１２のＨＤＤのメモリ容量を消費するという問題があり、またアップロードに要する時間も膨大になってしまう。
【００６５】
そこで本実施の形態５では、ハイライトシーンを設定することにより、アップロードする音響データのファイルサイズを小さく抑え、アップロードにも負荷がかからないようにしている。また前述の実施の形態１と同様に、サーバ容量設定部１１２によりサーバ２１２にアップロードするデータの容量を設定する。これには予めサーバ２１２にアクセスし、サーバ２１２へ設定可能な音響データの容量の限度を設定しておき、ユーザがハイライトシーンを設定するときにその補助データとして使用することができる。
【００６６】
図１３は、本実施の形態５に係る再生装置の構成を示すブロック図である。尚、前述の図２と共通する部分は同じ記号で示している。前述の図２と比較すると、図１３では、図２の表示切替部２０９が音響切替部２１５に変更されている点が異なっている。
【００６７】
二次メディア（ＤＶＤ）が配布されるユーザは、通常の２チャンネル音響（ステレオ）の再生機能があれば、このＤＶＤを再生して視聴できる。またＪＡＶＡ ＶＭ２０１によって書き込まれたアプレットが起動され、ネットワークとの接続状況の確認や、音響再生における時間管理を行う。具体的には、再生時間が、ハイライトシーンに接近した場合には、ネットワークアクセス部２０２により、サーバ２１２から５．１チャンネルの音響データのダウンロードを試みる。もしサーバ２１２に音響データが存在しなければ、そのまま２チャンネル音響（ステレオ）の再生を継続する。一方、サーバ２１２に音響データが存在する場合は、サーバ２１２から音響データのダウンロードを開始し、キャッシュメモリ２１３に蓄積する。そしてハイライトシーン直前になった場合には、キャッシュメモリ２１３に蓄積された５．１チャンネルの音響データを復号し、音響切替部２１５により、５．１チャンネルの音響データの再生に切り替える。２０３，２０４は、各々５．１チャンネル音響データの復号化部、２チャンネル音響用の復号化部である。
【００６８】
このとき、ＤＶＤに記録された音響データ、及び、ネットワークを介してサーバ２１２から配信される５．１チャンネルの音響データとの間では、共通の再生時間の管理情報を共有する。具体的には、MPEG-2 TS中の、ＰＥＳに設置されたＤＴＳ及びＰＴＳを検知して切り替えることになる。ＴＳの構造は、前述の図４を参照されたい。
【００６９】
本実施の形態５では、ＤＶＤに記憶された標準の２チャンネルの音響データと、ネットワークから配信される音響データのタイムスタンプとを比較する。そしてハイライトシーンに切り替る音響切替のタイミングでシームレスに音響データを再生することが可能になる。
【００７０】
図１４は、実施の形態５に係るハイライトシーンの設定例を示す図である。
【００７１】
これは前述の図３に対応している。但し図３では、ハイビジョンの映像（画像）を対象にしていたのに対して、この図１４では、ハイライトシーンの設定例では、マルチチャンネル音響特性で再生するハイライトシーン（データ領域）を設定している点が異なっている。
【００７２】
図１５は、実施の形態５に係るハイライトシーンでのダウンミックスの音響データと、マルチチャンネルの音響データの切替を示す図である。
【００７３】
このように二次メディア（ＤＶＤ）に記録できる撮像装置と、その再生装置、及びネットワークの音響データのサーバ２１２を用いた構成をとることにより、各ユーザの再生環境に応じた音響データの配布（及び配信）が可能になる。
【００７４】
図１５の例では、マルチチャンネルでの音響再生が設定されたハイライトシーンのある区間では、マルチチャンネルの音響データで再生され、それ以外のシーンではダウンミックス（２チャンネル）の音響データを再生している。
【００７５】
図１６は、本発明の実施の形態５に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。この処理は、前述の実施の形態１に係る処理（図５）において、映像の切替に代えて音響データの切替を行う制御処理を示している。よって図１６のステップＳ２１〜Ｓ２４の処理は、図５のステップＳ１〜Ｓ４の処理と同じである。
【００７６】
この処理はユーザにより再生開始が指示されることにより開始され、まずステップＳ２１で、ＪＡＶＡアプレット２０４によりネットワークにアクセスする。次にステップＳ２２に進み、ネットワークを介してサーバ２１２にアクセス可能かどうかを判定する。サーバ２１２にアクセスできない場合にはステップＳ２６に進み、ＤＶＤに記憶されている音響データ（２チャンネル）を再生する。一方、ステップＳ２２でサーバ２１２にアクセス可能な場合はステップＳ２３に進み、サーバ２１２に、オリジナル映像のハイライトシーンの音響データ（５．１チャンネル）がアップロードされているかどうかを判定する。ここでハイライトシーンがアップロードされていない場合はステップＳ２６に進み、ＤＶＤに記憶されている音響データを再生する。ステップＳ２３でハイライトシーンがアップロードされている場合はステップＳ２４に進み、そのＤＶＤに書き込まれているハイライトシーンの時間情報を監視する。そして、ハイライトシーン時間管理部２０６により、設定されたハイライトシーンの再生時間になったかどうかを判定する。そしてハイライトシーンの再生時間になるとステップＳ２５に進み、音響切替部２１５によりサーバ２１２からの音響データに切り替えて再生する。このときに厳密な同期をとるために、上記タイムスタンプにより制御を行う。一方、ハイライトシーンの時間でないときはステップＳ２６に進み、ＤＶＤに記憶されている音響データを再生する。
【００７７】
以上説明したように本実施の形態５によれば、ハイライトシーンの内の、設定されている時間の間にマルチチャンの音響データを再生し、それ以外では通常の２チャンネルの音響データを再生することができる。
【００７８】
またサーバにアップロードする音響データをハイライトシーンの中の、指定された区間のみ音響データとすることにより、ネットワークを介して伝送されるデータ量を低減でき、またサーバのメモリの占有量を削減できるという効果がある。
【００７９】
［実施の形態６］
図１７は、本発明の実施の形態６を説明する図である。尚、この実施の形態６に係る撮像装置及び再生装置、サーバ、ネットワークの構成は前述の実施の形態５と同様であるため、その説明を省略する。
【００８０】
前述の実施の形態５では、マルチチャンネルである５．１チャンネルの音響データはネットワークを介して配信されるため、必要なネットワーク帯域を確保できず音響の再生が途切れるおそれがある。また、映像データや音響データの配信にはＲＴＰといった、リアルタイム性を重視し、データの連続性の欠落（エラー）を容認したデータ配信が行われるケースが多い。
【００８１】
図１７においては、このようなケースに鑑み、音響データが途切れた場合、或は、音響データにエラーが発生した場合には、その都度、二次メディア（ＤＶＤ）に記録された音響の再生に切り替えることを特徴としている。
【００８２】
図１７の例では、５．１チャンネルのマルチチャンネルの音響データの再生時にネットワークにエラーが発生すると、そのエラーの間、ＤＶＤに記憶されている標準の２チャンネルの音響データを再生している。
【００８３】
図１８は、本発明の実施の形態６に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。この処理は、前述の実施の形態５に係る処理（図１６）に、エラー時の処理を付加した制御処理を示している。ここでは前述の図１６と共通するステップは同じ記号で示し、それらの説明を省略する。
【００８４】
ステップＳ２７では、ネットワークにエラーが発生したかどうかを判定し、エラーが発生するとステップＳ２６に進んで、ＤＶＤに記憶された音響データの再生に切り替えている。
【００８５】
尚、このネットワークのエラーはネットワークアクセス部２０２で検知され、それによって音響切替部２１５による音響データの切り換えが行われることにより実現される。
【００８６】
以上説明したように本実施の形態６によれば、ハイライトシーンのマルチチャンネルの音響データをサーバ２１２から受信して再生しているときにネットワークにエラーが発生した場合に標準の２チャンネルの音響データで再生できる。これによりネットワークのエラーが発生したときには、音響データの質が低下しても音響の再生を続行できるという効果がある。
【００８７】
［実施の形態７］
図１９は、実施の形態７を説明する図である。
【００８８】
ＪＡＶＡアプレットには、元来、その仕様として、ポップアップ表示機能や表示レイアウトを制御する機能が備わっている。そこで、二次メディアへ書き込むアプレットに、各種のポップアップ機能を焼きこんでおくことも可能である。具体的には、オリジナルデータの撮影者が音響データをアップロードをしていない場合に、ネットワークに接続してその所在がないことを確認した時点でその主旨を示す情報を表示する。また或は、図１９に示すように、アップロードが完了している場合には、再生中にハイライトシーンが接近していることを、メッセージ１９０１で表示すること等が考えられる。また、ネットワーク接続されていない再生環境では、ユーザにネットワークへの接続をチェックし、ハイライトシーンのダウンロードを推奨する等の表示を行うようにしても良い。
【００８９】
尚、本実施の形態７では、ＪＡＶＡアプレットと、それを動作させる仮想マシンの前提で説明したが、ＪＡＶＡ環境でなくても実現可能である。
【００９０】
また、サーバに設置するハイライトシーンの音響データの容量は、サーバのＨＤＤなどの記憶装置の容量に関係する。よって、十分な容量があれば、全ての音響データをサーバ２１２にアップロードしてもよい。また容量に制限がある場合は、予め、サーバ２１２に設定できる容量を、本実施の形態に係る撮像装置に記録しておくことによって実現できる。
【００９１】
［実施の形態８］
次に本発明の実施の形態８について説明する。この実施の形態８では、一次メディア（ＨＤＤなど）動画データと静止画データとが記録されているとき、動画データのみを二次メディア（ＤＶＤ）にコピーして、そのＤＶＤを第三者に配布する。この場合、静止画の記録時間情報及びネットワークアクセスのアプレット（或は同等のアプリケーション）を、そのＤＶＤに書き込んでおく。また動画データと静止画データの両方を記録している一次メディアにも同じ静止画の記録時間情報を記録しておく。その後、適宜、オリジナルの映像の撮影者は、静止画データを一次メディアからネットワーク上のサーバにアップロードする。
【００９２】
一方、二次メディアの再生環境下で、ネットワーク経由で、その動画の記録中に記録した静止画データの配信画像と、ディスク上の動画データを切り替えて再生する機能を設ける。これにより、オリジナルの画像の撮影者によって指定された静止画データの再生を可能にして、動画中に記録した静止画の二次的な配布問題を解決する。
【００９３】
この実施の形態８に係るビデオカメラの構成は、前述の実施の形態１に係る図１の構成と同じであるため、その説明を省略する。
【００９４】
但し、この実施の形態８では、時間情報設定部１１１は、ユーザは動画データを再生しながら静止画が記録されている時刻を探索し、その探索した時刻を静止画の表示箇所として設定する点が図１とは異なっている。
【００９５】
図２１は、実施の形態８における静止画の表示箇所を指定する一例を説明する図である。
【００９６】
図において、動画中の静止画の開始点をIN１点としている。尚、この静止画の表示設定の開始点は、IN１点、IN２点のように複数箇所設定しても良い。
【００９７】
二次メディア（ＤＶＤ）へのコピー時には、映像データをＤＶＤに書き込む。このとき、静止画の表示の時間情報の設定、及びサーバ２１２でのロケータ（映像データの設置場所）を指定する。また映像の再生を司るメソッド（アプレット機能単位）を持つアプレットをその場で作成する。そしてＤＶＤに動画データとともに、そのアプレットを書き込む。こうして完成したＤＶＤを第三者に配布することが可能になる。
【００９８】
また静止画データは、ＤＶＤに書き込んだネットワーク上のロケータで同定される場所（サーバ２１２）に適宜アップロードしておく。尚、ここでサーバの容量を設定するサーバ容量設定部１１２によりサーバ２１２へアクセスし、そのサーバ２１２へロードできる映像データの容量限度を取得する。この容量データは、ユーザが静止画データの表示を設定するときにその補助データとして使用することができる。
【００９９】
図２０は、本発明の実施の形態８に係る再生側の映像表示装置の構成を示すブロック図である。ここで前述の図２の構成と共通する部分は同じ記号で示し、それらの説明を省略する。
【０１００】
二次メディア（ＤＶＤ）の配布先であるユーザ（再生側の映像表示装置）は、標準の解像度の映像のＤＶＤを再生できる機能を有しているものとする。またＪＡＶＡ ＶＭによって、書き込まれたアプレットが起動されると、ネットワーク接続の状況確認や、映像の再生に際して時間管理を行う。具体的には、静止画データ表示時刻管理部２１４は、再生時間が予め書き込まれた静止画データの記録時間に接近したかどうかを判定する。そして静止画データの記録時間に接近したと判定した場合は、ネットワークアクセス部２０２により、予め指定されたネットワークのサーバ２１２から、静止画データのダウンロードを試みる。もしその静止画データがサーバ２１２に存在しなければ、そのまま動画データの再生を継続する。
【０１０１】
一方、サーバ２１２に静止画データが存在する場合は、その静止画データのダウンロードを開始してキャッシュメモリ２１３に蓄積する。そして静止画の表示タイミングの直前になると、キャッシュメモリ２１３に蓄積された静止画データを復号化部２０３で復号し、表示切替部２０９により、動画から静止画の再生に切り替える。復号化部２０３，２０４のそれぞれは、ネットワークを介して配信された静止画データの復号化部、ＤＶＤに記録された動画データの復号化部である。
【０１０２】
このときＤＶＤに記録された動画データ、及び、ネットワークを介して配信される静止画データとは、共通の再生時間管理情報を共有する。具体的には、ＭＰＥＧ−２ ＴＳ中のＰＥＳに設置されたＤＴＳ及びＰＴＳを検知して、切り替えることになる。
【０１０３】
このように、二次メディアをもった撮像装置と、その再生装置、及びネットワーク上のサーバを用いたシステム構成をとることにより、各ユーザの再生環境に応じた映像データの配布が可能になる。
【０１０４】
図２２は、本実施の形態８に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【０１０５】
この処理はユーザにより再生開始が指示されることにより開始され、まずステップＳ３１で、ＪＡＶＡアプレット２０４によりネットワークにアクセスする。次にステップＳ３２に進み、ネットワークを介してサーバ２１２にアクセス可能かどうかを判定する。サーバ２１２にアクセスできない場合にはステップＳ３６に進み、ＤＶＤに記憶されている動画データを再生する。一方、ステップＳ３２でサーバ２１２にアクセス可能な場合はステップＳ３３に進み、オリジナル映像の撮影者によって、サーバ２１２に、静止画データがアップロードされているかどうかを判定する。ここで静止画データがサーバ２１２にアップロードされていない場合はステップＳ３６に進み、ＤＶＤに記憶されている動画像データを再生する。ステップＳ３３で静止画データがサーバ２１２にアップロードされている場合はステップＳ３４に進み、そのＤＶＤに書き込まれている静止画データの時間情報を監視する。そして静止画データ表示時刻管理部２１４により動画データの中の、設定されている静止画の表示時間になったかどうかを判定する。そして静止画の表示時間になるとステップＳ２５に進み、表示切替部２０９によりサーバ２１２からの静止画データの表示に切り替えて再生する。このときに厳密な同期をとるために、上記タイムスタンプにより制御を行う。一方、静止画データの表示時間でないときはステップＳ３６に進み、ＤＶＤに記録されている動画データを再生する。
【０１０６】
このような処理フローにより、ＤＶＤの動画データと、サーバからの静止画データとの表示切り替えを行うことができる。
【０１０７】
［実施の形態９］
次に本発明の実施の形態９について説明する。
【０１０８】
動画データと静止画データとを切り替える際に、例えば図２３に示すような、カメラシャッタ画像のようなエフェクトデータを用いて、静止画データを表示する。
【０１０９】
図２３は、本発明の実施の形態９に係る静止画表示の画像エフェクトの一例を説明する図である。
【０１１０】
このようなエフェクトデータを用いる場合には、静止画データだけでなく、このエフェクトデータを併せてサーバ２１２にアップロードしておく。そして、再生装置側で動画データから静止画データに切り替える際に、この画像エフェクトを表示して、静止画表示を引き立てることが可能である。
【０１１１】
また、静止画データと音響エフェクトデータとを併せてサーバ２１２にアップロードし、動画データから静止画データに切り替える際、その音響エフェクトを再生することにより、聴覚的に静止画を引き立てることもできる。
【０１１２】
更には、静止画データと画像エフェクトデータと音響エフェクトデータを併せてサーバ２１２にアップロードする。そして動画データから静止画データに切り替える際、これら画像エフェクト、音響エフェクトを再生することにより、視覚的にも聴覚的にも静止画を引き立てることが可能である。
【０１１３】
［実施の形態１０］
次に本発明の実施の形態１０を説明する。この実施の形態１０では前述の実施の形態４と同様に、静止画データの表示切替の直前に、動画から静止画に切り替ることを表示するものである。
【０１１４】
ＪＡＶＡアプレットには元来、ポップアップ表示制御機能や表示レイアウトを制御する機能が備わっている。そこで二次メディアへ書き込むアプレットに、各種のポップアップ機能を記録しておくことが可能である。具体的には、オリジナル映像の撮影者が静止画データをアップロードする前に、ネットワークに接続して、静止画の有無を示す情報を表示するように設定しても良い。また或は、図２４に示すように、アップロードが完了している場合には、動画の再生中に静止画データを表示する時刻が接近していることを示す表示を、その所定時間前に行うことなどが考えられる。また、再生装置がネットワークに接続されていない場合には、ユーザに、ネットワークとの接続をチェックし、静止画データのダウンロードを推奨するような表示を行っても良い。
【０１１５】
図２４は、実施の形態１０に係る表示制御例を示す図である。
【０１１６】
図において、動画データの表示中に、静止画データの表示タイミングのＮ秒前になると、「Ｎ秒後に静止画表示」というメッセージ２４００を表示部２１０に表示する。そして２４０１で静止画データを、予め決められた時間の間、表示する。そして次に２４０２で、静止画の表示により中断されていた動画データの続きを表示する。
【０１１７】
尚、本実施の形態１０では、ＪＡＶＡアプレットと、それを動作させる仮想マシンを前提に説明したが、ＪＡＶＡ環境でなくても実現可能である。
【０１１８】
また、サーバに登録する静止画データの容量は、サーバのＨＤＤの容量に関係するため、ＨＤＤが十分な容量を有していれば、動画及び静止画の全データをアップロードしても良い。また、サーバの記憶容量に制限がある場合は、予め、サーバに登録できるデータ容量を撮像装置に記憶しておいてもよい。
【０１１９】
（他の実施形態）
尚、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システム或いは装置に直接或いは遠隔から供給し、そのシステム或いは装置のコンピュータが該供給されたプログラムを読み出して実行することによっても達成され得る。その場合、プログラムの機能を有していれば、形態は、プログラムである必要はない。
【０１２０】
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明のクレームでは、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【０１２１】
プログラムを供給するための記録媒体としては、様々なものが使用できる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などである。
【０１２２】
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページからハードディスク等の記録媒体にダウンロードすることによっても供給できる。その場合、ダウンロードされるのは、本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルであってもよい。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明のクレームに含まれるものである。
【０１２３】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布する形態としても良い。その場合、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムが実行可能な形式でコンピュータにインストールされるようにする。
【０１２４】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される形態以外の形態でも実現可能である。例えば、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【０１２５】
更に、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれるようにしてもよい。この場合、その後で、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される。
【０１２６】
また、上記実施の形態では、映像記録装置を、撮影した画像を記録する映像記録装置の場合で説明したが本発明はそれに限定されるものでなく、ビデオを再生して録画できるビデオレコーダ或は、ハイビジョン放送や５．１チャンネルプログラムを受信してＨＤＤなどに記録できるテレビジョン受像機であっても良い。
【図面の簡単な説明】
【０１２７】
【図１】本発明の実施の形態１に係るビデオカメラの構成の一例を示すブロック図である。
【図２】本実施の形態１に係る再生側の映像表示装置の構成を示すブロック図である。
【図３】ハイライトシーンの内のハイビジョンで表示する区間の設定例を説明する図である。
【図４】ＴＳの構造を説明する図である。
【図５】本実施の形態１に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図６】ハイライトシーンをサーバからの映像データで表示・再生する例を説明する図である。
【図７】本発明の実施の形態２を説明する図である。
【図８】本発明の実施の形態２に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図９】本発明の実施の形態３を説明する図である。
【図１０】本発明の実施の形態４を説明する図である。
【図１１】本発明の実施の形態５に係るビデオカメラの構成を示すブロック図である。
【図１２】実施の形態５に係る音響ダウンミックス部の構成を説明するブロック図である。
【図１３】本実施の形態５に係る再生装置の構成を示すブロック図である。
【図１４】実施の形態５に係るハイライトシーンの設定例を示す図である。
【図１５】実施の形態５に係るハイライトシーンでのダウンミックスの音響データと、マルチチャンネルの音響データの切替を示す図である。
【図１６】本発明の実施の形態５に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図１７】本発明の実施の形態６を説明する図である。
【図１８】本発明の実施の形態６に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図１９】実施の形態７を説明する図である。
【図２０】本発明の実施の形態８に係る再生側の映像表示装置の構成を示すブロック図である。
【図２１】実施の形態８における静止画の表示箇所を指定する一例を説明する図である。
【図２２】本実施の形態８に係る再生側の映像表示装置での映像データの再生処理を説明するフローチャートである。
【図２３】本発明の実施の形態９に係る静止画表示の画像エフェクトの一例を説明する図である。
【図２４】実施の形態１０に係る表示例を示す図である。
【特許請求の範囲】
【請求項１】
符号化された第１の映像データを記録する記録手段と、
前記記録手段に記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定手段と、
前記指定手段により指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録手段に記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する手段と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード手段と、
を有することを特徴とする映像記録装置。
【請求項２】
前記本来有している特性は、前記第１の映像データの解像度であることを特徴とする請求項１に記載の映像記録装置。
【請求項３】
前記本来有している特性は、前記第１の映像データに対応した音響データの音響特性であることを特徴とする請求項１に記載の映像記録装置。
【請求項４】
請求項１乃至３のいずれか１項に記載の映像記録装置で記録された前記記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得手段と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得手段により取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生手段と、
を有することを特徴とする映像再生装置。
【請求項５】
前記本来有している特性は、前記第１の映像データの解像度であることを特徴とする請求項４に記載の映像再生装置。
【請求項６】
前記本来有している特性は、前記第１の映像データに対応した音響データの音響特性であることを特徴とする請求項４に記載の映像再生装置。
【請求項７】
前記取得手段が前記サーバからの前記データ領域に対応する前記第１の映像データの取得に失敗したとき、前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達しても前記記録メディアからの前記第２の映像データの再生を継続する手段を更に有することを特徴とする請求項４乃至６のいずれか１項に記載の映像再生装置。
【請求項８】
前記記録メディアからの前記第２の映像データの再生中、前記第２の映像データを表示するアスペクト比を変換する変換手段を更に有することを特徴とする請求項４に記載の映像再生装置。
【請求項９】
前記記録メディアからの前記第２の映像データの再生中、前記データ領域の再生時刻情報に到達する所定時間前に、前記第１の映像データの本来の特性での表示に切り替る旨を表示する表示制御手段を更に有することを特徴とする請求項４乃至８のいずれか１項に記載の映像再生装置。
【請求項１０】
符号化された動画データを記録する記録手段と、
前記記録手段に記録された前記動画データの再生時に、前記静止画データを再生する再生時間を指定する指定手段と、
前記指定手段により指定された前記再生時間と、当該再生時間に再生される前記静止画データを保持するサーバのアドレスとを含むアプレットを作成し、前記動画データとともに記録メディアに記録する手段と、
少なくとも前記静止画データを前記サーバにアップロードするアップロード手段と、
を有することを特徴とする映像記録装置。
【請求項１１】
請求項１０に記載の映像記録装置で記録された前記記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置であって、
前記アプレットに基づいて前記静止画データを前記サーバから取得する取得手段と、
前記アプレットに基づいて前記記録メディアからの前記動画データの再生中に前記静止画データの再生時間に到達すると、前記取得手段により取得した前記静止画データを再生する再生手段と、
を有することを特徴とする映像再生装置。
【請求項１２】
映像データを記録する映像記録装置の制御方法であって、
符号化された第１の映像データを記録する記録工程と、
前記記録工程で記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定工程と、
前記指定工程で指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録工程で記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する工程と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード工程と、
を有することを特徴とする映像記録装置の制御方法。
【請求項１３】
請求項１２に記載の映像記録装置の制御方法で記録された記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置の制御方法であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得工程と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得工程で取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生工程と、
を有することを特徴とする映像再生装置の制御方法。
【請求項１】
符号化された第１の映像データを記録する記録手段と、
前記記録手段に記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定手段と、
前記指定手段により指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録手段に記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する手段と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード手段と、
を有することを特徴とする映像記録装置。
【請求項２】
前記本来有している特性は、前記第１の映像データの解像度であることを特徴とする請求項１に記載の映像記録装置。
【請求項３】
前記本来有している特性は、前記第１の映像データに対応した音響データの音響特性であることを特徴とする請求項１に記載の映像記録装置。
【請求項４】
請求項１乃至３のいずれか１項に記載の映像記録装置で記録された前記記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得手段と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得手段により取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生手段と、
を有することを特徴とする映像再生装置。
【請求項５】
前記本来有している特性は、前記第１の映像データの解像度であることを特徴とする請求項４に記載の映像再生装置。
【請求項６】
前記本来有している特性は、前記第１の映像データに対応した音響データの音響特性であることを特徴とする請求項４に記載の映像再生装置。
【請求項７】
前記取得手段が前記サーバからの前記データ領域に対応する前記第１の映像データの取得に失敗したとき、前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達しても前記記録メディアからの前記第２の映像データの再生を継続する手段を更に有することを特徴とする請求項４乃至６のいずれか１項に記載の映像再生装置。
【請求項８】
前記記録メディアからの前記第２の映像データの再生中、前記第２の映像データを表示するアスペクト比を変換する変換手段を更に有することを特徴とする請求項４に記載の映像再生装置。
【請求項９】
前記記録メディアからの前記第２の映像データの再生中、前記データ領域の再生時刻情報に到達する所定時間前に、前記第１の映像データの本来の特性での表示に切り替る旨を表示する表示制御手段を更に有することを特徴とする請求項４乃至８のいずれか１項に記載の映像再生装置。
【請求項１０】
符号化された動画データを記録する記録手段と、
前記記録手段に記録された前記動画データの再生時に、前記静止画データを再生する再生時間を指定する指定手段と、
前記指定手段により指定された前記再生時間と、当該再生時間に再生される前記静止画データを保持するサーバのアドレスとを含むアプレットを作成し、前記動画データとともに記録メディアに記録する手段と、
少なくとも前記静止画データを前記サーバにアップロードするアップロード手段と、
を有することを特徴とする映像記録装置。
【請求項１１】
請求項１０に記載の映像記録装置で記録された前記記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置であって、
前記アプレットに基づいて前記静止画データを前記サーバから取得する取得手段と、
前記アプレットに基づいて前記記録メディアからの前記動画データの再生中に前記静止画データの再生時間に到達すると、前記取得手段により取得した前記静止画データを再生する再生手段と、
を有することを特徴とする映像再生装置。
【請求項１２】
映像データを記録する映像記録装置の制御方法であって、
符号化された第１の映像データを記録する記録工程と、
前記記録工程で記録された前記第１の映像データの内、前記第１の映像データが本来有している特性で再生するデータ領域を指定する指定工程と、
前記指定工程で指定されたデータ領域の再生時刻情報と、当該再生時刻情報に基づいて再生される前記データ領域に対応する前記第１の映像データを保持するサーバのアドレスとを含むアプレットを作成し、前記記録工程で記録された前記第１の映像データの本来の特性を低下させた第２の映像データとともに記録メディアに記録する工程と、
少なくとも前記データ領域に対応する前記第１の映像データを前記サーバにアップロードするアップロード工程と、
を有することを特徴とする映像記録装置の制御方法。
【請求項１３】
請求項１２に記載の映像記録装置の制御方法で記録された記録メディアから前記第２の映像データと前記アプレットとを再生する映像再生装置の制御方法であって、
前記アプレットに基づいて前記データ領域に対応する前記第１の映像データを前記サーバから取得する取得工程と、
前記アプレットに基づいて前記記録メディアからの前記第２の映像データの再生中に前記データ領域の再生時刻情報に到達すると、前記取得工程で取得した前記第１の映像データを基に前記第１の映像データの本来の特性で前記第１の映像データを再生する再生工程と、
を有することを特徴とする映像再生装置の制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【公開番号】特開２００９−１４１５２４（Ｐ２００９−１４１５２４Ａ）
【公開日】平成２１年６月２５日（２００９．６．２５）
【国際特許分類】
【出願番号】特願２００７−３１３９４４（Ｐ２００７−３１３９４４）
【出願日】平成１９年１２月４日（２００７．１２．４）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＪＡＶＡ
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２１年６月２５日（２００９．６．２５）
【国際特許分類】
【出願日】平成１９年１２月４日（２００７．１２．４）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＪＡＶＡ
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]