情報記録装置、情報再生装置、情報記録プログラムおよび情報再生プログラム
【課題】動画の情報を静止画再生時に使用することで、記録する静止画の情報量を削減することが可能な情報記録装置及び情報再生装置を提供する。
【解決手段】撮像レンズから入射された光線を分離する光路分離器と、前記光路分離器で分離された光を受光し、動画信号として出力する少なくとも１つの受光素子と、前記分配部で分離された光を受光し、静止画信号として出力する少なくとも１つの受光素子と、前記動画信号を記録媒体に記録する動画信号記録器と、前記静止画信号を記録媒体に記録する静止画信号記録器とを備えた動画静止画同時記録装置において、前記静止画は対応する動画像ピクチャーデータのもつ情報を補う、補足静止画情報として記録されることを特徴とする情報記録装置及び情報再生装置。
【解決手段】撮像レンズから入射された光線を分離する光路分離器と、前記光路分離器で分離された光を受光し、動画信号として出力する少なくとも１つの受光素子と、前記分配部で分離された光を受光し、静止画信号として出力する少なくとも１つの受光素子と、前記動画信号を記録媒体に記録する動画信号記録器と、前記静止画信号を記録媒体に記録する静止画信号記録器とを備えた動画静止画同時記録装置において、前記静止画は対応する動画像ピクチャーデータのもつ情報を補う、補足静止画情報として記録されることを特徴とする情報記録装置及び情報再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報記録装置、情報再生装置、情報記録プログラムおよび情報再生プログラムに係り、特に動画と静止画とを共に記録及び再生する際に、記録する静止画の画像データの一部を、同時期に記録する動画の画像データを用いて補間することにより、静止画の記録に要するデータ容量を削減することが可能な情報記録装置、情報再生装置、情報記録プログラムおよび情報再生プログラムに関するものである。
【背景技術】
【０００２】
動画と静止画を共に記録し、また再生することが可能な情報記録再生装置が存在する
例えば、特許文献１には、広角レンズによる撮像信号と、ズームレンズによる撮像信号とを、同一の記録媒体に同時記録して、２種類の映像を２つの光学系にて記録する技術が開示されている。
【０００３】
また、特許文献２には、入射光をプリズム分岐させて動画撮影用ＣＣＤと静止画撮影用ＣＣＤに受光させ、１つの光学系で、２つのＣＣＤを用いて、動画像はＭＰＥＧ圧縮されて記録し、静止画はＪＰＥＧ圧縮してメモリカードに同時に記録される技術が開示されている。
【０００４】
特許文献３には、対物光学系の光路を二つに分離するハーフミラーの二つの分離光路を用いて、異なる画素位置のデータからなる画像信号を形成するように配置された２つのＣＣＤから、設定された画素以外の欠落画素を周囲の画素信号から演算し、高解像度の画像を生成する技術が開示されている。
【０００５】
特許文献４には記録媒体の破損や、通信の障害などにより、入力符号化データにエラーや、符号化データ自体の供給不足が生じ、正常な復号動作を行えない場合においても、タイマーを設け、もしも、ＣＰＵからの制御がタイマーに対して適切なタイミングできなかった場合、表示部のセレクタは、自動的に静止画画像生成部の出力を選択するように切り替わるようにして、高品位の静止画が出力されるようにする技術が開示されている。
＜MPEG＞
次に、上記した記録再生装置で使用されているMPEGについて説明する。
【０００６】
MPEGは1988年、ISO/IEC JTC1/SC2（国際標準化機構/国際電気標準化会合同技術委員会1/専門部会2、現在のSC29）に設立された動画像符号化標準を検討する組織の名称（Moving Pictures Expert Group）の略称である。MPEG1（MPEGフェーズ1）は1.5Mbps程度の蓄積メディアを対象とした標準で、静止画符号化を目的としたJPEGと、ISDNのテレビ会議やテレビ電話の低転送レート用の動画像圧縮を目的としたH.261（CCITT SGXV、現在のITU-T SG15で標準化）の基本的な技術を受け継ぎ、蓄積メディア用に新しい技術を導入したものである。これらは1993年8月、ISO/IEC 11172 として成立している。
【０００７】
MPEG2（MPEGフェーズ2）は通信や放送などの多様なアプリケーションに対応できるように汎用標準を目的として、1994年11月ISO/IEC 13818、H.262として成立している。
MPEGは幾つかの技術の組み合わせで実現される。
【０００８】
入力画像は動き補償器で復号化した画像と、入力画像の差分を取ることで時間冗長部分を削減する。予測の方向は、過去、未来、両方からの３モード存在する。またこれらは16画素×16画素のMB（マクロブロック）ごとに切り替えて使用できる。予測方向は入力画像に与えられたピクチャータイプによって決定される。過去からの予測と、予測をしないでそのMBを独立で符号化する２モード存在するのがPピクチャーである。また未来からの予測、過去からの予測、両方からの予測、独立で符号化する４モード存在するのがBピクチャーである。そして全てのMBが独立で符号化するのがIピクチャーである。動き補償は、動き領域をMBごとにパターンマッチングを行ってハーフペル精度で動きベクトルを検出し、動き分だけシフトしてから予測する。動きベクトルは水平方向と垂直方向が存在し、何処からの予測かを示すMC(Motion Compensation)モードとともにMBの付加情報として伝送される。Iピクチャーから次のIピクチャーの前のピクチャーまでをGOP(Group Of Picture)といい、蓄積メディアなどで使用される場合には、一般に約１５ピクチャー程度が使用される。
【０００９】
差分画像はDCT器において直交変換が行われる。DCT（Discrete Cosine Transform)とは 余弦関数を積分核とした積分変換を有限空間への離散変換する直交変換である。MPEGではMBを４分割し8×8のDCTブロックに対して、２次元DCTを行う。一般にビデオ信号は低域成分が多く高域成分が少ないため、DCTを行うと係数が低域に集中する。
【００１０】
DCTされた画像データ（DCT係数）は量子化器で量子化が行われる。量子化は量子化マトリックスという8×8の２次元周波数を視覚特性で重み付けした値と、その全体をスカラー倍する量子化スケールという値で乗算した値を量子化値として、DCT係数をその量子化値で除算する。デコーダーで逆量子化するときは量子化値で乗算することにより、元のDCT係数に近似している値を得ることになる。
【００１１】
量子化されたデータはVLC器で可変長符号化される。量子化された値のうち直流（DC）成分は予測符号化のひとつであるDPCM（differential pulse code modulation )を使用する。また交流（AC）成分は 低域から高域にzigzag scanを行い、ゼロのラン長および有効係数値を１つの事象とし、出現確率の高いものから符号長の短い符号を割り当てていくハフマン符号化が行われる。
【００１２】
可変長符号化されたデータは一時バッファに蓄えられ、所定の転送レートで符号化データとして出力される。また、その出力されるデータのマクロブロック毎の発生符号量は、符号量制御器に送信され、目標符号量に対する発生符号量との誤差符号量を量子化器にフィードバックして量子化スケールを調整することで符号量制御される。量子化された画像データは逆量子化器にて逆量子化、逆DCT器にて逆DCTされ一時、画像メモリーに蓄えられたのち、動き補償予測器において、差分画像を計算するためのリファレンスの復号化画像として使用される。これら全体の符号化構成例を図１０に示す。
【００１３】
符号化されたストリームはバッファリングされ、バッファからのデータはVLD器に入力される。VLD器では可変長復号化され、直流（DC）成分および交流（AC）成分を得る。交流（AC）成分データは低域から高域にzigzag scanの順で8ｘ8のマトリックスに配置する。このデータは逆量子化器に入力され、量子化マトリックスにて逆量子化される。逆量子化されたデータは逆DCT器に入力され、逆DCTされ一時、画像データ（復号化データ）として出力される。また、復号化データは一時、画像メモリーに蓄えられたのち、動き補償予測器において、差分画像を計算するためのリファレンスの復号化画像として使用される。復号化構成例を図１１に示す。
＜ディスクフォーマットの一般的データ構造＞
次に、CD等の従来のディスク媒体と比較して、数倍から十数倍の記憶容量を有する近年開発された次世代のディスク媒体におけるディスクフォーマットの一般的なデータ構造について説明する。
【００１４】
次世代のディスク媒体としては、DVD-ROMディスク（DVD Specifications for Read-Only Discに準拠した読み出し専用光ディスク）、DVD-RWディスク（DVD Specifications for Re-recordable Discに準拠した再記録可能なディスク）DVD-RAMディスク（DVD Specifications for Rewritable Discに準拠した再書き込み可能なディスク）などがある。
【００１５】
DVD-RWまたはDVD-RAMディスク上に画像データを収録する規格も策定されており、その大容量を活かして高画質な動画及び静止画を記録し、様々な編集を経て再生する手法が提供される。
【００１６】
DVD-RWまたはDVD-RAMディスク上（以下、DVD-RW/RAMディスクと略す）に動画データを収録する規格であるVIDEO RECORDING規格（以下DVD-VRと略す）では、動画データはVOB（Video Object）単位に記録される。VOBとは連続する動画を任意の範囲毎に区別するための単位である。
【００１７】
そして、この記録された各VOBの再生には、そのVOB群の各VOBの再生順序を記述した管理データであるPGC （Program Chain）が用いられる。再生装置は再生時にこのPGCを参照して、記述されている順序でVOBを再生する。
【００１８】
このPGCのうち、ディスクに記録されている全てのVOBを、各VOBを記録した時の順序で全て再生するための順序が記述されているPGCはオリジナルPGC と定義されている。
また、全VOBのうち利用者が任意に選択し順序を設定した内容を記述したPGCはユーザー定義PGC （User Defined PGC）と定義されている。
【００１９】
１枚のディスク上に、オリジナルPGCはただ一つ存在し、ユーザー定義PGCは複数存在しうる。 従って、１枚のディスクに対して利用者が複数いても、その各利用者に対応したそれぞれ別々のユーザー定義PGCを作成し、編集することが可能である。また一人の利用者が好みに応じて複数のユーザー定義PGCを作成し、編集することも可能である。
［ディレクトリ構造］
"DVD Specifications for Rewritable/Re-recordable Discs、 Part3 VIDEO RECORDING、 Version 1.0"で示されるように、DVD-VRでは、DVD-RW/RAM上におけるディレクトリ構造が定義されている。図１２にそのディレクトリ構造図を示す。
【００２０】
ルートディレクトリ下にDVD＿RTAVディレクトリがある。
そのDVD＿RTAVディレクトリの下のVR＿MANGER.IFOファイルは、全ての記録再生管理データを収録するためのファイルであり、オリジナルPGC、ユーザー定義PGCなどが記述される。VR＿MOVIE.VROファイルには、動画データの本体が記録される。VR＿STILL.VROファイルには、静止画データの本体が記録される。VR＿AUDIO.VROファイルには、音声データの本体が記録される。
【００２１】
このように、実際の動画データ（VR＿MOVIE.VRO）、静止画データ（VR＿STILL.VRO）、音声データ（VR＿AUDIO.VRO）等の実データと、記録再生管理データとを分離して記録する構造とすることで、実際の動画、静止画、音声の各データを変更することなく、ユーザー定義PGCによって任意の再生順序を設定することが出来る。なお、VR＿STILL.VRO中の各静止画は、MPEG Video規格に準拠したMPEGイントラ画像として記録される。
［オリジナルPGC］
図１３はオリジナルPGCの構造概念図である。
【００２２】
DVD-VRディスクに、複数の動画データを記録する場合、その記録された各動画データを参照するためのプログラム（Program）がオリジナルPGC内に記述される。そして、その記述された各プログラムで参照される動画データを、更に１つまたは複数に分けるためのセル（Cell）が上記したプログラムと対応付けられて記述される。一般的には、記録の途中でポーズした場合や、記録後に番組の途中部分を編集で削除した場合などに、プログラムはその途切れ部分を境とする複数のセルに分割された構成をとる。各セルはそれぞれ対応する各VOBを参照している。このプログラムおよびセルがオリジナルPGCの記録再生管理データである。
【００２３】
VOBは、上記セルで参照される動画データそのものであり、MPEG-2システムに準拠したプログラムストリームとして記録されている。
図１３において、ディスクに最初に記録された動画データはVOB1であり、これを参照するプログラム及びセルがProgram1、Cell1としてオリジナルPGC内に記述される。以下、VOBが追加記録されていくたびに、その各VOBを参照するプログラムがProgram2、 Program 3、 ...、セルがCell2、Cell3、...というように追加記述されていく。なおVOBは、上記したとおり1つのプログラムの中で記録ポーズなどの区切りが発生した場合は複数に分かれるので、そのVOBを参照するセルも１つのプログラム内で複数記述されることになる。図１３は、Program2がCell2、Cell3に分かれている例である。
【００２４】
このオリジナルPGCを用いると、オリジナルPGC内に記述されているプログラムまたはセル（つまりディスクに記録されている全てのプログラムまたはセル）に対応した全VOBを記述順、つまり記録順に再生することが可能となる。また、オリジナルPGC上の特定のプログラムを利用者に指定させて、その指定させたプログラムが参照するVOBのみ再生することも可能である。
［ユーザー定義PGC］
図１４はユーザー定義PGCの構造概念図である。
【００２５】
オリジナルPGCで参照されている各VOBは、その全部または一部をユーザー定義PGCでも参照可能である。ユーザー定義PGCで用いられるセルは、オリジナルPGCと異なり、VOBと１対１に対応しなくてもよく、一つのVOBの中の一部分のみを参照したり、二つのVOBにまたがって参照したりすることが可能である。例えば、VOB内のコマーシャルの部分や不要場面の部分を除いた必要場面の部分のみを参照したり、２つ以上の番組（Program）の一部分を繋いで再生したりする用途等に適している。
【００２６】
また、ユーザー定義PGC中にはプログラムの階層は存在しない。つまり、ひとつのユーザー定義PGCが、オリジナルPGCで言う１つのプログラムに相当する。
［PGCI］
表５は、オリジナルPGC及びユーザー定義PGCに記述される情報（PGCI）の具体的定義内容を示す表である。PGCIは以下の情報からなる。
・PGC＿GI：PGCの一般情報。
・PGI：各プログラムナンバーのPGI。
【００２７】
（オリジナルPGCの場合のみ定義する。ユーザー定義PGCでは定義しない。）
・CI＿SRP ：PGC中の各セル情報の検索ポインタ。
・M＿CI：動画セルの場合の各セル情報。
【００２８】
（静止画セルの場合はS＿CIと置き換える。）
次に、上記各要素の詳細内容を説明する。
PGC＿GIには、PGC内のプログラム数が記述されるPG＿Ns、及びCI＿SRPの数が記述されるCI＿SRP＿Nsが定義される。ユーザー定義PGCの場合は上記したようにプログラムの階層を持たないのでPG＿Nsはゼロである。
【００２９】
PGIは、PG＿Nsに記述される個数分存在し、それぞれに付加されるナンバーｉ（iは整数）で区別する。PGI内には、プログラム中のセル数が記述されるC＿Ns、プログラムに関するテキスト情報を記述するプライマリテキスト情報が記述されるPRM＿TXTI、プログラムに関連するアイテムテキスト情報（PGCIではなく、VR＿MANGR.IFO内の別のデータ構造として別途収録されている）の検索ポインタ番号が記述されるIT＿TXT＿SRPN、プログラムを代表する静止画像の位置を指定する代表静止画情報が記述されるEP＿PICTI等が定義される。
【００３０】
CI＿SRPは、CI＿SRP＿Nsに記述されるプログラムの個数分存在し、それぞれに付加されるナンバーｊ（ｊは整数）で区別する。各CI＿SRP内にはセル情報M＿CI（静止画の場合はS＿CI）の先頭アドレスが記述されるCI＿SAが定義される。
【００３１】
M＿CIには、セルの一般情報を記述するM＿C＿GIと０個以上のセルエントリーポイント情報が記述されるM＿C＿EPIが定義される。M＿CIはC＿Nsに記述されるセルの個数分存在し、それぞれに付加されるナンバーｊ（ｊは整数）で区別する。
【００３２】
M＿C＿GI内には、セルのタイプが記述されるC＿TY、セルエントリーポイント数が記述されるC＿EPI＿Ns等が定義される。
M＿C＿EPI内には、エントリーポイントのタイプが記述されるEP＿TY（AとB、AはPRM＿TXTIなし、BはPRM＿TXTIあり）、エントリーポイントの再生時刻が記述されるEP＿PTM、及びエントリーポイントに関するプライマリテキスト情報が既出されるPRM＿TXTIが定義される。M＿C＿EPIはC＿EPI＿Nsに記述されるエントリーポイントの個数分存在し、それぞれに付加されるナンバーｋ（ｋは整数）で区別する。
【００３３】
ここで、エントリーポイントとはセル内の任意の時刻を指定し、プログラムやセルの任意の中間地点へのアクセスを可能にする情報である。図１３および図１４中に、セル内に指定されるエントリーポイントの例（EPと示される矢印）を示す。
【００３４】
なお、静止画のセルを再生する場合には、M＿CIの代わりにS＿CIが用いられる。（S＿CIの内容はここでは省略する。） 従って、オリジナルPGC上に動画と静止画を記録する場合はセル毎に混在することになる。ユーザー定義PGC上も、セル毎に動画用セルと静止画用セルを混在させることが出来る。
【特許文献１】特開平５−２９２４４５
【特許文献２】特開２００４−７２１４８
【特許文献３】特開平１１−７６１５９
【特許文献４】特開平２００２−１５２７４３
【発明の開示】
【発明が解決しようとする課題】
【００３５】
上記した特許文献１〜４に記載の動画と静止画とを共に記録再生可能な従来の情報記録再生装置においては、動画と静止画とを互いに独立して記録及び再生を行なっている。
しかしながら、同一被写体に対して動画及び静止画を記録する場合、その動画と静止画には互いに相関がある。この相関性を利用すれば動画及び静止画の互いの記録再生に必要な情報量の削減が可能となるが、従来の方法ではこの相関性を利用していないので情報量を削減できず効率的な圧縮記録及び伸長再生をすることが出来ないという課題があった。
【課題を解決するための手段】
【００３６】
そこで、上記課題を解決するために本発明は、以下の装置およびプログラムを提供するものである。
（１）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する動画生成手段と(107)、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する補足静止画生成手段と(116)、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と(114、117〜120）、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と(111、112)、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と(112、118、120)、
を有することを特徴とする情報記録装置。
（２）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する動画生成手段と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する補足静止画生成手段と、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と、
を有することを特徴とする情報記録装置。
（３）上記（１）に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と(210)、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを再生する第２の再生手段と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する静止画生成手段と(212)、
を有することを特徴とする情報再生装置。
（４）上記（２）に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と(210)、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを再生する第２の再生手段と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する静止画生成手段と(212)、
を有することを特徴とする情報再生装置。
（５）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する機能と(107)、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する機能と(116)、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と(114、117〜120）、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と(111、112)、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と(112、118、120)、
をコンピュータに実行させる情報記録プログラム。
（６）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する機能と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する機能と、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と、
をコンピュータに実行させる情報記録プログラム。
（７）上記（５）に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と(210)、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを前記第２の再生手段を用いて再生させる機能と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する機能と(212)、
をコンピュータに実行させる情報記録プログラム。
（８）上記（６）に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と(210)、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを前記第２の再生手段を用いて再生させる機能と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する機能と(212)、
をコンピュータに実行させる情報記録プログラム。
【発明の効果】
【００３７】
本発明によれば、静止画の記録時に、この静止画を記録した時期と同時期に記録した動画のフィールド又はフレームの情報を、記録する静止画の補間情報として用いるので、従来の方法のように動画と静止画とを独立に記録する場合に比較して、静止画の記録のための情報量を減らすことができ、記録媒体の効率的な使用が可能となる。
【００３８】
請求項１に記載の発明によれば、インターレースで記録する動画の偶数又は奇数フィールドの画像データを、同時期に記録する静止画の補間情報に用いる。従って、記録媒体に記録する静止画用の画像データは、この動画の偶数又は奇数フィールドの画像とペアとなるべき奇数又は偶数フィールドに相当する静止画補間画像データのみでよい。
【００３９】
そして再生時には、この静止画補間画像データと、前述のペアとなるべき動画の偶数または奇数フィールドの画像データとを組み合わせれば、高精細なプログレッシブ静止画像を生成でき、表示することが可能となる。
【００４０】
従って上記によれば、静止画として記録媒体に記録する必要のある情報量を、従来例と比較して半減させることが可能となる。
また請求項２に記載の発明によれば、記録する静止画像の画素数より少ない画素数で記録する動画を、静止画の画素数相当となるようにオーバーサンプリングする。そして、撮像素子から取り込んだ静止画像データと、このオーバーサンプリングして同一画素数相当となった動画像データとの各画素毎の差分を取り、残差画像データを生成する。この残差画像データを静止画補間画像データとして記録媒体に記録する。
【００４１】
そして再生時には、この静止画補間画像データと、記録時にこの静止画補間画像データとの差分をとったオーバーサンプルした動画の画像データとを各画素毎に加算すれば基の高精細な静止画を生成でき、表示することが可能となる。
【００４２】
従って上記によれば、静止画として記録媒体に記録する必要のある情報量を、従来例と比較して、静止画像の低域から中域に相当する空間周波数帯域の情報量を削減させることが可能となる。
【発明を実施するための最良の形態】
【００４３】
図１は本発明の情報記録装置の一実施例のブロック図である。本実施例の情報記録装置は、動画の記録中でもその記録を中断することなく、情報量を削減した静止画を記録することを可能とするものである。詳細内容は後述する。
【００４４】
図３は本発明の情報再生装置の一実施例のブロック図である。本実施例の情報再生装置は、記録した動画及び情報量を削減した静止画を再生すると共に、情報量を削減した静止画から基の静止画を生成して、表示することを可能とするものである。詳細内容は後述する。
＜ディスクフォーマットのデータ構造＞
まず、上記情報記録装置及び情報再生装置の実施例で使用する、ディスクフォーマットのデータ構造について説明する。これは従来例で説明した、一般的なディスクフォーマットのデータ構造を、本実施例の情報記録装置及び情報再生装置用にカスタマイズしたものである。
【００４５】
図１５は本実施例で使用するディスクフォーマットのデータ構造の例である。なお、ディレクトリ名やファイル名は本実施例を説明する目的で使用しており、これ以外の名称でも構わない。図示していないルートディレクトリの下にJVC＿HDVD＿SYSTEMディレクトリがあり、その下に、本実施例に関わる全ての管理データ、音声データ、動画データ、静止画データがファイルとして保存される。これは、従来例で説明した図１２のDVD＿RTAVディレクトリ以降に対応する。つまり、JVC＿HDVD＿SYSTEMが図１２のDVD＿RTAVに対応する。
［動画ファイル］
V＿PR＿SETは、記録されている各VOBをグループ化する為のディレクトリであり、このディレクトリ中に各VOBがV＿PRn.dat （ここで、nは1から開始されるプログラム番号）ファイルとしてそれぞれ記録される。各VOBはMPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。上記V＿PRn.datファイルは、従来例で説明した図１２のVR＿MOVIE.VROファイルに対応する。
［音声ファイル］
A＿PR＿SETは、音声の各プログラムをグループ化する為のディレクトリでありディレクトリ中に上記VOBと同様の各オーディオオブジェクト(AOB)がA＿PRn.dat （ここで、nは1から開始されるプログラム番号）ファイルとしてそれぞれ記録される。各AOBはMPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。上記A＿PRn.datファイルは、従来例で説明した図１２のVR＿AUDIO.VROファイルに対応する。
［Pack］
VOB及びAOBを記録する場合、図９のように、MPEG多重化規格のフォーマットに従い、パック化が施される。VOB及びAOBは複数の所定バイト数（１パック内にセット可能なバイト数）毎に分割され、それぞれ図９のAudio or Video data部にセットされる。
【００４６】
なお、ひとつのPackはPack Header部とPacket部に分かれており、更にPacket部はPacket Header部と、分割されたVOB又はAOBがセットされるAudio or Video data部とに分かれている。なおPacket Header部の直後には、必要に応じてPrivate Headerが付加される場合がある。
［静止画ファイル］
S＿PR＿SETは、記録されている静止画の各ファイルをグループ化する為のディレクトリであり、このディレクトリ中に静止画の各ファイルがS＿PRn.jpg （ここで、nは1から開始されるプログラム番号）ファイルとして記録されている。なお、各静止画ファイルはJPEGファイルとして記録される。上記S＿PRn.jpgは、従来例で説明した図１２のVR＿STILL.VROファイルに対応する。
【００４７】
なお、図１５では動画、音声、静止画のプログラムに関するファイル群をそれぞれ異なるディレクトリ下に記録する例を示したが、３種全てのファイル群を同一ディレクトリ、例えばAVS＿PR＿SETなどの下に記録するようにしても、本発明の趣旨と相違しない。 さらには、動画のプログラムをそれぞれ一つのファイルV＿PRn.datとして記録する例、及び音声のプログラムをそれぞれ一つのファイルA＿PRn.datとして記録する例を示したが、全てのビデオプログラムを同一のファイル、例えばV＿PR.dat内に連続して記録し、V＿PR.dat内のどの部分がどのプログラムデータに相当するかを別途の情報として保持するようにしても良い。A＿PR.datについても同様である。
［TMG.ifo］
TMG.ifo（Total Manager Information）は、オリジナル管理データ及びユーザー定義管理データ（以下、プレイリストとも呼ぶ）を記録する為のファイルである。このTMG.ifoファイルは、従来例で説明した図１２のVR＿MANGRDVD.IFOファイルに対応する。また、オリジナル管理データは図１２のオリジナルPGC、ユーザー定義管理データは図１２のユーザー定義PGCにそれぞれ相当するものである。
【００４８】
TMG.ifoファイルの構造を図１６に示す。TOTAL＿MAN＿IFO（Total Manager Information）は、GENERAL＿IFO（General Information）、CNTNT＿IFO（Content Information）及びSTATUS＿IFO（Status Information）で構成される。
【００４９】
［STATUS＿IFO］
STATUS＿IFOには、最後に再生したプログラムの種類や番号など、ステータスに関する情報が記述される。
【００５０】
［CNTNT＿IFO］
CNTNT＿IFOは、動画プログラム情報構造体V＿PR＿IFOT（Video Program Information Table）、音声プログラム情報構造体A＿PR＿IFOT（Audio Program Information Table）、静止画プログラム情報構造体S＿PR＿IFOT（Still picture Program Information Table）、プレイリスト情報構造体PL＿IFOT（Play List Information Table）で構成される。
【００５１】
上記のうち、V＿PR＿IFOT、A＿PR＿IFOT及びS＿PR＿IFOTの３つがそれぞれ動画、音声静止画用のオリジナル管理データである。また、PL＿IFOTがユーザー定義管理データである。
【００５２】
V＿PR＿IFOTは、各動画プログラム毎の情報V＿PR＿IFO＿i（iは1からnまでの整数）の集まりで構成される。
A＿PR＿IFOTは、各音声プログラム毎の情報A＿PR＿IFO＿j（jは1からmまでの整数）の集まりで構成される。
【００５３】
S＿PR＿IFOTは、各静止画プログラム毎の情報S＿PR＿IFO＿k（kは1からqまでの整数）の集まりで構成される。
PL＿IFOTは、各プレイリスト毎の情報PL＿IFO＿p（pは1からrまでの整数）の集まりで構成される。
【００５４】
以下では上記したそれぞれの整数i、 j、 k、 pをそれぞれ、V＿PR＿IFO番号、 A＿PR＿IFO番号、S＿PR＿IFO番号、PL＿PR＿IFO番号と呼ぶことにする。
以下に上記したV＿PR＿IFO＿i、A＿PR＿IFO＿i、S＿PR＿IFO＿i、PL＿IFO＿iの詳細内容を説明する。
［動画プログラム情報構造体］
表１は、動画プログラム情報構造体V＿PR＿IFO＿i のデータフィールドと内容の例を示す表である。
【００５５】
データフィールドの中の、PR number （V＿PRN）に記述される値は、この動画プログラムの番号(i)を示し、V＿PR＿IFO番号と等しい。
Video Group number (V＿GRN)に記述される値は、この動画プログラムが属する動画グループの番号を示す。
【００５６】
V＿ATRには表１の下側の表に示すような内容の、このV＿PR＿IFO＿iで参照される動画データ（各VOB）の各種属性情報が記述される。例えば、圧縮方式を示すVideo＿compression＿mode、ＰＡＬやＮＴＳＣ等の放送方式を示すTV＿system、アスペクト比情報を示すAspect＿ratio、水平解像度であるHorizontal＿video＿resolution、垂直解像度であるVertical＿video＿resolution等の各種属性情報が記述される。
【００５７】
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
なお、V＿PR＿IFO＿iは動画プログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表１の実施例以外にも様々な情報構造をとり得る。
［音声プログラム情報構造体］
表２は、音声プログラム情報構造体A＿PR＿IFO＿j のデータフィールドと内容の例を示す表である。
【００５８】
データフィールドの中の、PR number （A＿PRN）に記述される値は、この音声プログラムの番号（j)を示し、A＿PR＿IFO番号と等しい。
Audio Group number (A＿GRN)に記述される値は、この音声プログラムが属する音声グループの番号を示す。
【００５９】
Track number (TKN)に記述される値は、オーディオグループ内のトラック番号を示す。
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
【００６０】
なお、A＿PR＿IFO＿jは音声プログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表２の実施例以外にも様々な情報構造をとり得る。
［静止画プログラム情報構造体］
表３は、静止画プログラム情報構造体S＿PR＿IFO＿kのデータフィールドと内容の例を示す表である。
【００６１】
データフィールドの中の、PR number （S＿PRN）に記述される値は、この静止画プログラムの番号(k)を示し、S＿PR＿IFO番号と等しい。
Still picture Group number (S＿GRN)に記述される値は、この静止画プログラムが属する静止画グループの番号を示す。
【００６２】
Linked＿video＿program＿numberには、この静止画プログラムと関連付けられる（以下リンクされると称する）動画プログラムのPR＿numberが記述される。なお、関連付けられていない（以下リンクされていないと称する）場合には０が記述される。リンクに関する詳細内容は後述する。
【００６３】
Linked＿video＿entry＿timeには、リンクされている動画プログラムの中のピクチャーのタイムコードが記述される。
S＿ATRには表３の下側の表に示すような内容の、このS＿PR＿IFO＿kで参照される静止画データの各種属性情報が記述される。例えば圧縮方式を示すVideo＿compression＿modeや、ＰＡＬやＮＴＳＣのＴＶシステムを識別するTV＿system、アスペクト比情報を示すAspect＿ratioなどが記述される。更にsupplement＿infoには、この静止画データとリンクしており、記録されている補足静止画データから基の静止画データを生成するために用いる動画が、奇数フィールド（odd＿field）の画像データなのか、偶数フィールドeven＿field)の画像データなのか、あるいはそのどちらでもなくオーバーサンプルする画像データなのか(over＿sample)を識別する情報が記述される。このsupplement＿infoについての詳細内容は後述する。
【００６４】
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
なお、S＿PR＿IFO＿kは静止画プログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表３の実施例以外にも様々な情報構造をとり得る。
［プレイリストプログラム情報構造体］
表４は、プレイリストプログラム情報構造体PL＿IFO＿pのデータフィールドと内容の例を示す表である。
【００６５】
データフィールドの中の、PL numberに記述される値は、このプレイリストの番号(p)を示す。
num＿of＿ud＿programsには、このプレイリストに含まれるユーザー定義プログラムの数が記述される。ユーザー定義プログラムUD＿PR（User Defined Program）とは、利用者が設定するもので、一つ以上の動画プログラム、一つ以上の音声プログラムまたは一つ以上の静止画プログラムが記述されるものである。または、一つ以上の音声プログラムと、それと同時に再生すべき一つ以上の静止画プログラムが記述される場合もある。
【００６６】
UD＿PR＿modeには、対応するUD＿PRに動画、音声、静止画のうちのいずれのプログラムが記述されているかを示す情報が記述されている。
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
【００６７】
各プログラムの機能、プログラムとユーザー定義プログラム、プレイリストの関係などについては後述する。
なお、プレイリストプログラム情報構造体PL＿IFO＿pは動画、音声、静止画の各プログラムを関連付けて再生するのに必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表４の実施例以外にも様々な情報構造をとり得る。
［GENERAL＿IFO］
GENERAL＿IFOには、System IDやVersion number、 及びCNTNT＿IFOとSTATUS＿IFOの先頭アドレスなど、TOTAL＿MAN＿IFOの一般情報を記述する。詳細な例を表６に示す。この中の、Global＿entry＿offsetフィールドは、各静止画とリンクしているそれぞれの動画のピクチャーからエントリーする一般的なオフセットタイムが記述されるフィールドである。このGlobal＿entry＿offsetの値は、各静止画に対応する静止画プログラム情報構造体S＿PR＿IFO＿kの entry＿offset＿time フィールドに具体的な値が記載されていない場合に有効となるものである。
＜記録装置＞
図１は本発明の情報記録装置の一実施例のブロック図である。本実施例の情報記録装置は、上記したディスクフォーマットのデータ構造を用いることにより、動画の記録中でもその記録を中断することなく、情報量を削減した静止画を記録することを可能とするものである。
【００６８】
以下、この図１を用いて実施例を説明する。
入力された画像光はレンズ１０１を通して、光路分離器１０２に入力される。光路分離器にはプリズムやハーフミラーなどが用いられる。この光路分離器１０２によって２つに分離された画像光は動画用受光素子１０４と、静止画用受光素子１０５に入光される。受光素子には例えばＣＣＤやＣＭＯＳなどが用いられる。このとき、動画用撮像素子の解像度よりも、静止画用撮像素子の解像度のほうを例えばプログレッシブにして垂直方向を２倍とするとか、水平垂直ともに大きくするのが効果的である。図５は、これまで説明したレンズ１０１から静止画用受光素子１０５までの所謂光学ブロックの具体例を示す構造図である。レンズ１０１に対応するレンズ群５０１、光路分離器１０２に対応するプリズム５０２、動画用受光素子１０４に対応するＣＣＤ５０３、静止画用受光素子１０５に対応するＣＣＤ５０４から構成されている。
【００６９】
動画用受光素子１０４と静止画用受光素子１０５とで画像光はそれぞれ光電変換されて電気的な画像信号となる。更に画像信号はＡ／Ｄ変換されてデジタルデータとしてそれぞれ動画符号化器１１４、補足静止画情報生成器１１６に入力される。
【００７０】
また、オーディオ入力器１０３からのオーディオデータはＡ／Ｄ変換器１０８にてデジタルデータに変換され、音声符号化器１１３に入力される。音声符号化器１１３では入力されるデジタルデータを例えばドルビーＡＣ３を用いて信号圧縮処理を行う。
【００７１】
ユーザーインターフェース部（Ｕ／Ｉ）１０９は、利用者の操作情報を入力するブロックである。たとえば、動画を記録している途中に、利用者によってシャッターボタンが押されたなどの操作情報が入力されたならば、その押した時点のタイミング情報をＣＰＵへ出力する。
【００７２】
ＣＰＵ１１０は、上記のタイミング情報を受信したならば、静止画記録の開始を静止画撮影タイミング信号生成器１１１に送信する。
静止画撮影タイミング信号生成器１１１は、ＣＰＵ１１０より静止画記録の開始指示を受けたならば、静止画記録開始信号を補足静止画情報生成器１１６、動画符号化器１１４に送信する。また同時に、これから記録する静止画のプログラムナンバーと、この静止画とリンクする動画のプログラムナンバー及びピクチャータイムコードとを生成して、それぞれを管理データメモリー１１２に送信し、また静止画のプログラムナンバーは、動画符号化器１１４へも送信する。
【００７３】
動画符号化器１１５は、静止画記録開始信号を受信したならば、動画符号化を開始する。そして、同時に受信した静止画のプログラムナンバーを、動画符号化データの１ピクチャー毎に付加されているＭＰＥＧのユーザーデータ領域にセットする。これにより、動画記録中に記録した静止画と、その静止画を記録したのと同時期に記録されていた動画の1枚のピクチャーとの対応付けがなされることになる。
【００７４】
静止画のプログラムナンバーとは、表３に示す静止画プログラム情報構造体のS＿PR＿IFOフィールドの中のPR＿numberの値である。
ＭＰＥＧのユーザーデータ領域とは、図２に示すようにＭＰＥＧストリームの１ピクチャー毎に１つ付加されているものである。表７はＭＰＥＧ２ビデオレーヤの１ピクチャーのシンタックスを示したものであり、この中のuser＿dataを使用する。user＿dataは、User＿data＿start＿codeという一意に決定できるバイトアラインされたスタートコードから始まり、次に0x000001の３バイトを受信するまで、user＿dataを続けることができる。ここに静止画の識別情報（後述するS＿PRN）を記述する。その際、他のアプリケーションでuser＿dataを使用している可能性もあるので、user＿data＿start＿codeに続く４バイトのuser＿dataに、本方式のデータであることを示す識別コード0x22220204を記述する。これにより他の用途で使用されているユーザーデータとの混同を防ぐことができる。
なお、ここでは４バイトの識別コード0x22220204としているが、この識別コードのバイト長は４バイトに限らずまた識別コードも0x22220204に限るものではない。
【００７５】
動画局部復号器１１５は、動画復号器１１４で符号化された動画データを局部的に復号し、復号データを補足静止画情報生成器１１６へ送信する。
補足静止画情報生成器１１６は、記録対象の静止画と同時期に記録した動画とで相関性があり重複する画像データを、静止画の画像データから除いた補足静止画情報を生成し、補足静止画符号化器１１７へ送信する。この補足静止画情報の生成処理の詳細内容は後述する。
【００７６】
補足静止画符号化器１１７は受信した補足静止画情報に対して例えばＪＰＥＧを用いて圧縮符号化を行なう。
管理データメモリー１１２は、前述したTMG.ifoファイルを記憶し管理するメモリーである。このメモリーに送信された静止画のプログラムナンバー、この静止画とリンクする動画のプログラムナンバー及びピクチャータイムコードは、ＣＰＵ１１０からの制御指示に従って、以下のように処理される。
【００７７】
受信した静止画のプログラムナンバーと同じプログラムナンバーの静止画プログラム情報構造体がTMG.ifoファイル中に存在しない場合は、このプログラムナンバーの静止画プログラム情報構造体を新たに作成しTMG.ifoファイルに追加する。そしてこのプログラムナンバーを新たに作成した静止画プログラム情報構造体のPR＿numberフィールドにセットする。
【００７８】
この静止画とリンクする動画のプログラムナンバーは、上記で新たに作成した静止画プログラム情報構造体のLinked＿video＿programフィールドにセットする。この動画のプログラムナンバーは、現在記録中の動画に対応して既に作成されている表１に示す動画プログラム情報構造体のV＿PR＿IFOフィールドの中のPR＿numberと同じ値を記述する。つまり、記録中の動画の動画プログラム情報構造対のPR＿numberを、これから記録する静止画の静止画プログラム情報構造対のLinked＿video＿programに記述することで、現在記録中の動画とこれから記録する静止画との対応付け（リンク）がなされることになる。
【００７９】
ピクチャータイムコードは、Linked＿video＿entry＿timeフィールドにセットする。
ピクチャータイムコードとは、所謂タイムコードであり、ＭＰＥＧなどで用いられているＧＯＰ単位のＧＯＰヘッダーに記述されている時分秒フレーム数で表されるタイムコードを用いる。このタイムコードを、Linked＿video＿entry＿timeフィールドに記述することにより、現在記録中の動画プログラム中のピクチャーとこれから記録する静止画プログラムとの対応付け（リンク）がなされることになる。なお、このinked＿video＿entry＿timeフィールドに記述する情報は、動画プログラムの中のピクチャーを特定できる情報（動画ピクチャーの位置情報）であればタイムコードでなくて良い。例えば、記録されている動画プログラムの先頭からのフレーム数または先頭からのアドレス（バイト数）であっても良い。
【００８０】
多重化器１１７は、それぞれの符号化器で独立に符号化された動画符号化データ、静止画符号化データ、音声符号化データを、時分割多重化する。
ディスクフォーマット器１１９は、上記多重化された各符号化データに対して、上記したディスクフォーマットである動画ディレクトリ（V＿PR＿SET）中の動画ファイル（V＿PRn.dat）、音声ディレクトリ（A＿PR＿SET）中の音声ファイル（A＿PRn.dat）、静止画ディレクトリ（S＿PR＿SET）中の静止画ファイル（S＿PRn.jpg）に対応するようにフォーマット化する。
【００８１】
記録媒体書き込み器１１８は、管理データメモリー１１２で生成され、記憶されているTMG.ifoファイル、及びディスクフォーマット器１１９によってフォーマット化された動画ファイル（V＿PRn.dat）、音声ファイル（A＿PRn.dat）、静止画ファイル（S＿PRn.jpg）をＣＰＵ１１０からの制御信号に従って、記録媒体１２０に記録する。
［補足静止画情報生成処理]
次に補足静止画情報生成器１１６で行なう補足静止画情報生成処理について、図４を用いて詳細に説明する。
【００８２】
図４（１）は通常の動画を記録中に静止画を記録するときの概念説明図である。上部の５コマは連続して記録している動画である。矢印の方向（左から右へ）が時刻の経過方向である。中心のコマ(a)を記録している時刻とほとんど同時刻に静止画を記録したとすると、その静止画は(b)として撮像素子から取り込まれる。
【００８３】
＜第１実施例＞
上記のようにして取り込んだ図４（１）の動画（ａ）を用いて静止画（ｂ）の情報量を削減した補足静止画情報を生成する為の第１の実施例を、図４（２）を用いて以下に説明する。
【００８４】
第１の実施例は、動画（ａ）をインターレース方式による７２０ｘ２４０画素の１フィールドとし、同時刻に記録する静止画（ｂ）を７２０ｘ４８０画素のプログレッシブフレームとして記録する場合、つまりフレーム換算で同一画素サイズの動画と静止画を記録する場合の例である。
【００８５】
図４（２）において上側の３コマはインターレース方式で伝送される各フィールドの様子を示している。矢印の方向（左から右へ）が時刻の経過方向である。また、黒色の帯が画像を表示する為の走査線である。左端から偶数（even）フィールド、奇数（odd)フィールド、偶数（even）フィールドである。そして、これら偶数（even）フィールドと奇数（odd)フィールドとが交互に繰り返される。そして、１組の奇数（odd)フィールドと偶数（even）フィールドとで１枚の動画（フレーム）が完成する。
【００８６】
上記のようなインターレース方式で動画を記録中に、静止画を図４（２）の動画(a)の記録時刻付近で記録すると、この静止画の画像データと動画（ａ）の画像データとは極めて相関性が強くなる。
【００８７】
この動画（ａ）は７２０ｘ２４０画素の奇数フィールドである。
一方、静止画は７２０ｘ４８０画素のプログレッシブフレームである。つまり、この７２０ｘ４８０画素の静止画のうち上記動画で記録される奇数フィールドに相当する画素データ（７２０ｘ２４０画素）分は上記（ａ）の動画の画素データとほとんど同一であることがわかる。従って、このほとんど同一であり冗長な情報である動画の奇数フィールド分の画素データを間引いて（ｂ）に示すような偶数フィールドに相当する画素データを生成し、これを補足静止画情報とする。
【００８８】
そして再生時には、図４（２）下側に示すように、動画(a)と補足静止画情報（ｂ）とを加算することにより、基の７２０ｘ４８０画素のプログレッシブフレームの静止画（ｃ）を得ることができる。
【００８９】
この第１の実施例の場合は、補足静止画情報生成器１１６は、基の静止画の画素データから動画（ａ）の奇数フィールドに相当する画像データを間引けばよいので、動画局部復号器１１５から供給される復号データは使用しなくてもよい。この復号データは次に述べる第２の実施例で使用する。
【００９０】
＜第２実施例＞
次に第２の実施例を、図４（３）を用いて以下に説明する。
第２の実施例は、動画(a)を７２０ｘ４８０画素の１プログレッシブフレームとし、同時刻に記録する静止画(b)を１４４０ｘ９６０画素のプログレッシブフレームとして記録する例、つまり静止画の画素サイズが動画の画素サイズよりも大きい場合の例である。
【００９１】
図４（３）において上側の３コマはプログレッシブ方式で伝送される各フレームの様子を示している。矢印の方向（左から右へ）が時刻の経過方向である。
上記のようなプログレッシブ方式で動画を記録中に、静止画を図４（３）の動画(a)記録時刻付近で記録すると、の静止画の画像データと動画（ａ）の画像データとは極めて相関性が強くなる。
【００９２】
この動画（ａ）は７２０ｘ４８０の画素のプログレッシブフレームである。
一方、静止画は１４４０ｘ９６０画素のプログレッシブフレームである。つまり、この静止画は動画（ａ）の４倍の解像度を有する。しかしその画像内容は動画（ａ）とほとんど同一である。静止画の画像データと動画の画像データとの違いは、静止画と動画との解像度の差で発生する空間周波数的な高周波領域の画像データのみであり、低周波数領域及び中周波数領域の画像データは、動画が有する画像データとほとんど同一であり冗長な情報と考えることができる。
【００９３】
従って、静止画の画像データから冗長な情報である低周波数領域及び中周波数領域の画像データを差し引いた高周波成分のみの画像データを生成し、これを補足静止画情報とする。
【００９４】
そして再生時には、図４（３）下側に示すように、オーバーサンプリングした動画(ａ’)と補足静止画情報（ｂ）とを加算することにより、基の高精細な静止画（ｃ）を得ることができる。
【００９５】
なお、本実施例は光路分離器１０２を用いて２つの光路に分離して、動画と静止画とをそれぞれ独立して記録する例であるが、光路分離器１０２を用いて２つの光路に分離しなくても良い。解像度の十分に高い受光素子と、静止画記録と動画記録とを切り替えるスイッチ１０５と、動画記録時に解像度を低くする為の解像度変換器１０７とがあれば、本発明は１つの受光素子で実現できる。
[再生装置]
図３は本発明の情報再生装置の一実施例のブロック図である。本実施例の情報再生装置は、記録した動画及び情報量を削減した静止画を再生すると共に、情報量を削減した静止画から基の静止画を生成して、表示することを可能とするものである。
【００９６】
以下、この図３を用いて実施例を説明する。
ユーザーインターフェース（Ｕ／Ｉ）２０３は、利用者からの動画や静止画の再生指示をＣＰＵ２０４へ送信する。
【００９７】
ＣＰＵ２０４は、ユーザーインターフェース（Ｕ／Ｉ）２０３から動画や静止画の再生指示をうけたならば、記録媒体読み出し器２０２へ動画又は静止画の再生開始指示の制御信号を出力する。
【００９８】
記録媒体読み出し器２０２は、ＣＰＵ２０４から再生開始指示の制御信号を受けたならば、記録媒体２０１に記録されている動画ファイル（V＿PRn.dat）、静止画ファイル（S＿PRn.jpg）、音声（A＿PRn.dat）の多重化データと、管理データであるTMG.ifoファイルを読み出す。そして読み出したTMG.ifoファイルを管理データメモリー２０６に記録する。また動画ファイル（V＿PRn.dat）、静止画ファイル（S＿PRn.jpg）、音声（A＿PRn.dat）の多重化データをディスクフォーマットデコーダー器２０５に入力する。
【００９９】
ディスクフォーマットデコーダー器２０５は、先に説明したディスクフォーマットで記録されている動画ファイル（V＿PRn.dat）、静止画ファイル（S＿PRn.jpg）、音声ファイル（A＿PRn.dat）をそれぞれフォーマットデコードして多重化分離器２０７へ出力する。
【０１００】
多重化分離器２０７は、フォーマットデコードされた多重化データから、動画、静止画、音声の各符号化データを分離する。
音声復号化器２０９は、分離された音声符号化データを復号する。
【０１０１】
補足静止画復号化器２１０は、分離された補足静止画符号化データを復号する。
動画復号化器２１１は、分離された動画符号化データを復号する。
静止画像構成器２１２は、補足静止画復号化器２１０で復号し生成された補足静止画情報と、動画復号化器２１１で復号された再生する静止画と同時期に記録されている動画の画像データとを用いて基の静止画を構成する。
【０１０２】
管理データメモリー２０６は、先に述べたTNG.ifoファイルを 管理、記録しておくブロックである。TNG.ifoには静止画像構成器２１２で基の静止画を構成する際に用いる動画のピクチャーを特定するリンク情報が記述されている。詳細は後述する。
【０１０３】
ランダムアクセス制御器２０８は、ＣＰＵ２０４から制御され、動画のサーチを行なう。通常の動画再生時のサーチに加えて、静止画再生時の基の静止画を構成するために用いられる動画のピクチャーのサーチも行なう。
【０１０４】
画像出力器２１４は、復号した動画信号および静止画信号を図示していないモニターなどへ出力する。
音声復号器２１０は、復号した音声信号を図示していないスピーカなどに出力する。
【０１０５】
以下に、補足静止画情報から静止画を構成する処理の詳細内容を説明する。
利用者よりユーザーインターフェース（Ｕ／Ｉ）２０３を介してＣＰＵ２０４へひとつの静止画の再生指示がなされたならば、ＣＰＵ２０４は管理データメモリー２０６のTMG.ifoファイルから、この静止画とリンクしている動画のピクチャーの情報を取得する。具体的には表３に示す対象の静止画のプログラムナンバーの静止画プログラム構造体のlinked＿video＿program＿numberとlinked＿video＿entry＿timeとの情報である。この２つの情報をランダムアクセス制御器２０８に伝送する。
【０１０６】
ランダムアクセス制御器２０８では、linked＿video＿program＿numberを用いて、サーチする対象の動画プログラムを特定し、linked＿video＿entry＿timeを用いて、動画プログラムのなかのピクチャーを特定する。そして、このピクチャーへのサーチ制御信号を記録媒体読み出し器２０２に送信する。
【０１０７】
記録媒体読み出し器２０２は、サーチ制御信号により指定される動画のピクチャーを読み出し、ディスクフォーマットデコーダー器２０５、多重分離器２０７、動画複号器２１１を介して、復号した動画のピクチャーデータを静止画像構成器２１２に送信する。
【０１０８】
静止画像構成器２１２では、補足静止画情報と、上記で送信される復号した動画のピクチャーデータとを用いて基の静止画を構成する。
上記に用いる動画のピクチャーデータは、例えば先に説明した第１実施例の場合には、の図４（２）（ａ）の画像（７２０ｘ２４０画素の奇数フィールド）である。また、補足静止画情報は（ｂ）の画像（７２０ｘ２４０画素の偶数フィールド）である。従って、静止画像構成器２１２では、この２つのフィールド画像をマージすることで、基の静止画（ｃ）（７２０ｘ４８０画素のプログレッシブフレーム）を構成できる。このとき用いる
また第２の実施例の場合は、動画のピクチャーデータは図４（３）（ａ）の画像（７２０ｘ４８０画素のプログレッシブフレーム）である。また、補足静止画情報は（ｂ）の画像（１４４０ｘ９６０画素のプログレッシブフレーム）である。従って、静止画像構成器２１２では、この２つの画像をマージすることで、基の静止画（ｃ）（１４４０ｘ９６０画素のプログレッシブフレーム）を構成できる。
【０１０９】
上記した第１の実施例、及び第２の実施例は一つの再生装置で共に実現が可能である。表３に示す再生対象の静止画のプログラムナンバーの静止画プログラム構造体のsupplement＿info、Horizontal＿video＿rezolution、Vertical＿video＿rezolutionの情報を用いる。対象静止画再生時にこの情報を参照し、supplement＿infoがodd field(０１）又はeven Field(１０）の場合は第１の実施例と判断でき、over sample（１１）の場合は第２の実施例と判断できる。また第２の実施例の場合は、更に自身の水平及び垂直画素数であるHorizontal＿video＿rezolution、Vertical＿video＿rezolutionを参照して、TV＿systemの放送方式で決まる動画の画素数との比率を算出すればオーバーサンプルする倍率を決定できる。
【０１１０】
[記録手順］
次に、本実施例の記録装置における記録手順について、図６のフローチャートを用いて説明する。
【０１１１】
ステップ６０１：記録処理スタート
ステップ６０２：動画、音声の記録を開始する。
ステップ６０３：静止画を記録するかを否か判断する。の判断は、例えば利用者による静止画記録ボタンの押下などの操作結果によって行う。
【０１１２】
操作結果が、静止画を記録する（ＹＥＳ）であった場合はステップ６０４へ処理を移行する。操作結果が記録しない（ＮＯ）、または操作が無かった場合には、ステップ６０８へ処理を移行する。
【０１１３】
ステップ６０４：静止画データを撮像素子から取り込む。
ステップ６０５：補足静止画情報を生成する。
ステップ６０６：補足静止画情報の記録を行う。
【０１１４】
ステップ６０７：静止画記録開始信号を出力する。
ステップ６０８：動画または補足静止画情報の符号化を行う。動画は、ＭＰＥＧ２圧縮符号化を行う。補足静止画情報はＪＰＥＧ圧縮符号化を行う。音声は動画とともにドルビーＡＣ３やＭＰＥＧ音声符号化などの圧縮符号化を行う。
【０１１５】
ステップ６０９：符号化された動画、補足静止画情報、音声の各符号化データをそれぞれパック化して、パックヘッダーやタイムスタンプなどを付加して多重化を行う。
ステップ６１０：多重化されたデータのうちの動画データのピクチャー毎のユーザーデータ領域に、静止画のプログラムナンバーを記録する。この静止画のプログラムナンバーとは、表３の静止画プログラム情報構造体に記述されるPR＿numberである。
【０１１６】
ステップ６１１：多重化されたデータを、図１５のフォーマットにしたがってフォーマット化し、バッファリングする。バッファにある程度のデータ量が蓄積されたら、記録媒体に記録する。
【０１１７】
ステップ６１２：記録が全部終了したかどうかを判定する。
終了（ＹＥＳ）であればステップ６１３に処理を移行し、終了でない（ＮＯ）であればステップ６０２へ戻る。
【０１１８】
ステップ６１３：記録結果に基づいて、管理データであるTMG.ifoファイルを記録媒体に記録する。
ステップ６１４：記録処理エンド
[再生手順］
次に、本実施例の再生装置における再生手順について、図８のフローチャートを用いて説明する。
【０１１９】
ステップ８０１：再生処理スタート
ステップ８０２：記録媒体から管理データであるTMG.ifoファイルを読み取り、管理データメモリー１１２に記録する。
【０１２０】
ステップ８０３：動画再生か、静止画再生かを選択する。動画再生の場合にはステップ８０５に処理を移行する。静止画再生の場合は、ステップ８０４に処理を移行する。
ステップ８０４：補足静止画情報を再生する。ステップ８０６に処理を移行する。
【０１２１】
ステップ８０６：補足静止画毎のLinked＿video＿programとLinked＿video＿entry＿timeとを読み出す。
ステップ８０７：補足静止画に対応した動画のピクチャーを再生する。
【０１２２】
ステップ８０８：補足静止画情報の再生画像と対応する動画のピクチャー（再生画像）とで画像のマージを行う。
ステップ８０９：マージした静止画を表示する。
【０１２３】
ステップ８１０：静止画再生を継続するか終了するかを判定する。
終了しない（ＮＯ）の場合にはステップ８０４に処理を戻す。終了する場合（ＹＥＳ）にはステップ８１３に処理を移行する。
【０１２４】
ステップ８０５：動画の再生を行なう。ステップ８１１に処理を移行する。
ステップ８１１：動画データの表示を行う。
ステップ８１２：動画再生を継続するか終了するを判定する。
【０１２５】
終了（Ｙ）の場合にはステップ８１３に処理を移行する。終了でない（ＮＯ）場合にはステップ８０５処理を戻す。
ステップ８１３：再生処理エンド。
【０１２６】
なお、本実施例では、記録媒体を特定していないが、ランダムアクセスできる記録媒体、例えばハードディスクや光ディスクなどであればどんな記録媒体であっても良い。
また、記録媒体にデータを記録しなくても、通信、放送などあらゆる伝送媒体を経由してデータを送信することが可能で、その場合には、記録装置は伝送装置として使用することもできる。また再生装置は受信装置として使用することも可能である。
【０１２７】
また、本実施例の信号データを記録した記録媒体は、図１５、図１６、表１、表２、表３、表４、表６に示したフォーマット構造のデータが記録されていて、さらに、静止画は対応する動画ピクチャーのもつ情報を補う補足静止画情報として記録媒体に圧縮記録されているので、前記静止画信号に対応した前記動画像のピクチャーにエントリーする場合に、その前記補足静止画情報と動画情報から、静止画像を構成し再生することができるという記録媒体特有の機能を持ち、従来の方法で記録する動画像の情報量と、静止画像の情報量を加算した値の情報量よりも、情報量が減らすことができ、記録媒体の効率的なシステムを好適に実現することができる。
【０１２８】
また、記録媒体は、媒体という定義はデータを記録できる媒体という、狭義な媒体というものだけでなく、信号データを伝送するための電磁波、光などを含む。また、記録媒体に記録されている情報は、記録されていない状態での、電子ファイルなどのデータ自身を含むものとする。
【０１２９】
また、本発明は上記した情報記録装置及び情報再生装置の機能をコンピュータに実現させるためのプログラムを含むものである。これらのプログラムは、記録媒体から読み取られてコンピュータに取り込まれてもよいし、通信ネットワークを介して伝送されてコンピュータに取り込まれてもよい。
【０１３０】
【表１】
【０１３１】
【表２】
【０１３２】
【表３】
【０１３３】
【表４】
【０１３４】
【表５】
【０１３５】
【表６】
【０１３６】
【表７】
【図面の簡単な説明】
【０１３７】
【図１】本発明の第１実施例の好適な記録装置を示すブロック図である。
【図２】本発明の実施例のＭＰＥＧのユーザーデータ中に記録するデータ構造の説明図である。
【図３】本発明の実施例の好適な再生装置を示すブロック図である。
【図４】本発明の実施例の補足静止画の構成例の説明図である。
【図５】本発明の実施例の好適な記録装置の光学系部分を示す構成図である。
【図６】本発明の実施例の好適な記録方法を示すフローチャート図である。
【図７】本発明の第２実施例の好適な記録装置を示すブロック図である。
【図８】本発明の実施例の好適な再生方法を示すフローチャート図である。
【図９】従来技術におけるＭＰＥＧ規格のデータパック構造を示す説明図である。
【図１０】従来技術におけるMPEG符号化器のブロック図である。
【図１１】従来技術におけるMPEG復号化器のブロック図である。
【図１２】従来技術におけるディレクトリ、ファイル構造例の説明図である。
【図１３】従来技術におけるオリジナルPGCの構造を示す説明図である。
【図１４】従来技術におけるユーザー定義PGCの構造を示す説明図である。
【図１５】本発明の実施例のディレクトリ、ファイル構造の例を示す図である。
【図１６】本発明の実施例のTMG.ifoのデータ構造例を示す図である。
【符号の説明】
【０１３８】
１０１ レンズ
１０２ 光路分離機
１０３ オーディオ入力器
１０４ 受光素子
１０５ 受光素子
１０６ Ａ／Ｄ変換器
１０７ Ａ／Ｄ変換器
１０８ Ａ／Ｄ変換器
１０９ Ｕ／Ｉ
１１０ ＣＰＵ
１１１ 静止画撮像タイミング信号生成器
１１２ 管理データメモリ
１１３ 音声符号化器
１１４ 動画符号化器
１１５ 動画局部複合器
１１６ 補足静止画情報生成器
１１７ 補足静止画符号化器
１１８ 多重化器
１１９ ディスクフォーマット器
１２０ 記録媒体書き込み器
１２１ 記録媒体
【技術分野】
【０００１】
本発明は、情報記録装置、情報再生装置、情報記録プログラムおよび情報再生プログラムに係り、特に動画と静止画とを共に記録及び再生する際に、記録する静止画の画像データの一部を、同時期に記録する動画の画像データを用いて補間することにより、静止画の記録に要するデータ容量を削減することが可能な情報記録装置、情報再生装置、情報記録プログラムおよび情報再生プログラムに関するものである。
【背景技術】
【０００２】
動画と静止画を共に記録し、また再生することが可能な情報記録再生装置が存在する
例えば、特許文献１には、広角レンズによる撮像信号と、ズームレンズによる撮像信号とを、同一の記録媒体に同時記録して、２種類の映像を２つの光学系にて記録する技術が開示されている。
【０００３】
また、特許文献２には、入射光をプリズム分岐させて動画撮影用ＣＣＤと静止画撮影用ＣＣＤに受光させ、１つの光学系で、２つのＣＣＤを用いて、動画像はＭＰＥＧ圧縮されて記録し、静止画はＪＰＥＧ圧縮してメモリカードに同時に記録される技術が開示されている。
【０００４】
特許文献３には、対物光学系の光路を二つに分離するハーフミラーの二つの分離光路を用いて、異なる画素位置のデータからなる画像信号を形成するように配置された２つのＣＣＤから、設定された画素以外の欠落画素を周囲の画素信号から演算し、高解像度の画像を生成する技術が開示されている。
【０００５】
特許文献４には記録媒体の破損や、通信の障害などにより、入力符号化データにエラーや、符号化データ自体の供給不足が生じ、正常な復号動作を行えない場合においても、タイマーを設け、もしも、ＣＰＵからの制御がタイマーに対して適切なタイミングできなかった場合、表示部のセレクタは、自動的に静止画画像生成部の出力を選択するように切り替わるようにして、高品位の静止画が出力されるようにする技術が開示されている。
＜MPEG＞
次に、上記した記録再生装置で使用されているMPEGについて説明する。
【０００６】
MPEGは1988年、ISO/IEC JTC1/SC2（国際標準化機構/国際電気標準化会合同技術委員会1/専門部会2、現在のSC29）に設立された動画像符号化標準を検討する組織の名称（Moving Pictures Expert Group）の略称である。MPEG1（MPEGフェーズ1）は1.5Mbps程度の蓄積メディアを対象とした標準で、静止画符号化を目的としたJPEGと、ISDNのテレビ会議やテレビ電話の低転送レート用の動画像圧縮を目的としたH.261（CCITT SGXV、現在のITU-T SG15で標準化）の基本的な技術を受け継ぎ、蓄積メディア用に新しい技術を導入したものである。これらは1993年8月、ISO/IEC 11172 として成立している。
【０００７】
MPEG2（MPEGフェーズ2）は通信や放送などの多様なアプリケーションに対応できるように汎用標準を目的として、1994年11月ISO/IEC 13818、H.262として成立している。
MPEGは幾つかの技術の組み合わせで実現される。
【０００８】
入力画像は動き補償器で復号化した画像と、入力画像の差分を取ることで時間冗長部分を削減する。予測の方向は、過去、未来、両方からの３モード存在する。またこれらは16画素×16画素のMB（マクロブロック）ごとに切り替えて使用できる。予測方向は入力画像に与えられたピクチャータイプによって決定される。過去からの予測と、予測をしないでそのMBを独立で符号化する２モード存在するのがPピクチャーである。また未来からの予測、過去からの予測、両方からの予測、独立で符号化する４モード存在するのがBピクチャーである。そして全てのMBが独立で符号化するのがIピクチャーである。動き補償は、動き領域をMBごとにパターンマッチングを行ってハーフペル精度で動きベクトルを検出し、動き分だけシフトしてから予測する。動きベクトルは水平方向と垂直方向が存在し、何処からの予測かを示すMC(Motion Compensation)モードとともにMBの付加情報として伝送される。Iピクチャーから次のIピクチャーの前のピクチャーまでをGOP(Group Of Picture)といい、蓄積メディアなどで使用される場合には、一般に約１５ピクチャー程度が使用される。
【０００９】
差分画像はDCT器において直交変換が行われる。DCT（Discrete Cosine Transform)とは 余弦関数を積分核とした積分変換を有限空間への離散変換する直交変換である。MPEGではMBを４分割し8×8のDCTブロックに対して、２次元DCTを行う。一般にビデオ信号は低域成分が多く高域成分が少ないため、DCTを行うと係数が低域に集中する。
【００１０】
DCTされた画像データ（DCT係数）は量子化器で量子化が行われる。量子化は量子化マトリックスという8×8の２次元周波数を視覚特性で重み付けした値と、その全体をスカラー倍する量子化スケールという値で乗算した値を量子化値として、DCT係数をその量子化値で除算する。デコーダーで逆量子化するときは量子化値で乗算することにより、元のDCT係数に近似している値を得ることになる。
【００１１】
量子化されたデータはVLC器で可変長符号化される。量子化された値のうち直流（DC）成分は予測符号化のひとつであるDPCM（differential pulse code modulation )を使用する。また交流（AC）成分は 低域から高域にzigzag scanを行い、ゼロのラン長および有効係数値を１つの事象とし、出現確率の高いものから符号長の短い符号を割り当てていくハフマン符号化が行われる。
【００１２】
可変長符号化されたデータは一時バッファに蓄えられ、所定の転送レートで符号化データとして出力される。また、その出力されるデータのマクロブロック毎の発生符号量は、符号量制御器に送信され、目標符号量に対する発生符号量との誤差符号量を量子化器にフィードバックして量子化スケールを調整することで符号量制御される。量子化された画像データは逆量子化器にて逆量子化、逆DCT器にて逆DCTされ一時、画像メモリーに蓄えられたのち、動き補償予測器において、差分画像を計算するためのリファレンスの復号化画像として使用される。これら全体の符号化構成例を図１０に示す。
【００１３】
符号化されたストリームはバッファリングされ、バッファからのデータはVLD器に入力される。VLD器では可変長復号化され、直流（DC）成分および交流（AC）成分を得る。交流（AC）成分データは低域から高域にzigzag scanの順で8ｘ8のマトリックスに配置する。このデータは逆量子化器に入力され、量子化マトリックスにて逆量子化される。逆量子化されたデータは逆DCT器に入力され、逆DCTされ一時、画像データ（復号化データ）として出力される。また、復号化データは一時、画像メモリーに蓄えられたのち、動き補償予測器において、差分画像を計算するためのリファレンスの復号化画像として使用される。復号化構成例を図１１に示す。
＜ディスクフォーマットの一般的データ構造＞
次に、CD等の従来のディスク媒体と比較して、数倍から十数倍の記憶容量を有する近年開発された次世代のディスク媒体におけるディスクフォーマットの一般的なデータ構造について説明する。
【００１４】
次世代のディスク媒体としては、DVD-ROMディスク（DVD Specifications for Read-Only Discに準拠した読み出し専用光ディスク）、DVD-RWディスク（DVD Specifications for Re-recordable Discに準拠した再記録可能なディスク）DVD-RAMディスク（DVD Specifications for Rewritable Discに準拠した再書き込み可能なディスク）などがある。
【００１５】
DVD-RWまたはDVD-RAMディスク上に画像データを収録する規格も策定されており、その大容量を活かして高画質な動画及び静止画を記録し、様々な編集を経て再生する手法が提供される。
【００１６】
DVD-RWまたはDVD-RAMディスク上（以下、DVD-RW/RAMディスクと略す）に動画データを収録する規格であるVIDEO RECORDING規格（以下DVD-VRと略す）では、動画データはVOB（Video Object）単位に記録される。VOBとは連続する動画を任意の範囲毎に区別するための単位である。
【００１７】
そして、この記録された各VOBの再生には、そのVOB群の各VOBの再生順序を記述した管理データであるPGC （Program Chain）が用いられる。再生装置は再生時にこのPGCを参照して、記述されている順序でVOBを再生する。
【００１８】
このPGCのうち、ディスクに記録されている全てのVOBを、各VOBを記録した時の順序で全て再生するための順序が記述されているPGCはオリジナルPGC と定義されている。
また、全VOBのうち利用者が任意に選択し順序を設定した内容を記述したPGCはユーザー定義PGC （User Defined PGC）と定義されている。
【００１９】
１枚のディスク上に、オリジナルPGCはただ一つ存在し、ユーザー定義PGCは複数存在しうる。 従って、１枚のディスクに対して利用者が複数いても、その各利用者に対応したそれぞれ別々のユーザー定義PGCを作成し、編集することが可能である。また一人の利用者が好みに応じて複数のユーザー定義PGCを作成し、編集することも可能である。
［ディレクトリ構造］
"DVD Specifications for Rewritable/Re-recordable Discs、 Part3 VIDEO RECORDING、 Version 1.0"で示されるように、DVD-VRでは、DVD-RW/RAM上におけるディレクトリ構造が定義されている。図１２にそのディレクトリ構造図を示す。
【００２０】
ルートディレクトリ下にDVD＿RTAVディレクトリがある。
そのDVD＿RTAVディレクトリの下のVR＿MANGER.IFOファイルは、全ての記録再生管理データを収録するためのファイルであり、オリジナルPGC、ユーザー定義PGCなどが記述される。VR＿MOVIE.VROファイルには、動画データの本体が記録される。VR＿STILL.VROファイルには、静止画データの本体が記録される。VR＿AUDIO.VROファイルには、音声データの本体が記録される。
【００２１】
このように、実際の動画データ（VR＿MOVIE.VRO）、静止画データ（VR＿STILL.VRO）、音声データ（VR＿AUDIO.VRO）等の実データと、記録再生管理データとを分離して記録する構造とすることで、実際の動画、静止画、音声の各データを変更することなく、ユーザー定義PGCによって任意の再生順序を設定することが出来る。なお、VR＿STILL.VRO中の各静止画は、MPEG Video規格に準拠したMPEGイントラ画像として記録される。
［オリジナルPGC］
図１３はオリジナルPGCの構造概念図である。
【００２２】
DVD-VRディスクに、複数の動画データを記録する場合、その記録された各動画データを参照するためのプログラム（Program）がオリジナルPGC内に記述される。そして、その記述された各プログラムで参照される動画データを、更に１つまたは複数に分けるためのセル（Cell）が上記したプログラムと対応付けられて記述される。一般的には、記録の途中でポーズした場合や、記録後に番組の途中部分を編集で削除した場合などに、プログラムはその途切れ部分を境とする複数のセルに分割された構成をとる。各セルはそれぞれ対応する各VOBを参照している。このプログラムおよびセルがオリジナルPGCの記録再生管理データである。
【００２３】
VOBは、上記セルで参照される動画データそのものであり、MPEG-2システムに準拠したプログラムストリームとして記録されている。
図１３において、ディスクに最初に記録された動画データはVOB1であり、これを参照するプログラム及びセルがProgram1、Cell1としてオリジナルPGC内に記述される。以下、VOBが追加記録されていくたびに、その各VOBを参照するプログラムがProgram2、 Program 3、 ...、セルがCell2、Cell3、...というように追加記述されていく。なおVOBは、上記したとおり1つのプログラムの中で記録ポーズなどの区切りが発生した場合は複数に分かれるので、そのVOBを参照するセルも１つのプログラム内で複数記述されることになる。図１３は、Program2がCell2、Cell3に分かれている例である。
【００２４】
このオリジナルPGCを用いると、オリジナルPGC内に記述されているプログラムまたはセル（つまりディスクに記録されている全てのプログラムまたはセル）に対応した全VOBを記述順、つまり記録順に再生することが可能となる。また、オリジナルPGC上の特定のプログラムを利用者に指定させて、その指定させたプログラムが参照するVOBのみ再生することも可能である。
［ユーザー定義PGC］
図１４はユーザー定義PGCの構造概念図である。
【００２５】
オリジナルPGCで参照されている各VOBは、その全部または一部をユーザー定義PGCでも参照可能である。ユーザー定義PGCで用いられるセルは、オリジナルPGCと異なり、VOBと１対１に対応しなくてもよく、一つのVOBの中の一部分のみを参照したり、二つのVOBにまたがって参照したりすることが可能である。例えば、VOB内のコマーシャルの部分や不要場面の部分を除いた必要場面の部分のみを参照したり、２つ以上の番組（Program）の一部分を繋いで再生したりする用途等に適している。
【００２６】
また、ユーザー定義PGC中にはプログラムの階層は存在しない。つまり、ひとつのユーザー定義PGCが、オリジナルPGCで言う１つのプログラムに相当する。
［PGCI］
表５は、オリジナルPGC及びユーザー定義PGCに記述される情報（PGCI）の具体的定義内容を示す表である。PGCIは以下の情報からなる。
・PGC＿GI：PGCの一般情報。
・PGI：各プログラムナンバーのPGI。
【００２７】
（オリジナルPGCの場合のみ定義する。ユーザー定義PGCでは定義しない。）
・CI＿SRP ：PGC中の各セル情報の検索ポインタ。
・M＿CI：動画セルの場合の各セル情報。
【００２８】
（静止画セルの場合はS＿CIと置き換える。）
次に、上記各要素の詳細内容を説明する。
PGC＿GIには、PGC内のプログラム数が記述されるPG＿Ns、及びCI＿SRPの数が記述されるCI＿SRP＿Nsが定義される。ユーザー定義PGCの場合は上記したようにプログラムの階層を持たないのでPG＿Nsはゼロである。
【００２９】
PGIは、PG＿Nsに記述される個数分存在し、それぞれに付加されるナンバーｉ（iは整数）で区別する。PGI内には、プログラム中のセル数が記述されるC＿Ns、プログラムに関するテキスト情報を記述するプライマリテキスト情報が記述されるPRM＿TXTI、プログラムに関連するアイテムテキスト情報（PGCIではなく、VR＿MANGR.IFO内の別のデータ構造として別途収録されている）の検索ポインタ番号が記述されるIT＿TXT＿SRPN、プログラムを代表する静止画像の位置を指定する代表静止画情報が記述されるEP＿PICTI等が定義される。
【００３０】
CI＿SRPは、CI＿SRP＿Nsに記述されるプログラムの個数分存在し、それぞれに付加されるナンバーｊ（ｊは整数）で区別する。各CI＿SRP内にはセル情報M＿CI（静止画の場合はS＿CI）の先頭アドレスが記述されるCI＿SAが定義される。
【００３１】
M＿CIには、セルの一般情報を記述するM＿C＿GIと０個以上のセルエントリーポイント情報が記述されるM＿C＿EPIが定義される。M＿CIはC＿Nsに記述されるセルの個数分存在し、それぞれに付加されるナンバーｊ（ｊは整数）で区別する。
【００３２】
M＿C＿GI内には、セルのタイプが記述されるC＿TY、セルエントリーポイント数が記述されるC＿EPI＿Ns等が定義される。
M＿C＿EPI内には、エントリーポイントのタイプが記述されるEP＿TY（AとB、AはPRM＿TXTIなし、BはPRM＿TXTIあり）、エントリーポイントの再生時刻が記述されるEP＿PTM、及びエントリーポイントに関するプライマリテキスト情報が既出されるPRM＿TXTIが定義される。M＿C＿EPIはC＿EPI＿Nsに記述されるエントリーポイントの個数分存在し、それぞれに付加されるナンバーｋ（ｋは整数）で区別する。
【００３３】
ここで、エントリーポイントとはセル内の任意の時刻を指定し、プログラムやセルの任意の中間地点へのアクセスを可能にする情報である。図１３および図１４中に、セル内に指定されるエントリーポイントの例（EPと示される矢印）を示す。
【００３４】
なお、静止画のセルを再生する場合には、M＿CIの代わりにS＿CIが用いられる。（S＿CIの内容はここでは省略する。） 従って、オリジナルPGC上に動画と静止画を記録する場合はセル毎に混在することになる。ユーザー定義PGC上も、セル毎に動画用セルと静止画用セルを混在させることが出来る。
【特許文献１】特開平５−２９２４４５
【特許文献２】特開２００４−７２１４８
【特許文献３】特開平１１−７６１５９
【特許文献４】特開平２００２−１５２７４３
【発明の開示】
【発明が解決しようとする課題】
【００３５】
上記した特許文献１〜４に記載の動画と静止画とを共に記録再生可能な従来の情報記録再生装置においては、動画と静止画とを互いに独立して記録及び再生を行なっている。
しかしながら、同一被写体に対して動画及び静止画を記録する場合、その動画と静止画には互いに相関がある。この相関性を利用すれば動画及び静止画の互いの記録再生に必要な情報量の削減が可能となるが、従来の方法ではこの相関性を利用していないので情報量を削減できず効率的な圧縮記録及び伸長再生をすることが出来ないという課題があった。
【課題を解決するための手段】
【００３６】
そこで、上記課題を解決するために本発明は、以下の装置およびプログラムを提供するものである。
（１）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する動画生成手段と(107)、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する補足静止画生成手段と(116)、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と(114、117〜120）、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と(111、112)、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と(112、118、120)、
を有することを特徴とする情報記録装置。
（２）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する動画生成手段と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する補足静止画生成手段と、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と、
を有することを特徴とする情報記録装置。
（３）上記（１）に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と(210)、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを再生する第２の再生手段と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する静止画生成手段と(212)、
を有することを特徴とする情報再生装置。
（４）上記（２）に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と(210)、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを再生する第２の再生手段と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する静止画生成手段と(212)、
を有することを特徴とする情報再生装置。
（５）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する機能と(107)、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する機能と(116)、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と(114、117〜120）、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と(111、112)、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と(112、118、120)、
をコンピュータに実行させる情報記録プログラム。
（６）連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する機能と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する機能と、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と、
をコンピュータに実行させる情報記録プログラム。
（７）上記（５）に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と(210)、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを前記第２の再生手段を用いて再生させる機能と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する機能と(212)、
をコンピュータに実行させる情報記録プログラム。
（８）上記（６）に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と(210)、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを前記第２の再生手段を用いて再生させる機能と（208,211)、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する機能と(212)、
をコンピュータに実行させる情報記録プログラム。
【発明の効果】
【００３７】
本発明によれば、静止画の記録時に、この静止画を記録した時期と同時期に記録した動画のフィールド又はフレームの情報を、記録する静止画の補間情報として用いるので、従来の方法のように動画と静止画とを独立に記録する場合に比較して、静止画の記録のための情報量を減らすことができ、記録媒体の効率的な使用が可能となる。
【００３８】
請求項１に記載の発明によれば、インターレースで記録する動画の偶数又は奇数フィールドの画像データを、同時期に記録する静止画の補間情報に用いる。従って、記録媒体に記録する静止画用の画像データは、この動画の偶数又は奇数フィールドの画像とペアとなるべき奇数又は偶数フィールドに相当する静止画補間画像データのみでよい。
【００３９】
そして再生時には、この静止画補間画像データと、前述のペアとなるべき動画の偶数または奇数フィールドの画像データとを組み合わせれば、高精細なプログレッシブ静止画像を生成でき、表示することが可能となる。
【００４０】
従って上記によれば、静止画として記録媒体に記録する必要のある情報量を、従来例と比較して半減させることが可能となる。
また請求項２に記載の発明によれば、記録する静止画像の画素数より少ない画素数で記録する動画を、静止画の画素数相当となるようにオーバーサンプリングする。そして、撮像素子から取り込んだ静止画像データと、このオーバーサンプリングして同一画素数相当となった動画像データとの各画素毎の差分を取り、残差画像データを生成する。この残差画像データを静止画補間画像データとして記録媒体に記録する。
【００４１】
そして再生時には、この静止画補間画像データと、記録時にこの静止画補間画像データとの差分をとったオーバーサンプルした動画の画像データとを各画素毎に加算すれば基の高精細な静止画を生成でき、表示することが可能となる。
【００４２】
従って上記によれば、静止画として記録媒体に記録する必要のある情報量を、従来例と比較して、静止画像の低域から中域に相当する空間周波数帯域の情報量を削減させることが可能となる。
【発明を実施するための最良の形態】
【００４３】
図１は本発明の情報記録装置の一実施例のブロック図である。本実施例の情報記録装置は、動画の記録中でもその記録を中断することなく、情報量を削減した静止画を記録することを可能とするものである。詳細内容は後述する。
【００４４】
図３は本発明の情報再生装置の一実施例のブロック図である。本実施例の情報再生装置は、記録した動画及び情報量を削減した静止画を再生すると共に、情報量を削減した静止画から基の静止画を生成して、表示することを可能とするものである。詳細内容は後述する。
＜ディスクフォーマットのデータ構造＞
まず、上記情報記録装置及び情報再生装置の実施例で使用する、ディスクフォーマットのデータ構造について説明する。これは従来例で説明した、一般的なディスクフォーマットのデータ構造を、本実施例の情報記録装置及び情報再生装置用にカスタマイズしたものである。
【００４５】
図１５は本実施例で使用するディスクフォーマットのデータ構造の例である。なお、ディレクトリ名やファイル名は本実施例を説明する目的で使用しており、これ以外の名称でも構わない。図示していないルートディレクトリの下にJVC＿HDVD＿SYSTEMディレクトリがあり、その下に、本実施例に関わる全ての管理データ、音声データ、動画データ、静止画データがファイルとして保存される。これは、従来例で説明した図１２のDVD＿RTAVディレクトリ以降に対応する。つまり、JVC＿HDVD＿SYSTEMが図１２のDVD＿RTAVに対応する。
［動画ファイル］
V＿PR＿SETは、記録されている各VOBをグループ化する為のディレクトリであり、このディレクトリ中に各VOBがV＿PRn.dat （ここで、nは1から開始されるプログラム番号）ファイルとしてそれぞれ記録される。各VOBはMPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。上記V＿PRn.datファイルは、従来例で説明した図１２のVR＿MOVIE.VROファイルに対応する。
［音声ファイル］
A＿PR＿SETは、音声の各プログラムをグループ化する為のディレクトリでありディレクトリ中に上記VOBと同様の各オーディオオブジェクト(AOB)がA＿PRn.dat （ここで、nは1から開始されるプログラム番号）ファイルとしてそれぞれ記録される。各AOBはMPEG-2システム規格のプログラムストリームまたは、トランスポートストリームとして記録される。上記A＿PRn.datファイルは、従来例で説明した図１２のVR＿AUDIO.VROファイルに対応する。
［Pack］
VOB及びAOBを記録する場合、図９のように、MPEG多重化規格のフォーマットに従い、パック化が施される。VOB及びAOBは複数の所定バイト数（１パック内にセット可能なバイト数）毎に分割され、それぞれ図９のAudio or Video data部にセットされる。
【００４６】
なお、ひとつのPackはPack Header部とPacket部に分かれており、更にPacket部はPacket Header部と、分割されたVOB又はAOBがセットされるAudio or Video data部とに分かれている。なおPacket Header部の直後には、必要に応じてPrivate Headerが付加される場合がある。
［静止画ファイル］
S＿PR＿SETは、記録されている静止画の各ファイルをグループ化する為のディレクトリであり、このディレクトリ中に静止画の各ファイルがS＿PRn.jpg （ここで、nは1から開始されるプログラム番号）ファイルとして記録されている。なお、各静止画ファイルはJPEGファイルとして記録される。上記S＿PRn.jpgは、従来例で説明した図１２のVR＿STILL.VROファイルに対応する。
【００４７】
なお、図１５では動画、音声、静止画のプログラムに関するファイル群をそれぞれ異なるディレクトリ下に記録する例を示したが、３種全てのファイル群を同一ディレクトリ、例えばAVS＿PR＿SETなどの下に記録するようにしても、本発明の趣旨と相違しない。 さらには、動画のプログラムをそれぞれ一つのファイルV＿PRn.datとして記録する例、及び音声のプログラムをそれぞれ一つのファイルA＿PRn.datとして記録する例を示したが、全てのビデオプログラムを同一のファイル、例えばV＿PR.dat内に連続して記録し、V＿PR.dat内のどの部分がどのプログラムデータに相当するかを別途の情報として保持するようにしても良い。A＿PR.datについても同様である。
［TMG.ifo］
TMG.ifo（Total Manager Information）は、オリジナル管理データ及びユーザー定義管理データ（以下、プレイリストとも呼ぶ）を記録する為のファイルである。このTMG.ifoファイルは、従来例で説明した図１２のVR＿MANGRDVD.IFOファイルに対応する。また、オリジナル管理データは図１２のオリジナルPGC、ユーザー定義管理データは図１２のユーザー定義PGCにそれぞれ相当するものである。
【００４８】
TMG.ifoファイルの構造を図１６に示す。TOTAL＿MAN＿IFO（Total Manager Information）は、GENERAL＿IFO（General Information）、CNTNT＿IFO（Content Information）及びSTATUS＿IFO（Status Information）で構成される。
【００４９】
［STATUS＿IFO］
STATUS＿IFOには、最後に再生したプログラムの種類や番号など、ステータスに関する情報が記述される。
【００５０】
［CNTNT＿IFO］
CNTNT＿IFOは、動画プログラム情報構造体V＿PR＿IFOT（Video Program Information Table）、音声プログラム情報構造体A＿PR＿IFOT（Audio Program Information Table）、静止画プログラム情報構造体S＿PR＿IFOT（Still picture Program Information Table）、プレイリスト情報構造体PL＿IFOT（Play List Information Table）で構成される。
【００５１】
上記のうち、V＿PR＿IFOT、A＿PR＿IFOT及びS＿PR＿IFOTの３つがそれぞれ動画、音声静止画用のオリジナル管理データである。また、PL＿IFOTがユーザー定義管理データである。
【００５２】
V＿PR＿IFOTは、各動画プログラム毎の情報V＿PR＿IFO＿i（iは1からnまでの整数）の集まりで構成される。
A＿PR＿IFOTは、各音声プログラム毎の情報A＿PR＿IFO＿j（jは1からmまでの整数）の集まりで構成される。
【００５３】
S＿PR＿IFOTは、各静止画プログラム毎の情報S＿PR＿IFO＿k（kは1からqまでの整数）の集まりで構成される。
PL＿IFOTは、各プレイリスト毎の情報PL＿IFO＿p（pは1からrまでの整数）の集まりで構成される。
【００５４】
以下では上記したそれぞれの整数i、 j、 k、 pをそれぞれ、V＿PR＿IFO番号、 A＿PR＿IFO番号、S＿PR＿IFO番号、PL＿PR＿IFO番号と呼ぶことにする。
以下に上記したV＿PR＿IFO＿i、A＿PR＿IFO＿i、S＿PR＿IFO＿i、PL＿IFO＿iの詳細内容を説明する。
［動画プログラム情報構造体］
表１は、動画プログラム情報構造体V＿PR＿IFO＿i のデータフィールドと内容の例を示す表である。
【００５５】
データフィールドの中の、PR number （V＿PRN）に記述される値は、この動画プログラムの番号(i)を示し、V＿PR＿IFO番号と等しい。
Video Group number (V＿GRN)に記述される値は、この動画プログラムが属する動画グループの番号を示す。
【００５６】
V＿ATRには表１の下側の表に示すような内容の、このV＿PR＿IFO＿iで参照される動画データ（各VOB）の各種属性情報が記述される。例えば、圧縮方式を示すVideo＿compression＿mode、ＰＡＬやＮＴＳＣ等の放送方式を示すTV＿system、アスペクト比情報を示すAspect＿ratio、水平解像度であるHorizontal＿video＿resolution、垂直解像度であるVertical＿video＿resolution等の各種属性情報が記述される。
【００５７】
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
なお、V＿PR＿IFO＿iは動画プログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表１の実施例以外にも様々な情報構造をとり得る。
［音声プログラム情報構造体］
表２は、音声プログラム情報構造体A＿PR＿IFO＿j のデータフィールドと内容の例を示す表である。
【００５８】
データフィールドの中の、PR number （A＿PRN）に記述される値は、この音声プログラムの番号（j)を示し、A＿PR＿IFO番号と等しい。
Audio Group number (A＿GRN)に記述される値は、この音声プログラムが属する音声グループの番号を示す。
【００５９】
Track number (TKN)に記述される値は、オーディオグループ内のトラック番号を示す。
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
【００６０】
なお、A＿PR＿IFO＿jは音声プログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表２の実施例以外にも様々な情報構造をとり得る。
［静止画プログラム情報構造体］
表３は、静止画プログラム情報構造体S＿PR＿IFO＿kのデータフィールドと内容の例を示す表である。
【００６１】
データフィールドの中の、PR number （S＿PRN）に記述される値は、この静止画プログラムの番号(k)を示し、S＿PR＿IFO番号と等しい。
Still picture Group number (S＿GRN)に記述される値は、この静止画プログラムが属する静止画グループの番号を示す。
【００６２】
Linked＿video＿program＿numberには、この静止画プログラムと関連付けられる（以下リンクされると称する）動画プログラムのPR＿numberが記述される。なお、関連付けられていない（以下リンクされていないと称する）場合には０が記述される。リンクに関する詳細内容は後述する。
【００６３】
Linked＿video＿entry＿timeには、リンクされている動画プログラムの中のピクチャーのタイムコードが記述される。
S＿ATRには表３の下側の表に示すような内容の、このS＿PR＿IFO＿kで参照される静止画データの各種属性情報が記述される。例えば圧縮方式を示すVideo＿compression＿modeや、ＰＡＬやＮＴＳＣのＴＶシステムを識別するTV＿system、アスペクト比情報を示すAspect＿ratioなどが記述される。更にsupplement＿infoには、この静止画データとリンクしており、記録されている補足静止画データから基の静止画データを生成するために用いる動画が、奇数フィールド（odd＿field）の画像データなのか、偶数フィールドeven＿field)の画像データなのか、あるいはそのどちらでもなくオーバーサンプルする画像データなのか(over＿sample)を識別する情報が記述される。このsupplement＿infoについての詳細内容は後述する。
【００６４】
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
なお、S＿PR＿IFO＿kは静止画プログラムの再生に必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表３の実施例以外にも様々な情報構造をとり得る。
［プレイリストプログラム情報構造体］
表４は、プレイリストプログラム情報構造体PL＿IFO＿pのデータフィールドと内容の例を示す表である。
【００６５】
データフィールドの中の、PL numberに記述される値は、このプレイリストの番号(p)を示す。
num＿of＿ud＿programsには、このプレイリストに含まれるユーザー定義プログラムの数が記述される。ユーザー定義プログラムUD＿PR（User Defined Program）とは、利用者が設定するもので、一つ以上の動画プログラム、一つ以上の音声プログラムまたは一つ以上の静止画プログラムが記述されるものである。または、一つ以上の音声プログラムと、それと同時に再生すべき一つ以上の静止画プログラムが記述される場合もある。
【００６６】
UD＿PR＿modeには、対応するUD＿PRに動画、音声、静止画のうちのいずれのプログラムが記述されているかを示す情報が記述されている。
その他のデータフィールドについては、本実施例とは関係性が低いので説明を省略する。
【００６７】
各プログラムの機能、プログラムとユーザー定義プログラム、プレイリストの関係などについては後述する。
なお、プレイリストプログラム情報構造体PL＿IFO＿pは動画、音声、静止画の各プログラムを関連付けて再生するのに必要なアドレス情報や属性情報、テキスト等の付随情報を記述する為のものであり、表４の実施例以外にも様々な情報構造をとり得る。
［GENERAL＿IFO］
GENERAL＿IFOには、System IDやVersion number、 及びCNTNT＿IFOとSTATUS＿IFOの先頭アドレスなど、TOTAL＿MAN＿IFOの一般情報を記述する。詳細な例を表６に示す。この中の、Global＿entry＿offsetフィールドは、各静止画とリンクしているそれぞれの動画のピクチャーからエントリーする一般的なオフセットタイムが記述されるフィールドである。このGlobal＿entry＿offsetの値は、各静止画に対応する静止画プログラム情報構造体S＿PR＿IFO＿kの entry＿offset＿time フィールドに具体的な値が記載されていない場合に有効となるものである。
＜記録装置＞
図１は本発明の情報記録装置の一実施例のブロック図である。本実施例の情報記録装置は、上記したディスクフォーマットのデータ構造を用いることにより、動画の記録中でもその記録を中断することなく、情報量を削減した静止画を記録することを可能とするものである。
【００６８】
以下、この図１を用いて実施例を説明する。
入力された画像光はレンズ１０１を通して、光路分離器１０２に入力される。光路分離器にはプリズムやハーフミラーなどが用いられる。この光路分離器１０２によって２つに分離された画像光は動画用受光素子１０４と、静止画用受光素子１０５に入光される。受光素子には例えばＣＣＤやＣＭＯＳなどが用いられる。このとき、動画用撮像素子の解像度よりも、静止画用撮像素子の解像度のほうを例えばプログレッシブにして垂直方向を２倍とするとか、水平垂直ともに大きくするのが効果的である。図５は、これまで説明したレンズ１０１から静止画用受光素子１０５までの所謂光学ブロックの具体例を示す構造図である。レンズ１０１に対応するレンズ群５０１、光路分離器１０２に対応するプリズム５０２、動画用受光素子１０４に対応するＣＣＤ５０３、静止画用受光素子１０５に対応するＣＣＤ５０４から構成されている。
【００６９】
動画用受光素子１０４と静止画用受光素子１０５とで画像光はそれぞれ光電変換されて電気的な画像信号となる。更に画像信号はＡ／Ｄ変換されてデジタルデータとしてそれぞれ動画符号化器１１４、補足静止画情報生成器１１６に入力される。
【００７０】
また、オーディオ入力器１０３からのオーディオデータはＡ／Ｄ変換器１０８にてデジタルデータに変換され、音声符号化器１１３に入力される。音声符号化器１１３では入力されるデジタルデータを例えばドルビーＡＣ３を用いて信号圧縮処理を行う。
【００７１】
ユーザーインターフェース部（Ｕ／Ｉ）１０９は、利用者の操作情報を入力するブロックである。たとえば、動画を記録している途中に、利用者によってシャッターボタンが押されたなどの操作情報が入力されたならば、その押した時点のタイミング情報をＣＰＵへ出力する。
【００７２】
ＣＰＵ１１０は、上記のタイミング情報を受信したならば、静止画記録の開始を静止画撮影タイミング信号生成器１１１に送信する。
静止画撮影タイミング信号生成器１１１は、ＣＰＵ１１０より静止画記録の開始指示を受けたならば、静止画記録開始信号を補足静止画情報生成器１１６、動画符号化器１１４に送信する。また同時に、これから記録する静止画のプログラムナンバーと、この静止画とリンクする動画のプログラムナンバー及びピクチャータイムコードとを生成して、それぞれを管理データメモリー１１２に送信し、また静止画のプログラムナンバーは、動画符号化器１１４へも送信する。
【００７３】
動画符号化器１１５は、静止画記録開始信号を受信したならば、動画符号化を開始する。そして、同時に受信した静止画のプログラムナンバーを、動画符号化データの１ピクチャー毎に付加されているＭＰＥＧのユーザーデータ領域にセットする。これにより、動画記録中に記録した静止画と、その静止画を記録したのと同時期に記録されていた動画の1枚のピクチャーとの対応付けがなされることになる。
【００７４】
静止画のプログラムナンバーとは、表３に示す静止画プログラム情報構造体のS＿PR＿IFOフィールドの中のPR＿numberの値である。
ＭＰＥＧのユーザーデータ領域とは、図２に示すようにＭＰＥＧストリームの１ピクチャー毎に１つ付加されているものである。表７はＭＰＥＧ２ビデオレーヤの１ピクチャーのシンタックスを示したものであり、この中のuser＿dataを使用する。user＿dataは、User＿data＿start＿codeという一意に決定できるバイトアラインされたスタートコードから始まり、次に0x000001の３バイトを受信するまで、user＿dataを続けることができる。ここに静止画の識別情報（後述するS＿PRN）を記述する。その際、他のアプリケーションでuser＿dataを使用している可能性もあるので、user＿data＿start＿codeに続く４バイトのuser＿dataに、本方式のデータであることを示す識別コード0x22220204を記述する。これにより他の用途で使用されているユーザーデータとの混同を防ぐことができる。
なお、ここでは４バイトの識別コード0x22220204としているが、この識別コードのバイト長は４バイトに限らずまた識別コードも0x22220204に限るものではない。
【００７５】
動画局部復号器１１５は、動画復号器１１４で符号化された動画データを局部的に復号し、復号データを補足静止画情報生成器１１６へ送信する。
補足静止画情報生成器１１６は、記録対象の静止画と同時期に記録した動画とで相関性があり重複する画像データを、静止画の画像データから除いた補足静止画情報を生成し、補足静止画符号化器１１７へ送信する。この補足静止画情報の生成処理の詳細内容は後述する。
【００７６】
補足静止画符号化器１１７は受信した補足静止画情報に対して例えばＪＰＥＧを用いて圧縮符号化を行なう。
管理データメモリー１１２は、前述したTMG.ifoファイルを記憶し管理するメモリーである。このメモリーに送信された静止画のプログラムナンバー、この静止画とリンクする動画のプログラムナンバー及びピクチャータイムコードは、ＣＰＵ１１０からの制御指示に従って、以下のように処理される。
【００７７】
受信した静止画のプログラムナンバーと同じプログラムナンバーの静止画プログラム情報構造体がTMG.ifoファイル中に存在しない場合は、このプログラムナンバーの静止画プログラム情報構造体を新たに作成しTMG.ifoファイルに追加する。そしてこのプログラムナンバーを新たに作成した静止画プログラム情報構造体のPR＿numberフィールドにセットする。
【００７８】
この静止画とリンクする動画のプログラムナンバーは、上記で新たに作成した静止画プログラム情報構造体のLinked＿video＿programフィールドにセットする。この動画のプログラムナンバーは、現在記録中の動画に対応して既に作成されている表１に示す動画プログラム情報構造体のV＿PR＿IFOフィールドの中のPR＿numberと同じ値を記述する。つまり、記録中の動画の動画プログラム情報構造対のPR＿numberを、これから記録する静止画の静止画プログラム情報構造対のLinked＿video＿programに記述することで、現在記録中の動画とこれから記録する静止画との対応付け（リンク）がなされることになる。
【００７９】
ピクチャータイムコードは、Linked＿video＿entry＿timeフィールドにセットする。
ピクチャータイムコードとは、所謂タイムコードであり、ＭＰＥＧなどで用いられているＧＯＰ単位のＧＯＰヘッダーに記述されている時分秒フレーム数で表されるタイムコードを用いる。このタイムコードを、Linked＿video＿entry＿timeフィールドに記述することにより、現在記録中の動画プログラム中のピクチャーとこれから記録する静止画プログラムとの対応付け（リンク）がなされることになる。なお、このinked＿video＿entry＿timeフィールドに記述する情報は、動画プログラムの中のピクチャーを特定できる情報（動画ピクチャーの位置情報）であればタイムコードでなくて良い。例えば、記録されている動画プログラムの先頭からのフレーム数または先頭からのアドレス（バイト数）であっても良い。
【００８０】
多重化器１１７は、それぞれの符号化器で独立に符号化された動画符号化データ、静止画符号化データ、音声符号化データを、時分割多重化する。
ディスクフォーマット器１１９は、上記多重化された各符号化データに対して、上記したディスクフォーマットである動画ディレクトリ（V＿PR＿SET）中の動画ファイル（V＿PRn.dat）、音声ディレクトリ（A＿PR＿SET）中の音声ファイル（A＿PRn.dat）、静止画ディレクトリ（S＿PR＿SET）中の静止画ファイル（S＿PRn.jpg）に対応するようにフォーマット化する。
【００８１】
記録媒体書き込み器１１８は、管理データメモリー１１２で生成され、記憶されているTMG.ifoファイル、及びディスクフォーマット器１１９によってフォーマット化された動画ファイル（V＿PRn.dat）、音声ファイル（A＿PRn.dat）、静止画ファイル（S＿PRn.jpg）をＣＰＵ１１０からの制御信号に従って、記録媒体１２０に記録する。
［補足静止画情報生成処理]
次に補足静止画情報生成器１１６で行なう補足静止画情報生成処理について、図４を用いて詳細に説明する。
【００８２】
図４（１）は通常の動画を記録中に静止画を記録するときの概念説明図である。上部の５コマは連続して記録している動画である。矢印の方向（左から右へ）が時刻の経過方向である。中心のコマ(a)を記録している時刻とほとんど同時刻に静止画を記録したとすると、その静止画は(b)として撮像素子から取り込まれる。
【００８３】
＜第１実施例＞
上記のようにして取り込んだ図４（１）の動画（ａ）を用いて静止画（ｂ）の情報量を削減した補足静止画情報を生成する為の第１の実施例を、図４（２）を用いて以下に説明する。
【００８４】
第１の実施例は、動画（ａ）をインターレース方式による７２０ｘ２４０画素の１フィールドとし、同時刻に記録する静止画（ｂ）を７２０ｘ４８０画素のプログレッシブフレームとして記録する場合、つまりフレーム換算で同一画素サイズの動画と静止画を記録する場合の例である。
【００８５】
図４（２）において上側の３コマはインターレース方式で伝送される各フィールドの様子を示している。矢印の方向（左から右へ）が時刻の経過方向である。また、黒色の帯が画像を表示する為の走査線である。左端から偶数（even）フィールド、奇数（odd)フィールド、偶数（even）フィールドである。そして、これら偶数（even）フィールドと奇数（odd)フィールドとが交互に繰り返される。そして、１組の奇数（odd)フィールドと偶数（even）フィールドとで１枚の動画（フレーム）が完成する。
【００８６】
上記のようなインターレース方式で動画を記録中に、静止画を図４（２）の動画(a)の記録時刻付近で記録すると、この静止画の画像データと動画（ａ）の画像データとは極めて相関性が強くなる。
【００８７】
この動画（ａ）は７２０ｘ２４０画素の奇数フィールドである。
一方、静止画は７２０ｘ４８０画素のプログレッシブフレームである。つまり、この７２０ｘ４８０画素の静止画のうち上記動画で記録される奇数フィールドに相当する画素データ（７２０ｘ２４０画素）分は上記（ａ）の動画の画素データとほとんど同一であることがわかる。従って、このほとんど同一であり冗長な情報である動画の奇数フィールド分の画素データを間引いて（ｂ）に示すような偶数フィールドに相当する画素データを生成し、これを補足静止画情報とする。
【００８８】
そして再生時には、図４（２）下側に示すように、動画(a)と補足静止画情報（ｂ）とを加算することにより、基の７２０ｘ４８０画素のプログレッシブフレームの静止画（ｃ）を得ることができる。
【００８９】
この第１の実施例の場合は、補足静止画情報生成器１１６は、基の静止画の画素データから動画（ａ）の奇数フィールドに相当する画像データを間引けばよいので、動画局部復号器１１５から供給される復号データは使用しなくてもよい。この復号データは次に述べる第２の実施例で使用する。
【００９０】
＜第２実施例＞
次に第２の実施例を、図４（３）を用いて以下に説明する。
第２の実施例は、動画(a)を７２０ｘ４８０画素の１プログレッシブフレームとし、同時刻に記録する静止画(b)を１４４０ｘ９６０画素のプログレッシブフレームとして記録する例、つまり静止画の画素サイズが動画の画素サイズよりも大きい場合の例である。
【００９１】
図４（３）において上側の３コマはプログレッシブ方式で伝送される各フレームの様子を示している。矢印の方向（左から右へ）が時刻の経過方向である。
上記のようなプログレッシブ方式で動画を記録中に、静止画を図４（３）の動画(a)記録時刻付近で記録すると、の静止画の画像データと動画（ａ）の画像データとは極めて相関性が強くなる。
【００９２】
この動画（ａ）は７２０ｘ４８０の画素のプログレッシブフレームである。
一方、静止画は１４４０ｘ９６０画素のプログレッシブフレームである。つまり、この静止画は動画（ａ）の４倍の解像度を有する。しかしその画像内容は動画（ａ）とほとんど同一である。静止画の画像データと動画の画像データとの違いは、静止画と動画との解像度の差で発生する空間周波数的な高周波領域の画像データのみであり、低周波数領域及び中周波数領域の画像データは、動画が有する画像データとほとんど同一であり冗長な情報と考えることができる。
【００９３】
従って、静止画の画像データから冗長な情報である低周波数領域及び中周波数領域の画像データを差し引いた高周波成分のみの画像データを生成し、これを補足静止画情報とする。
【００９４】
そして再生時には、図４（３）下側に示すように、オーバーサンプリングした動画(ａ’)と補足静止画情報（ｂ）とを加算することにより、基の高精細な静止画（ｃ）を得ることができる。
【００９５】
なお、本実施例は光路分離器１０２を用いて２つの光路に分離して、動画と静止画とをそれぞれ独立して記録する例であるが、光路分離器１０２を用いて２つの光路に分離しなくても良い。解像度の十分に高い受光素子と、静止画記録と動画記録とを切り替えるスイッチ１０５と、動画記録時に解像度を低くする為の解像度変換器１０７とがあれば、本発明は１つの受光素子で実現できる。
[再生装置]
図３は本発明の情報再生装置の一実施例のブロック図である。本実施例の情報再生装置は、記録した動画及び情報量を削減した静止画を再生すると共に、情報量を削減した静止画から基の静止画を生成して、表示することを可能とするものである。
【００９６】
以下、この図３を用いて実施例を説明する。
ユーザーインターフェース（Ｕ／Ｉ）２０３は、利用者からの動画や静止画の再生指示をＣＰＵ２０４へ送信する。
【００９７】
ＣＰＵ２０４は、ユーザーインターフェース（Ｕ／Ｉ）２０３から動画や静止画の再生指示をうけたならば、記録媒体読み出し器２０２へ動画又は静止画の再生開始指示の制御信号を出力する。
【００９８】
記録媒体読み出し器２０２は、ＣＰＵ２０４から再生開始指示の制御信号を受けたならば、記録媒体２０１に記録されている動画ファイル（V＿PRn.dat）、静止画ファイル（S＿PRn.jpg）、音声（A＿PRn.dat）の多重化データと、管理データであるTMG.ifoファイルを読み出す。そして読み出したTMG.ifoファイルを管理データメモリー２０６に記録する。また動画ファイル（V＿PRn.dat）、静止画ファイル（S＿PRn.jpg）、音声（A＿PRn.dat）の多重化データをディスクフォーマットデコーダー器２０５に入力する。
【００９９】
ディスクフォーマットデコーダー器２０５は、先に説明したディスクフォーマットで記録されている動画ファイル（V＿PRn.dat）、静止画ファイル（S＿PRn.jpg）、音声ファイル（A＿PRn.dat）をそれぞれフォーマットデコードして多重化分離器２０７へ出力する。
【０１００】
多重化分離器２０７は、フォーマットデコードされた多重化データから、動画、静止画、音声の各符号化データを分離する。
音声復号化器２０９は、分離された音声符号化データを復号する。
【０１０１】
補足静止画復号化器２１０は、分離された補足静止画符号化データを復号する。
動画復号化器２１１は、分離された動画符号化データを復号する。
静止画像構成器２１２は、補足静止画復号化器２１０で復号し生成された補足静止画情報と、動画復号化器２１１で復号された再生する静止画と同時期に記録されている動画の画像データとを用いて基の静止画を構成する。
【０１０２】
管理データメモリー２０６は、先に述べたTNG.ifoファイルを 管理、記録しておくブロックである。TNG.ifoには静止画像構成器２１２で基の静止画を構成する際に用いる動画のピクチャーを特定するリンク情報が記述されている。詳細は後述する。
【０１０３】
ランダムアクセス制御器２０８は、ＣＰＵ２０４から制御され、動画のサーチを行なう。通常の動画再生時のサーチに加えて、静止画再生時の基の静止画を構成するために用いられる動画のピクチャーのサーチも行なう。
【０１０４】
画像出力器２１４は、復号した動画信号および静止画信号を図示していないモニターなどへ出力する。
音声復号器２１０は、復号した音声信号を図示していないスピーカなどに出力する。
【０１０５】
以下に、補足静止画情報から静止画を構成する処理の詳細内容を説明する。
利用者よりユーザーインターフェース（Ｕ／Ｉ）２０３を介してＣＰＵ２０４へひとつの静止画の再生指示がなされたならば、ＣＰＵ２０４は管理データメモリー２０６のTMG.ifoファイルから、この静止画とリンクしている動画のピクチャーの情報を取得する。具体的には表３に示す対象の静止画のプログラムナンバーの静止画プログラム構造体のlinked＿video＿program＿numberとlinked＿video＿entry＿timeとの情報である。この２つの情報をランダムアクセス制御器２０８に伝送する。
【０１０６】
ランダムアクセス制御器２０８では、linked＿video＿program＿numberを用いて、サーチする対象の動画プログラムを特定し、linked＿video＿entry＿timeを用いて、動画プログラムのなかのピクチャーを特定する。そして、このピクチャーへのサーチ制御信号を記録媒体読み出し器２０２に送信する。
【０１０７】
記録媒体読み出し器２０２は、サーチ制御信号により指定される動画のピクチャーを読み出し、ディスクフォーマットデコーダー器２０５、多重分離器２０７、動画複号器２１１を介して、復号した動画のピクチャーデータを静止画像構成器２１２に送信する。
【０１０８】
静止画像構成器２１２では、補足静止画情報と、上記で送信される復号した動画のピクチャーデータとを用いて基の静止画を構成する。
上記に用いる動画のピクチャーデータは、例えば先に説明した第１実施例の場合には、の図４（２）（ａ）の画像（７２０ｘ２４０画素の奇数フィールド）である。また、補足静止画情報は（ｂ）の画像（７２０ｘ２４０画素の偶数フィールド）である。従って、静止画像構成器２１２では、この２つのフィールド画像をマージすることで、基の静止画（ｃ）（７２０ｘ４８０画素のプログレッシブフレーム）を構成できる。このとき用いる
また第２の実施例の場合は、動画のピクチャーデータは図４（３）（ａ）の画像（７２０ｘ４８０画素のプログレッシブフレーム）である。また、補足静止画情報は（ｂ）の画像（１４４０ｘ９６０画素のプログレッシブフレーム）である。従って、静止画像構成器２１２では、この２つの画像をマージすることで、基の静止画（ｃ）（１４４０ｘ９６０画素のプログレッシブフレーム）を構成できる。
【０１０９】
上記した第１の実施例、及び第２の実施例は一つの再生装置で共に実現が可能である。表３に示す再生対象の静止画のプログラムナンバーの静止画プログラム構造体のsupplement＿info、Horizontal＿video＿rezolution、Vertical＿video＿rezolutionの情報を用いる。対象静止画再生時にこの情報を参照し、supplement＿infoがodd field(０１）又はeven Field(１０）の場合は第１の実施例と判断でき、over sample（１１）の場合は第２の実施例と判断できる。また第２の実施例の場合は、更に自身の水平及び垂直画素数であるHorizontal＿video＿rezolution、Vertical＿video＿rezolutionを参照して、TV＿systemの放送方式で決まる動画の画素数との比率を算出すればオーバーサンプルする倍率を決定できる。
【０１１０】
[記録手順］
次に、本実施例の記録装置における記録手順について、図６のフローチャートを用いて説明する。
【０１１１】
ステップ６０１：記録処理スタート
ステップ６０２：動画、音声の記録を開始する。
ステップ６０３：静止画を記録するかを否か判断する。の判断は、例えば利用者による静止画記録ボタンの押下などの操作結果によって行う。
【０１１２】
操作結果が、静止画を記録する（ＹＥＳ）であった場合はステップ６０４へ処理を移行する。操作結果が記録しない（ＮＯ）、または操作が無かった場合には、ステップ６０８へ処理を移行する。
【０１１３】
ステップ６０４：静止画データを撮像素子から取り込む。
ステップ６０５：補足静止画情報を生成する。
ステップ６０６：補足静止画情報の記録を行う。
【０１１４】
ステップ６０７：静止画記録開始信号を出力する。
ステップ６０８：動画または補足静止画情報の符号化を行う。動画は、ＭＰＥＧ２圧縮符号化を行う。補足静止画情報はＪＰＥＧ圧縮符号化を行う。音声は動画とともにドルビーＡＣ３やＭＰＥＧ音声符号化などの圧縮符号化を行う。
【０１１５】
ステップ６０９：符号化された動画、補足静止画情報、音声の各符号化データをそれぞれパック化して、パックヘッダーやタイムスタンプなどを付加して多重化を行う。
ステップ６１０：多重化されたデータのうちの動画データのピクチャー毎のユーザーデータ領域に、静止画のプログラムナンバーを記録する。この静止画のプログラムナンバーとは、表３の静止画プログラム情報構造体に記述されるPR＿numberである。
【０１１６】
ステップ６１１：多重化されたデータを、図１５のフォーマットにしたがってフォーマット化し、バッファリングする。バッファにある程度のデータ量が蓄積されたら、記録媒体に記録する。
【０１１７】
ステップ６１２：記録が全部終了したかどうかを判定する。
終了（ＹＥＳ）であればステップ６１３に処理を移行し、終了でない（ＮＯ）であればステップ６０２へ戻る。
【０１１８】
ステップ６１３：記録結果に基づいて、管理データであるTMG.ifoファイルを記録媒体に記録する。
ステップ６１４：記録処理エンド
[再生手順］
次に、本実施例の再生装置における再生手順について、図８のフローチャートを用いて説明する。
【０１１９】
ステップ８０１：再生処理スタート
ステップ８０２：記録媒体から管理データであるTMG.ifoファイルを読み取り、管理データメモリー１１２に記録する。
【０１２０】
ステップ８０３：動画再生か、静止画再生かを選択する。動画再生の場合にはステップ８０５に処理を移行する。静止画再生の場合は、ステップ８０４に処理を移行する。
ステップ８０４：補足静止画情報を再生する。ステップ８０６に処理を移行する。
【０１２１】
ステップ８０６：補足静止画毎のLinked＿video＿programとLinked＿video＿entry＿timeとを読み出す。
ステップ８０７：補足静止画に対応した動画のピクチャーを再生する。
【０１２２】
ステップ８０８：補足静止画情報の再生画像と対応する動画のピクチャー（再生画像）とで画像のマージを行う。
ステップ８０９：マージした静止画を表示する。
【０１２３】
ステップ８１０：静止画再生を継続するか終了するかを判定する。
終了しない（ＮＯ）の場合にはステップ８０４に処理を戻す。終了する場合（ＹＥＳ）にはステップ８１３に処理を移行する。
【０１２４】
ステップ８０５：動画の再生を行なう。ステップ８１１に処理を移行する。
ステップ８１１：動画データの表示を行う。
ステップ８１２：動画再生を継続するか終了するを判定する。
【０１２５】
終了（Ｙ）の場合にはステップ８１３に処理を移行する。終了でない（ＮＯ）場合にはステップ８０５処理を戻す。
ステップ８１３：再生処理エンド。
【０１２６】
なお、本実施例では、記録媒体を特定していないが、ランダムアクセスできる記録媒体、例えばハードディスクや光ディスクなどであればどんな記録媒体であっても良い。
また、記録媒体にデータを記録しなくても、通信、放送などあらゆる伝送媒体を経由してデータを送信することが可能で、その場合には、記録装置は伝送装置として使用することもできる。また再生装置は受信装置として使用することも可能である。
【０１２７】
また、本実施例の信号データを記録した記録媒体は、図１５、図１６、表１、表２、表３、表４、表６に示したフォーマット構造のデータが記録されていて、さらに、静止画は対応する動画ピクチャーのもつ情報を補う補足静止画情報として記録媒体に圧縮記録されているので、前記静止画信号に対応した前記動画像のピクチャーにエントリーする場合に、その前記補足静止画情報と動画情報から、静止画像を構成し再生することができるという記録媒体特有の機能を持ち、従来の方法で記録する動画像の情報量と、静止画像の情報量を加算した値の情報量よりも、情報量が減らすことができ、記録媒体の効率的なシステムを好適に実現することができる。
【０１２８】
また、記録媒体は、媒体という定義はデータを記録できる媒体という、狭義な媒体というものだけでなく、信号データを伝送するための電磁波、光などを含む。また、記録媒体に記録されている情報は、記録されていない状態での、電子ファイルなどのデータ自身を含むものとする。
【０１２９】
また、本発明は上記した情報記録装置及び情報再生装置の機能をコンピュータに実現させるためのプログラムを含むものである。これらのプログラムは、記録媒体から読み取られてコンピュータに取り込まれてもよいし、通信ネットワークを介して伝送されてコンピュータに取り込まれてもよい。
【０１３０】
【表１】
【０１３１】
【表２】
【０１３２】
【表３】
【０１３３】
【表４】
【０１３４】
【表５】
【０１３５】
【表６】
【０１３６】
【表７】
【図面の簡単な説明】
【０１３７】
【図１】本発明の第１実施例の好適な記録装置を示すブロック図である。
【図２】本発明の実施例のＭＰＥＧのユーザーデータ中に記録するデータ構造の説明図である。
【図３】本発明の実施例の好適な再生装置を示すブロック図である。
【図４】本発明の実施例の補足静止画の構成例の説明図である。
【図５】本発明の実施例の好適な記録装置の光学系部分を示す構成図である。
【図６】本発明の実施例の好適な記録方法を示すフローチャート図である。
【図７】本発明の第２実施例の好適な記録装置を示すブロック図である。
【図８】本発明の実施例の好適な再生方法を示すフローチャート図である。
【図９】従来技術におけるＭＰＥＧ規格のデータパック構造を示す説明図である。
【図１０】従来技術におけるMPEG符号化器のブロック図である。
【図１１】従来技術におけるMPEG復号化器のブロック図である。
【図１２】従来技術におけるディレクトリ、ファイル構造例の説明図である。
【図１３】従来技術におけるオリジナルPGCの構造を示す説明図である。
【図１４】従来技術におけるユーザー定義PGCの構造を示す説明図である。
【図１５】本発明の実施例のディレクトリ、ファイル構造の例を示す図である。
【図１６】本発明の実施例のTMG.ifoのデータ構造例を示す図である。
【符号の説明】
【０１３８】
１０１ レンズ
１０２ 光路分離機
１０３ オーディオ入力器
１０４ 受光素子
１０５ 受光素子
１０６ Ａ／Ｄ変換器
１０７ Ａ／Ｄ変換器
１０８ Ａ／Ｄ変換器
１０９ Ｕ／Ｉ
１１０ ＣＰＵ
１１１ 静止画撮像タイミング信号生成器
１１２ 管理データメモリ
１１３ 音声符号化器
１１４ 動画符号化器
１１５ 動画局部複合器
１１６ 補足静止画情報生成器
１１７ 補足静止画符号化器
１１８ 多重化器
１１９ ディスクフォーマット器
１２０ 記録媒体書き込み器
１２１ 記録媒体
【特許請求の範囲】
【請求項１】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する動画生成手段と(107)、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する補足静止画生成手段と、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と、
を有することを特徴とする情報記録装置。
【請求項２】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する動画生成手段と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する補足静止画生成手段と、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と、
を有することを特徴とする情報記録装置。
【請求項３】
前記請求項１に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを再生する第２の再生手段と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する静止画生成手段と、
を有することを特徴とする情報再生装置。
【請求項４】
前記請求項２に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを再生する第２の再生手段と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する静止画生成手段と、
を有することを特徴とする情報再生装置。
【請求項５】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する機能と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する機能と、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項６】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する機能と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する機能と、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項７】
前記請求項５に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを前記第２の再生手段を用いて再生させる機能と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項８】
前記請求項６に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを前記第２の再生手段を用いて再生させる機能と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項１】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する動画生成手段と(107)、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する補足静止画生成手段と、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と、
を有することを特徴とする情報記録装置。
【請求項２】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録する情報記録装置であって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する動画生成手段と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する補足静止画生成手段と、
前記動画と前記補足静止画とを前記記録媒体に記録する第１の記録手段と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成するリンク情報生成手段と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に記録する第２の記録手段と、
を有することを特徴とする情報記録装置。
【請求項３】
前記請求項１に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを再生する第２の再生手段と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する静止画生成手段と、
を有することを特徴とする情報再生装置。
【請求項４】
前記請求項２に記載の情報記録装置で記録媒体に記録された前記動画と前記補足用静止画とをそれぞれ再生する情報再生装置であって、
前記記録媒体に記録された前記補足静止画のうちの１つを再生する第１の再生手段と、
動画再生モード時は、前記記録媒体に記録された動画を再生し、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを再生する第２の再生手段と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する静止画生成手段と、
を有することを特徴とする情報再生装置。
【請求項５】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
所定フレーム周期のプログレッシブ方式で連続して撮影される前記撮影画像の１つのフレームから１つのフィールドを生成し、この生成する１つのフィールドは、交互に奇数フィールド、偶数フィールドとなる、前記撮影画像のフレーム周期と同一周期のフィールド周期のインターレース方式の動画を生成する機能と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択し、この選択した撮影画像の１フレームの画像情報から前記動画生成手段で生成した動画の１フィールドの画像情報を除いて補足静止画を生成する機能と、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フィールドとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項６】
連続して撮影される撮影画像から動画と静止画とを生成して記録媒体に記録させる為の情報記録プログラムであって、
第１の所定画素サイズを有する前記撮影画像を、前記第１の所定画素サイズよりも小さい第２の所定画素サイズに縮小した動画を生成する機能と、
静止画記録開始信号が入力されたならば、前記連続する撮影画像のうちの１フレームを選択すると共に、前記選択した撮影画像の１フレームを縮小して得た前記動画の１フレームを前記第１の所定画素サイズにオーバーサンプリングした拡大動画の１フレームを生成し、前記選択した撮影画像の１フレームの画像情報から前記拡大動画の１フレームの画像情報を差し引いて補足静止画を生成する機能と、
前記動画と前記補足静止画とを前記記録媒体に第１の記録手段を用いて記録させる機能と、
前記補足静止画と、前記補足静止画を生成したのと同じ撮影画像の１フレームを用いて生成した前記動画の１フレームとを１対１に関連付けるリンク情報をそれぞれの前記補足静止画毎に生成する機能と、
それぞれの前記補足静止画毎の前記リンク情報を前記記録媒体に第２の記録手段を用いて記録させる機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項７】
前記請求項５に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フィールドを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フィールドを前記第２の再生手段を用いて再生させる機能と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フィールドとを合成して静止画を生成する機能と、
をコンピュータに実行させる情報記録プログラム。
【請求項８】
前記請求項６に記載の情報記録プログラムをコンピュータに実行させて記録媒体に記録させた前記動画と前記補足用静止画とをそれぞれ再生させる為の情報再生プログラムであって、
前記記録媒体に記録された前記補足静止画のうちの１つを第１の再生手段を用いて再生させる機能と、
動画再生モード時は、前記記録媒体に記録された動画を第２の再生手段を用いて再生させ、
静止画再生モード時は、前記第１の再生手段で再生された前記補足静止画と関連付けられている前記記録媒体に記録された動画の１フレームを、前記記録媒体から読み出したリンク情報を用いて特定し、その特定した動画の１フレームを前記第２の再生手段を用いて再生させる機能と、
前記第１の再生手段で再生された前期補足静止画と前記第２の再生手段で再生された前記動画の１フレームとを加算して静止画を生成する機能と、
をコンピュータに実行させる情報記録プログラム。
【図１】
【図２】
【図３】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図４】
【図５】
【図２】
【図３】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図４】
【図５】
【公開番号】特開２００６−２２２９３１（Ｐ２００６−２２２９３１Ａ）
【公開日】平成１８年８月２４日（２００６．８．２４）
【国際特許分類】
【出願番号】特願２００５−３３２５３９（Ｐ２００５−３３２５３９）
【出願日】平成１７年１１月１７日（２００５．１１．１７）
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
【公開日】平成１８年８月２４日（２００６．８．２４）
【国際特許分類】
【出願日】平成１７年１１月１７日（２００５．１１．１７）
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
[ Back to top ]