複数の映像音声データを容易に再生および管理できるように多重化記録する映像音声記録装置
本発明による、複数チャンネルのビデオオーディオデータを多重化したストリームデータを記録媒体に記録する映像音声記録装置は、ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成し、この多重化情報から構成された管理データを生成する。そして、この多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化するとともに、この管理データを記録媒体に記録する。以上の映像音声記録装置によって記録された記録媒体を読み取り、映像音声を再生する場合、管理データを取得すると、どのように多重化されたかに関する情報が得られるので、容易に再生が可能になる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ハードディスク／ＤＶＤコンボ型ビデオレコーダ、ＤＶＤビデオレコーダ、ＤＶＤストリームレコーダ、ハードディスクビデオレコーダなどの映像音声記録装置、および、これらの映像音声記録装置で記録された、ディスク媒体をはじめとする記録媒体、および、これらの記録媒体に記録されたデータを読み取り、映像音声を再生する映像音声再生装置に関する。
【背景技術】
【０００２】
従来、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）におけるビデオ、ストリーム関連のアプリケーションフォーマットに関しては、ＤＶＤ−Ｆｏｒｕｍにおいて、再生専用のＤＶＤ−Ｖｉｄｅｏ、記録再生と編集が容易なＤＶＤ−ＶＲ（Ｖｉｄｅｏ Ｒｅｃｏｒｄｉｎｇ）、放送または伝送ストリームを直接記録再生が容易なＤＶＤ−ＳＲ（Ｓｔｒｅａｍ Ｒｅｃｏｒｄｉｎｇ）フォーマットが規格化されている。一方、ＤＶＤ−Ｆｏｒｕｍ外においては、記録再生と編集が容易なＤＶＤ＋ＶＲ（Ｖｉｄｅｏ Ｒｅｃｏｒｄｉｎｇ）フォーマットが規格化されている。また、ＤＶＤ−Ｆｏｒｕｍにおいては、ＨＤＴＶ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｔｅｌｅｖｉｓｉｏｎ）を対象とした新しいビデオストリーム記録フォーマットが検討されている。
【０００３】
ここで、ＤＶＤ−Ｖｉｄｅｏは、あらかじめ映画などのコンテンツが記録されたディスク再生専用フォーマットであり、ホームシアターをメインターゲットとしている。また、ＤＶＤ−ＶＲおよびＤＶＤ＋ＶＲは、アナログビデオをディジタル化し、ＭＰＥＧ−２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ ２）エンコードして記録することを主たる目的としたフォーマットであり、アナログ放送記録とビデオカメラをメインターゲットとしている。そして、ＤＶＤ−ＳＲは、ＭＰＥＧストリームとして送られてきたデータを基本的にはそのまま記録するフォーマットであり、ディジタル放送のダイレクト記録をメインターゲットとしている。
【０００４】
現在、ＤＶＤ−Ｖｉｄｅｏは、商品として世界中に広まり、ＤＶＤ−ＶＲ、ＤＶＤ＋ＶＲなども広まりつつある。ＤＶＤ−ＳＲは商品化されていないが、今後、放送がアナログ放送からディジタル放送に移行すれば、記録フォーマットとして有望である。
【０００５】
ＤＶＤ＋ＶＲまたはＤＶＤ−ＶＲによりアナログ放送を記録する場合、通常は１チャンネルのみの記録を行っている。すなわち、例えばＮＴＶ（日本テレビ、東京では４チャンネル）のみの記録、または、ＴＢＳ（東京放送、東京では６チャンネル）のみの記録が可能である。ＤＶＤ−Ｖｉｄｅｏは再生専用フォーマットであるが、記録に適用することも可能である。ＤＶＤ−Ｖｉｄｅｏによりアナログ放送を記録する場合も、通常は１チャンネルのみの記録を行っている。しかしながら、今日では２画面テレビ、親子画面テレビなどが発売されており、これらを用いれば、２画面を同時に表示、または、記録することが可能となる。
【０００６】
ＤＶＤ−ＳＲによりディジタル放送をダイレクトに記録する場合、ディジタル放送では１個の放送波が複数のストリームから構成されているため、複数ストリームのデータを同時に記録する。したがって、複数チャンネルの記録は、問題なく可能である。先行技術文献の中には、複数チャンネルのビデオ信号を圧縮および多重化し、同一トラックに記録する装置が開示されている（特開平６−２６８９５４号公報を参照）。
【０００７】
しかしながら、これらのフォーマットで、複数チャンネルの記録を行うＤＶＤビデオレコーダには、次の問題点がある。
【０００８】
ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲ、ＤＶＤ−Ｖｉｄｅｏでアナログ放送を記録する場合、２画面、すなわち、２チャンネル以上のビデオオーディオを同時に記録することは上述の通り可能ではあるが、複数チャンネルの記録であることを判定する方法がない。したがって、例えば左半分がＮＴＶ、右半分がＴＢＳからなる画面を記録、再生した場合、ユーザはＮＴＶとＴＢＳが両方含まれた映像をそのままの形で視聴することになり、ユーザ選択により、自動的にＮＴＶのみ、ＴＢＳのみ、または、ＮＴＶを親画面、ＴＢＳを子画面の親子画面として視聴することができない。
【０００９】
また、このように記録した場合、映像符号化ブロックは、ＮＴＶとＴＢＳを含めた形で、ＭＰＥＧをはじめとする映像圧縮処理を行う。したがって、ＮＴＶ映像の一部をＴＢＳ映像の一部から予測して圧縮を行うことが起こりうるため、記録されたデータから、ＴＢＳのデータだけを消去したり、書き換えたりなどの編集をしたりすることが非常に難しくなる。これらの編集を行うには、全ストリームデータを一度デコードし、ＴＢＳデータだけ消去編集した後、再度エンコードしなければならず、多大な負荷と処理時間を必要とする。
【００１０】
ＤＶＤ−ＳＲでディジタル放送をダイレクトで複数ストリーム記録した場合も、複数ストリームであることはストリーム中を検索しなければ分からず、複数ストリーム中の１チャンネルのビデオオーディオデータがどこに記録されているか、ユーザが理解できなくなってしまう。
【００１１】
なお、特開平６−２６８９５４号公報には、圧縮および多重化した複数チャンネルのビデオデータをどのように管理し、記録媒体をどのように再生するか、なんらの開示がない。
【発明の開示】
【００１２】
本発明の目的は、多重化した複数チャンネルのビデオオーディオデータ、または、複数のストリームデータが容易に再生できるように記録を行う映像音声記録装置を提供することにある。
【００１３】
上記目的を達成するために、本発明による、複数チャンネルのビデオオーディオデータを多重化したストリームデータを記録媒体に記録する映像音声記録装置は、ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成し、この多重化情報から構成された管理データを生成する。そして、この多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化するとともに、この管理データを記録媒体に記録する。
【００１４】
さらに、ユーザからの入力にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するための圧縮化情報を生成し、この圧縮化情報から構成された管理データを生成するようにしてもよい。そして、この圧縮化情報にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するようにしてもよい。
【００１５】
また、本発明による、複数の異なるビデオオーディオストリームデータを記録媒体に記録する映像音声記録装置は、ユーザからの入力にもとづいて、入力された複数の異なるビデオオーディオデータストリームの中から記録を行うビデオオーディオストリームデータを選択するための記録選択情報を生成し、この記録選択情報から構成された管理データを生成する。そして、この記録選択情報にもとづいて、入力された複数の異なるビデオオーディオストリームデータの中から記録を行うビデオオーディオストリームデータを選択し、この管理データを記録媒体に記録する。
【００１６】
以上の映像音声記録装置によって記録された記録媒体を読み取り、映像音声を再生する場合、管理データを取得すると、どのように多重化されたか、どのように圧縮されたか、複数のビデオオーディオストリーム中で１チャンネルのビデオオーディオストリームがどこに記録されているかに関する情報が得られるので、容易に再生が可能になる。
【００１７】
以上説明したように、本発明によれば、上記目的を達成できるという効果以外に、複数チャンネル多重化状況や、複数ストリーム記録状況を把握できることから、再生時に様々な表示を行うことができるという副次的な効果が得られる。
【００１８】
また、複数チャンネルの多重化されたストリームデータが、同じチャンネルのビデオオーディオデータのみを用いて圧縮されている場合、ストリームデータ中の所望のビデオオーディオデータのみを解凍し、消去することによって、データの編集が容易に行えるという効果もある。
【図面の簡単な説明】
【００１９】
【図１】本発明の第１の実施形態の映像音声記録装置の構成を示した機能ブロック図である。
【図２】ＲＦ入力処理の例を示した図である。
【図３】本発明の第１の実施形態の映像音声再生装置の構成を示した機能ブロック図である。
【図４】ストリームデータの例を示した図である。
【図５】管理データの配置を示した図である。
【図６】空間的に多重化される例（他のビデオオーディオチャンネルから動きベクトル計算）を示した図である。
【図７】３映像を上縦２列および下縦２列に配置した例を示した図である。
【図８】時間的に多重化される例（他のビデオオーディオチャンネルから動きベクトル計算）を示した図である。
【図９】空間的に多重化される例（当該ビデオオーディオチャンネルのみから動きベクトル計算）を示した図である。
【図１０】時間的に多重化される例（当該ビデオオーディオチャンネルのみから動きベクトル計算）を示した図である。
【図１１】空間的かつ時間的に多重化される例（空間方向は異なったビデオオーディオチャンネルから、時間方向は当該ビデオオーディオチャンネルのみから動きベクトル計算）を示した図である。
【図１２】本発明の第２の実施形態の映像音声記録装置の構成を示した機能ブロック図である。
【図１３】本発明の第２の実施形態の映像音声再生装置の構成を示した機能ブロック図である。
【図１４】複数ストリームデータの例を示した図である。
【発明を実施するための最良の形態】
【００２０】
（第１の実施形態）
図１を参照すると、本発明の第１の実施形態の映像音声記録装置は、Ａ／Ｄ変換部１０３と、ＭＵＸ部１０４と、ＭＰＥＧエンコーダ１０５と、記録フォーマット部１０６と、ＨＤＤレコーダ１０７と、ＤＶＤレコーダ１０８と、フォーマット決定・管理データ生成部１０９を含む。本実施形態の映像音声記録装置は、複数チャンネルビデオオーディオデータ（ストリームデータ）をＨＤＤまたはＤＶＤに記録するものである。
【００２１】
Ａ／Ｄ変換部１０３は、入力信号１０１（アナログのビデオオーディオ信号）を入力とし、この入力信号をＡ／Ｄ変換して、ＭＵＸ部１０４に出力する。入力信号１０１は、複数チャンネルビデオオーディオアナログ信号であり、入力１、入力２、・・・、入力ｎは、別々のチャンネルのビデオオーディオアナログ信号である。したがって、Ａ／Ｄ変換部１０３は、各チャンネルのビデオオーディオアナログ信号を個別にＡ／Ｄ変換する。Ａ／Ｄ変換部１０３は、Ｙ／Ｃ分離、フィルタなどを含めてもよい。
【００２２】
ＭＵＸ部１０４は、Ａ／Ｄ変換部１０３の出力を入力とし、フォーマット決定・管理データ生成部１０９の指定により、指定されたチャンネルのビデオオーディオディジタルデータを指定された方法で多重化する。多重化処理に関しては後述する。
【００２３】
ＭＰＥＧエンコーダ１０５は、ＭＵＸ部１０４により多重化されたビデオオーディオディジタルデータ（ストリームデータ）を入力とし、フォーマット決定・管理データ生成部１０９の指定により、ＭＰＥＧ圧縮方式にエンコードして、記録フォーマット部１０６に出力する。なお、本実施形態ではＭＰＥＧ圧縮方式を用いているが、それ以外の圧縮方式でもよく、非圧縮のままでもよい。なお、ＭＰＥＧエンコーダ１０５は、フォーマット決定・管理データ生成部１０９より、同じストリーム内の同じチャンネルのデータを使って圧縮するか、異なるチャンネルのデータを使って圧縮するかの指定も受ける。
【００２４】
記録フォーマット部１０６は、ＭＰＥＧエンコーダ１０５によりエンコードされたストリームデータを入力とし、フォーマット決定・管理データ生成部１０９の指定により、ＨＤＤまたはＤＶＤに対応したフォーマット化を行う。フォーマット化は、ＨＤＤ、ＤＶＤのビデオアプリケーションフォーマット、ファイルフォーマット、物理フォーマットにしたがった形で行われる。フォーマット化されたビデオオーディオデータは、ＨＤＤレコーダ１０７またはＤＶＤレコーダ１０８へ出力される。
【００２５】
ＨＤＤレコーダ１０７およびＤＶＤレコーダ１０８は、記録フォーマット部１０６から受け取ったストリームデータを、それぞれＨＤＤおよびＤＶＤに記録する。また、フォーマット決定・管理データ生成部１０９から受け取った管理データを、それぞれＨＤＤおよびＤＶＤに記録する。ＨＤＤおよびＤＶＤに記録されたデータは、両者間でダビングが行われるとともに、映像音声再生装置に読み出されると、再生信号１１０として出力される。再生信号１１０は、図１に示したように、ＨＤＤは再生信号１、ＤＶＤは再生信号２として出力してもよく、再生信号１と再生信号２を選択するセレクタを経由した後、１系統として出力してもよい。
【００２６】
フォーマット決定・管理データ生成部１０９は、制御信号１０２を入力とし、ＭＵＸ部１０４と、ＭＰＥＧエンコーダ１０５と、記録フォーマット部１０６に各種の指定を行う。制御信号１０２は、多重化を行うチャンネルと、多重化方法と、ＭＰＥＧ圧縮方法と、フォーマットを指定するユーザーオペレーションデータである。さらに、フォーマット決定・管理データ生成部１０９は、ＨＤＤレコーダ１０７およびＤＶＤレコーダ１０８に、多重化を行うチャンネルと、多重化方法と、ＭＰＥＧ圧縮方法と、フォーマットなどの情報を含んだ管理データを出力する。
【００２７】
図２を参照すると、入力信号２０３（図１の入力信号１０１に相当）を得るための構成が示されている。
【００２８】
チューナ２０２は、アンテナからのＲＦ入力信号２０１を入力とし、ＲＦ入力信号２０１の周波数を選別して、入力信号２０３を出力する。各チューナ２０２は、異なる周波数が選択されるものとする。入力信号２０３は、例えば、入力信号１がＮＨＫ（日本放送協会、東京では１チャンネル）、入力信号２がＮＴＶ、入力信号３がＴＢＳなど、入力信号ごとに異なるチャンネルのビデオオーディオアナログ信号である。
【００２９】
図３を参照すると、本発明の第１の実施形態の映像音声再生装置は、再生フォーマット解読部３０３と、ＭＰＥＧデコーダ３０４と、再生映像再構成部３０５と、Ｄ／Ａ変換部３０６と、管理データ解読・映像再構成方法決定部３０７を含む。本実施形態の映像音声再生装置は、複数チャンネルビデオオーディオデータ（ストリームデータ）をＨＤＤまたはＤＶＤから再生するものである。
【００３０】
再生フォーマット解読部３０３は、再生信号３０１を入力とし、再生信号３０１に含まれるストリームデータと管理データを分離し、ストリームデータをＭＰＥＧデコーダ３０４に出力し、管理データを管理データ解読・映像再構成方法決定部３０７に出力する。なお、再生信号３０１は、再生信号１１０と同じである。すなわち、ＨＤＤまたはＤＶＤから読み出されたものである。
【００３１】
ＭＰＥＧデコーダ３０４は、再生フォーマット解読部３０３から出力されたストリームデータを入力とし、このストリームデータをＭＰＥＧ圧縮方式でデコードする。なお、ＭＰＥＧ圧縮方式以外の圧縮方式で圧縮されたストリームは、その圧縮方式でデコードする。
【００３２】
再生映像再構成部３０５は、ＭＰＥＧデコーダ３０４の出力を入力とし、管理データ解読・映像再構成方法決定部３０７の指定により、デコードされたストリームデータの再構成を行う。再構成は多重化の逆演算処理である。再生映像再構成部３０５は、管理データ解読・映像再構成方法決定部３０７から、再構成された複数チャンネルビデオオーディオディジタルデータに関して、選択表示するチャンネル、表示位置などの表示方法の指定を受け、これに基づいて構成した再生映像データをＤ／Ａ変換部３０６に出力する。
【００３３】
Ｄ／Ａ変換部３０６は、再生映像再構成部３０５の出力を入力とし、これをアナログビデオオーディオ信号に変換する。Ｄ／Ａ変換部２０６は、ノイズリデューサ、フィルタなどを含めてもよい。Ｄ／Ａ変換部３０６は、出力信号３０８として、変換したアナログビデオオーディオ信号を出力する。
【００３４】
管理データ解読・映像再構成方法決定部３０７は、制御信号３０２と、再生フォーマット解読部３０３からの管理データを入力とし、再構成方法（すなわち、多重化されているチャンネル、多重化されている方法）と、再構成した複数チャンネルビデオオーディオデジタルデータに関して、選択表示するチャンネル、表示位置などの表示方法を再生映像再構成部３０５に指定する。制御信号３０２は、表示方法を指定するユーザーオペレーションデータである。
【００３５】
図４を参照すると、ＨＤＤレコーダ１０７またはＤＶＤレコーダ１０８が記録するストリームデータが示されている。図４は、プログラムストリームを示しているが、トランスポートストリームも同様である。
【００３６】
４０１は、プログラムストリームＰａｃｋであり、Ｐａｃｋ ｈｅａｄｅｒ ４０２と、ビデオオーディオＰａｃｋｅｔ ４０３から構成される。
【００３７】
図５を参照すると、管理データとストリームデータが示されている。
【００３８】
５０１が管理データである。ビデオ、オーディオからなるストリームデータに関するビデオ属性、オーディオ属性、圧縮時のＩピクチャーアドレスマップ、多重化方法などの管理データが、ストリームデータは別に、ディスク最内周などの管理データ領域に記録されてもよい。
【００３９】
５０２がストリームデータである。ストリームデータは、図４に示されたような、例えばＭＰＥＧ方式により圧縮されたビデオオーディオデータである。
【００４０】
次に、ＭＵＸ部１０４の多重化処理（再生映像再構成部３０５では、この多重化処理の逆演算処理として、再構成処理が行われる）に関して説明する。
【００４１】
図６を参照すると、複数チャンネルから１ストリームのビデオデータを構成する例（空間多重で、同じストリーム内の異なったビデオデータを使って圧縮を行う場合）が示されている。
【００４２】
６０１は、１チャンネルのビデオデータから１ストリーム（７２０画素×４８０ライン）を、通常のビデオデータとして構成している。
【００４３】
６０２は、２チャンネルのビデオデータ（各３５２画素×４８０ライン）を横に並べて１ストリームのビデオデータ（７０４画素×４８０ライン）を構成している。
【００４４】
６０３は、２チャンネルのビデオデータ（各７２０画素×２４０ライン）を縦に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４５】
６０４は、３チャンネルのビデオデータ（各２４０画素×４８０ライン）を横に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４６】
６０５は、３チャンネルのビデオデータ（各７２０画素×１６０ライン）を縦に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４７】
６０６は、４チャンネルのビデオデータ（各１７６画素×４８０ライン）を横に並べて１ストリームのビデオデータ（７０４画素×４８０ライン）を構成している。
【００４８】
６０７は、４チャンネルのビデオデータ（各７２０画素×１２０ライン）を縦に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４９】
６０８は、４チャンネルのビデオデータ（各３５２画素×２４０ライン）を縦横に並べて１ストリームのビデオデータ（７０４画素×４８０ライン）を構成している。
【００５０】
ここで、７０４画素の映像に関しては、ダミーデータを挿入することにより、７２０画素×４８０ラインとしてもいい。
【００５１】
また、画素／ライン方向とも整数分の１としてもいい。例えば、６チャンネルのビデオデータを縦に２つ、横に３つ並べて１ストリームのビデオデータを構成してもよい。
【００５２】
６０９は、ＭＰＥＧエンコーダ１０５でＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。６０２〜６０８において、６０９に示すように、同じストリーム内の異なったビデオデータを使って圧縮が行われている。したがって、最適な圧縮処理が行われるため全体の映像は高画質が得られるが、その反面、１ストリーム中の１ビデオデータのみ消去、編集などの処理が非常に困難となる。すなわち、１ストリーム全データをＭＰＥＧデコードし、１ビデオデータのみ消去、編集した後、再度１ストリームを構成してＭＰＥＧエンコードしなければならない。
【００５３】
６１０に、複数チャンネル記録のための管理データを示す。
【００５４】
フラグ１は、複数のビデオデータを空間的に配置するか、時間的に多重化するか示すフラグであり、例えば空間的に配置する場合は「１」、時間的に多重化する場合は「２」、空間的かつ時間的に多重化する場合は「３」とする。６０２〜６０８はすべて空間的に配置しているため、「１」である。６０１は、多重化を行っていないため、「０」としておく。
【００５５】
フラグ２〜フラグ４は、フラグ１が「１」または「３」のときに限って有効である。したがって、６０１では無効である。
【００５６】
フラグ２は、多重化後のデータにおいて、縦方向に多重化されているビデオデータ枚数である。６０２は１枚、６０３は２枚を示しており、以下同様である。
【００５７】
フラグ３は、多重化後のデータにおいて、横方向に多重化されているビデオデータ枚数である。６０２は２枚、６０３は１枚を示しており、以下同様である。
【００５８】
フラグ４は、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。６０２〜６０８では、すべて「１」のため、１つのビデオデータのみ消去、編集するためには１ストリーム全データのデコード、エンコードが必須となる。
【００５９】
図示していないが、それ以外にもフラグ１が「１」または「３」のときに対応した制御データが定義される。
【００６０】
例えば、「多重化ビデオデータ画素、ライン数」として、多重化するビデオデータ数がｎのとき、
・第１ビデオデータ画素数、ライン数
・第２ビデオデータ画素数、ライン数
‥‥‥‥‥
・第ｎビデオデータ画素数、ライン数
・ダミービデオデータ画素数、ライン数
を記録しておく。
【００６１】
これにより、画素数、ライン数が異なったビデオデータの多重化も可能となり、正常なデコード、表示も可能となる。
【００６２】
この場合、第１ビデオデータ、第２ビデオデータの順序は、上の段の左から右、さらにそれを上の壇から下の段のように、あらかじめ規定しておかなければならない。
【００６３】
例えば、図７に示すように、１画面が３ビデオストリームから構成されるとき、フラグ１〜フラグ４を、それぞれ「１」、「２」、「２」、「１」としておき、
・７０１の第１ビデオデータ画素数を「３５２」、ライン数を「３２０」
・７０２の第２ビデオデータ画素数を「３５２」、ライン数を「３２０」
・７０３の第３ビデオデータ画素数を「７０４」、ライン数を「１６０」
・７０４のダミービデオデータ画素数を「１６」、ライン数を「４８０」
とすることにより、第１、第２、第３ビデオデータを正常にデコード、表示可能となる。
【００６４】
また、同様に図示していないが、それ以外にもフラグ１が「１」または「３」のときに対応した制御データが定義される。
【００６５】
例えば、「予測ビデオデータナンバー」として、多重化するビデオデータ数がｎのとき、
・第１ビデオデータが、第２ビデオデータから予測されているか否か
・第１ビデオデータが、第３ビデオデータから予測されているか否か
‥‥‥‥‥
・第１ビデオデータが、第ｎビデオデータから予測されているか否か
・第２ビデオデータが、第１ビデオデータから予測されているか否か
・第２ビデオデータが、第３ビデオデータから予測されているか否か
‥‥‥‥‥
・第２ビデオデータが、第ｎビデオデータから予測されているか否か
・第ｎビデオデータが、第１ビデオデータから予測されているか否か
・第ｎビデオデータが、第２ビデオデータから予測されているか否か
‥‥‥‥‥
・第ｎビデオデータが、第（ｎ−１）ビデオデータから予測されているか否か
なるデータを記録しておく。
【００６６】
これにより、システムは、どこにも予測が使われていないデータを自由に消去、編集可能と判断できる。
【００６７】
次に、ビデオオーディオの多重化動作のうち、フラグ１が「２」の場合に関して説明する。
【００６８】
図８を参照すると、複数チャンネルから１ストリームのビデオデータを構成する例（時間多重で、同じストリーム内の異なったビデオデータを使って圧縮を行う場合）が示されている。
【００６９】
８０１は、２チャンネルのビデオデータ（各７２０画素×４８０ライン）を３フレームずつ時間方向に並べて１ストリームのビデオデータを構成している。
【００７０】
８０２は、３チャンネルのビデオデータ（各７２０画素×４８０ライン）を２フレームずつ時間方向に並べて１ストリームのビデオデータを構成している。
【００７１】
８０３は、４チャンネルのビデオデータ（各７２０画素×４８０ライン）を１フレームずつ時間方向に並べて１ストリームのビデオデータを構成している。
【００７２】
８０４は、２チャンネルのビデオデータ（各７２０画素×２４０ライン）を１フィールドずつ時間方向に並べて１ストリームのビデオデータを構成している。すなわち、トップフィールドを第１のビデオ、ボトムフィールドを第２のビデオとする。
【００７３】
８０５は、映像を時間方向に、フレームまたはフィールド単位で多重化することを示している。
【００７４】
８０６は、８０１〜８０３に関してはフレームナンバー、８０４に関してはフィールドナンバーを示している。
【００７５】
８０７は、６０９と同様に、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。８０１〜８０４において、８０７に示すように、同じストリーム内の異なったビデオデータを使って圧縮が行われる。
【００７６】
８０８は、複数チャンネル記録のための管理データを示す。
【００７７】
フラグ１は、複数のビデオデータを空間的に配置するか、時間的に多重化するか示すフラグであり、８０１〜８０４はすべて時間的に配置しているため、「２」である。
【００７８】
フラグ５〜フラグ８は、フラグ１が「２」または「３」のときに限って有効である。
【００７９】
フラグ５は、多重化後のデータにおいて、時間方向に多重化されているビデオデータ枚数である。８０１は２枚、８０２は３枚を示しており、以下同様である。
【００８０】
フラグ６は、多重化後のデータにおいて、各ビデオデータがフレーム単位で配置されているか、フィールド単位で配置されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。８０１〜８０３では「０」、８０４では「１」である。
【００８１】
フラグ７は、各ビデオデータが連続するフレームまたはフィールド数である。８０１では３フレーム連続後に切り替わり、８０２では２フレーム連続後に切り替り、以下同様である。
【００８２】
フラグ８は、フラグ４と同様に、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。８０１〜８０４では、すべて「１」のため、１つのビデオデータのみ消去、編集するためには１ストリーム全データのデコード、エンコードが必須となる。
【００８３】
図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」、「予測ビデオデータナンバー」などが考えられる。
【００８４】
図９を参照すると、ビデオオーディオの多重化動作のうち、フラグ１が「１」の場合における他の例（空間多重で、同じストリーム内の同じビデオデータのみを使って圧縮を行う場合）が示されている。
【００８５】
９０１は、６０１と同じ図を示している。
【００８６】
９０２は、６０２と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００８７】
９０３は、６０３と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００８８】
９０４は、６０４と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００８９】
９０５は、６０５と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９０】
９０６は、６０６と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９１】
９０７は、６０７と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９２】
９０８は、６０８と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９３】
ここで、７０４画素の映像に関しては、ダミーデータを挿入することにより、７２０画素×４８０ラインとしてもいい。
【００９４】
また、画素／ライン方向とも整数分の１としてもいい。例えば、６チャンネルのビデオデータを縦に２つ、横に３つ並べて１ストリームのビデオデータを構成してもよい。
【００９５】
９０９は、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。９０２〜９０８において、９０９に示すように、同じストリーム内の同じビデオデータを使って圧縮が行われる。したがって、全体の映像は最高画質が得られないかもしれないが、その反面、１ストリーム中の１ビデオデータのみ消去、編集などの処理が容易に実現できる。すなわち、１ストリーム中の１ビデオデータのみをＭＰＥＧデコード、消去、編集し、再度ＭＰＥＧエンコードした後、１ストリームを構成することが可能となる。
【００９６】
９１０に、複数チャンネル記録のための管理データを示す。
【００９７】
フラグ１〜フラグ３は、図６と同様である。
【００９８】
フラグ４は、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。９０２〜９０８では、すべて「０」のため、１つのビデオデータのみ消去、編集することが容易に可能である。このフラグ４を読み取って、１ストリーム中の１ビデオデータのみをＭＰＥＧデコード、消去する構成を映像音声再生装置に設けてもよい。
【００９９】
また、図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」などが考えられる。
【０１００】
図１０を参照すると、ビデオオーディオの多重化動作のうち、フラグ１が「２」の場合における他の例（時間多重で、同じストリーム内の同じビデオデータのみを使って圧縮を行う場合）が示されている。
【０１０１】
１００１は、８０１と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０２】
１００２は、８０２と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０３】
１００３は、８０３と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０４】
１００４は、８０４と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０５】
１００５は、映像を時間方向に、フレームまたはフィールド単位で多重化することを示している。
【０１０６】
１００６は、１００１〜１００３に関してはフレームナンバー、１００４に関してはフィールドナンバーを示している。
【０１０７】
１００７は、８０７と同様に、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。１００１〜１００４において、１００７に示すように、同じストリーム内の同じビデオデータを使って圧縮が行われる。
【０１０８】
１００８に、複数チャンネル記録のための管理データを示す。
【０１０９】
フラグ１、フラグ５〜フラグ７は、図８と同様である。
【０１１０】
フラグ８は、フラグ４と同様に、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。１００１〜１００４では、すべて「０」のため、１つのビデオデータのみ消去、編集することが容易に可能である。
【０１１１】
また、図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」などが考えられる。
【０１１２】
次に、ビデオオーディオが空間、時間両方向に多重されている場合に関して説明する。
【０１１３】
図１１を参照すると、複数チャンネルから１ストリームのビデオデータを構成する例（空間多重および時間多重）が示されている。
【０１１４】
１１０１は、映像を空間および時間方向に、フレーム単位で多重化することを示している。
【０１１５】
１１０２は、フレームナンバーを示している。
【０１１６】
１１０３は、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。１１０３に示すように、同じフレーム内の他のビデオデータを使って圧縮が行われる例を示している。
【０１１７】
１１０４に、複数チャンネル記録のための管理データを示す。
【０１１８】
フラグ１は、ビデオオーディオが空間、時間両方向に多重されている場合として、「３」としている。
【０１１９】
フラグ２〜４は、図６と同様であり、フラグ５〜フラグ８は、図１０と同様である。
【０１２０】
フラグ４は、１つのビデオデータが空間方向のそのビデオデータのみから予測されているか、空間方向の他のビデオデータにより予測されているかを示すフラグであり、図１１では後者のため「１」である。
【０１２１】
フラグ８は、１つのビデオデータが時間方向のそのビデオデータのみから予測されているか、時間方向の他のビデオデータにより予測されているかを示すフラグであり、図１１では前者のため「０」である。
【０１２２】
フラグ９は、１つのビデオデータがそのビデオデータのみから予測されているか、空間時間方向の他のビデオデータにより予測されているかを示すフラグであり、図１１では後者のため「１」である。
【０１２３】
また、図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」、「予測ビデオデータナンバー」などが考えられる。
【０１２４】
（第２の実施形態）
以上、ＭＰＥＧエンコーダが１回路の場合に関して説明したが、次に、ＭＰＥＧエンコーダを複数搭載し、複数ビデオストリームを記録する場合に関して説明する。
【０１２５】
図１２を参照すると、本発明の第２の実施形態の映像音声記録装置は、Ａ／Ｄ変換部１２０３と、ＭＰＥＧエンコーダ１２０４と、スイッチ１２０５と、記録フォーマット部１２０６と、ＨＤＤレコーダ１２０７と、ＤＶＤレコーダ１２０８と、フォーマット決定・管理データ生成部１０９を含む。本実施形態の映像音声記録装置は、複数チャンネルビデオオーディオデータを複数ストリームでＨＤＤまたはＤＶＤに記録するものである。
【０１２６】
図１の第１の実施形態の映像音声記録装置と異なる点は、ＭＰＥＧエンコーダ１２０４が入力系統ごとに設けられ、フォーマット決定・管理データ生成部１２０９からの指定を受けないこと（本実施形態では、チャンネルごとにエンコードを行うため、他のチャンネルのデータを使ってエンコードを行うということがないため）、ＭＵＸ部１０４を含まないこと、その代わりにスイッチ１２０５を含むことである。なお、図１２では、各入力信号１２０１は、異なるビデオオーディオアナログ信号であるが、１つまたは複数の入力系統のＡ／Ｄ変換部１２０３とＭＰＥＧエンコーダ１２０４の組を省き、直接ディジタルストリームをスイッチ１２０５に入力する形態も考えられる。図１および図１２では、ＤＶＤフォーマットとして、ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲ、ＤＶＤ−Ｖｉｄｅｏが想定されているが、直接ディジタルストリームをスイッチ１２０５に入力する形態では、ＤＶＤ−ＳＲにも対応可能となる。
【０１２７】
Ａ／Ｄ変換部１２０３は、入力信号１２０１を入力として、これをＡ／Ｄ変換し、ＭＰＥＧエンコーダ１２０４に出力する。ＭＰＥＧエンコーダ１２０４は、Ａ／Ｄ変換部１２０３の出力を入力として、これをＭＰＥＧエンコードする。
【０１２８】
スイッチ１２０５は、ＭＰＥＧエンコーダ１２０４の出力を入力とし、フォーマット決定・管理データ生成部１０９からの指定により、ＭＰＥＧエンコーダ１２０４からのストリームデータを選択する。
【０１２９】
記録フォーマット部１２０６は、図１の第１の実施形態と同様にフォーマットを行い、フォーマットされたデータをＨＤＤレコーダ１２０７およびＤＶＤレコーダ１２０８に出力する。
【０１３０】
フォーマット決定・管理データ生成部１２０９は、制御信号を入力として、スイッチ１２０５に選択するストリームを指定し、ＨＤＤレコーダ１２０７およびＤＶＤレコーダ１２０８に、選択したストリームの情報を含む管理データを出力する。制御信号１２０２は、多重化するチャンネル（図１２の場合、１つのチャンネルのデータが１つのストリームデータに対応するので、多重化するチャンネルの指定は、ストリームデータの選択と同じである）と、フォーマットなどを指定するユーザーオペレーションデータである。
【０１３１】
図１３を参照すると、本発明の第２の実施形態の映像音声再生装置は、再生フォーマット解読部１３０３と、デコードストリーム選択部１３０４、ＭＰＥＧデコーダ１３０５と、再生映像再構成部１３０６と、Ｄ／Ａ変換部１３０７と、管理データ解読・映像再構成方法決定部１３０８を含む。本実施形態の映像音声再生装置は、複数チャンネルの複数ストリームデータをＨＤＤまたはＤＶＤから再生するものである。
【０１３２】
図１の第１の実施形態の映像音声再生装置と異なる点は、デコードストリーム選択部１３０４が設けられていること、再生映像再構成部１３０６は、再構成処理（多重化処理の逆演算処理）は行わず、画面表示のための再生映像再構成のみを行うことである。
【０１３３】
再生フォーマット解読部１３０３は、再生信号１３０１を入力とし、デコードストリーム選択部１３０４に複数ストリームデータを出力し、管理データ解読・映像再構成方法決定部１３０８に管理データを出力する。再生信号１３０１は再生信号１２１０に相当する。
【０１３４】
デコードストリーム選択部１３０４は、管理データ解読・映像再構成方法決定部１３０８の指定により、デコードするストリームデータを選択する。選択したストリームデータをＭＰＥＧデコーダに出力する。ＭＰＥＧデコーダ１３０５は、このデータをデコードして、再生映像再構成部１３０６に出力する。
【０１３５】
再生映像再構成部１３０６は、管理データ解読・映像再構成方法決定部１３０８から表示方法の指定を受け、再生映像を再構成する。再構成したデータをＤ／Ａ変換部１３０７に出力する。Ｄ／Ａ変換部１３０７は、このデータをＤ／Ａ変換し、出力信号１３０９として、ビデオオーディオアナログ信号を出力する。
【０１３６】
管理データ解読・映像再構成方法決定部１３０８は、制御信号１３０２と、再生フォーマット解読部１３０３の出力である管理データを入力とし、デコードストリーム選択部１３０４に選択するストリームの指定、再生映像再構成部１３０６に表示方法の指定を行う。制御信号１３０２は、選択するストリームと表示方法を指定するユーザーオペレーションデータである。
【０１３７】
図１４を参照すると、複数ストリームの例が示されている。
【０１３８】
１４０１がＴＳ Ｐａｃｋ、１４０２がＴＳ ｈｅａｄｅｒ、１４０３がＰａｙｌｏａｄである。図示したように、ＭＰＥＧの場合、複数ストリームデータはＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）とする。ＴＳは、ＴＳ Ｐａｃｋ１４０１からなり、ＴＳはストリームごとにＴＳ ｈｅａｄｅｒ１４０２、Ｐａｙｌｏａｄ１４０３からなる。
【０１３９】
ストリーム数が３のとき、図のように、ＴＳ Ｐａｃｋ１４０１単位で、ストリーム１、ストリーム２、ストリーム３から構成される。各ストリームが１個のビデオオーディオチャンネルとなる。
【０１４０】
この複数ストリームが、図５のストリームデータと対応する。
【０１４１】
（第３の実施形態）
本発明の第３の実施形態の映像音声記録装置として、第１の実施形態の映像音声記録装置と第２の実施形態の映像音声記録装置が組み合わされた形態が考えられる。すなわち、図１２の第２の実施形態の映像音声記録装置の１つまたは複数の入力系統のＡ／Ｄ変換部１２０３とＭＰＥＧエンコーダ１２０４が、図１の第１の実施形態の映像音声記録装置のＡ／Ｄ変換部１０３とＭＵＸ部１０４とＭＰＥＧエンコーダ１０５に入れ替わった形態である。
【０１４２】
本発明の第３の実施形態の映像音声記録装置によって、複数ストリームのうち、１つまたは複数のストリームに複数チャンネルのビデオオーディオデータが多重化された複数ストリームデータをＨＤＤまたはＤＶＤに記録することが可能となる。
【０１４３】
さらに、本発明の第３の実施形態の映像音声再生装置として、第１の実施形態の映像音声再生装置と第２の実施形態の映像音声再生装置が組み合わされた形態が考えられる。この場合、再生する複数ストリームのうち、１つまたは複数のストリームに複数チャンネルのビデオオーディオデータが多重化されている。したがって、図１３の第２の実施形態の映像音声再生装置において、再生映像再構成部１３０６は、１つのストリームに多重化された複数チャンネルのビデオオーディオデータを再構成化する、図３の再生映像再構成部３０５と同様の機能を有していなければならない。
【０１４４】
なお、１つまたは複数の入力系統のＡ／Ｄ変換部とＭＰＥＧエンコーダの組を省き、直接ディジタルストリームをスイッチに入力するようにすると、本実施形態においても、ＤＶＤフォーマットとして、ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲ、ＤＶＤ−Ｖｉｄｅｏだけでなく、ＤＶＤ−ＳＲにも対応可能となる。
【０１４５】
次に、複数ストリーム、かつ、一部のストリームにも複数チャンネルが配置されたときのことを考慮した管理データの例を示す。
【０１４６】
圧縮方式はＭＰＥＧを適用するものとし、ＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅｓ）をＶＯＢＵ（Ｖｉｄｅｏ Ｏｂｊｅｃｔ
Ｕｎｉｔ）として、ＶＯＢＵごとに以下の管理データを定義する。
【０１４７】
・Ｍｕｌｔｉ＿ｒｅｃ（１ビット）
０：１ストリーム１チャンネルビデオオーディオ記録時
１：複数ストリームまたは複数チャンネルビデオオーディオ記録時
Ｍｕｌｔｉ＿ｒｅｃ：０のとき終了、１のとき以下が続く。
【０１４８】
・Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ（２ビット）
００：保留または禁止
０１：１ストリーム、かつ、その中に複数チャンネルビデオオーディオを含むストリームあり
１０：複数ストリーム、かつ、その中の全ストリームがそれぞれ１チャンネルビデオオーディオ
１１：複数ストリーム、かつ、その中に複数チャンネルビデオオーディオを含むストリームあり。
【０１４９】
・Ｓｔｒ＿ｎｒ（８ビット）
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：００または０１のとき、保留（００Ｈ）、このときストリーム数ｍ＝１
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：１０または１１のとき、複数ストリームにおけるストリーム数（ｍストリーム）。
【０１５０】
・Ｍｕｌｔｉ＿ｃｈａ＿ｄａｔａ ＃ｉ（１≦ｉ≦ｍ）
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：００のとき、保留（００Ｈ）
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：０１のとき、第１ストリームにおけるビデオオーディオチャンネルデータ
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：１０のとき、第ｉストリームにおけるビデオオーディオチャンネルデータ
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：１１のとき、第ｉストリームにおけるビデオオーディオチャンネルデータ
Ｍｕｌｔｉ＿ｃｈａ＿ｄａｔａ ＃ｉ。
【０１５１】
・Ｃｈａ＿ｎｒ（８ビット）
第ｉストリームにおけるビデオオーディオチャンネル数（ｎチャンネル）。
【０１５２】
・Ｓｐｔｔｅｍｐ＿ｆｇ（２ビット）
第ｉストリームにおけるマルチビデオオーディオチャンネル配置方法
０：１チャンネル
１：複数チャンネル、空間的に多重
２：複数チャンネル、時間的に多重
３：複数チャンネル、空間的かつ時間的に多重。
【０１５３】
・Ｃｌｍｎ＿ｖｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：１、３のとき、縦（行）方向のビデオチャンネル数
Ｓｐｔｔｅｍｐ＿ｆｇ：０、２のとき、保留（０Ｈ）。
【０１５４】
・Ｒｏｗ＿ｖｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：１、３のとき、横（列）方向のビデオチャンネル数
Ｓｐｔｔｅｍｐ＿ｆｇ：０、２のとき、保留（０Ｈ）。
【０１５５】
・Ｓｐｔ＿ｄｅｔ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：１、３のとき、映像圧縮における予測範囲
０：空間方向に関して、当該ビデオチャンネル内でのみ予測
１：空間方向に関して、当該ビデオチャンネル、およびそれ以外のビデオチャンネルから予測
Ｓｐｔｔｅｍｐ＿ｆｇ：０、２のとき、のとき、保留（０Ｈ）。
【０１５６】
・ｔｍｐ＿ｖｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、時間方向のビデオチャンネル数
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１５７】
・ｆｒｍｆｌｄ＿ｆｇ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、複数チャンネルビデオオーディオを配置する単位
０：フレーム単位で配置 １：フィールド単位で配置
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１５８】
・ｒｐｔ＿ｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、複数チャンネルビデオオーディオを配置するフレーム／フィールド数
何フレーム、または何フィールドごとに配置するか
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１５９】
・Ｔｍｐ＿ｄｅｔ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、映像圧縮における予測範囲
０：時間方向に関して、当該ビデオチャンネル内でのみ予測
１：時間方向に関して、当該ビデオチャンネル、およびそれ以外のビデオチャンネルから予測
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１６０】
・Ｔｏｔａｌ＿ｄｅｔ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：３のとき、映像圧縮における予測範囲
０：空間時間両方向に関して、当該ビデオチャンネル内でのみ予測
１：空間時間両方向に関して、当該ビデオチャンネル、およびそれ以外のビデオチャンネルから予測
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１、２のとき、保留（０Ｈ）。
【０１６１】
・ｃｈａｖｄ＿ｆｇ（１ビット）
以下に示すＣｈａｎｎｅｌ＿ｄａｔａ無効時：０／有効時：１
ｃｈａｖｄ＿ｆｇ：０のとき終了、１のとき以下が続く。
【０１６２】
・Ｃｈａｎｎｅｌ＿ｄａｔａ ＃ｊ（１≦ｊ≦ｎ）
チャンネル当たりのデータ
Ｃｈａｎｎｅｌ＿ｄａｔａ ＃ｊ。
【０１６３】
・Ｐｅｌ＿ｐｏｓ（１６ビット）
第ｊチャンネルデータ左上画素の横方向の画素開始位置。
【０１６４】
・Ｌｉｎｅ＿ｐｏｓ（１６ビット）
第ｊチャンネルデータの横方向の画素数。
【０１６５】
・Ｐｅｌ＿ｎｒ（１６ビット）
第ｊチャンネルデータ左上画素の縦方向のライン開始位置。
【０１６６】
・Ｐｅｌ＿ｐｏｓ（１６ビット）
第ｊチャンネルデータの縦方向のライン数。
【０１６７】
・ｆｏｒｅｃａｓｔ＿ｆｇ ＃１
第ｊチャンネルデータの予測に、第１チャンネルデータを未使用：０／使用：１
・ｆｏｒｅｃａｓｔ＿ｆｇ ＃２
第ｊチャンネルデータの予測に、第２チャンネルデータを未使用：０／使用：１
：
：
・ｆｏｒｅｃａｓｔ＿ｆｇ ＃ｎ
第ｊチャンネルデータの予測に、第ｎチャンネルデータを未使用：０／使用：１。
【０１６８】
以上例を示したが、ラベル名、ビット数、データ配置順は例示したものと同じでなくてもよく、また例示した全データが存在しなくても、その一部だけが存在してもいい。保留データは、「０」以外の値でもいい。
【０１６９】
管理データは、ＶＯＢＵ単位で発生、記録する例を示しているが、それに限らず、複数ＶＯＢＵなどもっと大きい単位でも、ＶＯＢＵ未満の小さい単位でもいい。
【０１７０】
また、これらの管理データが記録媒体に記録されたときの、開始アドレス、終了アドレス、データ長が、適宜記録されてもいい。
【０１７１】
また、管理データは、管理データ領域ではなく、ユーザデータ領域に記録されてもいい。あるいは、管理データ領域に加え、ユーザデータ領域に記録されてもいい。
【０１７２】
なお、記録装置と再生装置は別々のものとして説明したが、当然一体型のものでもよい。
【技術分野】
【０００１】
本発明は、ハードディスク／ＤＶＤコンボ型ビデオレコーダ、ＤＶＤビデオレコーダ、ＤＶＤストリームレコーダ、ハードディスクビデオレコーダなどの映像音声記録装置、および、これらの映像音声記録装置で記録された、ディスク媒体をはじめとする記録媒体、および、これらの記録媒体に記録されたデータを読み取り、映像音声を再生する映像音声再生装置に関する。
【背景技術】
【０００２】
従来、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）におけるビデオ、ストリーム関連のアプリケーションフォーマットに関しては、ＤＶＤ−Ｆｏｒｕｍにおいて、再生専用のＤＶＤ−Ｖｉｄｅｏ、記録再生と編集が容易なＤＶＤ−ＶＲ（Ｖｉｄｅｏ Ｒｅｃｏｒｄｉｎｇ）、放送または伝送ストリームを直接記録再生が容易なＤＶＤ−ＳＲ（Ｓｔｒｅａｍ Ｒｅｃｏｒｄｉｎｇ）フォーマットが規格化されている。一方、ＤＶＤ−Ｆｏｒｕｍ外においては、記録再生と編集が容易なＤＶＤ＋ＶＲ（Ｖｉｄｅｏ Ｒｅｃｏｒｄｉｎｇ）フォーマットが規格化されている。また、ＤＶＤ−Ｆｏｒｕｍにおいては、ＨＤＴＶ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｔｅｌｅｖｉｓｉｏｎ）を対象とした新しいビデオストリーム記録フォーマットが検討されている。
【０００３】
ここで、ＤＶＤ−Ｖｉｄｅｏは、あらかじめ映画などのコンテンツが記録されたディスク再生専用フォーマットであり、ホームシアターをメインターゲットとしている。また、ＤＶＤ−ＶＲおよびＤＶＤ＋ＶＲは、アナログビデオをディジタル化し、ＭＰＥＧ−２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ ２）エンコードして記録することを主たる目的としたフォーマットであり、アナログ放送記録とビデオカメラをメインターゲットとしている。そして、ＤＶＤ−ＳＲは、ＭＰＥＧストリームとして送られてきたデータを基本的にはそのまま記録するフォーマットであり、ディジタル放送のダイレクト記録をメインターゲットとしている。
【０００４】
現在、ＤＶＤ−Ｖｉｄｅｏは、商品として世界中に広まり、ＤＶＤ−ＶＲ、ＤＶＤ＋ＶＲなども広まりつつある。ＤＶＤ−ＳＲは商品化されていないが、今後、放送がアナログ放送からディジタル放送に移行すれば、記録フォーマットとして有望である。
【０００５】
ＤＶＤ＋ＶＲまたはＤＶＤ−ＶＲによりアナログ放送を記録する場合、通常は１チャンネルのみの記録を行っている。すなわち、例えばＮＴＶ（日本テレビ、東京では４チャンネル）のみの記録、または、ＴＢＳ（東京放送、東京では６チャンネル）のみの記録が可能である。ＤＶＤ−Ｖｉｄｅｏは再生専用フォーマットであるが、記録に適用することも可能である。ＤＶＤ−Ｖｉｄｅｏによりアナログ放送を記録する場合も、通常は１チャンネルのみの記録を行っている。しかしながら、今日では２画面テレビ、親子画面テレビなどが発売されており、これらを用いれば、２画面を同時に表示、または、記録することが可能となる。
【０００６】
ＤＶＤ−ＳＲによりディジタル放送をダイレクトに記録する場合、ディジタル放送では１個の放送波が複数のストリームから構成されているため、複数ストリームのデータを同時に記録する。したがって、複数チャンネルの記録は、問題なく可能である。先行技術文献の中には、複数チャンネルのビデオ信号を圧縮および多重化し、同一トラックに記録する装置が開示されている（特開平６−２６８９５４号公報を参照）。
【０００７】
しかしながら、これらのフォーマットで、複数チャンネルの記録を行うＤＶＤビデオレコーダには、次の問題点がある。
【０００８】
ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲ、ＤＶＤ−Ｖｉｄｅｏでアナログ放送を記録する場合、２画面、すなわち、２チャンネル以上のビデオオーディオを同時に記録することは上述の通り可能ではあるが、複数チャンネルの記録であることを判定する方法がない。したがって、例えば左半分がＮＴＶ、右半分がＴＢＳからなる画面を記録、再生した場合、ユーザはＮＴＶとＴＢＳが両方含まれた映像をそのままの形で視聴することになり、ユーザ選択により、自動的にＮＴＶのみ、ＴＢＳのみ、または、ＮＴＶを親画面、ＴＢＳを子画面の親子画面として視聴することができない。
【０００９】
また、このように記録した場合、映像符号化ブロックは、ＮＴＶとＴＢＳを含めた形で、ＭＰＥＧをはじめとする映像圧縮処理を行う。したがって、ＮＴＶ映像の一部をＴＢＳ映像の一部から予測して圧縮を行うことが起こりうるため、記録されたデータから、ＴＢＳのデータだけを消去したり、書き換えたりなどの編集をしたりすることが非常に難しくなる。これらの編集を行うには、全ストリームデータを一度デコードし、ＴＢＳデータだけ消去編集した後、再度エンコードしなければならず、多大な負荷と処理時間を必要とする。
【００１０】
ＤＶＤ−ＳＲでディジタル放送をダイレクトで複数ストリーム記録した場合も、複数ストリームであることはストリーム中を検索しなければ分からず、複数ストリーム中の１チャンネルのビデオオーディオデータがどこに記録されているか、ユーザが理解できなくなってしまう。
【００１１】
なお、特開平６−２６８９５４号公報には、圧縮および多重化した複数チャンネルのビデオデータをどのように管理し、記録媒体をどのように再生するか、なんらの開示がない。
【発明の開示】
【００１２】
本発明の目的は、多重化した複数チャンネルのビデオオーディオデータ、または、複数のストリームデータが容易に再生できるように記録を行う映像音声記録装置を提供することにある。
【００１３】
上記目的を達成するために、本発明による、複数チャンネルのビデオオーディオデータを多重化したストリームデータを記録媒体に記録する映像音声記録装置は、ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成し、この多重化情報から構成された管理データを生成する。そして、この多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化するとともに、この管理データを記録媒体に記録する。
【００１４】
さらに、ユーザからの入力にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するための圧縮化情報を生成し、この圧縮化情報から構成された管理データを生成するようにしてもよい。そして、この圧縮化情報にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するようにしてもよい。
【００１５】
また、本発明による、複数の異なるビデオオーディオストリームデータを記録媒体に記録する映像音声記録装置は、ユーザからの入力にもとづいて、入力された複数の異なるビデオオーディオデータストリームの中から記録を行うビデオオーディオストリームデータを選択するための記録選択情報を生成し、この記録選択情報から構成された管理データを生成する。そして、この記録選択情報にもとづいて、入力された複数の異なるビデオオーディオストリームデータの中から記録を行うビデオオーディオストリームデータを選択し、この管理データを記録媒体に記録する。
【００１６】
以上の映像音声記録装置によって記録された記録媒体を読み取り、映像音声を再生する場合、管理データを取得すると、どのように多重化されたか、どのように圧縮されたか、複数のビデオオーディオストリーム中で１チャンネルのビデオオーディオストリームがどこに記録されているかに関する情報が得られるので、容易に再生が可能になる。
【００１７】
以上説明したように、本発明によれば、上記目的を達成できるという効果以外に、複数チャンネル多重化状況や、複数ストリーム記録状況を把握できることから、再生時に様々な表示を行うことができるという副次的な効果が得られる。
【００１８】
また、複数チャンネルの多重化されたストリームデータが、同じチャンネルのビデオオーディオデータのみを用いて圧縮されている場合、ストリームデータ中の所望のビデオオーディオデータのみを解凍し、消去することによって、データの編集が容易に行えるという効果もある。
【図面の簡単な説明】
【００１９】
【図１】本発明の第１の実施形態の映像音声記録装置の構成を示した機能ブロック図である。
【図２】ＲＦ入力処理の例を示した図である。
【図３】本発明の第１の実施形態の映像音声再生装置の構成を示した機能ブロック図である。
【図４】ストリームデータの例を示した図である。
【図５】管理データの配置を示した図である。
【図６】空間的に多重化される例（他のビデオオーディオチャンネルから動きベクトル計算）を示した図である。
【図７】３映像を上縦２列および下縦２列に配置した例を示した図である。
【図８】時間的に多重化される例（他のビデオオーディオチャンネルから動きベクトル計算）を示した図である。
【図９】空間的に多重化される例（当該ビデオオーディオチャンネルのみから動きベクトル計算）を示した図である。
【図１０】時間的に多重化される例（当該ビデオオーディオチャンネルのみから動きベクトル計算）を示した図である。
【図１１】空間的かつ時間的に多重化される例（空間方向は異なったビデオオーディオチャンネルから、時間方向は当該ビデオオーディオチャンネルのみから動きベクトル計算）を示した図である。
【図１２】本発明の第２の実施形態の映像音声記録装置の構成を示した機能ブロック図である。
【図１３】本発明の第２の実施形態の映像音声再生装置の構成を示した機能ブロック図である。
【図１４】複数ストリームデータの例を示した図である。
【発明を実施するための最良の形態】
【００２０】
（第１の実施形態）
図１を参照すると、本発明の第１の実施形態の映像音声記録装置は、Ａ／Ｄ変換部１０３と、ＭＵＸ部１０４と、ＭＰＥＧエンコーダ１０５と、記録フォーマット部１０６と、ＨＤＤレコーダ１０７と、ＤＶＤレコーダ１０８と、フォーマット決定・管理データ生成部１０９を含む。本実施形態の映像音声記録装置は、複数チャンネルビデオオーディオデータ（ストリームデータ）をＨＤＤまたはＤＶＤに記録するものである。
【００２１】
Ａ／Ｄ変換部１０３は、入力信号１０１（アナログのビデオオーディオ信号）を入力とし、この入力信号をＡ／Ｄ変換して、ＭＵＸ部１０４に出力する。入力信号１０１は、複数チャンネルビデオオーディオアナログ信号であり、入力１、入力２、・・・、入力ｎは、別々のチャンネルのビデオオーディオアナログ信号である。したがって、Ａ／Ｄ変換部１０３は、各チャンネルのビデオオーディオアナログ信号を個別にＡ／Ｄ変換する。Ａ／Ｄ変換部１０３は、Ｙ／Ｃ分離、フィルタなどを含めてもよい。
【００２２】
ＭＵＸ部１０４は、Ａ／Ｄ変換部１０３の出力を入力とし、フォーマット決定・管理データ生成部１０９の指定により、指定されたチャンネルのビデオオーディオディジタルデータを指定された方法で多重化する。多重化処理に関しては後述する。
【００２３】
ＭＰＥＧエンコーダ１０５は、ＭＵＸ部１０４により多重化されたビデオオーディオディジタルデータ（ストリームデータ）を入力とし、フォーマット決定・管理データ生成部１０９の指定により、ＭＰＥＧ圧縮方式にエンコードして、記録フォーマット部１０６に出力する。なお、本実施形態ではＭＰＥＧ圧縮方式を用いているが、それ以外の圧縮方式でもよく、非圧縮のままでもよい。なお、ＭＰＥＧエンコーダ１０５は、フォーマット決定・管理データ生成部１０９より、同じストリーム内の同じチャンネルのデータを使って圧縮するか、異なるチャンネルのデータを使って圧縮するかの指定も受ける。
【００２４】
記録フォーマット部１０６は、ＭＰＥＧエンコーダ１０５によりエンコードされたストリームデータを入力とし、フォーマット決定・管理データ生成部１０９の指定により、ＨＤＤまたはＤＶＤに対応したフォーマット化を行う。フォーマット化は、ＨＤＤ、ＤＶＤのビデオアプリケーションフォーマット、ファイルフォーマット、物理フォーマットにしたがった形で行われる。フォーマット化されたビデオオーディオデータは、ＨＤＤレコーダ１０７またはＤＶＤレコーダ１０８へ出力される。
【００２５】
ＨＤＤレコーダ１０７およびＤＶＤレコーダ１０８は、記録フォーマット部１０６から受け取ったストリームデータを、それぞれＨＤＤおよびＤＶＤに記録する。また、フォーマット決定・管理データ生成部１０９から受け取った管理データを、それぞれＨＤＤおよびＤＶＤに記録する。ＨＤＤおよびＤＶＤに記録されたデータは、両者間でダビングが行われるとともに、映像音声再生装置に読み出されると、再生信号１１０として出力される。再生信号１１０は、図１に示したように、ＨＤＤは再生信号１、ＤＶＤは再生信号２として出力してもよく、再生信号１と再生信号２を選択するセレクタを経由した後、１系統として出力してもよい。
【００２６】
フォーマット決定・管理データ生成部１０９は、制御信号１０２を入力とし、ＭＵＸ部１０４と、ＭＰＥＧエンコーダ１０５と、記録フォーマット部１０６に各種の指定を行う。制御信号１０２は、多重化を行うチャンネルと、多重化方法と、ＭＰＥＧ圧縮方法と、フォーマットを指定するユーザーオペレーションデータである。さらに、フォーマット決定・管理データ生成部１０９は、ＨＤＤレコーダ１０７およびＤＶＤレコーダ１０８に、多重化を行うチャンネルと、多重化方法と、ＭＰＥＧ圧縮方法と、フォーマットなどの情報を含んだ管理データを出力する。
【００２７】
図２を参照すると、入力信号２０３（図１の入力信号１０１に相当）を得るための構成が示されている。
【００２８】
チューナ２０２は、アンテナからのＲＦ入力信号２０１を入力とし、ＲＦ入力信号２０１の周波数を選別して、入力信号２０３を出力する。各チューナ２０２は、異なる周波数が選択されるものとする。入力信号２０３は、例えば、入力信号１がＮＨＫ（日本放送協会、東京では１チャンネル）、入力信号２がＮＴＶ、入力信号３がＴＢＳなど、入力信号ごとに異なるチャンネルのビデオオーディオアナログ信号である。
【００２９】
図３を参照すると、本発明の第１の実施形態の映像音声再生装置は、再生フォーマット解読部３０３と、ＭＰＥＧデコーダ３０４と、再生映像再構成部３０５と、Ｄ／Ａ変換部３０６と、管理データ解読・映像再構成方法決定部３０７を含む。本実施形態の映像音声再生装置は、複数チャンネルビデオオーディオデータ（ストリームデータ）をＨＤＤまたはＤＶＤから再生するものである。
【００３０】
再生フォーマット解読部３０３は、再生信号３０１を入力とし、再生信号３０１に含まれるストリームデータと管理データを分離し、ストリームデータをＭＰＥＧデコーダ３０４に出力し、管理データを管理データ解読・映像再構成方法決定部３０７に出力する。なお、再生信号３０１は、再生信号１１０と同じである。すなわち、ＨＤＤまたはＤＶＤから読み出されたものである。
【００３１】
ＭＰＥＧデコーダ３０４は、再生フォーマット解読部３０３から出力されたストリームデータを入力とし、このストリームデータをＭＰＥＧ圧縮方式でデコードする。なお、ＭＰＥＧ圧縮方式以外の圧縮方式で圧縮されたストリームは、その圧縮方式でデコードする。
【００３２】
再生映像再構成部３０５は、ＭＰＥＧデコーダ３０４の出力を入力とし、管理データ解読・映像再構成方法決定部３０７の指定により、デコードされたストリームデータの再構成を行う。再構成は多重化の逆演算処理である。再生映像再構成部３０５は、管理データ解読・映像再構成方法決定部３０７から、再構成された複数チャンネルビデオオーディオディジタルデータに関して、選択表示するチャンネル、表示位置などの表示方法の指定を受け、これに基づいて構成した再生映像データをＤ／Ａ変換部３０６に出力する。
【００３３】
Ｄ／Ａ変換部３０６は、再生映像再構成部３０５の出力を入力とし、これをアナログビデオオーディオ信号に変換する。Ｄ／Ａ変換部２０６は、ノイズリデューサ、フィルタなどを含めてもよい。Ｄ／Ａ変換部３０６は、出力信号３０８として、変換したアナログビデオオーディオ信号を出力する。
【００３４】
管理データ解読・映像再構成方法決定部３０７は、制御信号３０２と、再生フォーマット解読部３０３からの管理データを入力とし、再構成方法（すなわち、多重化されているチャンネル、多重化されている方法）と、再構成した複数チャンネルビデオオーディオデジタルデータに関して、選択表示するチャンネル、表示位置などの表示方法を再生映像再構成部３０５に指定する。制御信号３０２は、表示方法を指定するユーザーオペレーションデータである。
【００３５】
図４を参照すると、ＨＤＤレコーダ１０７またはＤＶＤレコーダ１０８が記録するストリームデータが示されている。図４は、プログラムストリームを示しているが、トランスポートストリームも同様である。
【００３６】
４０１は、プログラムストリームＰａｃｋであり、Ｐａｃｋ ｈｅａｄｅｒ ４０２と、ビデオオーディオＰａｃｋｅｔ ４０３から構成される。
【００３７】
図５を参照すると、管理データとストリームデータが示されている。
【００３８】
５０１が管理データである。ビデオ、オーディオからなるストリームデータに関するビデオ属性、オーディオ属性、圧縮時のＩピクチャーアドレスマップ、多重化方法などの管理データが、ストリームデータは別に、ディスク最内周などの管理データ領域に記録されてもよい。
【００３９】
５０２がストリームデータである。ストリームデータは、図４に示されたような、例えばＭＰＥＧ方式により圧縮されたビデオオーディオデータである。
【００４０】
次に、ＭＵＸ部１０４の多重化処理（再生映像再構成部３０５では、この多重化処理の逆演算処理として、再構成処理が行われる）に関して説明する。
【００４１】
図６を参照すると、複数チャンネルから１ストリームのビデオデータを構成する例（空間多重で、同じストリーム内の異なったビデオデータを使って圧縮を行う場合）が示されている。
【００４２】
６０１は、１チャンネルのビデオデータから１ストリーム（７２０画素×４８０ライン）を、通常のビデオデータとして構成している。
【００４３】
６０２は、２チャンネルのビデオデータ（各３５２画素×４８０ライン）を横に並べて１ストリームのビデオデータ（７０４画素×４８０ライン）を構成している。
【００４４】
６０３は、２チャンネルのビデオデータ（各７２０画素×２４０ライン）を縦に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４５】
６０４は、３チャンネルのビデオデータ（各２４０画素×４８０ライン）を横に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４６】
６０５は、３チャンネルのビデオデータ（各７２０画素×１６０ライン）を縦に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４７】
６０６は、４チャンネルのビデオデータ（各１７６画素×４８０ライン）を横に並べて１ストリームのビデオデータ（７０４画素×４８０ライン）を構成している。
【００４８】
６０７は、４チャンネルのビデオデータ（各７２０画素×１２０ライン）を縦に並べて１ストリームのビデオデータ（７２０画素×４８０ライン）を構成している。
【００４９】
６０８は、４チャンネルのビデオデータ（各３５２画素×２４０ライン）を縦横に並べて１ストリームのビデオデータ（７０４画素×４８０ライン）を構成している。
【００５０】
ここで、７０４画素の映像に関しては、ダミーデータを挿入することにより、７２０画素×４８０ラインとしてもいい。
【００５１】
また、画素／ライン方向とも整数分の１としてもいい。例えば、６チャンネルのビデオデータを縦に２つ、横に３つ並べて１ストリームのビデオデータを構成してもよい。
【００５２】
６０９は、ＭＰＥＧエンコーダ１０５でＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。６０２〜６０８において、６０９に示すように、同じストリーム内の異なったビデオデータを使って圧縮が行われている。したがって、最適な圧縮処理が行われるため全体の映像は高画質が得られるが、その反面、１ストリーム中の１ビデオデータのみ消去、編集などの処理が非常に困難となる。すなわち、１ストリーム全データをＭＰＥＧデコードし、１ビデオデータのみ消去、編集した後、再度１ストリームを構成してＭＰＥＧエンコードしなければならない。
【００５３】
６１０に、複数チャンネル記録のための管理データを示す。
【００５４】
フラグ１は、複数のビデオデータを空間的に配置するか、時間的に多重化するか示すフラグであり、例えば空間的に配置する場合は「１」、時間的に多重化する場合は「２」、空間的かつ時間的に多重化する場合は「３」とする。６０２〜６０８はすべて空間的に配置しているため、「１」である。６０１は、多重化を行っていないため、「０」としておく。
【００５５】
フラグ２〜フラグ４は、フラグ１が「１」または「３」のときに限って有効である。したがって、６０１では無効である。
【００５６】
フラグ２は、多重化後のデータにおいて、縦方向に多重化されているビデオデータ枚数である。６０２は１枚、６０３は２枚を示しており、以下同様である。
【００５７】
フラグ３は、多重化後のデータにおいて、横方向に多重化されているビデオデータ枚数である。６０２は２枚、６０３は１枚を示しており、以下同様である。
【００５８】
フラグ４は、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。６０２〜６０８では、すべて「１」のため、１つのビデオデータのみ消去、編集するためには１ストリーム全データのデコード、エンコードが必須となる。
【００５９】
図示していないが、それ以外にもフラグ１が「１」または「３」のときに対応した制御データが定義される。
【００６０】
例えば、「多重化ビデオデータ画素、ライン数」として、多重化するビデオデータ数がｎのとき、
・第１ビデオデータ画素数、ライン数
・第２ビデオデータ画素数、ライン数
‥‥‥‥‥
・第ｎビデオデータ画素数、ライン数
・ダミービデオデータ画素数、ライン数
を記録しておく。
【００６１】
これにより、画素数、ライン数が異なったビデオデータの多重化も可能となり、正常なデコード、表示も可能となる。
【００６２】
この場合、第１ビデオデータ、第２ビデオデータの順序は、上の段の左から右、さらにそれを上の壇から下の段のように、あらかじめ規定しておかなければならない。
【００６３】
例えば、図７に示すように、１画面が３ビデオストリームから構成されるとき、フラグ１〜フラグ４を、それぞれ「１」、「２」、「２」、「１」としておき、
・７０１の第１ビデオデータ画素数を「３５２」、ライン数を「３２０」
・７０２の第２ビデオデータ画素数を「３５２」、ライン数を「３２０」
・７０３の第３ビデオデータ画素数を「７０４」、ライン数を「１６０」
・７０４のダミービデオデータ画素数を「１６」、ライン数を「４８０」
とすることにより、第１、第２、第３ビデオデータを正常にデコード、表示可能となる。
【００６４】
また、同様に図示していないが、それ以外にもフラグ１が「１」または「３」のときに対応した制御データが定義される。
【００６５】
例えば、「予測ビデオデータナンバー」として、多重化するビデオデータ数がｎのとき、
・第１ビデオデータが、第２ビデオデータから予測されているか否か
・第１ビデオデータが、第３ビデオデータから予測されているか否か
‥‥‥‥‥
・第１ビデオデータが、第ｎビデオデータから予測されているか否か
・第２ビデオデータが、第１ビデオデータから予測されているか否か
・第２ビデオデータが、第３ビデオデータから予測されているか否か
‥‥‥‥‥
・第２ビデオデータが、第ｎビデオデータから予測されているか否か
・第ｎビデオデータが、第１ビデオデータから予測されているか否か
・第ｎビデオデータが、第２ビデオデータから予測されているか否か
‥‥‥‥‥
・第ｎビデオデータが、第（ｎ−１）ビデオデータから予測されているか否か
なるデータを記録しておく。
【００６６】
これにより、システムは、どこにも予測が使われていないデータを自由に消去、編集可能と判断できる。
【００６７】
次に、ビデオオーディオの多重化動作のうち、フラグ１が「２」の場合に関して説明する。
【００６８】
図８を参照すると、複数チャンネルから１ストリームのビデオデータを構成する例（時間多重で、同じストリーム内の異なったビデオデータを使って圧縮を行う場合）が示されている。
【００６９】
８０１は、２チャンネルのビデオデータ（各７２０画素×４８０ライン）を３フレームずつ時間方向に並べて１ストリームのビデオデータを構成している。
【００７０】
８０２は、３チャンネルのビデオデータ（各７２０画素×４８０ライン）を２フレームずつ時間方向に並べて１ストリームのビデオデータを構成している。
【００７１】
８０３は、４チャンネルのビデオデータ（各７２０画素×４８０ライン）を１フレームずつ時間方向に並べて１ストリームのビデオデータを構成している。
【００７２】
８０４は、２チャンネルのビデオデータ（各７２０画素×２４０ライン）を１フィールドずつ時間方向に並べて１ストリームのビデオデータを構成している。すなわち、トップフィールドを第１のビデオ、ボトムフィールドを第２のビデオとする。
【００７３】
８０５は、映像を時間方向に、フレームまたはフィールド単位で多重化することを示している。
【００７４】
８０６は、８０１〜８０３に関してはフレームナンバー、８０４に関してはフィールドナンバーを示している。
【００７５】
８０７は、６０９と同様に、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。８０１〜８０４において、８０７に示すように、同じストリーム内の異なったビデオデータを使って圧縮が行われる。
【００７６】
８０８は、複数チャンネル記録のための管理データを示す。
【００７７】
フラグ１は、複数のビデオデータを空間的に配置するか、時間的に多重化するか示すフラグであり、８０１〜８０４はすべて時間的に配置しているため、「２」である。
【００７８】
フラグ５〜フラグ８は、フラグ１が「２」または「３」のときに限って有効である。
【００７９】
フラグ５は、多重化後のデータにおいて、時間方向に多重化されているビデオデータ枚数である。８０１は２枚、８０２は３枚を示しており、以下同様である。
【００８０】
フラグ６は、多重化後のデータにおいて、各ビデオデータがフレーム単位で配置されているか、フィールド単位で配置されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。８０１〜８０３では「０」、８０４では「１」である。
【００８１】
フラグ７は、各ビデオデータが連続するフレームまたはフィールド数である。８０１では３フレーム連続後に切り替わり、８０２では２フレーム連続後に切り替り、以下同様である。
【００８２】
フラグ８は、フラグ４と同様に、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。８０１〜８０４では、すべて「１」のため、１つのビデオデータのみ消去、編集するためには１ストリーム全データのデコード、エンコードが必須となる。
【００８３】
図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」、「予測ビデオデータナンバー」などが考えられる。
【００８４】
図９を参照すると、ビデオオーディオの多重化動作のうち、フラグ１が「１」の場合における他の例（空間多重で、同じストリーム内の同じビデオデータのみを使って圧縮を行う場合）が示されている。
【００８５】
９０１は、６０１と同じ図を示している。
【００８６】
９０２は、６０２と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００８７】
９０３は、６０３と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００８８】
９０４は、６０４と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００８９】
９０５は、６０５と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９０】
９０６は、６０６と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９１】
９０７は、６０７と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９２】
９０８は、６０８と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【００９３】
ここで、７０４画素の映像に関しては、ダミーデータを挿入することにより、７２０画素×４８０ラインとしてもいい。
【００９４】
また、画素／ライン方向とも整数分の１としてもいい。例えば、６チャンネルのビデオデータを縦に２つ、横に３つ並べて１ストリームのビデオデータを構成してもよい。
【００９５】
９０９は、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。９０２〜９０８において、９０９に示すように、同じストリーム内の同じビデオデータを使って圧縮が行われる。したがって、全体の映像は最高画質が得られないかもしれないが、その反面、１ストリーム中の１ビデオデータのみ消去、編集などの処理が容易に実現できる。すなわち、１ストリーム中の１ビデオデータのみをＭＰＥＧデコード、消去、編集し、再度ＭＰＥＧエンコードした後、１ストリームを構成することが可能となる。
【００９６】
９１０に、複数チャンネル記録のための管理データを示す。
【００９７】
フラグ１〜フラグ３は、図６と同様である。
【００９８】
フラグ４は、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。９０２〜９０８では、すべて「０」のため、１つのビデオデータのみ消去、編集することが容易に可能である。このフラグ４を読み取って、１ストリーム中の１ビデオデータのみをＭＰＥＧデコード、消去する構成を映像音声再生装置に設けてもよい。
【００９９】
また、図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」などが考えられる。
【０１００】
図１０を参照すると、ビデオオーディオの多重化動作のうち、フラグ１が「２」の場合における他の例（時間多重で、同じストリーム内の同じビデオデータのみを使って圧縮を行う場合）が示されている。
【０１０１】
１００１は、８０１と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０２】
１００２は、８０２と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０３】
１００３は、８０３と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０４】
１００４は、８０４と同じビデオデータ構成だが、各チャンネルのビデオデータは、そのビデオデータのみから予測が行われる。すなわち、同じストリーム内の同じビデオデータのみを使って圧縮が行われる。
【０１０５】
１００５は、映像を時間方向に、フレームまたはフィールド単位で多重化することを示している。
【０１０６】
１００６は、１００１〜１００３に関してはフレームナンバー、１００４に関してはフィールドナンバーを示している。
【０１０７】
１００７は、８０７と同様に、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。１００１〜１００４において、１００７に示すように、同じストリーム内の同じビデオデータを使って圧縮が行われる。
【０１０８】
１００８に、複数チャンネル記録のための管理データを示す。
【０１０９】
フラグ１、フラグ５〜フラグ７は、図８と同様である。
【０１１０】
フラグ８は、フラグ４と同様に、多重化後のデータにおいて、１つのビデオデータがそのビデオデータのみから予測され、すなわち、動きベクトルなどが計算されているか、他のビデオデータにより予測され、すなわち、動きベクトルなどが計算されているかを示すフラグであり、前者のとき「０」、後者のとき「１」となる。１００１〜１００４では、すべて「０」のため、１つのビデオデータのみ消去、編集することが容易に可能である。
【０１１１】
また、図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」などが考えられる。
【０１１２】
次に、ビデオオーディオが空間、時間両方向に多重されている場合に関して説明する。
【０１１３】
図１１を参照すると、複数チャンネルから１ストリームのビデオデータを構成する例（空間多重および時間多重）が示されている。
【０１１４】
１１０１は、映像を空間および時間方向に、フレーム単位で多重化することを示している。
【０１１５】
１１０２は、フレームナンバーを示している。
【０１１６】
１１０３は、ＭＰＥＧ圧縮を行う場合の動きベクトルの計算例を示している。１１０３に示すように、同じフレーム内の他のビデオデータを使って圧縮が行われる例を示している。
【０１１７】
１１０４に、複数チャンネル記録のための管理データを示す。
【０１１８】
フラグ１は、ビデオオーディオが空間、時間両方向に多重されている場合として、「３」としている。
【０１１９】
フラグ２〜４は、図６と同様であり、フラグ５〜フラグ８は、図１０と同様である。
【０１２０】
フラグ４は、１つのビデオデータが空間方向のそのビデオデータのみから予測されているか、空間方向の他のビデオデータにより予測されているかを示すフラグであり、図１１では後者のため「１」である。
【０１２１】
フラグ８は、１つのビデオデータが時間方向のそのビデオデータのみから予測されているか、時間方向の他のビデオデータにより予測されているかを示すフラグであり、図１１では前者のため「０」である。
【０１２２】
フラグ９は、１つのビデオデータがそのビデオデータのみから予測されているか、空間時間方向の他のビデオデータにより予測されているかを示すフラグであり、図１１では後者のため「１」である。
【０１２３】
また、図示していない制御データとして、図６における場合と同様に、「多重化ビデオデータ画素、ライン数」、「予測ビデオデータナンバー」などが考えられる。
【０１２４】
（第２の実施形態）
以上、ＭＰＥＧエンコーダが１回路の場合に関して説明したが、次に、ＭＰＥＧエンコーダを複数搭載し、複数ビデオストリームを記録する場合に関して説明する。
【０１２５】
図１２を参照すると、本発明の第２の実施形態の映像音声記録装置は、Ａ／Ｄ変換部１２０３と、ＭＰＥＧエンコーダ１２０４と、スイッチ１２０５と、記録フォーマット部１２０６と、ＨＤＤレコーダ１２０７と、ＤＶＤレコーダ１２０８と、フォーマット決定・管理データ生成部１０９を含む。本実施形態の映像音声記録装置は、複数チャンネルビデオオーディオデータを複数ストリームでＨＤＤまたはＤＶＤに記録するものである。
【０１２６】
図１の第１の実施形態の映像音声記録装置と異なる点は、ＭＰＥＧエンコーダ１２０４が入力系統ごとに設けられ、フォーマット決定・管理データ生成部１２０９からの指定を受けないこと（本実施形態では、チャンネルごとにエンコードを行うため、他のチャンネルのデータを使ってエンコードを行うということがないため）、ＭＵＸ部１０４を含まないこと、その代わりにスイッチ１２０５を含むことである。なお、図１２では、各入力信号１２０１は、異なるビデオオーディオアナログ信号であるが、１つまたは複数の入力系統のＡ／Ｄ変換部１２０３とＭＰＥＧエンコーダ１２０４の組を省き、直接ディジタルストリームをスイッチ１２０５に入力する形態も考えられる。図１および図１２では、ＤＶＤフォーマットとして、ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲ、ＤＶＤ−Ｖｉｄｅｏが想定されているが、直接ディジタルストリームをスイッチ１２０５に入力する形態では、ＤＶＤ−ＳＲにも対応可能となる。
【０１２７】
Ａ／Ｄ変換部１２０３は、入力信号１２０１を入力として、これをＡ／Ｄ変換し、ＭＰＥＧエンコーダ１２０４に出力する。ＭＰＥＧエンコーダ１２０４は、Ａ／Ｄ変換部１２０３の出力を入力として、これをＭＰＥＧエンコードする。
【０１２８】
スイッチ１２０５は、ＭＰＥＧエンコーダ１２０４の出力を入力とし、フォーマット決定・管理データ生成部１０９からの指定により、ＭＰＥＧエンコーダ１２０４からのストリームデータを選択する。
【０１２９】
記録フォーマット部１２０６は、図１の第１の実施形態と同様にフォーマットを行い、フォーマットされたデータをＨＤＤレコーダ１２０７およびＤＶＤレコーダ１２０８に出力する。
【０１３０】
フォーマット決定・管理データ生成部１２０９は、制御信号を入力として、スイッチ１２０５に選択するストリームを指定し、ＨＤＤレコーダ１２０７およびＤＶＤレコーダ１２０８に、選択したストリームの情報を含む管理データを出力する。制御信号１２０２は、多重化するチャンネル（図１２の場合、１つのチャンネルのデータが１つのストリームデータに対応するので、多重化するチャンネルの指定は、ストリームデータの選択と同じである）と、フォーマットなどを指定するユーザーオペレーションデータである。
【０１３１】
図１３を参照すると、本発明の第２の実施形態の映像音声再生装置は、再生フォーマット解読部１３０３と、デコードストリーム選択部１３０４、ＭＰＥＧデコーダ１３０５と、再生映像再構成部１３０６と、Ｄ／Ａ変換部１３０７と、管理データ解読・映像再構成方法決定部１３０８を含む。本実施形態の映像音声再生装置は、複数チャンネルの複数ストリームデータをＨＤＤまたはＤＶＤから再生するものである。
【０１３２】
図１の第１の実施形態の映像音声再生装置と異なる点は、デコードストリーム選択部１３０４が設けられていること、再生映像再構成部１３０６は、再構成処理（多重化処理の逆演算処理）は行わず、画面表示のための再生映像再構成のみを行うことである。
【０１３３】
再生フォーマット解読部１３０３は、再生信号１３０１を入力とし、デコードストリーム選択部１３０４に複数ストリームデータを出力し、管理データ解読・映像再構成方法決定部１３０８に管理データを出力する。再生信号１３０１は再生信号１２１０に相当する。
【０１３４】
デコードストリーム選択部１３０４は、管理データ解読・映像再構成方法決定部１３０８の指定により、デコードするストリームデータを選択する。選択したストリームデータをＭＰＥＧデコーダに出力する。ＭＰＥＧデコーダ１３０５は、このデータをデコードして、再生映像再構成部１３０６に出力する。
【０１３５】
再生映像再構成部１３０６は、管理データ解読・映像再構成方法決定部１３０８から表示方法の指定を受け、再生映像を再構成する。再構成したデータをＤ／Ａ変換部１３０７に出力する。Ｄ／Ａ変換部１３０７は、このデータをＤ／Ａ変換し、出力信号１３０９として、ビデオオーディオアナログ信号を出力する。
【０１３６】
管理データ解読・映像再構成方法決定部１３０８は、制御信号１３０２と、再生フォーマット解読部１３０３の出力である管理データを入力とし、デコードストリーム選択部１３０４に選択するストリームの指定、再生映像再構成部１３０６に表示方法の指定を行う。制御信号１３０２は、選択するストリームと表示方法を指定するユーザーオペレーションデータである。
【０１３７】
図１４を参照すると、複数ストリームの例が示されている。
【０１３８】
１４０１がＴＳ Ｐａｃｋ、１４０２がＴＳ ｈｅａｄｅｒ、１４０３がＰａｙｌｏａｄである。図示したように、ＭＰＥＧの場合、複数ストリームデータはＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）とする。ＴＳは、ＴＳ Ｐａｃｋ１４０１からなり、ＴＳはストリームごとにＴＳ ｈｅａｄｅｒ１４０２、Ｐａｙｌｏａｄ１４０３からなる。
【０１３９】
ストリーム数が３のとき、図のように、ＴＳ Ｐａｃｋ１４０１単位で、ストリーム１、ストリーム２、ストリーム３から構成される。各ストリームが１個のビデオオーディオチャンネルとなる。
【０１４０】
この複数ストリームが、図５のストリームデータと対応する。
【０１４１】
（第３の実施形態）
本発明の第３の実施形態の映像音声記録装置として、第１の実施形態の映像音声記録装置と第２の実施形態の映像音声記録装置が組み合わされた形態が考えられる。すなわち、図１２の第２の実施形態の映像音声記録装置の１つまたは複数の入力系統のＡ／Ｄ変換部１２０３とＭＰＥＧエンコーダ１２０４が、図１の第１の実施形態の映像音声記録装置のＡ／Ｄ変換部１０３とＭＵＸ部１０４とＭＰＥＧエンコーダ１０５に入れ替わった形態である。
【０１４２】
本発明の第３の実施形態の映像音声記録装置によって、複数ストリームのうち、１つまたは複数のストリームに複数チャンネルのビデオオーディオデータが多重化された複数ストリームデータをＨＤＤまたはＤＶＤに記録することが可能となる。
【０１４３】
さらに、本発明の第３の実施形態の映像音声再生装置として、第１の実施形態の映像音声再生装置と第２の実施形態の映像音声再生装置が組み合わされた形態が考えられる。この場合、再生する複数ストリームのうち、１つまたは複数のストリームに複数チャンネルのビデオオーディオデータが多重化されている。したがって、図１３の第２の実施形態の映像音声再生装置において、再生映像再構成部１３０６は、１つのストリームに多重化された複数チャンネルのビデオオーディオデータを再構成化する、図３の再生映像再構成部３０５と同様の機能を有していなければならない。
【０１４４】
なお、１つまたは複数の入力系統のＡ／Ｄ変換部とＭＰＥＧエンコーダの組を省き、直接ディジタルストリームをスイッチに入力するようにすると、本実施形態においても、ＤＶＤフォーマットとして、ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲ、ＤＶＤ−Ｖｉｄｅｏだけでなく、ＤＶＤ−ＳＲにも対応可能となる。
【０１４５】
次に、複数ストリーム、かつ、一部のストリームにも複数チャンネルが配置されたときのことを考慮した管理データの例を示す。
【０１４６】
圧縮方式はＭＰＥＧを適用するものとし、ＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅｓ）をＶＯＢＵ（Ｖｉｄｅｏ Ｏｂｊｅｃｔ
Ｕｎｉｔ）として、ＶＯＢＵごとに以下の管理データを定義する。
【０１４７】
・Ｍｕｌｔｉ＿ｒｅｃ（１ビット）
０：１ストリーム１チャンネルビデオオーディオ記録時
１：複数ストリームまたは複数チャンネルビデオオーディオ記録時
Ｍｕｌｔｉ＿ｒｅｃ：０のとき終了、１のとき以下が続く。
【０１４８】
・Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ（２ビット）
００：保留または禁止
０１：１ストリーム、かつ、その中に複数チャンネルビデオオーディオを含むストリームあり
１０：複数ストリーム、かつ、その中の全ストリームがそれぞれ１チャンネルビデオオーディオ
１１：複数ストリーム、かつ、その中に複数チャンネルビデオオーディオを含むストリームあり。
【０１４９】
・Ｓｔｒ＿ｎｒ（８ビット）
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：００または０１のとき、保留（００Ｈ）、このときストリーム数ｍ＝１
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：１０または１１のとき、複数ストリームにおけるストリーム数（ｍストリーム）。
【０１５０】
・Ｍｕｌｔｉ＿ｃｈａ＿ｄａｔａ ＃ｉ（１≦ｉ≦ｍ）
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：００のとき、保留（００Ｈ）
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：０１のとき、第１ストリームにおけるビデオオーディオチャンネルデータ
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：１０のとき、第ｉストリームにおけるビデオオーディオチャンネルデータ
Ｍｕｌｔｉ＿Ｓｔｒ＿ｃｈａ：１１のとき、第ｉストリームにおけるビデオオーディオチャンネルデータ
Ｍｕｌｔｉ＿ｃｈａ＿ｄａｔａ ＃ｉ。
【０１５１】
・Ｃｈａ＿ｎｒ（８ビット）
第ｉストリームにおけるビデオオーディオチャンネル数（ｎチャンネル）。
【０１５２】
・Ｓｐｔｔｅｍｐ＿ｆｇ（２ビット）
第ｉストリームにおけるマルチビデオオーディオチャンネル配置方法
０：１チャンネル
１：複数チャンネル、空間的に多重
２：複数チャンネル、時間的に多重
３：複数チャンネル、空間的かつ時間的に多重。
【０１５３】
・Ｃｌｍｎ＿ｖｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：１、３のとき、縦（行）方向のビデオチャンネル数
Ｓｐｔｔｅｍｐ＿ｆｇ：０、２のとき、保留（０Ｈ）。
【０１５４】
・Ｒｏｗ＿ｖｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：１、３のとき、横（列）方向のビデオチャンネル数
Ｓｐｔｔｅｍｐ＿ｆｇ：０、２のとき、保留（０Ｈ）。
【０１５５】
・Ｓｐｔ＿ｄｅｔ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：１、３のとき、映像圧縮における予測範囲
０：空間方向に関して、当該ビデオチャンネル内でのみ予測
１：空間方向に関して、当該ビデオチャンネル、およびそれ以外のビデオチャンネルから予測
Ｓｐｔｔｅｍｐ＿ｆｇ：０、２のとき、のとき、保留（０Ｈ）。
【０１５６】
・ｔｍｐ＿ｖｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、時間方向のビデオチャンネル数
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１５７】
・ｆｒｍｆｌｄ＿ｆｇ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、複数チャンネルビデオオーディオを配置する単位
０：フレーム単位で配置 １：フィールド単位で配置
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１５８】
・ｒｐｔ＿ｎｒ（４ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、複数チャンネルビデオオーディオを配置するフレーム／フィールド数
何フレーム、または何フィールドごとに配置するか
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１５９】
・Ｔｍｐ＿ｄｅｔ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：２、３のとき、映像圧縮における予測範囲
０：時間方向に関して、当該ビデオチャンネル内でのみ予測
１：時間方向に関して、当該ビデオチャンネル、およびそれ以外のビデオチャンネルから予測
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１のとき、保留（０Ｈ）。
【０１６０】
・Ｔｏｔａｌ＿ｄｅｔ（１ビット）
Ｓｐｔｔｅｍｐ＿ｆｇ：３のとき、映像圧縮における予測範囲
０：空間時間両方向に関して、当該ビデオチャンネル内でのみ予測
１：空間時間両方向に関して、当該ビデオチャンネル、およびそれ以外のビデオチャンネルから予測
Ｓｐｔｔｅｍｐ＿ｆｇ：０、１、２のとき、保留（０Ｈ）。
【０１６１】
・ｃｈａｖｄ＿ｆｇ（１ビット）
以下に示すＣｈａｎｎｅｌ＿ｄａｔａ無効時：０／有効時：１
ｃｈａｖｄ＿ｆｇ：０のとき終了、１のとき以下が続く。
【０１６２】
・Ｃｈａｎｎｅｌ＿ｄａｔａ ＃ｊ（１≦ｊ≦ｎ）
チャンネル当たりのデータ
Ｃｈａｎｎｅｌ＿ｄａｔａ ＃ｊ。
【０１６３】
・Ｐｅｌ＿ｐｏｓ（１６ビット）
第ｊチャンネルデータ左上画素の横方向の画素開始位置。
【０１６４】
・Ｌｉｎｅ＿ｐｏｓ（１６ビット）
第ｊチャンネルデータの横方向の画素数。
【０１６５】
・Ｐｅｌ＿ｎｒ（１６ビット）
第ｊチャンネルデータ左上画素の縦方向のライン開始位置。
【０１６６】
・Ｐｅｌ＿ｐｏｓ（１６ビット）
第ｊチャンネルデータの縦方向のライン数。
【０１６７】
・ｆｏｒｅｃａｓｔ＿ｆｇ ＃１
第ｊチャンネルデータの予測に、第１チャンネルデータを未使用：０／使用：１
・ｆｏｒｅｃａｓｔ＿ｆｇ ＃２
第ｊチャンネルデータの予測に、第２チャンネルデータを未使用：０／使用：１
：
：
・ｆｏｒｅｃａｓｔ＿ｆｇ ＃ｎ
第ｊチャンネルデータの予測に、第ｎチャンネルデータを未使用：０／使用：１。
【０１６８】
以上例を示したが、ラベル名、ビット数、データ配置順は例示したものと同じでなくてもよく、また例示した全データが存在しなくても、その一部だけが存在してもいい。保留データは、「０」以外の値でもいい。
【０１６９】
管理データは、ＶＯＢＵ単位で発生、記録する例を示しているが、それに限らず、複数ＶＯＢＵなどもっと大きい単位でも、ＶＯＢＵ未満の小さい単位でもいい。
【０１７０】
また、これらの管理データが記録媒体に記録されたときの、開始アドレス、終了アドレス、データ長が、適宜記録されてもいい。
【０１７１】
また、管理データは、管理データ領域ではなく、ユーザデータ領域に記録されてもいい。あるいは、管理データ領域に加え、ユーザデータ領域に記録されてもいい。
【０１７２】
なお、記録装置と再生装置は別々のものとして説明したが、当然一体型のものでもよい。
【特許請求の範囲】
【請求項１】
複数チャンネルのビデオオーディオデータを多重化したストリームデータを記録媒体に記録する映像音声記録装置であって、
ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成および出力し、該多重化情報から構成された管理データを生成および出力する第１の手段と、
前記第１の手段が出力した多重化情報を受信し、該多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化する第２の手段と、
前記第１の手段が出力した管理データを受信し、該管理データを記録媒体に記録する第３の手段を有する映像音声記録装置。
【請求項２】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的に多重化するための情報である、請求項１に記載の映像音声記録装置。
【請求項３】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを時間的に多重化するための情報である、請求項１に記載の映像音声記録装置。
【請求項４】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的および時間的に多重化するための情報である、請求項１に記載の映像音声記録装置。
【請求項５】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータにダミーデータを多重化するための情報をさらに含む、請求項２から４のいずれか１項に記載の映像音声記録装置。
【請求項６】
前記第１の手段は、ユーザからの入力にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するための圧縮化情報を生成および出力し、該圧縮化情報から構成された管理データを生成および出力する手段をさらに有し、
前記第１の手段が出力した圧縮化情報を受信し、該圧縮化情報にもとづいて、前記第２の手段から受信した多重化された複数チャンネルのビデオオーディオデータを圧縮する第４の手段をさらに有する、請求項１から５のいずれか１項に記載の映像音声記録装置。
【請求項７】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の他のチャンネルのビデオオーディオデータを用いて圧縮するための情報である、請求項６に記載の映像音声記録装置。
【請求項８】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の同じチャンネルのビデオオーディオデータのみを用いて圧縮するための情報である、請求項６に記載の映像音声記録装置。
【請求項９】
前記第１の手段は、記録媒体に管理データ領域を設け、該管理データ領域に前記管理データを記録するよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１から８のいずれか１項に記載の映像音声記録装置。
【請求項１０】
前記第１の手段は、ストリームデータ中のユーザデータ領域に前記管理データを含めるよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１から８のいずれか１項に記載の映像音声記録装置。
【請求項１１】
請求項１から１０のいずれか１項に記載の映像音声記録装置の前記第３の手段によって前記管理データが記録された、コンピュータ読み取りが可能なデータ記録媒体。
【請求項１２】
請求項１１に記載のデータ記録媒体に記録された情報を読み取って、映像音声を再生する映像音声再生装置であって、
請求項１１に記載のデータ記録媒体から読み出された情報を、前記管理データと、複数チャンネルのビデオオーディオデータが多重化されたストリームデータに分離し、それぞれを出力する第５の手段と、
前記第５の手段が出力した管理データを受信し、該管理データにもとづいて、ストリームデータの多重化を解くための再構成化情報を生成および出力する第６の手段と、
前記第６の手段が出力した再構成化情報を受信し、入力されたストリームデータの多重化を解く第７の手段を有する映像音声再生装置。
【請求項１３】
前記第６の手段は、ユーザからの入力にもとづいて、多重化を解いた後の複数チャンネルのビデオオーディオデータを表示するための表示情報を生成および出力する手段をさらに有し、
前記第７の手段は、前記第６の手段が出力した表示情報を受信し、該表示情報にもとづいて、多重化を解いた後の複数チャンネルのビデオオーディオデータを表示用に構成する手段をさらに有する、請求項１２に記載の映像音声再生装置。
【請求項１４】
請求項１１に記載のデータ記録媒体から読み取られたストリームデータが、同じチャンネルのビデオオーディオデータのみを用いて圧縮されている場合、該ストリームデータ中の所望のビデオオーディオデータのみを解凍、編集、または消去する第８の手段をさらに有する、請求項１２または１３に記載の映像音声再生装置。
【請求項１５】
複数の異なるビデオオーディオストリームデータを記録媒体に記録する映像音声記録装置であって、
ユーザからの入力にもとづいて、入力された複数のビデオオーディオデータストリームの中から記録を行う複数の異なるビデオオーディオストリームデータを選択するための記録選択情報を生成および出力し、該記録選択情報から構成された管理データを生成および出力する第１の手段と、
前記第１の手段が出力した記録選択情報を受信し、該記録選択情報にもとづいて、入力された複数のビデオオーディオストリームデータの中から記録を行う複数の異なるビデオオーディオストリームデータを選択する第２の手段と、
前記第１の手段が出力した管理データを受信し、該管理データを記録媒体に記録する第３の手段を有する映像音声記録装置。
【請求項１６】
前記第１の手段は、記録媒体に管理データ領域を設け、該管理データ領域に前記管理データを記録するよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１５に記載の映像音声記録装置。
【請求項１７】
前記第１の手段は、ストリームデータ中のユーザデータ領域に前記管理データを含めるよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１５に記載の映像音声記録装置。
【請求項１８】
請求項１５から１７のいずれか１項に記載の映像音声記録装置の前記第３の手段によって前記管理データが記録された、コンピュータ読み取りが可能なデータ記録媒体。
【請求項１９】
請求項１８に記載のデータ記録媒体に記録された情報を読み取って、映像音声を再生する映像音声再生装置であって、
請求項１８に記載のデータ記録媒体から読み出された情報を、前記管理データと、ビデオオーディオストリームデータに分離し、それぞれを出力する第４の手段と、
前記第４の手段が出力した管理データを受信し、該管理データとユーザからの入力にもとづいて、再生を行うビデオオーディオストリームデータを選択するため再生選択情報を生成および出力する第５の手段と、
前記第５の手段が出力した再生選択情報にもとづいて、再生するビデオオーディオストリームデータを選択する第６の手段を有する映像音声再生装置。
【請求項２０】
前記第５の手段は、ユーザからの入力にもとづいて、前記第６の手段によって選択された後のビデオオーディオデータストリームを表示するための表示情報を生成および出力する手段をさらに有し、
前記第５の手段が出力した表示情報を受信し、該表示情報にもとづいて、前記第６の手段によって選択された後のビデオオーディオストリームデータを表示用に構成する第７の手段をさらに有する、請求項１９に記載の映像音声再生装置。
【請求項２１】
１つまたは複数のチャンネルのビデオオーディオデータを多重化した複数のビデオオーディオストリームデータを、記録媒体に一緒に記録する映像音声記録装置であって、
ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成および出力し、該多重化情報から構成された管理データを生成および出力する第１の手段と、
前記第１の手段が出力した多重化情報を受信し、該多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化する第２の手段と、
ユーザからの入力にもとづいて、前記第２の手段により多重化された複数のビデオオーディオストリームデータの中から、記録を行う複数の異なるビデオオーディオストリームデータを選択するための記録選択情報を生成および出力し、該記録選択情報から構成された管理データを生成および出力する第３の手段と、
前記第３の手段が出力した記録選択情報を受信し、該記録選択情報にもとづいて、多重化された複数のビデオオーディオストリームデータの中から、記録を行う複数の異なるビデオオーディオストリームデータを選択する第４の手段と、
前記第１の手段および前記第３の手段が出力した管理データを受信し、該管理データを記録媒体に記録する第５の手段を有する映像音声記録装置。
【請求項２２】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的に多重化するための情報である、請求項２１に記載の映像音声記録装置。
【請求項２３】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを時間的に多重化するための情報である、請求項２１に記載の映像音声記録装置。
【請求項２４】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的および時間的に多重化するための情報である、請求項２１に記載の映像音声記録装置。
【請求項２５】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータにダミーデータを多重化するための情報をさらに含む、請求項２２から２４のいずれか１項に記載の映像音声記録装置。
【請求項２６】
前記第１の手段は、ユーザからの入力にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するための圧縮化情報を生成および出力し、該圧縮化情報から構成された管理データを生成および出力する手段をさらに有し、
前記第１の手段が出力した圧縮化情報を受信し、該圧縮化情報にもとづいて、前記第２の手段から受信した多重化された複数チャンネルのビデオオーディオデータを圧縮する第６の手段をさらに有する、請求項２１から２５のいずれか１項に記載の映像音声記録装置。
【請求項２７】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の他のチャンネルのビデオオーディオデータを用いて圧縮するための情報である、請求項２６に記載の映像音声記録装置。
【請求項２８】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の同じチャンネルのビデオオーディオデータのみを用いて圧縮するための情報である、請求項２６に記載の映像音声記録装置。
【請求項２９】
前記第１の手段および前記第３の手段は、記録媒体に管理データ領域を設け、該管理データ領域に前記管理データを記録するよう命令する旨の信号を前記第５の手段に送信する手段をさらに有する、請求項２１から２８のいずれか１項に記載の映像音声記録装置。
【請求項３０】
前記第１の手段および前記第３の手段は、ストリームデータ中のユーザデータ領域に前記管理データを含めるよう命令する旨の信号を前記第５の手段に送信する手段をさらに有する、請求項２１から２８のいずれか１項に記載の映像音声記録装置。
【請求項３１】
請求項２１から３０のいずれか１項に記載の映像音声記録装置の前記第５の手段によって前記管理データが記録された、コンピュータ読み取りが可能なデータ記録媒体。
【請求項３２】
請求項３１に記載のデータ記録媒体に記録された情報を読み取って、映像音声を再生する映像音声再生装置であって、
請求項３１に記載のデータ記録媒体から読み出された情報を、前記管理データと、ビデオオーディオストリームデータに分離し、それぞれを出力する第７の手段と、
前記第７の手段が出力した管理データを受信し、該管理データとユーザからの入力にもとづいて、再生を行うビデオオーディオストリームデータを選択するため再生選択情報を生成および出力する第８の手段と、
前記第５の手段が出力した再生選択情報にもとづいて、再生するビデオオーディオストリームデータを選択する第９の手段と、
前記第７の手段が出力した管理データを受信し、該管理データにもとづいて、複数のチャンネルのビデオオーディオデータが多重化されているビデオオーディオストリームデータの多重化を解くための再構成化情報を生成および出力する第１０の手段と、
前記第１０の手段が出力した再構成化情報を受信し、前記第９の手段によって選択された、複数のチャンネルのビデオオーディオデータが多重化されているビデオオーディオストリームデータの多重化を解く第１１の手段を有する映像音声再生装置。
【請求項３３】
前記第１０の手段は、ユーザからの入力にもとづいて、前記第９の手段によって選択され、前記第１１の手段によって多重化を解かれた後のビデオオーディオストリームデータを表示するための表示情報を生成および出力する手段をさらに有し、
前記第１０の手段が出力した表示情報を受信し、該表示情報にもとづいて、前記第９の手段によって選択され、前記第１１の手段によって多重化を解かれた後のビデオオーディオストリームデータを表示用に構成する第１２の手段をさらに有する、請求項３２に記載の映像音声再生装置。
【請求項３４】
請求項３１に記載のデータ記録媒体から読み取られた、複数のチャンネルのビデオオーディオデータが多重化されているビデオオーディオストリームデータが、同じチャンネルのビデオオーディオデータのみを用いて圧縮されている場合、該ビデオオーディオストリームデータ中の所望のビデオオーディオデータのみを解凍、編集、または消去する第１３の手段をさらに有する、請求項３２または３３に記載の映像音声再生装置。
【請求項１】
複数チャンネルのビデオオーディオデータを多重化したストリームデータを記録媒体に記録する映像音声記録装置であって、
ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成および出力し、該多重化情報から構成された管理データを生成および出力する第１の手段と、
前記第１の手段が出力した多重化情報を受信し、該多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化する第２の手段と、
前記第１の手段が出力した管理データを受信し、該管理データを記録媒体に記録する第３の手段を有する映像音声記録装置。
【請求項２】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的に多重化するための情報である、請求項１に記載の映像音声記録装置。
【請求項３】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを時間的に多重化するための情報である、請求項１に記載の映像音声記録装置。
【請求項４】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的および時間的に多重化するための情報である、請求項１に記載の映像音声記録装置。
【請求項５】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータにダミーデータを多重化するための情報をさらに含む、請求項２から４のいずれか１項に記載の映像音声記録装置。
【請求項６】
前記第１の手段は、ユーザからの入力にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するための圧縮化情報を生成および出力し、該圧縮化情報から構成された管理データを生成および出力する手段をさらに有し、
前記第１の手段が出力した圧縮化情報を受信し、該圧縮化情報にもとづいて、前記第２の手段から受信した多重化された複数チャンネルのビデオオーディオデータを圧縮する第４の手段をさらに有する、請求項１から５のいずれか１項に記載の映像音声記録装置。
【請求項７】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の他のチャンネルのビデオオーディオデータを用いて圧縮するための情報である、請求項６に記載の映像音声記録装置。
【請求項８】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の同じチャンネルのビデオオーディオデータのみを用いて圧縮するための情報である、請求項６に記載の映像音声記録装置。
【請求項９】
前記第１の手段は、記録媒体に管理データ領域を設け、該管理データ領域に前記管理データを記録するよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１から８のいずれか１項に記載の映像音声記録装置。
【請求項１０】
前記第１の手段は、ストリームデータ中のユーザデータ領域に前記管理データを含めるよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１から８のいずれか１項に記載の映像音声記録装置。
【請求項１１】
請求項１から１０のいずれか１項に記載の映像音声記録装置の前記第３の手段によって前記管理データが記録された、コンピュータ読み取りが可能なデータ記録媒体。
【請求項１２】
請求項１１に記載のデータ記録媒体に記録された情報を読み取って、映像音声を再生する映像音声再生装置であって、
請求項１１に記載のデータ記録媒体から読み出された情報を、前記管理データと、複数チャンネルのビデオオーディオデータが多重化されたストリームデータに分離し、それぞれを出力する第５の手段と、
前記第５の手段が出力した管理データを受信し、該管理データにもとづいて、ストリームデータの多重化を解くための再構成化情報を生成および出力する第６の手段と、
前記第６の手段が出力した再構成化情報を受信し、入力されたストリームデータの多重化を解く第７の手段を有する映像音声再生装置。
【請求項１３】
前記第６の手段は、ユーザからの入力にもとづいて、多重化を解いた後の複数チャンネルのビデオオーディオデータを表示するための表示情報を生成および出力する手段をさらに有し、
前記第７の手段は、前記第６の手段が出力した表示情報を受信し、該表示情報にもとづいて、多重化を解いた後の複数チャンネルのビデオオーディオデータを表示用に構成する手段をさらに有する、請求項１２に記載の映像音声再生装置。
【請求項１４】
請求項１１に記載のデータ記録媒体から読み取られたストリームデータが、同じチャンネルのビデオオーディオデータのみを用いて圧縮されている場合、該ストリームデータ中の所望のビデオオーディオデータのみを解凍、編集、または消去する第８の手段をさらに有する、請求項１２または１３に記載の映像音声再生装置。
【請求項１５】
複数の異なるビデオオーディオストリームデータを記録媒体に記録する映像音声記録装置であって、
ユーザからの入力にもとづいて、入力された複数のビデオオーディオデータストリームの中から記録を行う複数の異なるビデオオーディオストリームデータを選択するための記録選択情報を生成および出力し、該記録選択情報から構成された管理データを生成および出力する第１の手段と、
前記第１の手段が出力した記録選択情報を受信し、該記録選択情報にもとづいて、入力された複数のビデオオーディオストリームデータの中から記録を行う複数の異なるビデオオーディオストリームデータを選択する第２の手段と、
前記第１の手段が出力した管理データを受信し、該管理データを記録媒体に記録する第３の手段を有する映像音声記録装置。
【請求項１６】
前記第１の手段は、記録媒体に管理データ領域を設け、該管理データ領域に前記管理データを記録するよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１５に記載の映像音声記録装置。
【請求項１７】
前記第１の手段は、ストリームデータ中のユーザデータ領域に前記管理データを含めるよう命令する旨の信号を前記第３の手段に送信する手段をさらに有する、請求項１５に記載の映像音声記録装置。
【請求項１８】
請求項１５から１７のいずれか１項に記載の映像音声記録装置の前記第３の手段によって前記管理データが記録された、コンピュータ読み取りが可能なデータ記録媒体。
【請求項１９】
請求項１８に記載のデータ記録媒体に記録された情報を読み取って、映像音声を再生する映像音声再生装置であって、
請求項１８に記載のデータ記録媒体から読み出された情報を、前記管理データと、ビデオオーディオストリームデータに分離し、それぞれを出力する第４の手段と、
前記第４の手段が出力した管理データを受信し、該管理データとユーザからの入力にもとづいて、再生を行うビデオオーディオストリームデータを選択するため再生選択情報を生成および出力する第５の手段と、
前記第５の手段が出力した再生選択情報にもとづいて、再生するビデオオーディオストリームデータを選択する第６の手段を有する映像音声再生装置。
【請求項２０】
前記第５の手段は、ユーザからの入力にもとづいて、前記第６の手段によって選択された後のビデオオーディオデータストリームを表示するための表示情報を生成および出力する手段をさらに有し、
前記第５の手段が出力した表示情報を受信し、該表示情報にもとづいて、前記第６の手段によって選択された後のビデオオーディオストリームデータを表示用に構成する第７の手段をさらに有する、請求項１９に記載の映像音声再生装置。
【請求項２１】
１つまたは複数のチャンネルのビデオオーディオデータを多重化した複数のビデオオーディオストリームデータを、記録媒体に一緒に記録する映像音声記録装置であって、
ユーザからの入力にもとづいて、複数チャンネルのビデオオーディオデータを多重化するための多重化情報を生成および出力し、該多重化情報から構成された管理データを生成および出力する第１の手段と、
前記第１の手段が出力した多重化情報を受信し、該多重化情報にもとづいて、入力された複数チャンネルのビデオオーディオデータを多重化する第２の手段と、
ユーザからの入力にもとづいて、前記第２の手段により多重化された複数のビデオオーディオストリームデータの中から、記録を行う複数の異なるビデオオーディオストリームデータを選択するための記録選択情報を生成および出力し、該記録選択情報から構成された管理データを生成および出力する第３の手段と、
前記第３の手段が出力した記録選択情報を受信し、該記録選択情報にもとづいて、多重化された複数のビデオオーディオストリームデータの中から、記録を行う複数の異なるビデオオーディオストリームデータを選択する第４の手段と、
前記第１の手段および前記第３の手段が出力した管理データを受信し、該管理データを記録媒体に記録する第５の手段を有する映像音声記録装置。
【請求項２２】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的に多重化するための情報である、請求項２１に記載の映像音声記録装置。
【請求項２３】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを時間的に多重化するための情報である、請求項２１に記載の映像音声記録装置。
【請求項２４】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータを空間的および時間的に多重化するための情報である、請求項２１に記載の映像音声記録装置。
【請求項２５】
前記第１の手段が生成する多重化情報は、複数チャンネルのビデオオーディオデータにダミーデータを多重化するための情報をさらに含む、請求項２２から２４のいずれか１項に記載の映像音声記録装置。
【請求項２６】
前記第１の手段は、ユーザからの入力にもとづいて、多重化された複数チャンネルのビデオオーディオデータを圧縮するための圧縮化情報を生成および出力し、該圧縮化情報から構成された管理データを生成および出力する手段をさらに有し、
前記第１の手段が出力した圧縮化情報を受信し、該圧縮化情報にもとづいて、前記第２の手段から受信した多重化された複数チャンネルのビデオオーディオデータを圧縮する第６の手段をさらに有する、請求項２１から２５のいずれか１項に記載の映像音声記録装置。
【請求項２７】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の他のチャンネルのビデオオーディオデータを用いて圧縮するための情報である、請求項２６に記載の映像音声記録装置。
【請求項２８】
前記第１の手段が生成する圧縮化情報は、同じストリームデータ中の同じチャンネルのビデオオーディオデータのみを用いて圧縮するための情報である、請求項２６に記載の映像音声記録装置。
【請求項２９】
前記第１の手段および前記第３の手段は、記録媒体に管理データ領域を設け、該管理データ領域に前記管理データを記録するよう命令する旨の信号を前記第５の手段に送信する手段をさらに有する、請求項２１から２８のいずれか１項に記載の映像音声記録装置。
【請求項３０】
前記第１の手段および前記第３の手段は、ストリームデータ中のユーザデータ領域に前記管理データを含めるよう命令する旨の信号を前記第５の手段に送信する手段をさらに有する、請求項２１から２８のいずれか１項に記載の映像音声記録装置。
【請求項３１】
請求項２１から３０のいずれか１項に記載の映像音声記録装置の前記第５の手段によって前記管理データが記録された、コンピュータ読み取りが可能なデータ記録媒体。
【請求項３２】
請求項３１に記載のデータ記録媒体に記録された情報を読み取って、映像音声を再生する映像音声再生装置であって、
請求項３１に記載のデータ記録媒体から読み出された情報を、前記管理データと、ビデオオーディオストリームデータに分離し、それぞれを出力する第７の手段と、
前記第７の手段が出力した管理データを受信し、該管理データとユーザからの入力にもとづいて、再生を行うビデオオーディオストリームデータを選択するため再生選択情報を生成および出力する第８の手段と、
前記第５の手段が出力した再生選択情報にもとづいて、再生するビデオオーディオストリームデータを選択する第９の手段と、
前記第７の手段が出力した管理データを受信し、該管理データにもとづいて、複数のチャンネルのビデオオーディオデータが多重化されているビデオオーディオストリームデータの多重化を解くための再構成化情報を生成および出力する第１０の手段と、
前記第１０の手段が出力した再構成化情報を受信し、前記第９の手段によって選択された、複数のチャンネルのビデオオーディオデータが多重化されているビデオオーディオストリームデータの多重化を解く第１１の手段を有する映像音声再生装置。
【請求項３３】
前記第１０の手段は、ユーザからの入力にもとづいて、前記第９の手段によって選択され、前記第１１の手段によって多重化を解かれた後のビデオオーディオストリームデータを表示するための表示情報を生成および出力する手段をさらに有し、
前記第１０の手段が出力した表示情報を受信し、該表示情報にもとづいて、前記第９の手段によって選択され、前記第１１の手段によって多重化を解かれた後のビデオオーディオストリームデータを表示用に構成する第１２の手段をさらに有する、請求項３２に記載の映像音声再生装置。
【請求項３４】
請求項３１に記載のデータ記録媒体から読み取られた、複数のチャンネルのビデオオーディオデータが多重化されているビデオオーディオストリームデータが、同じチャンネルのビデオオーディオデータのみを用いて圧縮されている場合、該ビデオオーディオストリームデータ中の所望のビデオオーディオデータのみを解凍、編集、または消去する第１３の手段をさらに有する、請求項３２または３３に記載の映像音声再生装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【国際公開番号】ＷＯ２００５／００４４７６
【国際公開日】平成１７年１月１３日（２００５．１．１３）
【発行日】平成１９年９月２０日（２００７．９．２０）
【国際特許分類】
【出願番号】特願２００５−５１１３５９（Ｐ２００５−５１１３５９）
【国際出願番号】ＰＣＴ／ＪＰ２００４／００９４１６
【国際出願日】平成１６年７月２日（２００４．７．２）
【出願人】（０００００４２３７）日本電気株式会社 (19,353)
【Ｆターム（参考）】
【国際公開日】平成１７年１月１３日（２００５．１．１３）
【発行日】平成１９年９月２０日（２００７．９．２０）
【国際特許分類】
【国際出願番号】ＰＣＴ／ＪＰ２００４／００９４１６
【国際出願日】平成１６年７月２日（２００４．７．２）
【出願人】（０００００４２３７）日本電気株式会社 (19,353)
【Ｆターム（参考）】
[ Back to top ]