多重化データ記録装置、及び方法
【課題】
記録容量が小さい記録媒体を利用しても、ディジタル放送を長時間記録することができる多重化データ記録装置を提供する。
【解決手段】
記録指示手段１０２において、“音声データのみを抽出することを指示する”、または“音声データと代表画像データのみを記録することを指示する”を選択的に指定される。そして、音声データと代表画像データのみを記録することを指示された際に、多重化データ選別手段１０１では、多重化データに含まれる音声データを抽出する。抽出した音声データと代表画像データとを、多重化して記録媒体１０５に記録する。
記録容量が小さい記録媒体を利用しても、ディジタル放送を長時間記録することができる多重化データ記録装置を提供する。
【解決手段】
記録指示手段１０２において、“音声データのみを抽出することを指示する”、または“音声データと代表画像データのみを記録することを指示する”を選択的に指定される。そして、音声データと代表画像データのみを記録することを指示された際に、多重化データ選別手段１０１では、多重化データに含まれる音声データを抽出する。抽出した音声データと代表画像データとを、多重化して記録媒体１０５に記録する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像データ、音声データ等の複数のデータが多重化されてなる多重化データの多重化データ記録装置に係わり、特に、ディジタルテレビ放送における映像データ、音声データ等を記録媒体に記録する記録装置及び方法、並びにプログラムに関する。
【背景技術】
【０００２】
近年、映像データや音声データ等をディジタル化して多重伝送するディジタル放送が普及している。このようなディジタル放送においては、高品質かつ高能率なデータ伝送が実現できるＭＰＥＧ２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔ Ｇｒｏｕｐ Ｐｈａｓｅ ２）方式が採用されており、複数の番組のデータがＭＰＥＧ２トランスポートストリーム（ＴＳ：ＴｒａｎｓｐｏｒＴＳｔｒｅａｍ）と呼ばれるパケット(以下、ＴＳパケットと称する)に分割され、多重伝送される。また、小型ディジタル機器、携帯電話等のモバイル向けのディジタル放送として、1セグメントを用いて簡易動画放送サービス（以下、1セグメント放送と称する）が開始されようとしている。
【０００３】
このようにＴＳパケットのような多重化データを受信した多重化データ記録装置では、所望の映像データ、及び音声データ等を選択的に抽出するように構成され、所定の記録媒体に抽出された所望の映像データ、及び音声データ等が記録される。
【０００４】
ここで、ディジタル放送の多重伝送される多重化データの映像データ、及び音声データ等を記録する為には、膨大な記録容量の記録媒体が必要となる。特に、小型ディジタル機器、携帯電話等のモバイル向けのディジタル機器においては、ハードディスクなどの磁気記録媒体のような大容量の記録媒体がなく、記録容量が小さい記録媒体でディジタル放送の多重化データを、長時間記録することができない。
【０００５】
従来の多重化データ記録装置は、多重化データの中から映像データと音声データを選択し、映像データに対して、多重分離を行い、所定の映像符号化データを抽出している。そして、抽出した映像符号化データを映像データに再編成を行い、映像データと音声データを所定の記録媒体に記録している（例えば、特許文献１参照。）。このように、所定の映像符号化データを抽出することで、記録容量が小さい記録媒体を利用しても、ディジタル放送を長時間記録することができる技術が開示されている。
【特許文献１】特開２００３−３３３５３２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、報道番組、音楽番組等の映像データを記録する場合は、映像データを記録することは必ずしも必要ではなく、映像データを記録するか否かを、ユーザが任意で選択できることが望まれる。また、ユーザの好みのタイミング、または好みの代表画像データを映像データとして記録できることが望ましい。
【０００７】
特許文献１の多重化データ記録装置でIピクチャだけを記録した場合において、Iピクチャは1画面のイントラ符号化データであり、通常０．５秒程度毎にIピクチャが存在する為、膨大な記録容量が必要となり、長時間記録するという課題を解決することはできない。
【０００８】
本発明はこのような状況を鑑みてなされたものであり、記録容量が小さい記録媒体であっても、ディジタル放送を長時間記録することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、請求項１に記載の多重化データ記録装置は、多重化データの中から、“音声データのみを抽出することを指示する“、または“音声データと代表画像データのみを記録することを指示する”記録指示手段と、多重化データに含まれる音声データを抽出する多重化データ選別手段と、音声データと前記代表画像データとを多重化して、記録媒体に記録する多重化手段とを備えることを特徴とする。
【００１０】
この発明によれば、音声データのみを抽出して記録する、または音声データと代表画像データのみを記録することが選択することができる。そして、記録指示に従って、多重化データに含まれる音声データのみを抽出し、記録媒体に記録することで、音声データと映像データの多重化データを記録媒体に記録するのに対し、記録媒体に記録するデータが音声データのみ、もしくは音声データと代表画像データとになるため、記録容量が小さい記録媒体でも長時間の記録が行える。
【００１１】
請求項２に記載の多重化データ記録装置は、静止画データを撮像する撮像指示手段と、撮像された撮像静止画データ（以降、撮像静止画データと称する）を符号化する符号化手段と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換手段を備えることを特徴とする。
【００１２】
この発明によれば、音声データと代表画像データのみ記録することを指示された際に、任意のタイミングで撮像された撮像静止画データを代表画像データとすることができ、例えば番組の初めに撮像した静止画データを代表画像データとして記録した場合に、記録された音声データが視覚的に何の番組であるかを、容易に判別することができる。
【００１３】
請求項３に記載の多重化データ記録装置は、撮像指示手段により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示手段と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択手段を備えることを特徴とする。
【００１４】
この発明によれば、撮像指示手段により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データの中から所望の撮像静止画データを代表画像データとすることができる。
【００１５】
請求項４に記載の多重化データ記録装置は、ｎ枚（ｎ＞＝１）の撮像静止画データが記録された多重化データの中から、選択された代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除手段を備えることを特徴とする。
【００１６】
この発明によれば、ｎ枚（ｎ＞＝１）の代表画像データ以外の撮像静止画データが記録媒体に記録されている多重化データ記録装置において、当該記録媒体に記録された多重化データから不要な撮像静止画データを削除することができ、記録媒体を効率よく使用することができる。
【００１７】
請求項５に記載の多重化データ記録装置は、システムタイムクロック情報（以降、ＳＴＣ情報と称する）を読み出すＳＴＣ読出し指示手段と、代表画像データ変換手段において、読み出したＳＴＣ情報を再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入手段とを備えることを特徴とする。
【００１８】
この発明によれば、撮像された際のＳＴＣ情報を読み出し、再生時刻情報であるＰＴＳ情報として、撮像静止画データに挿入する。そして、記録媒体に記録した多重化データの再生開始指示を受けた際に、撮像されたタイミングで撮像静止画データが順次、切り替わりながら、再生することができる。
【００１９】
請求項６に記載の多重化データ記録装置は、記録媒体に記録されている静止画データ（以降、記録静止画データ）の中から代表画像データを選択する記録画像選択指示手段と、記録静止画データを符号化する符号化手段と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換手段を備えることを特徴とする。
【００２０】
この発明によれば、記録媒体に記録されている記録静止画データの中から所望の記録静止画データを代表画像データとして、音声データと多重化して記録することができる。
【００２１】
請求項７に記載の多重化データ記録装置は、外部記録媒体に記録するときに、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化手段を、備えることを特徴とする。
【００２２】
この発明によれば、内部記録媒体に記録されている音声データを外部記録媒体へ記録する際に、内部記録媒体に記録されている音声データに所望の代表画像データを付加して、外部記録媒体に記録することができる。
【００２３】
請求項８に記載の多重化データ記録装置は、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成手段と、文字情報と代表画像データから表示プレーンを生成する表示プレーン生成手段とを、さらに備えることを特徴とする。
【００２４】
この発明によれば、付属情報データを文字情報生成手段に入力し、生成された文字情報と、代表画像データをモニタに表示することができる。よって、番組情報、記録日時等の文字情報から、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【００２５】
請求項９に記載の多重化データ記録装置は、前記文字情報生成手段で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化手段に入力することで符号化し、前記代表画像データ変換手段に入力とすることを特徴とする
この発明によれば、文字情報生成手段で生成された文字情報と、静止画データを１枚の静止画データとして、代表画像データ変換手段に入力することにより、記録された多重化データに含まれる文字情報を生成する処理が不要となり、文字情報を含む代表画像データの復号化処理を行うだけで、番組情報、記録日時等を明示的に示すことができ、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【００２６】
請求項１０に記載の多重化データ記録方法は、多重化データを入力とし、音声データのみを抽出することを指示する、または音声データと代表画像データのみを記録することを指示する記録指示工程と、多重化データに含まれる音声データを抽出する多重化データ選別工程と、前記音声データと前記代表画像データを多重化して、記録媒体に記録する多重化工程とを含むことを特徴とする。
【００２７】
この発明によれば、音声データのみを抽出して記録する、または音声データと代表画像データのみを記録することが選択することができ、記録指示に従って、多重化データに含まれる音声データのみを抽出し、記録媒体に記録する。よって、記録容量が小さい記録媒体でも長時間の記録が行える。
【００２８】
請求項１１に記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、静止画データを撮像する撮像指示工程と、撮像された撮像静止画データを符号化する符号化工程と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする。
【００２９】
この発明によれば、音声データと代表画像データのみ記録することを指示された際に、任意のタイミングで撮像された撮像静止画データを代表画像データとすることができる。よって、記録された音声データが視覚的に何の番組であるかを、所望のタイミングで撮像した代表画像データから、容易に判別することができる。
【００３０】
請求項１２に記載の多重化データ記録方法は、請求項１１に記載の多重化データ記録方法において、前記撮像指示工程により、撮像されたｎ枚（ｎ＞＝１）の前記撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示工程と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択工程を、さらに含むことを特徴とする。
【００３１】
この発明によれば、撮像指示工程により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データの中から所望の撮像静止画データを代表画像データとすることができる。
【００３２】
請求項１３に記載の多重化データ記録方法は、請求項１２に記載の多重化データ記録方法において、記録された多重化データの中から選択された前記代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除工程を、さらに含むことを特徴とする。
【００３３】
この発明によれば、ｎ枚（ｎ＞＝１）の代表画像データ以外の撮像静止画データが記録媒体に記録されており、当該記録媒体に記録された多重化データから不要な撮像静止画データを削除することができる。よって、記録媒体に記録する記録容量を減らすことができる。
【００３４】
請求項１４に記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、システムタイムクロックを読み出すＳＴＣ読出し指示工程と、前記代表画像データ変換工程において、読み出したＳＴＣを再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入工程とを、さらに含むことを特徴とする。
【００３５】
この発明によれば、撮像された際のＳＴＣ情報を読み出し、再生時刻情報であるＰＴＳ情報として、撮像静止画データに挿入する。よって、記録媒体に記録した多重化データの再生開始指示を受けた際に、撮像されたタイミングで撮像静止画データが順次、切り替わりながら、再生することができる。
【００３６】
請求項１５の記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、記録媒体に記録されている静止画データの中から代表画像データを選択する記録画像選択指示工程と、記録静止画データを符号化する符号化工程と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする。
【００３７】
この発明によれば、記録媒体に記録されている記録静止画データの中から所望の記録静止画データを代表画像データとして、音声データと多重化して記録することができる。
【００３８】
請求項１６に記載の多重化データ記録方法は、請求項１５に記載の多重化データ記録方法において、外部記録媒体に記録する際に、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化工程を、さらに含むことを特徴とする。
【００３９】
この発明によれば、外部記録媒体へ記録するのに際し、音声データのみが記録された多重化データに、記録媒体に記録されている記録静止画データを、代表画像データを付加して、外部記録媒体に記録することができる。
【００４０】
請求項１７に記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成工程と、文字情報と静止画データから表示プレーンを生成する表示プレーン生成工程とを、さらに含むことを特徴とする。
【００４１】
この発明によれば、付属情報データを文字情報生成工程に入力し、生成された文字情報と、代表画像データをモニタに表示することができる。よって、番組情報、記録日時等の文字情報から、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【００４２】
請求項１８に記載の多重化データ記録方法は、請求項１７に記載の多重化データ記録方法において、前記文字情報生成工程で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化工程に入力することで符号化し、前記代表画像データ変換工程に入力とすることを特徴とする。
【００４３】
この発明によれば、記録された多重化データに含まれる文字情報を生成する処理が不要となり、文字情報を含む代表画像データの復号化処理を行うだけで、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【発明の効果】
【００４４】
以上説明したように、本発明によれば、多重化データを入力とし、音声データのみを抽出することを指示する、または音声データと代表画像データのみを記録することを指示する記録指示が可能である。そして、撮像静止画データ、または記録静止画データを代表画像データとして、多重化して記録することで、記録容量が小さい記録媒体でも、ディジタル放送を長時間記録することができる。
【発明を実施するための最良の形態】
【００４５】
以下、本発明の好適な実施形態について、図面を参照して説明する。
【００４６】
（第１の実施形態）
本発明の第１の実施形態に係る多重化データ記録装置について説明する。なお、第１の実施形態は、請求項１，２，１０，１１の多重化データ記録装置及び多重化データ記録方法に相当し、記録指示手段は記録指示部１０２、多重化データ選別手段は多重化データ選別部１０１、多重化手段は多重化部１０４、撮像指示手段は撮像指示部１０９、符号化手段は符号化部１１０、代表画像データ変換手段は代表画像データ変換部１０３にそれぞれ対応している。
【００４７】
図１は、本実施形態に係る多重化データ記録装置の全体構成図である。なお、本実施形態に直接関係しない他の構成部位、例えば、表示出力される画像の表示手段としてのモニタ、音声出力手段としてのスピーカ、チューナ、復調部、誤り訂正部等は図示していないが、勿論設けられている。
【００４８】
図１に示すように、多重化データ記録装置は、多重化データ選別部１０１と、記録指示部１０２と、代表画像データ変換部１０３と、多重化部１０４と、記録媒体１０５と、デマルチプレクサ１０６と、映像デコーダ１０７と、音声デコーダ１０８と、撮像指示部１０９と、符号化部１１０とを含んで構成される。
【００４９】
多重化データ選別部１０１は、複数の番組のデータが多重化されてなる多重化データから、記録指示部１０２において、ユーザが選択した所望のプログラム番号の映像データ、音声データ、番組情報、記録モード等の記録指示に従って、多重化データを抽出し、抽出したPID（Pack Identifier）に基づいて、所望のプログラム番号のＴＳパケットを抽出し、指示された記録モードに応じて、所望のＴＳパケットを出力する。
【００５０】
記録指示部１０２は、ユーザが操作手段（不図示）に対する所定の操作を行って、選択的に所望のプログラム番号の映像データ、音声データ、番組情報、記録モードの指示を行う。記録モードは、“音声データのみを記録するモード”と、“音声データと代表画像データのみを記録するモード”と、“音声データと映像データを記録するモード”のいずれかを選択的に切り替えることができる。
【００５１】
代表画像データ変換部１０３は、ユーザが所定の操作（例えば、ボタンを押下する等）により、符号化部１１０から入力される撮像符号化データを所定のフォーマットに従ったＴＳパケットに変換し、出力を行う。
【００５２】
多重化部１０４は、音声データと代表画像データのみを記録するモードの際に、多重化データ選別部１０１から出力される音声データのＴＳパケットと、ユーザが所定の操作により、代表画像データ変換部１０３から出力される代表画像データのＴＳパケットとを多重化し、記録媒体１０５に記録される。
【００５３】
デマルチプレクサ１０６は、複数の番組が多重化されている多重データのうち、特定のプログラム番号が設定された番組のデータを抽出したり、あるいは、それぞれの番組が構成する映像データや音声データなどの各コンポーネント毎に分離して、映像符号化データや音声符号化データを出力する。
【００５４】
本実施形態では、データ圧縮符号化方式として、MPEG４−AVC方式が用いられているので、デマルチプレクサ１０６から出力された映像符号化データに対し、映像デコーダ１０７においてMPEG４−AVC方式による伸張処理が施される。そして、映像デコーダ１０７から出力された伸張後のデータは、外部接続されるモニタに表示出力されて表示画像を構成する。また、デマルチプレクサ１０６から出力された音声符号化データに対し、音声デコーダ１０８において伸張処理が施される。そして、音声デコーダ１０８から出力された伸張後のデータは、外部接続されるスピーカに出力される。
【００５５】
次に、図２〜図５を参照して、上記多重化データ記録装置の具体的な構成を説明する。図２が多重化データ選別部１０１の構成を示すブロック図であり、図３が多重化部１０４の構成を示すブロック図であり、図４が代表画像データ変換部１０３の構成を示すブロック図であり、図５がデマルチプレクサ１０６の構成を示すブロック図である。
【００５６】
図２に示すように、多重化データ選別部１０１は、番組情報解析処理部２０１と選別制御処理部２０２とを備えて構成される。
【００５７】
以上の構成において、番組情報解析処理部２０１は、入力される多重化データからPAT（Program Association Table）やPMT（Program Map Table）等を抽出し、番組構成を解析し、所望のプログラム番号のＴＳパケットの識別情報として付与されたPIDを抽出する。抽出したPIDに基づいて、多重化データに含まれる番組を構成する各コンポーネントを選別することができ、選別された多重化データが出力される。
【００５８】
選別制御処理部２０２は、番組情報解析処理部２０１で抽出された多重化データから、番組情報解析処理部２０１で抽出したPIDに基づいて、所望のプログラム番号のＴＳパケットを抽出する。視聴中の場合は所望のプログラム番号のPIDのＴＳパケットを出力する。このとき、記録中であれば、記録指示部１０２で設定された記録モードに応じて、所望のＴＳパケットを出力する。記録モードが音声・映像データ記録の場合は、記録多重化データとして音声データ、映像データを出力する。例えば、記録モードが音声データのみを抽出することを指示された場合は、音声データを出力する。
【００５９】
図３に示すように、多重化部１０４は、記録用バッファ３０１と記録制御処理３０２とを備えて構成される。
【００６０】
記録用バッファ３０１は、入力された記録多重化データをバッファリングするための記録手段であり、所定のタイミングで記録用バッファ３０１から記録多重化データが読み出され、記録媒体１０５に記録される。
【００６１】
記録制御処理部３０２は、代表画像データ変換部１０３から代表画像データの多重化要求を受け、記録用バッファ３０１から記録媒体１０５への転送を停止し、代表画像データ変換部１０３からの代表画像データを記録媒体１０５へと転送する。記録媒体１０５への転送制御は、ＴＳパケット単位で転送制御されるため、容易に多重化して記録媒体１０５に記録される。
【００６２】
図４に示すように、代表画像データ変換部１０３は、符号化データ格納用バッファ４０１とＴＳパケット化部４０２とを備えて構成される。
【００６３】
符号化データ格納用バッファ４０１は、符号化部１１０から出力された撮像符号化データをバッファリングするための記録手段である。
【００６４】
ＴＳパケット化部４０２は、MPEG２トランスポートストリームを構成すべく、ＴＳヘッダ情報等を付加しながら、188byteのデータ長の所定のフォーマットに従ったデータ構造のＴＳパケットを形成する。このとき、ＴＳパケットのPIDは、番組情報解析処理部２０１で抽出した映像データのPIDを用いる。
【００６５】
図５に示すように、デマルチプレクサ１０６は、記録モード判定処理部５０１と、多重分離処理部５０２とを備えて構成される。
【００６６】
記録モード判定処理部５０１は、記録媒体１０５に記録されている記録多重化データを再生するときには、先頭がNULLパケットであるかの判定を行い、音声データのみ記録か、通常記録かを判定を行う。音声データのみ記録の場合は、NULLパケットの解析を行い、代表画像データである映像データの位置情報とパケット数を取得する。
【００６７】
多重分離処理部５０２は、複数の番組が多重化されている多重データのうち、特定のプログラム番号が設定された番組のデータを抽出したり、あるいは、それぞれの番組が構成する映像データや音声データなどの各コンポーネント毎に分離して、映像符号化データや音声符号化データを出力する。
【００６８】
次に図６〜図８を参照して、多重化データ記録装置において行われる記録処理、及び再生処理について説明をする。図６は、受信された所定の番組の多重化データを記録媒体１０５に記録する場合の記録処理を示すフローチャートであり、図７は記録された所定の記録多重化データを再生する場合の再生処理を示すフローチャートであり、また、図８は本実施形態における記録媒体１０５に記録される記録多重化データの様式の一例を示した図である。
【００６９】
図６の処理において、特定の番組、記録モードに対する記録指示が入力されたとき（Ｓ１０１）、それ以降の記録処理が開始される。例えば、ユーザの操作によって番組、及び記録モードを選択的に指定するとともに録画開始ボタン等が押下されたとき等が考えられる。なお、記録指示の監視は継続的に行われる。
【００７０】
記録指示の入力後は、設定されたプログラム番号の番組に対応する多重化データを記録するために必要な初期設定を行う（Ｓ１０２）。例えば、記録媒体における記録領域の確保、制御情報の初期化等の準備を行う。
【００７１】
次に、記録すべきプログラム番号を番組情報解析処理部２０１に設定する（Ｓ１０３）。これにより、番組情報解析処理部２０１において、記録対象の番組が特定され、そのデータ構成が解析可能となる。
【００７２】
次に、番組情報解析処理部２０１で解析された多重化データのうち、記録すべき多重化データに対するPIDを選別制御処理部２０２に設定する（Ｓ１０４）。番組情報解析処理部２０１に設定すべきPIDは、多重化データに含まれるPSI(Program Specific Information)を参照することにより判別が可能となる。これにより、選別制御処理部２０２では、PIDに基づいて、音声データのみを抽出し、記録することが可能となる。
【００７３】
次に、記録モードの判定を行う（Ｓ１０５）。記録モードが音声データと代表画像データのみ記録の場合（Ｓ１０５：ＹＥＳ）は、NULLパケットを挿入する（Ｓ１０６）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。なお、Ｓ１０５でＮＯの場合は、Ｓ１０７以降の処理を行う。
【００７４】
次に、記録対象の番組に対応する多重化データの記録媒体１０５への記録動作を開始する（Ｓ１０７）。多重化データは記録用バッファ３０１から出力されて記録媒体１０５に書き込まれる。
【００７５】
そして、時間の進行に伴い記録媒体１０５への記録動作が順次行われ（Ｓ１０８）、音声データのみ記録中に、撮像要求が入力された際に、記録制御処理部３０２に対して、撮像記録要求が入力された場合（Ｓ１０９：ＹＥＳ）は代表画像データの記録動作が行われる（Ｓ１１０）。撮像記録要求は、継続して監視される（Ｓ１０９：ＮＯ）。そして、記録動作が終了した場合（Ｓ１１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ１１１：ＮＯ）、Ｓ１０８に戻って記録動作を継続する。
【００７６】
次に、記録動作終了後、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の撮像記録要求時における記録位置までのオフセット値及び代表画像データのパケット数を書込むことにより（Ｓ１１２）、記録動作を終了する。
【００７７】
図７の処理において、記録媒体１０５に記録されている特定のファイルに対する再生指示が入力されたとき（Ｓ２０１）、それ以降の再生処理が開始される。例えば、ユーザの操作によって再生開始ボタン等が押下されたとき等が考えられる。なお、再生指示の監視は継続的に行われる。
【００７８】
次に、ファイルの先頭のパケットがNULLパケットである場合（Ｓ２０２：ＹＥＳ）は、音声データのみ記録されたファイルと判別できる。そして、NULLパケットの解析を行い、トランスポート・プライベート・データ領域のオフセット値及びパケット数を抽出する（Ｓ２０３）。
【００７９】
次に、Ｓ２０３で抽出したオフセット値から撮像画像データの先頭位置が判別できるため、以降の同一PIDの復号化処理を行うことにより、代表画像である撮像画像データがモニタに表示される（Ｓ２０４）。
【００８０】
次に、既知の技術を用いて再生処理が開始され（Ｓ２０５）、音声デコーダ１０８に多重分離されたデータを供給し、復号化処理が行い、スピーカに出力される（Ｓ２０６）。そして、再生動作が終了した場合（Ｓ２０７：ＹＥＳ）、図７の再生処理を終了する。再生動作が未終了の場合（Ｓ２０７：ＮＯ）、Ｓ２０６の処理に戻って再生動作を継続する。
【００８１】
なお、ファイルの先頭のパケットがNULLパケットでない場合（Ｓ２０２：ＮＯ）は、Ｓ２０５以降の処理を行う。
【００８２】
図８は、音声データのみの記録動作における記録媒体１０５に記録されるデータの一例を示した図である。記録媒体１０５には、188byteのデータ形式で格納され、始めにNULLパケットが挿入され、順次記録される。撮像要求を受け、記録制御処理部３０２に撮像画像記録要求を受け、代表画像データが撮像記録要求ごとに多重化される。図７におけるオフセット値は、初回の撮像画像記録要求時における記録位置までのパケット数を示している。
【００８３】
本実施形態に係る多重化データ記録装置は、以上のように構成され、動作するので、結果的に、ユーザが所望の記録モードが設定でき、記録モードが“音声データと代表画像データのみを記録する“の際に、ユーザの好みのタイミングで撮像した撮像静止画データを代表画像データとして記録することが可能となり、記録媒体の使用効率が上がり、記録容量が小さい記録媒体でも、ディジタル放送を長時間記録することができる。
【００８４】
（第２の実施形態）
本発明の第２の実施形態に係る多重化データ記録装置について説明する。なお、第２の実施形態は、請求項３，１３の多重化データ記録装置及び多重化データ記録方法に相当し、撮像指示手段は撮像指示部１００９、撮像静止画データ選択指示手段は撮像静止画データ選択指示部１０１０、代表画像データ選択手段は代表画像データ選択部１０１１にそれぞれ対応している。
【００８５】
図９は、第２の実施形態に係わる多重化データ記録装置の全体構成図である。
【００８６】
図９に示す多重化データ記録装置は、多重化データ選別部１００１と、記録指示部１００２と、代表画像データ変換部１００３と、多重化部１００４と、記録媒体１００５と、デマルチプレクサ部１００６と、映像デコーダ１００７と、音声デコーダ１００８と、撮像指示部１００９と、撮像静止画データ選択指示部１０１０と、代表画像データ選択部１０１１と、符号化部１０１２を備えて構成される。
【００８７】
図９に示す第２の実施形態に係る多重化データ記録装置は、第１の実施形態の構成に撮像静止画データ選択指示部１０１０と、代表画像データ選択部１０１１が具備されており、構成が異なる。また、記録処理における動作はｎ枚の撮像静止画データからユーザが所望の撮像静止画データを代表画像データとして記録することが可能である。
【００８８】
以下、代表画像データ選択部１０１１、多重化部１００４の動作について、第１の実施形態と異なる部分を説明する。なお、それ以外は、第１の実施形態と同様である。
【００８９】
図１０〜図１２は、第２の実施形態の多重化データ記録装置における多重化部１００４、代表画像データ選択部１０１１の構成を示すブロック図である。図９の多重化データ記録装置に含まれる構成要素のうち、図１０は多重化部１００４の構成を示すブロック図であり、図１１は撮像画像情報格納テーブルの様式を示した図であり、図１２は代表画像データ選択部１０１１の構成を示すブロック図である。
【００９０】
図１０に示すように、多重化部１００４は、記録用バッファ１１０１と、記録制御処理部１１０２と、位置情報保持部１１０３とを備えて構成される。
【００９１】
記録用バッファ１１０１は、入力された記録多重化データをバッファリングするための記録手段であり、所定のタイミングで記録用バッファ１１０１から記録多重化データが読み出され、記録媒体１００５に記録される。
【００９２】
記録制御処理部１１０２は、記録媒体１００５へ転送したＴＳパケット数をカウントし、代表画像データ変換部１００３から撮像静止画データの撮像記録要求を受けた際に、撮像静止画データ番号と、記録媒体１００５に記録したＴＳパケット数を記録位置情報保持部１１０３へ記録する。そして、記録用バッファ１１０１から記録媒体１００５への転送を停止し、代表画像データ変換部１００３からの撮像静止画データを記録媒体１００５へと転送する。その際も、記録媒体１００５へ転送したＴＳパケット数のカウントは継続する。
【００９３】
図１１は、記録位置情報保持部１１０３で保持された記録位置情報テーブルの様式を示したものである。撮像静止画データ番号、撮像画像位置のオフセット値であるＴＳパケット数が格納される。撮像静止画データ番号は、撮像した撮像画像数に対応しており、撮像画像位置情報は記録ファイルの先頭アドレスからのＴＳパケットの数であるオフセット値が格納される。
【００９４】
図１２に示すように、代表画像データ選択部１０１１は、記録位置情報処理部１２０１と、撮像静止画データ表示処理部１２０２と、選択終了処理部１２０３とを具備して構成される。
【００９５】
記録位置情報処理部１２０１は、多重化部１００４の記録位置情報保持部１１０３から記録位置情報テーブルを参照し、ユーザが所定の操作（例えば、ボタンを押下する等）により、選択された撮像番号の撮像静止画データが選択される。
【００９６】
撮像静止画データ表示処理部１２０２は、記録位置情報処理部１２０１で選択された撮像静止画データ番号に対応する撮像静止画データを、記録位置情報を用いてデマルチプレクサ１００６、及び映像デコーダ１００７で復号化処理を行い、モニタに出力する。ここで、撮像画像をモニタに出力するのは１枚撮像画像のみとは限らず、撮像画像を縮小し、複数枚並べてモニタに出力するようにしてもよい。
【００９７】
選択終了処理部１２０３は、ユーザが所定の操作（例えば、ボタンを押下する等）により、選択された撮像静止画データ番号の撮像静止画データが選択された場合、選択された撮像静止画データに対応する記録位置情報をオフセット値として、NULLパケットのトランスポート・プライベート・データ領域を書き換えることで、選択された撮像静止画データが代表画像データとして記録される。
【００９８】
次に、図１３を参照して、第２の実施形態の多重化データ記録装置において、第１の実施形態の多重化データ記録装置と異なる記録処理について説明をする。図１３は、受信された所定の番組の多重化データを記録媒体１００５に記録する場合の記録処理を示すフローチャートである。
【００９９】
図１３の処理において、第１の実施形態における記録処理の動作と異なる記録動作の開始（Ｓ３０７）以降の処理について説明する。なお、Ｓ３０１〜Ｓ３０６は、図６のＳ１０１〜Ｓ１０６と同様である。
【０１００】
時間の進行に伴い記録媒体１００５への記録動作が順次行われ（Ｓ３０８）、撮像指示部１００９から撮像指示要求が入力された際に、映像デコーダ１００７から符号化１０１２へ撮像データが入力され、符号化処理された撮像符号化データが代表画像データ変換部１００３に入力される。そして、ＴＳパケットに変換し、記録制御処理部１１０２に対して、撮像記録要求が入力された場合（Ｓ３０９：ＹＥＳ）は、そのときに記録された撮像静止画データ番号と、ＴＳパケット数を記録位置情報保持部１１０３へ格納し、撮像画像データの記録動作が行われる（Ｓ３１０）。撮像記録要求は、継続して監視される（Ｓ３０９：ＮＯ）。そして、記録動作が終了した場合（Ｓ３１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ３１１：ＮＯ）、Ｓ３０８に戻って記録動作を継続する。
【０１０１】
次に、記録動作終了後、撮像静止画データ選択指示がある場合（Ｓ３１２：ＹＥＳ）は、記録位置情報保持部１１０３から記録位置情報テーブルを取得する。次に、記録位置情報処理部１２０１において、記録位置情報テーブルを参照し、記録された多重化データから所定の撮像静止画データ番号に対応する撮像静止画データの復号化処理が行われ、モニタに出力される（Ｓ３１３）。例えば、ユーザの操作によって撮像静止画データ番号に対応する撮像静止画データを指定するとともに決定ボタン等が押下されたとき等が考えられる。選択された撮像静止画データを代表画像データに選択された場合（Ｓ３１４：ＹＥＳ）は、挿入したNULLパケットのトランスポート・プライベート・データ領域に、撮像静止画データ番号のＴＳパケット数をオフセット値として書き込んで（Ｓ３１５）、記録動作を終了する。なお、選択が終了していない場合（Ｓ３１４：ＮＯ）は、Ｓ３１３に戻って選択処理を継続する。
【０１０２】
撮像静止画データ選択指示がない場合（Ｓ３１２：ＮＯ）は、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から撮像静止画データ番号１の撮像静止画データ記録要求時における記録位置までのオフセット値を書込む（Ｓ３１５）。そして、記録動作を終了する。
【０１０３】
本実施形態に係る多重化データ記録装置によれば、撮像指示部１００９により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データの中から所望の撮像静止画データを代表画像データとすることができる。
【０１０４】
（第３の実施形態）
本発明の第３の実施形態に係る多重化データ記録装置について説明する。なお、第３の実施形態は、請求項４，１３の多重化データ記録装置及び多重化データ記録方法に相当し、撮像静止画データ削除手段は撮像静止画データ削除部２０１２に対応している。
【０１０５】
図１４は、本発明の第３の実施形態に係る多重化データ記録装置の全体構成図である。
【０１０６】
図１４に示す多重化データ記録装置は、多重化データ選別部２００１と、記録指示部２００２と、代表画像データ変換部２００３と、多重化部２００４と、記録媒体２００５と、デマルチプレクサ２００６と、映像デコーダ２００７と、音声デコーダ２００８と、撮像指示部２００９と、撮像静止画データ選択指示部２０１０と、代表画像データ選択部２０１１と、撮像静止画データ削除部２０１２と、符号化部２０１３を備えて構成される。
【０１０７】
図１４に示す第３の実施形態に係る多重化データ記録装置は、第２の実施形態の構成に殆ど同じ構成、及び動作を有するが、撮像静止画データ削除部２０１２を具備しており、構成が異なる。
【０１０８】
図１５に示すように、撮像静止画データ削除部２０１２は、削除対象検索部２１０１と、削除処理部２１０２とを具備して構成される。
【０１０９】
削除対象検索部２１０１は、代表画像データ選択部２０１１で選択された代表画像データ以外の撮像静止画データを検索する。その際、記録位置情報テーブルから削除対象の撮像静止画データ番号のオフセット値を参照し、削除する撮像静止画データを検索する。
【０１１０】
削除処理部２１０２は、削除する撮像静止画データのＴＳパケットを順次削除し、異なるPIDのＴＳパケットを削除した領域につめていくことで、不要な撮像静止画データを削除する。
【０１１１】
上記の操作を、不要な撮像静止画データに相当する分行い、代表画像データ以外の撮像静止画データを削除することができる。
【０１１２】
本実施形態に係る多重化データ記録装置によれば、ｎ枚（ｎ＞＝１）の代表画像データ以外の撮像静止画データが記録媒体２００５に記録されている多重化データ記録装置において、当該記録媒体２００５に記録された多重化データから不要な撮像静止画データを削除することができ、記録媒体２００５を効率よく使用することができる。
【０１１３】
（第４の実施形態）
本発明の第４の実施形態に係る多重化データ記録装置について説明する。なお、第４の実施形態は、請求項５，１４の多重化データ記録装置及び多重化データ記録方法に相当し、ＳＴＣ読出し指示手段はＳＴＣ読出し指示部３０１０、ＰＴＳ情報挿入手段はＰＴＳ情報挿入部３０１１にそれぞれ対応している。
【０１１４】
図１６は、本発明の第４の実施形態に係る多重化データ記録装置の全体構成図である。
【０１１５】
図１６に示す多重化データ記録装置は、多重化データ選別部３００１と、記録指示部３００２と、代表画像データ変換部３００３と、多重化部３００４と、記録媒体３００５と、デマルチプレクサ３００６と、映像デコーダ３００７と、音声デコーダ３００８と、撮像指示部３００９と、ＳＴＣ読出し指示部３０１０と、ＰＴＳ情報挿入部３０１１と、符号化部３０１２を備えて構成される。
【０１１６】
図１６に示す第４の実施形態に係る多重化データ記録装置は、第１の実施形態の構成に殆ど同じ構成、及び動作を有するが、ＳＴＣ読出し指示部３０１０と、ＰＴＳ情報挿入部３０１１とを具備されており、構成が異なる。
【０１１７】
また、記録処理における動作は、撮像した際にＳＴＣ値を読出し、読出したＳＴＣ値を再生時刻情報であるＰＴＳ値として、代表画像データのＴＳパケット化する前の段階であるＰＥＳパケット化する際に、ＰＥＳパケットのヘッダ情報にＰＴＳ情報を挿入して代表画像データに変換して、記録する点が異なる。
【０１１８】
以下、代表画像データ変換部３００３の動作について、第１の実施形態と異なる部分を説明する。なお、それ以外は、第１の実施形態と同様である。
【０１１９】
図１７は、第４の実施形態の多重化データ記録装置のおける代表画像データ変換部３００３の構成を示すブロック図である。
【０１２０】
図１７に示すように、代表画像データ変換部３００３は、符号化データ格納用バッファ３１０１と、ＰＴＳ情報処理部３１０２と、ＴＳパケット化部３１０３とを備えて構成される。
【０１２１】
符号化データ格納用バッファ３１０１は、符号化部３０１２から出力された撮像符号化データをバッファリングするための記録手段である。
【０１２２】
ＰＴＳ情報処理部３１０２は、ＰＴＳ情報挿入部３０１１を実行することで、ＰＥＳパケットのヘッダ情報に所定のフォーマットに従って、ＰＴＳ情報を挿入する。ＰＴＳ情報は、ユーザが所定の操作（例えば、ボタンを押下する等）により、撮像指示部３００９から映像デコーダ３００７に撮像要求を発行した際に、ＳＴＣ読出し指示部３０１０において、ＳＴＣ情報を読み出し、ＳＴＣ情報をＰＴＳ情報として、ＰＴＳ情報挿入部３０１１が保持している。
【０１２３】
ＴＳパケット化部３１０３は、MPEG２トランスポートストリームを構成すべく、ＴＳヘッダ情報等を付加しながら、188byteのデータ長の所定のフォーマットに従ったデータ構造のＴＳパケットを形成する。
【０１２４】
図１８は、受信された所定の番組の多重化データを記録媒体３００５に記録する場合の記録処理を示すフローチャートである。
【０１２５】
図１８の処理において、第１の実施形態における記録処理と異なる記録動作の開始（S４０７）以降について説明する。なお、Ｓ４０１〜Ｓ４０６は、図６のＳ１０１〜Ｓ１０６と同様である。
【０１２６】
記録対象の番組に対応する多重化データの記録媒体３００５への記録動作を開始する（S４０７）。多重化データは多重化部３００４の記録用バッファ３０１（図３参照）から出力されて記録媒体３００５に書き込まれる。
【０１２７】
そして、時間の進行に伴い記録媒体への記録動作が順次行われ（Ｓ４０８）、音声データのみ記録中に、撮像指示部３００９からの撮像記録要求が入力された際に（Ｓ４０９：ＹＥＳ）、ＳＴＣ読出し指示部３０１０でＳＴＣ情報を読み出し（Ｓ４１０）、ＰＴＳ情報挿入部３０１１でＳＴＣ情報を代表画像データのＰＴＳ情報として保持する（Ｓ４１１）。撮像記録要求は、継続して監視される（Ｓ４０９：ＮＯ）。そして、撮像静止画データの記録動作が行われる（Ｓ４１２）。そして、記録動作が終了した場合（Ｓ４１３：ＹＥＳ）、図１８の記録処理を終え、記録動作が未終了の場合（Ｓ４１３：ＮＯ）、Ｓ４０８に戻って記録動作を継続する。
【０１２８】
記録媒体３００５に記録されている特定のファイルに対する再生指示が入力されたとき、それ以降の再生処理が開始される。例えば、ユーザの操作によって再生開始ボタン等が押下されたとき等が考えられる。なお、再生指示の監視は継続的に行われる。
【０１２９】
次に、第1の実施形態と同様に、ファイルの先頭のパケットがNULLパケットである場合は、音声データのみ記録されたファイルと判別できる。そして、NULLパケットの解析を行い、トランスポート・プライベート・データ領域のオフセット値を抽出する。
【０１３０】
次に、抽出したオフセット値から代表画像データの先頭位置が判別できるため、以降の同一PIDの復号化処理を行うことにより、代表画像である撮像画像データがモニタに表示される。
【０１３１】
記録された多重化データを再生する際には、既知の技術を用いて再生処理が開始され、音声デコーダ３００８に多重分離されたデータを供給し、復号化処理を行い、スピーカに出力される。デマルチプレクサ３００６でPMTに示された映像データのPIDと同一のPIDが検出された場合は、同期クロックとＰＴＳ情報挿入部３０１１で挿入された代表画像データに付随するＰＴＳとの同期制御を行い、モニタに出力する。
【０１３２】
本実施形態に係る多重化データ記録装置によれば、撮像された際のＳＴＣ情報を読み出し、再生時刻情報であるＰＴＳ情報として、撮像静止画データに挿入する。そして、記録媒体３００５に記録した多重化データの再生開始指示を受けた際に、撮像されたタイミングで撮像静止画データが順次、切り替わりながら、再生することができる。
【０１３３】
（第５の実施形態）
本発明の第５の実施形態に係る多重化データ記録装置について説明する。なお、第５の実施形態は、請求項６，１５の多重化データ記録装置及び多重化データ記録方法に相当し、記録画像選択指示手段は記録画像選択指示部４００９、符号化手段は符号化部４０１２、代表画像データ変換手段は代表画像データ変換部４００３にそれぞれ対応している。
【０１３４】
図１９は、本発明の第５の実施形態に係る多重化データ記録装置の全体構成図である。
【０１３５】
第５の実施形態は、記録媒体４００５に記録されている記録静止画データを代表画像データとして記録することを特徴とする。記録静止画データとしては、ユーザが所定の操作により、カメラデバイスから撮影した画像データ、ネットワーク等を用いて記録した画像データ等が挙げられる。
【０１３６】
図１９に示す多重化データ記録装置は、多重化データ選別部４００１と、記録指示部４００２と、代表画像データ変換部４００３と、多重化部４００４と、記録媒体４００５と、デマルチプレクサ４００６と、映像デコーダ４００７と、音声デコーダ４００８と、記録画像選択指示部４００９と、記録画像選択部４０１０と、記録画像復号化部４０１１と、符号化部４０１２を備えて構成される。
【０１３７】
図１９に示す第５の実施形態に係る多重化データ記録装置は、第１の実施形態の構成に殆ど同じ構成、及び動作を有するが、記録画像選択指示部４００９と、記録画像選択部４０１０と、記録画像復号化部４０１１を具備しており、構成が異なる。
【０１３８】
また、第１に実施形態では、撮像静止画データを代表画像データとして、記録していたが、本実施形態では、記録媒体４００５に記録されている記録静止画データを代表画像データとして、記録するという点が異なる。
【０１３９】
以下に、記録画像選択指示部４００９、記録画像選択部４０１０、記録画像復号化部４０１１の構成、および動作を説明する。
【０１４０】
記録画像選択指示部４００９は、記録媒体４００５に記録されている記録静止画データの中から、ユーザの所望の記録静止画データを代表画像データに選択する指示を記録画像選択部４０１０に対して行う。
【０１４１】
記録画像選択部４０１０は、記録媒体４００５に記録されている記録静止画データを読み出し、記録画像復号化部４０１１に入力する。
【０１４２】
記録画像復号化部４０１１は、記録画像選択部４０１０から入力された記録静止画データの復号化処理を行い、モニタに出力する。そして、ユーザが所定の操作（例えば、ボタンを押下する等）により、モニタに表示された記録静止画データが選択された場合は、符号化部４０１２に復号化処理された記録静止画データが入力される。
【０１４３】
図２０を用いて、第５の実施形態における記録処理について説明する。特定の番組、記録モードに対する記録指示が入力されたとき（S５０１）、それ以降の記録処理が開始される。例えば、ユーザの操作によって番組、及び記録モードを選択的に指定するとともに録画開始ボタン等が押下されたとき等が考えられる。なお、記録指示の監視は継続的に行われる。
【０１４４】
次に、設定されたプログラム番号の番組に対応する多重化データを記録するために必要な初期設定を行う（S５０２）。例えば、記録媒体における記録領域の確保、制御情報の初期化等の準備を行う。
【０１４５】
記録指示の入力後は、記録画像データを代表画像データとして多重化するか否かを、ユーザが所定の操作（例えば、ボタンを押下する等）に従って選択する。記録画像データを代表画像データとして記録する場合（Ｓ５０３：ＹＥＳ）は、記録媒体４００５に記録されている記録静止画データを読み出し、記録画像復号化部４０１１に記録静止画データが入力され、復号化処理を行い（Ｓ５０４）、モニタに表示される。ユーザが所定の操作により、この記録静止画データを指定するか否かが決定される。記録画像復号化部４０１１で復号化した記録静止画データを代表画像として指定した場合（Ｓ５０５：ＹＥＳ）は、記録動作が開始される。復号化した記録静止画データが代表画像データ指定されない場合（Ｓ５０５：ＮＯ）は、次の記録静止画データが読み出され、記録画像復号化部４０１１に入力される。なお、Ｓ５０３にてＮＯの場合、Ｓ５０６以降の処理を行う。
【０１４６】
次に、記録すべきプログラム番号を多重化データ選別部４００１の番組情報解析処理部２０１（図２参照）に設定する（Ｓ５０６）。これにより、番組情報解析処理部２０１において、記録対象の番組が特定され、そのデータ構成が解析可能となる。
【０１４７】
次に、番組情報解析処理部２０１で解析された多重化データのうち、記録すべき多重化データに対するPIDを多重化データ選別部４００１の選別制御処理部２０２（図２参照）に設定する（Ｓ５０７）。選別制御処理部２０２に設定すべきPIDは、多重化データに含まれるPSIを参照することにより判別が可能となる。これにより、選別制御処理部２０２では、PIDに基づいて、音声データのみを抽出し、記録することが可能となる。
【０１４８】
次に、記録モードの判定を行う（Ｓ５０８）。記録モードが音声データと代表画像データのみ記録の場合（Ｓ５０８：ＹＥＳ）は、NULLパケットを挿入する（Ｓ５０９）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。音声データのみ記録でない場合（Ｓ５０８：ＮＯ）は、Ｓ５１０以降の処理を行う。
【０１４９】
次に、記録対象の番組に対応する多重化データの記録媒体４００５への記録動作を開始し（Ｓ５１０）、時間の進行に伴い記録媒体４００５への記録動作が順次行われる（Ｓ５１１）。
【０１５０】
次に、記録動作終了後（Ｓ５１２：ＹＥＳ）、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の映像データ記録要求時における記録位置までのオフセット値及び映像データのパケット数を書き込むことにより（Ｓ５１３）、記録動作を終了する。動作が未終了の場合（Ｓ５１２：ＮＯ）、Ｓ５１１に戻って、記録動作を継続する。
【０１５１】
本実施形態に係る多重化データ記録装置によれば、記録媒体４００５に記録されている記録静止画データの中から所望の記録静止画データを代表画像データとして、音声データと多重化して記録することができる。
【０１５２】
（第６の実施形態）
本発明の第６の実施形態に係る多重化データ記録装置について説明する。なお、第６の実施形態は、請求項７，１６の多重化データ記録装置及び多重化データ記録方法に相当し、外部記録媒体は外部記録媒体５０１３、内部記録媒体は記録媒体５００５、外部多重化手段は多重化部５００４にそれぞれ対応している。
【０１５３】
図２１は、本発明の第６の実施形態に係る多重化データ記録装置の全体構成図である。
【０１５４】
第６の実施形態は、外部記録媒体５０１３に記録を行う際に、記録媒体５００５に記録されている音声記録多重化データと、記録されている記録静止画データを代表画像データとして、音声記録多重化データに、多重化して記録することを特徴とする。記録静止画データとしては、ユーザが所定の操作により、カメラデバイスから撮影した画像データ、ネットワーク等を用いて記録した画像データ等が挙げられる。
【０１５５】
図２１に示す多重化データ記録装置は、多重化データ選別部５００１と、記録指示部５００２と、代表画像データ変換部５００３と、多重化部５００４と、記録媒体５００５と、デマルチプレクサ５００６と、映像デコーダ５００７と、音声デコーダ５００８と、記録画像選択指示部５００９と、記録画像選択部５０１０と、記録画像復号化部５０１１と、符号化部５０１２と、外部記録媒体５０１３とを備えて構成される。
【０１５６】
図２１に示す多重化データ記録装置は、第５の実施形態と同じ構成、動作する部分を有するが、外部記録媒体５０１３が具備されており、多重化部５００４、記録画像選択指示部５００９の動作が異なる。
【０１５７】
以下、多重化部５００４、記録画像選択指示部５００９の異なる構成、動作を有する部分を説明する。なお、それ以外は、第５の実施形態と同様である。
【０１５８】
多重化部５００４は、多重化データ選別部５００１から出力される音声データのＴＳパケットと、ユーザが所定の操作により、代表画像データ変換部５００３から出力される代表画像データのＴＳパケットとを多重化し、外部記録媒体５０１３に記録される。
【０１５９】
記録画像選択指示部５００９は、外部記録媒体５０１３に記録を行う際に、記録媒体５００５に記録されている記録静止画データを選択的に指定できる。
【０１６０】
次に、図２１を参照して、上記多重化データ記録装置の具体的な構成を説明する。図２２は、多重化部５００４の構成を示すブロック図である。
【０１６１】
図２２に示すように、多重化部５００４は、記録用バッファ５１０１と記録制御処理部５１０２とで構成され、記録媒体５００５への出力と、外部記録媒体５０１３への出力が可能である。
【０１６２】
以上の構成において、記録用バッファ５１０１は、入力された記録多重化データをバッファリングするための記録手段であり、所定のタイミングで記録用バッファ５１０１から記録データが読み出され、記録媒体５００５、もしくは外部記録媒体５０１３に記録される。
【０１６３】
記録制御処理部５１０２は、代表画像データ変換部５００３から記録画像データ多重化要求を受け、記録用バッファ５１０１から記録媒体５００５、または外部記録媒体５０１３への転送を停止し、代表画像データ変換部５００３からの代表画像データを記録媒体５００５、または外部記録媒体５０１３へと転送する。
【０１６４】
次に図２３を参照して、多重化データ記録装置において行われる記録処理について説明をする。図２３は、記録媒体５００５に記録された音声記録多重化データを外部記録媒体５０１３に記録する際の記録処理を示すフローチャートである。
【０１６５】
図２３の処理において、外部記録媒体５０１３への記録指示が入力されたとき（S６０１）、それ以降の記録処理が開始される。例えば、ユーザの操作によって、記録媒体５００５に記録されている音声記録多重化データを外部記録媒体５０１３へ記録する記録開始ボタン等が押下されたとき等が考えられる。
【０１６６】
記録動作開始後、指定された音声記録多重化データを外部記録媒体５０１３に記録するために必要な初期設定を行う（S６０２）。例えば、外部記録媒体５０１３における記録領域の確保、制御情報の初期化等の準備を行う。
【０１６７】
記録静止画データを代表画像データとして多重化するか否かを、ユーザが所定の操作（例えば、ボタンを押下する等）に従って選択する。記録画像データを代表画像データとして記録する場合（Ｓ６０３：ＹＥＳ）は、記録媒体５００５に記録されている記録静止画データを読み出し、記録画像復号化部５０１１に記録静止画データが入力され、復号化処理を行い（Ｓ６０４）、モニタに表示される。ユーザが所定の操作により、この記録静止画データを指定するか否かが決定される。記録画像復号化部５０１１で復号化した記録静止画データを代表画像として指定した場合（Ｓ６０５：ＹＥＳ）は、記録動作が開始される。復号化した記録静止画データが代表画像データ指定されない場合（Ｓ６０５：ＮＯ）は、次の記録静止画データが読み出され、記録画像復号化部５０１１に入力される。なお、Ｓ６０３にてＮＯの場合、Ｓ６０６以降の処理が行われる。
【０１６８】
次に、ＮＵＬＬパケットを挿入する（S６０６）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。音声データのみ記録でない場合は、以降の処理を行う。
【０１６９】
次に、外部記録媒体５０１３に記録する音声記録多重化データを、外部記録媒体５０１３への記録動作を開始する（S６０７）。音声記録多重化データは、記録媒体５００５から順次読み出され、記録用バッファ５１０１に出力され、所定のタイミングで外部記録媒体５０１３に書き込まれる。また、代表画像データに選択された記録静止画データは、符号化部５０１２に入力され、所定のフォーマットであるＭＰＥＧ４−ＡＶＣのフォーマットに符号化される。そして、符号化された記録静止画符号化データは、代表画像データ変換部５００３に入力され、MPEG２トランスポートストリームを構成すべく、ＴＳヘッダ情報等を付加しながら、188byteのデータ長の所定のフォーマットに従ったデータ構造のＴＳパケットを形成する。ＴＳパケット生成後に、記録制御処理５１０２に対して、記録要求が行われる。
【０１７０】
次に、音声記録多重化データの外部記録媒体５０１３への記録動作が順次行われ（Ｓ６０８）、記録制御処理部５１０２に対して、記録要求が入力された際（Ｓ６０９：ＹＥＳ）に、代表画像データの記録動作が行われる（Ｓ６１０）。記録要求は、継続して監視される（Ｓ６０９：ＮＯ）。
【０１７１】
そして、記録動作が終了した場合（Ｓ６１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ６１１：ＮＯ）、Ｓ１０８に戻って記録動作を継続する。
【０１７２】
次に、記録動作終了後、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の映像データ記録要求時における記録位置までのオフセット値及び映像データのパケット数を書込むことにより、記録動作を終了する（Ｓ６１２）。
【０１７３】
本実施形態に係る多重化データ記録装置によれば、記録媒体５００５に記録されている音声データを外部記録媒体５０１３へ記録する際に、記録媒体５００５に記録されている音声データに所望の代表画像データを付加して、外部記録媒体５０１３に記録することができる。
【０１７４】
（第７の実施形態）
本発明の第７の実施形態に係る多重化データ記録装置について説明する。なお、第７の実施形態は、請求項８，９，１７，１８の多重化データ記録装置及び多重化データ記録方法に相当し、文字情報生成手段は文字情報生成部６０１０、表示プレーン生成手段は表示プレーン生成部６０１２、符号化手段は符号化部６０１１、代表画像データ変換手段は代表画像データ変換部６００３にそれぞれ対応している。
【０１７５】
図２４は、本発明の第７の実施形態に係る多重化データ記録装置の全体構成図である。第７の実施形態における多重化データ記録装置は、第１の実施形態の構成に殆ど同じ構成及び動作を有するが、文字情報生成部６０１０と、表示プレーン生成部６０１２を具備しており、構成が異なる。
【０１７６】
以下、第１の実施形態と動作が異なる記録指示部６００２と、多重化データ選択部６００１と、デマルチプレクサ６００６と、新たに備えた文字情報生成部６０１０と、表示プレーン生成部６０１２について説明する。なお、それ以外は、第１の実施形態と同様である。
【０１７７】
記録指示部６００２は、第１の実施形態の記録指示部１０２に、“音声データと付属情報データのみを記録するモード”と、“音声データ、代表画像データ、付属情報データのみを記録するモード”が新たに付加されており、いずれかを選択的に切り替えることができる。
【０１７８】
多重化データ選別部６００１は、複数の番組のデータが多重化されてなる多重化データから、記録モードに応じた多重化データを選別し、多重化部６００４に入力する。ここで、記録モードは、記録指示部６００２からユーザが選択され、多重化データ選別部６００１に指定される。指定された記録モードが、音声データ、付属情報データのみ抽出することを指示された場合、所望のプログラム番号の音声データ、および番組情報の多重化データを抽出し、抽出したPIDに基づいて、所望のプログラム番号のＴＳパケットを抽出し、指示された記録モードに応じて、所望のＴＳパケットを出力する。
【０１７９】
デマルチプレクサ６００６は、複数の番組が多重化されている多重データのうち、特定のプログラム番号が設定された番組のデータを抽出したり、あるいは、それぞれの番組が構成する映像データや音声データなどの各コンポーネント毎に分離して、映像符号化データ、音声符号化データ、および付属情報データを出力する。出力された付属情報データは、文字情報生成部６０１０に入力される。
【０１８０】
文字情報生成部６０１０は、デマルチプレクサ６００６から入力された付属情報データを既知の技術を用いて、付属情報データから文字情報を生成する。
【０１８１】
表示プレーン生成部６０１２は、既知の技術を用いて、映像デコーダ６００７から出力される映像復号化データと、文字情報生成部６０１０から出力される文字情報とを、表示する表示プレーンを生成し、モニタに表示させる。
【０１８２】
ここで、表示プレーンの生成する際に、映像復号化データのみを表示プレーンとして、モニタに表示してもよく、また代表画像データを表示してもよい。
【０１８３】
また、文字情報生成部６０１０で生成された文字情報と、所定の静止画データを表示プレーン生成部６０１２に入力することにより、文字情報だけの代表画像データを作成することも考えられる。
【０１８４】
図２５は、受信された所定の番組の多重化データを記録媒体６００５に記録する場合の記録処理を示すフローチャートである。
【０１８５】
図２５の処理において、特定の番組、記録モードに対する記録指示が入力されたとき（Ｓ７０１）、それ以降の記録処理が開始される。本実施形態では、記録指示における記録モードは、音声データと付属情報データのみを記録する指示を行う。例えば、ユーザの操作によって番組、及び記録モードを選択的に指定するとともに録画開始ボタン等が押下されたとき等が考えられる。なお、記録指示の監視は継続的に行われる。
【０１８６】
記録指示の入力後は、設定されたプログラム番号の番組に対応する多重化データを記録するために必要な初期設定を行う（Ｓ７０２）。例えば、記録媒体６００５における記録領域の確保、制御情報の初期化等の準備を行う。
【０１８７】
次に、記録すべきプログラム番号を多重化データ選択部６００１の番組情報解析処理部２０１（図２参照）に設定する（Ｓ７０３）。これにより、番組情報解析処理部２０１において、記録対象の番組が特定され、そのデータ構成が解析可能となる。
【０１８８】
次に、番組情報解析処理部２０１で解析された多重化データのうち、記録すべき多重化データに対するPIDを多重化データ選択部６００１の選別制御処理部２０２（図２参照）に設定する（Ｓ７０４）。番組情報解析処理部２０１に設定すべきPIDは、多重化データに含まれるPSIを参照することにより判別が可能となる。これにより、選別制御処理部２０２では、PIDに基づいて、音声データと付属情報データのみを抽出し、記録することが可能となる。
【０１８９】
次に、記録モードの判定を行う（Ｓ７０５）。記録モードが音声データと付属情報データのみ記録の場合（Ｓ７０５：ＹＥＳ）は、NULLパケットを挿入する（Ｓ７０６）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。音声データのみ記録でない場合（Ｓ７０５：ＮＯ）は、Ｓ７０７以降の処理を行う。
【０１９０】
次に、記録対象の番組に対応する多重化データの記録媒体６００５への記録動作を開始する（Ｓ７０７）。多重化データは、多重化部６００４の記録用バッファ３０１（図３参照）から出力されて記録媒体６００５に書き込まれる。
【０１９１】
そして、時間の進行に伴い記録媒体６００５への記録動作が順次行われ（Ｓ７０８）、音声データのみ記録中に、撮像要求が入力された際に、多重化部６００４の記録制御処理部３０２（図３参照）に対して、表示プレーン記録要求が入力された場合（Ｓ７０９：ＹＥＳ）は撮像表示プレーンデータの記録動作が行われる（Ｓ７１０）。表示プレーン記録要求は、継続して監視される（Ｓ７０９：ＮＯ）。そして、記録動作が終了した場合（Ｓ７１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ７１１：ＮＯ）、Ｓ７０８に戻って記録動作を継続する。
【０１９２】
次に、記録動作終了後、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の映像データ記録要求時における記録位置までのオフセット値及び映像データのパケット数を書込むことにより（Ｓ７１２）、記録動作を終了する。
【０１９３】
本実施形態に係るデータ記録装置は、以上のような構成され、動作するので、結果的に、生成された文字情報と、代表画像データをモニタに表示することができ、番組情報、記録日時等の文字情報から、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。また、記録された多重化データに含まれる文字情報を生成する処理が不要となり、代表画像データの復号化処理を行うだけで、番組情報、記録日時等を明示的に示すことができ、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【産業上の利用可能性】
【０１９４】
本発明によれば、多重化データの中に含まれる映像データと音声データ、または音声データのみ、音声データと代表画像データ、音声データと番組情報を記録することを選択的に設定することが可能であり、ユーザの所望のタイミングで撮像された撮像画像データ、または記録画像データを代表画像データとして、多重化データに含める映像データとして記録することができるので、小型ディジタル機器、携帯電話等のモバイル向けディジタル機器のような記録容量の小さい記録媒体にディジタル放送を長時間記録するのに有用である。また、DVDレコーダのような大容量の記録媒体に記録した多重化データを、SDカード等の記録するときに映像データと音声データ、または音声データのみ、または音声データと番組情報を記録することを選択的に設定し、代表画像データを含めて記録し、モバイル向けのディジタル機器において記録メディアを読み出し、再生する等の用途にも応用できる。
【図面の簡単な説明】
【０１９５】
【図１】第１の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２】第１の実施形態における多重化データ選別部の主な機能を示すブロック図である。
【図３】第１の実施形態における多重化部の主な機能を示すブロック図である。
【図４】第１の実施形態における代表画像データ変換部の主な機能を示すブロック図である。
【図５】第１の実施形態におけるデマルチプレクサの主な機能を示すブロック図である。
【図６】第１の実施形態における記録処理の処理手順を示すフローチャートである。
【図７】第１の実施形態における再生処理の処理手順を示すフローチャートである。
【図８】第１の実施形態における記録媒体に記録される記録多重化データの様式の一例を示した図である。
【図９】第２の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図１０】第２の実施形態における多重化部の主な機能を示すブロック図である。
【図１１】第２の実施形態における撮像画像情報格納テーブルの様式の一例を示した図である。
【図１２】第２の実施形態における代表画像データ選択部の主な機能を示すブロック図である。
【図１３】第２の実施形態における記録処理の処理手順を示すフローチャートである。
【図１４】第３の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図１５】第３の実施形態における撮像静止画データ削除部の主な機能を示すブロック図である。
【図１６】第４の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図１７】第４の実施形態における代表画像データ変換部の主な機能を示すブロック図である。
【図１８】第４の実施形態における記録処理の処理手順を示すフローチャートである。
【図１９】第５の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２０】第５の実施形態における記録処理の処理手順を示すフローチャートである。
【図２１】第６の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２２】第６の実施形態における多重化部の主な機能を示すブロック図である。
【図２３】第６の実施形態における記録処理の処理手順を示すフローチャートである。
【図２４】第７の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２５】第７の実施形態における記録処理の処理手順を示すフローチャートである。
【符号の説明】
【０１９６】
１０１ 多重化データ選別部
１０２ 記録指示部
１０３ 代表画像データ変換部
１０４ 多重化部
１０５ 記録媒体
１０６ デマルチプレクサ
１０７ 映像デコーダ
１０８ 音声デコーダ
１０９ 撮像指示部
１１０ 符号化部
１０１０ 撮像静止画データ選択指示部
１０１１ 代表画像データ選択部
２０１２ 撮像静止画データ削除部
３０１０ ＳＴＣ読出し指示部
３０１１ ＰＴＳ情報挿入部
４００９ 記録画像選択指示部
４０１０ 記録画像選択部
４０１１ 記録画像復号化部
５０１３ 外部記録媒体
６０１０ 文字情報生成部
６０１２ 表示プレーン生成部
【技術分野】
【０００１】
本発明は、映像データ、音声データ等の複数のデータが多重化されてなる多重化データの多重化データ記録装置に係わり、特に、ディジタルテレビ放送における映像データ、音声データ等を記録媒体に記録する記録装置及び方法、並びにプログラムに関する。
【背景技術】
【０００２】
近年、映像データや音声データ等をディジタル化して多重伝送するディジタル放送が普及している。このようなディジタル放送においては、高品質かつ高能率なデータ伝送が実現できるＭＰＥＧ２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔ Ｇｒｏｕｐ Ｐｈａｓｅ ２）方式が採用されており、複数の番組のデータがＭＰＥＧ２トランスポートストリーム（ＴＳ：ＴｒａｎｓｐｏｒＴＳｔｒｅａｍ）と呼ばれるパケット(以下、ＴＳパケットと称する)に分割され、多重伝送される。また、小型ディジタル機器、携帯電話等のモバイル向けのディジタル放送として、1セグメントを用いて簡易動画放送サービス（以下、1セグメント放送と称する）が開始されようとしている。
【０００３】
このようにＴＳパケットのような多重化データを受信した多重化データ記録装置では、所望の映像データ、及び音声データ等を選択的に抽出するように構成され、所定の記録媒体に抽出された所望の映像データ、及び音声データ等が記録される。
【０００４】
ここで、ディジタル放送の多重伝送される多重化データの映像データ、及び音声データ等を記録する為には、膨大な記録容量の記録媒体が必要となる。特に、小型ディジタル機器、携帯電話等のモバイル向けのディジタル機器においては、ハードディスクなどの磁気記録媒体のような大容量の記録媒体がなく、記録容量が小さい記録媒体でディジタル放送の多重化データを、長時間記録することができない。
【０００５】
従来の多重化データ記録装置は、多重化データの中から映像データと音声データを選択し、映像データに対して、多重分離を行い、所定の映像符号化データを抽出している。そして、抽出した映像符号化データを映像データに再編成を行い、映像データと音声データを所定の記録媒体に記録している（例えば、特許文献１参照。）。このように、所定の映像符号化データを抽出することで、記録容量が小さい記録媒体を利用しても、ディジタル放送を長時間記録することができる技術が開示されている。
【特許文献１】特開２００３−３３３５３２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、報道番組、音楽番組等の映像データを記録する場合は、映像データを記録することは必ずしも必要ではなく、映像データを記録するか否かを、ユーザが任意で選択できることが望まれる。また、ユーザの好みのタイミング、または好みの代表画像データを映像データとして記録できることが望ましい。
【０００７】
特許文献１の多重化データ記録装置でIピクチャだけを記録した場合において、Iピクチャは1画面のイントラ符号化データであり、通常０．５秒程度毎にIピクチャが存在する為、膨大な記録容量が必要となり、長時間記録するという課題を解決することはできない。
【０００８】
本発明はこのような状況を鑑みてなされたものであり、記録容量が小さい記録媒体であっても、ディジタル放送を長時間記録することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、請求項１に記載の多重化データ記録装置は、多重化データの中から、“音声データのみを抽出することを指示する“、または“音声データと代表画像データのみを記録することを指示する”記録指示手段と、多重化データに含まれる音声データを抽出する多重化データ選別手段と、音声データと前記代表画像データとを多重化して、記録媒体に記録する多重化手段とを備えることを特徴とする。
【００１０】
この発明によれば、音声データのみを抽出して記録する、または音声データと代表画像データのみを記録することが選択することができる。そして、記録指示に従って、多重化データに含まれる音声データのみを抽出し、記録媒体に記録することで、音声データと映像データの多重化データを記録媒体に記録するのに対し、記録媒体に記録するデータが音声データのみ、もしくは音声データと代表画像データとになるため、記録容量が小さい記録媒体でも長時間の記録が行える。
【００１１】
請求項２に記載の多重化データ記録装置は、静止画データを撮像する撮像指示手段と、撮像された撮像静止画データ（以降、撮像静止画データと称する）を符号化する符号化手段と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換手段を備えることを特徴とする。
【００１２】
この発明によれば、音声データと代表画像データのみ記録することを指示された際に、任意のタイミングで撮像された撮像静止画データを代表画像データとすることができ、例えば番組の初めに撮像した静止画データを代表画像データとして記録した場合に、記録された音声データが視覚的に何の番組であるかを、容易に判別することができる。
【００１３】
請求項３に記載の多重化データ記録装置は、撮像指示手段により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示手段と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択手段を備えることを特徴とする。
【００１４】
この発明によれば、撮像指示手段により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データの中から所望の撮像静止画データを代表画像データとすることができる。
【００１５】
請求項４に記載の多重化データ記録装置は、ｎ枚（ｎ＞＝１）の撮像静止画データが記録された多重化データの中から、選択された代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除手段を備えることを特徴とする。
【００１６】
この発明によれば、ｎ枚（ｎ＞＝１）の代表画像データ以外の撮像静止画データが記録媒体に記録されている多重化データ記録装置において、当該記録媒体に記録された多重化データから不要な撮像静止画データを削除することができ、記録媒体を効率よく使用することができる。
【００１７】
請求項５に記載の多重化データ記録装置は、システムタイムクロック情報（以降、ＳＴＣ情報と称する）を読み出すＳＴＣ読出し指示手段と、代表画像データ変換手段において、読み出したＳＴＣ情報を再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入手段とを備えることを特徴とする。
【００１８】
この発明によれば、撮像された際のＳＴＣ情報を読み出し、再生時刻情報であるＰＴＳ情報として、撮像静止画データに挿入する。そして、記録媒体に記録した多重化データの再生開始指示を受けた際に、撮像されたタイミングで撮像静止画データが順次、切り替わりながら、再生することができる。
【００１９】
請求項６に記載の多重化データ記録装置は、記録媒体に記録されている静止画データ（以降、記録静止画データ）の中から代表画像データを選択する記録画像選択指示手段と、記録静止画データを符号化する符号化手段と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換手段を備えることを特徴とする。
【００２０】
この発明によれば、記録媒体に記録されている記録静止画データの中から所望の記録静止画データを代表画像データとして、音声データと多重化して記録することができる。
【００２１】
請求項７に記載の多重化データ記録装置は、外部記録媒体に記録するときに、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化手段を、備えることを特徴とする。
【００２２】
この発明によれば、内部記録媒体に記録されている音声データを外部記録媒体へ記録する際に、内部記録媒体に記録されている音声データに所望の代表画像データを付加して、外部記録媒体に記録することができる。
【００２３】
請求項８に記載の多重化データ記録装置は、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成手段と、文字情報と代表画像データから表示プレーンを生成する表示プレーン生成手段とを、さらに備えることを特徴とする。
【００２４】
この発明によれば、付属情報データを文字情報生成手段に入力し、生成された文字情報と、代表画像データをモニタに表示することができる。よって、番組情報、記録日時等の文字情報から、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【００２５】
請求項９に記載の多重化データ記録装置は、前記文字情報生成手段で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化手段に入力することで符号化し、前記代表画像データ変換手段に入力とすることを特徴とする
この発明によれば、文字情報生成手段で生成された文字情報と、静止画データを１枚の静止画データとして、代表画像データ変換手段に入力することにより、記録された多重化データに含まれる文字情報を生成する処理が不要となり、文字情報を含む代表画像データの復号化処理を行うだけで、番組情報、記録日時等を明示的に示すことができ、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【００２６】
請求項１０に記載の多重化データ記録方法は、多重化データを入力とし、音声データのみを抽出することを指示する、または音声データと代表画像データのみを記録することを指示する記録指示工程と、多重化データに含まれる音声データを抽出する多重化データ選別工程と、前記音声データと前記代表画像データを多重化して、記録媒体に記録する多重化工程とを含むことを特徴とする。
【００２７】
この発明によれば、音声データのみを抽出して記録する、または音声データと代表画像データのみを記録することが選択することができ、記録指示に従って、多重化データに含まれる音声データのみを抽出し、記録媒体に記録する。よって、記録容量が小さい記録媒体でも長時間の記録が行える。
【００２８】
請求項１１に記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、静止画データを撮像する撮像指示工程と、撮像された撮像静止画データを符号化する符号化工程と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする。
【００２９】
この発明によれば、音声データと代表画像データのみ記録することを指示された際に、任意のタイミングで撮像された撮像静止画データを代表画像データとすることができる。よって、記録された音声データが視覚的に何の番組であるかを、所望のタイミングで撮像した代表画像データから、容易に判別することができる。
【００３０】
請求項１２に記載の多重化データ記録方法は、請求項１１に記載の多重化データ記録方法において、前記撮像指示工程により、撮像されたｎ枚（ｎ＞＝１）の前記撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示工程と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択工程を、さらに含むことを特徴とする。
【００３１】
この発明によれば、撮像指示工程により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データの中から所望の撮像静止画データを代表画像データとすることができる。
【００３２】
請求項１３に記載の多重化データ記録方法は、請求項１２に記載の多重化データ記録方法において、記録された多重化データの中から選択された前記代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除工程を、さらに含むことを特徴とする。
【００３３】
この発明によれば、ｎ枚（ｎ＞＝１）の代表画像データ以外の撮像静止画データが記録媒体に記録されており、当該記録媒体に記録された多重化データから不要な撮像静止画データを削除することができる。よって、記録媒体に記録する記録容量を減らすことができる。
【００３４】
請求項１４に記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、システムタイムクロックを読み出すＳＴＣ読出し指示工程と、前記代表画像データ変換工程において、読み出したＳＴＣを再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入工程とを、さらに含むことを特徴とする。
【００３５】
この発明によれば、撮像された際のＳＴＣ情報を読み出し、再生時刻情報であるＰＴＳ情報として、撮像静止画データに挿入する。よって、記録媒体に記録した多重化データの再生開始指示を受けた際に、撮像されたタイミングで撮像静止画データが順次、切り替わりながら、再生することができる。
【００３６】
請求項１５の記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、記録媒体に記録されている静止画データの中から代表画像データを選択する記録画像選択指示工程と、記録静止画データを符号化する符号化工程と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする。
【００３７】
この発明によれば、記録媒体に記録されている記録静止画データの中から所望の記録静止画データを代表画像データとして、音声データと多重化して記録することができる。
【００３８】
請求項１６に記載の多重化データ記録方法は、請求項１５に記載の多重化データ記録方法において、外部記録媒体に記録する際に、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化工程を、さらに含むことを特徴とする。
【００３９】
この発明によれば、外部記録媒体へ記録するのに際し、音声データのみが記録された多重化データに、記録媒体に記録されている記録静止画データを、代表画像データを付加して、外部記録媒体に記録することができる。
【００４０】
請求項１７に記載の多重化データ記録方法は、請求項１０に記載の多重化データ記録方法において、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成工程と、文字情報と静止画データから表示プレーンを生成する表示プレーン生成工程とを、さらに含むことを特徴とする。
【００４１】
この発明によれば、付属情報データを文字情報生成工程に入力し、生成された文字情報と、代表画像データをモニタに表示することができる。よって、番組情報、記録日時等の文字情報から、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【００４２】
請求項１８に記載の多重化データ記録方法は、請求項１７に記載の多重化データ記録方法において、前記文字情報生成工程で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化工程に入力することで符号化し、前記代表画像データ変換工程に入力とすることを特徴とする。
【００４３】
この発明によれば、記録された多重化データに含まれる文字情報を生成する処理が不要となり、文字情報を含む代表画像データの復号化処理を行うだけで、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【発明の効果】
【００４４】
以上説明したように、本発明によれば、多重化データを入力とし、音声データのみを抽出することを指示する、または音声データと代表画像データのみを記録することを指示する記録指示が可能である。そして、撮像静止画データ、または記録静止画データを代表画像データとして、多重化して記録することで、記録容量が小さい記録媒体でも、ディジタル放送を長時間記録することができる。
【発明を実施するための最良の形態】
【００４５】
以下、本発明の好適な実施形態について、図面を参照して説明する。
【００４６】
（第１の実施形態）
本発明の第１の実施形態に係る多重化データ記録装置について説明する。なお、第１の実施形態は、請求項１，２，１０，１１の多重化データ記録装置及び多重化データ記録方法に相当し、記録指示手段は記録指示部１０２、多重化データ選別手段は多重化データ選別部１０１、多重化手段は多重化部１０４、撮像指示手段は撮像指示部１０９、符号化手段は符号化部１１０、代表画像データ変換手段は代表画像データ変換部１０３にそれぞれ対応している。
【００４７】
図１は、本実施形態に係る多重化データ記録装置の全体構成図である。なお、本実施形態に直接関係しない他の構成部位、例えば、表示出力される画像の表示手段としてのモニタ、音声出力手段としてのスピーカ、チューナ、復調部、誤り訂正部等は図示していないが、勿論設けられている。
【００４８】
図１に示すように、多重化データ記録装置は、多重化データ選別部１０１と、記録指示部１０２と、代表画像データ変換部１０３と、多重化部１０４と、記録媒体１０５と、デマルチプレクサ１０６と、映像デコーダ１０７と、音声デコーダ１０８と、撮像指示部１０９と、符号化部１１０とを含んで構成される。
【００４９】
多重化データ選別部１０１は、複数の番組のデータが多重化されてなる多重化データから、記録指示部１０２において、ユーザが選択した所望のプログラム番号の映像データ、音声データ、番組情報、記録モード等の記録指示に従って、多重化データを抽出し、抽出したPID（Pack Identifier）に基づいて、所望のプログラム番号のＴＳパケットを抽出し、指示された記録モードに応じて、所望のＴＳパケットを出力する。
【００５０】
記録指示部１０２は、ユーザが操作手段（不図示）に対する所定の操作を行って、選択的に所望のプログラム番号の映像データ、音声データ、番組情報、記録モードの指示を行う。記録モードは、“音声データのみを記録するモード”と、“音声データと代表画像データのみを記録するモード”と、“音声データと映像データを記録するモード”のいずれかを選択的に切り替えることができる。
【００５１】
代表画像データ変換部１０３は、ユーザが所定の操作（例えば、ボタンを押下する等）により、符号化部１１０から入力される撮像符号化データを所定のフォーマットに従ったＴＳパケットに変換し、出力を行う。
【００５２】
多重化部１０４は、音声データと代表画像データのみを記録するモードの際に、多重化データ選別部１０１から出力される音声データのＴＳパケットと、ユーザが所定の操作により、代表画像データ変換部１０３から出力される代表画像データのＴＳパケットとを多重化し、記録媒体１０５に記録される。
【００５３】
デマルチプレクサ１０６は、複数の番組が多重化されている多重データのうち、特定のプログラム番号が設定された番組のデータを抽出したり、あるいは、それぞれの番組が構成する映像データや音声データなどの各コンポーネント毎に分離して、映像符号化データや音声符号化データを出力する。
【００５４】
本実施形態では、データ圧縮符号化方式として、MPEG４−AVC方式が用いられているので、デマルチプレクサ１０６から出力された映像符号化データに対し、映像デコーダ１０７においてMPEG４−AVC方式による伸張処理が施される。そして、映像デコーダ１０７から出力された伸張後のデータは、外部接続されるモニタに表示出力されて表示画像を構成する。また、デマルチプレクサ１０６から出力された音声符号化データに対し、音声デコーダ１０８において伸張処理が施される。そして、音声デコーダ１０８から出力された伸張後のデータは、外部接続されるスピーカに出力される。
【００５５】
次に、図２〜図５を参照して、上記多重化データ記録装置の具体的な構成を説明する。図２が多重化データ選別部１０１の構成を示すブロック図であり、図３が多重化部１０４の構成を示すブロック図であり、図４が代表画像データ変換部１０３の構成を示すブロック図であり、図５がデマルチプレクサ１０６の構成を示すブロック図である。
【００５６】
図２に示すように、多重化データ選別部１０１は、番組情報解析処理部２０１と選別制御処理部２０２とを備えて構成される。
【００５７】
以上の構成において、番組情報解析処理部２０１は、入力される多重化データからPAT（Program Association Table）やPMT（Program Map Table）等を抽出し、番組構成を解析し、所望のプログラム番号のＴＳパケットの識別情報として付与されたPIDを抽出する。抽出したPIDに基づいて、多重化データに含まれる番組を構成する各コンポーネントを選別することができ、選別された多重化データが出力される。
【００５８】
選別制御処理部２０２は、番組情報解析処理部２０１で抽出された多重化データから、番組情報解析処理部２０１で抽出したPIDに基づいて、所望のプログラム番号のＴＳパケットを抽出する。視聴中の場合は所望のプログラム番号のPIDのＴＳパケットを出力する。このとき、記録中であれば、記録指示部１０２で設定された記録モードに応じて、所望のＴＳパケットを出力する。記録モードが音声・映像データ記録の場合は、記録多重化データとして音声データ、映像データを出力する。例えば、記録モードが音声データのみを抽出することを指示された場合は、音声データを出力する。
【００５９】
図３に示すように、多重化部１０４は、記録用バッファ３０１と記録制御処理３０２とを備えて構成される。
【００６０】
記録用バッファ３０１は、入力された記録多重化データをバッファリングするための記録手段であり、所定のタイミングで記録用バッファ３０１から記録多重化データが読み出され、記録媒体１０５に記録される。
【００６１】
記録制御処理部３０２は、代表画像データ変換部１０３から代表画像データの多重化要求を受け、記録用バッファ３０１から記録媒体１０５への転送を停止し、代表画像データ変換部１０３からの代表画像データを記録媒体１０５へと転送する。記録媒体１０５への転送制御は、ＴＳパケット単位で転送制御されるため、容易に多重化して記録媒体１０５に記録される。
【００６２】
図４に示すように、代表画像データ変換部１０３は、符号化データ格納用バッファ４０１とＴＳパケット化部４０２とを備えて構成される。
【００６３】
符号化データ格納用バッファ４０１は、符号化部１１０から出力された撮像符号化データをバッファリングするための記録手段である。
【００６４】
ＴＳパケット化部４０２は、MPEG２トランスポートストリームを構成すべく、ＴＳヘッダ情報等を付加しながら、188byteのデータ長の所定のフォーマットに従ったデータ構造のＴＳパケットを形成する。このとき、ＴＳパケットのPIDは、番組情報解析処理部２０１で抽出した映像データのPIDを用いる。
【００６５】
図５に示すように、デマルチプレクサ１０６は、記録モード判定処理部５０１と、多重分離処理部５０２とを備えて構成される。
【００６６】
記録モード判定処理部５０１は、記録媒体１０５に記録されている記録多重化データを再生するときには、先頭がNULLパケットであるかの判定を行い、音声データのみ記録か、通常記録かを判定を行う。音声データのみ記録の場合は、NULLパケットの解析を行い、代表画像データである映像データの位置情報とパケット数を取得する。
【００６７】
多重分離処理部５０２は、複数の番組が多重化されている多重データのうち、特定のプログラム番号が設定された番組のデータを抽出したり、あるいは、それぞれの番組が構成する映像データや音声データなどの各コンポーネント毎に分離して、映像符号化データや音声符号化データを出力する。
【００６８】
次に図６〜図８を参照して、多重化データ記録装置において行われる記録処理、及び再生処理について説明をする。図６は、受信された所定の番組の多重化データを記録媒体１０５に記録する場合の記録処理を示すフローチャートであり、図７は記録された所定の記録多重化データを再生する場合の再生処理を示すフローチャートであり、また、図８は本実施形態における記録媒体１０５に記録される記録多重化データの様式の一例を示した図である。
【００６９】
図６の処理において、特定の番組、記録モードに対する記録指示が入力されたとき（Ｓ１０１）、それ以降の記録処理が開始される。例えば、ユーザの操作によって番組、及び記録モードを選択的に指定するとともに録画開始ボタン等が押下されたとき等が考えられる。なお、記録指示の監視は継続的に行われる。
【００７０】
記録指示の入力後は、設定されたプログラム番号の番組に対応する多重化データを記録するために必要な初期設定を行う（Ｓ１０２）。例えば、記録媒体における記録領域の確保、制御情報の初期化等の準備を行う。
【００７１】
次に、記録すべきプログラム番号を番組情報解析処理部２０１に設定する（Ｓ１０３）。これにより、番組情報解析処理部２０１において、記録対象の番組が特定され、そのデータ構成が解析可能となる。
【００７２】
次に、番組情報解析処理部２０１で解析された多重化データのうち、記録すべき多重化データに対するPIDを選別制御処理部２０２に設定する（Ｓ１０４）。番組情報解析処理部２０１に設定すべきPIDは、多重化データに含まれるPSI(Program Specific Information)を参照することにより判別が可能となる。これにより、選別制御処理部２０２では、PIDに基づいて、音声データのみを抽出し、記録することが可能となる。
【００７３】
次に、記録モードの判定を行う（Ｓ１０５）。記録モードが音声データと代表画像データのみ記録の場合（Ｓ１０５：ＹＥＳ）は、NULLパケットを挿入する（Ｓ１０６）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。なお、Ｓ１０５でＮＯの場合は、Ｓ１０７以降の処理を行う。
【００７４】
次に、記録対象の番組に対応する多重化データの記録媒体１０５への記録動作を開始する（Ｓ１０７）。多重化データは記録用バッファ３０１から出力されて記録媒体１０５に書き込まれる。
【００７５】
そして、時間の進行に伴い記録媒体１０５への記録動作が順次行われ（Ｓ１０８）、音声データのみ記録中に、撮像要求が入力された際に、記録制御処理部３０２に対して、撮像記録要求が入力された場合（Ｓ１０９：ＹＥＳ）は代表画像データの記録動作が行われる（Ｓ１１０）。撮像記録要求は、継続して監視される（Ｓ１０９：ＮＯ）。そして、記録動作が終了した場合（Ｓ１１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ１１１：ＮＯ）、Ｓ１０８に戻って記録動作を継続する。
【００７６】
次に、記録動作終了後、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の撮像記録要求時における記録位置までのオフセット値及び代表画像データのパケット数を書込むことにより（Ｓ１１２）、記録動作を終了する。
【００７７】
図７の処理において、記録媒体１０５に記録されている特定のファイルに対する再生指示が入力されたとき（Ｓ２０１）、それ以降の再生処理が開始される。例えば、ユーザの操作によって再生開始ボタン等が押下されたとき等が考えられる。なお、再生指示の監視は継続的に行われる。
【００７８】
次に、ファイルの先頭のパケットがNULLパケットである場合（Ｓ２０２：ＹＥＳ）は、音声データのみ記録されたファイルと判別できる。そして、NULLパケットの解析を行い、トランスポート・プライベート・データ領域のオフセット値及びパケット数を抽出する（Ｓ２０３）。
【００７９】
次に、Ｓ２０３で抽出したオフセット値から撮像画像データの先頭位置が判別できるため、以降の同一PIDの復号化処理を行うことにより、代表画像である撮像画像データがモニタに表示される（Ｓ２０４）。
【００８０】
次に、既知の技術を用いて再生処理が開始され（Ｓ２０５）、音声デコーダ１０８に多重分離されたデータを供給し、復号化処理が行い、スピーカに出力される（Ｓ２０６）。そして、再生動作が終了した場合（Ｓ２０７：ＹＥＳ）、図７の再生処理を終了する。再生動作が未終了の場合（Ｓ２０７：ＮＯ）、Ｓ２０６の処理に戻って再生動作を継続する。
【００８１】
なお、ファイルの先頭のパケットがNULLパケットでない場合（Ｓ２０２：ＮＯ）は、Ｓ２０５以降の処理を行う。
【００８２】
図８は、音声データのみの記録動作における記録媒体１０５に記録されるデータの一例を示した図である。記録媒体１０５には、188byteのデータ形式で格納され、始めにNULLパケットが挿入され、順次記録される。撮像要求を受け、記録制御処理部３０２に撮像画像記録要求を受け、代表画像データが撮像記録要求ごとに多重化される。図７におけるオフセット値は、初回の撮像画像記録要求時における記録位置までのパケット数を示している。
【００８３】
本実施形態に係る多重化データ記録装置は、以上のように構成され、動作するので、結果的に、ユーザが所望の記録モードが設定でき、記録モードが“音声データと代表画像データのみを記録する“の際に、ユーザの好みのタイミングで撮像した撮像静止画データを代表画像データとして記録することが可能となり、記録媒体の使用効率が上がり、記録容量が小さい記録媒体でも、ディジタル放送を長時間記録することができる。
【００８４】
（第２の実施形態）
本発明の第２の実施形態に係る多重化データ記録装置について説明する。なお、第２の実施形態は、請求項３，１３の多重化データ記録装置及び多重化データ記録方法に相当し、撮像指示手段は撮像指示部１００９、撮像静止画データ選択指示手段は撮像静止画データ選択指示部１０１０、代表画像データ選択手段は代表画像データ選択部１０１１にそれぞれ対応している。
【００８５】
図９は、第２の実施形態に係わる多重化データ記録装置の全体構成図である。
【００８６】
図９に示す多重化データ記録装置は、多重化データ選別部１００１と、記録指示部１００２と、代表画像データ変換部１００３と、多重化部１００４と、記録媒体１００５と、デマルチプレクサ部１００６と、映像デコーダ１００７と、音声デコーダ１００８と、撮像指示部１００９と、撮像静止画データ選択指示部１０１０と、代表画像データ選択部１０１１と、符号化部１０１２を備えて構成される。
【００８７】
図９に示す第２の実施形態に係る多重化データ記録装置は、第１の実施形態の構成に撮像静止画データ選択指示部１０１０と、代表画像データ選択部１０１１が具備されており、構成が異なる。また、記録処理における動作はｎ枚の撮像静止画データからユーザが所望の撮像静止画データを代表画像データとして記録することが可能である。
【００８８】
以下、代表画像データ選択部１０１１、多重化部１００４の動作について、第１の実施形態と異なる部分を説明する。なお、それ以外は、第１の実施形態と同様である。
【００８９】
図１０〜図１２は、第２の実施形態の多重化データ記録装置における多重化部１００４、代表画像データ選択部１０１１の構成を示すブロック図である。図９の多重化データ記録装置に含まれる構成要素のうち、図１０は多重化部１００４の構成を示すブロック図であり、図１１は撮像画像情報格納テーブルの様式を示した図であり、図１２は代表画像データ選択部１０１１の構成を示すブロック図である。
【００９０】
図１０に示すように、多重化部１００４は、記録用バッファ１１０１と、記録制御処理部１１０２と、位置情報保持部１１０３とを備えて構成される。
【００９１】
記録用バッファ１１０１は、入力された記録多重化データをバッファリングするための記録手段であり、所定のタイミングで記録用バッファ１１０１から記録多重化データが読み出され、記録媒体１００５に記録される。
【００９２】
記録制御処理部１１０２は、記録媒体１００５へ転送したＴＳパケット数をカウントし、代表画像データ変換部１００３から撮像静止画データの撮像記録要求を受けた際に、撮像静止画データ番号と、記録媒体１００５に記録したＴＳパケット数を記録位置情報保持部１１０３へ記録する。そして、記録用バッファ１１０１から記録媒体１００５への転送を停止し、代表画像データ変換部１００３からの撮像静止画データを記録媒体１００５へと転送する。その際も、記録媒体１００５へ転送したＴＳパケット数のカウントは継続する。
【００９３】
図１１は、記録位置情報保持部１１０３で保持された記録位置情報テーブルの様式を示したものである。撮像静止画データ番号、撮像画像位置のオフセット値であるＴＳパケット数が格納される。撮像静止画データ番号は、撮像した撮像画像数に対応しており、撮像画像位置情報は記録ファイルの先頭アドレスからのＴＳパケットの数であるオフセット値が格納される。
【００９４】
図１２に示すように、代表画像データ選択部１０１１は、記録位置情報処理部１２０１と、撮像静止画データ表示処理部１２０２と、選択終了処理部１２０３とを具備して構成される。
【００９５】
記録位置情報処理部１２０１は、多重化部１００４の記録位置情報保持部１１０３から記録位置情報テーブルを参照し、ユーザが所定の操作（例えば、ボタンを押下する等）により、選択された撮像番号の撮像静止画データが選択される。
【００９６】
撮像静止画データ表示処理部１２０２は、記録位置情報処理部１２０１で選択された撮像静止画データ番号に対応する撮像静止画データを、記録位置情報を用いてデマルチプレクサ１００６、及び映像デコーダ１００７で復号化処理を行い、モニタに出力する。ここで、撮像画像をモニタに出力するのは１枚撮像画像のみとは限らず、撮像画像を縮小し、複数枚並べてモニタに出力するようにしてもよい。
【００９７】
選択終了処理部１２０３は、ユーザが所定の操作（例えば、ボタンを押下する等）により、選択された撮像静止画データ番号の撮像静止画データが選択された場合、選択された撮像静止画データに対応する記録位置情報をオフセット値として、NULLパケットのトランスポート・プライベート・データ領域を書き換えることで、選択された撮像静止画データが代表画像データとして記録される。
【００９８】
次に、図１３を参照して、第２の実施形態の多重化データ記録装置において、第１の実施形態の多重化データ記録装置と異なる記録処理について説明をする。図１３は、受信された所定の番組の多重化データを記録媒体１００５に記録する場合の記録処理を示すフローチャートである。
【００９９】
図１３の処理において、第１の実施形態における記録処理の動作と異なる記録動作の開始（Ｓ３０７）以降の処理について説明する。なお、Ｓ３０１〜Ｓ３０６は、図６のＳ１０１〜Ｓ１０６と同様である。
【０１００】
時間の進行に伴い記録媒体１００５への記録動作が順次行われ（Ｓ３０８）、撮像指示部１００９から撮像指示要求が入力された際に、映像デコーダ１００７から符号化１０１２へ撮像データが入力され、符号化処理された撮像符号化データが代表画像データ変換部１００３に入力される。そして、ＴＳパケットに変換し、記録制御処理部１１０２に対して、撮像記録要求が入力された場合（Ｓ３０９：ＹＥＳ）は、そのときに記録された撮像静止画データ番号と、ＴＳパケット数を記録位置情報保持部１１０３へ格納し、撮像画像データの記録動作が行われる（Ｓ３１０）。撮像記録要求は、継続して監視される（Ｓ３０９：ＮＯ）。そして、記録動作が終了した場合（Ｓ３１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ３１１：ＮＯ）、Ｓ３０８に戻って記録動作を継続する。
【０１０１】
次に、記録動作終了後、撮像静止画データ選択指示がある場合（Ｓ３１２：ＹＥＳ）は、記録位置情報保持部１１０３から記録位置情報テーブルを取得する。次に、記録位置情報処理部１２０１において、記録位置情報テーブルを参照し、記録された多重化データから所定の撮像静止画データ番号に対応する撮像静止画データの復号化処理が行われ、モニタに出力される（Ｓ３１３）。例えば、ユーザの操作によって撮像静止画データ番号に対応する撮像静止画データを指定するとともに決定ボタン等が押下されたとき等が考えられる。選択された撮像静止画データを代表画像データに選択された場合（Ｓ３１４：ＹＥＳ）は、挿入したNULLパケットのトランスポート・プライベート・データ領域に、撮像静止画データ番号のＴＳパケット数をオフセット値として書き込んで（Ｓ３１５）、記録動作を終了する。なお、選択が終了していない場合（Ｓ３１４：ＮＯ）は、Ｓ３１３に戻って選択処理を継続する。
【０１０２】
撮像静止画データ選択指示がない場合（Ｓ３１２：ＮＯ）は、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から撮像静止画データ番号１の撮像静止画データ記録要求時における記録位置までのオフセット値を書込む（Ｓ３１５）。そして、記録動作を終了する。
【０１０３】
本実施形態に係る多重化データ記録装置によれば、撮像指示部１００９により、撮像されたｎ枚（ｎ＞＝１）の撮像静止画データの中から所望の撮像静止画データを代表画像データとすることができる。
【０１０４】
（第３の実施形態）
本発明の第３の実施形態に係る多重化データ記録装置について説明する。なお、第３の実施形態は、請求項４，１３の多重化データ記録装置及び多重化データ記録方法に相当し、撮像静止画データ削除手段は撮像静止画データ削除部２０１２に対応している。
【０１０５】
図１４は、本発明の第３の実施形態に係る多重化データ記録装置の全体構成図である。
【０１０６】
図１４に示す多重化データ記録装置は、多重化データ選別部２００１と、記録指示部２００２と、代表画像データ変換部２００３と、多重化部２００４と、記録媒体２００５と、デマルチプレクサ２００６と、映像デコーダ２００７と、音声デコーダ２００８と、撮像指示部２００９と、撮像静止画データ選択指示部２０１０と、代表画像データ選択部２０１１と、撮像静止画データ削除部２０１２と、符号化部２０１３を備えて構成される。
【０１０７】
図１４に示す第３の実施形態に係る多重化データ記録装置は、第２の実施形態の構成に殆ど同じ構成、及び動作を有するが、撮像静止画データ削除部２０１２を具備しており、構成が異なる。
【０１０８】
図１５に示すように、撮像静止画データ削除部２０１２は、削除対象検索部２１０１と、削除処理部２１０２とを具備して構成される。
【０１０９】
削除対象検索部２１０１は、代表画像データ選択部２０１１で選択された代表画像データ以外の撮像静止画データを検索する。その際、記録位置情報テーブルから削除対象の撮像静止画データ番号のオフセット値を参照し、削除する撮像静止画データを検索する。
【０１１０】
削除処理部２１０２は、削除する撮像静止画データのＴＳパケットを順次削除し、異なるPIDのＴＳパケットを削除した領域につめていくことで、不要な撮像静止画データを削除する。
【０１１１】
上記の操作を、不要な撮像静止画データに相当する分行い、代表画像データ以外の撮像静止画データを削除することができる。
【０１１２】
本実施形態に係る多重化データ記録装置によれば、ｎ枚（ｎ＞＝１）の代表画像データ以外の撮像静止画データが記録媒体２００５に記録されている多重化データ記録装置において、当該記録媒体２００５に記録された多重化データから不要な撮像静止画データを削除することができ、記録媒体２００５を効率よく使用することができる。
【０１１３】
（第４の実施形態）
本発明の第４の実施形態に係る多重化データ記録装置について説明する。なお、第４の実施形態は、請求項５，１４の多重化データ記録装置及び多重化データ記録方法に相当し、ＳＴＣ読出し指示手段はＳＴＣ読出し指示部３０１０、ＰＴＳ情報挿入手段はＰＴＳ情報挿入部３０１１にそれぞれ対応している。
【０１１４】
図１６は、本発明の第４の実施形態に係る多重化データ記録装置の全体構成図である。
【０１１５】
図１６に示す多重化データ記録装置は、多重化データ選別部３００１と、記録指示部３００２と、代表画像データ変換部３００３と、多重化部３００４と、記録媒体３００５と、デマルチプレクサ３００６と、映像デコーダ３００７と、音声デコーダ３００８と、撮像指示部３００９と、ＳＴＣ読出し指示部３０１０と、ＰＴＳ情報挿入部３０１１と、符号化部３０１２を備えて構成される。
【０１１６】
図１６に示す第４の実施形態に係る多重化データ記録装置は、第１の実施形態の構成に殆ど同じ構成、及び動作を有するが、ＳＴＣ読出し指示部３０１０と、ＰＴＳ情報挿入部３０１１とを具備されており、構成が異なる。
【０１１７】
また、記録処理における動作は、撮像した際にＳＴＣ値を読出し、読出したＳＴＣ値を再生時刻情報であるＰＴＳ値として、代表画像データのＴＳパケット化する前の段階であるＰＥＳパケット化する際に、ＰＥＳパケットのヘッダ情報にＰＴＳ情報を挿入して代表画像データに変換して、記録する点が異なる。
【０１１８】
以下、代表画像データ変換部３００３の動作について、第１の実施形態と異なる部分を説明する。なお、それ以外は、第１の実施形態と同様である。
【０１１９】
図１７は、第４の実施形態の多重化データ記録装置のおける代表画像データ変換部３００３の構成を示すブロック図である。
【０１２０】
図１７に示すように、代表画像データ変換部３００３は、符号化データ格納用バッファ３１０１と、ＰＴＳ情報処理部３１０２と、ＴＳパケット化部３１０３とを備えて構成される。
【０１２１】
符号化データ格納用バッファ３１０１は、符号化部３０１２から出力された撮像符号化データをバッファリングするための記録手段である。
【０１２２】
ＰＴＳ情報処理部３１０２は、ＰＴＳ情報挿入部３０１１を実行することで、ＰＥＳパケットのヘッダ情報に所定のフォーマットに従って、ＰＴＳ情報を挿入する。ＰＴＳ情報は、ユーザが所定の操作（例えば、ボタンを押下する等）により、撮像指示部３００９から映像デコーダ３００７に撮像要求を発行した際に、ＳＴＣ読出し指示部３０１０において、ＳＴＣ情報を読み出し、ＳＴＣ情報をＰＴＳ情報として、ＰＴＳ情報挿入部３０１１が保持している。
【０１２３】
ＴＳパケット化部３１０３は、MPEG２トランスポートストリームを構成すべく、ＴＳヘッダ情報等を付加しながら、188byteのデータ長の所定のフォーマットに従ったデータ構造のＴＳパケットを形成する。
【０１２４】
図１８は、受信された所定の番組の多重化データを記録媒体３００５に記録する場合の記録処理を示すフローチャートである。
【０１２５】
図１８の処理において、第１の実施形態における記録処理と異なる記録動作の開始（S４０７）以降について説明する。なお、Ｓ４０１〜Ｓ４０６は、図６のＳ１０１〜Ｓ１０６と同様である。
【０１２６】
記録対象の番組に対応する多重化データの記録媒体３００５への記録動作を開始する（S４０７）。多重化データは多重化部３００４の記録用バッファ３０１（図３参照）から出力されて記録媒体３００５に書き込まれる。
【０１２７】
そして、時間の進行に伴い記録媒体への記録動作が順次行われ（Ｓ４０８）、音声データのみ記録中に、撮像指示部３００９からの撮像記録要求が入力された際に（Ｓ４０９：ＹＥＳ）、ＳＴＣ読出し指示部３０１０でＳＴＣ情報を読み出し（Ｓ４１０）、ＰＴＳ情報挿入部３０１１でＳＴＣ情報を代表画像データのＰＴＳ情報として保持する（Ｓ４１１）。撮像記録要求は、継続して監視される（Ｓ４０９：ＮＯ）。そして、撮像静止画データの記録動作が行われる（Ｓ４１２）。そして、記録動作が終了した場合（Ｓ４１３：ＹＥＳ）、図１８の記録処理を終え、記録動作が未終了の場合（Ｓ４１３：ＮＯ）、Ｓ４０８に戻って記録動作を継続する。
【０１２８】
記録媒体３００５に記録されている特定のファイルに対する再生指示が入力されたとき、それ以降の再生処理が開始される。例えば、ユーザの操作によって再生開始ボタン等が押下されたとき等が考えられる。なお、再生指示の監視は継続的に行われる。
【０１２９】
次に、第1の実施形態と同様に、ファイルの先頭のパケットがNULLパケットである場合は、音声データのみ記録されたファイルと判別できる。そして、NULLパケットの解析を行い、トランスポート・プライベート・データ領域のオフセット値を抽出する。
【０１３０】
次に、抽出したオフセット値から代表画像データの先頭位置が判別できるため、以降の同一PIDの復号化処理を行うことにより、代表画像である撮像画像データがモニタに表示される。
【０１３１】
記録された多重化データを再生する際には、既知の技術を用いて再生処理が開始され、音声デコーダ３００８に多重分離されたデータを供給し、復号化処理を行い、スピーカに出力される。デマルチプレクサ３００６でPMTに示された映像データのPIDと同一のPIDが検出された場合は、同期クロックとＰＴＳ情報挿入部３０１１で挿入された代表画像データに付随するＰＴＳとの同期制御を行い、モニタに出力する。
【０１３２】
本実施形態に係る多重化データ記録装置によれば、撮像された際のＳＴＣ情報を読み出し、再生時刻情報であるＰＴＳ情報として、撮像静止画データに挿入する。そして、記録媒体３００５に記録した多重化データの再生開始指示を受けた際に、撮像されたタイミングで撮像静止画データが順次、切り替わりながら、再生することができる。
【０１３３】
（第５の実施形態）
本発明の第５の実施形態に係る多重化データ記録装置について説明する。なお、第５の実施形態は、請求項６，１５の多重化データ記録装置及び多重化データ記録方法に相当し、記録画像選択指示手段は記録画像選択指示部４００９、符号化手段は符号化部４０１２、代表画像データ変換手段は代表画像データ変換部４００３にそれぞれ対応している。
【０１３４】
図１９は、本発明の第５の実施形態に係る多重化データ記録装置の全体構成図である。
【０１３５】
第５の実施形態は、記録媒体４００５に記録されている記録静止画データを代表画像データとして記録することを特徴とする。記録静止画データとしては、ユーザが所定の操作により、カメラデバイスから撮影した画像データ、ネットワーク等を用いて記録した画像データ等が挙げられる。
【０１３６】
図１９に示す多重化データ記録装置は、多重化データ選別部４００１と、記録指示部４００２と、代表画像データ変換部４００３と、多重化部４００４と、記録媒体４００５と、デマルチプレクサ４００６と、映像デコーダ４００７と、音声デコーダ４００８と、記録画像選択指示部４００９と、記録画像選択部４０１０と、記録画像復号化部４０１１と、符号化部４０１２を備えて構成される。
【０１３７】
図１９に示す第５の実施形態に係る多重化データ記録装置は、第１の実施形態の構成に殆ど同じ構成、及び動作を有するが、記録画像選択指示部４００９と、記録画像選択部４０１０と、記録画像復号化部４０１１を具備しており、構成が異なる。
【０１３８】
また、第１に実施形態では、撮像静止画データを代表画像データとして、記録していたが、本実施形態では、記録媒体４００５に記録されている記録静止画データを代表画像データとして、記録するという点が異なる。
【０１３９】
以下に、記録画像選択指示部４００９、記録画像選択部４０１０、記録画像復号化部４０１１の構成、および動作を説明する。
【０１４０】
記録画像選択指示部４００９は、記録媒体４００５に記録されている記録静止画データの中から、ユーザの所望の記録静止画データを代表画像データに選択する指示を記録画像選択部４０１０に対して行う。
【０１４１】
記録画像選択部４０１０は、記録媒体４００５に記録されている記録静止画データを読み出し、記録画像復号化部４０１１に入力する。
【０１４２】
記録画像復号化部４０１１は、記録画像選択部４０１０から入力された記録静止画データの復号化処理を行い、モニタに出力する。そして、ユーザが所定の操作（例えば、ボタンを押下する等）により、モニタに表示された記録静止画データが選択された場合は、符号化部４０１２に復号化処理された記録静止画データが入力される。
【０１４３】
図２０を用いて、第５の実施形態における記録処理について説明する。特定の番組、記録モードに対する記録指示が入力されたとき（S５０１）、それ以降の記録処理が開始される。例えば、ユーザの操作によって番組、及び記録モードを選択的に指定するとともに録画開始ボタン等が押下されたとき等が考えられる。なお、記録指示の監視は継続的に行われる。
【０１４４】
次に、設定されたプログラム番号の番組に対応する多重化データを記録するために必要な初期設定を行う（S５０２）。例えば、記録媒体における記録領域の確保、制御情報の初期化等の準備を行う。
【０１４５】
記録指示の入力後は、記録画像データを代表画像データとして多重化するか否かを、ユーザが所定の操作（例えば、ボタンを押下する等）に従って選択する。記録画像データを代表画像データとして記録する場合（Ｓ５０３：ＹＥＳ）は、記録媒体４００５に記録されている記録静止画データを読み出し、記録画像復号化部４０１１に記録静止画データが入力され、復号化処理を行い（Ｓ５０４）、モニタに表示される。ユーザが所定の操作により、この記録静止画データを指定するか否かが決定される。記録画像復号化部４０１１で復号化した記録静止画データを代表画像として指定した場合（Ｓ５０５：ＹＥＳ）は、記録動作が開始される。復号化した記録静止画データが代表画像データ指定されない場合（Ｓ５０５：ＮＯ）は、次の記録静止画データが読み出され、記録画像復号化部４０１１に入力される。なお、Ｓ５０３にてＮＯの場合、Ｓ５０６以降の処理を行う。
【０１４６】
次に、記録すべきプログラム番号を多重化データ選別部４００１の番組情報解析処理部２０１（図２参照）に設定する（Ｓ５０６）。これにより、番組情報解析処理部２０１において、記録対象の番組が特定され、そのデータ構成が解析可能となる。
【０１４７】
次に、番組情報解析処理部２０１で解析された多重化データのうち、記録すべき多重化データに対するPIDを多重化データ選別部４００１の選別制御処理部２０２（図２参照）に設定する（Ｓ５０７）。選別制御処理部２０２に設定すべきPIDは、多重化データに含まれるPSIを参照することにより判別が可能となる。これにより、選別制御処理部２０２では、PIDに基づいて、音声データのみを抽出し、記録することが可能となる。
【０１４８】
次に、記録モードの判定を行う（Ｓ５０８）。記録モードが音声データと代表画像データのみ記録の場合（Ｓ５０８：ＹＥＳ）は、NULLパケットを挿入する（Ｓ５０９）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。音声データのみ記録でない場合（Ｓ５０８：ＮＯ）は、Ｓ５１０以降の処理を行う。
【０１４９】
次に、記録対象の番組に対応する多重化データの記録媒体４００５への記録動作を開始し（Ｓ５１０）、時間の進行に伴い記録媒体４００５への記録動作が順次行われる（Ｓ５１１）。
【０１５０】
次に、記録動作終了後（Ｓ５１２：ＹＥＳ）、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の映像データ記録要求時における記録位置までのオフセット値及び映像データのパケット数を書き込むことにより（Ｓ５１３）、記録動作を終了する。動作が未終了の場合（Ｓ５１２：ＮＯ）、Ｓ５１１に戻って、記録動作を継続する。
【０１５１】
本実施形態に係る多重化データ記録装置によれば、記録媒体４００５に記録されている記録静止画データの中から所望の記録静止画データを代表画像データとして、音声データと多重化して記録することができる。
【０１５２】
（第６の実施形態）
本発明の第６の実施形態に係る多重化データ記録装置について説明する。なお、第６の実施形態は、請求項７，１６の多重化データ記録装置及び多重化データ記録方法に相当し、外部記録媒体は外部記録媒体５０１３、内部記録媒体は記録媒体５００５、外部多重化手段は多重化部５００４にそれぞれ対応している。
【０１５３】
図２１は、本発明の第６の実施形態に係る多重化データ記録装置の全体構成図である。
【０１５４】
第６の実施形態は、外部記録媒体５０１３に記録を行う際に、記録媒体５００５に記録されている音声記録多重化データと、記録されている記録静止画データを代表画像データとして、音声記録多重化データに、多重化して記録することを特徴とする。記録静止画データとしては、ユーザが所定の操作により、カメラデバイスから撮影した画像データ、ネットワーク等を用いて記録した画像データ等が挙げられる。
【０１５５】
図２１に示す多重化データ記録装置は、多重化データ選別部５００１と、記録指示部５００２と、代表画像データ変換部５００３と、多重化部５００４と、記録媒体５００５と、デマルチプレクサ５００６と、映像デコーダ５００７と、音声デコーダ５００８と、記録画像選択指示部５００９と、記録画像選択部５０１０と、記録画像復号化部５０１１と、符号化部５０１２と、外部記録媒体５０１３とを備えて構成される。
【０１５６】
図２１に示す多重化データ記録装置は、第５の実施形態と同じ構成、動作する部分を有するが、外部記録媒体５０１３が具備されており、多重化部５００４、記録画像選択指示部５００９の動作が異なる。
【０１５７】
以下、多重化部５００４、記録画像選択指示部５００９の異なる構成、動作を有する部分を説明する。なお、それ以外は、第５の実施形態と同様である。
【０１５８】
多重化部５００４は、多重化データ選別部５００１から出力される音声データのＴＳパケットと、ユーザが所定の操作により、代表画像データ変換部５００３から出力される代表画像データのＴＳパケットとを多重化し、外部記録媒体５０１３に記録される。
【０１５９】
記録画像選択指示部５００９は、外部記録媒体５０１３に記録を行う際に、記録媒体５００５に記録されている記録静止画データを選択的に指定できる。
【０１６０】
次に、図２１を参照して、上記多重化データ記録装置の具体的な構成を説明する。図２２は、多重化部５００４の構成を示すブロック図である。
【０１６１】
図２２に示すように、多重化部５００４は、記録用バッファ５１０１と記録制御処理部５１０２とで構成され、記録媒体５００５への出力と、外部記録媒体５０１３への出力が可能である。
【０１６２】
以上の構成において、記録用バッファ５１０１は、入力された記録多重化データをバッファリングするための記録手段であり、所定のタイミングで記録用バッファ５１０１から記録データが読み出され、記録媒体５００５、もしくは外部記録媒体５０１３に記録される。
【０１６３】
記録制御処理部５１０２は、代表画像データ変換部５００３から記録画像データ多重化要求を受け、記録用バッファ５１０１から記録媒体５００５、または外部記録媒体５０１３への転送を停止し、代表画像データ変換部５００３からの代表画像データを記録媒体５００５、または外部記録媒体５０１３へと転送する。
【０１６４】
次に図２３を参照して、多重化データ記録装置において行われる記録処理について説明をする。図２３は、記録媒体５００５に記録された音声記録多重化データを外部記録媒体５０１３に記録する際の記録処理を示すフローチャートである。
【０１６５】
図２３の処理において、外部記録媒体５０１３への記録指示が入力されたとき（S６０１）、それ以降の記録処理が開始される。例えば、ユーザの操作によって、記録媒体５００５に記録されている音声記録多重化データを外部記録媒体５０１３へ記録する記録開始ボタン等が押下されたとき等が考えられる。
【０１６６】
記録動作開始後、指定された音声記録多重化データを外部記録媒体５０１３に記録するために必要な初期設定を行う（S６０２）。例えば、外部記録媒体５０１３における記録領域の確保、制御情報の初期化等の準備を行う。
【０１６７】
記録静止画データを代表画像データとして多重化するか否かを、ユーザが所定の操作（例えば、ボタンを押下する等）に従って選択する。記録画像データを代表画像データとして記録する場合（Ｓ６０３：ＹＥＳ）は、記録媒体５００５に記録されている記録静止画データを読み出し、記録画像復号化部５０１１に記録静止画データが入力され、復号化処理を行い（Ｓ６０４）、モニタに表示される。ユーザが所定の操作により、この記録静止画データを指定するか否かが決定される。記録画像復号化部５０１１で復号化した記録静止画データを代表画像として指定した場合（Ｓ６０５：ＹＥＳ）は、記録動作が開始される。復号化した記録静止画データが代表画像データ指定されない場合（Ｓ６０５：ＮＯ）は、次の記録静止画データが読み出され、記録画像復号化部５０１１に入力される。なお、Ｓ６０３にてＮＯの場合、Ｓ６０６以降の処理が行われる。
【０１６８】
次に、ＮＵＬＬパケットを挿入する（S６０６）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。音声データのみ記録でない場合は、以降の処理を行う。
【０１６９】
次に、外部記録媒体５０１３に記録する音声記録多重化データを、外部記録媒体５０１３への記録動作を開始する（S６０７）。音声記録多重化データは、記録媒体５００５から順次読み出され、記録用バッファ５１０１に出力され、所定のタイミングで外部記録媒体５０１３に書き込まれる。また、代表画像データに選択された記録静止画データは、符号化部５０１２に入力され、所定のフォーマットであるＭＰＥＧ４−ＡＶＣのフォーマットに符号化される。そして、符号化された記録静止画符号化データは、代表画像データ変換部５００３に入力され、MPEG２トランスポートストリームを構成すべく、ＴＳヘッダ情報等を付加しながら、188byteのデータ長の所定のフォーマットに従ったデータ構造のＴＳパケットを形成する。ＴＳパケット生成後に、記録制御処理５１０２に対して、記録要求が行われる。
【０１７０】
次に、音声記録多重化データの外部記録媒体５０１３への記録動作が順次行われ（Ｓ６０８）、記録制御処理部５１０２に対して、記録要求が入力された際（Ｓ６０９：ＹＥＳ）に、代表画像データの記録動作が行われる（Ｓ６１０）。記録要求は、継続して監視される（Ｓ６０９：ＮＯ）。
【０１７１】
そして、記録動作が終了した場合（Ｓ６１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ６１１：ＮＯ）、Ｓ１０８に戻って記録動作を継続する。
【０１７２】
次に、記録動作終了後、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の映像データ記録要求時における記録位置までのオフセット値及び映像データのパケット数を書込むことにより、記録動作を終了する（Ｓ６１２）。
【０１７３】
本実施形態に係る多重化データ記録装置によれば、記録媒体５００５に記録されている音声データを外部記録媒体５０１３へ記録する際に、記録媒体５００５に記録されている音声データに所望の代表画像データを付加して、外部記録媒体５０１３に記録することができる。
【０１７４】
（第７の実施形態）
本発明の第７の実施形態に係る多重化データ記録装置について説明する。なお、第７の実施形態は、請求項８，９，１７，１８の多重化データ記録装置及び多重化データ記録方法に相当し、文字情報生成手段は文字情報生成部６０１０、表示プレーン生成手段は表示プレーン生成部６０１２、符号化手段は符号化部６０１１、代表画像データ変換手段は代表画像データ変換部６００３にそれぞれ対応している。
【０１７５】
図２４は、本発明の第７の実施形態に係る多重化データ記録装置の全体構成図である。第７の実施形態における多重化データ記録装置は、第１の実施形態の構成に殆ど同じ構成及び動作を有するが、文字情報生成部６０１０と、表示プレーン生成部６０１２を具備しており、構成が異なる。
【０１７６】
以下、第１の実施形態と動作が異なる記録指示部６００２と、多重化データ選択部６００１と、デマルチプレクサ６００６と、新たに備えた文字情報生成部６０１０と、表示プレーン生成部６０１２について説明する。なお、それ以外は、第１の実施形態と同様である。
【０１７７】
記録指示部６００２は、第１の実施形態の記録指示部１０２に、“音声データと付属情報データのみを記録するモード”と、“音声データ、代表画像データ、付属情報データのみを記録するモード”が新たに付加されており、いずれかを選択的に切り替えることができる。
【０１７８】
多重化データ選別部６００１は、複数の番組のデータが多重化されてなる多重化データから、記録モードに応じた多重化データを選別し、多重化部６００４に入力する。ここで、記録モードは、記録指示部６００２からユーザが選択され、多重化データ選別部６００１に指定される。指定された記録モードが、音声データ、付属情報データのみ抽出することを指示された場合、所望のプログラム番号の音声データ、および番組情報の多重化データを抽出し、抽出したPIDに基づいて、所望のプログラム番号のＴＳパケットを抽出し、指示された記録モードに応じて、所望のＴＳパケットを出力する。
【０１７９】
デマルチプレクサ６００６は、複数の番組が多重化されている多重データのうち、特定のプログラム番号が設定された番組のデータを抽出したり、あるいは、それぞれの番組が構成する映像データや音声データなどの各コンポーネント毎に分離して、映像符号化データ、音声符号化データ、および付属情報データを出力する。出力された付属情報データは、文字情報生成部６０１０に入力される。
【０１８０】
文字情報生成部６０１０は、デマルチプレクサ６００６から入力された付属情報データを既知の技術を用いて、付属情報データから文字情報を生成する。
【０１８１】
表示プレーン生成部６０１２は、既知の技術を用いて、映像デコーダ６００７から出力される映像復号化データと、文字情報生成部６０１０から出力される文字情報とを、表示する表示プレーンを生成し、モニタに表示させる。
【０１８２】
ここで、表示プレーンの生成する際に、映像復号化データのみを表示プレーンとして、モニタに表示してもよく、また代表画像データを表示してもよい。
【０１８３】
また、文字情報生成部６０１０で生成された文字情報と、所定の静止画データを表示プレーン生成部６０１２に入力することにより、文字情報だけの代表画像データを作成することも考えられる。
【０１８４】
図２５は、受信された所定の番組の多重化データを記録媒体６００５に記録する場合の記録処理を示すフローチャートである。
【０１８５】
図２５の処理において、特定の番組、記録モードに対する記録指示が入力されたとき（Ｓ７０１）、それ以降の記録処理が開始される。本実施形態では、記録指示における記録モードは、音声データと付属情報データのみを記録する指示を行う。例えば、ユーザの操作によって番組、及び記録モードを選択的に指定するとともに録画開始ボタン等が押下されたとき等が考えられる。なお、記録指示の監視は継続的に行われる。
【０１８６】
記録指示の入力後は、設定されたプログラム番号の番組に対応する多重化データを記録するために必要な初期設定を行う（Ｓ７０２）。例えば、記録媒体６００５における記録領域の確保、制御情報の初期化等の準備を行う。
【０１８７】
次に、記録すべきプログラム番号を多重化データ選択部６００１の番組情報解析処理部２０１（図２参照）に設定する（Ｓ７０３）。これにより、番組情報解析処理部２０１において、記録対象の番組が特定され、そのデータ構成が解析可能となる。
【０１８８】
次に、番組情報解析処理部２０１で解析された多重化データのうち、記録すべき多重化データに対するPIDを多重化データ選択部６００１の選別制御処理部２０２（図２参照）に設定する（Ｓ７０４）。番組情報解析処理部２０１に設定すべきPIDは、多重化データに含まれるPSIを参照することにより判別が可能となる。これにより、選別制御処理部２０２では、PIDに基づいて、音声データと付属情報データのみを抽出し、記録することが可能となる。
【０１８９】
次に、記録モードの判定を行う（Ｓ７０５）。記録モードが音声データと付属情報データのみ記録の場合（Ｓ７０５：ＹＥＳ）は、NULLパケットを挿入する（Ｓ７０６）。このNULLパケットには、後述する撮像画像データのパケットまでのオフセット値及びパケット数が挿入される。音声データのみ記録でない場合（Ｓ７０５：ＮＯ）は、Ｓ７０７以降の処理を行う。
【０１９０】
次に、記録対象の番組に対応する多重化データの記録媒体６００５への記録動作を開始する（Ｓ７０７）。多重化データは、多重化部６００４の記録用バッファ３０１（図３参照）から出力されて記録媒体６００５に書き込まれる。
【０１９１】
そして、時間の進行に伴い記録媒体６００５への記録動作が順次行われ（Ｓ７０８）、音声データのみ記録中に、撮像要求が入力された際に、多重化部６００４の記録制御処理部３０２（図３参照）に対して、表示プレーン記録要求が入力された場合（Ｓ７０９：ＹＥＳ）は撮像表示プレーンデータの記録動作が行われる（Ｓ７１０）。表示プレーン記録要求は、継続して監視される（Ｓ７０９：ＮＯ）。そして、記録動作が終了した場合（Ｓ７１１：ＹＥＳ）、図６の記録処理を終え、記録動作が未終了の場合（Ｓ７１１：ＮＯ）、Ｓ７０８に戻って記録動作を継続する。
【０１９２】
次に、記録動作終了後、挿入したNULLパケットのトランスポート・プライベート・データ領域に、NULLパケット以降から初回の映像データ記録要求時における記録位置までのオフセット値及び映像データのパケット数を書込むことにより（Ｓ７１２）、記録動作を終了する。
【０１９３】
本実施形態に係るデータ記録装置は、以上のような構成され、動作するので、結果的に、生成された文字情報と、代表画像データをモニタに表示することができ、番組情報、記録日時等の文字情報から、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。また、記録された多重化データに含まれる文字情報を生成する処理が不要となり、代表画像データの復号化処理を行うだけで、番組情報、記録日時等を明示的に示すことができ、記録した多重化データの識別が容易になり、ユーザの視認性が向上する。
【産業上の利用可能性】
【０１９４】
本発明によれば、多重化データの中に含まれる映像データと音声データ、または音声データのみ、音声データと代表画像データ、音声データと番組情報を記録することを選択的に設定することが可能であり、ユーザの所望のタイミングで撮像された撮像画像データ、または記録画像データを代表画像データとして、多重化データに含める映像データとして記録することができるので、小型ディジタル機器、携帯電話等のモバイル向けディジタル機器のような記録容量の小さい記録媒体にディジタル放送を長時間記録するのに有用である。また、DVDレコーダのような大容量の記録媒体に記録した多重化データを、SDカード等の記録するときに映像データと音声データ、または音声データのみ、または音声データと番組情報を記録することを選択的に設定し、代表画像データを含めて記録し、モバイル向けのディジタル機器において記録メディアを読み出し、再生する等の用途にも応用できる。
【図面の簡単な説明】
【０１９５】
【図１】第１の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２】第１の実施形態における多重化データ選別部の主な機能を示すブロック図である。
【図３】第１の実施形態における多重化部の主な機能を示すブロック図である。
【図４】第１の実施形態における代表画像データ変換部の主な機能を示すブロック図である。
【図５】第１の実施形態におけるデマルチプレクサの主な機能を示すブロック図である。
【図６】第１の実施形態における記録処理の処理手順を示すフローチャートである。
【図７】第１の実施形態における再生処理の処理手順を示すフローチャートである。
【図８】第１の実施形態における記録媒体に記録される記録多重化データの様式の一例を示した図である。
【図９】第２の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図１０】第２の実施形態における多重化部の主な機能を示すブロック図である。
【図１１】第２の実施形態における撮像画像情報格納テーブルの様式の一例を示した図である。
【図１２】第２の実施形態における代表画像データ選択部の主な機能を示すブロック図である。
【図１３】第２の実施形態における記録処理の処理手順を示すフローチャートである。
【図１４】第３の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図１５】第３の実施形態における撮像静止画データ削除部の主な機能を示すブロック図である。
【図１６】第４の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図１７】第４の実施形態における代表画像データ変換部の主な機能を示すブロック図である。
【図１８】第４の実施形態における記録処理の処理手順を示すフローチャートである。
【図１９】第５の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２０】第５の実施形態における記録処理の処理手順を示すフローチャートである。
【図２１】第６の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２２】第６の実施形態における多重化部の主な機能を示すブロック図である。
【図２３】第６の実施形態における記録処理の処理手順を示すフローチャートである。
【図２４】第７の実施形態に適用した多重化データ記録装置の構成を表すブロック図である。
【図２５】第７の実施形態における記録処理の処理手順を示すフローチャートである。
【符号の説明】
【０１９６】
１０１ 多重化データ選別部
１０２ 記録指示部
１０３ 代表画像データ変換部
１０４ 多重化部
１０５ 記録媒体
１０６ デマルチプレクサ
１０７ 映像デコーダ
１０８ 音声デコーダ
１０９ 撮像指示部
１１０ 符号化部
１０１０ 撮像静止画データ選択指示部
１０１１ 代表画像データ選択部
２０１２ 撮像静止画データ削除部
３０１０ ＳＴＣ読出し指示部
３０１１ ＰＴＳ情報挿入部
４００９ 記録画像選択指示部
４０１０ 記録画像選択部
４０１１ 記録画像復号化部
５０１３ 外部記録媒体
６０１０ 文字情報生成部
６０１２ 表示プレーン生成部
【特許請求の範囲】
【請求項１】
多重化データの記録を行う多重化データ記録装置であって、多重化データを入力とし、音声データのみを記録することを指示する、または音声データと代表画像データのみを抽出することを指示する記録指示手段と、多重化データに含まれる音声データを抽出する多重化データ選別手段と、前記音声データと代表画像データを多重化して、記録媒体に記録する多重化手段とを備えることを特徴とする多重化データ記録装置。
【請求項２】
請求項１に記載の多重化データ記録装置において、静止画データを撮像する撮像指示手段と、撮像された静止画データ（以降、撮像静止画データ）を符号化する符号化手段と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項３】
請求項２に記載の多重化データ記録装置において、前記撮像指示手段により、撮像されたｎ枚（ｎ＞＝１）の前記撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示手段と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項４】
請求項３に記載の多重化データ記録装置において、記録された多重化データの中から選択された前記代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項５】
請求項１に記載の多重化データ記録装置において、システムタイムクロックを読み出すＳＴＣ読出し指示手段と、前記代表画像データ変換手段において、読み出したＳＴＣを再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入手段とを、さらに備えることを特徴とする多重化データ記録装置。
【請求項６】
請求項１に記載の多重化データ記録装置において、記録媒体に記録されている静止画データ（以降、記録静止画データ）の中から代表画像データを選択する記録画像選択指示手段と、記録静止画データを符号化する符号化手段と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項７】
請求項６に記載の多重化データ記録装置において、外部記録媒体に記録する際に、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項８】
請求項１に記載の多重化データ記録装置において、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成手段と、文字情報と代表画像データから表示プレーンを生成する表示プレーン生成手段とを、さらに備えることを特徴とする多重化データ記録装置。
【請求項９】
請求項８に記載の多重化データ記録装置において、前記文字情報生成手段で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化手段に入力することで符号化し、前記代表画像データ変換手段に入力とすることを特徴とする多重化データ記録装置。
【請求項１０】
多重化データの記録を行う多重化データ記録方法であって、多重化データを入力とし、音声データのみを抽出することを指示する、または音声データと代表画像データのみを記録することを指示する記録指示工程と、多重化データに含まれる音声データを抽出する多重化データ選別工程と、前記音声データと前記代表画像データを多重化して、記録媒体に記録する多重化工程とを含むことを特徴とする多重化データ記録方法。
【請求項１１】
請求項１０に記載の多重化データ記録方法において、静止画データを撮像する撮像指示工程と、撮像された静止画データ（以降、撮像静止画データ）を符号化する符号化工程と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１２】
請求項１１に記載の多重化データ記録方法において、前記撮像指示工程により、撮像されたｎ枚（ｎ＞＝１）の前記撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示工程と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１３】
請求項１２に記載の多重化データ記録方法において、記録された多重化データの中から選択された前記代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１４】
請求項１０に記載の多重化データ記録方法において、システムタイムクロックを読み出すＳＴＣ読出し指示工程と、前記代表画像データ変換工程において、読み出したＳＴＣを再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入工程とを、さらに含むことを特徴とする多重化データ記録方法。
【請求項１５】
請求項１０に記載の多重化データ記録方法において、記録媒体に記録されている静止画データの中から代表画像データを選択する記録画像選択指示工程と、記録静止画データを符号化する符号化工程と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１６】
請求項１５に記載の多重化データ記録方法において、外部記録媒体に記録する際に、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１７】
請求項１０に記載の多重化データ記録方法において、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成工程と、文字情報と静止画データから表示プレーンを生成する表示プレーン生成工程とを、さらに含むことを特徴とする多重化データ記録方法。
【請求項１８】
請求項１７に記載の多重化データ記録方法において、前記文字情報生成工程で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化工程に入力することで符号化し、前記代表画像データ変換工程に入力とすることを特徴とする多重化データ記録方法。
【請求項１】
多重化データの記録を行う多重化データ記録装置であって、多重化データを入力とし、音声データのみを記録することを指示する、または音声データと代表画像データのみを抽出することを指示する記録指示手段と、多重化データに含まれる音声データを抽出する多重化データ選別手段と、前記音声データと代表画像データを多重化して、記録媒体に記録する多重化手段とを備えることを特徴とする多重化データ記録装置。
【請求項２】
請求項１に記載の多重化データ記録装置において、静止画データを撮像する撮像指示手段と、撮像された静止画データ（以降、撮像静止画データ）を符号化する符号化手段と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項３】
請求項２に記載の多重化データ記録装置において、前記撮像指示手段により、撮像されたｎ枚（ｎ＞＝１）の前記撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示手段と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項４】
請求項３に記載の多重化データ記録装置において、記録された多重化データの中から選択された前記代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項５】
請求項１に記載の多重化データ記録装置において、システムタイムクロックを読み出すＳＴＣ読出し指示手段と、前記代表画像データ変換手段において、読み出したＳＴＣを再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入手段とを、さらに備えることを特徴とする多重化データ記録装置。
【請求項６】
請求項１に記載の多重化データ記録装置において、記録媒体に記録されている静止画データ（以降、記録静止画データ）の中から代表画像データを選択する記録画像選択指示手段と、記録静止画データを符号化する符号化手段と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項７】
請求項６に記載の多重化データ記録装置において、外部記録媒体に記録する際に、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化手段を、さらに備えることを特徴とする多重化データ記録装置。
【請求項８】
請求項１に記載の多重化データ記録装置において、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成手段と、文字情報と代表画像データから表示プレーンを生成する表示プレーン生成手段とを、さらに備えることを特徴とする多重化データ記録装置。
【請求項９】
請求項８に記載の多重化データ記録装置において、前記文字情報生成手段で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化手段に入力することで符号化し、前記代表画像データ変換手段に入力とすることを特徴とする多重化データ記録装置。
【請求項１０】
多重化データの記録を行う多重化データ記録方法であって、多重化データを入力とし、音声データのみを抽出することを指示する、または音声データと代表画像データのみを記録することを指示する記録指示工程と、多重化データに含まれる音声データを抽出する多重化データ選別工程と、前記音声データと前記代表画像データを多重化して、記録媒体に記録する多重化工程とを含むことを特徴とする多重化データ記録方法。
【請求項１１】
請求項１０に記載の多重化データ記録方法において、静止画データを撮像する撮像指示工程と、撮像された静止画データ（以降、撮像静止画データ）を符号化する符号化工程と、符号化された撮像符号化データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１２】
請求項１１に記載の多重化データ記録方法において、前記撮像指示工程により、撮像されたｎ枚（ｎ＞＝１）の前記撮像静止画データから代表画像データを選択指示する撮像静止画データ選択指示工程と、撮像静止画データ選択指示がある場合に、記録媒体から撮像されたｎ枚から代表画像データを選択することが可能な代表画像データ選択工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１３】
請求項１２に記載の多重化データ記録方法において、記録された多重化データの中から選択された前記代表画像データ以外の撮像静止画データを削除する撮像静止画データ削除工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１４】
請求項１０に記載の多重化データ記録方法において、システムタイムクロックを読み出すＳＴＣ読出し指示工程と、前記代表画像データ変換工程において、読み出したＳＴＣを再生時刻情報であるＰＴＳ情報として、代表画像データに挿入するＰＴＳ情報挿入工程とを、さらに含むことを特徴とする多重化データ記録方法。
【請求項１５】
請求項１０に記載の多重化データ記録方法において、記録媒体に記録されている静止画データの中から代表画像データを選択する記録画像選択指示工程と、記録静止画データを符号化する符号化工程と、符号化された撮像静止画データを入力とし、代表画像データに変換する代表画像データ変換工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１６】
請求項１５に記載の多重化データ記録方法において、外部記録媒体に記録する際に、内部記録媒体に記録されている音声データと代表画像データとを多重化する外部多重化工程を、さらに含むことを特徴とする多重化データ記録方法。
【請求項１７】
請求項１０に記載の多重化データ記録方法において、多重化データに含まれる付属情報データから番組名称、放送日時、字幕の文字情報を生成する文字情報生成工程と、文字情報と静止画データから表示プレーンを生成する表示プレーン生成工程とを、さらに含むことを特徴とする多重化データ記録方法。
【請求項１８】
請求項１７に記載の多重化データ記録方法において、前記文字情報生成工程で生成された文字情報と前記代表画像データを１枚の静止画データとして、前記符号化工程に入力することで符号化し、前記代表画像データ変換工程に入力とすることを特徴とする多重化データ記録方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【公開番号】特開２００７−７４５２８（Ｐ２００７−７４５２８Ａ）
【公開日】平成１９年３月２２日（２００７．３．２２）
【国際特許分類】
【出願番号】特願２００５−２６０９４９（Ｐ２００５−２６０９４９）
【出願日】平成１７年９月８日（２００５．９．８）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成１９年３月２２日（２００７．３．２２）
【国際特許分類】
【出願日】平成１７年９月８日（２００５．９．８）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]