画像データ処理装置、画像記録装置及び画像データ処理方法
【課題】再符号化によるデータサイズの増加を防止する。
【解決手段】画像データ処理装置であって、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器とを有する。
【解決手段】画像データ処理装置であって、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器とを有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像の記録のための処理に関し、特に圧縮動画ストリームの記録のための処理に関する。
【背景技術】
【０００２】
近年、テレビジョン番組を記録するためのＤＶＤ（Digital Versatile Disc）／ＨＤＤ（Hard Disk Drive）レコーダが普及してきている。テレビジョン番組を記録する際には、動画像がＭＰＥＧ（Moving Picture Experts Group）等の方式で符号化される。符号化する際には、平均ビットレート、画面サイズ等の符号化条件を決定する必要があるが、最適な符号化条件は、スポーツ番組、ドラマ番組、又はニュース番組等の番組の種類によって異なる。
【０００３】
そこで、テレビジョン番組の種類から符号化条件を決定し、この符号化条件に従ってアナログテレビジョン信号を符号化する装置が、例えば特許文献１に開示されている。アナログテレビジョン信号が入力されるので、この装置では符号化が必ず行われる。
【特許文献１】特開平１１−５５６２６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ＤＶＤ／ＨＤＤレコーダ等に番組の記録を行う際には、限られた記憶容量に多くの番組を記録するために、データサイズが小さくなるように符号化が行われる。近年のデジタル化されたテレビジョン放送を受信する場合には、受信したビットストリームに再符号化を行って（すなわち、既に符号化されているデータを一旦復号化してから、高効率な符号化方式で符号化を再び行って）、データサイズを小さくすることが行われている。
【０００５】
しかし、デジタル放送の場合には、受信された映像は既に圧縮されているので、再符号化しても、データサイズが元の圧縮動画ストリームのデータサイズよりも少なくならない場合や、かえってデータサイズが増えてしまう場合がある。このような場合の例としては、（１）映像の動きが速いスポーツ番組や、映像の輝度の時間的変化が激しい歌番組等の圧縮しにくい番組の場合、（２）ストリームが高効率な符号化方式（ＭＰＥＧ−４ ＡＶＣ（Advanced Video Coding）／Ｈ．２６４等）によって既に大きく圧縮されている場合、が挙げられる。
【０００６】
本発明は、再符号化による圧縮動画ストリームのデータサイズの増加を防止することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するため、本発明に係る画像データ処理装置は、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器とを有する。
【０００８】
これによると、記録モードがストリーム記録モードである場合には再符号化が行われないので、圧縮動画ストリームのデータサイズの増加を防止することができる。
【０００９】
また、本発明に係る画像記録装置は、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器と、前記再符号化ストリーム又は前記ストリーム制御器から出力された前記圧縮動画ストリームを記録するデータ記録装置とを有する。
【００１０】
また、本発明に係る画像データ処理方法は、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成ステップと、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化ステップと、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化ステップが行われるように、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化ステップが行われないように、前記圧縮動画ストリームを制御するストリーム制御ステップとを有する。
【発明の効果】
【００１１】
本発明によれば、再符号化による圧縮動画ストリームのデータサイズの増加を防止することができる。また、動画像を適切な画質で記録することが可能となる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【００１３】
図１は、本発明の実施形態に係る画像記録装置の構成を示すブロック図である。図１の画像記録装置は、ストリーム制御器１２と、記録条件生成器１４と、データ記録制御器１６と、再符号化部２０と、データ記録装置３２とを有している。再符号化部２０は、映像・音声ストリーム分離器２２と、映像信号再符号化器２４と、音声信号再符号化器２６と、多重化器２８とを有している。ストリーム制御器１２、記録条件生成器１４、データ記録制御器１６、及び再符号化部２０は、画像データ処理装置を構成している。
【００１４】
デジタル放送では、映像に関してＭＰＥＧ−２、又はＭＰＥＧ−４ ＡＶＣ等の方式で圧縮符号化された映像ストリームと、圧縮符号化された音声ストリーム（音声ストリームについての説明は割愛する）とが多重化された、圧縮動画ストリームＳＴＲが放送されている。記録条件生成器１４は、外部から入力された番組情報ＩＮＦから、圧縮動画ストリームＳＴＲによって伝送される記録対象番組についての番組情報を抽出し、抽出された情報に従って記録モードを決定し、決定された記録モードをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に出力する。ストリーム制御器１２は、記録条件生成器１４で決定された記録モードに従って、多重化ストリームである圧縮動画ストリームＳＴＲを映像・音声ストリーム分離器２２又はデータ記録制御器１６に出力する。
【００１５】
映像・音声ストリーム分離器２２は、圧縮動画ストリームＳＴＲを映像ストリーム及び音声ストリームに分離し、映像ストリームを映像信号再符号化器２４に、音声ストリームを音声信号再符号化器２６に出力する。映像信号再符号化器２４は、映像信号復号化器及び映像信号符号化器（図示せず）を有している。映像信号復号化器が映像ストリームを復号化し、映像信号符号化器が、得られた復号結果を記録条件生成器１４で決定された記録モードに従って再符号化（再圧縮）する。音声信号再符号化器２６は、音声信号復号化器及び音声信号符号化器（図示せず）を有している。音声信号復号化器が音声ストリームを復号化し、音声信号符号化器が、得られた復号結果を記録条件生成器１４で決定された記録モードに従って再符号化する。
【００１６】
映像信号再符号化器２４及び音声信号再符号化器２６は、様々な方式での再符号化を行い得る。特に映像信号再符号化器２４の映像信号符号化器は、高効率な符号化方式で再符号化を行うが、ここでは例として、ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４で再符号化するものとする。多重化器２８は、再符号化された映像ストリームと再符号化された音声ストリームとを再多重化して、再符号化ストリームとして出力する。
【００１７】
データ記録制御器１６は、再符号化ストリーム又はストリーム制御器１２から直接受け取った圧縮動画ストリームＳＴＲをデータ記録装置３２に出力し、データ記録装置３２は、受け取ったストリームを記録媒体に記録する。データ記録装置３２は、具体的にはＤＶＤドライブ又はＨＤＤ等の記録装置であって、ＤＶＤ又はハードディスク等の記録媒体にストリームを記録する。
【００１８】
図１の画像記録装置は、入力された圧縮動画ストリームＳＴＲを、再符号化せずにそのまま記録するストリーム記録モードでの記録と、圧縮動画ストリームＳＴＲを再符号化して記録する再符号化モードでの記録が可能である。ストリーム記録モードの場合には、ストリーム制御器１２は、入力された圧縮動画ストリームＳＴＲを、再符号化部２０を経由させないようにデータ記録制御器１６に出力し、データ記録装置３２に記録させるので、放送波の映像品質を保ったまま記録することが可能となる。
【００１９】
一方、再符号化モードの場合には、ストリーム制御器１２は、入力された圧縮動画ストリームＳＴＲを、再符号化部２０に出力し、再符号化させてからデータ記録装置３２に記録させる。このため、圧縮動画ストリームＳＴＲの動画像が再符号化に適した動画像であれば、画質の劣化を抑えつつ、再符号化ストリームのデータサイズを抑えることが可能となる。
【００２０】
図２は、図１の画像記録装置における処理の流れの例を示すフローチャートである。記録条件生成器１４に入力される番組情報ＩＮＦには、圧縮動画ストリームＳＴＲに対応する番組情報が含まれており、圧縮動画ストリームＳＴＲに対応する番組情報には、その圧縮動画ストリームＳＴＲに対応する記録対象番組の種類やキーワードが含まれている。
【００２１】
図２のステップＳ１２では、記録条件生成器１４は、入力された番組情報ＩＮＦのうち、圧縮動画ストリームＳＴＲに対応する番組情報から、圧縮動画ストリームＳＴＲに対応する記録対象番組の種類（番組のジャンル）を抽出する。番組情報ＩＮＦは、例えば、放送波によって伝送された番組情報（ＥＰＧ（Electronic Program Guide））であってもよいし、インターネット経由でダウンロードされた番組情報（ｉＥＰＧ）であってもよい。また、番組情報ＩＮＦは、圧縮動画ストリームＳＴＲを構成するＭＰＥＧ−２ ＴＳ（Transport Stream）パケット内に含まれる番組情報であってもよい。番組の種類としては、例えば、ニュース番組、スポーツ番組、及び歌番組が挙げられる。
【００２２】
ステップＳ１４では、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であるか否か、すなわち、抽出された種類が、所定の符号化困難な番組の種類（例えば、映像の動きが速いスポーツ番組や、映像の輝度の時間的変化が激しい歌番組）に該当するか否かを判断する。該当する場合には、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると判断し、処理をステップＳ１６に進める。該当しない場合にはステップＳ１８に進む。
【００２３】
ステップＳ１６では、記録条件生成器１４は、記録モードをストリーム記録モードに決定し、この記録モードをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に出力する。この場合、ストリーム制御器１２は、圧縮動画ストリームＳＴＲをデータ記録制御器１６に出力し、データ記録制御器１６は、このストリームをデータ記録装置３２に記録させる。すなわち、再符号化が行われないストリーム記録（直接記録）が行われる。
【００２４】
ステップＳ１８では、記録条件生成器１４は、記録モードを予めユーザに指定された記録モードに決定し、この記録モードをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に出力する。この場合、記録モードとして再符号化モードが予め指定されているときには、ストリーム制御器１２は、圧縮動画ストリームＳＴＲを映像・音声ストリーム分離器２２に出力する。このストリームを、映像信号再符号化器２４、及び音声信号再符号化器２６が再符号化し、その結果を多重化器２８が再多重化してデータ記録制御器１６に出力する。データ記録制御器１６は、多重化器２８で得られた再符号化ストリームをデータ記録装置３２に記録させる。すなわち、再符号化モードでの記録が行われる。記録モードとしてストリーム記録モードが予め指定されているときには、ステップＳ１６と同様にストリーム記録が行われる。
【００２５】
図３は、図１の画像記録装置における処理の流れの他の例を示すフローチャートである。図３のステップＳ２２では、記録条件生成器１４は、入力された番組情報ＩＮＦのうちの圧縮動画ストリームＳＴＲに対応する番組情報から、圧縮動画ストリームＳＴＲに対応する記録対象番組のキーワードを抽出する。キーワードとしては、例えば、番組のタイトル等に含まれる「ニュース」、スポーツの名称（「野球」等）、特定の歌番組名、及び特定の歌手名等が挙げられる。キーワードは、番組に対応付けられた何らかのデータであればよい。
【００２６】
ステップＳ２４では、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であるか否か、すなわち、抽出されたキーワードが、所定の符号化困難な番組のキーワードに該当するか否かを判断する。該当する場合には、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると判断し、処理をステップＳ２６に進める。該当しない場合にはステップＳ２８に進む。ステップＳ２６では、図２のステップＳ１６と同様に、ストリーム記録が行われる。ステップＳ２８では、図２のステップＳ１８と同様にユーザに指定された記録モードでの記録が行われる。
【００２７】
このように、図１の画像記録装置は、番組情報に従って自動的に記録モードを決定するので、適切な記録モードで番組を記録することができる。再符号化が困難である番組については、再符号化を行わず、入力された圧縮動画ストリームＳＴＲをそのまま記録するので、番組を、画質を劣化させることなく記録することができる。
【００２８】
なお、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると番組情報ＩＮＦから判断した場合には、所定値以上の符号化ビットレートで再符号化する再符号化モードに、記録モードを決定してもよい。この場合、ストリーム記録は行われず、再符号化部２０は、圧縮動画ストリームＳＴＲをこの符号化ビットレートで再符号化する。すると、例えば動きが激しい映像が多い番組の圧縮動画ストリームについても、画質劣化を抑えつつ、再符号化することが可能となる。
【００２９】
図４は、図１の画像記録装置の第１の変形例の構成を示すブロック図である。図４の画像記録装置は、記録条件生成器１４に代えて記録条件生成器２１４を有する点が、図１の画像記録装置とは異なっている。記録条件生成器２１４は、ユーザに対するメッセージを表示するためのメッセージデータを表示器３６に出力する点と、入力された番組情報ＩＮＦだけではなくユーザによる設定情報ＵＳＴにも従って記録モードを決定する点が、図１の記録条件生成器１４とは異なっている。表示器３６は、記録条件生成器２１４からのメッセージデータに従ってメッセージを表示する。表示器３６は図４の画像記録装置の外部にあってもよいし（例えばテレビジョン受像機として）、図４の画像記録装置が表示器３６を含んでいてもよい。
【００３０】
図５は、図４の表示器３６への表示の例を示す説明図である。記録条件生成器２１４は、決定された記録モードでの記録を開始するとともに、記録モードを示すメッセージデータを表示器３６に出力する。
【００３１】
図２及び図３を参照して説明したように、記録条件生成器２１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると番組情報から判断した場合、すなわち、記録対象番組の種類が符号化困難な番組の種類に該当する場合や、記録対象番組のキーワードが符号化困難な番組のキーワードに該当する場合等には、ストリーム記録モードを、記録モードとして推奨する推奨モードとし、記録モードをこの推奨モードに決定する。この場合、記録条件生成器２１４は、ストリーム記録（直接記録）を開始するとともに、図５のように、ストリーム記録が行われることを示すメッセージデータを表示器３６に出力する。これにより、ユーザは、現在の記録モード（推奨モード）を表示器３６の表示から知ることが可能となる。
【００３２】
なお、記録条件生成器２１４は、所定値以上の符号化ビットレートで再符号化するモードを推奨モードにしてもよい。
【００３３】
図６は、図４の表示器３６への表示の他の例を示す説明図である。記録条件生成器２１４は、ストリーム記録モードを推奨モードにした場合には、図６のように、推奨モード（ストリーム記録モード）を推奨する表示、及び推奨モードでの処理（ストリーム記録）を行うか否かをユーザが選択するための表示を行うためのメッセージデータを表示器３６に出力してもよい。
【００３４】
図６の表示の後、記録条件生成器２１４は、ユーザの選択を示す設定情報ＵＳＴに従って記録モードを決定する。ユーザが「Ｙｅｓ」を選択した場合には、記録条件生成器２１４は、記録モードをストリーム記録モードに決定する。この場合、ストリーム制御器１２は、再符号化部２０を経由させることなく、圧縮動画ストリームＳＴＲをデータ記録装置３２に直接記録させる。ユーザが「Ｎｏ」を選択した場合には、記録条件生成器２１４は、記録モードを再符号化モードに決定し、再符号化部２０は、圧縮動画ストリームＳＴＲを再符号化後、データ記録装置３２に記録させる。
【００３５】
図７は、図４の表示器３６への表示の更に他の例を示す説明図である。記録条件生成器２１４は、図７のように、推奨モード（ストリーム記録モード）を推奨する表示、及び選択可能な記録モードの複数の候補の表示を行うためのメッセージデータを表示器３６に出力してもよい。
【００３６】
図７の表示の後、記録条件生成器２１４は、ユーザの選択を示す設定情報ＵＳＴに従って記録モードを決定する。ユーザが「高圧縮再符号化モード」を選択した場合には、記録条件生成器２１４は、記録モードを高圧縮再符号化モードに決定する。この場合、映像信号再符号化器２４及び音声信号再符号化器２６は、画質が許容できる範囲内で、再符号化後の再符号化ストリームのデータサイズが最小となるように、圧縮動画ストリームＳＴＲを再符号化する。データ記録装置３２は得られた再符号化ストリームを記録する。
【００３７】
ユーザが「高画質再符号化モード」を選択した場合には、記録条件生成器２１４は、記録モードを高画質再符号化モードに決定する。この場合、映像信号再符号化器２４及び音声信号再符号化器２６は、再符号化後の再符号化ストリームのビットレートが所定値以上となるように、圧縮動画ストリームＳＴＲを再符号化する。データ記録装置３２は得られた再符号化ストリームを記録する。ユーザが「ストリーム記録モード」を選択した場合には、記録条件生成器２１４は、記録モードをストリーム記録モードに決定する。この場合、ストリーム制御器１２は、再符号化部２０を経由させることなく、圧縮動画ストリームＳＴＲをデータ記録装置３２に直接記録させる。
【００３８】
このように、図４の画像記録装置によると、図５のように現在の記録モードをユーザに通知したり、図６のよう推奨モードでの処理を行うか否かをユーザに選択させたり、図７のように選択可能な記録モードをユーザに通知し、選択させることができる。したがって、ユーザの嗜好に応じた記録を実現することができる。
【００３９】
図８は、図１の画像記録装置の第２の変形例の構成を示すブロック図である。図８の画像記録装置は、記録条件生成器２１４及び再符号化部２０に代えて記録条件生成器３１４及び再符号化部３２０を有する点が、図４の画像記録装置とは異なっている。再符号化部３２０は、映像・音声ストリーム分離器２２及び多重化器２８に代えて、映像・音声ストリーム分離器３２２及び多重化器３２８を有する点が、再符号化部２０とは異なっている。
【００４０】
記録条件生成器２１４は、記録モードを決定し、決定された記録モードを映像・音声ストリーム分離器３２２にも出力する。記録条件生成器２１４は、音声のみ再符号化する記録モードも選択可能であるとする。記録モードが、音声のみ再符号化する記録モードである場合には、映像・音声ストリーム分離器３２２は、映像ストリームを多重化器３２８に、音声ストリームを音声信号再符号化器２６に出力する。図１の場合と同様に、音声信号再符号化器２６は、音声ストリームを復号化及び再符号化する。多重化器３２８は、映像・音声ストリーム分離器３２２から出力された映像ストリームと再符号化された音声ストリームとを再多重化して、再符号化ストリームとして出力する。
【００４１】
記録モードが、映像をも再符号化する記録モードである場合には、映像・音声ストリーム分離器３２２は、映像ストリームを映像信号再符号化器２４に出力する。図１を参照して説明したように、映像信号再符号化器２４は、映像ストリームを再符号化し、多重化器３２８は、再符号化された映像ストリームと音声ストリームとを再多重化する。
【００４２】
このように、図８の画像記録装置は、音声ストリームについては再符号化するが、映像ストリームについてはストリーム記録をすることが可能である。このため、映像の質を重視した記録を行うことができる。
【００４３】
図９は、図１の画像記録装置の第３の変形例の構成を示すブロック図である。図９の画像記録装置は、記録条件生成器２１４及び再符号化部２０に代えて記録条件生成器４１４及び再符号化部４２０を有する点が、図４の画像記録装置とは異なっている。再符号化部４２０は、再符号化比較器としてのビット数比較器４２９を更に有する点が、再符号化部２０とは異なっている。
【００４４】
図１０は、図９の画像記録装置における処理の流れの例を示すフローチャートである。図１１（ａ）は、１チャネルのみ記録可能な場合における記録モードの例について示すタイミングチャートである。図１１（ｂ）は、２チャネル記録可能な場合における記録モードの例について示すタイミングチャートである。図１０のステップＳ３２では、記録条件生成器４１４は、記録モードが再符号化モードＲＥであることをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に通知し、再符号化モードＲＥでの再符号化ストリームの記録を実行させる（図１１（ａ）及び（ｂ）のＣＨ１）。
【００４５】
ステップＳ３４では、記録条件生成器４１４は、再符号化記録と同時にストリーム記録が可能（すなわち、２チャネル同時記録が可能）であるか否かを判断する。可能である場合にはステップＳ３６に、可能ではない場合にはステップＳ３８に進む。ステップＳ３６では、記録条件生成器４１４は、ストリーム記録を行うようにストリーム制御器１２に指示し、ストリーム記録モードＤＲでのストリーム記録を再符号化モードＲＥでの記録と同時に実行させる（図１１（ｂ）のＣＨ２）。
【００４６】
ステップＳ３８では、ビット数比較器４２９は、多重化器２８から多重化後の再符号化ストリームを受け取り、再符号化ストリームの一部（例えば所定の長さの期間内）のビット数が、ストリーム制御器１２から出力された再符号化前の圧縮動画ストリームの対応する部分のビット数より少なく、かつ、これらの数の間の差が所定値以上であるか否かを判定し、判定結果Ｒ１を記録条件生成器４１４に出力する。記録条件生成器４１４は、再符号化ストリームのビット数が圧縮動画ストリームのビット数より少なく、かつ、これらの数の間の差が所定値以上である場合には処理をステップＳ３２に戻し、その他の場合には処理をステップＳ４０に進める。
【００４７】
ステップＳ４０では、記録条件生成器４１４は、ストリーム記録が同時に実行中であるか否かを判定する。同時に実行中である場合にはステップＳ４２に進み、同時に実行中ではない場合にはステップＳ４４に進む。
【００４８】
ステップＳ４２では、記録条件生成器４１４は、再符号化モードＲＥでの記録を中止するように、映像信号再符号化器２４及び音声信号再符号化器２６に通知する。再符号化モードＲＥでの記録は中止され、ストリーム記録モードＤＲでの記録は継続される（図１１（ｂ）のＣＨ１）。ステップＳ４４では、記録条件生成器４１４は、再符号化モードＲＥでの記録を中止するように、ストリーム制御器１２、映像信号再符号化器２４及び音声信号再符号化器２６に通知する。再符号化モードＲＥでの記録は中止され、それ以降はストリーム制御器１２が圧縮動画ストリームを出力し、ストリーム記録モードＤＲでの記録が行われる（図１１（ａ））。
【００４９】
このように、図９の画像記録装置は、再符号化ストリーム及び再符号化前の圧縮動画ストリームに従って、どちらを記録すべきか、すなわち、最適な記録モードを決定するので、番組情報を利用できない場合であっても、最適な画像記録を実現することができる。
【００５０】
図１２は、図１の画像記録装置の第４の変形例の構成を示すブロック図である。図１２の画像記録装置は、記録条件生成器２１４及び再符号化部２０に代えて記録条件生成器５１４及び再符号化部５２０を有する点が、図４の画像記録装置とは異なっている。再符号化部５２０は、再符号化比較器としての劣化判定器５２９を更に有する点が、再符号化部２０とは異なっている。
【００５１】
図１３は、図１２の画像記録装置における処理の流れの例を示すフローチャートである。図１２の画像記録装置は、再符号化モードＲＥでの記録を継続するか否かを、再符号化による発生ビット数ではなく、再符号化された映像ストリームの画像の画質によって判定する。
【００５２】
図１３のフローチャートは、ステップＳ３８に代えてステップＳ５８を有する点が図１０のフローチャートとは異なっているので、ステップＳ５８についてのみ説明する。映像信号再符号化器２４は、再符号化前の圧縮動画ストリーム（映像ストリーム）の復号化を行い、その結果に対して画面間差分符号化を行って再符号化ストリームを求めるので、圧縮動画ストリームの復号結果ＳＰと、再符号化の際に求められた再符号化された映像ストリームの復号結果ＲＰとを出力可能である。
【００５３】
ステップＳ５８では、劣化判定器５２９は、映像信号再符号化器２４から、再符号化前の圧縮動画ストリームの復号結果ＳＰと再符号化された映像ストリームの復号結果ＲＰとを受け取り、復号結果ＲＰが復号結果ＳＰより画像として所定の程度以上劣化しているか否かを判定し、判定結果Ｒ２を記録条件生成器５１４に出力する。記録条件生成器５１４は、復号結果ＲＰが復号結果ＳＰより所定の程度以上劣化している場合には処理をステップＳ３２に戻し、その他の場合には処理をステップＳ４０に進める。記録条件生成器５１４は、その他の点は図９の記録条件生成器４１４と同様である。
【００５４】
劣化判定器５２９は、復号結果の劣化の度合いとして、２つの復号結果の間における画素レベルの差分の絶対値を、例えば画面全体について合計して得られた値を用いてもよいし、画像評価の指標であるＰＳＮＲ（Peak Signal-to-Noise Ratio）を用いてもよい。
【００５５】
なお、復号結果ＲＰによる画像と復号結果ＳＰによる画像とを表示器３６に表示させ、その表示を見たユーザに、再符号化モードＲＥでの記録を継続するか否かを判断させ、記録条件生成器５１４に指示させるようにしてもよい。
【００５６】
以上の各画像記録装置の各機能ブロックは典型的には集積回路であるＬＳＩ（Large-Scale Integration）として実現される。これらは個別に１チップ化されていてもよいし、一部又はデータ記録装置３２及び表示器３６以外の全てを含むように１チップ化されていてもよい。
【００５７】
ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ（Integrated Circuit）、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。製造後にプログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、製造後にＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。更には、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。
【００５８】
また、本発明は、以上の各画像記録装置が有する特徴的な手段をステップとする方法として実現したり、それらのステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ（Compact Disc-Read Only Memory）等の記録媒体やインターネット等の伝送媒体を介して配信することができる。
【産業上の利用可能性】
【００５９】
以上説明したように、本発明は、圧縮動画ストリームのデータサイズの増加を防止することができるので、画像データ処理装置等について有用である。
【図面の簡単な説明】
【００６０】
【図１】本発明の実施形態に係る画像記録装置の構成を示すブロック図である。
【図２】図１の画像記録装置における処理の流れの例を示すフローチャートである。
【図３】図１の画像記録装置における処理の流れの他の例を示すフローチャートである。
【図４】図１の画像記録装置の第１の変形例の構成を示すブロック図である。
【図５】図４の表示器への表示の例を示す説明図である。
【図６】図４の表示器への表示の他の例を示す説明図である。
【図７】図４の表示器への表示の更に他の例を示す説明図である。
【図８】図１の画像記録装置の第２の変形例の構成を示すブロック図である。
【図９】図１の画像記録装置の第３の変形例の構成を示すブロック図である。
【図１０】図９の画像記録装置における処理の流れの例を示すフローチャートである。
【図１１】（ａ）は、１チャネルのみ記録可能な場合における記録モードの例について示すタイミングチャートである。（ｂ）は、２チャネル記録可能な場合における記録モードの例について示すタイミングチャートである。
【図１２】図１の画像記録装置の第４の変形例の構成を示すブロック図である。
【図１３】図１２の画像記録装置における処理の流れの例を示すフローチャートである。
【符号の説明】
【００６１】
１２ ストリーム制御器
１４，２１４，３１４，４１４，５１４ 記録条件生成器
１６ データ記録制御器
２０，３２０，４２０，５２０ 再符号化部
３２ データ記録装置
３６ 表示器
４２９ ビット数比較器（再符号化比較器）
５２９ 劣化判定器（再符号化比較器）
【技術分野】
【０００１】
本発明は、動画像の記録のための処理に関し、特に圧縮動画ストリームの記録のための処理に関する。
【背景技術】
【０００２】
近年、テレビジョン番組を記録するためのＤＶＤ（Digital Versatile Disc）／ＨＤＤ（Hard Disk Drive）レコーダが普及してきている。テレビジョン番組を記録する際には、動画像がＭＰＥＧ（Moving Picture Experts Group）等の方式で符号化される。符号化する際には、平均ビットレート、画面サイズ等の符号化条件を決定する必要があるが、最適な符号化条件は、スポーツ番組、ドラマ番組、又はニュース番組等の番組の種類によって異なる。
【０００３】
そこで、テレビジョン番組の種類から符号化条件を決定し、この符号化条件に従ってアナログテレビジョン信号を符号化する装置が、例えば特許文献１に開示されている。アナログテレビジョン信号が入力されるので、この装置では符号化が必ず行われる。
【特許文献１】特開平１１−５５６２６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ＤＶＤ／ＨＤＤレコーダ等に番組の記録を行う際には、限られた記憶容量に多くの番組を記録するために、データサイズが小さくなるように符号化が行われる。近年のデジタル化されたテレビジョン放送を受信する場合には、受信したビットストリームに再符号化を行って（すなわち、既に符号化されているデータを一旦復号化してから、高効率な符号化方式で符号化を再び行って）、データサイズを小さくすることが行われている。
【０００５】
しかし、デジタル放送の場合には、受信された映像は既に圧縮されているので、再符号化しても、データサイズが元の圧縮動画ストリームのデータサイズよりも少なくならない場合や、かえってデータサイズが増えてしまう場合がある。このような場合の例としては、（１）映像の動きが速いスポーツ番組や、映像の輝度の時間的変化が激しい歌番組等の圧縮しにくい番組の場合、（２）ストリームが高効率な符号化方式（ＭＰＥＧ−４ ＡＶＣ（Advanced Video Coding）／Ｈ．２６４等）によって既に大きく圧縮されている場合、が挙げられる。
【０００６】
本発明は、再符号化による圧縮動画ストリームのデータサイズの増加を防止することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するため、本発明に係る画像データ処理装置は、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器とを有する。
【０００８】
これによると、記録モードがストリーム記録モードである場合には再符号化が行われないので、圧縮動画ストリームのデータサイズの増加を防止することができる。
【０００９】
また、本発明に係る画像記録装置は、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器と、前記再符号化ストリーム又は前記ストリーム制御器から出力された前記圧縮動画ストリームを記録するデータ記録装置とを有する。
【００１０】
また、本発明に係る画像データ処理方法は、圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成ステップと、前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化ステップと、前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化ステップが行われるように、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化ステップが行われないように、前記圧縮動画ストリームを制御するストリーム制御ステップとを有する。
【発明の効果】
【００１１】
本発明によれば、再符号化による圧縮動画ストリームのデータサイズの増加を防止することができる。また、動画像を適切な画質で記録することが可能となる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【００１３】
図１は、本発明の実施形態に係る画像記録装置の構成を示すブロック図である。図１の画像記録装置は、ストリーム制御器１２と、記録条件生成器１４と、データ記録制御器１６と、再符号化部２０と、データ記録装置３２とを有している。再符号化部２０は、映像・音声ストリーム分離器２２と、映像信号再符号化器２４と、音声信号再符号化器２６と、多重化器２８とを有している。ストリーム制御器１２、記録条件生成器１４、データ記録制御器１６、及び再符号化部２０は、画像データ処理装置を構成している。
【００１４】
デジタル放送では、映像に関してＭＰＥＧ−２、又はＭＰＥＧ−４ ＡＶＣ等の方式で圧縮符号化された映像ストリームと、圧縮符号化された音声ストリーム（音声ストリームについての説明は割愛する）とが多重化された、圧縮動画ストリームＳＴＲが放送されている。記録条件生成器１４は、外部から入力された番組情報ＩＮＦから、圧縮動画ストリームＳＴＲによって伝送される記録対象番組についての番組情報を抽出し、抽出された情報に従って記録モードを決定し、決定された記録モードをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に出力する。ストリーム制御器１２は、記録条件生成器１４で決定された記録モードに従って、多重化ストリームである圧縮動画ストリームＳＴＲを映像・音声ストリーム分離器２２又はデータ記録制御器１６に出力する。
【００１５】
映像・音声ストリーム分離器２２は、圧縮動画ストリームＳＴＲを映像ストリーム及び音声ストリームに分離し、映像ストリームを映像信号再符号化器２４に、音声ストリームを音声信号再符号化器２６に出力する。映像信号再符号化器２４は、映像信号復号化器及び映像信号符号化器（図示せず）を有している。映像信号復号化器が映像ストリームを復号化し、映像信号符号化器が、得られた復号結果を記録条件生成器１４で決定された記録モードに従って再符号化（再圧縮）する。音声信号再符号化器２６は、音声信号復号化器及び音声信号符号化器（図示せず）を有している。音声信号復号化器が音声ストリームを復号化し、音声信号符号化器が、得られた復号結果を記録条件生成器１４で決定された記録モードに従って再符号化する。
【００１６】
映像信号再符号化器２４及び音声信号再符号化器２６は、様々な方式での再符号化を行い得る。特に映像信号再符号化器２４の映像信号符号化器は、高効率な符号化方式で再符号化を行うが、ここでは例として、ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４で再符号化するものとする。多重化器２８は、再符号化された映像ストリームと再符号化された音声ストリームとを再多重化して、再符号化ストリームとして出力する。
【００１７】
データ記録制御器１６は、再符号化ストリーム又はストリーム制御器１２から直接受け取った圧縮動画ストリームＳＴＲをデータ記録装置３２に出力し、データ記録装置３２は、受け取ったストリームを記録媒体に記録する。データ記録装置３２は、具体的にはＤＶＤドライブ又はＨＤＤ等の記録装置であって、ＤＶＤ又はハードディスク等の記録媒体にストリームを記録する。
【００１８】
図１の画像記録装置は、入力された圧縮動画ストリームＳＴＲを、再符号化せずにそのまま記録するストリーム記録モードでの記録と、圧縮動画ストリームＳＴＲを再符号化して記録する再符号化モードでの記録が可能である。ストリーム記録モードの場合には、ストリーム制御器１２は、入力された圧縮動画ストリームＳＴＲを、再符号化部２０を経由させないようにデータ記録制御器１６に出力し、データ記録装置３２に記録させるので、放送波の映像品質を保ったまま記録することが可能となる。
【００１９】
一方、再符号化モードの場合には、ストリーム制御器１２は、入力された圧縮動画ストリームＳＴＲを、再符号化部２０に出力し、再符号化させてからデータ記録装置３２に記録させる。このため、圧縮動画ストリームＳＴＲの動画像が再符号化に適した動画像であれば、画質の劣化を抑えつつ、再符号化ストリームのデータサイズを抑えることが可能となる。
【００２０】
図２は、図１の画像記録装置における処理の流れの例を示すフローチャートである。記録条件生成器１４に入力される番組情報ＩＮＦには、圧縮動画ストリームＳＴＲに対応する番組情報が含まれており、圧縮動画ストリームＳＴＲに対応する番組情報には、その圧縮動画ストリームＳＴＲに対応する記録対象番組の種類やキーワードが含まれている。
【００２１】
図２のステップＳ１２では、記録条件生成器１４は、入力された番組情報ＩＮＦのうち、圧縮動画ストリームＳＴＲに対応する番組情報から、圧縮動画ストリームＳＴＲに対応する記録対象番組の種類（番組のジャンル）を抽出する。番組情報ＩＮＦは、例えば、放送波によって伝送された番組情報（ＥＰＧ（Electronic Program Guide））であってもよいし、インターネット経由でダウンロードされた番組情報（ｉＥＰＧ）であってもよい。また、番組情報ＩＮＦは、圧縮動画ストリームＳＴＲを構成するＭＰＥＧ−２ ＴＳ（Transport Stream）パケット内に含まれる番組情報であってもよい。番組の種類としては、例えば、ニュース番組、スポーツ番組、及び歌番組が挙げられる。
【００２２】
ステップＳ１４では、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であるか否か、すなわち、抽出された種類が、所定の符号化困難な番組の種類（例えば、映像の動きが速いスポーツ番組や、映像の輝度の時間的変化が激しい歌番組）に該当するか否かを判断する。該当する場合には、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると判断し、処理をステップＳ１６に進める。該当しない場合にはステップＳ１８に進む。
【００２３】
ステップＳ１６では、記録条件生成器１４は、記録モードをストリーム記録モードに決定し、この記録モードをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に出力する。この場合、ストリーム制御器１２は、圧縮動画ストリームＳＴＲをデータ記録制御器１６に出力し、データ記録制御器１６は、このストリームをデータ記録装置３２に記録させる。すなわち、再符号化が行われないストリーム記録（直接記録）が行われる。
【００２４】
ステップＳ１８では、記録条件生成器１４は、記録モードを予めユーザに指定された記録モードに決定し、この記録モードをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に出力する。この場合、記録モードとして再符号化モードが予め指定されているときには、ストリーム制御器１２は、圧縮動画ストリームＳＴＲを映像・音声ストリーム分離器２２に出力する。このストリームを、映像信号再符号化器２４、及び音声信号再符号化器２６が再符号化し、その結果を多重化器２８が再多重化してデータ記録制御器１６に出力する。データ記録制御器１６は、多重化器２８で得られた再符号化ストリームをデータ記録装置３２に記録させる。すなわち、再符号化モードでの記録が行われる。記録モードとしてストリーム記録モードが予め指定されているときには、ステップＳ１６と同様にストリーム記録が行われる。
【００２５】
図３は、図１の画像記録装置における処理の流れの他の例を示すフローチャートである。図３のステップＳ２２では、記録条件生成器１４は、入力された番組情報ＩＮＦのうちの圧縮動画ストリームＳＴＲに対応する番組情報から、圧縮動画ストリームＳＴＲに対応する記録対象番組のキーワードを抽出する。キーワードとしては、例えば、番組のタイトル等に含まれる「ニュース」、スポーツの名称（「野球」等）、特定の歌番組名、及び特定の歌手名等が挙げられる。キーワードは、番組に対応付けられた何らかのデータであればよい。
【００２６】
ステップＳ２４では、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であるか否か、すなわち、抽出されたキーワードが、所定の符号化困難な番組のキーワードに該当するか否かを判断する。該当する場合には、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると判断し、処理をステップＳ２６に進める。該当しない場合にはステップＳ２８に進む。ステップＳ２６では、図２のステップＳ１６と同様に、ストリーム記録が行われる。ステップＳ２８では、図２のステップＳ１８と同様にユーザに指定された記録モードでの記録が行われる。
【００２７】
このように、図１の画像記録装置は、番組情報に従って自動的に記録モードを決定するので、適切な記録モードで番組を記録することができる。再符号化が困難である番組については、再符号化を行わず、入力された圧縮動画ストリームＳＴＲをそのまま記録するので、番組を、画質を劣化させることなく記録することができる。
【００２８】
なお、記録条件生成器１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると番組情報ＩＮＦから判断した場合には、所定値以上の符号化ビットレートで再符号化する再符号化モードに、記録モードを決定してもよい。この場合、ストリーム記録は行われず、再符号化部２０は、圧縮動画ストリームＳＴＲをこの符号化ビットレートで再符号化する。すると、例えば動きが激しい映像が多い番組の圧縮動画ストリームについても、画質劣化を抑えつつ、再符号化することが可能となる。
【００２９】
図４は、図１の画像記録装置の第１の変形例の構成を示すブロック図である。図４の画像記録装置は、記録条件生成器１４に代えて記録条件生成器２１４を有する点が、図１の画像記録装置とは異なっている。記録条件生成器２１４は、ユーザに対するメッセージを表示するためのメッセージデータを表示器３６に出力する点と、入力された番組情報ＩＮＦだけではなくユーザによる設定情報ＵＳＴにも従って記録モードを決定する点が、図１の記録条件生成器１４とは異なっている。表示器３６は、記録条件生成器２１４からのメッセージデータに従ってメッセージを表示する。表示器３６は図４の画像記録装置の外部にあってもよいし（例えばテレビジョン受像機として）、図４の画像記録装置が表示器３６を含んでいてもよい。
【００３０】
図５は、図４の表示器３６への表示の例を示す説明図である。記録条件生成器２１４は、決定された記録モードでの記録を開始するとともに、記録モードを示すメッセージデータを表示器３６に出力する。
【００３１】
図２及び図３を参照して説明したように、記録条件生成器２１４は、圧縮動画ストリームＳＴＲの再符号化が困難であると番組情報から判断した場合、すなわち、記録対象番組の種類が符号化困難な番組の種類に該当する場合や、記録対象番組のキーワードが符号化困難な番組のキーワードに該当する場合等には、ストリーム記録モードを、記録モードとして推奨する推奨モードとし、記録モードをこの推奨モードに決定する。この場合、記録条件生成器２１４は、ストリーム記録（直接記録）を開始するとともに、図５のように、ストリーム記録が行われることを示すメッセージデータを表示器３６に出力する。これにより、ユーザは、現在の記録モード（推奨モード）を表示器３６の表示から知ることが可能となる。
【００３２】
なお、記録条件生成器２１４は、所定値以上の符号化ビットレートで再符号化するモードを推奨モードにしてもよい。
【００３３】
図６は、図４の表示器３６への表示の他の例を示す説明図である。記録条件生成器２１４は、ストリーム記録モードを推奨モードにした場合には、図６のように、推奨モード（ストリーム記録モード）を推奨する表示、及び推奨モードでの処理（ストリーム記録）を行うか否かをユーザが選択するための表示を行うためのメッセージデータを表示器３６に出力してもよい。
【００３４】
図６の表示の後、記録条件生成器２１４は、ユーザの選択を示す設定情報ＵＳＴに従って記録モードを決定する。ユーザが「Ｙｅｓ」を選択した場合には、記録条件生成器２１４は、記録モードをストリーム記録モードに決定する。この場合、ストリーム制御器１２は、再符号化部２０を経由させることなく、圧縮動画ストリームＳＴＲをデータ記録装置３２に直接記録させる。ユーザが「Ｎｏ」を選択した場合には、記録条件生成器２１４は、記録モードを再符号化モードに決定し、再符号化部２０は、圧縮動画ストリームＳＴＲを再符号化後、データ記録装置３２に記録させる。
【００３５】
図７は、図４の表示器３６への表示の更に他の例を示す説明図である。記録条件生成器２１４は、図７のように、推奨モード（ストリーム記録モード）を推奨する表示、及び選択可能な記録モードの複数の候補の表示を行うためのメッセージデータを表示器３６に出力してもよい。
【００３６】
図７の表示の後、記録条件生成器２１４は、ユーザの選択を示す設定情報ＵＳＴに従って記録モードを決定する。ユーザが「高圧縮再符号化モード」を選択した場合には、記録条件生成器２１４は、記録モードを高圧縮再符号化モードに決定する。この場合、映像信号再符号化器２４及び音声信号再符号化器２６は、画質が許容できる範囲内で、再符号化後の再符号化ストリームのデータサイズが最小となるように、圧縮動画ストリームＳＴＲを再符号化する。データ記録装置３２は得られた再符号化ストリームを記録する。
【００３７】
ユーザが「高画質再符号化モード」を選択した場合には、記録条件生成器２１４は、記録モードを高画質再符号化モードに決定する。この場合、映像信号再符号化器２４及び音声信号再符号化器２６は、再符号化後の再符号化ストリームのビットレートが所定値以上となるように、圧縮動画ストリームＳＴＲを再符号化する。データ記録装置３２は得られた再符号化ストリームを記録する。ユーザが「ストリーム記録モード」を選択した場合には、記録条件生成器２１４は、記録モードをストリーム記録モードに決定する。この場合、ストリーム制御器１２は、再符号化部２０を経由させることなく、圧縮動画ストリームＳＴＲをデータ記録装置３２に直接記録させる。
【００３８】
このように、図４の画像記録装置によると、図５のように現在の記録モードをユーザに通知したり、図６のよう推奨モードでの処理を行うか否かをユーザに選択させたり、図７のように選択可能な記録モードをユーザに通知し、選択させることができる。したがって、ユーザの嗜好に応じた記録を実現することができる。
【００３９】
図８は、図１の画像記録装置の第２の変形例の構成を示すブロック図である。図８の画像記録装置は、記録条件生成器２１４及び再符号化部２０に代えて記録条件生成器３１４及び再符号化部３２０を有する点が、図４の画像記録装置とは異なっている。再符号化部３２０は、映像・音声ストリーム分離器２２及び多重化器２８に代えて、映像・音声ストリーム分離器３２２及び多重化器３２８を有する点が、再符号化部２０とは異なっている。
【００４０】
記録条件生成器２１４は、記録モードを決定し、決定された記録モードを映像・音声ストリーム分離器３２２にも出力する。記録条件生成器２１４は、音声のみ再符号化する記録モードも選択可能であるとする。記録モードが、音声のみ再符号化する記録モードである場合には、映像・音声ストリーム分離器３２２は、映像ストリームを多重化器３２８に、音声ストリームを音声信号再符号化器２６に出力する。図１の場合と同様に、音声信号再符号化器２６は、音声ストリームを復号化及び再符号化する。多重化器３２８は、映像・音声ストリーム分離器３２２から出力された映像ストリームと再符号化された音声ストリームとを再多重化して、再符号化ストリームとして出力する。
【００４１】
記録モードが、映像をも再符号化する記録モードである場合には、映像・音声ストリーム分離器３２２は、映像ストリームを映像信号再符号化器２４に出力する。図１を参照して説明したように、映像信号再符号化器２４は、映像ストリームを再符号化し、多重化器３２８は、再符号化された映像ストリームと音声ストリームとを再多重化する。
【００４２】
このように、図８の画像記録装置は、音声ストリームについては再符号化するが、映像ストリームについてはストリーム記録をすることが可能である。このため、映像の質を重視した記録を行うことができる。
【００４３】
図９は、図１の画像記録装置の第３の変形例の構成を示すブロック図である。図９の画像記録装置は、記録条件生成器２１４及び再符号化部２０に代えて記録条件生成器４１４及び再符号化部４２０を有する点が、図４の画像記録装置とは異なっている。再符号化部４２０は、再符号化比較器としてのビット数比較器４２９を更に有する点が、再符号化部２０とは異なっている。
【００４４】
図１０は、図９の画像記録装置における処理の流れの例を示すフローチャートである。図１１（ａ）は、１チャネルのみ記録可能な場合における記録モードの例について示すタイミングチャートである。図１１（ｂ）は、２チャネル記録可能な場合における記録モードの例について示すタイミングチャートである。図１０のステップＳ３２では、記録条件生成器４１４は、記録モードが再符号化モードＲＥであることをストリーム制御器１２、映像信号再符号化器２４、及び音声信号再符号化器２６に通知し、再符号化モードＲＥでの再符号化ストリームの記録を実行させる（図１１（ａ）及び（ｂ）のＣＨ１）。
【００４５】
ステップＳ３４では、記録条件生成器４１４は、再符号化記録と同時にストリーム記録が可能（すなわち、２チャネル同時記録が可能）であるか否かを判断する。可能である場合にはステップＳ３６に、可能ではない場合にはステップＳ３８に進む。ステップＳ３６では、記録条件生成器４１４は、ストリーム記録を行うようにストリーム制御器１２に指示し、ストリーム記録モードＤＲでのストリーム記録を再符号化モードＲＥでの記録と同時に実行させる（図１１（ｂ）のＣＨ２）。
【００４６】
ステップＳ３８では、ビット数比較器４２９は、多重化器２８から多重化後の再符号化ストリームを受け取り、再符号化ストリームの一部（例えば所定の長さの期間内）のビット数が、ストリーム制御器１２から出力された再符号化前の圧縮動画ストリームの対応する部分のビット数より少なく、かつ、これらの数の間の差が所定値以上であるか否かを判定し、判定結果Ｒ１を記録条件生成器４１４に出力する。記録条件生成器４１４は、再符号化ストリームのビット数が圧縮動画ストリームのビット数より少なく、かつ、これらの数の間の差が所定値以上である場合には処理をステップＳ３２に戻し、その他の場合には処理をステップＳ４０に進める。
【００４７】
ステップＳ４０では、記録条件生成器４１４は、ストリーム記録が同時に実行中であるか否かを判定する。同時に実行中である場合にはステップＳ４２に進み、同時に実行中ではない場合にはステップＳ４４に進む。
【００４８】
ステップＳ４２では、記録条件生成器４１４は、再符号化モードＲＥでの記録を中止するように、映像信号再符号化器２４及び音声信号再符号化器２６に通知する。再符号化モードＲＥでの記録は中止され、ストリーム記録モードＤＲでの記録は継続される（図１１（ｂ）のＣＨ１）。ステップＳ４４では、記録条件生成器４１４は、再符号化モードＲＥでの記録を中止するように、ストリーム制御器１２、映像信号再符号化器２４及び音声信号再符号化器２６に通知する。再符号化モードＲＥでの記録は中止され、それ以降はストリーム制御器１２が圧縮動画ストリームを出力し、ストリーム記録モードＤＲでの記録が行われる（図１１（ａ））。
【００４９】
このように、図９の画像記録装置は、再符号化ストリーム及び再符号化前の圧縮動画ストリームに従って、どちらを記録すべきか、すなわち、最適な記録モードを決定するので、番組情報を利用できない場合であっても、最適な画像記録を実現することができる。
【００５０】
図１２は、図１の画像記録装置の第４の変形例の構成を示すブロック図である。図１２の画像記録装置は、記録条件生成器２１４及び再符号化部２０に代えて記録条件生成器５１４及び再符号化部５２０を有する点が、図４の画像記録装置とは異なっている。再符号化部５２０は、再符号化比較器としての劣化判定器５２９を更に有する点が、再符号化部２０とは異なっている。
【００５１】
図１３は、図１２の画像記録装置における処理の流れの例を示すフローチャートである。図１２の画像記録装置は、再符号化モードＲＥでの記録を継続するか否かを、再符号化による発生ビット数ではなく、再符号化された映像ストリームの画像の画質によって判定する。
【００５２】
図１３のフローチャートは、ステップＳ３８に代えてステップＳ５８を有する点が図１０のフローチャートとは異なっているので、ステップＳ５８についてのみ説明する。映像信号再符号化器２４は、再符号化前の圧縮動画ストリーム（映像ストリーム）の復号化を行い、その結果に対して画面間差分符号化を行って再符号化ストリームを求めるので、圧縮動画ストリームの復号結果ＳＰと、再符号化の際に求められた再符号化された映像ストリームの復号結果ＲＰとを出力可能である。
【００５３】
ステップＳ５８では、劣化判定器５２９は、映像信号再符号化器２４から、再符号化前の圧縮動画ストリームの復号結果ＳＰと再符号化された映像ストリームの復号結果ＲＰとを受け取り、復号結果ＲＰが復号結果ＳＰより画像として所定の程度以上劣化しているか否かを判定し、判定結果Ｒ２を記録条件生成器５１４に出力する。記録条件生成器５１４は、復号結果ＲＰが復号結果ＳＰより所定の程度以上劣化している場合には処理をステップＳ３２に戻し、その他の場合には処理をステップＳ４０に進める。記録条件生成器５１４は、その他の点は図９の記録条件生成器４１４と同様である。
【００５４】
劣化判定器５２９は、復号結果の劣化の度合いとして、２つの復号結果の間における画素レベルの差分の絶対値を、例えば画面全体について合計して得られた値を用いてもよいし、画像評価の指標であるＰＳＮＲ（Peak Signal-to-Noise Ratio）を用いてもよい。
【００５５】
なお、復号結果ＲＰによる画像と復号結果ＳＰによる画像とを表示器３６に表示させ、その表示を見たユーザに、再符号化モードＲＥでの記録を継続するか否かを判断させ、記録条件生成器５１４に指示させるようにしてもよい。
【００５６】
以上の各画像記録装置の各機能ブロックは典型的には集積回路であるＬＳＩ（Large-Scale Integration）として実現される。これらは個別に１チップ化されていてもよいし、一部又はデータ記録装置３２及び表示器３６以外の全てを含むように１チップ化されていてもよい。
【００５７】
ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ（Integrated Circuit）、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。製造後にプログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、製造後にＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。更には、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。
【００５８】
また、本発明は、以上の各画像記録装置が有する特徴的な手段をステップとする方法として実現したり、それらのステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ（Compact Disc-Read Only Memory）等の記録媒体やインターネット等の伝送媒体を介して配信することができる。
【産業上の利用可能性】
【００５９】
以上説明したように、本発明は、圧縮動画ストリームのデータサイズの増加を防止することができるので、画像データ処理装置等について有用である。
【図面の簡単な説明】
【００６０】
【図１】本発明の実施形態に係る画像記録装置の構成を示すブロック図である。
【図２】図１の画像記録装置における処理の流れの例を示すフローチャートである。
【図３】図１の画像記録装置における処理の流れの他の例を示すフローチャートである。
【図４】図１の画像記録装置の第１の変形例の構成を示すブロック図である。
【図５】図４の表示器への表示の例を示す説明図である。
【図６】図４の表示器への表示の他の例を示す説明図である。
【図７】図４の表示器への表示の更に他の例を示す説明図である。
【図８】図１の画像記録装置の第２の変形例の構成を示すブロック図である。
【図９】図１の画像記録装置の第３の変形例の構成を示すブロック図である。
【図１０】図９の画像記録装置における処理の流れの例を示すフローチャートである。
【図１１】（ａ）は、１チャネルのみ記録可能な場合における記録モードの例について示すタイミングチャートである。（ｂ）は、２チャネル記録可能な場合における記録モードの例について示すタイミングチャートである。
【図１２】図１の画像記録装置の第４の変形例の構成を示すブロック図である。
【図１３】図１２の画像記録装置における処理の流れの例を示すフローチャートである。
【符号の説明】
【００６１】
１２ ストリーム制御器
１４，２１４，３１４，４１４，５１４ 記録条件生成器
１６ データ記録制御器
２０，３２０，４２０，５２０ 再符号化部
３２ データ記録装置
３６ 表示器
４２９ ビット数比較器（再符号化比較器）
５２９ 劣化判定器（再符号化比較器）
【特許請求の範囲】
【請求項１】
圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、
前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、
前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器とを備える
画像データ処理装置。
【請求項２】
請求項１に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームの再符号化が困難であると前記番組情報から判断した場合には、前記記録モードを、前記ストリーム記録モードに決定する
ことを特徴とする画像データ処理装置。
【請求項３】
請求項２に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームに対応する番組の種類が所定の種類である場合には、前記圧縮動画ストリームの再符号化が困難であると判断する
ことを特徴とする画像データ処理装置。
【請求項４】
請求項２に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームに対応する番組情報に含まれるキーワードが所定のキーワードである場合には、前記圧縮動画ストリームの再符号化が困難であると判断する
ことを特徴とする画像データ処理装置。
【請求項５】
請求項１に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームの再符号化が困難であると前記番組情報から判断した場合には、前記記録モードを、所定値以上の符号化ビットレートで再符号化する再符号化モードに決定し、
前記再符号化器は、
前記所定値以上の符号化ビットレートで再符号化を行う
ことを特徴とする画像データ処理装置。
【請求項６】
請求項１に記載の画像データ処理装置において、
前記記録条件生成器は、
前記番組情報に従って前記記録モードとして推奨する推奨モードを求め、前記推奨モードを表示するためのデータを出力する
ことを特徴とする画像データ処理装置。
【請求項７】
請求項６に記載の画像データ処理装置において、
前記推奨モードは、前記ストリーム記録モードである
ことを特徴とする画像データ処理装置。
【請求項８】
請求項６に記載の画像データ処理装置において、
前記推奨モードは、所定値以上の符号化ビットレートで再符号化するモードである
ことを特徴とする画像データ処理装置。
【請求項９】
請求項６に記載の画像データ処理装置において、
前記記録条件生成器は、
前記記録モードを前記推奨モードに決定する
ことを特徴とする画像データ処理装置。
【請求項１０】
請求項６に記載の画像データ処理装置において、
前記記録条件生成器は、
前記推奨モードでの処理を行うか否かを選択するための表示を行うためのデータを出力し、選択された結果に従って前記記録モードを決定する
ことを特徴とする画像データ処理装置。
【請求項１１】
請求項６に記載の画像データ処理装置において、
前記記録条件生成器は、
前記記録モードの複数の候補の表示を行うためのデータを出力し、前記複数の候補から選択された候補に前記記録モードを決定する
ことを特徴とする画像データ処理装置。
【請求項１２】
請求項１１に記載の画像データ処理装置において、
前記複数の候補には、前記ストリーム記録モードと前記再符号化モードとが含まれている
ことを特徴とする画像データ処理装置。
【請求項１３】
請求項１に記載の画像データ処理装置において、
前記再符号化器は、
前記圧縮動画ストリームに含まれる音声ストリーム及び映像ストリームのうち、前記音声ストリームについては再符号化を行い、前記映像ストリームについては再符号化を行わない
ことを特徴とする画像データ処理装置。
【請求項１４】
請求項１に記載の画像データ処理装置において、
前記再符号化器は、
前記圧縮動画ストリームと前記再符号化器による再符号化結果とを比較し、その結果を判定結果として出力する再符号化比較器を更に備え、
前記記録条件生成器は、
前記比較結果に従って、前記再符号化器に再符号化を中止させる
ことを特徴とする画像データ処理装置。
【請求項１５】
請求項１４に記載の画像データ処理装置において、
前記再符号化比較器は、
前記再符号化結果の一部のビット数と、前記圧縮動画ストリームの対応する部分のビット数との間の関係を求め、前記判定結果として出力するビット数比較器である
ことを特徴とする画像データ処理装置。
【請求項１６】
請求項１４に記載の画像データ処理装置において、
前記再符号化比較器は、
前記再符号化結果の復号結果が、前記圧縮動画ストリームの復号結果より画像として所定の程度以上劣化しているか否かを判定し、前記判定結果として出力する劣化判定器である
ことを特徴とする画像データ処理装置。
【請求項１７】
圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、
前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、
前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器と、
前記再符号化ストリーム又は前記ストリーム制御器から出力された前記圧縮動画ストリームを記録するデータ記録装置とを備える
画像記録装置。
【請求項１８】
圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成ステップと、
前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化ステップと、
前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化ステップが行われるように、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化ステップが行われないように、前記圧縮動画ストリームを制御するストリーム制御ステップとを備える
画像データ処理方法。
【請求項１】
圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、
前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、
前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器とを備える
画像データ処理装置。
【請求項２】
請求項１に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームの再符号化が困難であると前記番組情報から判断した場合には、前記記録モードを、前記ストリーム記録モードに決定する
ことを特徴とする画像データ処理装置。
【請求項３】
請求項２に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームに対応する番組の種類が所定の種類である場合には、前記圧縮動画ストリームの再符号化が困難であると判断する
ことを特徴とする画像データ処理装置。
【請求項４】
請求項２に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームに対応する番組情報に含まれるキーワードが所定のキーワードである場合には、前記圧縮動画ストリームの再符号化が困難であると判断する
ことを特徴とする画像データ処理装置。
【請求項５】
請求項１に記載の画像データ処理装置において、
前記記録条件生成器は、
前記圧縮動画ストリームの再符号化が困難であると前記番組情報から判断した場合には、前記記録モードを、所定値以上の符号化ビットレートで再符号化する再符号化モードに決定し、
前記再符号化器は、
前記所定値以上の符号化ビットレートで再符号化を行う
ことを特徴とする画像データ処理装置。
【請求項６】
請求項１に記載の画像データ処理装置において、
前記記録条件生成器は、
前記番組情報に従って前記記録モードとして推奨する推奨モードを求め、前記推奨モードを表示するためのデータを出力する
ことを特徴とする画像データ処理装置。
【請求項７】
請求項６に記載の画像データ処理装置において、
前記推奨モードは、前記ストリーム記録モードである
ことを特徴とする画像データ処理装置。
【請求項８】
請求項６に記載の画像データ処理装置において、
前記推奨モードは、所定値以上の符号化ビットレートで再符号化するモードである
ことを特徴とする画像データ処理装置。
【請求項９】
請求項６に記載の画像データ処理装置において、
前記記録条件生成器は、
前記記録モードを前記推奨モードに決定する
ことを特徴とする画像データ処理装置。
【請求項１０】
請求項６に記載の画像データ処理装置において、
前記記録条件生成器は、
前記推奨モードでの処理を行うか否かを選択するための表示を行うためのデータを出力し、選択された結果に従って前記記録モードを決定する
ことを特徴とする画像データ処理装置。
【請求項１１】
請求項６に記載の画像データ処理装置において、
前記記録条件生成器は、
前記記録モードの複数の候補の表示を行うためのデータを出力し、前記複数の候補から選択された候補に前記記録モードを決定する
ことを特徴とする画像データ処理装置。
【請求項１２】
請求項１１に記載の画像データ処理装置において、
前記複数の候補には、前記ストリーム記録モードと前記再符号化モードとが含まれている
ことを特徴とする画像データ処理装置。
【請求項１３】
請求項１に記載の画像データ処理装置において、
前記再符号化器は、
前記圧縮動画ストリームに含まれる音声ストリーム及び映像ストリームのうち、前記音声ストリームについては再符号化を行い、前記映像ストリームについては再符号化を行わない
ことを特徴とする画像データ処理装置。
【請求項１４】
請求項１に記載の画像データ処理装置において、
前記再符号化器は、
前記圧縮動画ストリームと前記再符号化器による再符号化結果とを比較し、その結果を判定結果として出力する再符号化比較器を更に備え、
前記記録条件生成器は、
前記比較結果に従って、前記再符号化器に再符号化を中止させる
ことを特徴とする画像データ処理装置。
【請求項１５】
請求項１４に記載の画像データ処理装置において、
前記再符号化比較器は、
前記再符号化結果の一部のビット数と、前記圧縮動画ストリームの対応する部分のビット数との間の関係を求め、前記判定結果として出力するビット数比較器である
ことを特徴とする画像データ処理装置。
【請求項１６】
請求項１４に記載の画像データ処理装置において、
前記再符号化比較器は、
前記再符号化結果の復号結果が、前記圧縮動画ストリームの復号結果より画像として所定の程度以上劣化しているか否かを判定し、前記判定結果として出力する劣化判定器である
ことを特徴とする画像データ処理装置。
【請求項１７】
圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成器と、
前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化部と、
前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化部に前記圧縮動画ストリームを出力し、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化部を経由させないように前記圧縮動画ストリームを出力するストリーム制御器と、
前記再符号化ストリーム又は前記ストリーム制御器から出力された前記圧縮動画ストリームを記録するデータ記録装置とを備える
画像記録装置。
【請求項１８】
圧縮動画ストリームに対応する番組情報に従って前記圧縮動画ストリームの記録モードを決定する記録条件生成ステップと、
前記圧縮動画ストリームを再符号化し、再符号化ストリームを求める再符号化ステップと、
前記記録モードが前記圧縮動画ストリームを再符号化して記録する再符号化モードである場合には前記再符号化ステップが行われるように、前記記録モードが前記圧縮動画ストリームを再符号化せずに記録するストリーム記録モードである場合には前記再符号化ステップが行われないように、前記圧縮動画ストリームを制御するストリーム制御ステップとを備える
画像データ処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１０−４１１２３（Ｐ２０１０−４１１２３Ａ）
【公開日】平成２２年２月１８日（２０１０．２．１８）
【国際特許分類】
【出願番号】特願２００８−１９８７２８（Ｐ２００８−１９８７２８）
【出願日】平成２０年７月３１日（２００８．７．３１）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２２年２月１８日（２０１０．２．１８）
【国際特許分類】
【出願日】平成２０年７月３１日（２００８．７．３１）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]