映像再生装置及び映像再生方法
【課題】高度動画像圧縮符号化標準により圧縮された映像及び音声を特殊再生するときに安定した再生を行なうことができるようにする。
【解決手段】映像デコーダでデコードされる符号化映像データに対応する映像ＰＴＳと、音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムが所定の時間差を超えているか否かを判定する第１の比較部と、前記所定の時間差を超えている場合、符号化映像データを復号するために基準となる次のＩピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、前記次のＩピクチャが存在するＰＥＳパケットの映像ＰＴＳと前記音声ＰＴＳとを比較し、両者の差が所定の時間内であるか否かを判定する第２の比較部と、前記差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせ再スタート制御部とを有する。
【解決手段】映像デコーダでデコードされる符号化映像データに対応する映像ＰＴＳと、音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムが所定の時間差を超えているか否かを判定する第１の比較部と、前記所定の時間差を超えている場合、符号化映像データを復号するために基準となる次のＩピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、前記次のＩピクチャが存在するＰＥＳパケットの映像ＰＴＳと前記音声ＰＴＳとを比較し、両者の差が所定の時間内であるか否かを判定する第２の比較部と、前記差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせ再スタート制御部とを有する。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は映像再生装置及び映像再生方法に関するもので、特に倍速再生、逆送り再生を行なう所謂特殊再生時に音声と映像との同期状態を安定化するものである。
【背景技術】
【０００２】
映像データ・音声データの高度動画像圧縮符号化標準（AVC: Advanced Video Coding ）において、勧告名Ｈ．２６４／ＡＶＣと称される規格がある。このような規格の信号を記録・再生する装置及びメディアも開発されている。一般に記録メディアに記録された圧縮情報（映像圧縮データ、音声圧縮データが含まれる）を再生する装置には、特殊再生機能が設けられる（例えば特許文献１）。
【０００３】
しかしながら上記Ｈ．２６４／ＡＶＣ規格の信号の映像及び音声を特殊再生するための有効な装置及び方法が無い。上記文献１に映像に関して特殊再生を行なう手法は開示されているが、音声に関する再生手法が不明である。
【特許文献１】特開平８−９３２７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
この発明の目的は、高度動画像圧縮符号化標準により圧縮された映像及び音声を特殊再生するときに安定した再生を行なうことができる映像再生装置及び再生方法を提供することにある。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、この発明の一実施例は以下の手段を有する。まず符号化映像データあるいは符号化音声データを含む所定単位のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットが定義され、前記ＰＥＳパケットのヘッダの一部にはデータのデコード時間を指示するためのデコードタイムスタンプ（ＤＴＳ）、及び再生出力時間を指示するためのプレゼンテーションタイムスタンプ（ＰＴＳ）が記述され、また前記ＰＥＳパケット内には、前記符号化映像データあるいは符号化音声データを配置するアクセスユニットが設定されている。さらに前記ＰＥＳパケットは、トランスポートストリーム（ＴＳ）を形成し、それぞれシステムヘッダを有するＴＳパケットに分散配置されており、前記システムヘッダはプログラム時刻基準値（ＰＣＲ）を含んでいる。
【０００６】
ここで前記ＴＳパケットを受信して情報処理を行う装置は、前記ＴＳパケットのシステムヘッダから前記プログラム時刻基準値（ＰＣＲ）を抽出してシステムタイムクロックを再生するＳＴＣ再生部と、前記ＰＥＳパケットのヘッダから前記ＤＴＳ，前記ＰＴＳを取得する時刻情報取得部と、前記符号化映像データを含むＰＥＳパケットから前記符号化映像データが配置されているアクセスユニットを取り込む映像バッファ部と、前記映像バッファ部に取り込まれている符号化映像データを復号する映像デコーダと、前記符号化音声データを含むＰＥＳパケットから前記符号化音声データが配置されているアクセスユニットを取り込む音声バッファ部と、前記映像デコーダでデコードされる符号化映像データに対応する映像ＰＴＳと、前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムが所定の時間差を超えているか否かを判定する第１の比較部と、プレゼンテーションタイムが所定の時間差を超えている場合、符号化映像データを複合するために基準となる次のＩピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、前記次のＩピクチャが存在するＰＥＳパケットの映像ＰＴＳと前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムの差が所定の時間内であるか否かを判定する第２の比較部と、前記プレゼンテーションタイムの差が所定の時間内である場合、前記映像デコーダのデコード処理を再開させる再開制御部と、を有する。
【発明の効果】
【０００７】
上記の手段によると、映像データの復号のために遅れが生じてもスキップ処理を行い、遅れの無い映像データの復号出力を得るので、表示されている画像の破綻が生じたり、音声と映像の非同期による違和感が生じるようなことが防止される。
【発明を実施するための最良の形態】
【０００８】
以下図面を参照して、この発明の実施の形態を説明する。図１は、この発明に係る映像再生装置の概略構成を示す図である。入力部１１には、例えば受信部、光ディスク、あるいはハードディスクから再生されたトランスポートストリーム（Transport Stream :ＴＳ）が入力する。トランスポートストリーム（ＴＳ）パケットの集合であるトランスポートストリーム（ＴＳ）は、トランスポートストリームデコーダ１２に入力され、データの種類毎にあるいはプログラム毎に分離される。
【０００９】
分離された複数のＴＳパケットが、データの種類毎に集合されパケッタイズドエレメンタリーストリーム（Packetized Elementary Stream: ＰＥＳ）として構築される。種類としては、ビデオデータのためのＰＥＳ，音声データのためのＰＥＳ，字幕情報のためのＰＥＳ、そのほか各種情報などが存在する。トランスポートストリームデコーダ１２において分離されたビデオデータのためのＰＥＳには、符号化映像データが含まれ、音声データのためのＰＥＳには符号化音声データが含まれている。
【００１０】
パケッタイズドエレメンタリーストリーム（ＰＥＳ）は、ＰＥＳパケットの集合でもある。そしてＰＥＳパケットは、ヘッダを有し、ヘッダには、対応する映像と音声の同期をとるためのＤＴＳ（decoding Time Stamp:デコードタイムスタンプ），ＰＴＳ（Presentation Time Stamp:プレゼンテーションタイムスタンプ）が記述されている。
【００１１】
ＤＴＳ（デコードタイムスタンプ），ＰＴＳ（プレゼンテーションタイムスタンプ）は、アクセスユニットと称される単位毎に付加される。即ち、映像データのためのＰＥＳパケット内には、符号化映像データが含まれるが、ピクチャ毎にアクセスユニットが設定されている。音声データのためのＰＥＳパケット内には、符号化音声データが含まれるが、フレーム毎にアクセスユニットが設定されている。複数のＰＥＳパケット内のペイロードを集合することで１つのアクセスユニットが形成されることもある。
【００１２】
またトランスポートストリーム（ＴＳ）パケットは、それぞれシステムヘッダを有し、システムヘッダはプログラム時刻基準値（program clock Reference: ＰＣＲ）を含んでいる。プログラム基準時刻（ＰＣＲ）は、ＴＳデコーダ１２で分離されて、ＳＴＣ再生部１６に入力される。ＳＴＣ再生部１６では、ＰＣＲを用いて、装置のシステム基準時刻（ＳＴＣ）を生成している。
【００１３】
２０は中央演算ユニットを含む制御部であり、各ブロックを統括して制御している。制御部２０は、ＳＴＣ，ＤＴＳ，ＰＴＳを認識している。
【００１４】
ＴＳデコーダ１２で抽出された映像データのためのアクセスユニットは、映像バッファ部１３に転送され、音声データのためのアクセスユニットは音声バッファ部１４に転送される。映像及び音声バッファ部１３、１４はそれぞれＳＴＣ再生部１６からの基準時刻信号に基づいて、動作する。映像及び音声バッファ部１３、１４はそれぞれ制御部２０からデコード開始指令が与えられると、映像及び音声用のアクセスユニットをそれぞれ映像デコーダ１７、音声デコーダ１８に転送する。これにより映像及び音声のデコードが開始される。映像デコーダ１７、音声デコーダ１８にて復号された映像データ及び音声データは、制御部２０から与えられた出力開始指令が与えられると出力される。
【００１５】
制御部２０では、ＳＴＣとＤＴＳ，ＳＴＣとＰＴＳを比較し、デコード開始時刻、復号データの出力開始時刻が来たら、上記のデコード開始指令、出力開始指令を出力している。
【００１６】
ところで、映像再生装置には通常は特殊再生機能が設けられている。特殊再生機能は、音声データ、映像データを通常再生速度よりも速いたとえば１．５倍速、２倍速、４倍速などで再生したり、逆送り再生したりする機能である。制御部２０は、操作入力を認識するための操作入力認識部２２０を有する。また特殊再生の指令信号が入力すると特殊再生起動部２２１が起動し、後述する動作が実行される。このとき、第１の比較部２２２、スキップ制御部２２３、第２の比較部２２４、再スタート制御部２２５が相俟って、特殊再生を実行する。またＰＥＳパケットのヘッダからＤＴＳ，ＰＴＳを取得する時刻情報取得部２３０が設けられている。
【００１７】
図２には映像及び音声データが同期して再生されているとき（通常再生のとき）にＳＴＣ，ＰＴＳが変化する様子を示している。時間とともにＳＴＣが増加し、それに合わせて映像データ及び音声データのＰＴＳが増加する。
【００１８】
この装置は特殊再生機能を持つ。特殊再生とは、例えば記録メディアに記録されているトランスポートストリームを読み出し、早送り再生する、あるいは逆送り再生、さらには静止再生、間欠再生することを含む。
【００１９】
さらにこの装置は特殊再生時には、音声データが主となり、音声データがタイムスタンプに合わせて復号および再生出力される。特殊再生時には、ジャンプ先に応じてシステムタイムクロックがジャンプ修正される。そして各バッファ部１３、１４へアクセスユニット毎に符号化映像データ、符号化音声データが取り込まれる。アクセスユニットの符号化映像データ、符号化音声データは、先に説明したように制御部２０からのデコード開始指令、出力開始指令に応じて復号タイミング及び出力タイミングが制御されている。
【００２０】
しかし、ここで符号化映像データに関しては、デコードに時間がかかることがある。このために映像データのＰＴＳをシステムタイムクロックが大きく通過してしまうことがある。
【００２１】
この様子を示したのが図３である。映像データはピクチャ単位、音声データはフレーム単位ごとのＰＴＳが確認される。倍速再生のためにスキップしながら復号している途中で、ＳＴＣに対して音声データの復号時のＰＴＳ（以下音声ＰＴＳ）は追従しているが、映像データの復号時のＰＴＳ（以下映像ＰＴＳ）は遅れている。このような状態で映像データの復号が完了するまでまって復号された映像データを出力すると画像と音声との非同期状態となる。または映像データが完全に復号されないまま出力動作に切換えると画像破綻が生じることがある。例えば、遅延量ＤＬが生じている時刻（Ｔ０）で、復号映像データを出力すると、画像が破綻した状態で画面表示されることがある。
【００２２】
そこでこの発明の装置では、図４に示すように、復号した音声データの音声ＰＴＳと映像データの映像ＰＴＳとを比較し、プレゼンテーションタイムの差が所定値以上であるかどうかを判定している。プレゼンテーションタイムの差が所定値以上になった場合（時刻Ｔ０）、次のＩピクチャまで上記の符号化映像データをスキップし、次のＩピクチャを含むグループオブピクチャ（ＧＯＰ）からデコードを行なう（時点Ｔ１）。そして、次のＩピクチャが存在するユニットの映像ＰＴＳと音声デコーダ１８でデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムの差が所定の時間内であるか否かを判定する。ここで、プレゼンテーションタイムの差が所定の時間内である場合、映像データの復号出力を実行する。
【００２３】
図５は、例えばＧＯＰ内の復号の基準となる基準ピクチャ（Ｉピクチャ）、Ｂピクチャ、Ｐピクチャの配置の様子を示している。今、例えばＰピクチャをデコードしたとき（時刻Ｔ０）、遅延量ＤＬがあるにも係らず復号映像データを出力すると、画像が破綻した状態で画面表示されることがある。
【００２４】
そこでこの発明の装置では、図６に示すように、例えばＰピクチャをデコードしたとき（時刻Ｔ０）、遅延量ＤＬがあった場合は、先のＩピクチャに関連するＰ，Ｂピクチャの復号を省略し、次のＩピクチャのデコードから開始する。
【００２５】
図７は上記の動作を示すフローチャートである。今、特殊再生が開始されたものとする。すると、映像デコード及び音声デコードが実行される（ステップＳＡ１、ＳＡ２）。デコードが終わると映像ＰＴＳ，音声ＰＴＳが抽出されて比較される（ステップＳＡ３，ＳＡ４，ＳＡ５）。このとき、両者の時刻が所定の時間差を超えているか否か判定される。
【００２６】
復号された音声データは、システムタイムクロックＳＴＣと比較され、音声ＰＴＳに対してＳＴＣが等しいか経過しているときに音声データが出力される。即ち音声データが音声処理回路に音声出力用として出力される（ステップＳＡ７）。また映像ＰＴＳ，音声ＰＴＳの時刻が所定の時間差以内であれば、復号された映像データもデコーダから映像処理回路へ出力される（ステップＳＡ６）。
【００２７】
ステップＳＡ５において、映像ＰＴＳ，音声ＰＴＳの時刻が所定の時間差を越えているようであれば、ステップＳＡ９に移行する。ステップＳＡ９ではデコード処理に付されるピクチャ情報を取得する。次にステップＳＡ１０に移行し、ここでは、次のＩピクチャまでデコード処理をスキップさせる。つまり図６で説明したように、先のＩピクチャに関連するＰ，Ｂピクチャの復号を省略し、次のＩピクチャのデコードから開始する。そしてＩピクチャをデコードしたところで、このＩピクチャに対応する映像ＰＴＳを先の音声ＰＴＳと比較する（ステップＳＡ１１，ＳＡ１２）。ここで両者の者の時刻が所定の時間差以内であるかどうかを判定する（ステップＳＡ１２）。所定の時間差以内であれば、復号された映像データがデコーダから映像処理回路へ出力される（ステップＳＡ６）。音声ＰＴＳが進んでいる場合には、ステップＳＡ１０に戻る。音声ＰＴＳが遅れている場合、エラーであり、最初のステップに戻り、続けて特殊再生を開始する。
【００２８】
上記の処理により、高度動画像圧縮符号化標準により圧縮された映像及び音声を特殊再生するときに安定した再生を行なうことができる。即ち、映像データの復号のために遅れが生じてもスキップ処理を行い、遅れの無い映像データの復号出力を得るので、表示されている画像の破綻が生じたり、音声と映像の非同期による違和感が生じるようなことが防止される。
【００２９】
尚上記の説明では、映像ＰＴＳは音声ＰＴＳと比較されるとしたが、音声ＰＴＳの代わりにシステムタイムクロックＳＴＣと比較されてもよい。
【００３０】
次に、本発明の装置において取り合われるトランスポートストリームに適応されている規格について説明する。この規格は、所謂Ｈ．２６４／ＡＶＣと称される規格である。
【００３１】
図８に示すように、映像のためのＰＥＳパケットのペイロード部には、Ｈ．２６４規格により符号化された符号化映像データが配置される。また音声のためのＰＥＳパケットのペイロード部には例えばＡＡＣ（Advanced Audio Coding）により符号化された符号化音声データが配置される。この符号化データの層は、ＮＡＬ（Network Abstraction Layer）と称されており、ＮＡＬユニットが定義されている。符号化映像データの場合、ＮＡＬユニットには、符号化映像データを運ぶためのユニットの他に符号化映像データを復号するためのピクチャーパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）などの参照用情報を運ぶためのユニットも存在する。参照用情報には、復号のための属性、参照先情報等が含まれている。従って、符号化映像データを復号するためには、これらの多くの参照用情報を再生して、参照しなければならない。
【００３２】
次にＰＥＳパケットは、複数のＴＳパケットのペイロード部に分散配置される。ＴＳパケットはそれぞれヘッダを有する。ＴＳパケットは、他の情報のためのＴＳパケットと共に多重化されトランスポートストリームを形成する。
【００３３】
図９には、ＰＥＳパケットの構成を示している。ＰＥＳパケットは、ヘッダとＰＥＳパケットデータバイト（このパケットが運ぶデータ）部を有する。ヘッダには、パケットスタートコード、ストリームＩＤ，ＰＥＳパケット長の情報、オプショナルＰＥＳヘッダが含まれる。
【００３４】
オプショナルＰＥＳヘッダには、オプショナルフィールドが含まれており、このフィールドにＰＴＳ，ＤＴＳが記述されている。
【００３５】
上記したようにＨ．２６４／ＡＶＣに基づく符号化においては、映像データを復号するに当たって、事前に種々の情報を再生しなければならない。このために特殊再生のときはジャンプのたびに参照先情報を改めて取得しなければならないケースがある。このようなケースでは、ピクチャ復号前に事前の準備期間が必要となり、音声データの復号が進んでいるのに、映像データの復号が遅れる場合がある。
【００３６】
Ｈ．２６４／ＡＶＣにおいては、上記Ｉピクチャは厳密には、ＩＤＲ（Instantaneous Decoding Refresh）ピクチャのことであり、画像シーケンスの先頭のピクチャである。このときのデコーダでは、参照ピクチャのバッファ状態は、フレーム番号、ＰＯＣ（Picture
Order Count; ピクチャ出力の出力順序を示す情報）などが、ビットストリームを復号するための状態情報がリセットされる。ピクチャ単位にアクセスが得られるようにいくつかのＮＡＬユニット（ＩＤＲピクチャ、Ｐピクチャ、Ｂピクチャ、ＰＰＳ，ＳＰＳなどのＮＡＬユニット）をまとめたものをアクセスユニットとして規定されている。音声データに関してはフレーム単位でアクセスが得られるように、アクセスユニットが規定されている。
【００３７】
本発明の装置は、たとえば記録再生装置に適用された場合、次のような利用形態が可能である。トランスポートストリームが例えばハードディスクに記録されている途中で、ユーザがどのような番組が記録中であるのか追っかけ再生動作させることがある。このような場合の再生装置に適用することが可能である。或いは、すでにトランスポートストリームが例えばハードディスクあるいは光ディスクに記録されているとき、早送り再生により確認したいような場合にも、その再生装置に適用することが可能である。
【００３８】
図１０には本発明がメディア記録再生装置に適用された例を簡単に示している。図１と同一部分には同一符号を付している。アンテナより導入された放送波は、チューナ部１１１で所望のチャンネルが選択され、復号部１１２でそのトランスポートストリームが復号される。トランスポートストリームはトランスポートストリームデコーダ１２に入力される。またトランスポートストリームは、記録再生装置１１３に入力されてハードディスクあるいは光ディスク（例えばＤＶＤ）に記録される。特殊再生時には制御部２０からの制御信号が記録再生装置１１３に与えられ、スキップ処理が実現される。
【００３９】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００４０】
【図１】この発明の映像再生装置の一実施の形態を示す構成説明図である。
【図２】映像デコーダと音声デコーダのプレゼンテーションタイムスタンプが変化する様子を示す説明図である。
【図３】特殊再生時に映像デコーダと音声デコーダのプレゼンテーションタイムスタンプが変化する様子を示す説明図である。
【図４】本発明による装置において、殊再生時に映像デコーダと音声デコーダのプレゼンテーションタイムスタンプが変化する様子を示す説明図である。
【図５】ＧＯＰ内のＩピクチャ、Ｂピクチャ、Ｐピクチャの配置の様子を示す図である。
【図６】ＧＯＰ内のＩピクチャ、Ｂピクチャ、Ｐピクチャの配置の中で、デコード処理がスキップされた様子を示す図である。
【図７】本発明の装置において特殊再生が行なわれるときの動作を説明するフローチャートである。
【図８】Ｈ．２６４／ＡＶＣ規格におけるＰＥＳパケットとトランスポートストリームの関係をしめす説明図である。
【図９】Ｈ．２６４／ＡＶＣ規格におけるＰＥＳパケットの構成例を示す説明図である。
【図１０】この発明が適用されたメディア記録再生装置の構成説明図である。
【符号の説明】
【００４１】
１２・・・トランスポートデコーダ、１３・・・映像バッファ部、１４・・・音声バッファ部、１６・・・ＳＴＣ再生部、１７・・・映像デコーダ、１８・・・音声デコーダ、２０・・・制御部。
【技術分野】
【０００１】
この発明は映像再生装置及び映像再生方法に関するもので、特に倍速再生、逆送り再生を行なう所謂特殊再生時に音声と映像との同期状態を安定化するものである。
【背景技術】
【０００２】
映像データ・音声データの高度動画像圧縮符号化標準（AVC: Advanced Video Coding ）において、勧告名Ｈ．２６４／ＡＶＣと称される規格がある。このような規格の信号を記録・再生する装置及びメディアも開発されている。一般に記録メディアに記録された圧縮情報（映像圧縮データ、音声圧縮データが含まれる）を再生する装置には、特殊再生機能が設けられる（例えば特許文献１）。
【０００３】
しかしながら上記Ｈ．２６４／ＡＶＣ規格の信号の映像及び音声を特殊再生するための有効な装置及び方法が無い。上記文献１に映像に関して特殊再生を行なう手法は開示されているが、音声に関する再生手法が不明である。
【特許文献１】特開平８−９３２７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
この発明の目的は、高度動画像圧縮符号化標準により圧縮された映像及び音声を特殊再生するときに安定した再生を行なうことができる映像再生装置及び再生方法を提供することにある。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、この発明の一実施例は以下の手段を有する。まず符号化映像データあるいは符号化音声データを含む所定単位のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットが定義され、前記ＰＥＳパケットのヘッダの一部にはデータのデコード時間を指示するためのデコードタイムスタンプ（ＤＴＳ）、及び再生出力時間を指示するためのプレゼンテーションタイムスタンプ（ＰＴＳ）が記述され、また前記ＰＥＳパケット内には、前記符号化映像データあるいは符号化音声データを配置するアクセスユニットが設定されている。さらに前記ＰＥＳパケットは、トランスポートストリーム（ＴＳ）を形成し、それぞれシステムヘッダを有するＴＳパケットに分散配置されており、前記システムヘッダはプログラム時刻基準値（ＰＣＲ）を含んでいる。
【０００６】
ここで前記ＴＳパケットを受信して情報処理を行う装置は、前記ＴＳパケットのシステムヘッダから前記プログラム時刻基準値（ＰＣＲ）を抽出してシステムタイムクロックを再生するＳＴＣ再生部と、前記ＰＥＳパケットのヘッダから前記ＤＴＳ，前記ＰＴＳを取得する時刻情報取得部と、前記符号化映像データを含むＰＥＳパケットから前記符号化映像データが配置されているアクセスユニットを取り込む映像バッファ部と、前記映像バッファ部に取り込まれている符号化映像データを復号する映像デコーダと、前記符号化音声データを含むＰＥＳパケットから前記符号化音声データが配置されているアクセスユニットを取り込む音声バッファ部と、前記映像デコーダでデコードされる符号化映像データに対応する映像ＰＴＳと、前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムが所定の時間差を超えているか否かを判定する第１の比較部と、プレゼンテーションタイムが所定の時間差を超えている場合、符号化映像データを複合するために基準となる次のＩピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、前記次のＩピクチャが存在するＰＥＳパケットの映像ＰＴＳと前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムの差が所定の時間内であるか否かを判定する第２の比較部と、前記プレゼンテーションタイムの差が所定の時間内である場合、前記映像デコーダのデコード処理を再開させる再開制御部と、を有する。
【発明の効果】
【０００７】
上記の手段によると、映像データの復号のために遅れが生じてもスキップ処理を行い、遅れの無い映像データの復号出力を得るので、表示されている画像の破綻が生じたり、音声と映像の非同期による違和感が生じるようなことが防止される。
【発明を実施するための最良の形態】
【０００８】
以下図面を参照して、この発明の実施の形態を説明する。図１は、この発明に係る映像再生装置の概略構成を示す図である。入力部１１には、例えば受信部、光ディスク、あるいはハードディスクから再生されたトランスポートストリーム（Transport Stream :ＴＳ）が入力する。トランスポートストリーム（ＴＳ）パケットの集合であるトランスポートストリーム（ＴＳ）は、トランスポートストリームデコーダ１２に入力され、データの種類毎にあるいはプログラム毎に分離される。
【０００９】
分離された複数のＴＳパケットが、データの種類毎に集合されパケッタイズドエレメンタリーストリーム（Packetized Elementary Stream: ＰＥＳ）として構築される。種類としては、ビデオデータのためのＰＥＳ，音声データのためのＰＥＳ，字幕情報のためのＰＥＳ、そのほか各種情報などが存在する。トランスポートストリームデコーダ１２において分離されたビデオデータのためのＰＥＳには、符号化映像データが含まれ、音声データのためのＰＥＳには符号化音声データが含まれている。
【００１０】
パケッタイズドエレメンタリーストリーム（ＰＥＳ）は、ＰＥＳパケットの集合でもある。そしてＰＥＳパケットは、ヘッダを有し、ヘッダには、対応する映像と音声の同期をとるためのＤＴＳ（decoding Time Stamp:デコードタイムスタンプ），ＰＴＳ（Presentation Time Stamp:プレゼンテーションタイムスタンプ）が記述されている。
【００１１】
ＤＴＳ（デコードタイムスタンプ），ＰＴＳ（プレゼンテーションタイムスタンプ）は、アクセスユニットと称される単位毎に付加される。即ち、映像データのためのＰＥＳパケット内には、符号化映像データが含まれるが、ピクチャ毎にアクセスユニットが設定されている。音声データのためのＰＥＳパケット内には、符号化音声データが含まれるが、フレーム毎にアクセスユニットが設定されている。複数のＰＥＳパケット内のペイロードを集合することで１つのアクセスユニットが形成されることもある。
【００１２】
またトランスポートストリーム（ＴＳ）パケットは、それぞれシステムヘッダを有し、システムヘッダはプログラム時刻基準値（program clock Reference: ＰＣＲ）を含んでいる。プログラム基準時刻（ＰＣＲ）は、ＴＳデコーダ１２で分離されて、ＳＴＣ再生部１６に入力される。ＳＴＣ再生部１６では、ＰＣＲを用いて、装置のシステム基準時刻（ＳＴＣ）を生成している。
【００１３】
２０は中央演算ユニットを含む制御部であり、各ブロックを統括して制御している。制御部２０は、ＳＴＣ，ＤＴＳ，ＰＴＳを認識している。
【００１４】
ＴＳデコーダ１２で抽出された映像データのためのアクセスユニットは、映像バッファ部１３に転送され、音声データのためのアクセスユニットは音声バッファ部１４に転送される。映像及び音声バッファ部１３、１４はそれぞれＳＴＣ再生部１６からの基準時刻信号に基づいて、動作する。映像及び音声バッファ部１３、１４はそれぞれ制御部２０からデコード開始指令が与えられると、映像及び音声用のアクセスユニットをそれぞれ映像デコーダ１７、音声デコーダ１８に転送する。これにより映像及び音声のデコードが開始される。映像デコーダ１７、音声デコーダ１８にて復号された映像データ及び音声データは、制御部２０から与えられた出力開始指令が与えられると出力される。
【００１５】
制御部２０では、ＳＴＣとＤＴＳ，ＳＴＣとＰＴＳを比較し、デコード開始時刻、復号データの出力開始時刻が来たら、上記のデコード開始指令、出力開始指令を出力している。
【００１６】
ところで、映像再生装置には通常は特殊再生機能が設けられている。特殊再生機能は、音声データ、映像データを通常再生速度よりも速いたとえば１．５倍速、２倍速、４倍速などで再生したり、逆送り再生したりする機能である。制御部２０は、操作入力を認識するための操作入力認識部２２０を有する。また特殊再生の指令信号が入力すると特殊再生起動部２２１が起動し、後述する動作が実行される。このとき、第１の比較部２２２、スキップ制御部２２３、第２の比較部２２４、再スタート制御部２２５が相俟って、特殊再生を実行する。またＰＥＳパケットのヘッダからＤＴＳ，ＰＴＳを取得する時刻情報取得部２３０が設けられている。
【００１７】
図２には映像及び音声データが同期して再生されているとき（通常再生のとき）にＳＴＣ，ＰＴＳが変化する様子を示している。時間とともにＳＴＣが増加し、それに合わせて映像データ及び音声データのＰＴＳが増加する。
【００１８】
この装置は特殊再生機能を持つ。特殊再生とは、例えば記録メディアに記録されているトランスポートストリームを読み出し、早送り再生する、あるいは逆送り再生、さらには静止再生、間欠再生することを含む。
【００１９】
さらにこの装置は特殊再生時には、音声データが主となり、音声データがタイムスタンプに合わせて復号および再生出力される。特殊再生時には、ジャンプ先に応じてシステムタイムクロックがジャンプ修正される。そして各バッファ部１３、１４へアクセスユニット毎に符号化映像データ、符号化音声データが取り込まれる。アクセスユニットの符号化映像データ、符号化音声データは、先に説明したように制御部２０からのデコード開始指令、出力開始指令に応じて復号タイミング及び出力タイミングが制御されている。
【００２０】
しかし、ここで符号化映像データに関しては、デコードに時間がかかることがある。このために映像データのＰＴＳをシステムタイムクロックが大きく通過してしまうことがある。
【００２１】
この様子を示したのが図３である。映像データはピクチャ単位、音声データはフレーム単位ごとのＰＴＳが確認される。倍速再生のためにスキップしながら復号している途中で、ＳＴＣに対して音声データの復号時のＰＴＳ（以下音声ＰＴＳ）は追従しているが、映像データの復号時のＰＴＳ（以下映像ＰＴＳ）は遅れている。このような状態で映像データの復号が完了するまでまって復号された映像データを出力すると画像と音声との非同期状態となる。または映像データが完全に復号されないまま出力動作に切換えると画像破綻が生じることがある。例えば、遅延量ＤＬが生じている時刻（Ｔ０）で、復号映像データを出力すると、画像が破綻した状態で画面表示されることがある。
【００２２】
そこでこの発明の装置では、図４に示すように、復号した音声データの音声ＰＴＳと映像データの映像ＰＴＳとを比較し、プレゼンテーションタイムの差が所定値以上であるかどうかを判定している。プレゼンテーションタイムの差が所定値以上になった場合（時刻Ｔ０）、次のＩピクチャまで上記の符号化映像データをスキップし、次のＩピクチャを含むグループオブピクチャ（ＧＯＰ）からデコードを行なう（時点Ｔ１）。そして、次のＩピクチャが存在するユニットの映像ＰＴＳと音声デコーダ１８でデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムの差が所定の時間内であるか否かを判定する。ここで、プレゼンテーションタイムの差が所定の時間内である場合、映像データの復号出力を実行する。
【００２３】
図５は、例えばＧＯＰ内の復号の基準となる基準ピクチャ（Ｉピクチャ）、Ｂピクチャ、Ｐピクチャの配置の様子を示している。今、例えばＰピクチャをデコードしたとき（時刻Ｔ０）、遅延量ＤＬがあるにも係らず復号映像データを出力すると、画像が破綻した状態で画面表示されることがある。
【００２４】
そこでこの発明の装置では、図６に示すように、例えばＰピクチャをデコードしたとき（時刻Ｔ０）、遅延量ＤＬがあった場合は、先のＩピクチャに関連するＰ，Ｂピクチャの復号を省略し、次のＩピクチャのデコードから開始する。
【００２５】
図７は上記の動作を示すフローチャートである。今、特殊再生が開始されたものとする。すると、映像デコード及び音声デコードが実行される（ステップＳＡ１、ＳＡ２）。デコードが終わると映像ＰＴＳ，音声ＰＴＳが抽出されて比較される（ステップＳＡ３，ＳＡ４，ＳＡ５）。このとき、両者の時刻が所定の時間差を超えているか否か判定される。
【００２６】
復号された音声データは、システムタイムクロックＳＴＣと比較され、音声ＰＴＳに対してＳＴＣが等しいか経過しているときに音声データが出力される。即ち音声データが音声処理回路に音声出力用として出力される（ステップＳＡ７）。また映像ＰＴＳ，音声ＰＴＳの時刻が所定の時間差以内であれば、復号された映像データもデコーダから映像処理回路へ出力される（ステップＳＡ６）。
【００２７】
ステップＳＡ５において、映像ＰＴＳ，音声ＰＴＳの時刻が所定の時間差を越えているようであれば、ステップＳＡ９に移行する。ステップＳＡ９ではデコード処理に付されるピクチャ情報を取得する。次にステップＳＡ１０に移行し、ここでは、次のＩピクチャまでデコード処理をスキップさせる。つまり図６で説明したように、先のＩピクチャに関連するＰ，Ｂピクチャの復号を省略し、次のＩピクチャのデコードから開始する。そしてＩピクチャをデコードしたところで、このＩピクチャに対応する映像ＰＴＳを先の音声ＰＴＳと比較する（ステップＳＡ１１，ＳＡ１２）。ここで両者の者の時刻が所定の時間差以内であるかどうかを判定する（ステップＳＡ１２）。所定の時間差以内であれば、復号された映像データがデコーダから映像処理回路へ出力される（ステップＳＡ６）。音声ＰＴＳが進んでいる場合には、ステップＳＡ１０に戻る。音声ＰＴＳが遅れている場合、エラーであり、最初のステップに戻り、続けて特殊再生を開始する。
【００２８】
上記の処理により、高度動画像圧縮符号化標準により圧縮された映像及び音声を特殊再生するときに安定した再生を行なうことができる。即ち、映像データの復号のために遅れが生じてもスキップ処理を行い、遅れの無い映像データの復号出力を得るので、表示されている画像の破綻が生じたり、音声と映像の非同期による違和感が生じるようなことが防止される。
【００２９】
尚上記の説明では、映像ＰＴＳは音声ＰＴＳと比較されるとしたが、音声ＰＴＳの代わりにシステムタイムクロックＳＴＣと比較されてもよい。
【００３０】
次に、本発明の装置において取り合われるトランスポートストリームに適応されている規格について説明する。この規格は、所謂Ｈ．２６４／ＡＶＣと称される規格である。
【００３１】
図８に示すように、映像のためのＰＥＳパケットのペイロード部には、Ｈ．２６４規格により符号化された符号化映像データが配置される。また音声のためのＰＥＳパケットのペイロード部には例えばＡＡＣ（Advanced Audio Coding）により符号化された符号化音声データが配置される。この符号化データの層は、ＮＡＬ（Network Abstraction Layer）と称されており、ＮＡＬユニットが定義されている。符号化映像データの場合、ＮＡＬユニットには、符号化映像データを運ぶためのユニットの他に符号化映像データを復号するためのピクチャーパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）などの参照用情報を運ぶためのユニットも存在する。参照用情報には、復号のための属性、参照先情報等が含まれている。従って、符号化映像データを復号するためには、これらの多くの参照用情報を再生して、参照しなければならない。
【００３２】
次にＰＥＳパケットは、複数のＴＳパケットのペイロード部に分散配置される。ＴＳパケットはそれぞれヘッダを有する。ＴＳパケットは、他の情報のためのＴＳパケットと共に多重化されトランスポートストリームを形成する。
【００３３】
図９には、ＰＥＳパケットの構成を示している。ＰＥＳパケットは、ヘッダとＰＥＳパケットデータバイト（このパケットが運ぶデータ）部を有する。ヘッダには、パケットスタートコード、ストリームＩＤ，ＰＥＳパケット長の情報、オプショナルＰＥＳヘッダが含まれる。
【００３４】
オプショナルＰＥＳヘッダには、オプショナルフィールドが含まれており、このフィールドにＰＴＳ，ＤＴＳが記述されている。
【００３５】
上記したようにＨ．２６４／ＡＶＣに基づく符号化においては、映像データを復号するに当たって、事前に種々の情報を再生しなければならない。このために特殊再生のときはジャンプのたびに参照先情報を改めて取得しなければならないケースがある。このようなケースでは、ピクチャ復号前に事前の準備期間が必要となり、音声データの復号が進んでいるのに、映像データの復号が遅れる場合がある。
【００３６】
Ｈ．２６４／ＡＶＣにおいては、上記Ｉピクチャは厳密には、ＩＤＲ（Instantaneous Decoding Refresh）ピクチャのことであり、画像シーケンスの先頭のピクチャである。このときのデコーダでは、参照ピクチャのバッファ状態は、フレーム番号、ＰＯＣ（Picture
Order Count; ピクチャ出力の出力順序を示す情報）などが、ビットストリームを復号するための状態情報がリセットされる。ピクチャ単位にアクセスが得られるようにいくつかのＮＡＬユニット（ＩＤＲピクチャ、Ｐピクチャ、Ｂピクチャ、ＰＰＳ，ＳＰＳなどのＮＡＬユニット）をまとめたものをアクセスユニットとして規定されている。音声データに関してはフレーム単位でアクセスが得られるように、アクセスユニットが規定されている。
【００３７】
本発明の装置は、たとえば記録再生装置に適用された場合、次のような利用形態が可能である。トランスポートストリームが例えばハードディスクに記録されている途中で、ユーザがどのような番組が記録中であるのか追っかけ再生動作させることがある。このような場合の再生装置に適用することが可能である。或いは、すでにトランスポートストリームが例えばハードディスクあるいは光ディスクに記録されているとき、早送り再生により確認したいような場合にも、その再生装置に適用することが可能である。
【００３８】
図１０には本発明がメディア記録再生装置に適用された例を簡単に示している。図１と同一部分には同一符号を付している。アンテナより導入された放送波は、チューナ部１１１で所望のチャンネルが選択され、復号部１１２でそのトランスポートストリームが復号される。トランスポートストリームはトランスポートストリームデコーダ１２に入力される。またトランスポートストリームは、記録再生装置１１３に入力されてハードディスクあるいは光ディスク（例えばＤＶＤ）に記録される。特殊再生時には制御部２０からの制御信号が記録再生装置１１３に与えられ、スキップ処理が実現される。
【００３９】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００４０】
【図１】この発明の映像再生装置の一実施の形態を示す構成説明図である。
【図２】映像デコーダと音声デコーダのプレゼンテーションタイムスタンプが変化する様子を示す説明図である。
【図３】特殊再生時に映像デコーダと音声デコーダのプレゼンテーションタイムスタンプが変化する様子を示す説明図である。
【図４】本発明による装置において、殊再生時に映像デコーダと音声デコーダのプレゼンテーションタイムスタンプが変化する様子を示す説明図である。
【図５】ＧＯＰ内のＩピクチャ、Ｂピクチャ、Ｐピクチャの配置の様子を示す図である。
【図６】ＧＯＰ内のＩピクチャ、Ｂピクチャ、Ｐピクチャの配置の中で、デコード処理がスキップされた様子を示す図である。
【図７】本発明の装置において特殊再生が行なわれるときの動作を説明するフローチャートである。
【図８】Ｈ．２６４／ＡＶＣ規格におけるＰＥＳパケットとトランスポートストリームの関係をしめす説明図である。
【図９】Ｈ．２６４／ＡＶＣ規格におけるＰＥＳパケットの構成例を示す説明図である。
【図１０】この発明が適用されたメディア記録再生装置の構成説明図である。
【符号の説明】
【００４１】
１２・・・トランスポートデコーダ、１３・・・映像バッファ部、１４・・・音声バッファ部、１６・・・ＳＴＣ再生部、１７・・・映像デコーダ、１８・・・音声デコーダ、２０・・・制御部。
【特許請求の範囲】
【請求項１】
映像デコーダでデコードされる符号化映像データに対応する映像プレゼンテーションタイムスタンプ（映像ＰＴＳ）と、音声デコーダでデコードされる符号化音声データに対応する音声プレゼンテーションタイムスタンプ（音声ＰＴＳ）とを比較し、両者の時間差が所定の時間差を超えているか否かを判定する第１の比較部と、
前記所定の時間差を超えている場合、符号化映像データを復号するために基準となる次の基準ピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、
前記次の基準ピクチャが存在するパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットの映像ＰＴＳと前記音声ＰＴＳとを比較し、両者の差が所定の時間内であるか否かを判定する第２の比較部と、
前記差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせ再スタート制御部を有することを特徴する映像再生装置。
【請求項２】
前記映像ＰＴＳは、映像用の前記ＰＥＳパケットのヘッダに含まれており、前記音声ＰＴＳは、音声用の前記ＰＥＳパケットのヘッダに含まれていることを特徴とする請求項１記載の映像再生装置。
【請求項３】
前記トランスポートストリームは、記録媒体より再生された信号であることを特徴とする請求項２記載の映像再生装置。
【請求項４】
前記基準ピクチャは、Ｈ．２６４／ＡＶＣ規格におけるＩＤＲ（Instantaneous Decoding Refresh）ピクチャであることを特徴とする請求項２記載の映像再生装置。
【請求項５】
符号化映像データあるいは符号化音声データを含む所定単位のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットが定義され、
前記ＰＥＳパケットのヘッダの一部にはデータのデコード時間を指示するためのデコードタイムスタンプ（ＤＴＳ）、及び再生出力時間を指示するためのプレゼンテーションタイムスタンプ（ＰＴＳ）が記述され、また前記ＰＥＳパケット内には、前記符号化映像データあるいは符号化音声データを配置するアクセスユニットが設定されており、
前記ＰＥＳパケットは、トランスポートストリーム（ＴＳ）を形成し、それぞれシステムヘッダを有するＴＳパケットに分散配置されており、前記システムヘッダはプログラム時刻基準値（ＰＣＲ）を含んでおり、前記ＴＳパケットを受信して情報処理を行う装置において、
前記ＴＳパケットのシステムヘッダから前記プログラム時刻基準値（ＰＣＲ）を抽出してシステムタイムクロックを再生するＳＴＣ再生部と、
前記ＰＥＳパケットのヘッダから前記ＤＴＳ，前記ＰＴＳを取得する時刻情報取得部と、
前記符号化映像データを含むＰＥＳパケットから前記符号化映像データが配置されているアクセスユニットを取り込む映像バッファ部と、
前記映像バッファ部に取り込まれている符号化映像データを復号する映像デコーダと、
前記符号化音声データを含むＰＥＳパケットから前記符号化音声データが配置されているアクセスユニットを取り込む音声バッファ部と、
前記映像デコーダでデコードされる符号化映像データに対応する映像ＰＴＳと、前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムが所定の時間差を超えているか否かを判定する第１の比較部と、
プレゼンテーションタイムが所定の時間差を超えている場合、符号化映像データを複合するために基準となる次のＩピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、
前記次のＩピクチャが存在するＰＥＳパケットの映像ＰＴＳと前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムの差が所定の時間内であるか否かを判定する第２の比較部と、
前記プレゼンテーションタイムの差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせる再スタート制御部と、
を具備したことを特徴とする映像再生装置。
【請求項６】
トランスポートストリーム（ＴＳ）デコーダ、前記ＴＳデコーダからの映像用のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットを取り込む映像バッファ部、前記映像バッファからの符号化映像データを復号する映像デコーダ、前記ＴＳデコーダからの音声用のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットを取り込む音声バッファ部、及び前記音声バッファからの符号化音声データを復号する音声デコーダを制御部で制御する映像再生方法において、前記制御部により
前記映像デコーダでデコードされる符号化映像データに対応する映像プレゼンテーションタイムスタンプ（映像ＰＴＳ）と、音声デコーダでデコードされる符号化音声データに対応する音声プレゼンテーションタイムスタンプ（音声ＰＴＳ）とを比較し、両者の時間差が所定の時間差を超えているか否かを判定し、
前記所定の時間差を超えている場合、符号化映像データを復号するために基準となる次の基準ピクチャまで前記映像デコーダの処理をスキップさせ、
前記次の基準ピクチャが存在するパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットの映像ＰＴＳと前記音声ＰＴＳとを比較し、両者の差が所定の時間内であるか否かを判定し、
前記差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせることを特徴する映像再生方法。
【請求項１】
映像デコーダでデコードされる符号化映像データに対応する映像プレゼンテーションタイムスタンプ（映像ＰＴＳ）と、音声デコーダでデコードされる符号化音声データに対応する音声プレゼンテーションタイムスタンプ（音声ＰＴＳ）とを比較し、両者の時間差が所定の時間差を超えているか否かを判定する第１の比較部と、
前記所定の時間差を超えている場合、符号化映像データを復号するために基準となる次の基準ピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、
前記次の基準ピクチャが存在するパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットの映像ＰＴＳと前記音声ＰＴＳとを比較し、両者の差が所定の時間内であるか否かを判定する第２の比較部と、
前記差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせ再スタート制御部を有することを特徴する映像再生装置。
【請求項２】
前記映像ＰＴＳは、映像用の前記ＰＥＳパケットのヘッダに含まれており、前記音声ＰＴＳは、音声用の前記ＰＥＳパケットのヘッダに含まれていることを特徴とする請求項１記載の映像再生装置。
【請求項３】
前記トランスポートストリームは、記録媒体より再生された信号であることを特徴とする請求項２記載の映像再生装置。
【請求項４】
前記基準ピクチャは、Ｈ．２６４／ＡＶＣ規格におけるＩＤＲ（Instantaneous Decoding Refresh）ピクチャであることを特徴とする請求項２記載の映像再生装置。
【請求項５】
符号化映像データあるいは符号化音声データを含む所定単位のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットが定義され、
前記ＰＥＳパケットのヘッダの一部にはデータのデコード時間を指示するためのデコードタイムスタンプ（ＤＴＳ）、及び再生出力時間を指示するためのプレゼンテーションタイムスタンプ（ＰＴＳ）が記述され、また前記ＰＥＳパケット内には、前記符号化映像データあるいは符号化音声データを配置するアクセスユニットが設定されており、
前記ＰＥＳパケットは、トランスポートストリーム（ＴＳ）を形成し、それぞれシステムヘッダを有するＴＳパケットに分散配置されており、前記システムヘッダはプログラム時刻基準値（ＰＣＲ）を含んでおり、前記ＴＳパケットを受信して情報処理を行う装置において、
前記ＴＳパケットのシステムヘッダから前記プログラム時刻基準値（ＰＣＲ）を抽出してシステムタイムクロックを再生するＳＴＣ再生部と、
前記ＰＥＳパケットのヘッダから前記ＤＴＳ，前記ＰＴＳを取得する時刻情報取得部と、
前記符号化映像データを含むＰＥＳパケットから前記符号化映像データが配置されているアクセスユニットを取り込む映像バッファ部と、
前記映像バッファ部に取り込まれている符号化映像データを復号する映像デコーダと、
前記符号化音声データを含むＰＥＳパケットから前記符号化音声データが配置されているアクセスユニットを取り込む音声バッファ部と、
前記映像デコーダでデコードされる符号化映像データに対応する映像ＰＴＳと、前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムが所定の時間差を超えているか否かを判定する第１の比較部と、
プレゼンテーションタイムが所定の時間差を超えている場合、符号化映像データを複合するために基準となる次のＩピクチャまで前記映像デコーダの処理をスキップさせるスキップ制御部と、
前記次のＩピクチャが存在するＰＥＳパケットの映像ＰＴＳと前記音声デコーダでデコードされる符号化音声データに対応する音声ＰＴＳとを比較し、両者のプレゼンテーションタイムの差が所定の時間内であるか否かを判定する第２の比較部と、
前記プレゼンテーションタイムの差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせる再スタート制御部と、
を具備したことを特徴とする映像再生装置。
【請求項６】
トランスポートストリーム（ＴＳ）デコーダ、前記ＴＳデコーダからの映像用のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットを取り込む映像バッファ部、前記映像バッファからの符号化映像データを復号する映像デコーダ、前記ＴＳデコーダからの音声用のパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットを取り込む音声バッファ部、及び前記音声バッファからの符号化音声データを復号する音声デコーダを制御部で制御する映像再生方法において、前記制御部により
前記映像デコーダでデコードされる符号化映像データに対応する映像プレゼンテーションタイムスタンプ（映像ＰＴＳ）と、音声デコーダでデコードされる符号化音声データに対応する音声プレゼンテーションタイムスタンプ（音声ＰＴＳ）とを比較し、両者の時間差が所定の時間差を超えているか否かを判定し、
前記所定の時間差を超えている場合、符号化映像データを復号するために基準となる次の基準ピクチャまで前記映像デコーダの処理をスキップさせ、
前記次の基準ピクチャが存在するパケッタイズドエレメンタリーストリーム（ＰＥＳ）パケットの映像ＰＴＳと前記音声ＰＴＳとを比較し、両者の差が所定の時間内であるか否かを判定し、
前記差が所定の時間内である場合、前記映像デコーダのデコード処理を再スタートさせることを特徴する映像再生方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２００９−２１８９３４（Ｐ２００９−２１８９３４Ａ）
【公開日】平成２１年９月２４日（２００９．９．２４）
【国際特許分類】
【出願番号】特願２００８−６１４６１（Ｐ２００８−６１４６１）
【出願日】平成２０年３月１１日（２００８．３．１１）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２１年９月２４日（２００９．９．２４）
【国際特許分類】
【出願日】平成２０年３月１１日（２００８．３．１１）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]