再生装置及び再生方法
【課題】 コスト及び消費電力を抑えつつ、不自然な音声の途切れ及び表示装置の復号器の破綻を防止する、ＭＰＥＧデータ等のマルチメディアデータの特殊再生を可能にする技術を提供すること。
【解決手段】 データ伝送再生装置１４０にストリーム切替スイッチ１１１を設け、ＭＰＥＧデータの特殊再生時はオーディオＥＳとしてミュート発生器１１０の生成するミュートオーディオＥＳを使用するか、オーディオＥＳをＴＳに多重化しない。また、ビデオ簡易符号器１０６は復号化されたビデオＥＳを再符号化するが、フレーム内符号化画像としてのみ符号化できる単純な構成である。
【解決手段】 データ伝送再生装置１４０にストリーム切替スイッチ１１１を設け、ＭＰＥＧデータの特殊再生時はオーディオＥＳとしてミュート発生器１１０の生成するミュートオーディオＥＳを使用するか、オーディオＥＳをＴＳに多重化しない。また、ビデオ簡易符号器１０６は復号化されたビデオＥＳを再符号化するが、フレーム内符号化画像としてのみ符号化できる単純な構成である。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオデータ及びオーディオデータを含むマルチメディアデータを再生して伝送するデータ再生伝送装置及びデータ再生伝送方法に関する。
【背景技術】
【０００２】
従来、ＭＰＥＧなどの符号化方式で符号化された動画像データや音声データを記録媒体から再生し、符号化されたままの状態で外部の表示装置などに伝送し、これを復号して表示する技術が知られている。この様に、符号化された動画像データなどを送受信するためのデジタルインタフェースとして、ＩＥＥＥ１３９４(Institute of Electrical and Electronics Engineers 1394)がしばしば使用される。
【０００３】
この様に、ＭＰＥＧデータを表示装置に送信して復号、表示するシステムにおいて、スロー、スチル、コマ送り等の特殊再生を実現する場合、次のようにして実現することができる。例えば、これらの特殊再生を示す特定の付加情報をＭＰＥＧデータに付加して送信し、復号器においてこの付加情報に従って復号することで実現可能である。
【０００４】
具体的には、ＰＥＳ(Packetized Elementary Stream)パケットのヘッダ情報内のDSM_trick_modeフィールドに、特殊再生に関する情報を記述する。
【０００５】
しかし、デコーダの中には、この様な特殊再生用の付加情報である、ＰＥＳパケットのヘッダ情報のDSM_trick_modeに従ってデコード処理を行うことができないものが多数存在する。そこで、そのような表示装置でもＭＰＥＧデータの特殊再生を可能にするデータ再生伝送装置が提案されている。
【０００６】
例えば、特許文献１では、記録媒体から再生された全てのＭＰＥＧデータを一旦復号化した後、再符号化して送信する構成である。
【特許文献１】特開２００１−２８７４８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１では、再生伝送装置に完全な符号器（エンコーダ）を設ける必要がある。「完全な符号器」とは、フレーム内符号化画像（Ｉピクチャ）、フレーム間予測符号化画像（Ｐピクチャ）、双方向予測符号化画像（Ｂピクチャ）のすべてのピクチャを生成可能な符号器という意味である。このような符号器では、例えば予測符号化のためのフレームメモリが必要となるなど、回路構成が複雑化し、コスト及び消費電力が増大するという問題がある。
【０００８】
また、特許文献１では、ＭＰＥＧデータのＩピクチャのフレームでしか画像の更新が行われないため、特殊再生時に画像の追従性が悪化するという問題がある。したがって、例えばスロー再生時において、画像の更新頻度が低くなり、滑らかにスロー再生を行うことができない。
【０００９】
さらに、特許文献１では、表示装置がダミーパケット情報またはＤＩＴ情報を受け取った場合の復号動作等に関する明確な規定がなく、表示装置ごとに振る舞いが異なりうるため、表示装置が適切に特殊再生を行える保証がない。なお、ＤＩＴ情報は符号化ビットストリーム（データストリーム）の不連続を示す情報であり、Discontinuity Information Tableの略である。
【００１０】
本発明はこのような状況に鑑みてなされたものであり、特別な復号機能を持たない復号器を使用した場合にも、特殊再生を実現可能な技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明の再生装置は、フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、前記再生手段より再生された動画像データを復号する復号手段と、前記復号手段により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化手段と、前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備えることを特徴とする。
【００１２】
また、本発明の他の再生装置は、フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、前記再生手段より再生された動画像データを復号する復号手段と、前記復号手段により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化手段と、前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備えることを特徴とする。
【００１３】
なお、その他の本発明の特徴は、添付図面及び以下の発明を実施するための最良の形態の記載によっていっそう明らかになるものである。
【発明の効果】
【００１４】
以上の構成により、本発明によれば、コスト及び消費電力を抑えつつ、特殊な機能を持たない復号器を用いた場合でも特殊再生を実現することが可能となる。
【発明を実施するための最良の形態】
【００１５】
以下、添付図面を参照して、本発明の好適な実施形態を説明する。
【００１６】
なお、以下の各実施形態においては、ビデオデータ及びオーディオデータを含むマルチメディアデータの一例としてＭＰＥＧデータを対象に説明するが、それ以外の形式のマルチメディアデータにも本発明を適用可能である。
【００１７】
また、特殊再生の一例としてスロー再生、スチル再生、コマ送り再生を対象に説明するが、それ以外の特殊再生（例えば早送り再生や巻戻し再生）にも本発明を適用可能である。
【００１８】
［第１の実施形態］
＜装置の構成＞
図１は、本発明を適用可能なデータ伝送再生装置１４０及び外部装置としての表示装置１４１の構成を示す機能ブロック図である。データ伝送再生装置１４０及び表示装置１４１はＩＥＥＥ１３９４ケーブル１１７で接続され、データ伝送再生装置１４０から表示装置１４１へ、ＭＰＥＧデータがトランスポートストリーム（以下、「ＴＳ」と呼ぶ）として伝送される。
【００１９】
まず、データ伝送再生装置１４０の構成を説明する。
【００２０】
記憶媒体１００は、伝送対象となるＭＰＥＧデータを保存するためのものであり、ＨＤＤ（ハードディスク）、ＤＶＤ、フラッシュメモリなど、いかなる種類の媒体であってもよい。
【００２１】
バッファメモリ１０１は、記憶媒体１００から取得したＭＰＥＧデータを一時的に保存するためのメモリである。
【００２２】
ＤＥＭＵＸ１０２は、記憶媒体１００から取得したＭＰＥＧデータに含まれる画像（ビデオ）データと音声（オーディオ）データが多重化されている場合に、エレメンタリーストリーム（以下、「ＥＳ」と呼ぶ）に変換するためのものである。なお、「ＤＥＭＵＸ」はデマルチプレクサを意味する。多重化ＭＰＥＧデータは、ビデオＥＳとオーディオＥＳに変換される。
【００２３】
ビデオＥＳメモリ１０３は、ＤＥＭＵＸ１０２によって得られたビデオＥＳを一時的に保存するためのメモリである。
【００２４】
ビデオ復号器１０４は、ビデオＥＳを復号化してモニタ１０５に表示可能なデータ形式にする復号器である。
【００２５】
ビデオ簡易符号器１０６は、ビデオ復号器１０４が復号化したビデオデータを再度符号化するための符号器である。ビデオ簡易符号器１０６はＭＰＥＧ規格の通常のビデオ符号器と異なり、Ｉピクチャしか生成することができない。したがって、予測符号化のためのフレームメモリなどは不要であり、簡易的なものとすることができる。
【００２６】
オーディオＥＳメモリ１０７は、ＤＥＭＵＸ１０２によって得られたオーディオＥＳを一時的に保存するためのメモリである。
【００２７】
オーディオ復号器１０８は、オーディオＥＳを復号化してスピーカ１０９で出力可能なデータ形式にする復号器である。
【００２８】
ミュート発生器１１０は、無音のオーディオＥＳ（以下、「ミュートオーディオＥＳ」と呼ぶ）を出力するためのものである。
【００２９】
ストリーム切替スイッチ１１１は、出力（伝送）するＴＳを通常再生用と特殊再生用とで切り替えるためのものである。
【００３０】
ＴＳ＿ＭＵＸ１１２は、ビデオＥＳとオーディオＥＳを多重化してＴＳを生成するためのものである。なお、「ＭＵＸ」はマルチプレクサを意味する。
【００３１】
外部Ｉ／Ｆ１１３は、ＩＥＥＥ１３９４のインタフェースである。
【００３２】
ＣＰＵ１１４は、データ伝送再生装置１４０全体の動作を制御するためのものであり、ＲＯＭ１１５に格納されるプログラム（ファームウェア）を実行することにより機能する。
【００３３】
ＲＯＭ１１５は、ＣＰＵ１１４が実行するプログラムを格納するための不揮発性メモリである。
【００３４】
ＲＡＭ１１６は、ＣＰＵ１１４がＲＯＭ１１５に格納されるプログラムを実行する際に作業領域として使用する揮発性メモリである。
【００３５】
また、この他にもデータ伝送再生装置１４０は不図示の操作部を備え、ユーザはこれを介してデータ伝送再生装置１４０に指示を与えることができる。
【００３６】
次に、表示装置１４１の構成を説明する。
【００３７】
外部Ｉ／Ｆ１１８は、ＩＥＥＥ１３９４のインタフェースである。
【００３８】
ＴＳ＿ＤＥＭＵＸ１１９は、データ伝送再生装置１４０から伝送されてきたＴＳをビデオＥＳとオーディオＥＳに変換するデマルチプレクサである。
【００３９】
ビデオ復号器１２０は、ＴＳ＿ＤＥＭＵＸ１１９が変換したビデオＥＳを復号化してモニタ１２１に表示可能なデータ形式にする復号器である。
【００４０】
オーディオ復号器１２２は、ＴＳ＿ＤＥＭＵＸ１１９が変換したオーディオＥＳを復号化してスピーカ１２３で出力可能なデータ形式にする復号器である。
【００４１】
ＣＰＵ１２４は、表示装置１４１全体の動作を制御するためのものであり、ＲＯＭ１２５に格納されるプログラム（ファームウェア）を実行することにより機能する。
【００４２】
ＲＯＭ１２５は、ＣＰＵ１２４が実行するプログラムを格納するための不揮発性メモリである。
【００４３】
ＲＡＭ１２６は、ＣＰＵ１２４がＲＯＭ１２５に格納されるプログラムを実行する際に作業領域として使用する揮発性メモリである。
【００４４】
また、この他にも表示装置１４１は不図示の操作部を備え、ユーザはこれを介して表示装置１４１に指示を与えることができる。
【００４５】
＜通常再生時と特殊再生時のＴＳ＞
図２は、ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。以下、図２及び図３乃至図６を参照して、通常再生時のデータ伝送再生装置１４０の動作、表示装置１４１の動作、特殊再生時のデータ伝送再生装置１４０の動作、特殊再生から通常再生へ切り替える際のデータ伝送再生装置１４０の動作を説明する。
【００４６】
＜通常再生時のデータ伝送再生装置１４０の動作＞
図３は、ＭＰＥＧデータの通常再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。データ伝送再生装置１４０がＭＰＥＧデータの通常再生の指示を受けると、本フローチャートの処理が開始する。データ伝送再生装置１４０は、通常再生の指示を、データ伝送再生装置１４０の不図示の操作部や、ＩＥＥＥ１３９４ケーブル１１７等を介して受けることができる。
【００４７】
なお、通常再生時は、図１のストリーム切替スイッチ１１１のビデオ側（左）は「ａ」に、オーディオ側（右）は「ｃ」に接続される。
【００４８】
ステップＳ３０１で、図１のＣＰＵ１１４は記憶媒体１００に保存されているＭＰＥＧデータを読み出し、バッファメモリ１０１に格納する。一時的に格納されるＭＰＥＧデータの形式は、ＴＳやＰＳ（プログラムストリーム）、またはビデオデータとオーディオデータが多重化されていないＥＳのいずれでもよい。
【００４９】
ステップＳ３０２で、ＣＰＵ１１４はバッファメモリ１０１に格納した多重化ＭＰＥＧデータが、ビデオデータとオーディオデータが多重化されているＴＳまたはＰＳであるかどうかを判定する。多重化されている場合はステップＳ３０３に進み、多重化されていない場合はステップＳ３０４に進む。
【００５０】
ステップＳ３０３で、ＤＥＭＵＸ１０２はバッファメモリ１０１に格納したＭＰＥＧデータをビデオＥＳ及びオーディオＥＳに変換する。
【００５１】
ステップＳ３０４で、ＣＰＵ１１４はバッファメモリ１０１に格納されているビデオＥＳ及びオーディオＥＳを、ビデオＥＳメモリ１０３及びオーディオＥＳメモリ１０７に格納する。
【００５２】
ステップＳ３０５で、ビデオ復号器１０４はビデオＥＳメモリ１０３に格納されているビデオＥＳを復号化し、モニタ１０５に出力する。また、オーディオ復号器１０８はオーディオＥＳメモリ１０７に格納されているオーディオＥＳを復号化し、スピーカ１０９に出力する。ここで出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものが、図２（ａ）上段である。
【００５３】
ステップＳ３０６で、ＴＳ＿ＭＵＸ１１２はビデオＥＳメモリ１０３及びオーディオＥＳメモリ１０７に格納されているビデオＥＳ及びオーディオＥＳを多重化し、ＴＳを生成する。ＩＥＥＥ１３９４上のストリーム形式はＴＳなので、ＭＰＥＧデータを表示装置１４１へ伝送可能にするためである。
【００５４】
ステップＳ３０７で、外部Ｉ／Ｆ１１３はＩＥＥＥ１３９４ケーブル１１７を介して、ステップＳ３０６で生成したＴＳを表示装置１４１に伝送する。伝送されるＴＳの例を示すものが、図２（ａ）中段である。
【００５５】
ステップＳ３０８で、ＣＰＵ１１４はＭＰＥＧデータの再生が終了したかどうかを判定する。再生の終了は、例えばデータ伝送再生装置１４０が伝送中のＭＰＥＧデータを最後まで伝送した場合や、不図示の操作部等から再生終了の指示を受けた場合に発生する。再生が終了した場合は本フローチャートの処理を終了する。再生が終了していない場合はステップＳ３０１に戻り、上述の処理を繰り返す。
【００５６】
＜表示装置１４１の動作＞
図４は、ＭＰＥＧデータの通常再生時及び特殊再生時に共通する、表示装置１４１のデータ再生処理の流れを示すフローチャートである。通常再生時及び特殊再生時の処理が共通なのは、データ伝送再生装置１４０は再生の種類に応じて異なるＴＳを伝送するが、いずれの再生においてもパケット形式は共通だからである。外部Ｉ／Ｆ１１８がＩＥＥＥ１３９４ケーブル１１７を介してＴＳが送られてきたことを検知すると、本フローチャートの処理が開始する。
【００５７】
ステップＳ４０１で、外部Ｉ／Ｆ１１８はＩＥＥＥ１３９４ケーブル１１７を介してＴＳを受信する。
【００５８】
ステップＳ４０２で、ＴＳ＿ＤＥＭＵＸ１１９はＴＳをビデオＥＳ及びオーディオＥＳに変換する。
【００５９】
ステップＳ４０３で、ビデオ復号器１２０はビデオＥＳを復号化し、モニタ１２１に出力する。また、オーディオ復号器１２２はオーディオＥＳを復号化し、スピーカ１２３に出力する。通常再生の場合にここで出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものが、図２（ａ）下段である。特殊再生の場合に出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものは図２（ｂ）下段であり、詳細は後述する。
【００６０】
＜特殊再生時のデータ伝送再生装置１４０の動作＞
図５は、ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。図３の通常再生時と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生の指示を受けたり、通常再生時に特殊再生への変更指示を受けたりすると、本フローチャートの処理が開始する。
【００６１】
本実施形態では、通常再生時にスチル再生への変更指示を受けたものとして説明する。ここでは、データ伝送再生装置１４０が、図２（ｂ）の上段で「フリーズ画」と表示される区間の先頭のタイミングでスチル再生の指示を受けたものとする。
【００６２】
ステップＳ５０１で、図１のＣＰＵ１１４は、ストリーム切替スイッチ１１１のビデオ側（左）を「ｂ」に、オーディオ側（右）を「ｄ」に接続する。また、ＣＰＵ１１４は外部Ｉ／Ｆ１１８からストリームの不連続を示すＤＩＴ情報を発行して、ストリームが分断されることを表示装置１４１に通知する。さらに、ＣＰＵ１１４は、ビデオＥＳメモリ１０３から復号化前のビデオＥＳのビットレートを取得し、ビデオ簡易符号器１０６に通知する。また、ＣＰＵ１１４は、オーディオＥＳメモリ１０７からオーディオＥＳのビットレート、サンプリング周波数、及びＭＰＥＧ１オーディオ、ＡＣ３などの符号化のモードを取得し、ミュート発生器１１０に通知する。
【００６３】
ステップＳ５０２で、ＣＰＵ１１４は記憶媒体１００に保存されているＭＰＥＧデータを取得し（読み出し）、バッファメモリ１０１に格納する。ただし、ここでの読み出しはステップＳ３０１と異なり、特殊再生の種類に応じてＭＰＥＧデータから読み出す画像フレームの間隔が異なる。例えば、スチル再生であればビデオフレームが次のフレームに進まないため、スチル再生中は新たに画像フレームを読み出すことはしない。また、スロー再生であれば、記憶媒体１００から全てのＭＰＥＧデータを順に読み出すが、所定の符号化単位（ＧＯＰ）を単位として読み出し、その読み出し間隔は再生速度に応じたものとなる。また、早送り再生であれば、所定のフレーム数おきに画像フレームを読み出す。したがって、前述のように本実施形態ではスチル再生の場合について説明するが、読み出す画像フレームの間隔を調整すれば他の種類の特殊再生であっても同じことが言える。
【００６４】
ステップＳ５０３で、ビデオ簡易符号器１０６は、ビデオ復号器１０４で復号化されたビデオ信号の各フレームをＩピクチャのみからなるビデオＥＳとして再符号化する。ここでの再符号化は、再生モードによっては同じ画像フレームに対して複数回行われることもある。例えば、スチル再生であれば、それが解除されるまで、ビデオ簡易符号器１０６は特定の画像フレームを再符号化し続ける。また、例えば１／３倍のスロー再生では、ビデオ簡易符号器１０６は各々の画像フレームを３回ずつ再符号化して再生速度を調整する。再符号化のアルゴリズムは通常のＭＰＥＧ符号化と同様であり、ＤＣＴ（離散コサイン変換）、量子化、ジグザグスキャンなどを組み合わせて可変長符号化する。なお、ビデオ簡易符号器１０６は、再符号化されたビデオＥＳがステップＳ５０１で通知されたビットレート以下とすることを目標に量子化ステップなどを決定する。
【００６５】
ステップＳ５０３ではまた、ミュート発生器１１０が、ステップＳ５０１で通知された形式と一致するミュートオーディオＥＳを生成する。ミュートオーディオＥＳは、無音を所定のサンプリング周波数でサンプリングし、所定の形式で符号化したものである。したがって、サンプリング周波数が不定であればリアルタイムに生成するが、サンプリング周波数が固定で予め特定可能であれば、ミュートオーディオＥＳは固定的なデータとなるため、予めＲＯＭ１１５等に用意したものを利用してもよい。
【００６６】
ステップＳ５０４で、ＴＳ＿ＭＵＸ１１２はビデオ簡易符号器１０６が生成したビデオＥＳ及びミュート発生器１１０が生成したミュートオーディオＥＳを多重化し、ＴＳを生成する。
【００６７】
なお、スチル再生時に伝送されるＴＳの例を示すものが、図２（ｂ）中段の、左側の「ＤＩＴ」表示から４フレーム続くＩピクチャと、それに対応するミュートデータである。また、前述のように、表示装置１４１に出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものが図２（ｂ）下段であり、図２（ｂ）中段の、左側の「ＤＩＴ」表示から４フレーム続くＩピクチャに対応する部分である。
【００６８】
＜特殊再生から通常再生に切り替える時のデータ伝送再生装置１４０の動作＞
図６は、ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。図３の通常再生時と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生時に通常再生への変更指示を受けると、本フローチャートの処理が開始する。
【００６９】
ステップＳ６０１で、図１のＣＰＵ１１４は、ストリーム切替スイッチ１１１のオーディオ側（右）を「ｃ」に接続する。これにより、オーディオＥＳがミュート発生器１１０の生成するものから記憶媒体１００に保存されているＭＰＥＧデータに含まれるものに切り替わる。一方、ストリーム切替スイッチ１１１のビデオ側（左）は切り替えない。表示装置１４１のビデオ復号器１２０は、Ｉピクチャから開始するビデオＥＳでなければ復号化できないので、ビデオＥＳメモリ１０３にＩピクチャが入るまではビデオ簡易符号器１０６によるＩピクチャを使用するためである。
【００７０】
ステップＳ６０２で、ＣＰＵ１１４は、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャであるかどうかを判断する。ＩピクチャであればステップＳ６０５に進み、ＩピクチャでなければステップＳ６０３に進む。
【００７１】
ステップＳ６０３では、図５のステップＳ５０３と同様、ビデオ簡易符号器１０６は、ビデオ復号器１０４で復号化されたビデオ信号の各フレームをＩピクチャのみからなるビデオＥＳとして再符号化する。ただし、ステップＳ５０３と異なり、ミュート発生器１１０はミュートオーディオＥＳを生成しない。
【００７２】
ステップＳ６０４で、ＴＳ＿ＭＵＸ１１２はビデオ簡易符号器１０６が生成したビデオＥＳ及びオーディオＥＳメモリ１０７に格納されているオーディオＥＳを多重化し、ＴＳを生成する。
【００７３】
ステップＳ６０２において、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャであった場合は、前述の通りステップＳ６０５に進む。
【００７４】
ステップＳ６０５で、ＣＰＵ１１４は、ストリーム切替スイッチ１１１のビデオ側（左）を「ａ」に接続する。また、ＣＰＵ１１４は外部Ｉ／Ｆ１１８からストリームの不連続を示すＤＩＴ情報を発行して、ストリームが分断されることを表示装置１４１に通知する。次いで、通常再生の処理（図３）に戻る。
【００７５】
データ伝送再生装置１４０を特殊再生から通常再生に切り替える時のモニタ１０５等の出力やＴＳを示すものが、図２（ｂ）である。図２（ｂ）中段の右側の「ＤＩＴ」表示から左へ３つ並ぶＩピクチャと時間的に対応する部分が本フローチャートの処理に相当する。
【００７６】
本実施形態では特殊再生の種類をスチル再生としたが、図５を参照して説明したように、他の種類の特殊再生（例えばスロー再生やコマ送り再生）でも図６のフローチャートを適用できる。ＣＰＵ１１４は、通常再生への変更と同時にストリーム切替スイッチ１１１のオーディオ側（右）を「ｃ」に接続する。また、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになった時点でビデオ側（左）を「ａ」に接続する。この点で、特殊再生の種類による違いはないからである。
【００７７】
＜第１の実施形態のまとめ＞
以上説明したように、本実施形態によれば、データ伝送再生装置１４０はＭＰＥＧデータの特殊再生時に、ビデオ簡易符号器１０６がビデオＥＳをＩピクチャのみからなるものに再符号化する。また、ミュート発生器１１０がミュートオーディオＥＳを生成する。ＴＳ＿ＭＵＸ１１２は、ビデオ簡易符号器１０６によるビデオＥＳとミュート発生器１１０によるミュートオーディオＥＳを多重化してＴＳを生成する。
【００７８】
ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時は、直ちにオーディオＥＳをミュート発生器１１０が生成するものから記憶媒体１００に保存されているＭＰＥＧデータによるものに切り替える。しかし、ビデオＥＳはＣＰＵ１１４がビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになるまでは、ビデオ簡易符号器１０６が生成するものを使い続ける。
【００７９】
これにより、特殊再生時はミュートオーディオＥＳを使用するため、無音状態となり、音声の不自然な途切れは発生しない。また、ビデオ簡易符号器１０６がＩピクチャのみからなるビデオＥＳを生成する際に、復号器の仮想入力バッファの蓄積量を示すデータを無効化する必要がないため、表示装置１４１の復号器の破綻を防止できる。さらに、ビデオ簡易符号器１０６はフレーム間予測を行わないため、単純な構成とすることができ、コスト及び消費電力を抑えることができる。
【００８０】
［第２の実施形態］
第１の実施形態では、ＭＰＥＧデータの特殊再生時に、図１のビデオ簡易符号器１０６は、ＩピクチャのみからなるビデオＥＳを生成した。第２の実施形態では、ＭＰＥＧデータの特殊再生時に、ビデオ簡易符号器１０６が、Ｉピクチャに加えてコピーピクチャを含むビデオＥＳを生成する形態を説明する。コピーピクチャとはＰピクチャの一種であり、直前のピクチャが表現する画像と同一の画像を表現するものである。
【００８１】
なお、本実施形態において、データ伝送再生装置１４０及び表示装置１４１の構成は第１の実施形態（図１）と同様でよいため、その説明を省略する。また、ＭＰＥＧデータの通常再生時におけるデータ伝送再生装置１４０のデータ伝送処理の流れ、及び、表示装置１４１によるＭＰＥＧデータの再生処理の流れも、第１の実施形態（図３、図４）と同様のため、説明を省略する。
【００８２】
＜コピーピクチャの構成＞
図７は、コピーピクチャの構成を示す図である。図７の各々のブロックがマクロブロック（ＭＢ）を示す。コピーピクチャは、直前のピクチャが表現する画像と同一の画像を表現するものであるため、ＭＢの大半がスキップドマクロブロック（ＳＭＢ）で構成される。ただし、スライスの両端のＭＢには、ＭＰＥＧの規定によりＳＭＢを使用できないため、macroblock_typeをＭＣ、ＮｏｔＣｏｄｅｄとしたＭＢ（ＭＢＨ）を使用する。ＭＢＨは、ＭＢアドレス情報と、（０，０）の動きベクトルを持ち、ＤＣＴ係数を持たないＭＢである。
【００８３】
コピーピクチャは、大部分が固定されたデータであるため、予め図１のＲＯＭ１１５等に保存しておき、ＭＰＥＧデータの特殊再生時にはビデオ簡易符号器１０６はこれを使用してビデオＥＳを生成してもよい。または、ＣＰＵ１１４がビデオＥＳのシーケンスヘッダを解析してピクチャのサイズを調べ、それに則してビデオ簡易符号器１０６がコピーピクチャを生成してもよい。ビデオ簡易符号器１０６は前述のように、フレームメモリを備えず、原則としてＰピクチャを生成することはできないが、コピーピクチャは動き補償を行わないため、ビデオ簡易符号器１０６はこれを生成できる。
【００８４】
なお、コピーピクチャは、Ｐピクチャの形式ではなく、Ｂピクチャの形式で構成されてもよい。この場合でも、Ｂピクチャの一種であるコピーピクチャは、直前のピクチャが表現する画像と同一の画像を表現するものである。
【００８５】
コピーピクチャはＩピクチャに比べてデータ量が小さいため、ＩピクチャのみでビデオＥＳを生成する第１の実施形態と異なり、データ伝送のビットレートを高くしなくても、多くの符号量をＩピクチャにより割り当てることができる。したがって、ＭＰＥＧデータを特殊再生する際に、画質を向上させることができる。
【００８６】
＜通常再生時と特殊再生時のＴＳ＞
図８は、ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。以下、図８及び図９乃至図１２を参照して、特殊再生時のデータ伝送再生装置１４０の動作及び特殊再生から通常再生へ切り替える際のデータ伝送再生装置１４０の動作を説明する。
【００８７】
＜特殊再生時のデータ伝送再生装置１４０の動作＞
図９は、ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。第１の実施形態（図５）と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生の指示を受けたり、通常再生時に特殊再生への変更指示を受けたりすると、本フローチャートの処理が開始する。
【００８８】
本実施形態では、第１の実施形態と同様、通常再生時にスチル再生への変更指示を受けたものとして説明する。データ伝送再生装置１４０は、図８（ｂ）の上段で「フリーズ画」と表示される区間の先頭のタイミングでスチル再生の指示を受ける。
【００８９】
ステップＳ９０１で、図１のＣＰＵ１１４は、ステップＳ５０１において行われる初期化設定と同様の処理を行い、加えて、変数ｍを定数ｎに初期化する。定数ｎは、ＩピクチャとコピーピクチャからなるビデオＥＳにおいて、何ピクチャおきにＩピクチャが表れるかを示す値である。定数ｎの値は、ＭＰＥＧデータの特殊再生時においてモニタ１２１等が出力する画像の更新頻度を定めるため、特殊再生の種類に応じてＣＰＵ１１４が定数ｎの値を決定する。定数ｎの値と特殊再生の種類の関係は、図１０及び図１１を参照して後述する。
【００９０】
ステップＳ９０２で、ＣＰＵ１１４はｍ＜ｎであるかどうかを判定する。ｍ＜ｎでなければ、次のピクチャはＩピクチャであるため、ステップＳ９０３に進む。ｍ＜ｎであれば、次のピクチャはコピーピクチャであるため、ステップＳ９０４に進む。
【００９１】
ステップＳ９０３で、ビデオ簡易符号器１０６は、ビデオ復号器１０４で復号化された１枚のピクチャをＩピクチャとして再符号化する。また、ミュート発生器１１０が、ミュートオーディオＥＳを生成する。さらに、変数ｍを０にする。
【００９２】
ステップＳ９０４で、ビデオ簡易符号器１０６は、コピーピクチャを生成するか、または、ＲＯＭ１１５に予め保存されているコピーピクチャを取得する。また、ミュート発生器１１０が、ミュートオーディオＥＳを生成する。さらに、変数ｍに１を加える。
【００９３】
ステップＳ９０３及びステップＳ９０４で生成されたピクチャを含むビデオＥＳは、第１の実施形態と同様、ビデオ簡易符号器１０６がステップＳ９０１で通知されたビットレート以下となることを目標に生成される。ここで、コピーピクチャのデータ量は一定であるため、ビデオ簡易符号器１０６は、
（（（Iピクチャのデータ量）＋（コピーピクチャのデータ量）×（ｎ−１））／ｎ）
×（フレームレート）＝（目標とするビットレート）
となるように、量子化ステップなどを定め、Ｉピクチャを生成する。
【００９４】
なお、スチル再生時に伝送されるＴＳの例を示すものが、図８（ｂ）中段の、左側の「ＤＩＴ」表示から４フレーム続く「Ｉ、Ｃ、Ｃ、Ｉ」ピクチャと、それに対応するミュートデータである。
【００９５】
また、第１の実施形態と同様、図９のフローチャートの処理は、スチル再生以外の特殊再生にも適用することができる。
【００９６】
＜定数ｎの決定＞
前述のように、定数ｎの値は、ＭＰＥＧデータの特殊再生時においてモニタ１２１等が出力する画像の更新頻度を定めるため、特殊再生の種類に応じてＣＰＵ１１４が定数ｎの値を決定する。
【００９７】
特殊再生の種類がスチル再生の場合、出力画像を更新する必要はないため、ＣＰＵ１１４は定数ｎの値を大きく定める。この値は、事実上無限でよく、例えば、ｎ＝０の場合、定数ｎは無限であるとみなすようにデータ伝送再生装置１４０を構成してもよい。
【００９８】
特殊再生の種類がスロー再生の場合、ＣＰＵ１１４は何倍速のスロー再生か、換言すれば同一の画像を何フレーム連続出力するか、に基づいて定数ｎを定める。図１０は、１／３倍速のスロー再生において、ｎ＝３及びｎ＝２の時のＴＳと、モニタ１０５等に出力される画像を模式的に示す図である。
【００９９】
このとき、データ伝送再生装置１４０のモニタ１０５には、更新された画像１枚につき、フリーズ画像（直前の画像と同一の画像）が２枚続けて出力される。そこで、図１０の上に示すように、ｎ＝３とすると、表示装置１４１のモニタ１２１に出力される画像が最も適切な頻度で更新される。換言すれば、スロー再生における画像更新周期に一致するように定数ｎの値を定めると、表示装置１４１のモニタ１２１に出力される画像の追従性が最良となる。
【０１００】
特殊再生の種類がコマ送り再生の場合、更新された画像１枚に続くフリーズ画像の数が一定ではない。したがって、図１１に示すように、コマ送り再生におけるフリーズ画像の最小枚数に１を加えた値、またはそれ以下の自然数を定数ｎとすると、表示装置１４１のモニタ１２１に出力される画像の追従性が向上する。
【０１０１】
なお、特殊再生の種類が早送り再生の場合のように、ＭＰＥＧデータに含まれる画像フレームを所定のフレーム数おきに表示する再生モードの場合、ビデオ簡易符号器１０６はｎ＝１としてコピーピクチャを使用しない。さらに、第１の実施形態と同様、ＣＰＵ１１４は記憶媒体１００に保存されているＭＰＥＧデータを所定のフレーム数おきに取得する（読み出す）。
【０１０２】
＜特殊再生から通常再生に切り替える時のデータ伝送再生装置１４０の動作＞
図１２は、ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。第１の実施形態（図６）と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生時に通常再生への変更指示を受けると、本フローチャートの処理が開始する。
【０１０３】
ステップＳ１２０１で、ＣＰＵ１１４はステップＳ９０２と同様、ｍ＜ｎであるかどうかを判定する。ここで、変数ｍ及び定数ｎの値は、データ伝送再生装置１４０が通常再生への変更指示を受ける前の、特殊再生時の値をそのまま引き継いだものである。ｍ＜ｎでなければ、次のピクチャはＩピクチャであるため、ステップＳ１２０２に進む。ｍ＜ｎであれば、次のピクチャはコピーピクチャであるため、ステップＳ１２０３に進む。
【０１０４】
ステップＳ１２０２で、ビデオ簡易符号器１０６はステップＳ９０３と同様、ビデオ復号器１０４で復号化された１枚のピクチャをＩピクチャとして再符号化する。また、変数ｍを０にする。ただし、ステップＳ９０３と異なり、ミュート発生器１１０はミュートオーディオＥＳを生成しない。
【０１０５】
ステップＳ１２０３で、ビデオ簡易符号器１０６はステップＳ９０４と同様、コピーピクチャを生成するか、または、ＲＯＭ１１５に予め保存されているコピーピクチャを取得する。また、変数ｍに１を加える。ただし、ステップＳ９０４と異なり、ミュート発生器１１０はミュートオーディオＥＳを生成しない。
【０１０６】
データ伝送再生装置１４０を特殊再生から通常再生に切り替える時のモニタ１０５等の出力やＴＳを示すものが、図８（ｂ）である。図８（ｂ）中段の右側の「ＤＩＴ」表示の左に３つ並ぶ「Ｃ、Ｃ、Ｉ」ピクチャと時間的に対応する部分が本フローチャートの処理に相当する。
【０１０７】
このように、データ伝送再生装置１４０は特殊再生時に通常再生への変更指示を受けると、オーディオの再生を直ちに通常再生に戻す。しかし、ビデオの再生は、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになるまで特殊再生を続ける。
【０１０８】
本実施形態では特殊再生の種類をスチル再生としたが、第１の実施形態と同様、他の種類の特殊再生（例えばスロー再生やコマ送り再生）でも図１２のフローチャートを適用できる。ＣＰＵ１１４は、通常再生への変更と同時にストリーム切替スイッチ１１１のオーディオ側（右）を「ｃ」に接続する。また、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになった時点でビデオ側（左）を「ａ」に接続する。この点で、特殊再生の種類による違いはないからである。
【０１０９】
＜第２の実施形態のまとめ＞
以上説明したように、本実施形態によれば、ＭＰＥＧデータの特殊再生時に、データ伝送再生装置１４０はＩピクチャに加えてコピーピクチャを含むビデオＥＳを生成する。
【０１１０】
これにより、表示装置１４１がＭＰＥＧデータを特殊再生する際に、画質を向上させることができる。なぜなら、コピーピクチャはＩピクチャに比べてデータ量が少ないため、伝送するＴＳのビットレートを増大させなくても、より多くの符号量をＩピクチャに割り当てることができるからである。
【０１１１】
［その他の実施形態］
＜特殊再生時のオーディオＥＳの破棄＞
上述した各実施形態において、ＭＰＥＧデータの特殊再生時は、ミュート発生器１１０がミュートオーディオＥＳを生成し、ＴＳ＿ＭＵＸ１１２がこれをビデオＥＳと多重化してＴＳを生成することにより、音声の不自然な途切れを防止した。
【０１１２】
しかし、ミュートオーディオＥＳを使用せず、ＭＰＥＧデータに含まれるオーディオＥＳを破棄することによっても、同様の効果が得られる。
【０１１３】
図１３は、ＭＰＥＧデータの特殊再生時にオーディオＥＳを破棄する場合の、ＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。図１３（ｂ）中段に示すように、ビデオＥＳが再符号化されている間は、オーディオＥＳが破棄される。第１及び第２の実施形態と異なり、データ伝送再生装置１４０が通常再生への変更指示を受けても、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになるまではオーディオＥＳは破棄される。オーディオＥＳの破棄によりストリームの分断が発生するため、「ＤＩＴ」が発行されるまではＴＳ＿ＭＵＸ１１２がＴＳに多重化するストリームを変更することは好ましくないからである。
【０１１４】
＜インタレース形式のプログレッシブ形式への変換＞
上述した各実施形態において、記憶媒体１００に記録されているＭＰＥＧデータに含まれるビデオデータがインタレース形式の場合、これを特殊再生する際にプログレッシブ形式に変換してもよい。この場合、ビデオ簡易符号器１０６がビデオ復号器１０４の復号化したインタレース形式のビデオデータをプログレッシブ形式に変換してから再符号化し、ビデオＥＳを生成する。
【０１１５】
インタレース形式をプログレッシブ形式に変換すると、ＭＰＥＧデータの特殊再生時の画質を向上させることができる。なぜなら、インタレース形式の場合、同一のフレームを連続してモニタ１２１に表示すると、時間的に前後するフィールドを交互に表示することになり、ちらつきが発生するからである。それに対し、プログレッシブ形式の場合、各々のフレームは単一の時刻における画像データから構成されるため、同一のフレームを連続してモニタ１２１に表示しても、ちらつきは発生しない。
【０１１６】
ビデオデータがインタレース形式であるか、プログレッシブ形式であるかの判断は、ＣＰＵ１１４がビデオＥＳのヘッダ情報であるProgressive Frame（ＰＦ）を参照して行うことができる。ＰＦ＝１であればそのビデオデータはプログレッシブ形式、ＰＦ＝０であればインタレース形式である。
【０１１７】
ビデオデータをインタレース形式からプログレッシブ形式に変換することは、任意の公知の技術を用いて行うことができる。ここでは、変換時の基準フィールドの決定方法を説明する。
【０１１８】
変換時の基準フィールドは、ＭＰＥＧデータの通常再生時の最終フィールドを用いる。図１４は、ＭＰＥＧデータの通常再生時の最終フィールドを判定する際に使用するテーブルを示す図である。
【０１１９】
Repeat First Field（ＲＦ）が０の場合、そのフレームは２フィールドから構成される。そこで、Top Field First（ＴＦ）の逆の値が最終フィールドとなる。すなわち、ＴＦ＝１(Top Field First)の場合はBottom Fieldが最終フィールドとなる。ＴＦ＝０(Bottom Field First)の場合はTop Filedが最終フィールドとなる。
【０１２０】
ＲＦが１の場合は逆に、ＴＦ＝１の場合はTop Fieldが、ＴＦ＝０の場合はBottom Filedが最終フィールドとなる。
【０１２１】
＜その他＞
上述した各実施の形態の処理は、各機能を具現化したソフトウェアのプログラムコードを記録した記憶媒体をシステム或は装置に提供してもよい。そして、そのシステム或は装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによって、前述した実施形態の機能を実現することができる。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。このようなプログラムコードを供給するための記憶媒体としては、例えば、フロッピィ（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスクなどを用いることができる。或いは、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭなどを用いることもできる。
【０１２２】
また、コンピュータが読み出したプログラムコードを実行することにより、前述した各実施の形態の機能が実現されるだけではない。そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含まれている。
【０１２３】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書きこまれてもよい。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含むものである。
【図面の簡単な説明】
【０１２４】
【図１】本発明を適用可能なデータ伝送再生装置１４０及び外部装置としての表示装置１４１の構成を示す機能ブロック図である。
【図２】ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。
【図３】ＭＰＥＧデータの通常再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図４】ＭＰＥＧデータの通常再生時及び特殊再生時に共通する、表示装置１４１のデータ再生処理の流れを示すフローチャートである。
【図５】ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図６】ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図７】コピーピクチャの構成を示す図である。
【図８】ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。
【図９】ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図１０】１／３倍速のスロー再生において、ｎ＝３及びｎ＝２の時のＴＳと、モニタ１０５等に出力されるフレームを模式的に示す図である。
【図１１】フリーズ画像の最小枚数が２のコマ送り再生において、ｎ＝３及びｎ＝４の時のＴＳと、モニタ１０５等に出力されるフレームを模式的に示す図である。
【図１２】ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図１３】ＭＰＥＧデータの特殊再生時にオーディオＥＳを破棄する場合の、ＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。
【図１４】ＭＰＥＧデータの通常再生時の最終フィールドを判定する際に使用するテーブルを示す図である。
【符号の説明】
【０１２５】
１０６ ビデオ簡易符号器
１１０ ミュート発生器
１１１ ストリーム切替スイッチ
１４０ データ伝送再生装置
１４１ 表示装置
【技術分野】
【０００１】
本発明は、ビデオデータ及びオーディオデータを含むマルチメディアデータを再生して伝送するデータ再生伝送装置及びデータ再生伝送方法に関する。
【背景技術】
【０００２】
従来、ＭＰＥＧなどの符号化方式で符号化された動画像データや音声データを記録媒体から再生し、符号化されたままの状態で外部の表示装置などに伝送し、これを復号して表示する技術が知られている。この様に、符号化された動画像データなどを送受信するためのデジタルインタフェースとして、ＩＥＥＥ１３９４(Institute of Electrical and Electronics Engineers 1394)がしばしば使用される。
【０００３】
この様に、ＭＰＥＧデータを表示装置に送信して復号、表示するシステムにおいて、スロー、スチル、コマ送り等の特殊再生を実現する場合、次のようにして実現することができる。例えば、これらの特殊再生を示す特定の付加情報をＭＰＥＧデータに付加して送信し、復号器においてこの付加情報に従って復号することで実現可能である。
【０００４】
具体的には、ＰＥＳ(Packetized Elementary Stream)パケットのヘッダ情報内のDSM_trick_modeフィールドに、特殊再生に関する情報を記述する。
【０００５】
しかし、デコーダの中には、この様な特殊再生用の付加情報である、ＰＥＳパケットのヘッダ情報のDSM_trick_modeに従ってデコード処理を行うことができないものが多数存在する。そこで、そのような表示装置でもＭＰＥＧデータの特殊再生を可能にするデータ再生伝送装置が提案されている。
【０００６】
例えば、特許文献１では、記録媒体から再生された全てのＭＰＥＧデータを一旦復号化した後、再符号化して送信する構成である。
【特許文献１】特開２００１−２８７４８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１では、再生伝送装置に完全な符号器（エンコーダ）を設ける必要がある。「完全な符号器」とは、フレーム内符号化画像（Ｉピクチャ）、フレーム間予測符号化画像（Ｐピクチャ）、双方向予測符号化画像（Ｂピクチャ）のすべてのピクチャを生成可能な符号器という意味である。このような符号器では、例えば予測符号化のためのフレームメモリが必要となるなど、回路構成が複雑化し、コスト及び消費電力が増大するという問題がある。
【０００８】
また、特許文献１では、ＭＰＥＧデータのＩピクチャのフレームでしか画像の更新が行われないため、特殊再生時に画像の追従性が悪化するという問題がある。したがって、例えばスロー再生時において、画像の更新頻度が低くなり、滑らかにスロー再生を行うことができない。
【０００９】
さらに、特許文献１では、表示装置がダミーパケット情報またはＤＩＴ情報を受け取った場合の復号動作等に関する明確な規定がなく、表示装置ごとに振る舞いが異なりうるため、表示装置が適切に特殊再生を行える保証がない。なお、ＤＩＴ情報は符号化ビットストリーム（データストリーム）の不連続を示す情報であり、Discontinuity Information Tableの略である。
【００１０】
本発明はこのような状況に鑑みてなされたものであり、特別な復号機能を持たない復号器を使用した場合にも、特殊再生を実現可能な技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明の再生装置は、フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、前記再生手段より再生された動画像データを復号する復号手段と、前記復号手段により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化手段と、前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備えることを特徴とする。
【００１２】
また、本発明の他の再生装置は、フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、前記再生手段より再生された動画像データを復号する復号手段と、前記復号手段により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化手段と、前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備えることを特徴とする。
【００１３】
なお、その他の本発明の特徴は、添付図面及び以下の発明を実施するための最良の形態の記載によっていっそう明らかになるものである。
【発明の効果】
【００１４】
以上の構成により、本発明によれば、コスト及び消費電力を抑えつつ、特殊な機能を持たない復号器を用いた場合でも特殊再生を実現することが可能となる。
【発明を実施するための最良の形態】
【００１５】
以下、添付図面を参照して、本発明の好適な実施形態を説明する。
【００１６】
なお、以下の各実施形態においては、ビデオデータ及びオーディオデータを含むマルチメディアデータの一例としてＭＰＥＧデータを対象に説明するが、それ以外の形式のマルチメディアデータにも本発明を適用可能である。
【００１７】
また、特殊再生の一例としてスロー再生、スチル再生、コマ送り再生を対象に説明するが、それ以外の特殊再生（例えば早送り再生や巻戻し再生）にも本発明を適用可能である。
【００１８】
［第１の実施形態］
＜装置の構成＞
図１は、本発明を適用可能なデータ伝送再生装置１４０及び外部装置としての表示装置１４１の構成を示す機能ブロック図である。データ伝送再生装置１４０及び表示装置１４１はＩＥＥＥ１３９４ケーブル１１７で接続され、データ伝送再生装置１４０から表示装置１４１へ、ＭＰＥＧデータがトランスポートストリーム（以下、「ＴＳ」と呼ぶ）として伝送される。
【００１９】
まず、データ伝送再生装置１４０の構成を説明する。
【００２０】
記憶媒体１００は、伝送対象となるＭＰＥＧデータを保存するためのものであり、ＨＤＤ（ハードディスク）、ＤＶＤ、フラッシュメモリなど、いかなる種類の媒体であってもよい。
【００２１】
バッファメモリ１０１は、記憶媒体１００から取得したＭＰＥＧデータを一時的に保存するためのメモリである。
【００２２】
ＤＥＭＵＸ１０２は、記憶媒体１００から取得したＭＰＥＧデータに含まれる画像（ビデオ）データと音声（オーディオ）データが多重化されている場合に、エレメンタリーストリーム（以下、「ＥＳ」と呼ぶ）に変換するためのものである。なお、「ＤＥＭＵＸ」はデマルチプレクサを意味する。多重化ＭＰＥＧデータは、ビデオＥＳとオーディオＥＳに変換される。
【００２３】
ビデオＥＳメモリ１０３は、ＤＥＭＵＸ１０２によって得られたビデオＥＳを一時的に保存するためのメモリである。
【００２４】
ビデオ復号器１０４は、ビデオＥＳを復号化してモニタ１０５に表示可能なデータ形式にする復号器である。
【００２５】
ビデオ簡易符号器１０６は、ビデオ復号器１０４が復号化したビデオデータを再度符号化するための符号器である。ビデオ簡易符号器１０６はＭＰＥＧ規格の通常のビデオ符号器と異なり、Ｉピクチャしか生成することができない。したがって、予測符号化のためのフレームメモリなどは不要であり、簡易的なものとすることができる。
【００２６】
オーディオＥＳメモリ１０７は、ＤＥＭＵＸ１０２によって得られたオーディオＥＳを一時的に保存するためのメモリである。
【００２７】
オーディオ復号器１０８は、オーディオＥＳを復号化してスピーカ１０９で出力可能なデータ形式にする復号器である。
【００２８】
ミュート発生器１１０は、無音のオーディオＥＳ（以下、「ミュートオーディオＥＳ」と呼ぶ）を出力するためのものである。
【００２９】
ストリーム切替スイッチ１１１は、出力（伝送）するＴＳを通常再生用と特殊再生用とで切り替えるためのものである。
【００３０】
ＴＳ＿ＭＵＸ１１２は、ビデオＥＳとオーディオＥＳを多重化してＴＳを生成するためのものである。なお、「ＭＵＸ」はマルチプレクサを意味する。
【００３１】
外部Ｉ／Ｆ１１３は、ＩＥＥＥ１３９４のインタフェースである。
【００３２】
ＣＰＵ１１４は、データ伝送再生装置１４０全体の動作を制御するためのものであり、ＲＯＭ１１５に格納されるプログラム（ファームウェア）を実行することにより機能する。
【００３３】
ＲＯＭ１１５は、ＣＰＵ１１４が実行するプログラムを格納するための不揮発性メモリである。
【００３４】
ＲＡＭ１１６は、ＣＰＵ１１４がＲＯＭ１１５に格納されるプログラムを実行する際に作業領域として使用する揮発性メモリである。
【００３５】
また、この他にもデータ伝送再生装置１４０は不図示の操作部を備え、ユーザはこれを介してデータ伝送再生装置１４０に指示を与えることができる。
【００３６】
次に、表示装置１４１の構成を説明する。
【００３７】
外部Ｉ／Ｆ１１８は、ＩＥＥＥ１３９４のインタフェースである。
【００３８】
ＴＳ＿ＤＥＭＵＸ１１９は、データ伝送再生装置１４０から伝送されてきたＴＳをビデオＥＳとオーディオＥＳに変換するデマルチプレクサである。
【００３９】
ビデオ復号器１２０は、ＴＳ＿ＤＥＭＵＸ１１９が変換したビデオＥＳを復号化してモニタ１２１に表示可能なデータ形式にする復号器である。
【００４０】
オーディオ復号器１２２は、ＴＳ＿ＤＥＭＵＸ１１９が変換したオーディオＥＳを復号化してスピーカ１２３で出力可能なデータ形式にする復号器である。
【００４１】
ＣＰＵ１２４は、表示装置１４１全体の動作を制御するためのものであり、ＲＯＭ１２５に格納されるプログラム（ファームウェア）を実行することにより機能する。
【００４２】
ＲＯＭ１２５は、ＣＰＵ１２４が実行するプログラムを格納するための不揮発性メモリである。
【００４３】
ＲＡＭ１２６は、ＣＰＵ１２４がＲＯＭ１２５に格納されるプログラムを実行する際に作業領域として使用する揮発性メモリである。
【００４４】
また、この他にも表示装置１４１は不図示の操作部を備え、ユーザはこれを介して表示装置１４１に指示を与えることができる。
【００４５】
＜通常再生時と特殊再生時のＴＳ＞
図２は、ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。以下、図２及び図３乃至図６を参照して、通常再生時のデータ伝送再生装置１４０の動作、表示装置１４１の動作、特殊再生時のデータ伝送再生装置１４０の動作、特殊再生から通常再生へ切り替える際のデータ伝送再生装置１４０の動作を説明する。
【００４６】
＜通常再生時のデータ伝送再生装置１４０の動作＞
図３は、ＭＰＥＧデータの通常再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。データ伝送再生装置１４０がＭＰＥＧデータの通常再生の指示を受けると、本フローチャートの処理が開始する。データ伝送再生装置１４０は、通常再生の指示を、データ伝送再生装置１４０の不図示の操作部や、ＩＥＥＥ１３９４ケーブル１１７等を介して受けることができる。
【００４７】
なお、通常再生時は、図１のストリーム切替スイッチ１１１のビデオ側（左）は「ａ」に、オーディオ側（右）は「ｃ」に接続される。
【００４８】
ステップＳ３０１で、図１のＣＰＵ１１４は記憶媒体１００に保存されているＭＰＥＧデータを読み出し、バッファメモリ１０１に格納する。一時的に格納されるＭＰＥＧデータの形式は、ＴＳやＰＳ（プログラムストリーム）、またはビデオデータとオーディオデータが多重化されていないＥＳのいずれでもよい。
【００４９】
ステップＳ３０２で、ＣＰＵ１１４はバッファメモリ１０１に格納した多重化ＭＰＥＧデータが、ビデオデータとオーディオデータが多重化されているＴＳまたはＰＳであるかどうかを判定する。多重化されている場合はステップＳ３０３に進み、多重化されていない場合はステップＳ３０４に進む。
【００５０】
ステップＳ３０３で、ＤＥＭＵＸ１０２はバッファメモリ１０１に格納したＭＰＥＧデータをビデオＥＳ及びオーディオＥＳに変換する。
【００５１】
ステップＳ３０４で、ＣＰＵ１１４はバッファメモリ１０１に格納されているビデオＥＳ及びオーディオＥＳを、ビデオＥＳメモリ１０３及びオーディオＥＳメモリ１０７に格納する。
【００５２】
ステップＳ３０５で、ビデオ復号器１０４はビデオＥＳメモリ１０３に格納されているビデオＥＳを復号化し、モニタ１０５に出力する。また、オーディオ復号器１０８はオーディオＥＳメモリ１０７に格納されているオーディオＥＳを復号化し、スピーカ１０９に出力する。ここで出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものが、図２（ａ）上段である。
【００５３】
ステップＳ３０６で、ＴＳ＿ＭＵＸ１１２はビデオＥＳメモリ１０３及びオーディオＥＳメモリ１０７に格納されているビデオＥＳ及びオーディオＥＳを多重化し、ＴＳを生成する。ＩＥＥＥ１３９４上のストリーム形式はＴＳなので、ＭＰＥＧデータを表示装置１４１へ伝送可能にするためである。
【００５４】
ステップＳ３０７で、外部Ｉ／Ｆ１１３はＩＥＥＥ１３９４ケーブル１１７を介して、ステップＳ３０６で生成したＴＳを表示装置１４１に伝送する。伝送されるＴＳの例を示すものが、図２（ａ）中段である。
【００５５】
ステップＳ３０８で、ＣＰＵ１１４はＭＰＥＧデータの再生が終了したかどうかを判定する。再生の終了は、例えばデータ伝送再生装置１４０が伝送中のＭＰＥＧデータを最後まで伝送した場合や、不図示の操作部等から再生終了の指示を受けた場合に発生する。再生が終了した場合は本フローチャートの処理を終了する。再生が終了していない場合はステップＳ３０１に戻り、上述の処理を繰り返す。
【００５６】
＜表示装置１４１の動作＞
図４は、ＭＰＥＧデータの通常再生時及び特殊再生時に共通する、表示装置１４１のデータ再生処理の流れを示すフローチャートである。通常再生時及び特殊再生時の処理が共通なのは、データ伝送再生装置１４０は再生の種類に応じて異なるＴＳを伝送するが、いずれの再生においてもパケット形式は共通だからである。外部Ｉ／Ｆ１１８がＩＥＥＥ１３９４ケーブル１１７を介してＴＳが送られてきたことを検知すると、本フローチャートの処理が開始する。
【００５７】
ステップＳ４０１で、外部Ｉ／Ｆ１１８はＩＥＥＥ１３９４ケーブル１１７を介してＴＳを受信する。
【００５８】
ステップＳ４０２で、ＴＳ＿ＤＥＭＵＸ１１９はＴＳをビデオＥＳ及びオーディオＥＳに変換する。
【００５９】
ステップＳ４０３で、ビデオ復号器１２０はビデオＥＳを復号化し、モニタ１２１に出力する。また、オーディオ復号器１２２はオーディオＥＳを復号化し、スピーカ１２３に出力する。通常再生の場合にここで出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものが、図２（ａ）下段である。特殊再生の場合に出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものは図２（ｂ）下段であり、詳細は後述する。
【００６０】
＜特殊再生時のデータ伝送再生装置１４０の動作＞
図５は、ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。図３の通常再生時と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生の指示を受けたり、通常再生時に特殊再生への変更指示を受けたりすると、本フローチャートの処理が開始する。
【００６１】
本実施形態では、通常再生時にスチル再生への変更指示を受けたものとして説明する。ここでは、データ伝送再生装置１４０が、図２（ｂ）の上段で「フリーズ画」と表示される区間の先頭のタイミングでスチル再生の指示を受けたものとする。
【００６２】
ステップＳ５０１で、図１のＣＰＵ１１４は、ストリーム切替スイッチ１１１のビデオ側（左）を「ｂ」に、オーディオ側（右）を「ｄ」に接続する。また、ＣＰＵ１１４は外部Ｉ／Ｆ１１８からストリームの不連続を示すＤＩＴ情報を発行して、ストリームが分断されることを表示装置１４１に通知する。さらに、ＣＰＵ１１４は、ビデオＥＳメモリ１０３から復号化前のビデオＥＳのビットレートを取得し、ビデオ簡易符号器１０６に通知する。また、ＣＰＵ１１４は、オーディオＥＳメモリ１０７からオーディオＥＳのビットレート、サンプリング周波数、及びＭＰＥＧ１オーディオ、ＡＣ３などの符号化のモードを取得し、ミュート発生器１１０に通知する。
【００６３】
ステップＳ５０２で、ＣＰＵ１１４は記憶媒体１００に保存されているＭＰＥＧデータを取得し（読み出し）、バッファメモリ１０１に格納する。ただし、ここでの読み出しはステップＳ３０１と異なり、特殊再生の種類に応じてＭＰＥＧデータから読み出す画像フレームの間隔が異なる。例えば、スチル再生であればビデオフレームが次のフレームに進まないため、スチル再生中は新たに画像フレームを読み出すことはしない。また、スロー再生であれば、記憶媒体１００から全てのＭＰＥＧデータを順に読み出すが、所定の符号化単位（ＧＯＰ）を単位として読み出し、その読み出し間隔は再生速度に応じたものとなる。また、早送り再生であれば、所定のフレーム数おきに画像フレームを読み出す。したがって、前述のように本実施形態ではスチル再生の場合について説明するが、読み出す画像フレームの間隔を調整すれば他の種類の特殊再生であっても同じことが言える。
【００６４】
ステップＳ５０３で、ビデオ簡易符号器１０６は、ビデオ復号器１０４で復号化されたビデオ信号の各フレームをＩピクチャのみからなるビデオＥＳとして再符号化する。ここでの再符号化は、再生モードによっては同じ画像フレームに対して複数回行われることもある。例えば、スチル再生であれば、それが解除されるまで、ビデオ簡易符号器１０６は特定の画像フレームを再符号化し続ける。また、例えば１／３倍のスロー再生では、ビデオ簡易符号器１０６は各々の画像フレームを３回ずつ再符号化して再生速度を調整する。再符号化のアルゴリズムは通常のＭＰＥＧ符号化と同様であり、ＤＣＴ（離散コサイン変換）、量子化、ジグザグスキャンなどを組み合わせて可変長符号化する。なお、ビデオ簡易符号器１０６は、再符号化されたビデオＥＳがステップＳ５０１で通知されたビットレート以下とすることを目標に量子化ステップなどを決定する。
【００６５】
ステップＳ５０３ではまた、ミュート発生器１１０が、ステップＳ５０１で通知された形式と一致するミュートオーディオＥＳを生成する。ミュートオーディオＥＳは、無音を所定のサンプリング周波数でサンプリングし、所定の形式で符号化したものである。したがって、サンプリング周波数が不定であればリアルタイムに生成するが、サンプリング周波数が固定で予め特定可能であれば、ミュートオーディオＥＳは固定的なデータとなるため、予めＲＯＭ１１５等に用意したものを利用してもよい。
【００６６】
ステップＳ５０４で、ＴＳ＿ＭＵＸ１１２はビデオ簡易符号器１０６が生成したビデオＥＳ及びミュート発生器１１０が生成したミュートオーディオＥＳを多重化し、ＴＳを生成する。
【００６７】
なお、スチル再生時に伝送されるＴＳの例を示すものが、図２（ｂ）中段の、左側の「ＤＩＴ」表示から４フレーム続くＩピクチャと、それに対応するミュートデータである。また、前述のように、表示装置１４１に出力されるビデオフレーム（ピクチャ）及びオーディオの例を示すものが図２（ｂ）下段であり、図２（ｂ）中段の、左側の「ＤＩＴ」表示から４フレーム続くＩピクチャに対応する部分である。
【００６８】
＜特殊再生から通常再生に切り替える時のデータ伝送再生装置１４０の動作＞
図６は、ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。図３の通常再生時と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生時に通常再生への変更指示を受けると、本フローチャートの処理が開始する。
【００６９】
ステップＳ６０１で、図１のＣＰＵ１１４は、ストリーム切替スイッチ１１１のオーディオ側（右）を「ｃ」に接続する。これにより、オーディオＥＳがミュート発生器１１０の生成するものから記憶媒体１００に保存されているＭＰＥＧデータに含まれるものに切り替わる。一方、ストリーム切替スイッチ１１１のビデオ側（左）は切り替えない。表示装置１４１のビデオ復号器１２０は、Ｉピクチャから開始するビデオＥＳでなければ復号化できないので、ビデオＥＳメモリ１０３にＩピクチャが入るまではビデオ簡易符号器１０６によるＩピクチャを使用するためである。
【００７０】
ステップＳ６０２で、ＣＰＵ１１４は、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャであるかどうかを判断する。ＩピクチャであればステップＳ６０５に進み、ＩピクチャでなければステップＳ６０３に進む。
【００７１】
ステップＳ６０３では、図５のステップＳ５０３と同様、ビデオ簡易符号器１０６は、ビデオ復号器１０４で復号化されたビデオ信号の各フレームをＩピクチャのみからなるビデオＥＳとして再符号化する。ただし、ステップＳ５０３と異なり、ミュート発生器１１０はミュートオーディオＥＳを生成しない。
【００７２】
ステップＳ６０４で、ＴＳ＿ＭＵＸ１１２はビデオ簡易符号器１０６が生成したビデオＥＳ及びオーディオＥＳメモリ１０７に格納されているオーディオＥＳを多重化し、ＴＳを生成する。
【００７３】
ステップＳ６０２において、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャであった場合は、前述の通りステップＳ６０５に進む。
【００７４】
ステップＳ６０５で、ＣＰＵ１１４は、ストリーム切替スイッチ１１１のビデオ側（左）を「ａ」に接続する。また、ＣＰＵ１１４は外部Ｉ／Ｆ１１８からストリームの不連続を示すＤＩＴ情報を発行して、ストリームが分断されることを表示装置１４１に通知する。次いで、通常再生の処理（図３）に戻る。
【００７５】
データ伝送再生装置１４０を特殊再生から通常再生に切り替える時のモニタ１０５等の出力やＴＳを示すものが、図２（ｂ）である。図２（ｂ）中段の右側の「ＤＩＴ」表示から左へ３つ並ぶＩピクチャと時間的に対応する部分が本フローチャートの処理に相当する。
【００７６】
本実施形態では特殊再生の種類をスチル再生としたが、図５を参照して説明したように、他の種類の特殊再生（例えばスロー再生やコマ送り再生）でも図６のフローチャートを適用できる。ＣＰＵ１１４は、通常再生への変更と同時にストリーム切替スイッチ１１１のオーディオ側（右）を「ｃ」に接続する。また、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになった時点でビデオ側（左）を「ａ」に接続する。この点で、特殊再生の種類による違いはないからである。
【００７７】
＜第１の実施形態のまとめ＞
以上説明したように、本実施形態によれば、データ伝送再生装置１４０はＭＰＥＧデータの特殊再生時に、ビデオ簡易符号器１０６がビデオＥＳをＩピクチャのみからなるものに再符号化する。また、ミュート発生器１１０がミュートオーディオＥＳを生成する。ＴＳ＿ＭＵＸ１１２は、ビデオ簡易符号器１０６によるビデオＥＳとミュート発生器１１０によるミュートオーディオＥＳを多重化してＴＳを生成する。
【００７８】
ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時は、直ちにオーディオＥＳをミュート発生器１１０が生成するものから記憶媒体１００に保存されているＭＰＥＧデータによるものに切り替える。しかし、ビデオＥＳはＣＰＵ１１４がビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになるまでは、ビデオ簡易符号器１０６が生成するものを使い続ける。
【００７９】
これにより、特殊再生時はミュートオーディオＥＳを使用するため、無音状態となり、音声の不自然な途切れは発生しない。また、ビデオ簡易符号器１０６がＩピクチャのみからなるビデオＥＳを生成する際に、復号器の仮想入力バッファの蓄積量を示すデータを無効化する必要がないため、表示装置１４１の復号器の破綻を防止できる。さらに、ビデオ簡易符号器１０６はフレーム間予測を行わないため、単純な構成とすることができ、コスト及び消費電力を抑えることができる。
【００８０】
［第２の実施形態］
第１の実施形態では、ＭＰＥＧデータの特殊再生時に、図１のビデオ簡易符号器１０６は、ＩピクチャのみからなるビデオＥＳを生成した。第２の実施形態では、ＭＰＥＧデータの特殊再生時に、ビデオ簡易符号器１０６が、Ｉピクチャに加えてコピーピクチャを含むビデオＥＳを生成する形態を説明する。コピーピクチャとはＰピクチャの一種であり、直前のピクチャが表現する画像と同一の画像を表現するものである。
【００８１】
なお、本実施形態において、データ伝送再生装置１４０及び表示装置１４１の構成は第１の実施形態（図１）と同様でよいため、その説明を省略する。また、ＭＰＥＧデータの通常再生時におけるデータ伝送再生装置１４０のデータ伝送処理の流れ、及び、表示装置１４１によるＭＰＥＧデータの再生処理の流れも、第１の実施形態（図３、図４）と同様のため、説明を省略する。
【００８２】
＜コピーピクチャの構成＞
図７は、コピーピクチャの構成を示す図である。図７の各々のブロックがマクロブロック（ＭＢ）を示す。コピーピクチャは、直前のピクチャが表現する画像と同一の画像を表現するものであるため、ＭＢの大半がスキップドマクロブロック（ＳＭＢ）で構成される。ただし、スライスの両端のＭＢには、ＭＰＥＧの規定によりＳＭＢを使用できないため、macroblock_typeをＭＣ、ＮｏｔＣｏｄｅｄとしたＭＢ（ＭＢＨ）を使用する。ＭＢＨは、ＭＢアドレス情報と、（０，０）の動きベクトルを持ち、ＤＣＴ係数を持たないＭＢである。
【００８３】
コピーピクチャは、大部分が固定されたデータであるため、予め図１のＲＯＭ１１５等に保存しておき、ＭＰＥＧデータの特殊再生時にはビデオ簡易符号器１０６はこれを使用してビデオＥＳを生成してもよい。または、ＣＰＵ１１４がビデオＥＳのシーケンスヘッダを解析してピクチャのサイズを調べ、それに則してビデオ簡易符号器１０６がコピーピクチャを生成してもよい。ビデオ簡易符号器１０６は前述のように、フレームメモリを備えず、原則としてＰピクチャを生成することはできないが、コピーピクチャは動き補償を行わないため、ビデオ簡易符号器１０６はこれを生成できる。
【００８４】
なお、コピーピクチャは、Ｐピクチャの形式ではなく、Ｂピクチャの形式で構成されてもよい。この場合でも、Ｂピクチャの一種であるコピーピクチャは、直前のピクチャが表現する画像と同一の画像を表現するものである。
【００８５】
コピーピクチャはＩピクチャに比べてデータ量が小さいため、ＩピクチャのみでビデオＥＳを生成する第１の実施形態と異なり、データ伝送のビットレートを高くしなくても、多くの符号量をＩピクチャにより割り当てることができる。したがって、ＭＰＥＧデータを特殊再生する際に、画質を向上させることができる。
【００８６】
＜通常再生時と特殊再生時のＴＳ＞
図８は、ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。以下、図８及び図９乃至図１２を参照して、特殊再生時のデータ伝送再生装置１４０の動作及び特殊再生から通常再生へ切り替える際のデータ伝送再生装置１４０の動作を説明する。
【００８７】
＜特殊再生時のデータ伝送再生装置１４０の動作＞
図９は、ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。第１の実施形態（図５）と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生の指示を受けたり、通常再生時に特殊再生への変更指示を受けたりすると、本フローチャートの処理が開始する。
【００８８】
本実施形態では、第１の実施形態と同様、通常再生時にスチル再生への変更指示を受けたものとして説明する。データ伝送再生装置１４０は、図８（ｂ）の上段で「フリーズ画」と表示される区間の先頭のタイミングでスチル再生の指示を受ける。
【００８９】
ステップＳ９０１で、図１のＣＰＵ１１４は、ステップＳ５０１において行われる初期化設定と同様の処理を行い、加えて、変数ｍを定数ｎに初期化する。定数ｎは、ＩピクチャとコピーピクチャからなるビデオＥＳにおいて、何ピクチャおきにＩピクチャが表れるかを示す値である。定数ｎの値は、ＭＰＥＧデータの特殊再生時においてモニタ１２１等が出力する画像の更新頻度を定めるため、特殊再生の種類に応じてＣＰＵ１１４が定数ｎの値を決定する。定数ｎの値と特殊再生の種類の関係は、図１０及び図１１を参照して後述する。
【００９０】
ステップＳ９０２で、ＣＰＵ１１４はｍ＜ｎであるかどうかを判定する。ｍ＜ｎでなければ、次のピクチャはＩピクチャであるため、ステップＳ９０３に進む。ｍ＜ｎであれば、次のピクチャはコピーピクチャであるため、ステップＳ９０４に進む。
【００９１】
ステップＳ９０３で、ビデオ簡易符号器１０６は、ビデオ復号器１０４で復号化された１枚のピクチャをＩピクチャとして再符号化する。また、ミュート発生器１１０が、ミュートオーディオＥＳを生成する。さらに、変数ｍを０にする。
【００９２】
ステップＳ９０４で、ビデオ簡易符号器１０６は、コピーピクチャを生成するか、または、ＲＯＭ１１５に予め保存されているコピーピクチャを取得する。また、ミュート発生器１１０が、ミュートオーディオＥＳを生成する。さらに、変数ｍに１を加える。
【００９３】
ステップＳ９０３及びステップＳ９０４で生成されたピクチャを含むビデオＥＳは、第１の実施形態と同様、ビデオ簡易符号器１０６がステップＳ９０１で通知されたビットレート以下となることを目標に生成される。ここで、コピーピクチャのデータ量は一定であるため、ビデオ簡易符号器１０６は、
（（（Iピクチャのデータ量）＋（コピーピクチャのデータ量）×（ｎ−１））／ｎ）
×（フレームレート）＝（目標とするビットレート）
となるように、量子化ステップなどを定め、Ｉピクチャを生成する。
【００９４】
なお、スチル再生時に伝送されるＴＳの例を示すものが、図８（ｂ）中段の、左側の「ＤＩＴ」表示から４フレーム続く「Ｉ、Ｃ、Ｃ、Ｉ」ピクチャと、それに対応するミュートデータである。
【００９５】
また、第１の実施形態と同様、図９のフローチャートの処理は、スチル再生以外の特殊再生にも適用することができる。
【００９６】
＜定数ｎの決定＞
前述のように、定数ｎの値は、ＭＰＥＧデータの特殊再生時においてモニタ１２１等が出力する画像の更新頻度を定めるため、特殊再生の種類に応じてＣＰＵ１１４が定数ｎの値を決定する。
【００９７】
特殊再生の種類がスチル再生の場合、出力画像を更新する必要はないため、ＣＰＵ１１４は定数ｎの値を大きく定める。この値は、事実上無限でよく、例えば、ｎ＝０の場合、定数ｎは無限であるとみなすようにデータ伝送再生装置１４０を構成してもよい。
【００９８】
特殊再生の種類がスロー再生の場合、ＣＰＵ１１４は何倍速のスロー再生か、換言すれば同一の画像を何フレーム連続出力するか、に基づいて定数ｎを定める。図１０は、１／３倍速のスロー再生において、ｎ＝３及びｎ＝２の時のＴＳと、モニタ１０５等に出力される画像を模式的に示す図である。
【００９９】
このとき、データ伝送再生装置１４０のモニタ１０５には、更新された画像１枚につき、フリーズ画像（直前の画像と同一の画像）が２枚続けて出力される。そこで、図１０の上に示すように、ｎ＝３とすると、表示装置１４１のモニタ１２１に出力される画像が最も適切な頻度で更新される。換言すれば、スロー再生における画像更新周期に一致するように定数ｎの値を定めると、表示装置１４１のモニタ１２１に出力される画像の追従性が最良となる。
【０１００】
特殊再生の種類がコマ送り再生の場合、更新された画像１枚に続くフリーズ画像の数が一定ではない。したがって、図１１に示すように、コマ送り再生におけるフリーズ画像の最小枚数に１を加えた値、またはそれ以下の自然数を定数ｎとすると、表示装置１４１のモニタ１２１に出力される画像の追従性が向上する。
【０１０１】
なお、特殊再生の種類が早送り再生の場合のように、ＭＰＥＧデータに含まれる画像フレームを所定のフレーム数おきに表示する再生モードの場合、ビデオ簡易符号器１０６はｎ＝１としてコピーピクチャを使用しない。さらに、第１の実施形態と同様、ＣＰＵ１１４は記憶媒体１００に保存されているＭＰＥＧデータを所定のフレーム数おきに取得する（読み出す）。
【０１０２】
＜特殊再生から通常再生に切り替える時のデータ伝送再生装置１４０の動作＞
図１２は、ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。第１の実施形態（図６）と同一の処理を行うステップには同一の符号を付し、説明を省略する。データ伝送再生装置１４０がＭＰＥＧデータの特殊再生時に通常再生への変更指示を受けると、本フローチャートの処理が開始する。
【０１０３】
ステップＳ１２０１で、ＣＰＵ１１４はステップＳ９０２と同様、ｍ＜ｎであるかどうかを判定する。ここで、変数ｍ及び定数ｎの値は、データ伝送再生装置１４０が通常再生への変更指示を受ける前の、特殊再生時の値をそのまま引き継いだものである。ｍ＜ｎでなければ、次のピクチャはＩピクチャであるため、ステップＳ１２０２に進む。ｍ＜ｎであれば、次のピクチャはコピーピクチャであるため、ステップＳ１２０３に進む。
【０１０４】
ステップＳ１２０２で、ビデオ簡易符号器１０６はステップＳ９０３と同様、ビデオ復号器１０４で復号化された１枚のピクチャをＩピクチャとして再符号化する。また、変数ｍを０にする。ただし、ステップＳ９０３と異なり、ミュート発生器１１０はミュートオーディオＥＳを生成しない。
【０１０５】
ステップＳ１２０３で、ビデオ簡易符号器１０６はステップＳ９０４と同様、コピーピクチャを生成するか、または、ＲＯＭ１１５に予め保存されているコピーピクチャを取得する。また、変数ｍに１を加える。ただし、ステップＳ９０４と異なり、ミュート発生器１１０はミュートオーディオＥＳを生成しない。
【０１０６】
データ伝送再生装置１４０を特殊再生から通常再生に切り替える時のモニタ１０５等の出力やＴＳを示すものが、図８（ｂ）である。図８（ｂ）中段の右側の「ＤＩＴ」表示の左に３つ並ぶ「Ｃ、Ｃ、Ｉ」ピクチャと時間的に対応する部分が本フローチャートの処理に相当する。
【０１０７】
このように、データ伝送再生装置１４０は特殊再生時に通常再生への変更指示を受けると、オーディオの再生を直ちに通常再生に戻す。しかし、ビデオの再生は、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになるまで特殊再生を続ける。
【０１０８】
本実施形態では特殊再生の種類をスチル再生としたが、第１の実施形態と同様、他の種類の特殊再生（例えばスロー再生やコマ送り再生）でも図１２のフローチャートを適用できる。ＣＰＵ１１４は、通常再生への変更と同時にストリーム切替スイッチ１１１のオーディオ側（右）を「ｃ」に接続する。また、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになった時点でビデオ側（左）を「ａ」に接続する。この点で、特殊再生の種類による違いはないからである。
【０１０９】
＜第２の実施形態のまとめ＞
以上説明したように、本実施形態によれば、ＭＰＥＧデータの特殊再生時に、データ伝送再生装置１４０はＩピクチャに加えてコピーピクチャを含むビデオＥＳを生成する。
【０１１０】
これにより、表示装置１４１がＭＰＥＧデータを特殊再生する際に、画質を向上させることができる。なぜなら、コピーピクチャはＩピクチャに比べてデータ量が少ないため、伝送するＴＳのビットレートを増大させなくても、より多くの符号量をＩピクチャに割り当てることができるからである。
【０１１１】
［その他の実施形態］
＜特殊再生時のオーディオＥＳの破棄＞
上述した各実施形態において、ＭＰＥＧデータの特殊再生時は、ミュート発生器１１０がミュートオーディオＥＳを生成し、ＴＳ＿ＭＵＸ１１２がこれをビデオＥＳと多重化してＴＳを生成することにより、音声の不自然な途切れを防止した。
【０１１２】
しかし、ミュートオーディオＥＳを使用せず、ＭＰＥＧデータに含まれるオーディオＥＳを破棄することによっても、同様の効果が得られる。
【０１１３】
図１３は、ＭＰＥＧデータの特殊再生時にオーディオＥＳを破棄する場合の、ＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。図１３（ｂ）中段に示すように、ビデオＥＳが再符号化されている間は、オーディオＥＳが破棄される。第１及び第２の実施形態と異なり、データ伝送再生装置１４０が通常再生への変更指示を受けても、ビデオＥＳメモリ１０３に格納されているビデオＥＳから得られるピクチャがＩピクチャになるまではオーディオＥＳは破棄される。オーディオＥＳの破棄によりストリームの分断が発生するため、「ＤＩＴ」が発行されるまではＴＳ＿ＭＵＸ１１２がＴＳに多重化するストリームを変更することは好ましくないからである。
【０１１４】
＜インタレース形式のプログレッシブ形式への変換＞
上述した各実施形態において、記憶媒体１００に記録されているＭＰＥＧデータに含まれるビデオデータがインタレース形式の場合、これを特殊再生する際にプログレッシブ形式に変換してもよい。この場合、ビデオ簡易符号器１０６がビデオ復号器１０４の復号化したインタレース形式のビデオデータをプログレッシブ形式に変換してから再符号化し、ビデオＥＳを生成する。
【０１１５】
インタレース形式をプログレッシブ形式に変換すると、ＭＰＥＧデータの特殊再生時の画質を向上させることができる。なぜなら、インタレース形式の場合、同一のフレームを連続してモニタ１２１に表示すると、時間的に前後するフィールドを交互に表示することになり、ちらつきが発生するからである。それに対し、プログレッシブ形式の場合、各々のフレームは単一の時刻における画像データから構成されるため、同一のフレームを連続してモニタ１２１に表示しても、ちらつきは発生しない。
【０１１６】
ビデオデータがインタレース形式であるか、プログレッシブ形式であるかの判断は、ＣＰＵ１１４がビデオＥＳのヘッダ情報であるProgressive Frame（ＰＦ）を参照して行うことができる。ＰＦ＝１であればそのビデオデータはプログレッシブ形式、ＰＦ＝０であればインタレース形式である。
【０１１７】
ビデオデータをインタレース形式からプログレッシブ形式に変換することは、任意の公知の技術を用いて行うことができる。ここでは、変換時の基準フィールドの決定方法を説明する。
【０１１８】
変換時の基準フィールドは、ＭＰＥＧデータの通常再生時の最終フィールドを用いる。図１４は、ＭＰＥＧデータの通常再生時の最終フィールドを判定する際に使用するテーブルを示す図である。
【０１１９】
Repeat First Field（ＲＦ）が０の場合、そのフレームは２フィールドから構成される。そこで、Top Field First（ＴＦ）の逆の値が最終フィールドとなる。すなわち、ＴＦ＝１(Top Field First)の場合はBottom Fieldが最終フィールドとなる。ＴＦ＝０(Bottom Field First)の場合はTop Filedが最終フィールドとなる。
【０１２０】
ＲＦが１の場合は逆に、ＴＦ＝１の場合はTop Fieldが、ＴＦ＝０の場合はBottom Filedが最終フィールドとなる。
【０１２１】
＜その他＞
上述した各実施の形態の処理は、各機能を具現化したソフトウェアのプログラムコードを記録した記憶媒体をシステム或は装置に提供してもよい。そして、そのシステム或は装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによって、前述した実施形態の機能を実現することができる。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。このようなプログラムコードを供給するための記憶媒体としては、例えば、フロッピィ（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスクなどを用いることができる。或いは、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭなどを用いることもできる。
【０１２２】
また、コンピュータが読み出したプログラムコードを実行することにより、前述した各実施の形態の機能が実現されるだけではない。そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含まれている。
【０１２３】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書きこまれてもよい。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含むものである。
【図面の簡単な説明】
【０１２４】
【図１】本発明を適用可能なデータ伝送再生装置１４０及び外部装置としての表示装置１４１の構成を示す機能ブロック図である。
【図２】ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。
【図３】ＭＰＥＧデータの通常再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図４】ＭＰＥＧデータの通常再生時及び特殊再生時に共通する、表示装置１４１のデータ再生処理の流れを示すフローチャートである。
【図５】ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図６】ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図７】コピーピクチャの構成を示す図である。
【図８】ＭＰＥＧデータの通常再生時及び特殊再生時のＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。
【図９】ＭＰＥＧデータの特殊再生時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図１０】１／３倍速のスロー再生において、ｎ＝３及びｎ＝２の時のＴＳと、モニタ１０５等に出力されるフレームを模式的に示す図である。
【図１１】フリーズ画像の最小枚数が２のコマ送り再生において、ｎ＝３及びｎ＝４の時のＴＳと、モニタ１０５等に出力されるフレームを模式的に示す図である。
【図１２】ＭＰＥＧデータの再生方式を特殊再生から通常再生に切り替える時における、データ伝送再生装置１４０のデータ伝送処理の流れを示すフローチャートである。
【図１３】ＭＰＥＧデータの特殊再生時にオーディオＥＳを破棄する場合の、ＴＳと、モニタ１０５等に出力される画像等を模式的に示す図である。
【図１４】ＭＰＥＧデータの通常再生時の最終フィールドを判定する際に使用するテーブルを示す図である。
【符号の説明】
【０１２５】
１０６ ビデオ簡易符号器
１１０ ミュート発生器
１１１ ストリーム切替スイッチ
１４０ データ伝送再生装置
１４１ 表示装置
【特許請求の範囲】
【請求項１】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、
前記再生手段より再生された動画像データを復号する復号手段と、
前記復号手段により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化手段と、
前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、
前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備える再生装置。
【請求項２】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、
前記再生手段より再生された動画像データを復号する復号手段と、
前記復号手段により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化手段と、
前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、
前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備える再生装置。
【請求項３】
前記特殊再生モードはスロー再生モードを含み、前記符号化手段は、前記スロー再生モードにおける再生速度に応じて前記フレーム内符号化データの挿入タイミングを決定することを特徴とする請求項２記載の再生装置。
【請求項４】
前記送信手段は、前記特殊再生モードから通常再生モードへの切り替えの際、前記動画像データ中、前記フレーム内符号化されたフレームのデータから送信を開始することを特徴とする請求項１乃至３のいずれか１項に記載の再生装置。
【請求項５】
前記送信手段は、前記通常再生モードと特殊再生モードの切り替えに応じて、符号化データの不連続を示す不連続情報を送信することを特徴とする請求項１乃至４のいずれか１項に記載の再生装置。
【請求項６】
前記符号化データ列はさらに、音声データを含み、前記送信手段は、前記通常再生モードにおいては前記再生された動画像データと共に前記音声データを送信し、前記特殊再生モードにおいては、前記符号化手段から出力された動画像データと共にミュートデータを送信することを特徴とする請求項１乃至５のいずれか１項に記載の再生装置。
【請求項７】
前記動画像データがインタレース形式かプログレッシブ形式かを判定する判定手段と、前記判定手段による判定に基づいて、前記復号手段により復号されたインタレース形式の前記動画像データをプログレッシブ形式に変換する変換手段とを備え、前記符号化手段は前記変換手段により変換された動画像データを符号化することを特徴とする請求項１乃至６のいずれか１項に記載の再生装置。
【請求項８】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程とを備える再生方法。
【請求項９】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程とを備える再生方法。
【請求項１０】
コンピュータに、
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程と
を実行させるためのプログラム。
【請求項１１】
コンピュータに、
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程と、
を実行させるためのプログラム。
【請求項１２】
請求項１１又は１２に記載のプログラムを記憶したコンピュータ可読記憶媒体。
【請求項１】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、
前記再生手段より再生された動画像データを復号する復号手段と、
前記復号手段により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化手段と、
前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、
前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備える再生装置。
【請求項２】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生手段と、
前記再生手段より再生された動画像データを復号する復号手段と、
前記復号手段により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化手段と、
前記再生手段により再生された動画像データまたは前記符号化手段より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信手段と、
前記動画像データを通常再生速度で再生し、前記送信手段が前記再生手段により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信手段が前記符号化手段より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え手段とを備える再生装置。
【請求項３】
前記特殊再生モードはスロー再生モードを含み、前記符号化手段は、前記スロー再生モードにおける再生速度に応じて前記フレーム内符号化データの挿入タイミングを決定することを特徴とする請求項２記載の再生装置。
【請求項４】
前記送信手段は、前記特殊再生モードから通常再生モードへの切り替えの際、前記動画像データ中、前記フレーム内符号化されたフレームのデータから送信を開始することを特徴とする請求項１乃至３のいずれか１項に記載の再生装置。
【請求項５】
前記送信手段は、前記通常再生モードと特殊再生モードの切り替えに応じて、符号化データの不連続を示す不連続情報を送信することを特徴とする請求項１乃至４のいずれか１項に記載の再生装置。
【請求項６】
前記符号化データ列はさらに、音声データを含み、前記送信手段は、前記通常再生モードにおいては前記再生された動画像データと共に前記音声データを送信し、前記特殊再生モードにおいては、前記符号化手段から出力された動画像データと共にミュートデータを送信することを特徴とする請求項１乃至５のいずれか１項に記載の再生装置。
【請求項７】
前記動画像データがインタレース形式かプログレッシブ形式かを判定する判定手段と、前記判定手段による判定に基づいて、前記復号手段により復号されたインタレース形式の前記動画像データをプログレッシブ形式に変換する変換手段とを備え、前記符号化手段は前記変換手段により変換された動画像データを符号化することを特徴とする請求項１乃至６のいずれか１項に記載の再生装置。
【請求項８】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程とを備える再生方法。
【請求項９】
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程とを備える再生方法。
【請求項１０】
コンピュータに、
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データを前記フレーム内符号化のみにより符号化した符号化動画像データを出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程と
を実行させるためのプログラム。
【請求項１１】
コンピュータに、
フレーム内符号化とフレーム間予測符号化とを用いて符号化された動画像データを含む符号化データ列を記録媒体から再生する再生工程と、
前記再生工程より再生された動画像データを復号する復号工程と、
前記復号工程により復号された動画像データをフレーム内符号化データ及び参照フレームと同一のデータを復号するためのコピーピクチャデータとからなる符号化動画像データに変換して出力する符号化工程と、
前記再生工程により再生された動画像データまたは前記符号化工程より出力された符号化動画像データのうちの一方を選択し、選択した動画像データを符号化された形態で外部装置に送信する送信工程と、
前記動画像データを通常再生速度で再生し、前記送信工程が前記再生工程により再生された動画像データを送信する通常再生モードと、前記動画像データを通常再生速度とは異なる速度で再生し、前記送信工程が前記符号化工程より出力された動画像データを送信する特殊再生モードとを切り替えるモード切り替え工程と、
を実行させるためのプログラム。
【請求項１２】
請求項１１又は１２に記載のプログラムを記憶したコンピュータ可読記憶媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２００７−２８２１２（Ｐ２００７−２８２１２Ａ）
【公開日】平成１９年２月１日（２００７．２．１）
【国際特許分類】
【出願番号】特願２００５−２０７５４５（Ｐ２００５−２０７５４５）
【出願日】平成１７年７月１５日（２００５．７．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成１９年２月１日（２００７．２．１）
【国際特許分類】
【出願日】平成１７年７月１５日（２００５．７．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]