再生装置及び再生方法
【課題】 再生時に特殊再生用データの欠落があっても、欠落した特殊再生用データを補間し良好な特殊再生用画像を得られるようにする。
【解決手段】 主画像データとそれぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている磁気テープ４０３から読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出するデータ欠落検出部４２１と、複数の補間方法を選択的に用いて、欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理部４２５とを備え、特殊再生用データの欠落があっても、補間した画素が目立たないように欠落した特殊再生用データを補間することができるようにする。
【解決手段】 主画像データとそれぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている磁気テープ４０３から読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出するデータ欠落検出部４２１と、複数の補間方法を選択的に用いて、欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理部４２５とを備え、特殊再生用データの欠落があっても、補間した画素が目立たないように欠落した特殊再生用データを補間することができるようにする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、再生装置及び再生方法に関し、詳しくは特殊再生画像に係る補間処理技術に関する。
【背景技術】
【０００２】
映像信号を符号化し、磁気テープに記録再生するデジタルＶＴＲが知られている。また、ＭＰＥＧ（Moving Picture Experts Group）符号化した通常再生用の映像信号とは別にサーチ再生等の高速再生（特殊再生）用のデータを別途生成し、磁気テープ上の決められた領域に記録するＶＴＲも知られている。
【０００３】
ここで、一例として１４４０×１０８０ｉの映像をＭＰＥＧ方式で符号化し、それを磁気テープに記録する場合について説明する。符号化対象となる映像信号の有効画素数は、輝度信号Ｙについては水平方向１４４０サンプル、垂直方向１０８０ラインとなり、色差信号Ｃｂ及びＣｒについては、それぞれ水平方向７２０サンプル、垂直方向５４０ラインとなる。
【０００４】
これを図１に示すように水平方向に９０、垂直方向に６８のマクロブロック（ＭＢ）に分割して符号化する。輝度信号のマクロブロックは四つのＤＣＴブロックから構成され、色差信号Ｃｒ，Ｃｂはそれぞれ一つのマクロブロックが一つのＤＣＴブロックから構成される。また、イントラフレームで構成されるＩピクチャのＤＣＴブロックからＤＣ成分を抽出し特殊再生用データを生成する（例えば、特許文献１参照。）。このとき、抽出したＤＣ成分のデータを、輝度信号Ｙについては６ビットに変換し、色差信号Ｃｂ及びＣｒについてはそれぞれ５ビットに変換する。これにより、特殊再生用データは１マクロブロックあたり（６×４＋５×２）＝３４ビットとなり、１フレームあたり（９０×６８×３４）＝２０８０８０ビットの固定長となる特殊再生用データが生成可能となる。
【０００５】
また、特殊再生用データは、Ｉピクチャから生成される。例えば図２に示すように１ＧＯＰ（Group of Picture）がＮ＝１５、Ｍ＝３で構成される場合を考えると、Ｉピクチャは１５フレーム毎に符号化されるため、特殊再生用画像は主画像１５フレーム毎に生成される。
【０００６】
また、特許文献２に記載の情報記録装置にあるように、上述した特殊再生用データをマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分け、それぞれを固定長にパケット化した後、独立にエラー訂正符号化処理して磁気テープ上に記録することで、特殊再生用データに欠落があった場合でも容易に画面全体を大まかに表示可能とする方法が提案されている（例えば、特許文献２参照。）。
【０００７】
このようにマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分け、それぞれを固定長にパケット化して記録した場合において、各パケットが欠落した様子を図３に示す。図３（ａ）は輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒのパケットが欠落した様子を示しており、図３（ｂ）は輝度信号Ｙ１、Ｙ２及びＹ３のパケットが欠落した様子を示している。
【０００８】
【特許文献１】特開２００１−２９８７０６号公報
【特許文献２】特開２００２−２０９１７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
上述のように、特殊再生用データがマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分けられ、それぞれが独立にエラー訂正符号化されて記録されている場合、再生時に、何らかの要因により再生データ中にエラーが存在し、特殊再生用データが欠落すると、マクロブロックにおける輝度データについては、Ｙ０と、Ｙ１、Ｙ２及びＹ３とが個別に欠落することになる。
【００１０】
この欠落した各輝度データは、再生画像における８×８画素の領域に対応するものである。したがって、欠落した領域を同一フレーム内の他のブロックの画像で補間した場合には、再生画像に凹凸模様が目立つ可能性がある。
【００１１】
また、補間方法として、以前に再生されたフレームの画像データを用いることも考えられる。しかし、特殊再生用データは、Ｉピクチャから生成されるため、一般的には主画像の複数フレーム毎に特殊再生画像が生成されることとなる。例えば、図２に示したように１ＧＯＰがＮ＝１５、Ｍ＝３で構成される場合、特殊再生用データにおいて１フレーム前の画像は、主画像に換算して１５フレーム前の画像にあたる。そのため、欠落したデータをその直前に再生されたフレームの画像データを用いて補間した場合には、周囲のブロックとの差が大きくなり、補間ブロックが目立ってしまう。
【００１２】
このように特殊再生用データが輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分離しパケット化されて記録されている磁気テープを再生する記録再生装置においては、パケット単位での特殊再生用データの欠落を考慮した補間方法が必要となる。
【００１３】
本発明は、このような事情に鑑みてなされたものであり、再生時に特殊再生用データの欠落があっても、欠落した特殊再生用データを補間し良好な特殊再生用画像が得られるようにすることを目的とする。
【課題を解決するための手段】
【００１４】
本発明の再生装置は、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、複数の補間方法を選択的に用いて、前記検出手段により欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理手段とを備えることを特徴とする。
本発明の再生装置は、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、前記検出手段により検出された欠落データを補間処理する補間処理手段とを備え、前記補間処理手段は、同一ブロック内の第１のデータが欠落し、第２のデータの欠落がなかった場合、前記第１のデータ及び前記第２のデータの一部を他のデータによって置き換えることを特徴とする。
本発明の再生方法は、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生工程と、前記再生工程で読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出工程と、複数の補間方法を選択的に用いて、前記検出工程にて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理工程とを有することを特徴とする。
本発明のプログラムは、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生ステップと、前記読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出ステップと、複数の補間方法を選択的に用いて、前記検出ステップにて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理ステップとをコンピュータに実行させることを特徴とする。
本発明のコンピュータ読み取り可能な記録媒体は、前記プログラムを記録したことを特徴とする。
【発明の効果】
【００１５】
本発明によれば、特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出し、複数の補間方法を選択的に用いて、欠落が検出された第１のデータと第２のデータとを独立に補間処理する。これにより、特殊再生時に何らかの要因により特殊再生用データの欠落があっても、第１のデータと第２のデータについて独立に画素補間を適応的に行い、補間した画素が目立たないように欠落した特殊再生用データを補間することができ、欠落した部分に違和感のない良好な特殊再生用画像を得ることができる。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の実施形態を図面に基づいて説明する。
図４は、本発明の一実施形態による再生装置を適用した磁気テープ再生装置の構成例を示すブロック図である。
【００１７】
以下の説明では、代表的な例として１４４０×１０８０ｉの映像をＭＰＥＧ方式で符号化し、その符号化された通常再生用の主画像データと高速再生（特殊再生）用の特殊再生用データとが記録された磁気テープを再生する磁気テープ再生装置において、主に高速再生（特殊再生）であるサーチ再生する場合について詳細に説明を行い、通常再生についての詳細な説明は省略する。
【００１８】
また、特殊再生用データについては、上述したように通常再生用である主画像のＩピクチャ内のＤＣＴブロックから低周波成分であるＤＣ成分を抽出して生成するものとする。さらに、特殊再生用データは、輝度信号が分離され、輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒ（以下、これらをまとめて「ベース・データ」と称す。）と、輝度信号Ｙ１、Ｙ２及びＹ３（以下、これらをまとめて「ヘルパー・データ」と称す。）とがそれぞれ個別にパケット化された後、独立にエラー訂正符号化処理され記録されているものとする。
【００１９】
図４において、ＣＰＵ４０２は、ユーザー操作に応じて操作部４０１から送信される信号に基づいて本実施形態における磁気テープ再生装置を構成する各機能部を制御する。再生・誤り訂正符号処理部４０４は、ＣＰＵ４０２の制御を受けて磁気テープ４０３からデータを読み出し、読み出したデータに誤り訂正復号処理を施してデータ分離部４０５に出力する。データ分離部４０５は、供給される再生データ中から特殊再生用データ又は通常再生用データ（主画像データ）を選択し、特殊再生用データを特殊再生用データ処理部４０６に出力し、通常再生用データを復号化処理部４０８に出力する。
【００２０】
特殊再生用データ処理部４０６は、特殊再生時に磁気テープ４０３より読み出された特殊再生用データの伸張処理を行う。また、復号化処理部４０８は、通常再生時に磁気テープ４０３より読み出された通常再生用の符号化主画像データの復号処理を行う。映像信号処理部４０９は、特殊再生用データ処理部４０６又は復号化処理部４０８にて得られた再生画像を、表示部４１０に表示するとともに、Ｄ／Ａ（ディジタル−アナログ）変換部４１１を介して外部機器に出力する。
【００２１】
操作部４０１から通常再生の指示がなされると、ＣＰＵ４０２は、再生・誤り訂正符号処理部４０４を制御して磁気テープ４０３からデータを再生する。再生・誤り訂正符号処理部４０４は、再生されたデータに対して誤り訂正復号処理を施した後、データ分離部４０５に出力する。
【００２２】
データ分離部４０５は、再生データ中、通常再生用データ（主画像データ）を選択して復号化処理部４０８に出力する。復号化処理部４０８は、通常再生用データを復号して映像信号処理部４０９に出力する。映像信号処理部４０９は、復号された映像信号を表示部４１０に表示すると共に、Ｄ／Ａ変換部４１１を介してアナログ映像信号に変換し外部機器に出力する。
【００２３】
一方、操作部４０１からサーチ再生の指示がなされると、ＣＰＵ４０２は、再生・誤り訂正符号処理部４０４を制御して、磁気テープ４０３を通常再生時よりも高速の所定速度で搬送しながら、磁気テープ４０３からサーチ再生用データを再生する。磁気テープ４０３から読み出された再生データは、再生・誤り訂正符号処理部４０４で誤り訂正処理が施された後に、正常に取得された再生データのみがデータ分離部４０５に供給される。
【００２４】
データ分離部４０５は、入力された再生データの内、特殊再生用データのみを分離し、そのデータに正常に更新されたことを示す更新情報を付加して特殊再生用データ処理部４０６に供給する。データ分離部４０５から供給される特殊再生用データは、特殊再生用データ処理部４０６によりＲＡＭ４０７へ格納され、順次取得される特殊再生用データがＲＡＭ４０７に格納される。特殊再生用データ処理部４０６は、１フレーム分の特殊再生用データが取得された段階で伸張処理を行う。
【００２５】
ここで、特殊再生時にＲＡＭ４０７へ格納される特殊再生用データは、磁気テープ４０３からの読み出しエラー（再生エラー）が発生した場合や磁気テープ４０３上に繋ぎ記録されている場合などにより、特殊再生用画像１フレーム分のすべての特殊再生用データが揃わないケースが考えられる。特殊再生用データ処理部４０６は、このようにデータの欠落があった場合に欠落したデータを補間する機能を備えている。
【００２６】
特殊再生用データ処理部４０６は、データ欠落検出部４２１、伸張処理部４２２、縦縞検出部４２３、ラインメモリ４２４、及び補間処理部４２５を有する。
【００２７】
データ欠落検出部４２１は、ＲＡＭ４０７に格納されている特殊再生用データが、先に書き込まれた特殊再生用データ・パケットであるか、新たに書き込まれた特殊再生用データ・パケットであるかをデータ分離部４０５により付加された更新情報から判定し、データの欠落を検出する。伸張処理部４２２は、特殊再生用データを映像信号に変換する。
【００２８】
縦縞検出部４２３は、伸張処理中のラインにおいて隣り合う画素の輝度値を比較し、その差が所定値以上である場合にそのライン上の画素位置を記憶する。そして、縦縞検出部４２３は、さらに記憶されている画素位置の輝度値と次に処理されるラインの同画素位置の輝度値とを比較し、所定ライン以上連続して近似レベルである場合には縦縞であることを検出する。すなわち、縦縞検出部４２３は、特殊再生画像の特徴の１つとして縦縞模様の検出を行う。
【００２９】
ラインメモリ４２４は、伸張された特殊再生用データ１ライン分を保持しておくためのものである。また、補間処理部４２５は、データ欠落検出部４２１と縦縞検出部４２３との検出結果に基づいて、エラーにより欠落した特殊再生用データをその周辺のデータ、例えばその欠落した画素に対して水平方向又は垂直方向に隣接する画素のデータにより置き換える。
【００３０】
図５は、本実施形態における特殊再生用データの補間処理動作を示すフローチャートである。以下、図５を参照しながら特殊再生用データ処理部４０６にて行われる補間処理について説明する。
【００３１】
データ欠落検出部４２１は、データの欠落を検出すると、ベース・データ、ヘルパー・データのどちらか又は両方が欠落したか、すなわちどのデータのパケットが欠落したかを判定する（ステップＳ５００、Ｓ５０１）。
【００３２】
その結果、ベース・データのみが欠落した場合には、図３（ａ）に示したように特殊再生用データのマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒが欠落している。このとき、欠落した輝度信号Ｙ０については、縦縞検出部４２３により縦縞であると判定された場合（ステップＳ５０２のＹｅｓ）、補間処理部４２５は、この欠落した輝度信号Ｙ０に対応する輝度信号Ｙ１を破棄し、ともにラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（ステップＳ５０３）（図６（ａ）参照）。一方、縦縞検出部４２３により縦縞でないと判定された場合には（ステップＳ５０２のＮｏ）、補間処理部４２５は、欠落した輝度信号Ｙ０のみを隣の輝度信号Ｙ１をホールドして置き換える（ステップＳ５０４）（図６（ｂ）参照）。さらに、欠落した色差信号Ｃｂ、Ｃｒについては、補間処理部４２５は、ラインメモリ４２４に保持されている上位ラインの色差信号で置き換える（ステップＳ５０５）。
【００３３】
次に、ステップＳ５０１での判定の結果、ヘルパー・データのみが欠落した場合には、図３（ｂ）に示したように特殊再生用データのマクロブロックにおける輝度信号Ｙ１、Ｙ２及びＹ３が欠落しており、色差信号Ｃｂ、Ｃｒは正常である。このとき、縦縞検出部４２３により縦縞であると判定された場合（ステップＳ５０６のＹｅｓ）、補間処理部４２５は、ラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（ステップＳ５０７）。具体的には、補間処理部４２５は、対象となるラインが輝度信号Ｙ０、Ｙ１のラインであれば、欠落した輝度信号Ｙ１に対応する輝度信号Ｙ０を破棄し、輝度信号Ｙ０、Ｙ１を共にラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える。また、補間処理部４２５は、対象となるラインが輝度信号Ｙ２、Ｙ３のラインであれば、双方とも欠落しているのでラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（図７（ａ）参照）。
【００３４】
一方、縦縞検出部４２３により縦縞でないと判定された場合には（ステップＳ５０６のＮｏ）、補間処理部４２５は、対象となるラインが輝度信号Ｙ０、Ｙ１のラインであれば、欠落した輝度信号Ｙ１を隣の輝度信号Ｙ０をホールドして置き換え、対象となるラインが輝度信号Ｙ２、Ｙ３のラインであれば、ラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（ステップＳ５０８）（図７（ｂ）参照）。
【００３５】
次に、ステップＳ５０１での判定の結果、ベース・データとヘルパー・データの両方が欠落している場合には、輝度信号Ｙ０〜Ｙ３及び色差信号Ｃｂ、Ｃｒのすべてが欠落しているので、補間処理部４２５は、欠落した輝度信号及び色差信号のすべてをラインメモリ４２４に保持されている上位ラインのデータで置き換える（ステップＳ５０９）（図８参照）。
以上のような補間処理を、全ラインに対して施すことで特殊再生用データ１フレームに対して補間処理された特殊再生画像が得られる。
【００３６】
このようにして特殊再生用データ処理部４０６により伸張処理された特殊再生画像は、映像信号処理部４０９に供給され、映像信号処理部４０９にて表示部４１０の表示サイズに合わせて画像サイズの変換が行われ、表示部４１１に出力される。これにより、表示部４１１にて特殊再生画像が表示される。また、映像信号処理部４０９に供給された特殊再生画像は、映像信号処理部４０９よりＤ／Ａ部４１１に供給され、Ｄ／Ａ部４１１にてアナログ映像信号へ変換された後にビデオ信号として出力される。
【００３７】
図６〜図８は、上述した補間処理を示した図であり、全ラインに対し、エラーの状況に応じて図６〜図８に示す補間処理を適宜施すことで特殊再生用データ１フレームに対して補間処理された特殊再生画像が得られる。なお、図６〜図８においては、映像イメージの輝度信号（輝度値）についてのみ示しており、色差信号については省略する。
【００３８】
図６（ａ）、図６（ｂ）は、ベース・データのみが欠落した場合の補間処理を示している。図６（ａ）に示すように縦縞模様であると判定された場合には、欠落した輝度信号Ｙ０に対応する、すなわち欠落した輝度信号Ｙ０と同じマクロブロックに属する輝度信号Ｙ１を破棄し、当該輝度信号Ｙ０、Ｙ１が上位ラインの輝度信号Ｙ２、Ｙ３でそれぞれ補間される。また、図６（ｂ）に示すように縦縞模様でないと判定された場合には、欠落した輝度信号Ｙ０がそれに対応する隣の輝度信号Ｙ１（同じマクロブロックに属する輝度信号Ｙ１）で補間される。
【００３９】
図７（ａ）、図７（ｂ）は、ヘルパー・データのみが欠落した場合の補間処理を示している。図７（ａ）に示すように縦縞模様であると判定された場合には、欠落した輝度信号Ｙ１に対応する、すなわち欠落した輝度信号Ｙ１と同じマクロブロックに属する輝度信号Ｙ０を破棄し、当該輝度信号Ｙ０、Ｙ１が上位ラインの輝度信号Ｙ２、Ｙ３でそれぞれ補間される。さらに、欠落した輝度信号Ｙ２、Ｙ３が、上位ラインの輝度信号、すなわち同じマクロブロックに属する破棄された輝度信号Ｙ０と欠落した輝度信号Ｙ１を補間する上位ラインの輝度信号Ｙ２、Ｙ３でそれぞれ補間される。
【００４０】
また、図７（ｂ）に示すように縦縞模様でないと判定された場合には、欠落した輝度信号Ｙ１がそれに対応する隣の輝度信号Ｙ０（同じマクロブロックに属する輝度信号Ｙ０）で補間される。さらに、欠落した輝度信号Ｙ２、Ｙ３が、上位ラインの輝度信号でそれぞれ補間される。したがって、ヘルパー・データのみが欠落し縦縞模様でないと判定された場合には、欠落した輝度信号Ｙ１、Ｙ２及びＹ３のすべてが、同じマクロブロックに属する輝度信号Ｙ０で補間される。
【００４１】
また、図８は、ベース・データ及びヘルパー・データの双方が欠落した場合の補間処理を示している。図８に示すようにベース・データ及びヘルパー・データをともに欠落した場合には、欠落した輝度信号Ｙ０〜Ｙ３が上位ラインの輝度信号で補間される。
【００４２】
以上、説明したように本実施形態によれば、特殊再生時に特殊再生用データのベース・データとヘルパー・データについて独立に欠落を検出し、欠落が検出された特殊再生用データの種類（欠落したパケットの種類、言い換えればベース・データであるかヘルパー・データであるか）と縦縞検出部４２３での検出結果に基づいて、欠落が検出されたパケットに対応するベース・データ、ヘルパー・データの輝度信号を独立に同じマクロブロックに属する輝度信号及び上位ラインの輝度信号を取捨選択して適応的に置き換える。これにより、特殊再生用データの欠落があっても、ベース・データとヘルパー・データについて独立に適応的な補間処理を行い、凹凸の目立たない良好かつ自然な特殊再生用画像を得ることができる。
【００４３】
なお、上述した実施形態では、特殊再生用データ処理部４０６に縦縞検出部４２３を設けて特殊再生画像の特徴として縦縞模様であるか否かを検出し、その検出結果に応じて欠落した特殊再生用データの補間処理を行うようにしているが、本発明はこれに限定されるものではない。例えば、縦縞検出部を横縞検出部に置き換えて特殊再生画像の特徴として横縞模様であるか否かを検出し、その検出結果に応じて欠落した特殊再生用データの補間処理を行うようにしても良いし、縦縞検出部と横縞検出部との両方を備えて同様に欠落した特殊再生用データの補間処理を行うようにしても良い。このようにした場合でも同様に、その検出結果により適応的に欠落した特殊再生用データの補間処理を行うことが可能である。
【００４４】
（本発明の他の実施形態）
上述した実施形態の機能を実現するべく各種のデバイスを動作させるように、該各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、前記実施形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格納されたプログラムに従って前記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
また、この場合、前記ソフトウェアのプログラムコード自体が上述した実施形態の機能を実現することになり、そのプログラムコード自体は本発明を構成する。また、そのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記録媒体は本発明を構成する。かかるプログラムコードを記憶する記録媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施形態の機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているＯＳ（オペレーティングシステム）あるいは他のアプリケーションソフト等と共同して上述の実施形態の機能が実現される場合にもかかるプログラムコードは本発明の実施形態に含まれることは言うまでもない。
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施形態の機能が実現される場合にも本発明に含まれることは言うまでもない。
【００４５】
なお、前記実施形態は、何れも本発明を実施するにあたっての具体化のほんの一例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
【図面の簡単な説明】
【００４６】
【図１】通常再生用の主画像と特殊再生用画像との解像度の関係を示す図である。
【図２】特殊再生用画像が生成される時間間隔を説明するための図である。
【図３】特殊再生用データがパケット単位で欠落した様子を示す図である。
【図４】本発明の実施形態における再生装置の構成例を示すブロック図である。
【図５】特殊再生用データの補間処理動作を示すフローチャートである。
【図６】ベース・データが欠落した場合の補間処理を説明するための図である。
【図７】ヘルパー・データが欠落した場合の補間処理を説明するための図である。
【図８】ベース・データ及びヘルパー・データの両方が欠落した場合の補間処理を説明するための図である。
【符号の説明】
【００４７】
４０２ ＣＰＵ
４０３ 磁気テープ
４０４ 再生・誤り訂正符号処理部
４０６ 特殊再生用データ処理部
４０８ 復号化処理部
４０９ 映像信号処理部
４２１ データ欠落検出部
４２２ 伸張処理部
４２３ 縦縞検出部
４２４ ラインメモリ
４２５ 補間処理部
【技術分野】
【０００１】
本発明は、再生装置及び再生方法に関し、詳しくは特殊再生画像に係る補間処理技術に関する。
【背景技術】
【０００２】
映像信号を符号化し、磁気テープに記録再生するデジタルＶＴＲが知られている。また、ＭＰＥＧ（Moving Picture Experts Group）符号化した通常再生用の映像信号とは別にサーチ再生等の高速再生（特殊再生）用のデータを別途生成し、磁気テープ上の決められた領域に記録するＶＴＲも知られている。
【０００３】
ここで、一例として１４４０×１０８０ｉの映像をＭＰＥＧ方式で符号化し、それを磁気テープに記録する場合について説明する。符号化対象となる映像信号の有効画素数は、輝度信号Ｙについては水平方向１４４０サンプル、垂直方向１０８０ラインとなり、色差信号Ｃｂ及びＣｒについては、それぞれ水平方向７２０サンプル、垂直方向５４０ラインとなる。
【０００４】
これを図１に示すように水平方向に９０、垂直方向に６８のマクロブロック（ＭＢ）に分割して符号化する。輝度信号のマクロブロックは四つのＤＣＴブロックから構成され、色差信号Ｃｒ，Ｃｂはそれぞれ一つのマクロブロックが一つのＤＣＴブロックから構成される。また、イントラフレームで構成されるＩピクチャのＤＣＴブロックからＤＣ成分を抽出し特殊再生用データを生成する（例えば、特許文献１参照。）。このとき、抽出したＤＣ成分のデータを、輝度信号Ｙについては６ビットに変換し、色差信号Ｃｂ及びＣｒについてはそれぞれ５ビットに変換する。これにより、特殊再生用データは１マクロブロックあたり（６×４＋５×２）＝３４ビットとなり、１フレームあたり（９０×６８×３４）＝２０８０８０ビットの固定長となる特殊再生用データが生成可能となる。
【０００５】
また、特殊再生用データは、Ｉピクチャから生成される。例えば図２に示すように１ＧＯＰ（Group of Picture）がＮ＝１５、Ｍ＝３で構成される場合を考えると、Ｉピクチャは１５フレーム毎に符号化されるため、特殊再生用画像は主画像１５フレーム毎に生成される。
【０００６】
また、特許文献２に記載の情報記録装置にあるように、上述した特殊再生用データをマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分け、それぞれを固定長にパケット化した後、独立にエラー訂正符号化処理して磁気テープ上に記録することで、特殊再生用データに欠落があった場合でも容易に画面全体を大まかに表示可能とする方法が提案されている（例えば、特許文献２参照。）。
【０００７】
このようにマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分け、それぞれを固定長にパケット化して記録した場合において、各パケットが欠落した様子を図３に示す。図３（ａ）は輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒのパケットが欠落した様子を示しており、図３（ｂ）は輝度信号Ｙ１、Ｙ２及びＹ３のパケットが欠落した様子を示している。
【０００８】
【特許文献１】特開２００１−２９８７０６号公報
【特許文献２】特開２００２−２０９１７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
上述のように、特殊再生用データがマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分けられ、それぞれが独立にエラー訂正符号化されて記録されている場合、再生時に、何らかの要因により再生データ中にエラーが存在し、特殊再生用データが欠落すると、マクロブロックにおける輝度データについては、Ｙ０と、Ｙ１、Ｙ２及びＹ３とが個別に欠落することになる。
【００１０】
この欠落した各輝度データは、再生画像における８×８画素の領域に対応するものである。したがって、欠落した領域を同一フレーム内の他のブロックの画像で補間した場合には、再生画像に凹凸模様が目立つ可能性がある。
【００１１】
また、補間方法として、以前に再生されたフレームの画像データを用いることも考えられる。しかし、特殊再生用データは、Ｉピクチャから生成されるため、一般的には主画像の複数フレーム毎に特殊再生画像が生成されることとなる。例えば、図２に示したように１ＧＯＰがＮ＝１５、Ｍ＝３で構成される場合、特殊再生用データにおいて１フレーム前の画像は、主画像に換算して１５フレーム前の画像にあたる。そのため、欠落したデータをその直前に再生されたフレームの画像データを用いて補間した場合には、周囲のブロックとの差が大きくなり、補間ブロックが目立ってしまう。
【００１２】
このように特殊再生用データが輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒと輝度信号Ｙ１、Ｙ２及びＹ３とのグループに分離しパケット化されて記録されている磁気テープを再生する記録再生装置においては、パケット単位での特殊再生用データの欠落を考慮した補間方法が必要となる。
【００１３】
本発明は、このような事情に鑑みてなされたものであり、再生時に特殊再生用データの欠落があっても、欠落した特殊再生用データを補間し良好な特殊再生用画像が得られるようにすることを目的とする。
【課題を解決するための手段】
【００１４】
本発明の再生装置は、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、複数の補間方法を選択的に用いて、前記検出手段により欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理手段とを備えることを特徴とする。
本発明の再生装置は、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、前記検出手段により検出された欠落データを補間処理する補間処理手段とを備え、前記補間処理手段は、同一ブロック内の第１のデータが欠落し、第２のデータの欠落がなかった場合、前記第１のデータ及び前記第２のデータの一部を他のデータによって置き換えることを特徴とする。
本発明の再生方法は、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生工程と、前記再生工程で読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出工程と、複数の補間方法を選択的に用いて、前記検出工程にて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理工程とを有することを特徴とする。
本発明のプログラムは、符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生ステップと、前記読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出ステップと、複数の補間方法を選択的に用いて、前記検出ステップにて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理ステップとをコンピュータに実行させることを特徴とする。
本発明のコンピュータ読み取り可能な記録媒体は、前記プログラムを記録したことを特徴とする。
【発明の効果】
【００１５】
本発明によれば、特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出し、複数の補間方法を選択的に用いて、欠落が検出された第１のデータと第２のデータとを独立に補間処理する。これにより、特殊再生時に何らかの要因により特殊再生用データの欠落があっても、第１のデータと第２のデータについて独立に画素補間を適応的に行い、補間した画素が目立たないように欠落した特殊再生用データを補間することができ、欠落した部分に違和感のない良好な特殊再生用画像を得ることができる。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の実施形態を図面に基づいて説明する。
図４は、本発明の一実施形態による再生装置を適用した磁気テープ再生装置の構成例を示すブロック図である。
【００１７】
以下の説明では、代表的な例として１４４０×１０８０ｉの映像をＭＰＥＧ方式で符号化し、その符号化された通常再生用の主画像データと高速再生（特殊再生）用の特殊再生用データとが記録された磁気テープを再生する磁気テープ再生装置において、主に高速再生（特殊再生）であるサーチ再生する場合について詳細に説明を行い、通常再生についての詳細な説明は省略する。
【００１８】
また、特殊再生用データについては、上述したように通常再生用である主画像のＩピクチャ内のＤＣＴブロックから低周波成分であるＤＣ成分を抽出して生成するものとする。さらに、特殊再生用データは、輝度信号が分離され、輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒ（以下、これらをまとめて「ベース・データ」と称す。）と、輝度信号Ｙ１、Ｙ２及びＹ３（以下、これらをまとめて「ヘルパー・データ」と称す。）とがそれぞれ個別にパケット化された後、独立にエラー訂正符号化処理され記録されているものとする。
【００１９】
図４において、ＣＰＵ４０２は、ユーザー操作に応じて操作部４０１から送信される信号に基づいて本実施形態における磁気テープ再生装置を構成する各機能部を制御する。再生・誤り訂正符号処理部４０４は、ＣＰＵ４０２の制御を受けて磁気テープ４０３からデータを読み出し、読み出したデータに誤り訂正復号処理を施してデータ分離部４０５に出力する。データ分離部４０５は、供給される再生データ中から特殊再生用データ又は通常再生用データ（主画像データ）を選択し、特殊再生用データを特殊再生用データ処理部４０６に出力し、通常再生用データを復号化処理部４０８に出力する。
【００２０】
特殊再生用データ処理部４０６は、特殊再生時に磁気テープ４０３より読み出された特殊再生用データの伸張処理を行う。また、復号化処理部４０８は、通常再生時に磁気テープ４０３より読み出された通常再生用の符号化主画像データの復号処理を行う。映像信号処理部４０９は、特殊再生用データ処理部４０６又は復号化処理部４０８にて得られた再生画像を、表示部４１０に表示するとともに、Ｄ／Ａ（ディジタル−アナログ）変換部４１１を介して外部機器に出力する。
【００２１】
操作部４０１から通常再生の指示がなされると、ＣＰＵ４０２は、再生・誤り訂正符号処理部４０４を制御して磁気テープ４０３からデータを再生する。再生・誤り訂正符号処理部４０４は、再生されたデータに対して誤り訂正復号処理を施した後、データ分離部４０５に出力する。
【００２２】
データ分離部４０５は、再生データ中、通常再生用データ（主画像データ）を選択して復号化処理部４０８に出力する。復号化処理部４０８は、通常再生用データを復号して映像信号処理部４０９に出力する。映像信号処理部４０９は、復号された映像信号を表示部４１０に表示すると共に、Ｄ／Ａ変換部４１１を介してアナログ映像信号に変換し外部機器に出力する。
【００２３】
一方、操作部４０１からサーチ再生の指示がなされると、ＣＰＵ４０２は、再生・誤り訂正符号処理部４０４を制御して、磁気テープ４０３を通常再生時よりも高速の所定速度で搬送しながら、磁気テープ４０３からサーチ再生用データを再生する。磁気テープ４０３から読み出された再生データは、再生・誤り訂正符号処理部４０４で誤り訂正処理が施された後に、正常に取得された再生データのみがデータ分離部４０５に供給される。
【００２４】
データ分離部４０５は、入力された再生データの内、特殊再生用データのみを分離し、そのデータに正常に更新されたことを示す更新情報を付加して特殊再生用データ処理部４０６に供給する。データ分離部４０５から供給される特殊再生用データは、特殊再生用データ処理部４０６によりＲＡＭ４０７へ格納され、順次取得される特殊再生用データがＲＡＭ４０７に格納される。特殊再生用データ処理部４０６は、１フレーム分の特殊再生用データが取得された段階で伸張処理を行う。
【００２５】
ここで、特殊再生時にＲＡＭ４０７へ格納される特殊再生用データは、磁気テープ４０３からの読み出しエラー（再生エラー）が発生した場合や磁気テープ４０３上に繋ぎ記録されている場合などにより、特殊再生用画像１フレーム分のすべての特殊再生用データが揃わないケースが考えられる。特殊再生用データ処理部４０６は、このようにデータの欠落があった場合に欠落したデータを補間する機能を備えている。
【００２６】
特殊再生用データ処理部４０６は、データ欠落検出部４２１、伸張処理部４２２、縦縞検出部４２３、ラインメモリ４２４、及び補間処理部４２５を有する。
【００２７】
データ欠落検出部４２１は、ＲＡＭ４０７に格納されている特殊再生用データが、先に書き込まれた特殊再生用データ・パケットであるか、新たに書き込まれた特殊再生用データ・パケットであるかをデータ分離部４０５により付加された更新情報から判定し、データの欠落を検出する。伸張処理部４２２は、特殊再生用データを映像信号に変換する。
【００２８】
縦縞検出部４２３は、伸張処理中のラインにおいて隣り合う画素の輝度値を比較し、その差が所定値以上である場合にそのライン上の画素位置を記憶する。そして、縦縞検出部４２３は、さらに記憶されている画素位置の輝度値と次に処理されるラインの同画素位置の輝度値とを比較し、所定ライン以上連続して近似レベルである場合には縦縞であることを検出する。すなわち、縦縞検出部４２３は、特殊再生画像の特徴の１つとして縦縞模様の検出を行う。
【００２９】
ラインメモリ４２４は、伸張された特殊再生用データ１ライン分を保持しておくためのものである。また、補間処理部４２５は、データ欠落検出部４２１と縦縞検出部４２３との検出結果に基づいて、エラーにより欠落した特殊再生用データをその周辺のデータ、例えばその欠落した画素に対して水平方向又は垂直方向に隣接する画素のデータにより置き換える。
【００３０】
図５は、本実施形態における特殊再生用データの補間処理動作を示すフローチャートである。以下、図５を参照しながら特殊再生用データ処理部４０６にて行われる補間処理について説明する。
【００３１】
データ欠落検出部４２１は、データの欠落を検出すると、ベース・データ、ヘルパー・データのどちらか又は両方が欠落したか、すなわちどのデータのパケットが欠落したかを判定する（ステップＳ５００、Ｓ５０１）。
【００３２】
その結果、ベース・データのみが欠落した場合には、図３（ａ）に示したように特殊再生用データのマクロブロックにおける輝度信号Ｙ０及び色差信号Ｃｂ、Ｃｒが欠落している。このとき、欠落した輝度信号Ｙ０については、縦縞検出部４２３により縦縞であると判定された場合（ステップＳ５０２のＹｅｓ）、補間処理部４２５は、この欠落した輝度信号Ｙ０に対応する輝度信号Ｙ１を破棄し、ともにラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（ステップＳ５０３）（図６（ａ）参照）。一方、縦縞検出部４２３により縦縞でないと判定された場合には（ステップＳ５０２のＮｏ）、補間処理部４２５は、欠落した輝度信号Ｙ０のみを隣の輝度信号Ｙ１をホールドして置き換える（ステップＳ５０４）（図６（ｂ）参照）。さらに、欠落した色差信号Ｃｂ、Ｃｒについては、補間処理部４２５は、ラインメモリ４２４に保持されている上位ラインの色差信号で置き換える（ステップＳ５０５）。
【００３３】
次に、ステップＳ５０１での判定の結果、ヘルパー・データのみが欠落した場合には、図３（ｂ）に示したように特殊再生用データのマクロブロックにおける輝度信号Ｙ１、Ｙ２及びＹ３が欠落しており、色差信号Ｃｂ、Ｃｒは正常である。このとき、縦縞検出部４２３により縦縞であると判定された場合（ステップＳ５０６のＹｅｓ）、補間処理部４２５は、ラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（ステップＳ５０７）。具体的には、補間処理部４２５は、対象となるラインが輝度信号Ｙ０、Ｙ１のラインであれば、欠落した輝度信号Ｙ１に対応する輝度信号Ｙ０を破棄し、輝度信号Ｙ０、Ｙ１を共にラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える。また、補間処理部４２５は、対象となるラインが輝度信号Ｙ２、Ｙ３のラインであれば、双方とも欠落しているのでラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（図７（ａ）参照）。
【００３４】
一方、縦縞検出部４２３により縦縞でないと判定された場合には（ステップＳ５０６のＮｏ）、補間処理部４２５は、対象となるラインが輝度信号Ｙ０、Ｙ１のラインであれば、欠落した輝度信号Ｙ１を隣の輝度信号Ｙ０をホールドして置き換え、対象となるラインが輝度信号Ｙ２、Ｙ３のラインであれば、ラインメモリ４２４に保持されている上位ラインの輝度信号で置き換える（ステップＳ５０８）（図７（ｂ）参照）。
【００３５】
次に、ステップＳ５０１での判定の結果、ベース・データとヘルパー・データの両方が欠落している場合には、輝度信号Ｙ０〜Ｙ３及び色差信号Ｃｂ、Ｃｒのすべてが欠落しているので、補間処理部４２５は、欠落した輝度信号及び色差信号のすべてをラインメモリ４２４に保持されている上位ラインのデータで置き換える（ステップＳ５０９）（図８参照）。
以上のような補間処理を、全ラインに対して施すことで特殊再生用データ１フレームに対して補間処理された特殊再生画像が得られる。
【００３６】
このようにして特殊再生用データ処理部４０６により伸張処理された特殊再生画像は、映像信号処理部４０９に供給され、映像信号処理部４０９にて表示部４１０の表示サイズに合わせて画像サイズの変換が行われ、表示部４１１に出力される。これにより、表示部４１１にて特殊再生画像が表示される。また、映像信号処理部４０９に供給された特殊再生画像は、映像信号処理部４０９よりＤ／Ａ部４１１に供給され、Ｄ／Ａ部４１１にてアナログ映像信号へ変換された後にビデオ信号として出力される。
【００３７】
図６〜図８は、上述した補間処理を示した図であり、全ラインに対し、エラーの状況に応じて図６〜図８に示す補間処理を適宜施すことで特殊再生用データ１フレームに対して補間処理された特殊再生画像が得られる。なお、図６〜図８においては、映像イメージの輝度信号（輝度値）についてのみ示しており、色差信号については省略する。
【００３８】
図６（ａ）、図６（ｂ）は、ベース・データのみが欠落した場合の補間処理を示している。図６（ａ）に示すように縦縞模様であると判定された場合には、欠落した輝度信号Ｙ０に対応する、すなわち欠落した輝度信号Ｙ０と同じマクロブロックに属する輝度信号Ｙ１を破棄し、当該輝度信号Ｙ０、Ｙ１が上位ラインの輝度信号Ｙ２、Ｙ３でそれぞれ補間される。また、図６（ｂ）に示すように縦縞模様でないと判定された場合には、欠落した輝度信号Ｙ０がそれに対応する隣の輝度信号Ｙ１（同じマクロブロックに属する輝度信号Ｙ１）で補間される。
【００３９】
図７（ａ）、図７（ｂ）は、ヘルパー・データのみが欠落した場合の補間処理を示している。図７（ａ）に示すように縦縞模様であると判定された場合には、欠落した輝度信号Ｙ１に対応する、すなわち欠落した輝度信号Ｙ１と同じマクロブロックに属する輝度信号Ｙ０を破棄し、当該輝度信号Ｙ０、Ｙ１が上位ラインの輝度信号Ｙ２、Ｙ３でそれぞれ補間される。さらに、欠落した輝度信号Ｙ２、Ｙ３が、上位ラインの輝度信号、すなわち同じマクロブロックに属する破棄された輝度信号Ｙ０と欠落した輝度信号Ｙ１を補間する上位ラインの輝度信号Ｙ２、Ｙ３でそれぞれ補間される。
【００４０】
また、図７（ｂ）に示すように縦縞模様でないと判定された場合には、欠落した輝度信号Ｙ１がそれに対応する隣の輝度信号Ｙ０（同じマクロブロックに属する輝度信号Ｙ０）で補間される。さらに、欠落した輝度信号Ｙ２、Ｙ３が、上位ラインの輝度信号でそれぞれ補間される。したがって、ヘルパー・データのみが欠落し縦縞模様でないと判定された場合には、欠落した輝度信号Ｙ１、Ｙ２及びＹ３のすべてが、同じマクロブロックに属する輝度信号Ｙ０で補間される。
【００４１】
また、図８は、ベース・データ及びヘルパー・データの双方が欠落した場合の補間処理を示している。図８に示すようにベース・データ及びヘルパー・データをともに欠落した場合には、欠落した輝度信号Ｙ０〜Ｙ３が上位ラインの輝度信号で補間される。
【００４２】
以上、説明したように本実施形態によれば、特殊再生時に特殊再生用データのベース・データとヘルパー・データについて独立に欠落を検出し、欠落が検出された特殊再生用データの種類（欠落したパケットの種類、言い換えればベース・データであるかヘルパー・データであるか）と縦縞検出部４２３での検出結果に基づいて、欠落が検出されたパケットに対応するベース・データ、ヘルパー・データの輝度信号を独立に同じマクロブロックに属する輝度信号及び上位ラインの輝度信号を取捨選択して適応的に置き換える。これにより、特殊再生用データの欠落があっても、ベース・データとヘルパー・データについて独立に適応的な補間処理を行い、凹凸の目立たない良好かつ自然な特殊再生用画像を得ることができる。
【００４３】
なお、上述した実施形態では、特殊再生用データ処理部４０６に縦縞検出部４２３を設けて特殊再生画像の特徴として縦縞模様であるか否かを検出し、その検出結果に応じて欠落した特殊再生用データの補間処理を行うようにしているが、本発明はこれに限定されるものではない。例えば、縦縞検出部を横縞検出部に置き換えて特殊再生画像の特徴として横縞模様であるか否かを検出し、その検出結果に応じて欠落した特殊再生用データの補間処理を行うようにしても良いし、縦縞検出部と横縞検出部との両方を備えて同様に欠落した特殊再生用データの補間処理を行うようにしても良い。このようにした場合でも同様に、その検出結果により適応的に欠落した特殊再生用データの補間処理を行うことが可能である。
【００４４】
（本発明の他の実施形態）
上述した実施形態の機能を実現するべく各種のデバイスを動作させるように、該各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、前記実施形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格納されたプログラムに従って前記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
また、この場合、前記ソフトウェアのプログラムコード自体が上述した実施形態の機能を実現することになり、そのプログラムコード自体は本発明を構成する。また、そのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記録媒体は本発明を構成する。かかるプログラムコードを記憶する記録媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施形態の機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているＯＳ（オペレーティングシステム）あるいは他のアプリケーションソフト等と共同して上述の実施形態の機能が実現される場合にもかかるプログラムコードは本発明の実施形態に含まれることは言うまでもない。
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施形態の機能が実現される場合にも本発明に含まれることは言うまでもない。
【００４５】
なお、前記実施形態は、何れも本発明を実施するにあたっての具体化のほんの一例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
【図面の簡単な説明】
【００４６】
【図１】通常再生用の主画像と特殊再生用画像との解像度の関係を示す図である。
【図２】特殊再生用画像が生成される時間間隔を説明するための図である。
【図３】特殊再生用データがパケット単位で欠落した様子を示す図である。
【図４】本発明の実施形態における再生装置の構成例を示すブロック図である。
【図５】特殊再生用データの補間処理動作を示すフローチャートである。
【図６】ベース・データが欠落した場合の補間処理を説明するための図である。
【図７】ヘルパー・データが欠落した場合の補間処理を説明するための図である。
【図８】ベース・データ及びヘルパー・データの両方が欠落した場合の補間処理を説明するための図である。
【符号の説明】
【００４７】
４０２ ＣＰＵ
４０３ 磁気テープ
４０４ 再生・誤り訂正符号処理部
４０６ 特殊再生用データ処理部
４０８ 復号化処理部
４０９ 映像信号処理部
４２１ データ欠落検出部
４２２ 伸張処理部
４２３ 縦縞検出部
４２４ ラインメモリ
４２５ 補間処理部
【特許請求の範囲】
【請求項１】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、
前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、
複数の補間方法を選択的に用いて、前記検出手段により欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理手段とを備えることを特徴とする再生装置。
【請求項２】
前記特殊再生用データに係る画像の特徴を判定する判定手段を備え、前記補間処理手段は前記判定手段の判定結果に応じて、前記第１のデータと第２のデータの補間方法を決定することを特徴とする請求項１記載の再生装置。
【請求項３】
前記複数の補間方法は、水平方向に隣接する画素のデータを用いて補間処理を行う第１の方法と、垂直方向に隣接する画素のデータを用いて補間処理を行う第２の方法とを含むことを特徴とする請求項１または２記載の再生装置。
【請求項４】
前記複数の補間方法は、同一ブロック内のデータを用いて補間処理を行う第１の補間方法と、他のブロックのデータを用いて補間処理を行う第２の補間方法とを含むことを特徴とする請求項１または２記載の再生装置。
【請求項５】
前記判定手段は、前記画像の特徴として、縦縞模様及び横縞模様の少なくとも一方の判定を行うことを特徴とする請求項２記載の再生装置。
【請求項６】
前記第１のデータと第２のデータはそれぞれ独立にエラー訂正符号化処理されて記録されており、前記検出手段は前記再生手段により再生された特殊再生用データに対してエラー訂正復号処理を施すエラー訂正手段を含み、前記特殊再生用データ中訂正不能なエラーを前記欠落データとして検出することを特徴とする請求項１〜５の何れか１項に記載の再生装置。
【請求項７】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、
前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、
前記検出手段により検出された欠落データを補間処理する補間処理手段とを備え、
前記補間処理手段は、同一ブロック内の第１のデータが欠落し、第２のデータの欠落がなかった場合、前記第１のデータ及び前記第２のデータの一部を他のデータによって置き換えることを特徴とする再生装置。
【請求項８】
前記特殊再生用データに係る画像の特徴を判定する判定手段を備え、同一ブロック内の第１のデータが欠落し、第２のデータの欠落がなく、且つ、前記判定手段により所定の特徴が判定された場合に前記第１のデータ及び前記第２のデータの一部を他のデータによって置き換え、前記判定手段により所定の特徴が判定されなかった場合には前記第１のデータのみを他のデータで置き換えることを特徴とする請求項７記載の再生装置。
【請求項９】
前記判定手段は、前記特殊再生用データに係る画像が縦縞模様を持つことを判定し、
前記補間処理手段は、当該判定結果に応じて、前記第１のデータ及び前記第２のデータのうち前記第１のデータの水平方向に隣接するデータとを、それぞれ垂直方向に隣接する画素のデータにより置き換えることを特徴とする請求項８記載の再生装置。
【請求項１０】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生工程と、
前記再生工程で読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出工程と、
複数の補間方法を選択的に用いて、前記検出工程にて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理工程とを有することを特徴とする再生方法。
【請求項１１】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生ステップと、
前記読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出ステップと、
複数の補間方法を選択的に用いて、前記検出ステップにて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理ステップとをコンピュータに実行させるためのプログラム。
【請求項１２】
請求項１１記載のプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
【請求項１】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、
前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、
複数の補間方法を選択的に用いて、前記検出手段により欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理手段とを備えることを特徴とする再生装置。
【請求項２】
前記特殊再生用データに係る画像の特徴を判定する判定手段を備え、前記補間処理手段は前記判定手段の判定結果に応じて、前記第１のデータと第２のデータの補間方法を決定することを特徴とする請求項１記載の再生装置。
【請求項３】
前記複数の補間方法は、水平方向に隣接する画素のデータを用いて補間処理を行う第１の方法と、垂直方向に隣接する画素のデータを用いて補間処理を行う第２の方法とを含むことを特徴とする請求項１または２記載の再生装置。
【請求項４】
前記複数の補間方法は、同一ブロック内のデータを用いて補間処理を行う第１の補間方法と、他のブロックのデータを用いて補間処理を行う第２の補間方法とを含むことを特徴とする請求項１または２記載の再生装置。
【請求項５】
前記判定手段は、前記画像の特徴として、縦縞模様及び横縞模様の少なくとも一方の判定を行うことを特徴とする請求項２記載の再生装置。
【請求項６】
前記第１のデータと第２のデータはそれぞれ独立にエラー訂正符号化処理されて記録されており、前記検出手段は前記再生手段により再生された特殊再生用データに対してエラー訂正復号処理を施すエラー訂正手段を含み、前記特殊再生用データ中訂正不能なエラーを前記欠落データとして検出することを特徴とする請求項１〜５の何れか１項に記載の再生装置。
【請求項７】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生手段と、
前記再生手段により読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出手段と、
前記検出手段により検出された欠落データを補間処理する補間処理手段とを備え、
前記補間処理手段は、同一ブロック内の第１のデータが欠落し、第２のデータの欠落がなかった場合、前記第１のデータ及び前記第２のデータの一部を他のデータによって置き換えることを特徴とする再生装置。
【請求項８】
前記特殊再生用データに係る画像の特徴を判定する判定手段を備え、同一ブロック内の第１のデータが欠落し、第２のデータの欠落がなく、且つ、前記判定手段により所定の特徴が判定された場合に前記第１のデータ及び前記第２のデータの一部を他のデータによって置き換え、前記判定手段により所定の特徴が判定されなかった場合には前記第１のデータのみを他のデータで置き換えることを特徴とする請求項７記載の再生装置。
【請求項９】
前記判定手段は、前記特殊再生用データに係る画像が縦縞模様を持つことを判定し、
前記補間処理手段は、当該判定結果に応じて、前記第１のデータ及び前記第２のデータのうち前記第１のデータの水平方向に隣接するデータとを、それぞれ垂直方向に隣接する画素のデータにより置き換えることを特徴とする請求項８記載の再生装置。
【請求項１０】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生工程と、
前記再生工程で読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出工程と、
複数の補間方法を選択的に用いて、前記検出工程にて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理工程とを有することを特徴とする再生方法。
【請求項１１】
符号化された通常再生用の主画像データと、それぞれ第１のデータと第２のデータからなる複数のブロックから構成された特殊再生用データとが記録されている記録媒体から前記主画像データと特殊再生用データを読み出す再生ステップと、
前記読み出された特殊再生用データの各ブロックにおける第１のデータと第２のデータについて独立に欠落を検出する検出ステップと、
複数の補間方法を選択的に用いて、前記検出ステップにて欠落が検出された第１のデータと第２のデータとを独立に補間処理する補間処理ステップとをコンピュータに実行させるためのプログラム。
【請求項１２】
請求項１１記載のプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２００７−１３６６４（Ｐ２００７−１３６６４Ａ）
【公開日】平成１９年１月１８日（２００７．１．１８）
【国際特許分類】
【出願番号】特願２００５−１９２５６６（Ｐ２００５−１９２５６６）
【出願日】平成１７年６月３０日（２００５．６．３０）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成１９年１月１８日（２００７．１．１８）
【国際特許分類】
【出願日】平成１７年６月３０日（２００５．６．３０）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]