画像処理装置及び画像処理方法
【課題】画像が合成された場合、色が表示上変化するのを防ぐことができる画像処理装置及び画像処理方法を提供する。
【解決手段】複数の画像信号を合成し、合成画像信号を生成するビデオ・グラフィック・プロセッサ１２と、合成画像信号を伝送する場合、合成画像信号の色空間規格として第１の色空間規格又は第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格のいずれかの識別フラグを伝送するＨＤＭＩＴｘ１４とを備え、ホストＣＰＵ１３は、色の表示上の変化を防ぐように第１又は第２の色空間規格を決定する。
【解決手段】複数の画像信号を合成し、合成画像信号を生成するビデオ・グラフィック・プロセッサ１２と、合成画像信号を伝送する場合、合成画像信号の色空間規格として第１の色空間規格又は第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格のいずれかの識別フラグを伝送するＨＤＭＩＴｘ１４とを備え、ホストＣＰＵ１３は、色の表示上の変化を防ぐように第１又は第２の色空間規格を決定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、色空間情報が異なる複数の画像データを処理する画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
従来より、ディスプレイやＨＤＴＶ（High Definition TeleVision）の放送では、ｓＲＧＢ（ＩＥＣ（International Electrotechnical Commission）６１９６６−２−１）やＩＴＵ−Ｒ（International Telecommunication Union-Radiocommunication Sector） ＢＴ．７０９で規格化された色空間が広く使われているが、近年、広色域パネルの出現により、受像機側でｓＲＧＢを超える広色域の色表現が可能となっている。
【０００３】
このような受像機には、パネルの広色域を活かすために、ｓＲＧＢの色空間の映像コンテンツに対して信号処理によって色域を伸長する技術（以下、「色域伸長処理」と呼ぶ。）が採用されており、受像機は、ｓＲＧＢ色空間でクリップされてしまうような彩度の高い色を色域伸長処理することで、より鮮やかな色を再現することができる。また、ユーザは、受像機の画質モードを選択することにより、色域伸長処理をオン／オフすることが可能となっている。
【０００４】
また、受像機は、例えば、ＨＤＭＩ（High-Definition Multimedia Interface）を使って、映像信号とともに色空間情報を、ソース機器から受信することも可能となっており、色空間情報に従って、ＢＴ．７０９の場合は、色域伸長処理をオン状態にし、他の広色域の色空間情報の場合は、色域伸長処理をオフ状態にする、といった制御を自動的に行うことができる。
【０００５】
一方、撮像素子やカメラ信号処理も広色域化しており、カメラで撮影したｓＲＧＢを超える色域の広色域信号を、ディスクやテープへ記録し、再生することも可能となっている。また、ディスクやテープに記録された広色域信号を、ＩＥＥＥ（Institute of Electrical and Electronic Engineers）１３９４などのデジタルインターフェースを介して光ディスクレコーダにダビングしたり、広色域信号が記録された該ディスクを光ディスクレコーダやプレーヤで再生したりすることも可能となっている。また、カメラやレコーダは、ＨＤＭＩを使って、これらの広色域信号や色空間情報などを受像機に伝送することもできる。
【０００６】
【特許文献１】特開２００６−１８０４７７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、受像機の色域伸長処理をオン／オフすると、表示される画像の色味、色の濃さなどが変化する。例えば、一定色のグラフィックスの背景に動画／静止画をブレンディングする場合、背景の動画／静止画の属性によって色空間情報を変化させると、受像機は該色空間情報に従って色域伸長処理を切り換えるため、一定色であるはずのグラフィックスの色が表示上変化してしまう。このため、ユーザにとって、表示上見苦しく感じることがあった。
【０００８】
また、複数の動画／静止画やグラフィックスなどを合成する場合、例えば、合成画の色空間規格が、全てＢＴ．７０９の状態から、一つの動画／静止画が広色域に変化した際にも、動画／静止画の属性によって色空間情報を変化させると、受像機は該色空間情報に従って色域伸長処理を切り換えるため、グラフィックスや他の動画／静止画の色が表示上変化してしまい、見苦しく感じることがあった。
【０００９】
本発明は、このような従来の実情に鑑みて提案されたものであり、画像が合成された場合、色が表示上変化するのを防ぐことができる画像処理装置及び画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述の課題を解決するために、本発明に係る画像処理装置は、第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理装置であって、複数の画像信号を合成し、合成画像信号を生成する画像処理手段と、上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御手段と、所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送手段とを備え、上記制御手段は、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定する。
【００１１】
また、本発明に係る画像処理方法は、第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理方法であって、複数の画像信号を合成し、合成画像信号を生成する画像処理工程と、上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御工程と、所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送工程とを備え、上記制御工程では、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定する。
【発明の効果】
【００１２】
本発明によれば、合成画像信号の色空間情報が固定されているため、受像機側で色が表示上変化するのを防ぐことができる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
【００１４】
図１は、本発明の一実施の形態に係る再生システムを示す図である。この再生システムは、記録再生装置１と、受像機２とが、ＨＤＭＩ（High-Definition Multimedia Interface）ケーブル３を介して接続されており、受像機２は、第１の色空間規格の画像データを、第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像データに擬似的に色域を伸張して表示することが可能となっている。第１の色空間規格の例としては、ｓＲＧＢ（ＩＥＣ６１９６６−２−１）、ＩＴＵ−Ｒ ＢＴ．７０９等が挙げられる。また、第２の色空間規格の例としては、ｘｖＹＣＣ等が挙げられる。
【００１５】
ｘｖＹＣＣは、国際電気標準会議（IEC）が国際標準（IEC 61966−2−4）として発行した規格であり、ＨＤＴＶ（High Definition TeleVision）で利用するＩＴＵ−Ｒ ＢＴ．７０９の色域（ｓＲＧＢと同等）との互換性を確保しながら、色空間を広げたものである。そして、このｘｖＹＣＣによれば、現行の動画コンテンツの色空間規格「ＩＴＵ−Ｒ ＢＴ．７０９」（静止画ではｓＲＧＢに相当）では表現できない色を表現することができる。
【００１６】
図２は、ｘｖＹＣＣの色域を平面に投射した場合の模式図である。この図２において、色域ａはｓＲＧＢの色域であり、色域ｂはｘｖＹＣＣで拡張された色域である。図２に示すようにｓＲＧＢでは、Ｒ，Ｇ，Ｂそれぞれを０〜１で表現する色のみを利用してきたのに対し、ｘｖＹＣＣでは負の値や１を超える色も定義されている。したがって、例えば、受像機２がｓＲＧＢの色域ａの映像コンテンツを色域ｂにまで伸長する処理（以下、「色域伸長処理」と呼ぶ。）を行って、物体の素材感・立体感を忠実に再現すれば、ユーザは広色域のカラー画像を楽しむことができる。
【００１７】
ＨＤＭＩケーブル３の規格であるＨＤＭＩは、ＩＥＥＥ１３９４の上位互換とされており、物理層にはＴＭＤＳ（Transition Minimized Differential Signaling）、信号の暗号化にはＨＤＣＰ（High-bandwidth Digital Content Protection）、機器間認証にはＥＤＩＤ（Extended Display Identification Data）、系全体の制御系接続にはＣＥＣ（Consumer Electronics Control）が採用されている。また、ＨＤＭＩバージョン１．３には、メタデータとｘｖＹＣＣ色空間の定義が追加されている。したがって、例えば、受像機２が記録再生装置１から受信したメタデータと自身の色域情報とに基づいて画像データを色域伸張処理すれば、より具体的には画像データに対し機器間の色空間の変換処理（Gamut Mapping Algorithm）をすれば、正しい色を再現することができる。
【００１８】
図１に戻って、再生システムの構成について説明する。記録再生装置１は、ＭＰＥＧ（Moving Picture Expert Group）デコーダ１１と、ビデオ・グラフィック・プロセッサ１２と、ホストＣＰＵ（Central Processing Unit）１３と、ＨＤＭＩ Ｔｘ（トランスミッタ）１４と、ＨＤＭＩコネクタ１５とを備えている。
【００１９】
ＭＰＥＧデコーダ１１は、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰＥＧ４−ＡＶＣ／Ｈ．２６４などのビデオストリームをデコードし、ベースバンド信号を生成する。
【００２０】
ビデオ・グラフィック・プロセッサ１２は、ＭＰＥＧデコーダ１１にて生成されたベースバンド信号を所望の画枠サイズへ変換処理したり、複数のベースバンド信号を合成処理したりする。
【００２１】
ホストＣＰＵ１３は、ＭＰＥＧデコーダ１１及びビデオ・グラフィック・プロセッサ１２を制御する。例えば、ＭＰＥＧデコーダ１１に所望のビデオストリームのデコードを指示し、ビデオ・グラフィック・プロセッサ１２にデコードされたベースバンド信号を用いた合成画像の生成を指示する。また、合成画像の色空間規格を決定し、その色空間情報をＨＤＭＩ Ｔｘ１４に送る。また、ホストＣＰＵ１３は、ＨＤＭＩケーブル３のＤＤＣ（Display Data Channel）ラインにより受像機２と通信を行う。
【００２２】
ＨＤＭＩ Ｔｘ１４は、ビデオ・グラフィック・プロセッサ１２にて信号処理された映像音声信号とともに、ホストＣＰＵ１３から送られた色空間規格を示す色域識別フラグ、メタデータなどの属性データをＴＭＤＳ信号に変換し、ＨＤＭＩコネクタ１５に出力する。この属性データは、ＨＤＭＩ規格で定義されているＡＶＩ（Auxiliary Video Information）ＩｎｆｏＦｒａｍｅを使って伝送することができる。
【００２３】
ＨＤＭＩコネクタ１５は、ＨＤＭＩケーブル３と接続され、ＨＤＭＩ Ｔｘ１４にて変換されたＴＭＤＳ信号を受像機２に伝送する。
【００２４】
次に、受像機２の構成について説明する。受像機２は、ＨＤＭＩコネクタ２１と、ＨＤＭＩ Ｒｘ（レシーバ）２２と、ホストＣＰＵ２３と、ＥＤＩＤＲＯＭ（Extended Display Identification Data Read Only Memory）２４と、ビデオ・グラフィック・プロセッサ２５と、ディスプレイデバイス２６とを備えている。
【００２５】
ＨＤＭＩコネクタ２１は、ＨＤＭＩケーブル３と接続され、ＴＭＤＳ信号を受信する。
【００２６】
ＨＤＭＩ Ｒｘ２２は、ＴＭＤＳ信号から映像音声信号と属性データとを取得し、映像信号をビデオ・グラフィック・プロセッサ２５に送る。
【００２７】
ホストＣＰＵ２３は、属性データに基づいてビデオ・グラフィック・プロセッサ２５の色域伸長処理のオン／オフを制御する。具体的には、例えば、属性データの色空間情報がＩＴＵ−Ｒ ＢＴ．７０９の場合、ビデオ・グラフィック・プロセッサ２５の色域伸長処理をオン状態にし、属性データの色空間情報がｘｖＹＣＣの場合、ビデオ・グラフィック・プロセッサ２５の色域伸長処理をオフ状態にする。
【００２８】
ＥＤＩＤＲＯＭ２４には、受像機２のディスプレイ情報が記憶されており、例えば、受像機２の対応解像度情報、色域の種別を示す色空間情報が書き込まれている。ＥＤＩＤＲＯＭ２４に記憶されたディスプレイ情報は、ＨＤＭＩケーブル３のＤＤＣ（Display Data Channel）ラインを介して記録再生装置１に提供される。
【００２９】
図３は、ビデオ・グラフィック・プロセッサ２５の構成を示すブロック図である。ビデオ・グラフィック・プロセッサ２５は、メモリ２５１と、スケーラ２５２と、カラーエキスパンダ２５３と、ビデオエンコーダ２５４とを備えている。ＨＤＭＩ Ｒｘ２２から入力された映像信号は、メモリ２５１のビデオ・プレーンに書き込まれる。メモリ２５１に書き込まれた映像信号は、各プレーンから読み出され、スケーラ２５２で所望のサイズへのスケーリングが施される。また、ホストＣＰＵ２３からの命令に応じてカラーエキスパンダ２５３で色域拡張処理が施される。カラーエキスパンダ２５３は、例えば、ＢＴ．７０９の映像信号を擬似的にｘｖＹＣＣの映像信号の色域に拡張する。また、ｘｖＹＣＣの映像信号を色域伸張処理した場合、ｘｖＹＣＣの映像信号の色域を擬似的に拡張されたｘｖＹＣＣの映像信号の色域と同じにする。ビデオエンコーダ２５４は、所望の出力仕様になるようにタイミング生成、同期信号の付加などを行う。
【００３０】
ディスプレイデバイス２６は、広色域パネルを有し、ビデオ・グラフィック・プロセッサ２５にて信号処理された画面を表示する。
【００３１】
このように、受像機２は、映像音声信号とともに受信した属性データに応じて色伸張処理をオン／オフすることにより、画面内の物体を広色域の色空間で忠実に再現することができる。
【００３２】
ところで、このような再生システムにおいて、受像機２は該色空間情報に従って色域伸長処理を切り換えるため、例えば、記録再生装置１が一定色のグラフィックスの背景に動画／静止画をブレンディングし、背景の動画／静止画の属性によって色空間情報を変化させた場合、受像機２において一定色であるはずのグラフィックスの色が表示上変化してしまうことがある。以下では、このような問題を防ぐ方法について説明する。
【００３３】
図４は、記録再生装置１の構成を具体的に示すブロック図である。記録再生装置１は、ライン入力端子４１と、アナログチューナ４２と、ディスクドライブ４３と、ハードディスクドライブ４４と、ＩＥＥＥ１３９４端子４５と、デジタルチューナ４６と、ライン入力端子４１又はアナログチューナ４２からの入力信号のいずれか１つを選択するセレクタ４７と、セレクタ４７からの映像音声信号をデコードするビデオデコーダ４８と、ビデオデコーダ４８にてデコードされたベースバンド信号又はビデオ・グラフィック・プロセッサ５４にて画像合成等の信号処理が施されたベースバンド信号のいずれか１つを選択するセレクタ４９と、セレクタ４９からのベースバンド信号をエンコードするＭＰＥＧエンコーダ５０と、ＨＤＶ（High-Definition Video）プロセッサ５１と、ストリームプロセッサ５２と、ＭＰＥＧデコーダ５３ａ，５３ｂと、ビデオ・グラフィック・プロセッサ５４と、ＨＤＭＩ Ｔｘ５５と、ＤＡＣ５６と、ＨＤＭＩコネクタ５７と、コンポーネント端子５８と、コンポジット端子５９と、ホストＣＰＵ６０とを備えている。
【００３４】
ここで、ＭＰＥＧデコーダ５３ａ，５３ｂ、ビデオ・グラフィック・プロセッサ５４、ＨＤＭＩ Ｔｘ５５、ＨＤＭＩコネクタ５７、ホストＣＰＵ６０は、それぞれ図１に示すＭＰＥＧデコーダ１１、ビデオ・グラフィック・プロセッサ１２、ＨＤＭＩ Ｔｘ１４、ＨＤＭＩコネクタ１５、ホストＣＰＵ１３に対応するものである。
【００３５】
続いて、記録再生装置１における記録動作について説明する。ライン入力端子４１から入力される映像信号と、アナログチューナ４２から出力される映像信号は、セレクタ４７で所望の入力が選択された後、ビデオデコーダ４８に入力される。ビデオデコーダ４８は、例えば入力されたＮＴＳＣ方式のアナログ映像信号をＡ／Ｄ変換した後、輝度信号とクロマ信号とに分離するとともにデコード処理を施す。デコードされたベースバンドビデオ信号は、セレクタ４９、及びビデオ・グラフィック・プロセッサ５４に入力される。セレクタ４９で、ビデオデコーダ４８からの出力と、ビデオ・グラフィック・プロセッサ５４からの出力とのいずれかを選択した後、選択されたベースバンド信号がＭＰＥＧエンコーダ５０に入力される。ＭＰＥＧエンコーダ５０は、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰＥＧ４−ＡＶＣ／Ｈ．２６４など所望のエンコードを行う。エンコードされたストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２から、ＢＤ（Blu-ray Disc、商標）、ＤＶＤ（Digital Versatile Disc）などのディスクドライブ４３やハードディスクドライブ４４などにストリームが送られ、所望のメディアに記録される。
【００３６】
また、ＩＥＥＥ１３９４入力端子４５から入力されたストリームは、ＨＤＶプロセッサ５１を経てストリームプロセッサ５２に入力され、デジタルチューナ４６からのストリームもストリームプロセッサ５２に入力される。ストリームプロセッサ５２に入力されたストリームは、ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４などの所望のメディアに記録される。
【００３７】
また、ストリームプロセッサ５２に入力されたストリームは、ストリームプロセッサ５２で所望のビデオストリームの抜き出しやパーズなどの処理を施し、ＭＰＥＧデコーダ５３でデコードした後、ビデオ・グラフィック・プロセッサ５４、セレクタ４９を経由してＭＰＥＧエンコーダ５０に入力される。ＭＰＥＧエンコーダ５０は、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰＥＧ４−ＡＶＣ／Ｈ．２６４など所望のエンコードを行い、エンコードされたストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２から、ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４などにストリームが送られ、所望のメディアに記録される。
【００３８】
次に、記録再生装置１における再生動作について説明する。ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４で再生されたストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２は、所望のビデオストリームの抜き出しや、ストリームから画像データの色空間属性に関する情報などのパーズを行った後、ＭＰＥＧデコーダ５３ａ、５３ｂに送る。ＭＰＥＧデコーダ５３ａ、５３ｂは、画像データをデコードする。ＭＰＥＧデコーダ５３ａ、５３ｂでデコードされたベースバンドビデオ信号は、ビデオ・グラフィック・プロセッサ５４に入力される。ビデオ・グラフィック・プロセッサ５４では、所望の画枠サイズへの変換処理や種々のビデオ信号処理を施し、該映像信号にグラフィックス信号などを合成した後、ＨＤＭＩ Ｔｘ５５に送られる。ＨＤＭＩ Ｔｘ５５では、入力されたベースバンド信号をＴＭＤＳ信号に変換して、制御信号とともにＨＤＭＩコネクタ５７に出力する。また、ビデオ・グラフィック・プロセッサ５４の出力は、ＤＡＣ５６に入力され、Ｄ／Ａ変換したアナログコンポーネント信号がコンポーネント端子５８に出力されるとともに、Ｄ／Ａ変換したアナログコンポジットビデオ信号（あるいは、Ｙ／Ｃセパレートビデオ信号）もコンポジットビデオ端子（あるいは、Ｓ端子）５９に出力される。
【００３９】
次に、図１〜４を参照して記録再生装置１における伝送動作について説明する。ここで、ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４で再生されたストリームには、広色域映像信号とともに、色域の種別を識別するための識別フラグ、及び色域の付随情報であるメタデータが含まれているものとする。
【００４０】
再生された映像音声信号、及び識別フラグ等のメタデータを含んだストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２は、ストリームのパーズを行い、識別フラグ及び、メタデータを抽出し、ホストＣＰＵ６０は、ストリームの識別フラグ等のメタデータをストリームプロセッサ５２から取得する。識別フラグ及びメタデータは、エレメンタリーストリームの付加情報として記録してあるので、ビデオ信号との同期は常に保たれる。広色域信号を含んだストリームは、前述の再生系の説明の通り、ＭＰＥＧデコーダ５３ａ、５３ｂでデコードされた後、ビデオ・グラフィック・プロセッサ５４を経てＨＤＭＩ Ｔｘ５５に送られる。
【００４１】
また、ホストＣＰＵ６０は、ＨＤＭＩコネクタ５７に接続されたＨＤＭＩケーブル３のＤＤＣ（Ｄｉｓｐｌａｙ Ｄａｔａ Ｃｈａｎｎｅｌ）ラインにより受像機２と通信を行い、受像機２に内蔵するＨＤＭＩ Ｒｘ（レシーバ）２２、ホストＣＰＵ２３を介して、ＥＤＩＤ（Ｅｘｔｅｎｄｅｄ Ｄｉｓｐｌａｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄａｔａ） ＲＯＭ２４に書かれているディスプレイ情報を取得する。ＥＤＩＤ ＲＯＭ２４には、受像機２の対応解像度情報などの他に、色域の種別を示す色空間情報も書かれている。したがって、ホストＣＰＵ６０は、ディスプレイ情報を取得することにより、接続している受像機２が広色域映像信号に対応しているか否かを判別することができる。そして、ＨＤＭＩケーブル３によって接続された受像機２が広色域映像信号に対応している場合、ホストＣＰＵ６０は、広色域映像信号を伝送する際、映像信号の属性としてディスクから取得した色域識別フラグ、及びメタデータをＨＤＭＩ Ｔｘ５５にセットすることができる。
【００４２】
また、後述するように、ホストＣＰＵ６０は、ビデオ・グラフィック・プロセッサ５４にて合成される各画像のメタデータを取得し、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを所望の値に変更する。具体的には、画像合成される各画像の色空間規格や画像合成前の色空間規格に基づいてＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを決定する。
【００４３】
ＨＤＭＩ Ｔｘ５５は、映像音声信号とともに色域識別フラグ、メタデータなどの属性データをＴＭＤＳ信号に変換し、ＨＤＭＩコネクタ５７から出力する。色域の種別を示す識別フラグ、メタデータは、ＨＤＭＩ規格で定義されているＡＶＩ（Ａｘｉｌｉａｒｙ Ｖｉｄｅｏ Ｉｎｆｏｒｍａｔｉｏｎ） ＩｎｆｏＦｒａｍｅを使って伝送することができる。例えば、色域識別フラグは、ＡＶＩ ＩｎｆｏＦｒａｍｅパケット内のＣｏｌｏｒｉｍｅｔｒｙやＥｘｔｅｎｄｅｄ Ｃｏｌｏｒｉｍｅｔｒｙで定義される。また、オーディオ信号の属性データは、Ａｕｄｉｏ ＩｎｆｏＦｒａｍｅを用いることができる。
【００４４】
図５は、画像を合成する際のビデオ・グラフィック・プロセッサ５４の機能ブロック図である。ビデオ・グラフィック・プロセッサ５４は、メモリ５４１と、合成処理部５４２ａ〜５４２ｄと、グラフィックエンジン５４３と、ＪＰＥＧエンジン５４４とを備えている。ここで、合成処理部５４２ａ〜５４２ｄは、出力フォーマット毎に用意されており、それぞれスケーラ５４５と、ブレンダ５４６と、ビデオエンコーダ５４７とを備えている。
【００４５】
ビデオデコーダ４８の出力、及びＭＰＥＧデコーダ５３ａ、５３ｂの出力は、メモリ５４１のビデオ・プレーンに書き込まれる。また、グラフィックエンジン５４３は、メモリ５４１のグラフィックス・プレーンにグラフィックス・データを書き込む。ＪＰＥＧエンジン５４４は、ＪＰＥＧファイルをデコードして、メモリ５４１のビデオ・プレーンにＪＰＥＧデータを書き込む。メモリ５４１に書き込まれた画像データは、各プレーンから読み出され、スケーラ５４５で所望のサイズへのスケーリングなどが行われ、ブレンダ５４６に送られる。ブレンダ５４６は、各プレーンから読み出された画像の合成を行う。ビデオエンコーダ５４７は、所望の出力仕様になるようにタイミング生成、同期信号の付加などを行う。
【００４６】
以下、画像合成処理する際のホストＣＰＵ６０の動作について具体例を挙げて説明する。なお、具体的な色空間規格として、ＢＴ．７０９を挙げ、それよりも広い色域の色空間規格としてｘｖＹＣＣ（xvYCC709）を挙げて説明する。
【００４７】
図６は、画面合成を行わない場合、すなわち、１つの色空間規格からなる画像を出力する場合の映像信号の色空間規格と属性データの色空間情報との関係を示す模式図である。時刻ｔ０において、映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わる際、ホストＣＰＵ６０は、映像信号の色空間規格と同期して、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグをＢＴ．７０９からｘｖＹＣＣ７０９に切り換える。また、時刻ｔ１において、映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わる際、ホストＣＰＵ６０は、映像信号の色空間規格と同期して、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグをＢＴ．７０９からｘｖＹＣＣ７０９に切り換える。
【００４８】
図７〜図１０は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１〜具体例４を示す模式図である。これらの具体例では、画像ａ、画像ｂ、画像ｃの３つの画像が合成された合成画面の映像信号を出力する。時刻ｔ０及び時刻ｔ１において、画像の色空間規格が変化し、それに伴い出力する映像信号の色空間規格も変化している。これらの場合において、ホストＣＰＵ６０は、色空間情報を固定して出力する。
【００４９】
図７に示す具体例１では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例１において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にｘｖＹＣＣ７０９に固定する。具体例１では、色空間情報が常にｘｖＹＣＣ７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５０】
図８に示す具体例２では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例２において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にｘｖＹＣＣ７０９に固定する。具体例２では、色空間情報が常にｘｖＹＣＣ７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５１】
図９に示す具体例３では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例３において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にＢＴ．７０９に固定する。具体例３では、色空間情報が常にＢＴ．７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５２】
図１０に示す具体例４では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例４において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にＢＴ．７０９に固定する。具体例４では、色空間情報が常にＢＴ．７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５３】
このように合成する画面の色空間規格と関係なく、１つの色空間規格の色域識別フラグをＨＤＭＩ Ｔｘ５５にセットすることにより、画面合成を行う際、色が表示上変化するのを防ぐことができる。
【００５４】
また、合成画面を出力する際の色空間規格は、ユーザが選択可能とすることが好ましい。例えば、「広色域設定」＝［自動／オフ]の切り換えをユーザが設定できるようにする。自動設定の場合には、ソースである記録再生装置１から出力される映像信号が広色域であって、シンクである受像機２が広色域対応可能な装置である場合にのみ、ｘｖＹＣＣ７０９の色空間情報を出力し、オフ設定の場合は、ＢＴ．７０９を固定して出力する。
【００５５】
また、例えば、「広色域設定」＝［オン／オフ］の切り換えをユーザが設定できるようにする。オン設定の場合は、受像機２が広色域対応可能な装置である場合に、ｘｖＹＣＣ７０９固定で色空間情報を伝送し、オフ設定の場合は、ＢＴ．７０９に固定して出力する。
【００５６】
なお、シンクである受像機２が広色域対応可能な装置であるか否かは、受像機２のＥＤＩＤ ＲＯＭ２４に書かれているディスプレイ情報を取得することにより検知することができる。
【００５７】
図１１〜図１５は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例５〜具体例９を示す模式図である。これらの具体例では、時刻ｔ０において、画像ａ、画像ｂ、画像ｃの３つの画像が合成された画面の映像信号が出力される。また、時刻ｔ１において画像ａの映像信号の色空間規格が変化する。これらの場合において、ホストＣＰＵ６０は、色空間情報を前時刻のものに固定して出力する。
【００５８】
図１１に示す具体例５では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例５において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のｘｖＹＣＣ７０９に固定して出力する。この具体例５において、例えば、〜ｔ０の画像と画像ｃとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００５９】
図１２に示す具体例６では、時刻ｔ０の前において、ＢＴ．７０９の画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例６において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のＢＴ．７０９に固定して出力する。この具体例６において、例えば、〜ｔ０の画像と画像ｂとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６０】
図１３に示す具体例７では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例７において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のｘｖＹＣＣ７０９に固定して出力する。この具体例７において、例えば、〜ｔ０の画像と画像ａとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６１】
図１４に示す具体例８では、時刻ｔ０の前において、ＢＴ．７０９の画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例８において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のＢＴ．７０９に固定して出力する。この具体例８において、例えば、〜ｔ０の画像と画像ｃとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６２】
図１５に示す具体例９では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの画面における面積が変更されている。この具体例９において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のｘｖＹＣＣ７０９に固定して出力する。この具体例９において、例えば、〜ｔ０の画像と画像aとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６３】
このように、画面合成を行う直前の色空間情報の状態を、画面合成モードに遷移した後も保持することにより、画面合成を行う際、色が表示上変化するのを防ぐことができる。
【００６４】
図１６及び図１７は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１０及び具体例１１を示す模式図である。これらの具体例では、時刻ｔ０において、画像ａ、画像ｂ、画像ｃの３つの画像が合成された画面の映像信号が出力される。また、時刻ｔ１において画像ａの映像信号の色空間規格が変化する。これらの場合において、ホストＣＰＵ６０は、色空間情報を面積やサイズ（画角）が最も大きい画像の色空間規格に合わせる。合成画面における各画像の大きさは、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５からの情報を取得することにより、検知することができる。
【００６５】
図１６に示す具体例１０では、時刻ｔ０の前において、ＢＴ．７０９の画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例１０において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを、合成画面を構成する画像の中で最も面積が大きい映像信号のｘｖＹＣＣ７０９にして出力する。具体的には、ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａ及び画像ｃの方がＢＴ．７０９の画像ｂよりも大きいと判断し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ｃの方がＢＴ．７０９の画像ａ及び画像ｂよりも大きいと判断し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００６６】
図１７に示す具体例１１では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例１１において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを、合成画面を構成する画像の中で最も面積が大きい映像信号のＢＴ．７０９にして出力する。具体的には、ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたＢＴ．７０９の画像ｂ及び画像ｃの方がｘｖＹＣＣの画像ａよりも大きいと判断し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、すべてＢＴ．７０９の画像となるため、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００６７】
このように合成画面のサイズや表示面積が一番大きい映像の色空間情報に従うことにより、画面合成を行う際、色が表示上変化する箇所が少なくなるため、表示上の見苦しさを防ぐことができる。
【００６８】
図１８及図１９は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１２及び具体例１３を示す模式図である。これらの具体例では、時刻ｔ０において、サイズが同じ画像ａ、画像ｂの２つの画像が合成された画面の映像信号が出力される。また、時刻ｔ１において画像ａの映像信号の色空間規格が変化する。これらの場合において、ホストＣＰＵ６０は、サイズが同じ場合は、色空間情報を前時刻のものにして出力する。
【００６９】
図１８に示す具体例１２では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさが等しいと判断し、時刻ｔ０よりも前時刻の色空間情報のｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、すべてＢＴ．７０９の画像となるため、ＢＴ．７０９の識別フラグをＨＤＭＩ Ｔｘ５５にセットする。
【００７０】
図１９に示す具体例１３では、時刻ｔ０の前において、ｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像の大きさが等しくなり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさが等しいと判断し、時刻ｔ０よりも前時刻の色空間情報のｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、すべてＢＴ．７０９の画像となるため、ＢＴ．７０９の識別フラグをＨＤＭＩ Ｔｘ５５にセットする。
【００７１】
このように合成画面のサイズや表示面積が等しい場合、直前の色空間情報を保持することにより、画面合成を行う際、色が表示上変化する頻度が少なくなるため、表示上の見苦しさを防ぐことができる。
【００７２】
図２０及図２１は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１４及び具体例１５を示す模式図である。これらの具体例では、時刻ｔ０、ｔ１において、合成された画像ａ、画像ｂの大きさが逆転している。これらの場合において、ホストＣＰＵ６０は、時刻ｔ０から時刻ｔ１までの期間に応じて色空間情報を切り換えるか否かを判断する。具体的には、ホストＣＰＵ６０は、プログラムによって合成される画像サイズの切り換え制御を行う場合など、時刻ｔ０から時刻ｔ１までの切り換え期間を予め検出できる場合は、検出された期間と閾値とを比較し、色空間情報を切り換えるか否かを判断する。
【００７３】
切り換え期間の検出方法として、ハードディスクドライブ４４等にデータベースとして保持され、タイトルを構成する画像データの色空間属性がメタ情報として記録された情報を用いることができる。具体的には、現在の再生時刻の情報と、タイトルのメタ情報とから次回の色空間規格の切り換わりの発生までの所要時間、すなわち時刻ｔ０から時刻ｔ１までの期間を導出することができる。また、タイトルのメタ情報から、映像信号の色空間属性が頻繁に切り換わる区間を予め検出しておき、頻繁に切り換わる区間は色空間属性の切り換えを行わないようにしてもよい。
【００７４】
図２０に示す具体例１４では、時刻ｔ０の前において、ｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも小さくなり、時刻ｔ１においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも大きくなっている。ここでは、ホストＣＰＵ６０は、検出された期間と閾値とを比較し、検出された期間が閾値よりも大きいと判断している。そして、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさ比較し、サイズ（面積）が大きい画像ｂの色空間情報ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさ比較し、サイズ（面積）が大きい画像ｂの色空間情報ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００７５】
図２１に示す具体例１５では、時刻ｔ０の前においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも小さくなり、時刻ｔ１においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも大きくなっている。ここでは、ホストＣＰＵ６０は、検出された期間と閾値とを比較し、検出された期間が閾値よりも小さいと判断している。そして、時刻ｔ０において、時刻ｔ０より前の色空間情報の状態を保持し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさ比較し、サイズ（面積）が大きい画像ａの色空間情報ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００７６】
このように合成画面のサイズや表示面積が短期間に変化する場合、直前の色空間情報を保持することにより、色が表示上変化する頻度が少なくなるため、表示上の見苦しさを防ぐことができる。
【００７７】
また、予め時刻ｔ０から時刻ｔ１までの期間を検出しなくても、色空間の切り換わりが発生してからの時間をカウントし、次の色空間の切り換わりの際に、カウントした所定期間が閾値よりも大きいか否かで色空間情報を切り換えるか否かを制御してもよい。
【００７８】
図２２は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１６を示す模式図である。この具体例では、時刻ｔ０において、画像ａ、画像ｂ、画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。また、時刻ｔ０において画像ａの音声信号が出力され、時刻ｔ１において画像ｂの音声信号が出力されている。この場合において、ホストＣＰＵ６０は、音声信号が出力されている画像の色空間情報を出力する。具体的には、ホストＣＰＵ６０は、ビデオ・グラフィック・プロセッサ５４にて合成される複数の映像信号のうち主画像の映像信号を選択し、その映像信号の音声信号をＨＤＭＩ Ｔｘ５５にセットする。また、主画像は、ユーザが選択可能とすることが好ましい。
【００７９】
このように音声が出力される画面を主画面とし、主画面の映像の色空間情報に従うことにより、ユーザが注視する画像の色をより鮮やかに再現することができる。
【００８０】
次に、図２３〜図２５を参照して記録再生装置１の他の構成例について説明する。図２３は、合成処理部の他の構成を示すブロック図である。なお、図５に示す合成処理部５４２と同じ構成には、同じ符号を付し、ここでは説明を省略する。この合成処理部７０では、図５に示す合成処理部５４２の機能にさらにｓＲＧＢの色域を擬似的にｘｖＹＣＣの色域にエキスパンド（色域伸長処理）することが可能となっている。また、複数画像のブレンド比率も変更することが可能となっている。
【００８１】
この合成処理部７０は、スケーラ５４５と、色域伸長処理するカラーエキスパンダ７１と、ブレンダ５４６と、ビデオエンコーダ５４７とを備えている。
【００８２】
図２４は、ブレンダ５４６の構成例を示すブロック図である。このブレンダ５４６は、３つのブレンダ５４６ａ、５４６ｂ、５４６ｃから構成され、各々、同じ機能を有している。この構成例では、４つの入力映像信号の任意のブレンド合成が可能である。
【００８３】
また、図２５は、ブレンダ５４６ａ、５４６ｂ、５４６ｃの各構成を示すブロック図である。各ブレンダ５４６ａ、５４６ｂ、５４６ｃは、２系統の入力信号ＩＮ１，ＩＮ２をブレンド比率αで合成を行う。すなわち、２つの画像を係数（α値）により合成する。セレクタ８１は、ブレンド比率αを選択する。セレクタ８１には、入力信号ＩＮ１、入力信号ＩＮ２とともに、画素毎にα１、α２が入力される。また、ホストＣＰＵ６０から画面単位のブレンド比率αＨｏｓｔとともに、α値を選択する制御信号αＳｅｌｅｃｔが入力され、該αＳｅｌｅｃｔにより、所望のα値が選択される。２系統の入力信号ＩＮ１，ＩＮ２は、差分器８２で差分が計算され、セレクタ８３で選択されたブレンド比率αが乗算器８３にて乗算される。ブレンド比率αが乗算された差分は、加算器８４にて入力信号ＩＮ１と加算され、出力される。すなわち、出力信号ＯＵＴは、次式で計算することができる。
【００８４】
【数１】
【００８５】
図２３に戻って、スケーラ５４５で所望のサイズへのスケーリングされた画像データは、カラーエキスパンダ７１に送られる。カラーエキスパンダ７１では、後述するように、例えばｓＲＧＢの色域を擬似的にｘｖＹＣＣの色域にエキスパンド（色域伸長処理）することができる。カラーエキスパンダ７１から出力された画像データは、ブレンダ５４６に入力され、複数の画像がブレンド比率αで合成される。ビデオエンコーダ５４７は、所望の出力仕様になるようにタイミング生成、同期信号の付加などを行う。
【００８６】
次に、カラーエキスパンダ７１にて、擬似的にｘｖＹＣＣの色域にエキスパンドする方法について説明する。ＢＴ．６０１やＢＴ．７０９ではクロマ（Ｃｒ，Ｃｂ）信号のレベルは、１６−２４０の値で規定されている。ｘｖＹＣＣでは、更に色域を拡張するために、１−２５４の値の信号レベルを扱うことができる。これを擬似ｘｖＹＣＣ信号に変換する場合、３６−２２０までの信号はそのまま通過させ、１６−３６の信号と２２１−２４０までの信号はそれぞれ線形処理にてレベル変換（レベル伸張）を行い、１６−３６の信号を１−３６の信号に、２２１−２４０の信号を２２１−２５４の信号に変換する。この結果、源信号の比較的飽和度の高い色信号が更に伸張され、擬似ｘｖＹＣＣ信号が生成される。Ｃｂについても同様に伸張を行うことができる。なお、ＲＧＢ信号にて同様の色域伸張を行っても構わない。また、レベルの閾値を変えても構わないし、レベル変換を非線形処理することでも同様の効果を得ることができる。
【００８７】
また、ｘｖＹＣＣの色域にエキスパンドする他の方法を、以下に説明する。ＩＤＷ（International Display Workshops）２００６学会における「Ｒｅｃｅｎｔ Ｔｒｅｎｄ ｏｆ Ｗｉｄｅ Ｇａｍｕｔ Ｓｔａｎｄａｒｄｓ ｆｏｒ Ｃｏｌｏｒ Ｉｍａｇｉｎｇ」（Ｔ．Ｍａｔｓｕｍｏｔｏらによる）の文献中でも記載されているように、Ｒ’，Ｇ’，Ｂ’からＹ’７０９，Ｃｂ’７０９，Ｃｒ’７０９への変換式は、式（１）で表される。また、式（１）より、式（２）が得られる。
【００８８】
【数２】
【００８９】
ＢＴ．７０９の色域では、式（３）の条件を満たす必要がある。例えば、Ｃｂ＝Ｃｒという条件を更に付加した場合（Ｃｂ＝Ｃｒ＝Ｃと置く）、式（２）、式（３）より、式（４）の条件式が得られる。
【００９０】
【数３】
【００９１】
図２６は、上記条件におけるＢＴ．７０９の色域をＹ−Ｃｂ，Ｃｂ空間上に示す模式図である。この菱形のＢＴ．７０９の色域領域の境界付近の信号を、境界の外の領域までエキスパンド（色域伸長処理）する。なお、上記条件に限らず、ＢＴ．７０９の色域の境界付近の信号に対してエキスパンド（色域伸長処理）してもよい。
【００９２】
このようにＢＴ．７０９等の色域をｘｖＹＣＣ等の広色域に変換することにより、ＨＤＭＩで伝送する色空間情報を、常にｘｖＹＣＣ７０９固定で出力することができる。また、色空間情報が切り換わらないので、色が表示上変化するのを防ぐことができる。
【００９３】
また、上術とは逆に、広色域の信号が入力された場合でも、ＢＴ．７０９、ｓＲＧＢの狭い色空間情報に圧縮し、常にＢＴ．７０９等の色空間情報に固定で出力してもよい。
【００９４】
図２７は、色空間情報を圧縮する場合の合成処理部の構成例を示すブロック図である。なお、図５に示す合成処理部５４２と同じ構成には、同じ符号を付し、ここでは説明を省略する。この合成処理部９０では、図５に示す合成処理部５４２の機能にさらにｘｖＹＣＣの色域をＢＴ．７０９の色域に圧縮処理することが可能となっている。また、複数画像のブレンド比率も変更することが可能となっている。
【００９５】
カラーコンプレッサ９１は、ＢＴ．７０９の色域の信号を、そのまま出力し、ｘｖＹＣＣの色域の信号を、ＢＴ．７０９に圧縮して出力する。
【００９６】
これにより、色空間情報が常にＢＴ．７０９固定で出力され、色空間情報が切り換わらないので、色が表示上変化するのを防ぐことができる。
【００９７】
図２８及図２９は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１７及び具体例１８を示す模式図である。これらの具体例では、ブレンド比率αによってＧＵＩ表画像が裏画像と合成されている。そして、時刻ｔ０、ｔ１において、裏画像の色空間規格が切り換えられている。これらの場合において、ホストＣＰＵ６０はブレンダ５４６ａ、５４６ｂ、５４６ｃからブレンド比率αを取得し、ブレンド比率αに応じて色空間情報を切り換えるか否かを判断する。具体的には、ブレンドする表画面（ＧＵＩ）のα値が５０％以上の場合、表画面（ＧＵＩ）の色空間情報を出力する。
【００９８】
図２８に示す具体例１７では、ｘｖＹＣＣのＧＵＩ表画像が裏画像にα値が５０％以上でブレンディングされている。そして、時刻ｔ０において、ＢＴ．７０９の裏画像がｘｖＹＣＣの裏画像に切り換わり、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。ホストＣＰＵ６０は、ブレンド比率αが５０％以上であることを検知し、表画像の色空間情報ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００９９】
図２９に示す具体例１８では、ＢＴ．７０９のＧＵＩ表画像が裏画像にα値が５０％以上でブレンディングされている。そして、時刻ｔ０において、ＢＴ．７０９の裏画像がｘｖＹＣＣの裏画像に切り換わり、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。ホストＣＰＵ６０は、ブレンド比率αが５０％以上であることを検知し、表画像の色空間情報ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１００】
このようにブレンド比率αが５０％以上の場合、表画像の色空間情報を伝送することにより、表画像の色が表示上変化する頻度が少なくなるため、表示上の見苦しさを防ぐことができる。
【０１０１】
図３０〜図３２は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１９〜具体例２１を示す模式図である。これらの具体例では、時刻ｔ１において、ＧＵＩ表画像が裏画像と合成されている。これらの場合において、ホストＣＰＵ６０は、画面合成を行う直前の色空間情報の状態を保持する。
【０１０２】
図３０に示す具体例１９では、時刻ｔ０よりも前の時刻において、ｘｖＹＣＣの色空間規格の映像信号が出力されている。時刻ｔ０において、ｘｖＹＣＣのＧＵＩ表画像がｘｖＹＣＣの裏画像にブレンディングされる。そして、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。この場合、ホストＣＰＵ６０は、時刻ｔ０において、直前の画像の色空間情報を保持し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、直前の色空間情報を保持し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１０３】
図３１に示す具体例２０では、時刻ｔ０よりも前の時刻において、ＢＴ．７０９の色空間規格の映像信号が出力されている。時刻ｔ０において、ｘｖＹＣＣのＧＵＩ表画像がｘｖＹＣＣの裏画像にブレンディングされる。そして、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。この場合、ホストＣＰＵ６０は、時刻ｔ０において、直前の画像の色空間情報を保持し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、直前の色空間情報を保持し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１０４】
図３２に示す具体例２１では、時刻ｔ０よりも前の時刻において、ＢＴ．７０９の色空間規格の映像信号が出力されている。時刻ｔ０において、ｘｖＹＣＣのＧＵＩ表画像がＢＴ．７０９の裏画像にブレンディングされる。そして、時刻ｔ１において、ｘｖＹＣＣの画像の映像信号に切り換わる。この場合、ホストＣＰＵ６０は、時刻ｔ０において、直前の画像の色空間情報を保持し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１においては、合成画像ではないので、画像の色空間であるｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１０５】
このようにブレンディングにより画面合成を行う場合、画面合成を行う直前の色空間情報の状態を保持することにより、色が表示上変化するのを防ぐことができる。
【０１０６】
以上、詳細に説明したように、画面を合成する際に、ＨＤＭＩで伝送する色空間情報を固定することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１０７】
また、画面を合成する前の色空間情報を保持し、画面合成後も該色空間情報を伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１０８】
また、合成画面のサイズや面積に従ってＨＤＭＩで伝送する色空間情報を決定することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化した際にも、視覚的にその変化を目立ちにくくすることができる。
【０１０９】
また、合成画面のサイズや面積に従ってＨＤＭＩで伝送する色空間情報を決定する際、サイズや面積が同じ場合、前の色空間情報を保持して伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化した際にも、視覚的にその変化を目立ちにくくすることができる。
【０１１０】
また、アルファ・ブレンドによって全画面の画面合成を行う際、画面内のアルファ値の最小値が５０％以上の表画面（ＧＵＩ）の色空間情報を伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１１１】
また、合成画面のサイズや面積に従ってＨＤＭＩで伝送する色空間情報を決定する際、切り換え間隔が所定の時間以下の場合、前の色空間情報を保持して伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化した際にも、視覚的にその変化を目立ちにくくすることができる。
【０１１２】
また、画面を合成する際、通常色域の信号に対して色域伸長処理を施し擬似広色域信号を生成して合成し、ＨＤＭＩで伝送する色空間情報を広色域に固定にすることにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１１３】
また、画面を合成する際、広色域の信号に対して色域圧縮処理を施し、通常色域信号を生成して合成し、ＨＤＭＩで伝送する色空間情報を通常色域に固定にすることにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１１４】
なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。例えば、上記実施の形態では、ＨＤＭＩを用いた伝送例に挙げて説明したが、これに限られるものではない。色域識別フラグ、メタデータなどの属性データを伝送することはできないが、例えば、コンポーネント端子５８、コンポジットビデオ端子（あるいは、Ｓ端子）５９から、広色域のアナログコンポーネント信号、アナログコンポジットビデオ信号（あるいは、Ｙ／Ｃセパレートビデオ信号）を出力し、ホストＣＰＵ６０が、例えば、ＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）等により受像機２のホストＣＰＵ２３と通信するようにすればよい。
【図面の簡単な説明】
【０１１５】
【図１】本発明の一実施の形態に係る再生システムを示す図である。
【図２】ｘｖＹＣＣの色域を平面に投射した場合の模式図である。
【図３】ビデオ・グラフィック・プロセッサの構成を示すブロック図である。
【図４】記録再生装置の構成を具体的に示すブロック図である。
【図５】画像を合成する際のビデオ・グラフィック・プロセッサの機能ブロック図である。
【図６】１つの色空間規格からなる画像を出力する場合の映像信号の色空間規格と属性データの色空間情報との関係を示す模式図である。
【図７】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１を示す模式図である。
【図８】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例２を示す模式図である。
【図９】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例３を示す模式図である。
【図１０】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例４を示す模式図である。
【図１１】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例５を示す模式図である。
【図１２】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例６を示す模式図である。
【図１３】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例７を示す模式図である。
【図１４】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例８を示す模式図である。
【図１５】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例９を示す模式図である。
【図１６】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１０を示す模式図である。
【図１７】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１１を示す模式図である。
【図１８】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１２を示す模式図である。
【図１９】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１３を示す模式図である。
【図２０】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１４を示す模式図である。
【図２１】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１５を示す模式図である。
【図２２】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１６を示す模式図である。
【図２３】合成処理部の他の構成を示すブロック図である。
【図２４】ブレンダの構成例を示すブロック図である。
【図２５】ブレンダの各構成を示すブロック図である。
【図２６】ある条件におけるＢＴ．７０９の色域をＹ−Ｃｂ，Ｃｂ空間上に示す模式図である。
【図２７】色空間情報を圧縮する場合の合成処理部の構成例を示すブロック図である。
【図２８】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１７を示す模式図である。
【図２９】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１８を示す模式図である。
【図３０】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１９を示す模式図である。
【図３１】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例２０を示す模式図である。
【図３２】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例２１を示す模式図である。
【符号の説明】
【０１１６】
１ 記録再生装置、 ２ 受像機、 ３ ＨＤＭＩケーブル、 １１ ＭＰＥＧデコーダ、 １２ ビデオ・グラフィック・プロセッサ、 １３ ホストＣＰＵ、 １４ ＨＤＭＩ Ｔｘ、 １５ ＨＤＭＩコネクタ、 ２１ ＨＤＭＩコネクタ、 ２２ ＨＤＭＩ Ｒｘ、 ２３ ホストＣＰＵ、 ２４ ＥＤＩＤＲＯＭ、 ２５ ビデオ・グラフィック・プロセッサ、 ２６ ディスプレイデバイス、 ４１ ライン入力端子、 ４２ アナログチューナ、 ４３ ディスクドライブ、 ４４ ハードディスクドライブ、 ４５ ＩＥＥＥ１３９４入力端子、 ４６ デジタルチューナ、 ４７ セレクタ、 ４８ ビデオデコーダ、 ４９ セレクタ、 ５０ ＭＰＲＧエンコーダ、 ５１ ＨＤＶプロセッサ、 ５２ ストリームプロセッサ、 ５３ ＭＰＥＧデコーダ、 ５４ ビデオ・グラフィック・プロセッサ
【技術分野】
【０００１】
本発明は、色空間情報が異なる複数の画像データを処理する画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
従来より、ディスプレイやＨＤＴＶ（High Definition TeleVision）の放送では、ｓＲＧＢ（ＩＥＣ（International Electrotechnical Commission）６１９６６−２−１）やＩＴＵ−Ｒ（International Telecommunication Union-Radiocommunication Sector） ＢＴ．７０９で規格化された色空間が広く使われているが、近年、広色域パネルの出現により、受像機側でｓＲＧＢを超える広色域の色表現が可能となっている。
【０００３】
このような受像機には、パネルの広色域を活かすために、ｓＲＧＢの色空間の映像コンテンツに対して信号処理によって色域を伸長する技術（以下、「色域伸長処理」と呼ぶ。）が採用されており、受像機は、ｓＲＧＢ色空間でクリップされてしまうような彩度の高い色を色域伸長処理することで、より鮮やかな色を再現することができる。また、ユーザは、受像機の画質モードを選択することにより、色域伸長処理をオン／オフすることが可能となっている。
【０００４】
また、受像機は、例えば、ＨＤＭＩ（High-Definition Multimedia Interface）を使って、映像信号とともに色空間情報を、ソース機器から受信することも可能となっており、色空間情報に従って、ＢＴ．７０９の場合は、色域伸長処理をオン状態にし、他の広色域の色空間情報の場合は、色域伸長処理をオフ状態にする、といった制御を自動的に行うことができる。
【０００５】
一方、撮像素子やカメラ信号処理も広色域化しており、カメラで撮影したｓＲＧＢを超える色域の広色域信号を、ディスクやテープへ記録し、再生することも可能となっている。また、ディスクやテープに記録された広色域信号を、ＩＥＥＥ（Institute of Electrical and Electronic Engineers）１３９４などのデジタルインターフェースを介して光ディスクレコーダにダビングしたり、広色域信号が記録された該ディスクを光ディスクレコーダやプレーヤで再生したりすることも可能となっている。また、カメラやレコーダは、ＨＤＭＩを使って、これらの広色域信号や色空間情報などを受像機に伝送することもできる。
【０００６】
【特許文献１】特開２００６−１８０４７７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、受像機の色域伸長処理をオン／オフすると、表示される画像の色味、色の濃さなどが変化する。例えば、一定色のグラフィックスの背景に動画／静止画をブレンディングする場合、背景の動画／静止画の属性によって色空間情報を変化させると、受像機は該色空間情報に従って色域伸長処理を切り換えるため、一定色であるはずのグラフィックスの色が表示上変化してしまう。このため、ユーザにとって、表示上見苦しく感じることがあった。
【０００８】
また、複数の動画／静止画やグラフィックスなどを合成する場合、例えば、合成画の色空間規格が、全てＢＴ．７０９の状態から、一つの動画／静止画が広色域に変化した際にも、動画／静止画の属性によって色空間情報を変化させると、受像機は該色空間情報に従って色域伸長処理を切り換えるため、グラフィックスや他の動画／静止画の色が表示上変化してしまい、見苦しく感じることがあった。
【０００９】
本発明は、このような従来の実情に鑑みて提案されたものであり、画像が合成された場合、色が表示上変化するのを防ぐことができる画像処理装置及び画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述の課題を解決するために、本発明に係る画像処理装置は、第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理装置であって、複数の画像信号を合成し、合成画像信号を生成する画像処理手段と、上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御手段と、所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送手段とを備え、上記制御手段は、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定する。
【００１１】
また、本発明に係る画像処理方法は、第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理方法であって、複数の画像信号を合成し、合成画像信号を生成する画像処理工程と、上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御工程と、所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送工程とを備え、上記制御工程では、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定する。
【発明の効果】
【００１２】
本発明によれば、合成画像信号の色空間情報が固定されているため、受像機側で色が表示上変化するのを防ぐことができる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
【００１４】
図１は、本発明の一実施の形態に係る再生システムを示す図である。この再生システムは、記録再生装置１と、受像機２とが、ＨＤＭＩ（High-Definition Multimedia Interface）ケーブル３を介して接続されており、受像機２は、第１の色空間規格の画像データを、第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像データに擬似的に色域を伸張して表示することが可能となっている。第１の色空間規格の例としては、ｓＲＧＢ（ＩＥＣ６１９６６−２−１）、ＩＴＵ−Ｒ ＢＴ．７０９等が挙げられる。また、第２の色空間規格の例としては、ｘｖＹＣＣ等が挙げられる。
【００１５】
ｘｖＹＣＣは、国際電気標準会議（IEC）が国際標準（IEC 61966−2−4）として発行した規格であり、ＨＤＴＶ（High Definition TeleVision）で利用するＩＴＵ−Ｒ ＢＴ．７０９の色域（ｓＲＧＢと同等）との互換性を確保しながら、色空間を広げたものである。そして、このｘｖＹＣＣによれば、現行の動画コンテンツの色空間規格「ＩＴＵ−Ｒ ＢＴ．７０９」（静止画ではｓＲＧＢに相当）では表現できない色を表現することができる。
【００１６】
図２は、ｘｖＹＣＣの色域を平面に投射した場合の模式図である。この図２において、色域ａはｓＲＧＢの色域であり、色域ｂはｘｖＹＣＣで拡張された色域である。図２に示すようにｓＲＧＢでは、Ｒ，Ｇ，Ｂそれぞれを０〜１で表現する色のみを利用してきたのに対し、ｘｖＹＣＣでは負の値や１を超える色も定義されている。したがって、例えば、受像機２がｓＲＧＢの色域ａの映像コンテンツを色域ｂにまで伸長する処理（以下、「色域伸長処理」と呼ぶ。）を行って、物体の素材感・立体感を忠実に再現すれば、ユーザは広色域のカラー画像を楽しむことができる。
【００１７】
ＨＤＭＩケーブル３の規格であるＨＤＭＩは、ＩＥＥＥ１３９４の上位互換とされており、物理層にはＴＭＤＳ（Transition Minimized Differential Signaling）、信号の暗号化にはＨＤＣＰ（High-bandwidth Digital Content Protection）、機器間認証にはＥＤＩＤ（Extended Display Identification Data）、系全体の制御系接続にはＣＥＣ（Consumer Electronics Control）が採用されている。また、ＨＤＭＩバージョン１．３には、メタデータとｘｖＹＣＣ色空間の定義が追加されている。したがって、例えば、受像機２が記録再生装置１から受信したメタデータと自身の色域情報とに基づいて画像データを色域伸張処理すれば、より具体的には画像データに対し機器間の色空間の変換処理（Gamut Mapping Algorithm）をすれば、正しい色を再現することができる。
【００１８】
図１に戻って、再生システムの構成について説明する。記録再生装置１は、ＭＰＥＧ（Moving Picture Expert Group）デコーダ１１と、ビデオ・グラフィック・プロセッサ１２と、ホストＣＰＵ（Central Processing Unit）１３と、ＨＤＭＩ Ｔｘ（トランスミッタ）１４と、ＨＤＭＩコネクタ１５とを備えている。
【００１９】
ＭＰＥＧデコーダ１１は、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰＥＧ４−ＡＶＣ／Ｈ．２６４などのビデオストリームをデコードし、ベースバンド信号を生成する。
【００２０】
ビデオ・グラフィック・プロセッサ１２は、ＭＰＥＧデコーダ１１にて生成されたベースバンド信号を所望の画枠サイズへ変換処理したり、複数のベースバンド信号を合成処理したりする。
【００２１】
ホストＣＰＵ１３は、ＭＰＥＧデコーダ１１及びビデオ・グラフィック・プロセッサ１２を制御する。例えば、ＭＰＥＧデコーダ１１に所望のビデオストリームのデコードを指示し、ビデオ・グラフィック・プロセッサ１２にデコードされたベースバンド信号を用いた合成画像の生成を指示する。また、合成画像の色空間規格を決定し、その色空間情報をＨＤＭＩ Ｔｘ１４に送る。また、ホストＣＰＵ１３は、ＨＤＭＩケーブル３のＤＤＣ（Display Data Channel）ラインにより受像機２と通信を行う。
【００２２】
ＨＤＭＩ Ｔｘ１４は、ビデオ・グラフィック・プロセッサ１２にて信号処理された映像音声信号とともに、ホストＣＰＵ１３から送られた色空間規格を示す色域識別フラグ、メタデータなどの属性データをＴＭＤＳ信号に変換し、ＨＤＭＩコネクタ１５に出力する。この属性データは、ＨＤＭＩ規格で定義されているＡＶＩ（Auxiliary Video Information）ＩｎｆｏＦｒａｍｅを使って伝送することができる。
【００２３】
ＨＤＭＩコネクタ１５は、ＨＤＭＩケーブル３と接続され、ＨＤＭＩ Ｔｘ１４にて変換されたＴＭＤＳ信号を受像機２に伝送する。
【００２４】
次に、受像機２の構成について説明する。受像機２は、ＨＤＭＩコネクタ２１と、ＨＤＭＩ Ｒｘ（レシーバ）２２と、ホストＣＰＵ２３と、ＥＤＩＤＲＯＭ（Extended Display Identification Data Read Only Memory）２４と、ビデオ・グラフィック・プロセッサ２５と、ディスプレイデバイス２６とを備えている。
【００２５】
ＨＤＭＩコネクタ２１は、ＨＤＭＩケーブル３と接続され、ＴＭＤＳ信号を受信する。
【００２６】
ＨＤＭＩ Ｒｘ２２は、ＴＭＤＳ信号から映像音声信号と属性データとを取得し、映像信号をビデオ・グラフィック・プロセッサ２５に送る。
【００２７】
ホストＣＰＵ２３は、属性データに基づいてビデオ・グラフィック・プロセッサ２５の色域伸長処理のオン／オフを制御する。具体的には、例えば、属性データの色空間情報がＩＴＵ−Ｒ ＢＴ．７０９の場合、ビデオ・グラフィック・プロセッサ２５の色域伸長処理をオン状態にし、属性データの色空間情報がｘｖＹＣＣの場合、ビデオ・グラフィック・プロセッサ２５の色域伸長処理をオフ状態にする。
【００２８】
ＥＤＩＤＲＯＭ２４には、受像機２のディスプレイ情報が記憶されており、例えば、受像機２の対応解像度情報、色域の種別を示す色空間情報が書き込まれている。ＥＤＩＤＲＯＭ２４に記憶されたディスプレイ情報は、ＨＤＭＩケーブル３のＤＤＣ（Display Data Channel）ラインを介して記録再生装置１に提供される。
【００２９】
図３は、ビデオ・グラフィック・プロセッサ２５の構成を示すブロック図である。ビデオ・グラフィック・プロセッサ２５は、メモリ２５１と、スケーラ２５２と、カラーエキスパンダ２５３と、ビデオエンコーダ２５４とを備えている。ＨＤＭＩ Ｒｘ２２から入力された映像信号は、メモリ２５１のビデオ・プレーンに書き込まれる。メモリ２５１に書き込まれた映像信号は、各プレーンから読み出され、スケーラ２５２で所望のサイズへのスケーリングが施される。また、ホストＣＰＵ２３からの命令に応じてカラーエキスパンダ２５３で色域拡張処理が施される。カラーエキスパンダ２５３は、例えば、ＢＴ．７０９の映像信号を擬似的にｘｖＹＣＣの映像信号の色域に拡張する。また、ｘｖＹＣＣの映像信号を色域伸張処理した場合、ｘｖＹＣＣの映像信号の色域を擬似的に拡張されたｘｖＹＣＣの映像信号の色域と同じにする。ビデオエンコーダ２５４は、所望の出力仕様になるようにタイミング生成、同期信号の付加などを行う。
【００３０】
ディスプレイデバイス２６は、広色域パネルを有し、ビデオ・グラフィック・プロセッサ２５にて信号処理された画面を表示する。
【００３１】
このように、受像機２は、映像音声信号とともに受信した属性データに応じて色伸張処理をオン／オフすることにより、画面内の物体を広色域の色空間で忠実に再現することができる。
【００３２】
ところで、このような再生システムにおいて、受像機２は該色空間情報に従って色域伸長処理を切り換えるため、例えば、記録再生装置１が一定色のグラフィックスの背景に動画／静止画をブレンディングし、背景の動画／静止画の属性によって色空間情報を変化させた場合、受像機２において一定色であるはずのグラフィックスの色が表示上変化してしまうことがある。以下では、このような問題を防ぐ方法について説明する。
【００３３】
図４は、記録再生装置１の構成を具体的に示すブロック図である。記録再生装置１は、ライン入力端子４１と、アナログチューナ４２と、ディスクドライブ４３と、ハードディスクドライブ４４と、ＩＥＥＥ１３９４端子４５と、デジタルチューナ４６と、ライン入力端子４１又はアナログチューナ４２からの入力信号のいずれか１つを選択するセレクタ４７と、セレクタ４７からの映像音声信号をデコードするビデオデコーダ４８と、ビデオデコーダ４８にてデコードされたベースバンド信号又はビデオ・グラフィック・プロセッサ５４にて画像合成等の信号処理が施されたベースバンド信号のいずれか１つを選択するセレクタ４９と、セレクタ４９からのベースバンド信号をエンコードするＭＰＥＧエンコーダ５０と、ＨＤＶ（High-Definition Video）プロセッサ５１と、ストリームプロセッサ５２と、ＭＰＥＧデコーダ５３ａ，５３ｂと、ビデオ・グラフィック・プロセッサ５４と、ＨＤＭＩ Ｔｘ５５と、ＤＡＣ５６と、ＨＤＭＩコネクタ５７と、コンポーネント端子５８と、コンポジット端子５９と、ホストＣＰＵ６０とを備えている。
【００３４】
ここで、ＭＰＥＧデコーダ５３ａ，５３ｂ、ビデオ・グラフィック・プロセッサ５４、ＨＤＭＩ Ｔｘ５５、ＨＤＭＩコネクタ５７、ホストＣＰＵ６０は、それぞれ図１に示すＭＰＥＧデコーダ１１、ビデオ・グラフィック・プロセッサ１２、ＨＤＭＩ Ｔｘ１４、ＨＤＭＩコネクタ１５、ホストＣＰＵ１３に対応するものである。
【００３５】
続いて、記録再生装置１における記録動作について説明する。ライン入力端子４１から入力される映像信号と、アナログチューナ４２から出力される映像信号は、セレクタ４７で所望の入力が選択された後、ビデオデコーダ４８に入力される。ビデオデコーダ４８は、例えば入力されたＮＴＳＣ方式のアナログ映像信号をＡ／Ｄ変換した後、輝度信号とクロマ信号とに分離するとともにデコード処理を施す。デコードされたベースバンドビデオ信号は、セレクタ４９、及びビデオ・グラフィック・プロセッサ５４に入力される。セレクタ４９で、ビデオデコーダ４８からの出力と、ビデオ・グラフィック・プロセッサ５４からの出力とのいずれかを選択した後、選択されたベースバンド信号がＭＰＥＧエンコーダ５０に入力される。ＭＰＥＧエンコーダ５０は、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰＥＧ４−ＡＶＣ／Ｈ．２６４など所望のエンコードを行う。エンコードされたストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２から、ＢＤ（Blu-ray Disc、商標）、ＤＶＤ（Digital Versatile Disc）などのディスクドライブ４３やハードディスクドライブ４４などにストリームが送られ、所望のメディアに記録される。
【００３６】
また、ＩＥＥＥ１３９４入力端子４５から入力されたストリームは、ＨＤＶプロセッサ５１を経てストリームプロセッサ５２に入力され、デジタルチューナ４６からのストリームもストリームプロセッサ５２に入力される。ストリームプロセッサ５２に入力されたストリームは、ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４などの所望のメディアに記録される。
【００３７】
また、ストリームプロセッサ５２に入力されたストリームは、ストリームプロセッサ５２で所望のビデオストリームの抜き出しやパーズなどの処理を施し、ＭＰＥＧデコーダ５３でデコードした後、ビデオ・グラフィック・プロセッサ５４、セレクタ４９を経由してＭＰＥＧエンコーダ５０に入力される。ＭＰＥＧエンコーダ５０は、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４、ＭＰＥＧ４−ＡＶＣ／Ｈ．２６４など所望のエンコードを行い、エンコードされたストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２から、ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４などにストリームが送られ、所望のメディアに記録される。
【００３８】
次に、記録再生装置１における再生動作について説明する。ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４で再生されたストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２は、所望のビデオストリームの抜き出しや、ストリームから画像データの色空間属性に関する情報などのパーズを行った後、ＭＰＥＧデコーダ５３ａ、５３ｂに送る。ＭＰＥＧデコーダ５３ａ、５３ｂは、画像データをデコードする。ＭＰＥＧデコーダ５３ａ、５３ｂでデコードされたベースバンドビデオ信号は、ビデオ・グラフィック・プロセッサ５４に入力される。ビデオ・グラフィック・プロセッサ５４では、所望の画枠サイズへの変換処理や種々のビデオ信号処理を施し、該映像信号にグラフィックス信号などを合成した後、ＨＤＭＩ Ｔｘ５５に送られる。ＨＤＭＩ Ｔｘ５５では、入力されたベースバンド信号をＴＭＤＳ信号に変換して、制御信号とともにＨＤＭＩコネクタ５７に出力する。また、ビデオ・グラフィック・プロセッサ５４の出力は、ＤＡＣ５６に入力され、Ｄ／Ａ変換したアナログコンポーネント信号がコンポーネント端子５８に出力されるとともに、Ｄ／Ａ変換したアナログコンポジットビデオ信号（あるいは、Ｙ／Ｃセパレートビデオ信号）もコンポジットビデオ端子（あるいは、Ｓ端子）５９に出力される。
【００３９】
次に、図１〜４を参照して記録再生装置１における伝送動作について説明する。ここで、ＢＤ、ＤＶＤなどのディスクドライブ４３やハードディスクドライブ４４で再生されたストリームには、広色域映像信号とともに、色域の種別を識別するための識別フラグ、及び色域の付随情報であるメタデータが含まれているものとする。
【００４０】
再生された映像音声信号、及び識別フラグ等のメタデータを含んだストリームは、ストリームプロセッサ５２に入力される。ストリームプロセッサ５２は、ストリームのパーズを行い、識別フラグ及び、メタデータを抽出し、ホストＣＰＵ６０は、ストリームの識別フラグ等のメタデータをストリームプロセッサ５２から取得する。識別フラグ及びメタデータは、エレメンタリーストリームの付加情報として記録してあるので、ビデオ信号との同期は常に保たれる。広色域信号を含んだストリームは、前述の再生系の説明の通り、ＭＰＥＧデコーダ５３ａ、５３ｂでデコードされた後、ビデオ・グラフィック・プロセッサ５４を経てＨＤＭＩ Ｔｘ５５に送られる。
【００４１】
また、ホストＣＰＵ６０は、ＨＤＭＩコネクタ５７に接続されたＨＤＭＩケーブル３のＤＤＣ（Ｄｉｓｐｌａｙ Ｄａｔａ Ｃｈａｎｎｅｌ）ラインにより受像機２と通信を行い、受像機２に内蔵するＨＤＭＩ Ｒｘ（レシーバ）２２、ホストＣＰＵ２３を介して、ＥＤＩＤ（Ｅｘｔｅｎｄｅｄ Ｄｉｓｐｌａｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄａｔａ） ＲＯＭ２４に書かれているディスプレイ情報を取得する。ＥＤＩＤ ＲＯＭ２４には、受像機２の対応解像度情報などの他に、色域の種別を示す色空間情報も書かれている。したがって、ホストＣＰＵ６０は、ディスプレイ情報を取得することにより、接続している受像機２が広色域映像信号に対応しているか否かを判別することができる。そして、ＨＤＭＩケーブル３によって接続された受像機２が広色域映像信号に対応している場合、ホストＣＰＵ６０は、広色域映像信号を伝送する際、映像信号の属性としてディスクから取得した色域識別フラグ、及びメタデータをＨＤＭＩ Ｔｘ５５にセットすることができる。
【００４２】
また、後述するように、ホストＣＰＵ６０は、ビデオ・グラフィック・プロセッサ５４にて合成される各画像のメタデータを取得し、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを所望の値に変更する。具体的には、画像合成される各画像の色空間規格や画像合成前の色空間規格に基づいてＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを決定する。
【００４３】
ＨＤＭＩ Ｔｘ５５は、映像音声信号とともに色域識別フラグ、メタデータなどの属性データをＴＭＤＳ信号に変換し、ＨＤＭＩコネクタ５７から出力する。色域の種別を示す識別フラグ、メタデータは、ＨＤＭＩ規格で定義されているＡＶＩ（Ａｘｉｌｉａｒｙ Ｖｉｄｅｏ Ｉｎｆｏｒｍａｔｉｏｎ） ＩｎｆｏＦｒａｍｅを使って伝送することができる。例えば、色域識別フラグは、ＡＶＩ ＩｎｆｏＦｒａｍｅパケット内のＣｏｌｏｒｉｍｅｔｒｙやＥｘｔｅｎｄｅｄ Ｃｏｌｏｒｉｍｅｔｒｙで定義される。また、オーディオ信号の属性データは、Ａｕｄｉｏ ＩｎｆｏＦｒａｍｅを用いることができる。
【００４４】
図５は、画像を合成する際のビデオ・グラフィック・プロセッサ５４の機能ブロック図である。ビデオ・グラフィック・プロセッサ５４は、メモリ５４１と、合成処理部５４２ａ〜５４２ｄと、グラフィックエンジン５４３と、ＪＰＥＧエンジン５４４とを備えている。ここで、合成処理部５４２ａ〜５４２ｄは、出力フォーマット毎に用意されており、それぞれスケーラ５４５と、ブレンダ５４６と、ビデオエンコーダ５４７とを備えている。
【００４５】
ビデオデコーダ４８の出力、及びＭＰＥＧデコーダ５３ａ、５３ｂの出力は、メモリ５４１のビデオ・プレーンに書き込まれる。また、グラフィックエンジン５４３は、メモリ５４１のグラフィックス・プレーンにグラフィックス・データを書き込む。ＪＰＥＧエンジン５４４は、ＪＰＥＧファイルをデコードして、メモリ５４１のビデオ・プレーンにＪＰＥＧデータを書き込む。メモリ５４１に書き込まれた画像データは、各プレーンから読み出され、スケーラ５４５で所望のサイズへのスケーリングなどが行われ、ブレンダ５４６に送られる。ブレンダ５４６は、各プレーンから読み出された画像の合成を行う。ビデオエンコーダ５４７は、所望の出力仕様になるようにタイミング生成、同期信号の付加などを行う。
【００４６】
以下、画像合成処理する際のホストＣＰＵ６０の動作について具体例を挙げて説明する。なお、具体的な色空間規格として、ＢＴ．７０９を挙げ、それよりも広い色域の色空間規格としてｘｖＹＣＣ（xvYCC709）を挙げて説明する。
【００４７】
図６は、画面合成を行わない場合、すなわち、１つの色空間規格からなる画像を出力する場合の映像信号の色空間規格と属性データの色空間情報との関係を示す模式図である。時刻ｔ０において、映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わる際、ホストＣＰＵ６０は、映像信号の色空間規格と同期して、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグをＢＴ．７０９からｘｖＹＣＣ７０９に切り換える。また、時刻ｔ１において、映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わる際、ホストＣＰＵ６０は、映像信号の色空間規格と同期して、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグをＢＴ．７０９からｘｖＹＣＣ７０９に切り換える。
【００４８】
図７〜図１０は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１〜具体例４を示す模式図である。これらの具体例では、画像ａ、画像ｂ、画像ｃの３つの画像が合成された合成画面の映像信号を出力する。時刻ｔ０及び時刻ｔ１において、画像の色空間規格が変化し、それに伴い出力する映像信号の色空間規格も変化している。これらの場合において、ホストＣＰＵ６０は、色空間情報を固定して出力する。
【００４９】
図７に示す具体例１では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例１において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にｘｖＹＣＣ７０９に固定する。具体例１では、色空間情報が常にｘｖＹＣＣ７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５０】
図８に示す具体例２では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例２において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にｘｖＹＣＣ７０９に固定する。具体例２では、色空間情報が常にｘｖＹＣＣ７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５１】
図９に示す具体例３では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例３において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にＢＴ．７０９に固定する。具体例３では、色空間情報が常にＢＴ．７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５２】
図１０に示す具体例４では、時刻ｔ０の前において、ＢＴ．７０９の画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力している。そして、時刻ｔ０において画像ａの映像信号の色空間規格がＢＴ．７０９からｘｖＹＣＣに切り換わり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例４において、ホストＣＰＵ６０は、合成する画像の色空間規格と関係なく、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを常にＢＴ．７０９に固定する。具体例４では、色空間情報が常にＢＴ．７０９に固定されるため、面積の広い画像ｃの色変化がないだけでなく、子画面の画像ａ，ｂへの影響も少なく、合成画面全体の色変化を小さくすることができる。
【００５３】
このように合成する画面の色空間規格と関係なく、１つの色空間規格の色域識別フラグをＨＤＭＩ Ｔｘ５５にセットすることにより、画面合成を行う際、色が表示上変化するのを防ぐことができる。
【００５４】
また、合成画面を出力する際の色空間規格は、ユーザが選択可能とすることが好ましい。例えば、「広色域設定」＝［自動／オフ]の切り換えをユーザが設定できるようにする。自動設定の場合には、ソースである記録再生装置１から出力される映像信号が広色域であって、シンクである受像機２が広色域対応可能な装置である場合にのみ、ｘｖＹＣＣ７０９の色空間情報を出力し、オフ設定の場合は、ＢＴ．７０９を固定して出力する。
【００５５】
また、例えば、「広色域設定」＝［オン／オフ］の切り換えをユーザが設定できるようにする。オン設定の場合は、受像機２が広色域対応可能な装置である場合に、ｘｖＹＣＣ７０９固定で色空間情報を伝送し、オフ設定の場合は、ＢＴ．７０９に固定して出力する。
【００５６】
なお、シンクである受像機２が広色域対応可能な装置であるか否かは、受像機２のＥＤＩＤ ＲＯＭ２４に書かれているディスプレイ情報を取得することにより検知することができる。
【００５７】
図１１〜図１５は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例５〜具体例９を示す模式図である。これらの具体例では、時刻ｔ０において、画像ａ、画像ｂ、画像ｃの３つの画像が合成された画面の映像信号が出力される。また、時刻ｔ１において画像ａの映像信号の色空間規格が変化する。これらの場合において、ホストＣＰＵ６０は、色空間情報を前時刻のものに固定して出力する。
【００５８】
図１１に示す具体例５では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例５において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のｘｖＹＣＣ７０９に固定して出力する。この具体例５において、例えば、〜ｔ０の画像と画像ｃとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００５９】
図１２に示す具体例６では、時刻ｔ０の前において、ＢＴ．７０９の画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例６において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のＢＴ．７０９に固定して出力する。この具体例６において、例えば、〜ｔ０の画像と画像ｂとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６０】
図１３に示す具体例７では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例７において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のｘｖＹＣＣ７０９に固定して出力する。この具体例７において、例えば、〜ｔ０の画像と画像ａとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６１】
図１４に示す具体例８では、時刻ｔ０の前において、ＢＴ．７０９の画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例８において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のＢＴ．７０９に固定して出力する。この具体例８において、例えば、〜ｔ０の画像と画像ｃとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６２】
図１５に示す具体例９では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの画面における面積が変更されている。この具体例９において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを合成画面の映像信号よりも前に出力された映像信号のｘｖＹＣＣ７０９に固定して出力する。この具体例９において、例えば、〜ｔ０の画像と画像aとのタイトルが同じであって、映像信号の色空間規格も同じ場合、時刻ｔ０からの合成画面を違和感なく表示させることができる。
【００６３】
このように、画面合成を行う直前の色空間情報の状態を、画面合成モードに遷移した後も保持することにより、画面合成を行う際、色が表示上変化するのを防ぐことができる。
【００６４】
図１６及び図１７は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１０及び具体例１１を示す模式図である。これらの具体例では、時刻ｔ０において、画像ａ、画像ｂ、画像ｃの３つの画像が合成された画面の映像信号が出力される。また、時刻ｔ１において画像ａの映像信号の色空間規格が変化する。これらの場合において、ホストＣＰＵ６０は、色空間情報を面積やサイズ（画角）が最も大きい画像の色空間規格に合わせる。合成画面における各画像の大きさは、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５からの情報を取得することにより、検知することができる。
【００６５】
図１６に示す具体例１０では、時刻ｔ０の前において、ＢＴ．７０９の画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ｘｖＹＣＣの画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例１０において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを、合成画面を構成する画像の中で最も面積が大きい映像信号のｘｖＹＣＣ７０９にして出力する。具体的には、ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａ及び画像ｃの方がＢＴ．７０９の画像ｂよりも大きいと判断し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ｃの方がＢＴ．７０９の画像ａ及び画像ｂよりも大きいと判断し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００６６】
図１７に示す具体例１１では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂ、ＢＴ．７０９の画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。この具体例１１において、ホストＣＰＵ６０は、ＨＤＭＩ Ｔｘ５５にセットする色域識別フラグを、合成画面を構成する画像の中で最も面積が大きい映像信号のＢＴ．７０９にして出力する。具体的には、ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたＢＴ．７０９の画像ｂ及び画像ｃの方がｘｖＹＣＣの画像ａよりも大きいと判断し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、すべてＢＴ．７０９の画像となるため、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００６７】
このように合成画面のサイズや表示面積が一番大きい映像の色空間情報に従うことにより、画面合成を行う際、色が表示上変化する箇所が少なくなるため、表示上の見苦しさを防ぐことができる。
【００６８】
図１８及図１９は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１２及び具体例１３を示す模式図である。これらの具体例では、時刻ｔ０において、サイズが同じ画像ａ、画像ｂの２つの画像が合成された画面の映像信号が出力される。また、時刻ｔ１において画像ａの映像信号の色空間規格が変化する。これらの場合において、ホストＣＰＵ６０は、サイズが同じ場合は、色空間情報を前時刻のものにして出力する。
【００６９】
図１８に示す具体例１２では、時刻ｔ０の前において、ｘｖＹＣＣの画面の映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさが等しいと判断し、時刻ｔ０よりも前時刻の色空間情報のｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、すべてＢＴ．７０９の画像となるため、ＢＴ．７０９の識別フラグをＨＤＭＩ Ｔｘ５５にセットする。
【００７０】
図１９に示す具体例１３では、時刻ｔ０の前において、ｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像の大きさが等しくなり、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。ホストＣＰＵ６０は、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさが等しいと判断し、時刻ｔ０よりも前時刻の色空間情報のｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、すべてＢＴ．７０９の画像となるため、ＢＴ．７０９の識別フラグをＨＤＭＩ Ｔｘ５５にセットする。
【００７１】
このように合成画面のサイズや表示面積が等しい場合、直前の色空間情報を保持することにより、画面合成を行う際、色が表示上変化する頻度が少なくなるため、表示上の見苦しさを防ぐことができる。
【００７２】
図２０及図２１は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１４及び具体例１５を示す模式図である。これらの具体例では、時刻ｔ０、ｔ１において、合成された画像ａ、画像ｂの大きさが逆転している。これらの場合において、ホストＣＰＵ６０は、時刻ｔ０から時刻ｔ１までの期間に応じて色空間情報を切り換えるか否かを判断する。具体的には、ホストＣＰＵ６０は、プログラムによって合成される画像サイズの切り換え制御を行う場合など、時刻ｔ０から時刻ｔ１までの切り換え期間を予め検出できる場合は、検出された期間と閾値とを比較し、色空間情報を切り換えるか否かを判断する。
【００７３】
切り換え期間の検出方法として、ハードディスクドライブ４４等にデータベースとして保持され、タイトルを構成する画像データの色空間属性がメタ情報として記録された情報を用いることができる。具体的には、現在の再生時刻の情報と、タイトルのメタ情報とから次回の色空間規格の切り換わりの発生までの所要時間、すなわち時刻ｔ０から時刻ｔ１までの期間を導出することができる。また、タイトルのメタ情報から、映像信号の色空間属性が頻繁に切り換わる区間を予め検出しておき、頻繁に切り換わる区間は色空間属性の切り換えを行わないようにしてもよい。
【００７４】
図２０に示す具体例１４では、時刻ｔ０の前において、ｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも小さくなり、時刻ｔ１においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも大きくなっている。ここでは、ホストＣＰＵ６０は、検出された期間と閾値とを比較し、検出された期間が閾値よりも大きいと判断している。そして、時刻ｔ０において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさ比較し、サイズ（面積）が大きい画像ｂの色空間情報ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさ比較し、サイズ（面積）が大きい画像ｂの色空間情報ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００７５】
図２１に示す具体例１５では、時刻ｔ０の前においてｘｖＹＣＣの画像ａ、ＢＴ．７０９の画像ｂの２つの画像が合成された映像信号を出力している。そして、時刻ｔ０においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも小さくなり、時刻ｔ１においてｘｖＹＣＣの画像ａがＢＴ．７０９の画像ｂよりも大きくなっている。ここでは、ホストＣＰＵ６０は、検出された期間と閾値とを比較し、検出された期間が閾値よりも小さいと判断している。そして、時刻ｔ０において、時刻ｔ０より前の色空間情報の状態を保持し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、ビデオ・グラフィック・プロセッサ５４のスケーラ５４５で所望の大きさにスケーリングされたｘｖＹＣＣの画像ａとＢＴ．７０９の画像ｂとの大きさ比較し、サイズ（面積）が大きい画像ａの色空間情報ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００７６】
このように合成画面のサイズや表示面積が短期間に変化する場合、直前の色空間情報を保持することにより、色が表示上変化する頻度が少なくなるため、表示上の見苦しさを防ぐことができる。
【００７７】
また、予め時刻ｔ０から時刻ｔ１までの期間を検出しなくても、色空間の切り換わりが発生してからの時間をカウントし、次の色空間の切り換わりの際に、カウントした所定期間が閾値よりも大きいか否かで色空間情報を切り換えるか否かを制御してもよい。
【００７８】
図２２は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１６を示す模式図である。この具体例では、時刻ｔ０において、画像ａ、画像ｂ、画像ｃの３つの画像が合成された合成画面の映像信号を出力し、時刻ｔ１において画像ａの映像信号の色空間規格がｘｖＹＣＣからＢＴ．７０９に切り換わっている。また、時刻ｔ０において画像ａの音声信号が出力され、時刻ｔ１において画像ｂの音声信号が出力されている。この場合において、ホストＣＰＵ６０は、音声信号が出力されている画像の色空間情報を出力する。具体的には、ホストＣＰＵ６０は、ビデオ・グラフィック・プロセッサ５４にて合成される複数の映像信号のうち主画像の映像信号を選択し、その映像信号の音声信号をＨＤＭＩ Ｔｘ５５にセットする。また、主画像は、ユーザが選択可能とすることが好ましい。
【００７９】
このように音声が出力される画面を主画面とし、主画面の映像の色空間情報に従うことにより、ユーザが注視する画像の色をより鮮やかに再現することができる。
【００８０】
次に、図２３〜図２５を参照して記録再生装置１の他の構成例について説明する。図２３は、合成処理部の他の構成を示すブロック図である。なお、図５に示す合成処理部５４２と同じ構成には、同じ符号を付し、ここでは説明を省略する。この合成処理部７０では、図５に示す合成処理部５４２の機能にさらにｓＲＧＢの色域を擬似的にｘｖＹＣＣの色域にエキスパンド（色域伸長処理）することが可能となっている。また、複数画像のブレンド比率も変更することが可能となっている。
【００８１】
この合成処理部７０は、スケーラ５４５と、色域伸長処理するカラーエキスパンダ７１と、ブレンダ５４６と、ビデオエンコーダ５４７とを備えている。
【００８２】
図２４は、ブレンダ５４６の構成例を示すブロック図である。このブレンダ５４６は、３つのブレンダ５４６ａ、５４６ｂ、５４６ｃから構成され、各々、同じ機能を有している。この構成例では、４つの入力映像信号の任意のブレンド合成が可能である。
【００８３】
また、図２５は、ブレンダ５４６ａ、５４６ｂ、５４６ｃの各構成を示すブロック図である。各ブレンダ５４６ａ、５４６ｂ、５４６ｃは、２系統の入力信号ＩＮ１，ＩＮ２をブレンド比率αで合成を行う。すなわち、２つの画像を係数（α値）により合成する。セレクタ８１は、ブレンド比率αを選択する。セレクタ８１には、入力信号ＩＮ１、入力信号ＩＮ２とともに、画素毎にα１、α２が入力される。また、ホストＣＰＵ６０から画面単位のブレンド比率αＨｏｓｔとともに、α値を選択する制御信号αＳｅｌｅｃｔが入力され、該αＳｅｌｅｃｔにより、所望のα値が選択される。２系統の入力信号ＩＮ１，ＩＮ２は、差分器８２で差分が計算され、セレクタ８３で選択されたブレンド比率αが乗算器８３にて乗算される。ブレンド比率αが乗算された差分は、加算器８４にて入力信号ＩＮ１と加算され、出力される。すなわち、出力信号ＯＵＴは、次式で計算することができる。
【００８４】
【数１】
【００８５】
図２３に戻って、スケーラ５４５で所望のサイズへのスケーリングされた画像データは、カラーエキスパンダ７１に送られる。カラーエキスパンダ７１では、後述するように、例えばｓＲＧＢの色域を擬似的にｘｖＹＣＣの色域にエキスパンド（色域伸長処理）することができる。カラーエキスパンダ７１から出力された画像データは、ブレンダ５４６に入力され、複数の画像がブレンド比率αで合成される。ビデオエンコーダ５４７は、所望の出力仕様になるようにタイミング生成、同期信号の付加などを行う。
【００８６】
次に、カラーエキスパンダ７１にて、擬似的にｘｖＹＣＣの色域にエキスパンドする方法について説明する。ＢＴ．６０１やＢＴ．７０９ではクロマ（Ｃｒ，Ｃｂ）信号のレベルは、１６−２４０の値で規定されている。ｘｖＹＣＣでは、更に色域を拡張するために、１−２５４の値の信号レベルを扱うことができる。これを擬似ｘｖＹＣＣ信号に変換する場合、３６−２２０までの信号はそのまま通過させ、１６−３６の信号と２２１−２４０までの信号はそれぞれ線形処理にてレベル変換（レベル伸張）を行い、１６−３６の信号を１−３６の信号に、２２１−２４０の信号を２２１−２５４の信号に変換する。この結果、源信号の比較的飽和度の高い色信号が更に伸張され、擬似ｘｖＹＣＣ信号が生成される。Ｃｂについても同様に伸張を行うことができる。なお、ＲＧＢ信号にて同様の色域伸張を行っても構わない。また、レベルの閾値を変えても構わないし、レベル変換を非線形処理することでも同様の効果を得ることができる。
【００８７】
また、ｘｖＹＣＣの色域にエキスパンドする他の方法を、以下に説明する。ＩＤＷ（International Display Workshops）２００６学会における「Ｒｅｃｅｎｔ Ｔｒｅｎｄ ｏｆ Ｗｉｄｅ Ｇａｍｕｔ Ｓｔａｎｄａｒｄｓ ｆｏｒ Ｃｏｌｏｒ Ｉｍａｇｉｎｇ」（Ｔ．Ｍａｔｓｕｍｏｔｏらによる）の文献中でも記載されているように、Ｒ’，Ｇ’，Ｂ’からＹ’７０９，Ｃｂ’７０９，Ｃｒ’７０９への変換式は、式（１）で表される。また、式（１）より、式（２）が得られる。
【００８８】
【数２】
【００８９】
ＢＴ．７０９の色域では、式（３）の条件を満たす必要がある。例えば、Ｃｂ＝Ｃｒという条件を更に付加した場合（Ｃｂ＝Ｃｒ＝Ｃと置く）、式（２）、式（３）より、式（４）の条件式が得られる。
【００９０】
【数３】
【００９１】
図２６は、上記条件におけるＢＴ．７０９の色域をＹ−Ｃｂ，Ｃｂ空間上に示す模式図である。この菱形のＢＴ．７０９の色域領域の境界付近の信号を、境界の外の領域までエキスパンド（色域伸長処理）する。なお、上記条件に限らず、ＢＴ．７０９の色域の境界付近の信号に対してエキスパンド（色域伸長処理）してもよい。
【００９２】
このようにＢＴ．７０９等の色域をｘｖＹＣＣ等の広色域に変換することにより、ＨＤＭＩで伝送する色空間情報を、常にｘｖＹＣＣ７０９固定で出力することができる。また、色空間情報が切り換わらないので、色が表示上変化するのを防ぐことができる。
【００９３】
また、上術とは逆に、広色域の信号が入力された場合でも、ＢＴ．７０９、ｓＲＧＢの狭い色空間情報に圧縮し、常にＢＴ．７０９等の色空間情報に固定で出力してもよい。
【００９４】
図２７は、色空間情報を圧縮する場合の合成処理部の構成例を示すブロック図である。なお、図５に示す合成処理部５４２と同じ構成には、同じ符号を付し、ここでは説明を省略する。この合成処理部９０では、図５に示す合成処理部５４２の機能にさらにｘｖＹＣＣの色域をＢＴ．７０９の色域に圧縮処理することが可能となっている。また、複数画像のブレンド比率も変更することが可能となっている。
【００９５】
カラーコンプレッサ９１は、ＢＴ．７０９の色域の信号を、そのまま出力し、ｘｖＹＣＣの色域の信号を、ＢＴ．７０９に圧縮して出力する。
【００９６】
これにより、色空間情報が常にＢＴ．７０９固定で出力され、色空間情報が切り換わらないので、色が表示上変化するのを防ぐことができる。
【００９７】
図２８及図２９は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１７及び具体例１８を示す模式図である。これらの具体例では、ブレンド比率αによってＧＵＩ表画像が裏画像と合成されている。そして、時刻ｔ０、ｔ１において、裏画像の色空間規格が切り換えられている。これらの場合において、ホストＣＰＵ６０はブレンダ５４６ａ、５４６ｂ、５４６ｃからブレンド比率αを取得し、ブレンド比率αに応じて色空間情報を切り換えるか否かを判断する。具体的には、ブレンドする表画面（ＧＵＩ）のα値が５０％以上の場合、表画面（ＧＵＩ）の色空間情報を出力する。
【００９８】
図２８に示す具体例１７では、ｘｖＹＣＣのＧＵＩ表画像が裏画像にα値が５０％以上でブレンディングされている。そして、時刻ｔ０において、ＢＴ．７０９の裏画像がｘｖＹＣＣの裏画像に切り換わり、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。ホストＣＰＵ６０は、ブレンド比率αが５０％以上であることを検知し、表画像の色空間情報ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【００９９】
図２９に示す具体例１８では、ＢＴ．７０９のＧＵＩ表画像が裏画像にα値が５０％以上でブレンディングされている。そして、時刻ｔ０において、ＢＴ．７０９の裏画像がｘｖＹＣＣの裏画像に切り換わり、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。ホストＣＰＵ６０は、ブレンド比率αが５０％以上であることを検知し、表画像の色空間情報ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１００】
このようにブレンド比率αが５０％以上の場合、表画像の色空間情報を伝送することにより、表画像の色が表示上変化する頻度が少なくなるため、表示上の見苦しさを防ぐことができる。
【０１０１】
図３０〜図３２は、画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１９〜具体例２１を示す模式図である。これらの具体例では、時刻ｔ１において、ＧＵＩ表画像が裏画像と合成されている。これらの場合において、ホストＣＰＵ６０は、画面合成を行う直前の色空間情報の状態を保持する。
【０１０２】
図３０に示す具体例１９では、時刻ｔ０よりも前の時刻において、ｘｖＹＣＣの色空間規格の映像信号が出力されている。時刻ｔ０において、ｘｖＹＣＣのＧＵＩ表画像がｘｖＹＣＣの裏画像にブレンディングされる。そして、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。この場合、ホストＣＰＵ６０は、時刻ｔ０において、直前の画像の色空間情報を保持し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、直前の色空間情報を保持し、ｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１０３】
図３１に示す具体例２０では、時刻ｔ０よりも前の時刻において、ＢＴ．７０９の色空間規格の映像信号が出力されている。時刻ｔ０において、ｘｖＹＣＣのＧＵＩ表画像がｘｖＹＣＣの裏画像にブレンディングされる。そして、時刻ｔ１において、ｘｖＹＣＣの裏画像がＢＴ．７０９の裏画像に切り換わる。この場合、ホストＣＰＵ６０は、時刻ｔ０において、直前の画像の色空間情報を保持し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１において、直前の色空間情報を保持し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１０４】
図３２に示す具体例２１では、時刻ｔ０よりも前の時刻において、ＢＴ．７０９の色空間規格の映像信号が出力されている。時刻ｔ０において、ｘｖＹＣＣのＧＵＩ表画像がＢＴ．７０９の裏画像にブレンディングされる。そして、時刻ｔ１において、ｘｖＹＣＣの画像の映像信号に切り換わる。この場合、ホストＣＰＵ６０は、時刻ｔ０において、直前の画像の色空間情報を保持し、ＢＴ．７０９をＨＤＭＩ Ｔｘ５５にセットする。また、時刻ｔ１においては、合成画像ではないので、画像の色空間であるｘｖＹＣＣ７０９をＨＤＭＩ Ｔｘ５５にセットする。
【０１０５】
このようにブレンディングにより画面合成を行う場合、画面合成を行う直前の色空間情報の状態を保持することにより、色が表示上変化するのを防ぐことができる。
【０１０６】
以上、詳細に説明したように、画面を合成する際に、ＨＤＭＩで伝送する色空間情報を固定することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１０７】
また、画面を合成する前の色空間情報を保持し、画面合成後も該色空間情報を伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１０８】
また、合成画面のサイズや面積に従ってＨＤＭＩで伝送する色空間情報を決定することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化した際にも、視覚的にその変化を目立ちにくくすることができる。
【０１０９】
また、合成画面のサイズや面積に従ってＨＤＭＩで伝送する色空間情報を決定する際、サイズや面積が同じ場合、前の色空間情報を保持して伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化した際にも、視覚的にその変化を目立ちにくくすることができる。
【０１１０】
また、アルファ・ブレンドによって全画面の画面合成を行う際、画面内のアルファ値の最小値が５０％以上の表画面（ＧＵＩ）の色空間情報を伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１１１】
また、合成画面のサイズや面積に従ってＨＤＭＩで伝送する色空間情報を決定する際、切り換え間隔が所定の時間以下の場合、前の色空間情報を保持して伝送することにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化した際にも、視覚的にその変化を目立ちにくくすることができる。
【０１１２】
また、画面を合成する際、通常色域の信号に対して色域伸長処理を施し擬似広色域信号を生成して合成し、ＨＤＭＩで伝送する色空間情報を広色域に固定にすることにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１１３】
また、画面を合成する際、広色域の信号に対して色域圧縮処理を施し、通常色域信号を生成して合成し、ＨＤＭＩで伝送する色空間情報を通常色域に固定にすることにより、該色空間情報に従って色域伸長処理を切り換える受像機側でグラフィックスや合成画像の色が表示上変化する問題を回避できる。
【０１１４】
なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。例えば、上記実施の形態では、ＨＤＭＩを用いた伝送例に挙げて説明したが、これに限られるものではない。色域識別フラグ、メタデータなどの属性データを伝送することはできないが、例えば、コンポーネント端子５８、コンポジットビデオ端子（あるいは、Ｓ端子）５９から、広色域のアナログコンポーネント信号、アナログコンポジットビデオ信号（あるいは、Ｙ／Ｃセパレートビデオ信号）を出力し、ホストＣＰＵ６０が、例えば、ＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）等により受像機２のホストＣＰＵ２３と通信するようにすればよい。
【図面の簡単な説明】
【０１１５】
【図１】本発明の一実施の形態に係る再生システムを示す図である。
【図２】ｘｖＹＣＣの色域を平面に投射した場合の模式図である。
【図３】ビデオ・グラフィック・プロセッサの構成を示すブロック図である。
【図４】記録再生装置の構成を具体的に示すブロック図である。
【図５】画像を合成する際のビデオ・グラフィック・プロセッサの機能ブロック図である。
【図６】１つの色空間規格からなる画像を出力する場合の映像信号の色空間規格と属性データの色空間情報との関係を示す模式図である。
【図７】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１を示す模式図である。
【図８】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例２を示す模式図である。
【図９】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例３を示す模式図である。
【図１０】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例４を示す模式図である。
【図１１】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例５を示す模式図である。
【図１２】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例６を示す模式図である。
【図１３】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例７を示す模式図である。
【図１４】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例８を示す模式図である。
【図１５】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例９を示す模式図である。
【図１６】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１０を示す模式図である。
【図１７】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１１を示す模式図である。
【図１８】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１２を示す模式図である。
【図１９】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１３を示す模式図である。
【図２０】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１４を示す模式図である。
【図２１】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１５を示す模式図である。
【図２２】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１６を示す模式図である。
【図２３】合成処理部の他の構成を示すブロック図である。
【図２４】ブレンダの構成例を示すブロック図である。
【図２５】ブレンダの各構成を示すブロック図である。
【図２６】ある条件におけるＢＴ．７０９の色域をＹ−Ｃｂ，Ｃｂ空間上に示す模式図である。
【図２７】色空間情報を圧縮する場合の合成処理部の構成例を示すブロック図である。
【図２８】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１７を示す模式図である。
【図２９】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１８を示す模式図である。
【図３０】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例１９を示す模式図である。
【図３１】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例２０を示す模式図である。
【図３２】画面合成を行う場合の画面イメージ、出力映像信号、及び色空間情報の具体例２１を示す模式図である。
【符号の説明】
【０１１６】
１ 記録再生装置、 ２ 受像機、 ３ ＨＤＭＩケーブル、 １１ ＭＰＥＧデコーダ、 １２ ビデオ・グラフィック・プロセッサ、 １３ ホストＣＰＵ、 １４ ＨＤＭＩ Ｔｘ、 １５ ＨＤＭＩコネクタ、 ２１ ＨＤＭＩコネクタ、 ２２ ＨＤＭＩ Ｒｘ、 ２３ ホストＣＰＵ、 ２４ ＥＤＩＤＲＯＭ、 ２５ ビデオ・グラフィック・プロセッサ、 ２６ ディスプレイデバイス、 ４１ ライン入力端子、 ４２ アナログチューナ、 ４３ ディスクドライブ、 ４４ ハードディスクドライブ、 ４５ ＩＥＥＥ１３９４入力端子、 ４６ デジタルチューナ、 ４７ セレクタ、 ４８ ビデオデコーダ、 ４９ セレクタ、 ５０ ＭＰＲＧエンコーダ、 ５１ ＨＤＶプロセッサ、 ５２ ストリームプロセッサ、 ５３ ＭＰＥＧデコーダ、 ５４ ビデオ・グラフィック・プロセッサ
【特許請求の範囲】
【請求項１】
第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理装置であって、
複数の画像信号を合成し、合成画像信号を生成する画像処理手段と、
上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御手段と、
所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送手段とを備え、
上記制御手段は、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定することを特徴とする画像処理装置。
【請求項２】
上記制御手段は、上記画像処理手段にて合成された複数の画像信号の色空間規格のうち、最も画面サイズが大きくなるように合成された画像信号の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項３】
上記制御手段は、上記画像処理手段にて合成された複数の画像信号の画面サイズが同じ場合、上記合成画像信号が伝送される前の色空間規格に決定することを特徴とする請求項２記載の画像処理装置。
【請求項４】
上記制御手段は、上記画像処理手段にて合成される２つの画像の合成比率に基づいて上記合成画像信号の色空間規格を決定することを特徴とする請求項１記載の画像処理装置。
【請求項５】
上記制御手段は、色空間情報の切り換え間隔が所定時間以下の場合、上記合成画像信号に切り換える前に伝送された色空間情報の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項６】
上記画像処理手段は、上記第１の色空間規格の画像信号に対して擬似的な第２の色空間規格となるように伸張処理し、
上記制御手段は、上記第２の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項７】
上記制御手段は、上記画像処理手段にて合成される複数の画像信号の色空間規格が異なる場合、上記合成画像信号に切り換える前に伝送された色空間情報の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項８】
上記画像処理手段にて合成された複数の画像信号のうち主画像の画像信号を選択する選択手段を備え、
上記制御手段は、上記主画像の画像信号の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項９】
上記主画像は、音声が出力される画像であることを特徴とする請求項８記載の画像処理装置。
【請求項１０】
上記画像処理手段は、上記第２の色空間規格の画像信号に対して擬似的な第１の色空間規格となるように圧縮処理し、
上記制御手段は、上記第１の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項１１】
第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理方法であって、
複数の画像信号を合成し、合成画像信号を生成する画像処理工程と、
上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御工程と、
所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送工程とを備え、
上記制御工程では、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定することを特徴とする画像処理方法。
【請求項１】
第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理装置であって、
複数の画像信号を合成し、合成画像信号を生成する画像処理手段と、
上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御手段と、
所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送手段とを備え、
上記制御手段は、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定することを特徴とする画像処理装置。
【請求項２】
上記制御手段は、上記画像処理手段にて合成された複数の画像信号の色空間規格のうち、最も画面サイズが大きくなるように合成された画像信号の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項３】
上記制御手段は、上記画像処理手段にて合成された複数の画像信号の画面サイズが同じ場合、上記合成画像信号が伝送される前の色空間規格に決定することを特徴とする請求項２記載の画像処理装置。
【請求項４】
上記制御手段は、上記画像処理手段にて合成される２つの画像の合成比率に基づいて上記合成画像信号の色空間規格を決定することを特徴とする請求項１記載の画像処理装置。
【請求項５】
上記制御手段は、色空間情報の切り換え間隔が所定時間以下の場合、上記合成画像信号に切り換える前に伝送された色空間情報の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項６】
上記画像処理手段は、上記第１の色空間規格の画像信号に対して擬似的な第２の色空間規格となるように伸張処理し、
上記制御手段は、上記第２の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項７】
上記制御手段は、上記画像処理手段にて合成される複数の画像信号の色空間規格が異なる場合、上記合成画像信号に切り換える前に伝送された色空間情報の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項８】
上記画像処理手段にて合成された複数の画像信号のうち主画像の画像信号を選択する選択手段を備え、
上記制御手段は、上記主画像の画像信号の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項９】
上記主画像は、音声が出力される画像であることを特徴とする請求項８記載の画像処理装置。
【請求項１０】
上記画像処理手段は、上記第２の色空間規格の画像信号に対して擬似的な第１の色空間規格となるように圧縮処理し、
上記制御手段は、上記第１の色空間規格に決定することを特徴とする請求項１記載の画像処理装置。
【請求項１１】
第１の色空間規格の画像信号と当該第１の色空間規格で規定される色域よりも広い色域の第２の色空間規格の画像信号とを信号処理する画像処理方法であって、
複数の画像信号を合成し、合成画像信号を生成する画像処理工程と、
上記合成画像信号の色空間情報を上記第１の色空間規格又は第２の色空間規格のいずれかに決定する制御工程と、
所定のデジタル映像信号伝送規格にて上記合成画像信号と上記決定された色空間情報とを伝送する伝送工程とを備え、
上記制御工程では、上記画像処理手段にて合成される複数の画像信号の色空間規格、上記合成画像信号に切り換える前に伝送された色空間情報のうち少なくとも１つに応じて上記合成画像信号の色空間情報を決定することを特徴とする画像処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【公開番号】特開２００９−３８６８２（Ｐ２００９−３８６８２Ａ）
【公開日】平成２１年２月１９日（２００９．２．１９）
【国際特許分類】
【出願番号】特願２００７−２０２３７９（Ｐ２００７−２０２３７９）
【出願日】平成１９年８月２日（２００７．８．２）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２１年２月１９日（２００９．２．１９）
【国際特許分類】
【出願日】平成１９年８月２日（２００７．８．２）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]