映像表示装置、映像信号処理装置及び映像信号処理方法
【課題】フレーム補間処理を有効な画面領域だけで処理し、適切な画面端処理を行えるようにする。
【解決手段】映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出部１２３と、その検出結果に基づいてフレーム画像それぞれの黒画面領域を除く処理領域を設定する設定部１２４と、処理領域が設定された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理部１２５と、フレーム補間処理された映像信号を表示する表示モニタ１３とを備え、黒画面領域を切り離した画像でフレーム補間を行い、必要十分な画面領域についてフレーム補間処理を行う。
【解決手段】映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出部１２３と、その検出結果に基づいてフレーム画像それぞれの黒画面領域を除く処理領域を設定する設定部１２４と、処理領域が設定された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理部１２５と、フレーム補間処理された映像信号を表示する表示モニタ１３とを備え、黒画面領域を切り離した画像でフレーム補間を行い、必要十分な画面領域についてフレーム補間処理を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば液晶表示装置に映像を表示する際に、残像による像流れを抑制するために映像信号に対してフレーム補間処理を施すフレーム倍速処理機能を有する映像表示装置、映像信号処理装置及び映像信号処理方法に関する。
【背景技術】
【０００２】
近時、テレビジョン受像機にはハイビジョン放送にも対応した液晶表示装置が急速に普及されつつある。また、パーソナルコンピュータにおいては、表示モニタとして液晶表示装置が主流となり、一方でデジタル放送対応チューナを搭載してパソコン上でデジタル放送の映像を視聴することが可能となっている。このような液晶表示装置にあっては、液晶の反応速度の遅さにより、映像に早い動きがあると残像による像流れを生じてしまう。この問題を解消するため、前後のフレーム画像から補間フレームを生成するフレーム倍速処理回路が搭載されるようになった（例えば特許文献１参照）。
【０００３】
しかしながら、実際のテレビジョン放送では、例えば１６：９のハイビジョン映像信号の中に４：３の標準テレビジョン映像が差し込まれ、比率を合わせるために、その両側に黒画面領域が挿入され、ハイビジョン放送信号として放送されていることがある。このような場合、従来の技術では、フレーム補間処理において、処理する必要のない画面領域まで処理してしまい、無駄な消費電力を費やしてしまっていた。また、本来の４：３の標準テレビジョン映像の画面端ではなく黒画面領域に対して画面端処理（例えば特許文献２参照）を施してしまい、適切な画面端処理ができなかった。
【特許文献１】特開２００６−２２７２３５号公報
【特許文献２】特開２００８−１１８６２０号公報。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
以上のように、従来のフレーム補間処理では、処理する必要のない画面領域まで処理してしまうこと、黒画面領域に対して画面端処理を施してしまい、適切な画面端処理ができないことが問題となっている。
【０００５】
本発明の目的は、上記の問題を解決し、フレーム補間処理を有効な画面領域だけで処理することができ、適切な画面端処理を行うことのできる映像表示装置、映像信号処理装置及び映像信号処理方法を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するために本発明に係る映像表示装置は、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、前記検出手段の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限する領域制限手段と、前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段と、前記フレーム補間処理された映像信号を表示する表示手段とを具備することを特徴とする。
【０００７】
また、本発明に係る映像信号処理装置は、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、前記検出手段の検出結果に基づいてフレーム画像それぞれの黒画面領域を制限する領域制限手段と、前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段とを具備することを特徴とする。
【０００８】
また、本発明に係る映像信号処理方法は、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、前記黒画面領域の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限し、前記制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うことを特徴とする。
【０００９】
すなわち、本発明に係る映像表示装置、映像信号処理装置及び映像信号処理方法では、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、前記黒画面領域の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限し、前記制限された前後のフレーム画像を用いて各フレームの補間画像を生成するようにしているので、黒画面領域を切り離した画像でフレーム補間を行うことが可能となり、必要十分な画面領域についてフレーム補間処理を行えるようになる。また、黒画面領域を切り離した画像について画面端処理を施すことが可能となり、適切なフレーム補間映像が得られるようになる。
【発明の効果】
【００１０】
以上のように構成したことにより、本発明によれば、フレーム補間処理を有効な画面領域だけで処理することができ、適切な画面端処理を行うことのできる映像表示装置、映像信号処理装置及び映像信号処理方法を提供することができる。
【発明を実施するための最良の形態】
【００１１】
以下、図面を参照して本発明の実施の形態を詳細に説明する。
【００１２】
図１は本発明が適用される液晶テレビの一実施形態を示すブロック図である。図１において、ＴＶチューナ１１は、アンテナ（図示せず）により受信されたテレビジョン放送信号を選局復調し、映像信号、音声信号、データ信号を得る。ここで得られた映像信号は、補間フレーム生成回路１２に供給される。この補間フレーム生成回路１２は内部動作を制御するための制御部１２１を備える。この制御部１２１は外部から指定される各種パラメータの設定値を格納する設定値格納部１２１Ａを備え、この設定値格納部１２１Ａに格納された設定値に従って、領域検出部１２３、処理領域設定部１２４、フレーム補間処理部（画面端処理を含む）１２５及び映像出力部１２６それぞれの処理を制御する。
【００１３】
上記補間フレーム生成回路１２に供給された映像信号は映像入力部１２２に供給される。この映像入力部１２２は、映像信号を入力して前後フレーム＃Ｎ，＃Ｎ＋１を保持する。領域検出部１２３は、映像入力部１２２に保持される前後フレーム＃Ｎ，＃Ｎ＋１の画像をそれぞれ設定値格納部１２１Ａに格納された設定値に従って解析し、処理不要な領域（例えば黒画面領域）を検出する。処理領域設定部１２４は、領域検出部１２３の検出結果に従い、前後フレーム画像それぞれについてフレーム補間処理を行う処理領域を設定する。フレーム補間処理部１２５は、前段の処理領域設定部１２４で設定された前後フレーム＃Ｎ，＃Ｎ＋１の画像処理領域について画面端処理を行って補間フレーム＃Ｎ＋０．５の画像を生成する。生成された補間フレーム＃Ｎ＋０．５の画像は、前後フレーム＃Ｎ，＃Ｎ＋１の画像と共に映像出力部１２６に送られる。映像出力部１２６は前後フレームの画像＃Ｎ，＃Ｎ＋１の間に補間フレーム＃Ｎ＋０．５の画像を挿入して倍速画像を生成し、液晶モニタ１３に出力する。
【００１４】
図２は上記補間フレーム生成回路１２のより具体的な構成を示すブロック図である。尚、図２において、図１と機能的に同一部分には同一符号を付して示す。図２において、２１は映像信号を伝送するバスラインであり、このバスライン２１には信号処理部２２、外部メモリ（フレームバッファ）２３、補間フレーム生成部２４、映像出力部１２６が接続される。補間フレーム生成部２４は、図１に示した映像入力部１２２及び映像出力部１２６に相当する機能を有する映像信号をフレーム単位で入出力するためのメモリインターフェース（以下、Ｉ/Ｆ）部２４１、設定値格納部１２１Ａを備える制御部１２１、領域検出部１２３、処理領域設定部１２４、フレーム補間処理部（画面端処理含む）１２５を備える。設定値格納部１２１Ａは、設定値を指定するためのホストコンピュータ２５に接続される。
【００１５】
図２の構成では、補間フレーム生成部２４において、メモリＩ／Ｆ部２４１を介して映像の入出力を行う。ホストコンピュータ２５は各種パラメータの設定やシステム全体の制御を行う。信号処理部２２は、放送波の受信や外部映像信号入力端子等から受信した映像信号を処理し、外部メモリ(フレームバッファ)２３へ転送する。外部メモリ(フレームバッファ)２３では、各ブロックが処理した映像データを格納しており、補間フレーム生成部２４に現フレームデータ（Frame#N+1）及び前フレームデータ（Frame#N）を出力し、補間フレーム生成部２４から補間フレームデータ（Frame#N+0.5）を取り込む。映像出力部１２６は、外部メモリ(フレームバッファ)２３から各フレームデータ（Frame#N, Frame#N+0.5, Frame#N+1）を順に読み出し、外部端子等を介して液晶モニタ（図示せず）へ出力する。
【００１６】
図３は、上記構成による補間フレーム生成回路１２の具体的な処理の流れを示すフローチャートである。
【００１７】
まず初期設定として、画像を入力し補間フレーム生成処理を開始する前に、各種パラメータを設定する（ステップＳ１）。ここでは、画面端を検出するための処理を行う検出領域、黒画素判定または０ベクトル判定の検出方法、黒画素判定時に使用する検出画素閾値、０ベクトル判定時に使用する検出ベクトル閾値、複数フレーム連続して同一の画面端を検出するための検出フレーム数閾値、及び本検出機能を使用するか否かの検出機能ＯＮ／ＯＦＦを設定する。
【００１８】
上記各種パラメータの設定完了後、検出フレーム数を初期化し（ステップＳ２）、画像入力を開始する（ステップＳ３）。ここで、検出機能ＯＮ／ＯＦＦ設定を確認し（ステップＳ４）、ＯＦＦの状態であれば、画面端検出は行わず、処理領域を全領域とする（ステップＳ５）。また、ＯＮの状態であれば、検出方法の確認を行う（ステップＳ６）。
【００１９】
上記ステップＳ６で黒画素判定方法であった場合、現画像の検出領域内の画素と検出画素閾値とを比較し、閾値以下であれば黒画素と判断し、閾値を超える場合は黒画素ではないと判断する（ステップＳ７）。次に、検出領域内において、黒画素と判断した画素が、水平垂直方向に連続して存在する矩形領域があるかを確認する（ステップＳ８）。矩形領域が存在しない場合、現フレームでは画面端を検出できなかったものとして検出フレーム数を初期化する（ステップＳ９）。矩形領域が存在する場合は、現フレームで画面端を検出できたものとして検出フレーム数をインクリメントする（ステップＳ１０）。
【００２０】
一方、上記ステップＳ６で０ベクトル判定方法であった場合、現画像と前画像とを使用するなどして、現画像の検出領域内の各画素の動きベクトルを検出する（ステップＳ１１）。続いて、検出したベクトルと検出ベクトル閾値とを比較し、閾値以下であれば０ベクトルであると判断し、閾値を超える場合は０ベクトルではないと判断する（ステップＳ１２）。また、このステップＳ１２では、検出領域内において、０ベクトルであると判断した画素が、水平垂直方向に連続して存在する矩形領域があるかを確認する。矩形領域が存在しない場合、現フレームでは画面端を検出できなかったものとして検出フレーム数を初期化する（ステップＳ１３）。矩形領域が存在する場合は、現フレームで画面端を検出できたものとして、ステップＳ１０に移行し、検出フレーム数をインクリメントする。
【００２１】
検出フレーム数をインクリメントまたは初期化した後、検出フレーム数と検出フレーム数閾値とを比較する（ステップＳ１４）。閾値未満である場合は、画面端検出が十分ではないものとして、ステップＳ５に移行して処理領域を全領域に設定する。閾値以上の場合は、画面端を検出完了したものとして、検出した画面端を処理領域とする（ステップＳ１５）。処理領域が決定すると、その処理領域端を画面端としてフレーム補間処理を行い（ステップＳ１６）、処理終了の指示があるまでステップＳ３に戻って次フレームの処理を継続する（ステップＳ１７）。
【００２２】
以上のような方法により、自動的に最適な画面端を検出し、検出した画面端を使用してフレーム補間生成時の画面端処理を行う。
【００２３】
以下、図４乃至図８を参照して、具体的な処理例を説明する。
【００２４】
本発明は、液晶テレビ等において使用されるフレーム倍速処理回路の処理量を削減し、性能を向上させるための技術に関するものである。液晶テレビで表示する映像は、１フレーム表示期間、常に発色させており、次のフレームで別の映像を表示させた場合でも、前のフレームで表示した映像が残像として残ってしまうため、動画表示に弱いという特性がある。そのため近年では、２つのフレームの間の時刻に表示すべき映像を生成し、生成した映像を２つのフレームの間の時刻に表示することによって、フレーム間隔を短くし、残像を少なくするというフレーム倍速技術が多く用いられている。
【００２５】
図４はフレーム補間処理に関して簡単に説明するための概念図である。入力画像１を表示する時刻をＴ１、入力画像２を表示する時刻をＴ２とする。入力画像１と入力画像２では、自動車が移動しているため位置が異なっている。補間画像は、入力画像１と入力画像２とから生成する画像であり、自動車の位置は、入力画像１と入力画像２との間の位置になるように生成される。この補間画像が表示される時刻Ｔｈとその前後の入力画像が表示される時刻Ｔ１，Ｔ２との関係は、Ｔ１＜Ｔｈ＜Ｔ２となっており、このように表示することでフレーム間隔を短くし、前述した残像を抑えることが可能となる。
【００２６】
また、デジタル放送では、解像度の高い（ＨＤ）映像を送信することができるが、全ての映像の解像度が高いというわけではなく、解像度の低い（ＳＤ）映像も含まれている。中には、ＳＤ画像の左右端に黒色の画像を付加したものをＨＤ映像として送信していることもある。このような映像を受信したＴＶでは、実映像がＳＤ映像であるとしても、受信信号としてはＨＤ映像として受信するため、ＨＤ映像として様々な画像処理を行うことになる。多くの画像処理においては、もともと映像の存在しない（正しくは黒色の映像が表示されている）領域に対して処理を行うことになり、無駄な処理を実施していると言える。
【００２７】
補間フレーム生成処理においても上記と同様のことが言える。さらに補間フレーム生成処理では、画像端とそれ以外の通常領域との処理とで異なる処理をすることがある。その場合、本来は映像領域がＳＤ画像の領域であるが、黒色を付加されたため、実際の画像端とは異なる画像端に対し、画像端処理を施すことになり、画像端処理の性能が劣化する可能性がある。
【００２８】
図５及び図６は、従来の方法による誤動作例を示すもので、図５の例は、ＳＤ画像中に文字がスクロールして表示されている場合、入力映像１，２から補間画像を生成したとき、生成したスクロール文字がＳＤ画像の有効領域からはみ出してしまった様子を示している。また、図６の例は、黒画面領域と同色の絵柄がＳＤ画像端と黒画面領域との境界で移動する映像の場合に、ＳＤ有効領域外の画像（黒画面領域）が絵柄の形状に影響してしまった様子を示している。
【００２９】
上記のような誤動作を生じた補間フレームを含めて連続表示すると、不自然な映像となってしまうと共に、無用な処理が行われることになる。そこで本発明では、補間フレーム生成処理において、前述した黒画像が挿入されたＳＤ映像がＨＤ映像として入力された場合、自動的にＳＤ画像であることを判定し、無駄な処理を省き、適切な画面端処理を施すことの可能な方法を提案する。
【００３０】
図７は従来の補間フレーム生成例、図８は本発明による補間フレーム生成例を示している。今、図７（ａ）に示すように、ＳＤ画像の両端に矩形の黒画像領域を付加した画像全体をＨＤ画像として受信した場合の画像が入力されたとすると、従来の補間フレーム生成方法では、図７（ｂ）に示すように、画像の処理領域を入力画像と同じ画像全体としていた。
【００３１】
この場合、入力された画像の領域全体をフレーム補間処理する領域としているため、黒色の領域もフレーム補間処理されることとなり、この画像の前に入力された画像の黒色領域とから黒色の補間画像が生成される。また、処理領域と実際の画像端（ＳＤ画像の画像端）とは異なっている。この場合、ＳＤ画像と黒色領域の境界は、通常のフレーム補間処理を行うこととなり、最適な画面端処理を実施しているとは言えず、生成される補間フレームの精度を劣化させる可能性がある。
【００３２】
これに対し、本発明では、図８（ａ）に示すように、ＳＤ画像の両端に矩形の黒画像を付加した画像全体をＨＤ画像として受信した場合の画像が入力されたとすると、黒画面領域を検出してそれ以外の部分をＳＤ画像と認識して処理領域とする。そして、図８（ｂ）に示すように、認識したＳＤ画像で補間フレームを生成した後、黒画面領域を付加して元の画像に戻す。
【００３３】
この場合、図８（ａ）に示す入力画像に対し、点線で示すように検出領域を設定する。この検出領域中の矩形で連続した黒色領域を検出し、それ以外の一点鎖線で示す処理領域を自動的に設定する。つまり、実際のＳＤ画像の画面端と処理する画面端とが一致しており、最適な画面端処理を実施することが可能となり、従来例のように生成する補間フレームの精度を劣化させることはない。
【００３４】
図８（ｂ）は、処理した画像に対して点線の枠で示した領域（ＳＤ領域）のみを外部メモリ（図２の２３）に書き込むだけでよいことを示している。同一の黒色領域を検出している期間、枠外の黒色領域データは、外部メモリに事前に一度書き込むだけでよく、メモリアクセス量を削減することも可能となる。
【００３５】
以上のように、上記実施形態では、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、黒画面領域の検出結果に基づいてフレーム画像それぞれの黒画面領域を制限し、制限された前後のフレーム画像を用いて各フレームの補間画像を生成するようにしているので、黒画面領域を切り離した画像でフレーム補間を行うことが可能となり、必要十分な画面領域についてフレーム補間処理を行うことができる。また、黒画面領域を切り離した画像について画面端処理を施すことが可能となり、適切なフレーム補間映像を得ることができる。
【００３６】
尚、上記実施形態では、ＳＤ領域の外側に付加された黒画面領域の検出方法例として、黒画素検出手法と０ベクトル検出手法を例示したが、他の任意の手法によって検出した場合でも実施可能である。０ベクトルを検出するための手法は、例示したものだけによらず、任意の手法で検出した場合でも実施可能である。
【００３７】
また、黒画面領域の検出領域は、画面左右端だけでなく、画面上下端の場合も同様に実施可能である。さらに２画面表示やマルチ画面表示、データ放送表示時など黒色画像が上下左右端以外に付加された場合等にも適用可能である。また、この領域を複数設定することも可能である。さらに、黒に限らず、他の色やシンボル、キャラクタ等の絵柄でもよいが、本発明では黒画面領域として定義する。
【００３８】
また、上記実施形態では、２つの前後フレームから１つの補間フレームを生成する補間処理を例示したが、２つ以上の前後フレームから２つ以上の補間フレームを生成する場合でも実施可能である。
【００３９】
検出した画面端に従って処理する画面端処理は、特定の画面端処理に適用できるだけでなく、あらゆる画面端処理に適用することが可能であるため、本発明では具体的な画面端処理機能に関する説明は省略する。
【００４０】
また、上記実施形態は、液晶テレビに適用した場合について説明したが、本発明は携帯端末やコンピュータ装置に用いられる表示装置にも適用可能である。また、補間フレーム生成回路が集積回路化されている場合でも、そのチップに組み込み可能であることは勿論である。
【００４１】
その他、本発明は前述した実施の形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
【図面の簡単な説明】
【００４２】
【図１】本発明が適用される液晶テレビの一実施形態を示すブロック図。
【図２】上記実施形態の補間フレーム生成回路のより具体的な構成を示すブロック図。
【図３】上記実施形態の補間フレーム生成回路の処理の流れを示すフローチャート。
【図４】フレーム補間処理に関して簡単に説明するための概念図。
【図５】従来の方法による誤動作例を示す概念図。
【図６】従来の方法による誤動作例を示す概念図。
【図７】従来の補間フレーム生成例を示す概念図。
【図８】本発明による補間フレーム生成例を示す概念図。
【符号の説明】
【００４３】
１１…ＴＶチューナ、１２…補間フレーム生成回路、１２１…制御部、１２１Ａ…設定値格納部、１２２…映像入力部、１２３…領域検出部、１２４…処理領域設定部、１２５…フレーム補間処理部（画面端処理を含む）、１２６…映像出力部、１３…液晶モニタ、２１…バスライン、２２…信号処理部、２３…外部メモリ（フレームバッファ）、２４…補間フレーム生成部、２４１…メモリインターフェース（以下、Ｉ/Ｆ）部、２５…ホストコンピュータ。
【技術分野】
【０００１】
本発明は、例えば液晶表示装置に映像を表示する際に、残像による像流れを抑制するために映像信号に対してフレーム補間処理を施すフレーム倍速処理機能を有する映像表示装置、映像信号処理装置及び映像信号処理方法に関する。
【背景技術】
【０００２】
近時、テレビジョン受像機にはハイビジョン放送にも対応した液晶表示装置が急速に普及されつつある。また、パーソナルコンピュータにおいては、表示モニタとして液晶表示装置が主流となり、一方でデジタル放送対応チューナを搭載してパソコン上でデジタル放送の映像を視聴することが可能となっている。このような液晶表示装置にあっては、液晶の反応速度の遅さにより、映像に早い動きがあると残像による像流れを生じてしまう。この問題を解消するため、前後のフレーム画像から補間フレームを生成するフレーム倍速処理回路が搭載されるようになった（例えば特許文献１参照）。
【０００３】
しかしながら、実際のテレビジョン放送では、例えば１６：９のハイビジョン映像信号の中に４：３の標準テレビジョン映像が差し込まれ、比率を合わせるために、その両側に黒画面領域が挿入され、ハイビジョン放送信号として放送されていることがある。このような場合、従来の技術では、フレーム補間処理において、処理する必要のない画面領域まで処理してしまい、無駄な消費電力を費やしてしまっていた。また、本来の４：３の標準テレビジョン映像の画面端ではなく黒画面領域に対して画面端処理（例えば特許文献２参照）を施してしまい、適切な画面端処理ができなかった。
【特許文献１】特開２００６−２２７２３５号公報
【特許文献２】特開２００８−１１８６２０号公報。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
以上のように、従来のフレーム補間処理では、処理する必要のない画面領域まで処理してしまうこと、黒画面領域に対して画面端処理を施してしまい、適切な画面端処理ができないことが問題となっている。
【０００５】
本発明の目的は、上記の問題を解決し、フレーム補間処理を有効な画面領域だけで処理することができ、適切な画面端処理を行うことのできる映像表示装置、映像信号処理装置及び映像信号処理方法を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するために本発明に係る映像表示装置は、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、前記検出手段の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限する領域制限手段と、前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段と、前記フレーム補間処理された映像信号を表示する表示手段とを具備することを特徴とする。
【０００７】
また、本発明に係る映像信号処理装置は、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、前記検出手段の検出結果に基づいてフレーム画像それぞれの黒画面領域を制限する領域制限手段と、前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段とを具備することを特徴とする。
【０００８】
また、本発明に係る映像信号処理方法は、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、前記黒画面領域の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限し、前記制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うことを特徴とする。
【０００９】
すなわち、本発明に係る映像表示装置、映像信号処理装置及び映像信号処理方法では、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、前記黒画面領域の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限し、前記制限された前後のフレーム画像を用いて各フレームの補間画像を生成するようにしているので、黒画面領域を切り離した画像でフレーム補間を行うことが可能となり、必要十分な画面領域についてフレーム補間処理を行えるようになる。また、黒画面領域を切り離した画像について画面端処理を施すことが可能となり、適切なフレーム補間映像が得られるようになる。
【発明の効果】
【００１０】
以上のように構成したことにより、本発明によれば、フレーム補間処理を有効な画面領域だけで処理することができ、適切な画面端処理を行うことのできる映像表示装置、映像信号処理装置及び映像信号処理方法を提供することができる。
【発明を実施するための最良の形態】
【００１１】
以下、図面を参照して本発明の実施の形態を詳細に説明する。
【００１２】
図１は本発明が適用される液晶テレビの一実施形態を示すブロック図である。図１において、ＴＶチューナ１１は、アンテナ（図示せず）により受信されたテレビジョン放送信号を選局復調し、映像信号、音声信号、データ信号を得る。ここで得られた映像信号は、補間フレーム生成回路１２に供給される。この補間フレーム生成回路１２は内部動作を制御するための制御部１２１を備える。この制御部１２１は外部から指定される各種パラメータの設定値を格納する設定値格納部１２１Ａを備え、この設定値格納部１２１Ａに格納された設定値に従って、領域検出部１２３、処理領域設定部１２４、フレーム補間処理部（画面端処理を含む）１２５及び映像出力部１２６それぞれの処理を制御する。
【００１３】
上記補間フレーム生成回路１２に供給された映像信号は映像入力部１２２に供給される。この映像入力部１２２は、映像信号を入力して前後フレーム＃Ｎ，＃Ｎ＋１を保持する。領域検出部１２３は、映像入力部１２２に保持される前後フレーム＃Ｎ，＃Ｎ＋１の画像をそれぞれ設定値格納部１２１Ａに格納された設定値に従って解析し、処理不要な領域（例えば黒画面領域）を検出する。処理領域設定部１２４は、領域検出部１２３の検出結果に従い、前後フレーム画像それぞれについてフレーム補間処理を行う処理領域を設定する。フレーム補間処理部１２５は、前段の処理領域設定部１２４で設定された前後フレーム＃Ｎ，＃Ｎ＋１の画像処理領域について画面端処理を行って補間フレーム＃Ｎ＋０．５の画像を生成する。生成された補間フレーム＃Ｎ＋０．５の画像は、前後フレーム＃Ｎ，＃Ｎ＋１の画像と共に映像出力部１２６に送られる。映像出力部１２６は前後フレームの画像＃Ｎ，＃Ｎ＋１の間に補間フレーム＃Ｎ＋０．５の画像を挿入して倍速画像を生成し、液晶モニタ１３に出力する。
【００１４】
図２は上記補間フレーム生成回路１２のより具体的な構成を示すブロック図である。尚、図２において、図１と機能的に同一部分には同一符号を付して示す。図２において、２１は映像信号を伝送するバスラインであり、このバスライン２１には信号処理部２２、外部メモリ（フレームバッファ）２３、補間フレーム生成部２４、映像出力部１２６が接続される。補間フレーム生成部２４は、図１に示した映像入力部１２２及び映像出力部１２６に相当する機能を有する映像信号をフレーム単位で入出力するためのメモリインターフェース（以下、Ｉ/Ｆ）部２４１、設定値格納部１２１Ａを備える制御部１２１、領域検出部１２３、処理領域設定部１２４、フレーム補間処理部（画面端処理含む）１２５を備える。設定値格納部１２１Ａは、設定値を指定するためのホストコンピュータ２５に接続される。
【００１５】
図２の構成では、補間フレーム生成部２４において、メモリＩ／Ｆ部２４１を介して映像の入出力を行う。ホストコンピュータ２５は各種パラメータの設定やシステム全体の制御を行う。信号処理部２２は、放送波の受信や外部映像信号入力端子等から受信した映像信号を処理し、外部メモリ(フレームバッファ)２３へ転送する。外部メモリ(フレームバッファ)２３では、各ブロックが処理した映像データを格納しており、補間フレーム生成部２４に現フレームデータ（Frame#N+1）及び前フレームデータ（Frame#N）を出力し、補間フレーム生成部２４から補間フレームデータ（Frame#N+0.5）を取り込む。映像出力部１２６は、外部メモリ(フレームバッファ)２３から各フレームデータ（Frame#N, Frame#N+0.5, Frame#N+1）を順に読み出し、外部端子等を介して液晶モニタ（図示せず）へ出力する。
【００１６】
図３は、上記構成による補間フレーム生成回路１２の具体的な処理の流れを示すフローチャートである。
【００１７】
まず初期設定として、画像を入力し補間フレーム生成処理を開始する前に、各種パラメータを設定する（ステップＳ１）。ここでは、画面端を検出するための処理を行う検出領域、黒画素判定または０ベクトル判定の検出方法、黒画素判定時に使用する検出画素閾値、０ベクトル判定時に使用する検出ベクトル閾値、複数フレーム連続して同一の画面端を検出するための検出フレーム数閾値、及び本検出機能を使用するか否かの検出機能ＯＮ／ＯＦＦを設定する。
【００１８】
上記各種パラメータの設定完了後、検出フレーム数を初期化し（ステップＳ２）、画像入力を開始する（ステップＳ３）。ここで、検出機能ＯＮ／ＯＦＦ設定を確認し（ステップＳ４）、ＯＦＦの状態であれば、画面端検出は行わず、処理領域を全領域とする（ステップＳ５）。また、ＯＮの状態であれば、検出方法の確認を行う（ステップＳ６）。
【００１９】
上記ステップＳ６で黒画素判定方法であった場合、現画像の検出領域内の画素と検出画素閾値とを比較し、閾値以下であれば黒画素と判断し、閾値を超える場合は黒画素ではないと判断する（ステップＳ７）。次に、検出領域内において、黒画素と判断した画素が、水平垂直方向に連続して存在する矩形領域があるかを確認する（ステップＳ８）。矩形領域が存在しない場合、現フレームでは画面端を検出できなかったものとして検出フレーム数を初期化する（ステップＳ９）。矩形領域が存在する場合は、現フレームで画面端を検出できたものとして検出フレーム数をインクリメントする（ステップＳ１０）。
【００２０】
一方、上記ステップＳ６で０ベクトル判定方法であった場合、現画像と前画像とを使用するなどして、現画像の検出領域内の各画素の動きベクトルを検出する（ステップＳ１１）。続いて、検出したベクトルと検出ベクトル閾値とを比較し、閾値以下であれば０ベクトルであると判断し、閾値を超える場合は０ベクトルではないと判断する（ステップＳ１２）。また、このステップＳ１２では、検出領域内において、０ベクトルであると判断した画素が、水平垂直方向に連続して存在する矩形領域があるかを確認する。矩形領域が存在しない場合、現フレームでは画面端を検出できなかったものとして検出フレーム数を初期化する（ステップＳ１３）。矩形領域が存在する場合は、現フレームで画面端を検出できたものとして、ステップＳ１０に移行し、検出フレーム数をインクリメントする。
【００２１】
検出フレーム数をインクリメントまたは初期化した後、検出フレーム数と検出フレーム数閾値とを比較する（ステップＳ１４）。閾値未満である場合は、画面端検出が十分ではないものとして、ステップＳ５に移行して処理領域を全領域に設定する。閾値以上の場合は、画面端を検出完了したものとして、検出した画面端を処理領域とする（ステップＳ１５）。処理領域が決定すると、その処理領域端を画面端としてフレーム補間処理を行い（ステップＳ１６）、処理終了の指示があるまでステップＳ３に戻って次フレームの処理を継続する（ステップＳ１７）。
【００２２】
以上のような方法により、自動的に最適な画面端を検出し、検出した画面端を使用してフレーム補間生成時の画面端処理を行う。
【００２３】
以下、図４乃至図８を参照して、具体的な処理例を説明する。
【００２４】
本発明は、液晶テレビ等において使用されるフレーム倍速処理回路の処理量を削減し、性能を向上させるための技術に関するものである。液晶テレビで表示する映像は、１フレーム表示期間、常に発色させており、次のフレームで別の映像を表示させた場合でも、前のフレームで表示した映像が残像として残ってしまうため、動画表示に弱いという特性がある。そのため近年では、２つのフレームの間の時刻に表示すべき映像を生成し、生成した映像を２つのフレームの間の時刻に表示することによって、フレーム間隔を短くし、残像を少なくするというフレーム倍速技術が多く用いられている。
【００２５】
図４はフレーム補間処理に関して簡単に説明するための概念図である。入力画像１を表示する時刻をＴ１、入力画像２を表示する時刻をＴ２とする。入力画像１と入力画像２では、自動車が移動しているため位置が異なっている。補間画像は、入力画像１と入力画像２とから生成する画像であり、自動車の位置は、入力画像１と入力画像２との間の位置になるように生成される。この補間画像が表示される時刻Ｔｈとその前後の入力画像が表示される時刻Ｔ１，Ｔ２との関係は、Ｔ１＜Ｔｈ＜Ｔ２となっており、このように表示することでフレーム間隔を短くし、前述した残像を抑えることが可能となる。
【００２６】
また、デジタル放送では、解像度の高い（ＨＤ）映像を送信することができるが、全ての映像の解像度が高いというわけではなく、解像度の低い（ＳＤ）映像も含まれている。中には、ＳＤ画像の左右端に黒色の画像を付加したものをＨＤ映像として送信していることもある。このような映像を受信したＴＶでは、実映像がＳＤ映像であるとしても、受信信号としてはＨＤ映像として受信するため、ＨＤ映像として様々な画像処理を行うことになる。多くの画像処理においては、もともと映像の存在しない（正しくは黒色の映像が表示されている）領域に対して処理を行うことになり、無駄な処理を実施していると言える。
【００２７】
補間フレーム生成処理においても上記と同様のことが言える。さらに補間フレーム生成処理では、画像端とそれ以外の通常領域との処理とで異なる処理をすることがある。その場合、本来は映像領域がＳＤ画像の領域であるが、黒色を付加されたため、実際の画像端とは異なる画像端に対し、画像端処理を施すことになり、画像端処理の性能が劣化する可能性がある。
【００２８】
図５及び図６は、従来の方法による誤動作例を示すもので、図５の例は、ＳＤ画像中に文字がスクロールして表示されている場合、入力映像１，２から補間画像を生成したとき、生成したスクロール文字がＳＤ画像の有効領域からはみ出してしまった様子を示している。また、図６の例は、黒画面領域と同色の絵柄がＳＤ画像端と黒画面領域との境界で移動する映像の場合に、ＳＤ有効領域外の画像（黒画面領域）が絵柄の形状に影響してしまった様子を示している。
【００２９】
上記のような誤動作を生じた補間フレームを含めて連続表示すると、不自然な映像となってしまうと共に、無用な処理が行われることになる。そこで本発明では、補間フレーム生成処理において、前述した黒画像が挿入されたＳＤ映像がＨＤ映像として入力された場合、自動的にＳＤ画像であることを判定し、無駄な処理を省き、適切な画面端処理を施すことの可能な方法を提案する。
【００３０】
図７は従来の補間フレーム生成例、図８は本発明による補間フレーム生成例を示している。今、図７（ａ）に示すように、ＳＤ画像の両端に矩形の黒画像領域を付加した画像全体をＨＤ画像として受信した場合の画像が入力されたとすると、従来の補間フレーム生成方法では、図７（ｂ）に示すように、画像の処理領域を入力画像と同じ画像全体としていた。
【００３１】
この場合、入力された画像の領域全体をフレーム補間処理する領域としているため、黒色の領域もフレーム補間処理されることとなり、この画像の前に入力された画像の黒色領域とから黒色の補間画像が生成される。また、処理領域と実際の画像端（ＳＤ画像の画像端）とは異なっている。この場合、ＳＤ画像と黒色領域の境界は、通常のフレーム補間処理を行うこととなり、最適な画面端処理を実施しているとは言えず、生成される補間フレームの精度を劣化させる可能性がある。
【００３２】
これに対し、本発明では、図８（ａ）に示すように、ＳＤ画像の両端に矩形の黒画像を付加した画像全体をＨＤ画像として受信した場合の画像が入力されたとすると、黒画面領域を検出してそれ以外の部分をＳＤ画像と認識して処理領域とする。そして、図８（ｂ）に示すように、認識したＳＤ画像で補間フレームを生成した後、黒画面領域を付加して元の画像に戻す。
【００３３】
この場合、図８（ａ）に示す入力画像に対し、点線で示すように検出領域を設定する。この検出領域中の矩形で連続した黒色領域を検出し、それ以外の一点鎖線で示す処理領域を自動的に設定する。つまり、実際のＳＤ画像の画面端と処理する画面端とが一致しており、最適な画面端処理を実施することが可能となり、従来例のように生成する補間フレームの精度を劣化させることはない。
【００３４】
図８（ｂ）は、処理した画像に対して点線の枠で示した領域（ＳＤ領域）のみを外部メモリ（図２の２３）に書き込むだけでよいことを示している。同一の黒色領域を検出している期間、枠外の黒色領域データは、外部メモリに事前に一度書き込むだけでよく、メモリアクセス量を削減することも可能となる。
【００３５】
以上のように、上記実施形態では、映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、黒画面領域の検出結果に基づいてフレーム画像それぞれの黒画面領域を制限し、制限された前後のフレーム画像を用いて各フレームの補間画像を生成するようにしているので、黒画面領域を切り離した画像でフレーム補間を行うことが可能となり、必要十分な画面領域についてフレーム補間処理を行うことができる。また、黒画面領域を切り離した画像について画面端処理を施すことが可能となり、適切なフレーム補間映像を得ることができる。
【００３６】
尚、上記実施形態では、ＳＤ領域の外側に付加された黒画面領域の検出方法例として、黒画素検出手法と０ベクトル検出手法を例示したが、他の任意の手法によって検出した場合でも実施可能である。０ベクトルを検出するための手法は、例示したものだけによらず、任意の手法で検出した場合でも実施可能である。
【００３７】
また、黒画面領域の検出領域は、画面左右端だけでなく、画面上下端の場合も同様に実施可能である。さらに２画面表示やマルチ画面表示、データ放送表示時など黒色画像が上下左右端以外に付加された場合等にも適用可能である。また、この領域を複数設定することも可能である。さらに、黒に限らず、他の色やシンボル、キャラクタ等の絵柄でもよいが、本発明では黒画面領域として定義する。
【００３８】
また、上記実施形態では、２つの前後フレームから１つの補間フレームを生成する補間処理を例示したが、２つ以上の前後フレームから２つ以上の補間フレームを生成する場合でも実施可能である。
【００３９】
検出した画面端に従って処理する画面端処理は、特定の画面端処理に適用できるだけでなく、あらゆる画面端処理に適用することが可能であるため、本発明では具体的な画面端処理機能に関する説明は省略する。
【００４０】
また、上記実施形態は、液晶テレビに適用した場合について説明したが、本発明は携帯端末やコンピュータ装置に用いられる表示装置にも適用可能である。また、補間フレーム生成回路が集積回路化されている場合でも、そのチップに組み込み可能であることは勿論である。
【００４１】
その他、本発明は前述した実施の形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
【図面の簡単な説明】
【００４２】
【図１】本発明が適用される液晶テレビの一実施形態を示すブロック図。
【図２】上記実施形態の補間フレーム生成回路のより具体的な構成を示すブロック図。
【図３】上記実施形態の補間フレーム生成回路の処理の流れを示すフローチャート。
【図４】フレーム補間処理に関して簡単に説明するための概念図。
【図５】従来の方法による誤動作例を示す概念図。
【図６】従来の方法による誤動作例を示す概念図。
【図７】従来の補間フレーム生成例を示す概念図。
【図８】本発明による補間フレーム生成例を示す概念図。
【符号の説明】
【００４３】
１１…ＴＶチューナ、１２…補間フレーム生成回路、１２１…制御部、１２１Ａ…設定値格納部、１２２…映像入力部、１２３…領域検出部、１２４…処理領域設定部、１２５…フレーム補間処理部（画面端処理を含む）、１２６…映像出力部、１３…液晶モニタ、２１…バスライン、２２…信号処理部、２３…外部メモリ（フレームバッファ）、２４…補間フレーム生成部、２４１…メモリインターフェース（以下、Ｉ/Ｆ）部、２５…ホストコンピュータ。
【特許請求の範囲】
【請求項１】
映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、
前記検出手段の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限する領域制限手段と、
前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段と、
前記フレーム補間処理された映像信号を表示する表示手段と
を具備することを特徴とする映像表示装置。
【請求項２】
前記フレーム補間処理手段は、前記領域制限手段で黒画面領域が制限された各フレームの画像を前記フレーム補間処理の画面端に置き換えて画面端処理を行うことを特徴とする請求項１記載の映像表示装置。
【請求項３】
映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、
前記検出手段の検出結果に基づいてフレーム画像それぞれの黒画面領域を制限する領域制限手段と、
前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段と
を具備することを特徴とする映像信号処理装置。
【請求項４】
前記フレーム補間処理手段は、前記領域制限手段で黒画面領域が制限された各フレームの画像を前記フレーム補間処理の画面端に置き換えて画面端処理を行うことを特徴とする請求項３記載の映像信号処理装置。
【請求項５】
映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、
前記黒画面領域の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限し、
前記制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うことを特徴とする映像信号処理方法。
【請求項６】
前記フレーム補間処理は、前記黒画面領域が制限された各フレーム画像を前記フレーム補間処理の画面端に置き換えて画面端処理を行うことを特徴とする請求項５記載の映像信号処理方法。
【請求項１】
映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、
前記検出手段の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限する領域制限手段と、
前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段と、
前記フレーム補間処理された映像信号を表示する表示手段と
を具備することを特徴とする映像表示装置。
【請求項２】
前記フレーム補間処理手段は、前記領域制限手段で黒画面領域が制限された各フレームの画像を前記フレーム補間処理の画面端に置き換えて画面端処理を行うことを特徴とする請求項１記載の映像表示装置。
【請求項３】
映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出する検出手段と、
前記検出手段の検出結果に基づいてフレーム画像それぞれの黒画面領域を制限する領域制限手段と、
前記領域制限手段で制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うフレーム補間処理手段と
を具備することを特徴とする映像信号処理装置。
【請求項４】
前記フレーム補間処理手段は、前記領域制限手段で黒画面領域が制限された各フレームの画像を前記フレーム補間処理の画面端に置き換えて画面端処理を行うことを特徴とする請求項３記載の映像信号処理装置。
【請求項５】
映像信号を入力して各フレーム画像から有効表示領域内の黒画面領域を検出し、
前記黒画面領域の検出結果に基づいて前記フレーム画像それぞれの黒画面領域を制限し、
前記制限された前後のフレーム画像を用いて各フレームの補間画像を生成するフレーム補間処理を行うことを特徴とする映像信号処理方法。
【請求項６】
前記フレーム補間処理は、前記黒画面領域が制限された各フレーム画像を前記フレーム補間処理の画面端に置き換えて画面端処理を行うことを特徴とする請求項５記載の映像信号処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１０−１０３９１４（Ｐ２０１０−１０３９１４Ａ）
【公開日】平成２２年５月６日（２０１０．５．６）
【国際特許分類】
【出願番号】特願２００８−２７５５６９（Ｐ２００８−２７５５６９）
【出願日】平成２０年１０月２７日（２００８．１０．２７）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２２年５月６日（２０１０．５．６）
【国際特許分類】
【出願日】平成２０年１０月２７日（２００８．１０．２７）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]