画像表示装置及び画像表示方法
【課題】動画部分の解像度を向上させる画像表示装置及び画像表示方法を提供する。
【解決手段】入力された画像信号を高解像度化処理する高解像度化回路と、前記高解像度化回路から入力された画像信号にフレーム・レート変換処理を行うFrame Rate Converter変換回路とを備え、前記高解像度化回路は、入力された前記画像信号が前記Frame Rate Converter変換回路における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示装置。
【解決手段】入力された画像信号を高解像度化処理する高解像度化回路と、前記高解像度化回路から入力された画像信号にフレーム・レート変換処理を行うFrame Rate Converter変換回路とを備え、前記高解像度化回路は、入力された前記画像信号が前記Frame Rate Converter変換回路における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置及び画像表示方法に係わり、特に超解像制御方法に関する。
【背景技術】
【０００２】
画像表示装置においては、静止部分のノイズ感低下、動画部分の解像度の向上、といった要請がある。関連して例えば特許文献１には概要として動き検出装置で、動きベクトルを画面の一定範囲ごとにヒストグラム化し、それによってフレームレート変換処理またはＩＰ（インターレース・プログレッシブ）変換処理からの映像の鮮鋭度を制御している旨が記載されている。
【０００３】
しかしながら画面を構造化された範囲で捉え拡大縮小を含めて相関をとるといった、上記要請に対する汎用性には乏しいアプローチであった。
また一般には先行技術では、超解像回路の尖鋭化パラメータの可変（ゲイン制御など）は、画像の動き情報とは無関係に制御していた。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２３４０８８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、動画部分の解像度を向上させる画像表示装置及び画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の画像表示装置は、入力された画像信号を高解像度化処理する高解像度化回路と、前記高解像度化回路から入力された画像信号にフレーム・レート変換処理を行うFrame Rate Converter変換回路とを備え、前記高解像度化回路は、入力された前記画像信号が前記Frame Rate Converter変換回路における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、動画部分の解像度を向上させる画像表示装置及び画像表示方法が得られる。
【図面の簡単な説明】
【０００８】
【図１】本発明を適用したデジタルテレビジョン放送受信装置１１１の外観と、このデジタルテレビジョン放送受信装置１１１を中心として構成されるネットワークシステムを説明するための図。
【図２】デジタルテレビジョン放送受信装置１１１の主要な信号処理系を示す図。
【図３】同実施形態の機能ブロック構成図。
【図４】同実施形態の代表的なブロック構成図。
【図５】同実施形態に用いられるフローチャート例。
【図６】同実施形態の動画部分の解像度を向上させる実施例。
【図７】同他の形態に用いられる代表的なブロック構成図。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態を説明する。
（実施形態１）
本発明による実施形態１を図１乃至図６を参照して説明する。
以下、デジタルテレビジョン放送受信装置１１１の機能ブロック図とフローチャートを用いて更に詳細に説明する。
図１は、本発明に係る通信装置であるネットワーク機能を備えたデジタルテレビジョン放送受信装置１１１の外観と、このデジタルテレビジョン放送受信装置１１１を中心として構成されるネットワークシステムの一例を概略的に示している。
【００１０】
すなわち、デジタルテレビジョン放送受信装置１１１は、主として、薄型のキャビネット１１２と、このキャビネット１１２を起立させて支持する支持台１１３とから構成されている。そして、キャビネット１１２には、例えばＳＥＤ（Surface-conduction Electron-emitter Display）表示パネル，液晶表示パネル等でなる平面パネル型の映像表示器１１４、スピーカ１１５、操作部１１６、リモートコントローラ１１７から送信される操作情報を受ける受光部１１８等が設置されている。
【００１１】
また、このデジタルテレビジョン放送受信装置１１１には、例えばＳＤ（Secure Digital）メモリカード、ＭＭＣ（Multimedia Card）及びメモリスティック等の第１のメモリカード１１９が着脱可能となっており、この第１のメモリカード１１９に対して番組や写真等の情報の記録再生が行なわれるようになっている。
【００１２】
さらに、このデジタルテレビジョン放送受信装置１１１には、例えば契約情報等の記録された第２のメモリカード（ＩＣカード）１２０が着脱可能となっており、この第２のメモリカード１２０に対して情報の記録再生が行なわれるようになっている。
【００１３】
また、このデジタルテレビジョン放送受信装置１１１は、第１のＬＡＮ（Local Area Network）端子１２１、第２のＬＡＮ端子１２２、ＵＳＢ（Universal Serial Bus）端子１２３及びｉ．ＬＩＮＫ端子１２４を備えている。
【００１４】
このうち、第１のＬＡＮ端子１２１は、ＬＡＮ対応ＨＤＤ専用ポートとして使用されるもので、接続されたＮＡＳ（Network Attached Storage）であるＬＡＮ対応のＨＤＤ１２５に対して、イーサネット（登録商標）により情報の記録再生を行なうために使用される。
【００１５】
このように、ＬＡＮ対応ＨＤＤ専用ポートとしての第１のＬＡＮ端子１２１を設けることにより、他のネットワーク環境やネットワーク使用状況等に影響されることなく、ＬＡＮ対応のＨＤＤ１２５に対してハイビジョン画質による番組の情報記録を安定して行なうことができる。
【００１６】
また、第２のＬＡＮ端子１２２は、イーサネット（登録商標）を用いた一般的なＬＡＮ対応ポートとして使用されるもので、例えばハブ１２６を介して、ＬＡＮ対応のＨＤＤ１２７、コンテンツサーバー１２８、ＨＤＤ内蔵のＤＶＤ（Digital Versatile Disk）レコーダ１２９等の機器を接続し、これらの機器と情報伝送を行なうために使用される。
【００１７】
なお、コンテンツサーバー１２８については、家庭内ネットワークにおいてコンテンツのサーバー機器として動作するための機能を持ち、さらにコンテンツのアクセスに必要なＵＲＩ（Uniform Resource Identifier）情報を提供するサービスを備えたＵＰｎＰ（ユニバーサルプラグアンドプレイ）対応機器として構成される。
【００１８】
なお、ＤＶＤレコーダ１２９については、第２のＬＡＮ端子１２２を介して通信されるデジタル情報が制御系のみの情報であるため、デジタルテレビジョン放送受信装置１１１との間でアナログの映像及び音声情報を伝送するために、専用のアナログ伝送路１３０を設ける必要がある。
【００１９】
さらに、この第２のＬＡＮ端子１２２は、ハブ１２６に接続されたブロードバンドルータ１３１を介して、例えばインターネット等のネットワーク１３２に接続し、このネットワーク１３２を介してコンテンツサーバー１３３や携帯電話１３４等と情報伝送を行なうために使用される。
【００２０】
なお、コンテンツサーバー１３３についてはコンテンツのサーバー機器として動作するための機能を持ち、さらにコンテンツのアクセスに必要なＵＲＩ情報を提供するサービスを備えたＵＰｎＰ対応機器として構成される。
【００２１】
また、上記ＵＳＢ端子１２３は、一般的なＵＳＢ対応ポートとして使用されるもので、例えばハブ１３５を介して、携帯電話１３６、デジタルカメラ１３７、メモリカードに対するカードリーダ／ライタ１３８、ＨＤＤ１３９、キーボード１４０等のＵＳＢ機器を接続し、これらのＵＳＢ機器と情報伝送を行なうために使用される。
【００２２】
さらに、上記ｉ．ＬＩＮＫ端子１２４は、例えばＡＶ−ＨＤＤ１４１、Ｄ（Digital）
−ＶＨＳ（Video Home System）１４２等をシリアル接続し、これらの機器と情報伝送を行なうために使用される。
図２は、上記したデジタルテレビジョン放送受信装置１１１の主要な信号処理系を示している。
すなわち、ＢＳ／ＣＳデジタル放送受信用のアンテナ２４３で受信した衛星デジタルテレビジョン放送信号は、入力端子２４４を介して衛星デジタル放送用のチューナ２４５ａに供給される。
【００２３】
チューナ２４５ａは、制御部２６１からの制御信号により所望のチャンネルの放送信号を選局し、この選局された放送信号をＰＳＫ（Phase Shift Keying）復調器２４５ｂに出力する。
【００２４】
ＰＳＫ復調器２４５ｂは、制御部２６１からの制御信号により、チューナ２４５ａで選局された放送信号を復調し、所望の番組を含んだトランスポートストリームを得て、ＴＳ復号器２４５ｃに出力する。
【００２５】
ＴＳ復号器２４５ｃは、制御部２６１からの制御信号によりトランスポートストリーム（ＴＳ）多重化された信号のＴＳ復号処理を行い、所望の番組のデジタルの映像信号及び音声信号をデパケットすることにより得たＰＥＳ（Packetized Elementary Stream）を信号処理部２４７内のＳＴＤバッファ２４７ｆへ出力する。
【００２６】
また、ＴＳ復号器２４５ｃは、デジタル放送により送られているセクション情報を信号処理部２４７内のセクション処理部２４７ｈへ出力する。
また、地上波放送受信用のアンテナ２４８で受信した地上デジタルテレビジョン放送信号は、入力端子２４９を介して地上デジタル放送用のチューナ２５０ａに供給される。
【００２７】
チューナ２５０ａは、制御部２６１からの制御信号により所望のチャンネルの放送信号を選局し、この選局された放送信号をＯＦＤＭ（Orthogonal Frequency Division Multiplexing）復調器２５０ｂに出力する。
【００２８】
ＯＦＤＭ復調器２５０ｂは、制御部２６１からの制御信号により、チューナ２５０ａで選局された放送信号を復調し、所望の番組を含んだトランスポートストリームを得て、ＴＳ復号器２５０ｃに出力する。
【００２９】
ＴＳ復号器２５０ｃは、制御部２６１からの制御信号によりトランスポートストリーム（ＴＳ）多重化された信号のＴＳ復号処理を行い、所望の番組のデジタルの映像信号及び音声信号をデパケットすることにより得たＰＥＳ（Packetized Elementary Stream）を信号処理部２４７内のＳＴＤバッファ２４７ｆへ出力する。
【００３０】
また、ＴＳ復号器２５０ｃは、デジタル放送により送られているセクション情報をセクション処理部２４７ｈへ出力する。
ここで、上記信号処理部２４７は、テレビ視聴時には、ＴＳ復号器２４５ｃおよびＴＳ復号器２５０ｃからそれぞれ供給されたデジタルの映像信号及び音声信号に対して、選択的に所定のデジタル信号処理を施し、グラフィック処理部２５４及び音声処理部２５５に出力している。また、信号処理部２４７は、コンテンツ再生時には、制御部２６１から入力されたコンテンツの再生信号を選択し、所定のデジタル信号処理を施し、グラフィック処理部２５４及び音声処理部２５５に出力している。
【００３１】
制御部２６１には、信号処理部２４７から、番組を取得するための各種データや電子番組ガイド（ＥＰＧ）情報，番組属性情報（番組ジャンル等），字幕情報等（サービス情報、ＳＩやＰＳＩ）が入力されている。
【００３２】
制御部２６１は、これら入力された情報からＥＰＧ，字幕を表示するため画像生成処理を行い、この生成した画像情報をグラフィック処理部２５４へ出力する。
セクション処理部２４７ｈは、ＴＳ復号器２４５ｃ（２５０ｃ）から入力されたセクション情報の中から、番組を取得するための各種データや電子番組ガイド（ＥＰＧ）情報，番組属性情報（番組ジャンル等），字幕情報等（サービス情報、ＳＩやＰＳＩ）を制御部２６１へ出力する。
【００３３】
グラフィック処理部２５４は、（１）信号処理部２４７内のＡＶデコーダ２４７ｇから供給されるデジタルの映像信号と、（２）ＯＳＤ（On Screen Display）信号生成部２５７で生成されるＯＳＤ信号と、（３）データ放送による画像データと、（４）制御部２６１により生成されたＥＰＧ，字幕信号，ＧＵＩ画面とを合成して映像処理部２５８へ出力する機能を有する。
【００３４】
また、字幕放送による字幕を表示するとき、グラフィック処理部２５４は、制御部２６１からの制御による字幕情報に基づき、映像信号上に字幕情報を重畳する処理を行う。
【００３５】
グラフィック処理部２５４から出力されたデジタルの映像信号は、映像処理部２５８に供給される。この映像処理部２５８は、入力されたデジタルの映像信号を、前記映像表示器１１４で表示可能なフォーマットのアナログ映像信号に変換した後、映像表示器１１４に出力して映像表示させるとともに、出力端子２５９を介して外部に導出させる。
【００３６】
また、上記音声処理部２５５は、入力されたデジタルの音声信号を、前記スピーカ１１５で再生可能なフォーマットのアナログ音声信号に変換した後、スピーカ１１５に出力して音声再生させるとともに、出力端子２６０を介して外部に導出させる。
【００３７】
ここで、このデジタルテレビジョン放送受信装置１１１は、上記した各種の受信動作を含むその全ての動作を制御部２６１によって統括的に制御されている。この制御部２６１は、ＣＰＵ（Central Processing Unit）等を内蔵しており、前記操作部１１６からの操作情報を受け、または、リモートコントローラ１１７から送出された操作情報を、前記受光部１１８を介して受信し、その操作内容が反映されるように各部をそれぞれ制御している。
【００３８】
この場合、制御部２６１は、主として、そのＣＰＵが実行する制御プログラムを格納したＲＯＭ（Read Only Memory）２６１ａと、該ＣＰＵに作業エリアを提供するＲＡＭ（Random Access Memory）２６１ｂと、各種の設定情報及び制御情報等が格納される不揮発性メモリ２６１ｃとを利用している。
【００３９】
また、この制御部２６１は、カードＩ／Ｆ（Interface）２６５を介して、前記第１のメモリカード１１９が装着可能なカードホルダ２６６に接続されている。これによって、制御部２６１は、カードホルダ２６６に装着された第１のメモリカード１１９と、カードＩ／Ｆ２６５を介して情報伝送することができる。
【００４０】
さらに、上記制御部２６１は、カードＩ／Ｆ２６７を介して、前記第２のメモリカード１２０が装着可能なカードホルダ２６８に接続されている。これにより、制御部２６１は、カードホルダ２６８に装着された第２のメモリカード１２０と、カードＩ／Ｆ２６７を介して情報伝送することができる。
【００４１】
また、上記制御部２６１は、通信Ｉ／Ｆ２６９を介して第１のＬＡＮ端子１２１に接続されている。これにより、制御部２６１は、第１のＬＡＮ端子１２１に接続されたＬＡＮ対応のＨＤＤ１２５と、通信Ｉ／Ｆ２６９を介して情報伝送することができる。この場合、制御部２６１は、ＤＨＣＰ（Dynamic Host Configuration Protocol）サーバ機能を有し、第１のＬＡＮ端子１２１に接続されたＬＡＮ対応のＨＤＤ１２５にＩＰ（Internet Protocol）アドレスを割り当てて制御している。
【００４２】
さらに、上記制御部２６１は、通信Ｉ／Ｆ２７０を介して第２のＬＡＮ端子１２２に接続されている。これにより、制御部２６１は、第２のＬＡＮ端子１２２に接続された各機器（図１参照）と、通信Ｉ／Ｆ２７０を介して情報伝送することができる。
【００４３】
また、上記制御部２６１は、ＵＳＢ Ｉ／Ｆ２７１を介して前記ＵＳＢ端子１２３に接続されている。これにより、制御部２６１は、ＵＳＢ端子１２３に接続された各機器（図１参照）と、ＵＳＢ Ｉ／Ｆ２７１を介して情報伝送することができる。
【００４４】
さらに、上記制御部２６１は、ｉ．ＬＩＮＫ Ｉ／Ｆ２７２を介してｉ．ＬＩＮＫ端子１２４に接続されている。これにより、制御部２６１は、ｉ．ＬＩＮＫ端子１２４に接続された各機器（図１参照）と、ｉ．ＬＩＮＫ Ｉ／Ｆ２７２を介して情報伝送することができる。
【００４５】
ところで、この実施形態では、ＬＡＮ対応のＨＤＤ１２５に初期登録時のＨＤＤ１２５、ＨＤＤ１２７、コンテンツサーバー１２８、ＤＶＤレコーダ１２９それぞれに割り当てられたストレージＩＤ（ＩＰアドレス、機器名を含む）を記述した登録ファイルを記憶保持している。
【００４６】
また、不揮発性メモリ２６１ｃに、ＬＡＮ対応のＨＤＤ１２５、ＨＤＤ１２７、コンテンツサーバー１２８、ＤＶＤレコーダ１２９それぞれのストレージＩＤを記憶している。
【００４７】
また、制御部２６１は、この発明に係わる機能として、ＵＰｎＰを利用した（１）サーバー機器発見機能２６１ｄと、（２）ＵＰｎＰを利用したコンテンツ情報取得機能２６１ｅと、（３）コンテンツアクセス制御機能２６１ｆとを備えている。
【００４８】
（１）制御部２６１は、サーバー機器発見機能２６１ｄにより、ＵＰｎＰのディスカバリ機能を用いてネットワーク上のＵＰｎＰ対応機器を発見する。例えばサーバー機器発見機能２６１ｄは、ＵＰｎＰのディスカバリ機能を用いてコンテンツサーバー１２８を発見する。
【００４９】
（２）制御部２６１は、コンテンツ情報取得機能２６１ｅにより、ＵＰｎＰのコントロール機能を用いてＵＰｎＰ対応機器をコントロールし、ＵＰｎＰ対応機器内のコンテンツをアクセスするために必要なＵＲＩ情報を取得する。例えばコンテンツ情報取得機能２６１ｅは、コンテンツサーバー１２８をコントロールし、コンテンツサーバー１２８内のＨＤＤ等に蓄積されているコンテンツをアクセスするために必要なＵＲＩ情報をコンテンツサーバー１２８から取得する。
【００５０】
（３）制御部２６１は、コンテンツアクセス制御機能２６１ｆにより、サーバー機器発見機能２６１ｄにより取得したサーバー機器のＩＰアドレス情報と、コンテンツ情報取得機能２６１ｅにより取得したＵＲＩ情報から得たＩＰアドレス情報と、デジタルテレビジョン放送受信装置１１１のＬＡＮ端子１２２に割り当てられたＩＰアドレスとネットマスクに基づいてコンテンツへのアクセス可否判定を行う。そして制御部２６１は、アクセス可と判断した場合にはコンテンツアクセスを許可するが、否と判断した場合には許可できない旨を映像表示器１１４にＯＳＤにより表示させる。
【００５１】
さらに、上記制御部２６１は、ネットワーク上の記録再生処理を行う記録再生機器を登録する登録部２６１ｇと、任意の記録再生位置にファイルを記録させる記録速度を測定する測定制御部２６１ｈとを有しており、後に詳細に説明する測定処理を行うものである。
【００５２】
以下、一般的なＵＳＢ対応ポートであるＵＳＢ端子１２３を用いてＵＳＢ機器であるＨＤＤ１３９を接続し、ＨＤＤ１３９（以下、ＵＳＢ ＨＤＤ１３９と記す）へ記録／再生を行う場合について説明する。
【００５３】
しかし、本発明はＵＳＢに限定されるものではなく、ＩＥＥＥ１３９４やＬＡＮ−ＨＤＤ等、他のインターフェースに適用しても良い。
なお、図１ではＵＳＢ ＨＤＤ１３９は、ハブ１３５を介して複数のＵＳＢ機器で使用されているが、好ましくは専用ポートとすることで、他機器の影響を受けることを防ぐことができる。
【００５４】
以下、デジタルテレビジョン放送受信装置１１１の機能ブロック図とフローチャートを用いて更に詳細に説明する。図３は、デジタルテレビジョン放送受信装置１１１を機能ブロックとして表現した映像信号処理装置の機能ブロック図である。
【００５５】
図３において、映像信号処理装置は、地上波もしくは衛星波により送信されたRF信号から特定のチャンネルに選局するためのデバイスTuner１（図２のチューナ２４５ａ、２５０ａに相当）を具備し、このTuner１の出力を映像処理モジュール４（信号処理部２４７に相当）へ接続し、映像処理モジュール４は、Tuner１から取り出されたストリーム信号から映像ストリームデータを分離取得し映像信号を生成し、この生成した映像信号を、例えばSD信号（標準解像度信号）をHD信号（高解像度信号）へ変換する機能や、映像信号の黒色を伸張する機能を有している。映像処理モジュール４は、例えばTV信号処理LSI内部の一部の機能として供給されている。なおキャビネット１１２の前面下部などに上記変換する機能が働いているときに点灯するＬＥＤ等の状態表示部を更に備えてもよい。
【００５６】
映像処理モジュール４には、Tuner１から入力されたストリームデータを記録することができるHDD（Hard Disc Driver）３が接続されており、放送された番組が記録できる。このHDD３において本実施形態の目的とするところは、電源の供給を遮断した状態で記憶した内容を保持し続けられる不揮発性の記憶装置（所謂コンピュータの5大装置の一つである補助記憶装置（二次記憶装置））であることを特徴とし、例えばSDD（Solid Disc Driver）や、SD Card、FLASH Memoryなども用いられうる。HDD３としては必ずしも装置に内蔵されている必要はなく図１のHDD１２５のように外付けタイプのものでもよい。
【００５７】
映像処理モジュール４の出力は、Video Encorder＆Backend Processor５（映像処理部２５８に相当）に接続され、映像処理モジュール４より処理された放送等のストリーム信号または図示せぬDVD等に記録された映像信号が、映像処理モジュール４より出力され、Video Encorder＆Backend Processor５により、実際のNTSC信号やPAL信号に変換され、Video Encorder＆Backend Processor５の内部のBackend processorによりPanel６（映像表示器１１４に相当）を制御し、Panel６に映像を映し出すことができる。
【００５８】
また、制御モジュール２（制御部２６１に相当）は、ユーザからの指示または自動でデジタルテレビジョン放送受信装置１１１の電源入り切り制御や、映像処理モジュール４、Video Encoder&Backend Processor５の制御を司っている。また制御部２６１内の不揮発性メモリ２６１ｃは後述のTV視聴の時間の頻度分布の蓄積を担っている。
【００５９】
ここで上記映像処理モジュール４による変換機能の一例として高画質化を行う所謂超解像技術について説明する。超解像アルゴリズムについては種々存在しているが、本発明の超解像アルゴリズムは以下に説明する通りである。なお、本発明の超解像アルゴリズムを用いた高画質化処理としては、基本であるリアルタイムモードと熟成モードとがある。
【００６０】
リアルタイムモードのステップは以下の通りである。
＜ステップ1＞
地上デジタル放送（1440×1080画素）やDVDソフト(720×480画素)等の60コマ/秒で構成される映像1コマごとに精細度を解析し、草の葉のように細かい模様で構成されているテクスチャー部を識別する。
【００６１】
＜ステップ2＞
ステップ1で識別したテクスチャー部に対して、次の「超解像処理」を実施する。
これまでのフルHDパネルへの対応と同様に、例えば1440×1080画素の解像度をもつ地上デジタル放送などの入力映像（1）に画素補間処理を行なった後、HD水準の1920×1080画素に引き伸ばすことにより高解像度映像（2）を作成する。
【００６２】
一旦、この高解像度映像（2）を所定のアルゴリズムで元の解像度の映像（3）に変換する。この映像を入力映像（1）と比較し、その違い（4）をもとにして高解像度映像（2）に補正処理を加える（5）ことにより自然で鮮鋭感あふれる映像（6）を実現する。なおこれらの処理はＬＳＩ化されている場合があり、上記補正処理等に対して超解像の尖鋭化ゲインとして外部からパラメータ制御する構成をとることができる。
【００６３】
このリアルタイムモードに対し熟成モードでは例えば、更に映像（6）から再び映像（3）を作成し（4）、（5）と処理を続け、この映像（6）から（3）を作成し（4）、（5）と続く処理を既定回数繰り返す。また映像1コマ内のみでなく複数コマに渡って解析をしてもよい。熟成モードでは二次記憶内にある映像を変換し、この変換した結果の映像を二次記憶内に戻す。
【００６４】
図４は、本発明の機能構成例である。入力画像が、超解像回路部ＵＲを経由しFRC（Frame Rate Converter、倍速）回路ＲＣに入力される構成となる。FRCブロックでは補間画像を生成するため、動きベクトルの検出を行っているが、ここの動きベクトル検出部より得られる、動きベクトル分布、ベクトル信頼度などの情報をもとに超解像の尖鋭化ゲインを制御する構成となっている。
【００６５】
動きベクトルの検出は例えば、補間フレームの挿入位置を中心としそれを挟む前後２枚のフレーム上で規定の形状のブロックを点対称に平行移動させる。そして、対応する位置の画素どうしの画素値の差分値をブロック内の画素全てについて計算し、これを累積した値（ＳＡＤ）を求め、このＳＡＤ値がある範囲内となる方向を該ブロックの動きベクトル候補とする。
【００６６】
このときベクトル信頼度は例えば、このＳＡＤ値の極小点が十分に小さいといった判定がされなかった等の理由で低下することがある。
図５に本発明の実施例を示すフローチャートを示す。
動きベクトル検出部で実施された動きベクトル検出（ステップＳ７０１）で得られた、動きベクトル分布より画像内で動きのある範囲を検出する（ステップＳ７０２）。動きの無い（静止部）部分に関しては尖鋭化ゲインを抑え（ステップＳ７０６）、ノイズ感を減少させる。動きの有る範囲では、その動き量に応じて尖鋭化ゲインを調節する（ステップＳ７０３）。動き量が大きい場合はより高速に動いていることになるため尖鋭化ゲインを上げてもノイズ感は目立ちにくくなる。
【００６７】
更に、動きのある部分においてベクトルの信頼度情報を用いる（ステップＳ７０４）。この信頼度が低い場合、FRCブロックなどによってベクトル誤検出による破綻の可能性が高いということになる。
【００６８】
この場合、超解像による尖鋭化されているとより、破綻が目に付きやすいことになるため、ベクトルの信頼性が低い場合には、超解像の尖鋭化ゲインを抑えて（ステップＳ７０６）解像感を低下させることで、FRCブロックなどのベクトル誤検出による補間画像破綻を目立ちにくくする制御を行う。
【００６９】
動き部分であり且つ動き量が大きく、ベクトル信頼度も高い場合には、解像度を増加させてもノイズ感が目立ちにくいため、尖鋭化ゲインを大きくする制御を行う（ステップＳ７０５）。これにより従来技術に対しより動画解像度の高い画質を得ることが可能となる。
【００７０】
他方で動き部分であるが動き量が小さく、ベクトル信頼度も高い場合には、解像度を増加させてもノイズ感が目立ちにくいため、尖鋭化ゲインを中程度とする制御を行う（ステップＳ７０７）。ここでベクトルの信頼性が低い場合には、超解像の尖鋭化ゲインを抑えて（ステップＳ７０６）解像感を低下させることで、FRCブロックなどのベクトル誤検出による補間画像破綻を目立ちにくくする制御を行う。
【００７１】
図６は、実際に図５に示したフローに基づいて尖鋭化ゲイン制御を行った場合の画像例である。
画面下部にABC・・・で示したテロップが流れており、背景は静止に近い状態を示したものである。
テロップ部分をベクトル検出部において動き部分Ｄとして検出し、その速度に応じた尖鋭化制御を行うことでより解像感の増したテロップを見ることが出来る。逆に背景の静止に近い部分Ｓは、尖鋭化によるノイズ感を緩和するため尖鋭化ゲインを抑える制御を行う。
【００７２】
（実施形態２）
本発明による実施形態２を図１乃至図３及び図５乃至図７を参照して説明する。実施形態１と共通する部分は説明を省略する。
図７は、入力画像がIP変換部ＩＰに入力され、後段に超解像部ＵＲがある場合である。IP変換部ＩＰにおいてもFRC部ＲＣ同様ベクトル検出を行っており、この検出部より得られる動きベクトル分布およびベクトル信頼度などの情報により超解像の尖鋭化ゲインを制御する構成となっている。
【００７３】
以上の実施形態のように、IP変換やFRC回路部の動きベクトル検出部情報を利用して超解像の尖鋭化ゲインを制御することにより動きに適応した超解像最適化が可能となる。動画部分についてはノイズ感が目立ちにくい特性を利用して尖鋭化ゲインを上げることでより動画解像度が向上することになり、見た目の動画応答性の向上につながる効果を持つ。静止に近い部分においては、ノイズ感が目立ちやすいため尖鋭化ゲインを低下させS/Nの良好な画質となる。また、IP/FRC部分のベクトル信頼性を利用することで信頼性の低い場合は、ベクトル誤検出による破綻の可能性が高いため、尖鋭化ゲインを抑えて破綻を目立ちにくくする効果を持つ。
【００７４】
簡単にまとめると次のようになる。
１．IP変換およびFRC回路部の動きベクトル検出部より得られる、ベクトル分布データを用いて、超解像度回路の尖鋭化ゲインを制御する。
２．IP変換およびFRC回路部の動きベクトル検出部より得られる、ベクトル信頼度情報を用いて、超解像度回路の尖鋭化ゲインを制御する。
超解像回路では尖鋭化ゲインを上げる程解像感は増すが、ノイズ感が増加するデメリットを持つ。ノイズ感は静止画像であるほど目立つ特性をもつという事情にあった。
【００７５】
本実施形態では、超解像回路の周辺に存在するIP変換回路や、FRC回路の動きベクトル情報を用いて、動き情報に適した尖鋭化ゲインの制御をすることによって、静止部分のノイズ感低下、動画部分の解像度の向上、FRC回路やIP変換部の破綻緩和、の効果を生むことが出来る。
【００７６】
効果として、動画部静止部の尖鋭化ゲインの適正化による静止部分のノイズ感減少、動画部分の解像感の向上、IP変換、FRC回路部の破綻緩和の効果が得られる。
【００７７】
なお、この発明は上記実施形態に限定されるものではなく、この外その要旨を逸脱しない範囲で種々変形して実施することができる。
また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。さらに、異なる実施の形態に係る構成要素を適宜組み合わせても良いものである。
【符号の説明】
【００７８】
１１１…デジタルテレビジョン放送受信装置、１１２…キャビネット、１１３…支持台、１１４…映像表示器、１１５…スピーカ、１１６…操作部、１１７…リモートコントローラ、１１８…受光部、１１９…第１のメモリカード、１２０…第２のメモリカード、１２１…第１のＬＡＮ端子、１２２…第２のＬＡＮ端子、１２３…ＵＳＢ端子、１２４…ｉ．ＬＩＮＫ端子、１２５，１２７，１３９…ＨＤＤ、１２６，１３５…ハブ、１２８，１３３…コンテンツサーバー、１２９…ＤＶＤレコーダ、１３０…アナログ伝送路、１３１…ブロードバンドルータ、１３２…ネットワーク、１３４，１３６…携帯電話、１３７…デジタルカメラ、１３８…カードリーダ／ライタ、１４０…キーボード、１４１…ＡＶ−ＨＤＤ、１４２…Ｄ−ＶＨＳ。
【技術分野】
【０００１】
本発明は、画像表示装置及び画像表示方法に係わり、特に超解像制御方法に関する。
【背景技術】
【０００２】
画像表示装置においては、静止部分のノイズ感低下、動画部分の解像度の向上、といった要請がある。関連して例えば特許文献１には概要として動き検出装置で、動きベクトルを画面の一定範囲ごとにヒストグラム化し、それによってフレームレート変換処理またはＩＰ（インターレース・プログレッシブ）変換処理からの映像の鮮鋭度を制御している旨が記載されている。
【０００３】
しかしながら画面を構造化された範囲で捉え拡大縮小を含めて相関をとるといった、上記要請に対する汎用性には乏しいアプローチであった。
また一般には先行技術では、超解像回路の尖鋭化パラメータの可変（ゲイン制御など）は、画像の動き情報とは無関係に制御していた。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２３４０８８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、動画部分の解像度を向上させる画像表示装置及び画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の画像表示装置は、入力された画像信号を高解像度化処理する高解像度化回路と、前記高解像度化回路から入力された画像信号にフレーム・レート変換処理を行うFrame Rate Converter変換回路とを備え、前記高解像度化回路は、入力された前記画像信号が前記Frame Rate Converter変換回路における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、動画部分の解像度を向上させる画像表示装置及び画像表示方法が得られる。
【図面の簡単な説明】
【０００８】
【図１】本発明を適用したデジタルテレビジョン放送受信装置１１１の外観と、このデジタルテレビジョン放送受信装置１１１を中心として構成されるネットワークシステムを説明するための図。
【図２】デジタルテレビジョン放送受信装置１１１の主要な信号処理系を示す図。
【図３】同実施形態の機能ブロック構成図。
【図４】同実施形態の代表的なブロック構成図。
【図５】同実施形態に用いられるフローチャート例。
【図６】同実施形態の動画部分の解像度を向上させる実施例。
【図７】同他の形態に用いられる代表的なブロック構成図。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態を説明する。
（実施形態１）
本発明による実施形態１を図１乃至図６を参照して説明する。
以下、デジタルテレビジョン放送受信装置１１１の機能ブロック図とフローチャートを用いて更に詳細に説明する。
図１は、本発明に係る通信装置であるネットワーク機能を備えたデジタルテレビジョン放送受信装置１１１の外観と、このデジタルテレビジョン放送受信装置１１１を中心として構成されるネットワークシステムの一例を概略的に示している。
【００１０】
すなわち、デジタルテレビジョン放送受信装置１１１は、主として、薄型のキャビネット１１２と、このキャビネット１１２を起立させて支持する支持台１１３とから構成されている。そして、キャビネット１１２には、例えばＳＥＤ（Surface-conduction Electron-emitter Display）表示パネル，液晶表示パネル等でなる平面パネル型の映像表示器１１４、スピーカ１１５、操作部１１６、リモートコントローラ１１７から送信される操作情報を受ける受光部１１８等が設置されている。
【００１１】
また、このデジタルテレビジョン放送受信装置１１１には、例えばＳＤ（Secure Digital）メモリカード、ＭＭＣ（Multimedia Card）及びメモリスティック等の第１のメモリカード１１９が着脱可能となっており、この第１のメモリカード１１９に対して番組や写真等の情報の記録再生が行なわれるようになっている。
【００１２】
さらに、このデジタルテレビジョン放送受信装置１１１には、例えば契約情報等の記録された第２のメモリカード（ＩＣカード）１２０が着脱可能となっており、この第２のメモリカード１２０に対して情報の記録再生が行なわれるようになっている。
【００１３】
また、このデジタルテレビジョン放送受信装置１１１は、第１のＬＡＮ（Local Area Network）端子１２１、第２のＬＡＮ端子１２２、ＵＳＢ（Universal Serial Bus）端子１２３及びｉ．ＬＩＮＫ端子１２４を備えている。
【００１４】
このうち、第１のＬＡＮ端子１２１は、ＬＡＮ対応ＨＤＤ専用ポートとして使用されるもので、接続されたＮＡＳ（Network Attached Storage）であるＬＡＮ対応のＨＤＤ１２５に対して、イーサネット（登録商標）により情報の記録再生を行なうために使用される。
【００１５】
このように、ＬＡＮ対応ＨＤＤ専用ポートとしての第１のＬＡＮ端子１２１を設けることにより、他のネットワーク環境やネットワーク使用状況等に影響されることなく、ＬＡＮ対応のＨＤＤ１２５に対してハイビジョン画質による番組の情報記録を安定して行なうことができる。
【００１６】
また、第２のＬＡＮ端子１２２は、イーサネット（登録商標）を用いた一般的なＬＡＮ対応ポートとして使用されるもので、例えばハブ１２６を介して、ＬＡＮ対応のＨＤＤ１２７、コンテンツサーバー１２８、ＨＤＤ内蔵のＤＶＤ（Digital Versatile Disk）レコーダ１２９等の機器を接続し、これらの機器と情報伝送を行なうために使用される。
【００１７】
なお、コンテンツサーバー１２８については、家庭内ネットワークにおいてコンテンツのサーバー機器として動作するための機能を持ち、さらにコンテンツのアクセスに必要なＵＲＩ（Uniform Resource Identifier）情報を提供するサービスを備えたＵＰｎＰ（ユニバーサルプラグアンドプレイ）対応機器として構成される。
【００１８】
なお、ＤＶＤレコーダ１２９については、第２のＬＡＮ端子１２２を介して通信されるデジタル情報が制御系のみの情報であるため、デジタルテレビジョン放送受信装置１１１との間でアナログの映像及び音声情報を伝送するために、専用のアナログ伝送路１３０を設ける必要がある。
【００１９】
さらに、この第２のＬＡＮ端子１２２は、ハブ１２６に接続されたブロードバンドルータ１３１を介して、例えばインターネット等のネットワーク１３２に接続し、このネットワーク１３２を介してコンテンツサーバー１３３や携帯電話１３４等と情報伝送を行なうために使用される。
【００２０】
なお、コンテンツサーバー１３３についてはコンテンツのサーバー機器として動作するための機能を持ち、さらにコンテンツのアクセスに必要なＵＲＩ情報を提供するサービスを備えたＵＰｎＰ対応機器として構成される。
【００２１】
また、上記ＵＳＢ端子１２３は、一般的なＵＳＢ対応ポートとして使用されるもので、例えばハブ１３５を介して、携帯電話１３６、デジタルカメラ１３７、メモリカードに対するカードリーダ／ライタ１３８、ＨＤＤ１３９、キーボード１４０等のＵＳＢ機器を接続し、これらのＵＳＢ機器と情報伝送を行なうために使用される。
【００２２】
さらに、上記ｉ．ＬＩＮＫ端子１２４は、例えばＡＶ−ＨＤＤ１４１、Ｄ（Digital）
−ＶＨＳ（Video Home System）１４２等をシリアル接続し、これらの機器と情報伝送を行なうために使用される。
図２は、上記したデジタルテレビジョン放送受信装置１１１の主要な信号処理系を示している。
すなわち、ＢＳ／ＣＳデジタル放送受信用のアンテナ２４３で受信した衛星デジタルテレビジョン放送信号は、入力端子２４４を介して衛星デジタル放送用のチューナ２４５ａに供給される。
【００２３】
チューナ２４５ａは、制御部２６１からの制御信号により所望のチャンネルの放送信号を選局し、この選局された放送信号をＰＳＫ（Phase Shift Keying）復調器２４５ｂに出力する。
【００２４】
ＰＳＫ復調器２４５ｂは、制御部２６１からの制御信号により、チューナ２４５ａで選局された放送信号を復調し、所望の番組を含んだトランスポートストリームを得て、ＴＳ復号器２４５ｃに出力する。
【００２５】
ＴＳ復号器２４５ｃは、制御部２６１からの制御信号によりトランスポートストリーム（ＴＳ）多重化された信号のＴＳ復号処理を行い、所望の番組のデジタルの映像信号及び音声信号をデパケットすることにより得たＰＥＳ（Packetized Elementary Stream）を信号処理部２４７内のＳＴＤバッファ２４７ｆへ出力する。
【００２６】
また、ＴＳ復号器２４５ｃは、デジタル放送により送られているセクション情報を信号処理部２４７内のセクション処理部２４７ｈへ出力する。
また、地上波放送受信用のアンテナ２４８で受信した地上デジタルテレビジョン放送信号は、入力端子２４９を介して地上デジタル放送用のチューナ２５０ａに供給される。
【００２７】
チューナ２５０ａは、制御部２６１からの制御信号により所望のチャンネルの放送信号を選局し、この選局された放送信号をＯＦＤＭ（Orthogonal Frequency Division Multiplexing）復調器２５０ｂに出力する。
【００２８】
ＯＦＤＭ復調器２５０ｂは、制御部２６１からの制御信号により、チューナ２５０ａで選局された放送信号を復調し、所望の番組を含んだトランスポートストリームを得て、ＴＳ復号器２５０ｃに出力する。
【００２９】
ＴＳ復号器２５０ｃは、制御部２６１からの制御信号によりトランスポートストリーム（ＴＳ）多重化された信号のＴＳ復号処理を行い、所望の番組のデジタルの映像信号及び音声信号をデパケットすることにより得たＰＥＳ（Packetized Elementary Stream）を信号処理部２４７内のＳＴＤバッファ２４７ｆへ出力する。
【００３０】
また、ＴＳ復号器２５０ｃは、デジタル放送により送られているセクション情報をセクション処理部２４７ｈへ出力する。
ここで、上記信号処理部２４７は、テレビ視聴時には、ＴＳ復号器２４５ｃおよびＴＳ復号器２５０ｃからそれぞれ供給されたデジタルの映像信号及び音声信号に対して、選択的に所定のデジタル信号処理を施し、グラフィック処理部２５４及び音声処理部２５５に出力している。また、信号処理部２４７は、コンテンツ再生時には、制御部２６１から入力されたコンテンツの再生信号を選択し、所定のデジタル信号処理を施し、グラフィック処理部２５４及び音声処理部２５５に出力している。
【００３１】
制御部２６１には、信号処理部２４７から、番組を取得するための各種データや電子番組ガイド（ＥＰＧ）情報，番組属性情報（番組ジャンル等），字幕情報等（サービス情報、ＳＩやＰＳＩ）が入力されている。
【００３２】
制御部２６１は、これら入力された情報からＥＰＧ，字幕を表示するため画像生成処理を行い、この生成した画像情報をグラフィック処理部２５４へ出力する。
セクション処理部２４７ｈは、ＴＳ復号器２４５ｃ（２５０ｃ）から入力されたセクション情報の中から、番組を取得するための各種データや電子番組ガイド（ＥＰＧ）情報，番組属性情報（番組ジャンル等），字幕情報等（サービス情報、ＳＩやＰＳＩ）を制御部２６１へ出力する。
【００３３】
グラフィック処理部２５４は、（１）信号処理部２４７内のＡＶデコーダ２４７ｇから供給されるデジタルの映像信号と、（２）ＯＳＤ（On Screen Display）信号生成部２５７で生成されるＯＳＤ信号と、（３）データ放送による画像データと、（４）制御部２６１により生成されたＥＰＧ，字幕信号，ＧＵＩ画面とを合成して映像処理部２５８へ出力する機能を有する。
【００３４】
また、字幕放送による字幕を表示するとき、グラフィック処理部２５４は、制御部２６１からの制御による字幕情報に基づき、映像信号上に字幕情報を重畳する処理を行う。
【００３５】
グラフィック処理部２５４から出力されたデジタルの映像信号は、映像処理部２５８に供給される。この映像処理部２５８は、入力されたデジタルの映像信号を、前記映像表示器１１４で表示可能なフォーマットのアナログ映像信号に変換した後、映像表示器１１４に出力して映像表示させるとともに、出力端子２５９を介して外部に導出させる。
【００３６】
また、上記音声処理部２５５は、入力されたデジタルの音声信号を、前記スピーカ１１５で再生可能なフォーマットのアナログ音声信号に変換した後、スピーカ１１５に出力して音声再生させるとともに、出力端子２６０を介して外部に導出させる。
【００３７】
ここで、このデジタルテレビジョン放送受信装置１１１は、上記した各種の受信動作を含むその全ての動作を制御部２６１によって統括的に制御されている。この制御部２６１は、ＣＰＵ（Central Processing Unit）等を内蔵しており、前記操作部１１６からの操作情報を受け、または、リモートコントローラ１１７から送出された操作情報を、前記受光部１１８を介して受信し、その操作内容が反映されるように各部をそれぞれ制御している。
【００３８】
この場合、制御部２６１は、主として、そのＣＰＵが実行する制御プログラムを格納したＲＯＭ（Read Only Memory）２６１ａと、該ＣＰＵに作業エリアを提供するＲＡＭ（Random Access Memory）２６１ｂと、各種の設定情報及び制御情報等が格納される不揮発性メモリ２６１ｃとを利用している。
【００３９】
また、この制御部２６１は、カードＩ／Ｆ（Interface）２６５を介して、前記第１のメモリカード１１９が装着可能なカードホルダ２６６に接続されている。これによって、制御部２６１は、カードホルダ２６６に装着された第１のメモリカード１１９と、カードＩ／Ｆ２６５を介して情報伝送することができる。
【００４０】
さらに、上記制御部２６１は、カードＩ／Ｆ２６７を介して、前記第２のメモリカード１２０が装着可能なカードホルダ２６８に接続されている。これにより、制御部２６１は、カードホルダ２６８に装着された第２のメモリカード１２０と、カードＩ／Ｆ２６７を介して情報伝送することができる。
【００４１】
また、上記制御部２６１は、通信Ｉ／Ｆ２６９を介して第１のＬＡＮ端子１２１に接続されている。これにより、制御部２６１は、第１のＬＡＮ端子１２１に接続されたＬＡＮ対応のＨＤＤ１２５と、通信Ｉ／Ｆ２６９を介して情報伝送することができる。この場合、制御部２６１は、ＤＨＣＰ（Dynamic Host Configuration Protocol）サーバ機能を有し、第１のＬＡＮ端子１２１に接続されたＬＡＮ対応のＨＤＤ１２５にＩＰ（Internet Protocol）アドレスを割り当てて制御している。
【００４２】
さらに、上記制御部２６１は、通信Ｉ／Ｆ２７０を介して第２のＬＡＮ端子１２２に接続されている。これにより、制御部２６１は、第２のＬＡＮ端子１２２に接続された各機器（図１参照）と、通信Ｉ／Ｆ２７０を介して情報伝送することができる。
【００４３】
また、上記制御部２６１は、ＵＳＢ Ｉ／Ｆ２７１を介して前記ＵＳＢ端子１２３に接続されている。これにより、制御部２６１は、ＵＳＢ端子１２３に接続された各機器（図１参照）と、ＵＳＢ Ｉ／Ｆ２７１を介して情報伝送することができる。
【００４４】
さらに、上記制御部２６１は、ｉ．ＬＩＮＫ Ｉ／Ｆ２７２を介してｉ．ＬＩＮＫ端子１２４に接続されている。これにより、制御部２６１は、ｉ．ＬＩＮＫ端子１２４に接続された各機器（図１参照）と、ｉ．ＬＩＮＫ Ｉ／Ｆ２７２を介して情報伝送することができる。
【００４５】
ところで、この実施形態では、ＬＡＮ対応のＨＤＤ１２５に初期登録時のＨＤＤ１２５、ＨＤＤ１２７、コンテンツサーバー１２８、ＤＶＤレコーダ１２９それぞれに割り当てられたストレージＩＤ（ＩＰアドレス、機器名を含む）を記述した登録ファイルを記憶保持している。
【００４６】
また、不揮発性メモリ２６１ｃに、ＬＡＮ対応のＨＤＤ１２５、ＨＤＤ１２７、コンテンツサーバー１２８、ＤＶＤレコーダ１２９それぞれのストレージＩＤを記憶している。
【００４７】
また、制御部２６１は、この発明に係わる機能として、ＵＰｎＰを利用した（１）サーバー機器発見機能２６１ｄと、（２）ＵＰｎＰを利用したコンテンツ情報取得機能２６１ｅと、（３）コンテンツアクセス制御機能２６１ｆとを備えている。
【００４８】
（１）制御部２６１は、サーバー機器発見機能２６１ｄにより、ＵＰｎＰのディスカバリ機能を用いてネットワーク上のＵＰｎＰ対応機器を発見する。例えばサーバー機器発見機能２６１ｄは、ＵＰｎＰのディスカバリ機能を用いてコンテンツサーバー１２８を発見する。
【００４９】
（２）制御部２６１は、コンテンツ情報取得機能２６１ｅにより、ＵＰｎＰのコントロール機能を用いてＵＰｎＰ対応機器をコントロールし、ＵＰｎＰ対応機器内のコンテンツをアクセスするために必要なＵＲＩ情報を取得する。例えばコンテンツ情報取得機能２６１ｅは、コンテンツサーバー１２８をコントロールし、コンテンツサーバー１２８内のＨＤＤ等に蓄積されているコンテンツをアクセスするために必要なＵＲＩ情報をコンテンツサーバー１２８から取得する。
【００５０】
（３）制御部２６１は、コンテンツアクセス制御機能２６１ｆにより、サーバー機器発見機能２６１ｄにより取得したサーバー機器のＩＰアドレス情報と、コンテンツ情報取得機能２６１ｅにより取得したＵＲＩ情報から得たＩＰアドレス情報と、デジタルテレビジョン放送受信装置１１１のＬＡＮ端子１２２に割り当てられたＩＰアドレスとネットマスクに基づいてコンテンツへのアクセス可否判定を行う。そして制御部２６１は、アクセス可と判断した場合にはコンテンツアクセスを許可するが、否と判断した場合には許可できない旨を映像表示器１１４にＯＳＤにより表示させる。
【００５１】
さらに、上記制御部２６１は、ネットワーク上の記録再生処理を行う記録再生機器を登録する登録部２６１ｇと、任意の記録再生位置にファイルを記録させる記録速度を測定する測定制御部２６１ｈとを有しており、後に詳細に説明する測定処理を行うものである。
【００５２】
以下、一般的なＵＳＢ対応ポートであるＵＳＢ端子１２３を用いてＵＳＢ機器であるＨＤＤ１３９を接続し、ＨＤＤ１３９（以下、ＵＳＢ ＨＤＤ１３９と記す）へ記録／再生を行う場合について説明する。
【００５３】
しかし、本発明はＵＳＢに限定されるものではなく、ＩＥＥＥ１３９４やＬＡＮ−ＨＤＤ等、他のインターフェースに適用しても良い。
なお、図１ではＵＳＢ ＨＤＤ１３９は、ハブ１３５を介して複数のＵＳＢ機器で使用されているが、好ましくは専用ポートとすることで、他機器の影響を受けることを防ぐことができる。
【００５４】
以下、デジタルテレビジョン放送受信装置１１１の機能ブロック図とフローチャートを用いて更に詳細に説明する。図３は、デジタルテレビジョン放送受信装置１１１を機能ブロックとして表現した映像信号処理装置の機能ブロック図である。
【００５５】
図３において、映像信号処理装置は、地上波もしくは衛星波により送信されたRF信号から特定のチャンネルに選局するためのデバイスTuner１（図２のチューナ２４５ａ、２５０ａに相当）を具備し、このTuner１の出力を映像処理モジュール４（信号処理部２４７に相当）へ接続し、映像処理モジュール４は、Tuner１から取り出されたストリーム信号から映像ストリームデータを分離取得し映像信号を生成し、この生成した映像信号を、例えばSD信号（標準解像度信号）をHD信号（高解像度信号）へ変換する機能や、映像信号の黒色を伸張する機能を有している。映像処理モジュール４は、例えばTV信号処理LSI内部の一部の機能として供給されている。なおキャビネット１１２の前面下部などに上記変換する機能が働いているときに点灯するＬＥＤ等の状態表示部を更に備えてもよい。
【００５６】
映像処理モジュール４には、Tuner１から入力されたストリームデータを記録することができるHDD（Hard Disc Driver）３が接続されており、放送された番組が記録できる。このHDD３において本実施形態の目的とするところは、電源の供給を遮断した状態で記憶した内容を保持し続けられる不揮発性の記憶装置（所謂コンピュータの5大装置の一つである補助記憶装置（二次記憶装置））であることを特徴とし、例えばSDD（Solid Disc Driver）や、SD Card、FLASH Memoryなども用いられうる。HDD３としては必ずしも装置に内蔵されている必要はなく図１のHDD１２５のように外付けタイプのものでもよい。
【００５７】
映像処理モジュール４の出力は、Video Encorder＆Backend Processor５（映像処理部２５８に相当）に接続され、映像処理モジュール４より処理された放送等のストリーム信号または図示せぬDVD等に記録された映像信号が、映像処理モジュール４より出力され、Video Encorder＆Backend Processor５により、実際のNTSC信号やPAL信号に変換され、Video Encorder＆Backend Processor５の内部のBackend processorによりPanel６（映像表示器１１４に相当）を制御し、Panel６に映像を映し出すことができる。
【００５８】
また、制御モジュール２（制御部２６１に相当）は、ユーザからの指示または自動でデジタルテレビジョン放送受信装置１１１の電源入り切り制御や、映像処理モジュール４、Video Encoder&Backend Processor５の制御を司っている。また制御部２６１内の不揮発性メモリ２６１ｃは後述のTV視聴の時間の頻度分布の蓄積を担っている。
【００５９】
ここで上記映像処理モジュール４による変換機能の一例として高画質化を行う所謂超解像技術について説明する。超解像アルゴリズムについては種々存在しているが、本発明の超解像アルゴリズムは以下に説明する通りである。なお、本発明の超解像アルゴリズムを用いた高画質化処理としては、基本であるリアルタイムモードと熟成モードとがある。
【００６０】
リアルタイムモードのステップは以下の通りである。
＜ステップ1＞
地上デジタル放送（1440×1080画素）やDVDソフト(720×480画素)等の60コマ/秒で構成される映像1コマごとに精細度を解析し、草の葉のように細かい模様で構成されているテクスチャー部を識別する。
【００６１】
＜ステップ2＞
ステップ1で識別したテクスチャー部に対して、次の「超解像処理」を実施する。
これまでのフルHDパネルへの対応と同様に、例えば1440×1080画素の解像度をもつ地上デジタル放送などの入力映像（1）に画素補間処理を行なった後、HD水準の1920×1080画素に引き伸ばすことにより高解像度映像（2）を作成する。
【００６２】
一旦、この高解像度映像（2）を所定のアルゴリズムで元の解像度の映像（3）に変換する。この映像を入力映像（1）と比較し、その違い（4）をもとにして高解像度映像（2）に補正処理を加える（5）ことにより自然で鮮鋭感あふれる映像（6）を実現する。なおこれらの処理はＬＳＩ化されている場合があり、上記補正処理等に対して超解像の尖鋭化ゲインとして外部からパラメータ制御する構成をとることができる。
【００６３】
このリアルタイムモードに対し熟成モードでは例えば、更に映像（6）から再び映像（3）を作成し（4）、（5）と処理を続け、この映像（6）から（3）を作成し（4）、（5）と続く処理を既定回数繰り返す。また映像1コマ内のみでなく複数コマに渡って解析をしてもよい。熟成モードでは二次記憶内にある映像を変換し、この変換した結果の映像を二次記憶内に戻す。
【００６４】
図４は、本発明の機能構成例である。入力画像が、超解像回路部ＵＲを経由しFRC（Frame Rate Converter、倍速）回路ＲＣに入力される構成となる。FRCブロックでは補間画像を生成するため、動きベクトルの検出を行っているが、ここの動きベクトル検出部より得られる、動きベクトル分布、ベクトル信頼度などの情報をもとに超解像の尖鋭化ゲインを制御する構成となっている。
【００６５】
動きベクトルの検出は例えば、補間フレームの挿入位置を中心としそれを挟む前後２枚のフレーム上で規定の形状のブロックを点対称に平行移動させる。そして、対応する位置の画素どうしの画素値の差分値をブロック内の画素全てについて計算し、これを累積した値（ＳＡＤ）を求め、このＳＡＤ値がある範囲内となる方向を該ブロックの動きベクトル候補とする。
【００６６】
このときベクトル信頼度は例えば、このＳＡＤ値の極小点が十分に小さいといった判定がされなかった等の理由で低下することがある。
図５に本発明の実施例を示すフローチャートを示す。
動きベクトル検出部で実施された動きベクトル検出（ステップＳ７０１）で得られた、動きベクトル分布より画像内で動きのある範囲を検出する（ステップＳ７０２）。動きの無い（静止部）部分に関しては尖鋭化ゲインを抑え（ステップＳ７０６）、ノイズ感を減少させる。動きの有る範囲では、その動き量に応じて尖鋭化ゲインを調節する（ステップＳ７０３）。動き量が大きい場合はより高速に動いていることになるため尖鋭化ゲインを上げてもノイズ感は目立ちにくくなる。
【００６７】
更に、動きのある部分においてベクトルの信頼度情報を用いる（ステップＳ７０４）。この信頼度が低い場合、FRCブロックなどによってベクトル誤検出による破綻の可能性が高いということになる。
【００６８】
この場合、超解像による尖鋭化されているとより、破綻が目に付きやすいことになるため、ベクトルの信頼性が低い場合には、超解像の尖鋭化ゲインを抑えて（ステップＳ７０６）解像感を低下させることで、FRCブロックなどのベクトル誤検出による補間画像破綻を目立ちにくくする制御を行う。
【００６９】
動き部分であり且つ動き量が大きく、ベクトル信頼度も高い場合には、解像度を増加させてもノイズ感が目立ちにくいため、尖鋭化ゲインを大きくする制御を行う（ステップＳ７０５）。これにより従来技術に対しより動画解像度の高い画質を得ることが可能となる。
【００７０】
他方で動き部分であるが動き量が小さく、ベクトル信頼度も高い場合には、解像度を増加させてもノイズ感が目立ちにくいため、尖鋭化ゲインを中程度とする制御を行う（ステップＳ７０７）。ここでベクトルの信頼性が低い場合には、超解像の尖鋭化ゲインを抑えて（ステップＳ７０６）解像感を低下させることで、FRCブロックなどのベクトル誤検出による補間画像破綻を目立ちにくくする制御を行う。
【００７１】
図６は、実際に図５に示したフローに基づいて尖鋭化ゲイン制御を行った場合の画像例である。
画面下部にABC・・・で示したテロップが流れており、背景は静止に近い状態を示したものである。
テロップ部分をベクトル検出部において動き部分Ｄとして検出し、その速度に応じた尖鋭化制御を行うことでより解像感の増したテロップを見ることが出来る。逆に背景の静止に近い部分Ｓは、尖鋭化によるノイズ感を緩和するため尖鋭化ゲインを抑える制御を行う。
【００７２】
（実施形態２）
本発明による実施形態２を図１乃至図３及び図５乃至図７を参照して説明する。実施形態１と共通する部分は説明を省略する。
図７は、入力画像がIP変換部ＩＰに入力され、後段に超解像部ＵＲがある場合である。IP変換部ＩＰにおいてもFRC部ＲＣ同様ベクトル検出を行っており、この検出部より得られる動きベクトル分布およびベクトル信頼度などの情報により超解像の尖鋭化ゲインを制御する構成となっている。
【００７３】
以上の実施形態のように、IP変換やFRC回路部の動きベクトル検出部情報を利用して超解像の尖鋭化ゲインを制御することにより動きに適応した超解像最適化が可能となる。動画部分についてはノイズ感が目立ちにくい特性を利用して尖鋭化ゲインを上げることでより動画解像度が向上することになり、見た目の動画応答性の向上につながる効果を持つ。静止に近い部分においては、ノイズ感が目立ちやすいため尖鋭化ゲインを低下させS/Nの良好な画質となる。また、IP/FRC部分のベクトル信頼性を利用することで信頼性の低い場合は、ベクトル誤検出による破綻の可能性が高いため、尖鋭化ゲインを抑えて破綻を目立ちにくくする効果を持つ。
【００７４】
簡単にまとめると次のようになる。
１．IP変換およびFRC回路部の動きベクトル検出部より得られる、ベクトル分布データを用いて、超解像度回路の尖鋭化ゲインを制御する。
２．IP変換およびFRC回路部の動きベクトル検出部より得られる、ベクトル信頼度情報を用いて、超解像度回路の尖鋭化ゲインを制御する。
超解像回路では尖鋭化ゲインを上げる程解像感は増すが、ノイズ感が増加するデメリットを持つ。ノイズ感は静止画像であるほど目立つ特性をもつという事情にあった。
【００７５】
本実施形態では、超解像回路の周辺に存在するIP変換回路や、FRC回路の動きベクトル情報を用いて、動き情報に適した尖鋭化ゲインの制御をすることによって、静止部分のノイズ感低下、動画部分の解像度の向上、FRC回路やIP変換部の破綻緩和、の効果を生むことが出来る。
【００７６】
効果として、動画部静止部の尖鋭化ゲインの適正化による静止部分のノイズ感減少、動画部分の解像感の向上、IP変換、FRC回路部の破綻緩和の効果が得られる。
【００７７】
なお、この発明は上記実施形態に限定されるものではなく、この外その要旨を逸脱しない範囲で種々変形して実施することができる。
また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。さらに、異なる実施の形態に係る構成要素を適宜組み合わせても良いものである。
【符号の説明】
【００７８】
１１１…デジタルテレビジョン放送受信装置、１１２…キャビネット、１１３…支持台、１１４…映像表示器、１１５…スピーカ、１１６…操作部、１１７…リモートコントローラ、１１８…受光部、１１９…第１のメモリカード、１２０…第２のメモリカード、１２１…第１のＬＡＮ端子、１２２…第２のＬＡＮ端子、１２３…ＵＳＢ端子、１２４…ｉ．ＬＩＮＫ端子、１２５，１２７，１３９…ＨＤＤ、１２６，１３５…ハブ、１２８，１３３…コンテンツサーバー、１２９…ＤＶＤレコーダ、１３０…アナログ伝送路、１３１…ブロードバンドルータ、１３２…ネットワーク、１３４，１３６…携帯電話、１３７…デジタルカメラ、１３８…カードリーダ／ライタ、１４０…キーボード、１４１…ＡＶ−ＨＤＤ、１４２…Ｄ−ＶＨＳ。
【特許請求の範囲】
【請求項１】
入力された画像信号を高解像度化処理する高解像度化回路と、
前記高解像度化回路から入力された画像信号にフレーム・レート変換処理を行うFrame Rate Converter変換回路とを備え、
前記高解像度化回路は、入力された前記画像信号が前記Frame Rate Converter変換回路における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示装置。
【請求項２】
インターレース・プログレッシブ変換処理を行うインターレース・プログレッシブ変換回路と、
前記インターレース・プログレッシブ変換回路から入力された画像信号を高解像度化処理する高解像度化回路とを備え、
前記高解像度化回路は、前記インターレース・プログレッシブ変換回路から入力された前記画像信号が動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示装置。
【請求項３】
入力された画像信号を高解像度化処理し、
前記高解像度化処理された画像信号にフレーム・レート変換処理を行い、
前記高解像度化処理は、入力された前記画像信号が前記フレーム・レート変換処理における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示方法。
【請求項４】
インターレース・プログレッシブ変換処理を行い、
前記インターレース・プログレッシブ変換処理された画像信号を高解像度化処理し、
前記高解像度化処理は、前記インターレース・プログレッシブ変換処理に関わって前記画像信号が動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示方法。
【請求項５】
前記高解像度化処理された画像信号を表示する表示部を更に備えたことを特徴とする請求項１または請求項２に記載の画像表示装置。
【請求項１】
入力された画像信号を高解像度化処理する高解像度化回路と、
前記高解像度化回路から入力された画像信号にフレーム・レート変換処理を行うFrame Rate Converter変換回路とを備え、
前記高解像度化回路は、入力された前記画像信号が前記Frame Rate Converter変換回路における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示装置。
【請求項２】
インターレース・プログレッシブ変換処理を行うインターレース・プログレッシブ変換回路と、
前記インターレース・プログレッシブ変換回路から入力された画像信号を高解像度化処理する高解像度化回路とを備え、
前記高解像度化回路は、前記インターレース・プログレッシブ変換回路から入力された前記画像信号が動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示装置。
【請求項３】
入力された画像信号を高解像度化処理し、
前記高解像度化処理された画像信号にフレーム・レート変換処理を行い、
前記高解像度化処理は、入力された前記画像信号が前記フレーム・レート変換処理における動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示方法。
【請求項４】
インターレース・プログレッシブ変換処理を行い、
前記インターレース・プログレッシブ変換処理された画像信号を高解像度化処理し、
前記高解像度化処理は、前記インターレース・プログレッシブ変換処理に関わって前記画像信号が動きベクトル検出処理が行われた画像信号を含むときに、この動きベクトル検出処理が行われた前記画像信号に関するベクトル分布データまたはベクトル信頼度情報を用いて高解像度化処理の尖鋭化ゲインを制御することを特徴とする画像表示方法。
【請求項５】
前記高解像度化処理された画像信号を表示する表示部を更に備えたことを特徴とする請求項１または請求項２に記載の画像表示装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１１−３５４５０（Ｐ２０１１−３５４５０Ａ）
【公開日】平成２３年２月１７日（２０１１．２．１７）
【国際特許分類】
【出願番号】特願２００９−１７６７３３（Ｐ２００９−１７６７３３）
【出願日】平成２１年７月２９日（２００９．７．２９）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＦＬＡＳＨ
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２３年２月１７日（２０１１．２．１７）
【国際特許分類】
【出願日】平成２１年７月２９日（２００９．７．２９）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＦＬＡＳＨ
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]