画像表示装置
【課題】 キャプチャした画像に含まれる文字列を認識するとともに、当該文字列に関連する関連情報を容易に取得可能な画像表示装置を提供する。
【解決手段】 文字認識部３１は、キャプチャした画像データを入力し、画像に含まれる数字と、一部の記号とからなる文字列を認識し、認識した文字列を構成する文字の文字コードを制御部１０及び文字照合部３２に出力する。文字照合部３２は、文字認識部３１から文字コードを入力するとともに、文字情報復調部２９から文字放送やデータ放送に含まれる文字情報を入力し、文字認識部３１で認識された文字列に類似した文字列を前記文字情報の中から検出して、検出結果を制御部１０に出力する。情報検索部３３は、通信部５０を介してインターネットに接続可能になっており、文字認識部３１で認識された文字列に関連する情報を、インターネット上から検索することができる。
【解決手段】 文字認識部３１は、キャプチャした画像データを入力し、画像に含まれる数字と、一部の記号とからなる文字列を認識し、認識した文字列を構成する文字の文字コードを制御部１０及び文字照合部３２に出力する。文字照合部３２は、文字認識部３１から文字コードを入力するとともに、文字情報復調部２９から文字放送やデータ放送に含まれる文字情報を入力し、文字認識部３１で認識された文字列に類似した文字列を前記文字情報の中から検出して、検出結果を制御部１０に出力する。情報検索部３３は、通信部５０を介してインターネットに接続可能になっており、文字認識部３１で認識された文字列に関連する情報を、インターネット上から検索することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビ放送等に含まれる画像をキャプチャ可能な画像表示装置に関する。
【背景技術】
【０００２】
特許文献１に示すように、放送中のテレビ映像から、任意の時点の画面を静止画像として取得（キャプチャ）して保存可能なシステムが提案されている。このシステムによれば、必要な情報が画面に表示された瞬間にキャプチャを実行しておくことにより、後でキャプチャした画像を表示させるだけで当該情報を瞬時に取得することが可能となる。
【０００３】
【特許文献１】特開２０００−３４１６３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、取得した前記情報に関連する情報をさらに取得する必要がある場合には、前記情報を基に文献を調べたり、インターネットの検索サイト等で前記情報をキーワードとして手入力したりする必要があった。例えば、テレビ映像の中に店舗等の所在地を特定可能な文字列（住所、電話番号、郵便番号等）が表示され、この表示画像をキャプチャしたとしても、当該店舗への交通案内情報や周辺地図を取得するためには、インターネット上の交通案内サイトや地図検索サイトにアクセスし、前記文字列等を入力しなければならなかった。
【０００５】
本発明は上記問題を鑑みてなされたものであり、その目的は、キャプチャした画像に含まれる文字列を認識するとともに、当該文字列に関連する関連情報を容易に取得可能な画像表示装置を提供することにある。
【課題を解決するための手段】
【０００６】
本発明の画像表示装置は、テレビ放送電波を受信可能なアンテナから受信信号を順次入力し、前記受信信号から特定のチャンネルの放送信号を選局して出力するチューナ部と、前記放送信号から画像信号を復調する画像復調部と、前記画像信号に基づいた画像データを生成する画像処理部と、入力操作に応じた操作信号を出力する操作部と、前記操作部からの操作信号に基づいて、前記画像処理部から１フレーム分の画像データを取得する画像キャプチャ手段と、前記画像キャプチャ手段によって取得した画像データに基づいて、画像に含まれる文字列を認識し、当該文字列に応じた文字情報を生成する文字認識部と、前記文字認識部によって生成された文字情報に基づいて、前記文字列に関連する関連情報を検索可能な情報検索部とを備えたことを特徴とする。
【０００７】
この画像表示装置によれば、キャプチャした画像に含まれる文字列の認識を行うとともに、当該文字列に関連する関連情報を検索可能であるため、関連情報を容易に取得することが可能となる。
【０００８】
この画像表示装置において、前記文字情報と前記関連情報とを関連付けて記憶するデータベースを備え、前記情報検索部は、前記データベースから関連情報を検索するようにしてもよい。
【０００９】
この画像表示装置において、ネットワークに接続された通信部を備え、前記情報検索部は、前記通信部を介して前記ネットワーク上から関連情報を検索することが望ましい。
【００１０】
この画像表示装置によれば、情報検索部が通信部を介してネットワーク上から関連情報を検索可能であるため、画像表示装置の内部にデータベースを備える必要がなく、画像表示装置のコストを低減することが可能となるとともに、データベースの保守・管理が容易になる。
【００１１】
この画像表示装置において、前記ネットワークはインターネットを含むことが望ましい。
【００１２】
この画像表示装置によれば、通信部を介してインターネット上から関連情報を取得することが可能となるため、種々の関連情報を容易に取得することが可能となるとともに、データベースの保守・管理がさらに容易になる。
【００１３】
この画像表示装置において、前記文字認識部によって認識された文字列を照合可能な文字照合部を備えることが望ましい。
【００１４】
この画像表示装置によれば、文字認識部によって認識された文字列を照合可能な文字照合部を備えているため、認識ミスの検知や修正を行うことが可能となる。
【００１５】
この画像表示装置において、前記放送信号に多重された文字情報を復調可能な文字情報復調部を備え、前記文字照合部は、前記文字認識部によって認識された文字列を、前記文字情報復調部によって復調された文字情報と照合することが望ましい。
【００１６】
この画像表示装置によれば、文字認識部で認識した文字列を、文字放送やデータ放送に含まれる文字情報と照合するため、文字認識部の認識ミスを容易に検知することが可能となる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明の実施形態に係る画像表示装置について、図面を参照して説明する。本実施形態の画像表示装置は、テレビ放送電波を受信して、テレビ放送に含まれる画像（以下、「テレビ画像」という。）の表示を行うテレビジョン装置に、静止画像の取得を行うキャプチャ機能を備えたものであり、さらに、取得した静止画像に電話番号や郵便番号が含まれている場合に、当該地域への交通案内情報や地図等を表示する機能を備えたものである。また、この画像表示装置は、テレビ放送電波に多重されているデータ放送や文字放送を受信して表示することが可能となっている。
【００１８】
図１は、本実施形態の画像表示装置の概略構成を示すブロック図である。
図１に示すように、画像表示装置１は、制御部１０と、主記憶部１１と、入力操作部１２と、リモコンＲＣと、リモコン信号受信部１３と、チューナ部２０と、画像復調部２１と、画像処理部２２と、表示メモリ２３と、表示部２４と、音声復調部２５と、音声処理部２６と、増幅回路２７と、スピーカ２８と、文字情報復調部２９と、文字認識部３１と、文字照合部３２と、情報検索部３３と、データ記憶部４０と、通信部５０とを備えている。
【００１９】
制御部１０は、前記各部１１〜１３，２０〜２２，２５，２６，２９，３１〜３３，４０に接続されており、主記憶部１１に記憶されている制御プログラムに従って、画像表示装置１の動作を統括制御する。主記憶部１１は、ＲＡＭ（Random Access Memory）等のメモリによって構成され、前記制御プログラムが記憶されるとともに、キャプチャした画像データの一時記憶等に用いられる。
【００２０】
入力操作部１２及びリモコンＲＣは、本発明における操作部に相当するものであり、電源のオン・オフや、チャンネルの選定、音量の調整、キャプチャの指示、メニュー画面での選択動作等を行うためのスイッチ等を備えている。ユーザが入力操作部１２を操作すると、入力操作部１２は、ユーザの操作内容に応じた操作信号を制御部１０に出力する。また、ユーザがリモコンＲＣを操作すると、リモコンＲＣは、ユーザの操作内容に応じた赤外線の操作信号を発し、リモコン信号受信部１３がこれを受信して制御部１０に伝達する。
【００２１】
画像表示装置１には、外部にアンテナＡＮが接続されており、テレビ放送電波を受信可能になっている。受信したテレビ放送電波は、受信信号としてチューナ部２０に入力する。チューナ部２０は、受信信号から、入力操作部１２やリモコンＲＣによって選局された放送チャンネルの放送信号を取り出して、画像復調部２１、音声復調部２５、及び文字情報復調部２９に分配する。
【００２２】
画像復調部２１は、入力した放送信号から画像信号を復調し、これを画像処理部２２に出力する。音声復調部２５は、入力した放送信号から音声信号を復調し、これを音声処理部２６に出力する。文字情報復調部２９は、受信した放送信号に多重されているデータ放送や文字放送に含まれる文字情報（文字コードからなる文字データ）を復調し、これを画像処理部２２及び文字照合部３２に出力可能になっている。
【００２３】
画像処理部２２は、画像復調部２１から入力したアナログの画像信号をデジタルの画像データに変換し、少なくとも１フレーム（１画面）分の画像データを記憶可能な表示メモリ２３に記憶する。表示メモリ２３に記憶された画像データは、プロジェクタや液晶表示装置等からなる表示部２４に出力されて、表示部２４にテレビ画像が表示される。
【００２４】
また、ユーザが入力操作部１２又はリモコンＲＣを操作して文字放送等の表示を要求すると、画像処理部２２は、文字情報復調部２９から文字情報を入力し、これを画像データに変換するとともに、変換した画像データをテレビ画像に合成して表示部２４に表示する。
【００２５】
さらに、ユーザが入力操作部１２又はリモコンＲＣを操作して表示部２４に表示中のテレビ画像のキャプチャを要求すると、画像処理部２２は、表示メモリ２３に記憶されている１フレーム分の画像データをキャプチャ画像データとして制御部１０に出力する。また、主記憶部１１やデータ記憶部４０に記憶されているキャプチャ画像やメニュー画像等を制御部１０から入力して表示部２４に表示させることが可能になっている。なお、本実施形態では、画像処理部２２と、制御プログラムを実行して画像キャプチャを行う制御部１０と、キャプチャ画像を一時記憶する主記憶部１１とが画像キャプチャ手段を構成する。
【００２６】
音声処理部２６は、音声復調部２５から入力した音声信号を増幅回路２７を介してスピーカ２８に出力することによりテレビ音声を再生する。
【００２７】
文字認識部３１は、制御部１０から画像データを受け取って、画像データに含まれる文字の抽出と認識とを行うことができるようになっている。文字の抽出と認識は、従来より知られている文字認識の技術を利用することができる。なお、本実施形態の文字認識部３１は、数字（０〜９）と、括弧やハイフン等の一部の記号とからなる文字列を認識可能になっており、認識した文字列を構成する文字の文字コードを制御部１０及び文字照合部３２に出力する。
【００２８】
文字照合部３２は、文字認識部３１から前記文字コードを入力するとともに、文字情報復調部２９から文字放送やデータ放送に含まれる文字情報を入力し、文字認識部３１で認識された文字列に類似した文字列を前記文字情報の中から検出可能になっており、検出結果を制御部１０に出力する。
【００２９】
情報検索部３３は、通信部５０を介してインターネットに接続可能になっており、文字認識部３１で認識された文字列に関連する情報を、インターネット上から検索可能になっている。本実施形態では、文字認識部３１で認識された文字列が電話番号又は郵便番号である場合に、これらの番号によって特定される地域への交通案内情報や当該地域周辺の地図を検索し、検索結果を制御部１０に出力する。
【００３０】
データ記憶部４０は、例えば、ＨＤＤ（Hard Disk Drive）等の記憶装置によって構成されており、キャプチャした画像データや情報検索部３３による検索結果等を記憶する。また、データ記憶部４０には、電話番号や郵便番号と、これらの番号によって特定される住所（地域名）やその最寄駅とを対応付けたデータベースが備えられている。
【００３１】
また、画像表示装置１には、外部記憶装置２やプリンタ３を接続するためのインタフェイス（図示せず）が備えられている。外部記憶装置２としては、例えば、ＨＤＤ等の記憶装置やカード型の記憶メディアが接続可能であり、キャプチャした画像データや検索結果等を記憶させることができる。プリンタ３を接続した場合には、キャプチャした画像や検索結果の印刷を行うことができる。
【００３２】
ここで、画像表示装置１の動作について、図面を参照して説明する。
図２は、本実施形態の画像表示装置１におけるキャプチャ時の動作を説明するフローチャートであり、図３〜図５は、キャプチャ動作時における表示部２４の画面表示を説明する説明図である。ユーザがテレビ放送を視聴中に、入力操作部１２又はリモコンＲＣによって画像のキャプチャを指示するための操作を行うと、制御部１０は、入力操作部１２又はリモコン信号受信部１３からの操作信号によって当該操作内容を認識し、図２に示すフローに従った動作を開始する。
【００３３】
図２に示すように、ステップＳ１０１では、制御部１０は、テレビ画像のキャプチャを行う。具体的には、画像処理部２２に指示をして、その時点で表示メモリ２３に記憶されている１フレーム分の画像データを読み出し、この画像データを主記憶部１１に一時的に記憶する。その後、ステップＳ１０２に移行する。
【００３４】
ステップＳ１０２では、制御部１０は、図３に示すように、表示部２４の画面２４ａ上に、リアルタイムのテレビ画像ＧＴＶと、処理内容の選択が可能なメニュー画像ＧＭＮとを表示してステップＳ１０３に移行する。メニュー画像ＧＭＮ内には、キャプチャ画像ＧＣＰが選択可能に縮小表示されており、ユーザが入力操作部１２又はリモコンＲＣを操作してキャプチャ画像ＧＣＰを選択すると、画面２４ａの全面にキャプチャ画像が拡大表示される。前述の「拡大表示」以外の処理項目としては、キャプチャ画像をデータ記憶部４０や外部記憶装置２に記憶させるための「保存」、キャプチャ画像をプリンタ３によって印刷させるための「印刷」、キャプチャ画像に含まれる電話番号や郵便番号から地域情報の検索を行う「地域情報検索」、処理を中止する「キャンセル」があり、ユーザは、前記処理項目のうち、いずれか１つを入力操作部１２又はリモコンＲＣによって選択することができる。
【００３５】
ステップＳ１０３では、制御部１０が、入力操作部１２又はリモコンＲＣからの操作信号によって、ユーザが選択した処理項目を判断する。なお、以降の説明では、ユーザが「地域情報検索」を選択した場合の処理のみを詳述し、他の項目を選択した場合の処理の説明は省略する。ユーザが「地域情報検索」を選択した場合には、ステップＳ１０４に移行し、それ以外の項目を選択した場合には、ステップＳ１１１に移行して項目に応じた処理を行う。
【００３６】
ステップＳ１０４に移行した場合には、キャプチャ画像に含まれる文字列の認識を行う。まず、制御部１０は、主記憶部１１に一時記憶されているキャプチャ画像データを読み出して文字認識部３１に出力する。文字認識部３１は、画像の中から数字と記号とからなる文字列の抽出、認識を行い、文字列に対応する文字コード列を生成する。さらに、文字認識部３１は、抽出した文字列の桁数、或いは括弧やハイフンの位置を考慮して、抽出した文字列が電話番号又は郵便番号であるか否かを判断するとともに、生成した文字コード列を制御部１０及び文字照合部３２に出力してステップＳ１０５に移行する。なお、図示は省略しているが、キャプチャ画像に電話番号及び郵便番号が含まれないと判断した場合には、その旨のメッセージを表示部２４に表示して処理を中止する。
【００３７】
ステップＳ１０５では、受信している文字放送やデータ放送の中に、視聴中のテレビ番組に関連する放送（字幕放送等）が存在する場合に、制御部１０が文字情報復調部２９に指示をして、当該放送に含まれる文字情報を文字照合部３２に出力させる。文字照合部３２は、文字情報復調部２９から入力した文字情報の中から、文字認識部３１で認識された電話番号又は郵便番号と同一又は類似の番号を検出（照合）する。ここで、類似の番号とは、文字認識部３１で認識された電話番号又は郵便番号と１〜２桁程度の数字が異なっている番号をいい、類似の番号が検出された場合には、文字認識部３１による認識結果が誤っている可能性が高いことを示す。文字照合部３２が同一番号や類似番号の有無、類似番号がある場合はその番号を制御部１０に出力した後、ステップＳ１０６に移行する。
【００３８】
ステップＳ１０６では、制御部１０は、文字認識部３１による認識結果と、文字照合部３２による照合結果とを表示部２４に表示する。具体的には、図４に示すように、認識結果として、認識した電話番号や郵便番号を表示するとともに、照合結果として、例えば、データ放送又は文字放送に同一の番号が存在すれば「◎」、同一番号及び類似番号が存在しなければ「△」を付し、類似番号が存在する場合には「×」とその番号とを表示する。照合結果を表す記号（◎、△、×）によって、ユーザは文字認識の妥当性を判断することができる。さらに、画面２４ａ中にメニューを表示して、認識した番号で地域情報の検索を実行する「検索」、及び認識した番号を修正（編集）する「番号修正」等の選択をユーザに促し、ステップＳ１０７に移行する。
【００３９】
ステップＳ１０７では、制御部１０は、ユーザが入力操作部１２又はリモコンＲＣによって前記メニューから「検索」を選択したか否かを判断し、「検索」を選択していればステップＳ１０８に移行し、「番号修正」を選択していれば、ステップＳ１０９に移行する。ステップＳ１０９に移行した場合には、ユーザがキャプチャ画像ＧＣＰ或いは類似番号を参照して番号を修正した後、ステップＳ１０７に戻る。
【００４０】
ステップＳ１０８に移行した場合には、制御部１０は、認識した番号、或いはユーザによって修正された番号を情報検索部３３に出力する。情報検索部３３は、データ記憶部４０に記憶されているデータベースを参照して、電話番号又は郵便番号から住所（地域名）やその最寄駅を特定し、これらの情報（電話番号、郵便番号、住所、最寄駅）のいずれか１つをインターネット上の地図検索サイトに送信して、当該地域の周辺地図を入手する。さらに、情報検索部３３は、ユーザの入力により予めデータ記憶部４０に記憶されている所定の駅（出発地）、及び前記最寄駅（目的地）の駅名をインターネット上の交通案内サイトに送信して、前記最寄駅までの交通案内情報を入手する。情報検索部３３が検索結果を制御部１０に出力した後、ステップＳ１１０に移行する。
【００４１】
ステップＳ１１０では、制御部１０は、画像処理部２２に指示をして、図５に示すように、情報検索部３３から入力した検索結果（交通案内情報ＧＰＴ及び地図ＧＭＰ）を表示部２４に表示して処理を終える。ここで、図示したように、検索結果を表示するとともに、検索結果の保存や印刷を選択可能なメニューを表示部２４に表示し、ユーザがこれらの項目を選択することによって、検索結果をデータ記憶部４０又は外部記憶装置２に保存したり、プリンタ３によって印刷したりできるようにしてもよい。なお、本実施形態では、交通案内情報ＧＰＴ及び地図ＧＭＰが、電話番号や郵便番号（文字列）に関連する関連情報に相当する。
【００４２】
以上説明したように、本実施形態の画像表示装置１によれば、以下の効果を得ることができる。
【００４３】
（１）本実施形態の画像表示装置１によれば、キャプチャした画像に含まれる電話番号や郵便番号（文字列）の認識を行う文字認識部３１と、認識された番号によって特定される地域への交通案内情報や地図（文字列の関連情報）を検索する情報検索部３３とを備えているため、関連情報を容易に取得することが可能となる。
【００４４】
（２）本実施形態の画像表示装置１によれば、情報検索部３３が通信部５０を介してインターネット上から関連情報を取得するため、種々の関連情報を容易に取得することが可能となる。さらに、画像表示装置１の内部にデータベースを備える必要がなく、画像表示装置１のコストを低減することが可能となるとともに、データベースの保守・管理が容易になる。
【００４５】
（３）本実施形態の画像表示装置１によれば、文字認識部３１で認識した文字列を、文字放送やデータ放送に含まれる文字情報と照合するため、文字認識部３１の認識ミスを容易に検知することが可能となる。
【００４６】
（変形例）
なお、本発明の実施形態は、以下のように変更してもよい。
・前記実施形態では、インターネット上のサイトを利用して地図や交通案内情報を入手しているが、ＬＡＮ（Local Area Network）等、より小規模なネットワーク上、或いはデータ記憶部４０上に地図や交通案内情報を取得可能なデータベースを備えるようにしてもよい。
【００４７】
・前記実施形態では、電話番号や郵便番号から住所（地域名）や最寄駅を特定する際に、データ記憶部４０上のデータベースを参照しているが、インターネットやＬＡＮ等のネットワークを通じて入手するようにしてもよい。なお、電話番号や郵便番号から地図や交通案内情報を提供可能なＷｅｂサイト等があれば、住所や最寄駅を特定する必要はない。
【００４８】
・前記実施形態では、画面に表示された電話番号や郵便番号に基づいて地域情報を検索するものであるが、本発明の適用形態は前記に限られず、例えば、音楽番組等で画面に表示されたアーティスト名や楽曲名を認識し、当該アーティストの最新情報や、当該楽曲に関する情報（発売日や歌詞等）を検索するようにしてもよい。
【００４９】
・前記実施形態では、文字照合部３２による照合結果を表示部２４の画面２４ａに表示し、ユーザが認識文字を修正する際に参照できるようにしているが、照合結果に基づいて文字照合部３２が認識文字の修正を行うようにしてもよい。
【００５０】
・前記実施形態では、電話番号や郵便番号を認識して、所定の地域情報（交通案内情報や地図）を表示するようにしているが、画像表示装置１の内部、又はネットワーク上に備えられた電話帳データベースを参照して店舗等の名称を特定し、表示するようにしてもよい。
【００５１】
・前記実施形態において、検索結果をデータ記憶部４０又は外部記憶装置２に保存する際に、検索結果とキャプチャ画像とを関連付けたデータベースとして保存するとともに、後で当該データベースから１つの検索結果を選択して表示する際に、各キャプチャ画像の縮小画像を参照しながら選択できるようにすれば、複数の検索結果から所望の１つを特定するのが容易になる。
【図面の簡単な説明】
【００５２】
【図１】実施形態の画像表示装置の概略構成を示すブロック図。
【図２】画像表示装置におけるキャプチャ時の動作を説明するフローチャート。
【図３】キャプチャ動作時における表示部の画面表示を説明する説明図。
【図４】キャプチャ動作時における表示部の画面表示を説明する説明図。
【図５】キャプチャ動作時における表示部の画面表示を説明する説明図。
【符号の説明】
【００５３】
１…画像表示装置、２…外部記憶装置、３…プリンタ、１０…制御部、１１…主記憶部、１２…入力操作部、１３…リモコン信号受信部、２０…チューナ部、２１…画像復調部、２２…画像処理部、２３…表示メモリ、２４…表示部、２４ａ…画面、２５…音声復調部、２６…音声処理部、２７…増幅回路、２８…スピーカ、２９…文字情報復調部、３１…文字認識部、３２…文字照合部、３３…情報検索部、４０…データ記憶部、５０…通信部、ＡＮ…アンテナ、ＲＣ…リモコン。
【技術分野】
【０００１】
本発明は、テレビ放送等に含まれる画像をキャプチャ可能な画像表示装置に関する。
【背景技術】
【０００２】
特許文献１に示すように、放送中のテレビ映像から、任意の時点の画面を静止画像として取得（キャプチャ）して保存可能なシステムが提案されている。このシステムによれば、必要な情報が画面に表示された瞬間にキャプチャを実行しておくことにより、後でキャプチャした画像を表示させるだけで当該情報を瞬時に取得することが可能となる。
【０００３】
【特許文献１】特開２０００−３４１６３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、取得した前記情報に関連する情報をさらに取得する必要がある場合には、前記情報を基に文献を調べたり、インターネットの検索サイト等で前記情報をキーワードとして手入力したりする必要があった。例えば、テレビ映像の中に店舗等の所在地を特定可能な文字列（住所、電話番号、郵便番号等）が表示され、この表示画像をキャプチャしたとしても、当該店舗への交通案内情報や周辺地図を取得するためには、インターネット上の交通案内サイトや地図検索サイトにアクセスし、前記文字列等を入力しなければならなかった。
【０００５】
本発明は上記問題を鑑みてなされたものであり、その目的は、キャプチャした画像に含まれる文字列を認識するとともに、当該文字列に関連する関連情報を容易に取得可能な画像表示装置を提供することにある。
【課題を解決するための手段】
【０００６】
本発明の画像表示装置は、テレビ放送電波を受信可能なアンテナから受信信号を順次入力し、前記受信信号から特定のチャンネルの放送信号を選局して出力するチューナ部と、前記放送信号から画像信号を復調する画像復調部と、前記画像信号に基づいた画像データを生成する画像処理部と、入力操作に応じた操作信号を出力する操作部と、前記操作部からの操作信号に基づいて、前記画像処理部から１フレーム分の画像データを取得する画像キャプチャ手段と、前記画像キャプチャ手段によって取得した画像データに基づいて、画像に含まれる文字列を認識し、当該文字列に応じた文字情報を生成する文字認識部と、前記文字認識部によって生成された文字情報に基づいて、前記文字列に関連する関連情報を検索可能な情報検索部とを備えたことを特徴とする。
【０００７】
この画像表示装置によれば、キャプチャした画像に含まれる文字列の認識を行うとともに、当該文字列に関連する関連情報を検索可能であるため、関連情報を容易に取得することが可能となる。
【０００８】
この画像表示装置において、前記文字情報と前記関連情報とを関連付けて記憶するデータベースを備え、前記情報検索部は、前記データベースから関連情報を検索するようにしてもよい。
【０００９】
この画像表示装置において、ネットワークに接続された通信部を備え、前記情報検索部は、前記通信部を介して前記ネットワーク上から関連情報を検索することが望ましい。
【００１０】
この画像表示装置によれば、情報検索部が通信部を介してネットワーク上から関連情報を検索可能であるため、画像表示装置の内部にデータベースを備える必要がなく、画像表示装置のコストを低減することが可能となるとともに、データベースの保守・管理が容易になる。
【００１１】
この画像表示装置において、前記ネットワークはインターネットを含むことが望ましい。
【００１２】
この画像表示装置によれば、通信部を介してインターネット上から関連情報を取得することが可能となるため、種々の関連情報を容易に取得することが可能となるとともに、データベースの保守・管理がさらに容易になる。
【００１３】
この画像表示装置において、前記文字認識部によって認識された文字列を照合可能な文字照合部を備えることが望ましい。
【００１４】
この画像表示装置によれば、文字認識部によって認識された文字列を照合可能な文字照合部を備えているため、認識ミスの検知や修正を行うことが可能となる。
【００１５】
この画像表示装置において、前記放送信号に多重された文字情報を復調可能な文字情報復調部を備え、前記文字照合部は、前記文字認識部によって認識された文字列を、前記文字情報復調部によって復調された文字情報と照合することが望ましい。
【００１６】
この画像表示装置によれば、文字認識部で認識した文字列を、文字放送やデータ放送に含まれる文字情報と照合するため、文字認識部の認識ミスを容易に検知することが可能となる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明の実施形態に係る画像表示装置について、図面を参照して説明する。本実施形態の画像表示装置は、テレビ放送電波を受信して、テレビ放送に含まれる画像（以下、「テレビ画像」という。）の表示を行うテレビジョン装置に、静止画像の取得を行うキャプチャ機能を備えたものであり、さらに、取得した静止画像に電話番号や郵便番号が含まれている場合に、当該地域への交通案内情報や地図等を表示する機能を備えたものである。また、この画像表示装置は、テレビ放送電波に多重されているデータ放送や文字放送を受信して表示することが可能となっている。
【００１８】
図１は、本実施形態の画像表示装置の概略構成を示すブロック図である。
図１に示すように、画像表示装置１は、制御部１０と、主記憶部１１と、入力操作部１２と、リモコンＲＣと、リモコン信号受信部１３と、チューナ部２０と、画像復調部２１と、画像処理部２２と、表示メモリ２３と、表示部２４と、音声復調部２５と、音声処理部２６と、増幅回路２７と、スピーカ２８と、文字情報復調部２９と、文字認識部３１と、文字照合部３２と、情報検索部３３と、データ記憶部４０と、通信部５０とを備えている。
【００１９】
制御部１０は、前記各部１１〜１３，２０〜２２，２５，２６，２９，３１〜３３，４０に接続されており、主記憶部１１に記憶されている制御プログラムに従って、画像表示装置１の動作を統括制御する。主記憶部１１は、ＲＡＭ（Random Access Memory）等のメモリによって構成され、前記制御プログラムが記憶されるとともに、キャプチャした画像データの一時記憶等に用いられる。
【００２０】
入力操作部１２及びリモコンＲＣは、本発明における操作部に相当するものであり、電源のオン・オフや、チャンネルの選定、音量の調整、キャプチャの指示、メニュー画面での選択動作等を行うためのスイッチ等を備えている。ユーザが入力操作部１２を操作すると、入力操作部１２は、ユーザの操作内容に応じた操作信号を制御部１０に出力する。また、ユーザがリモコンＲＣを操作すると、リモコンＲＣは、ユーザの操作内容に応じた赤外線の操作信号を発し、リモコン信号受信部１３がこれを受信して制御部１０に伝達する。
【００２１】
画像表示装置１には、外部にアンテナＡＮが接続されており、テレビ放送電波を受信可能になっている。受信したテレビ放送電波は、受信信号としてチューナ部２０に入力する。チューナ部２０は、受信信号から、入力操作部１２やリモコンＲＣによって選局された放送チャンネルの放送信号を取り出して、画像復調部２１、音声復調部２５、及び文字情報復調部２９に分配する。
【００２２】
画像復調部２１は、入力した放送信号から画像信号を復調し、これを画像処理部２２に出力する。音声復調部２５は、入力した放送信号から音声信号を復調し、これを音声処理部２６に出力する。文字情報復調部２９は、受信した放送信号に多重されているデータ放送や文字放送に含まれる文字情報（文字コードからなる文字データ）を復調し、これを画像処理部２２及び文字照合部３２に出力可能になっている。
【００２３】
画像処理部２２は、画像復調部２１から入力したアナログの画像信号をデジタルの画像データに変換し、少なくとも１フレーム（１画面）分の画像データを記憶可能な表示メモリ２３に記憶する。表示メモリ２３に記憶された画像データは、プロジェクタや液晶表示装置等からなる表示部２４に出力されて、表示部２４にテレビ画像が表示される。
【００２４】
また、ユーザが入力操作部１２又はリモコンＲＣを操作して文字放送等の表示を要求すると、画像処理部２２は、文字情報復調部２９から文字情報を入力し、これを画像データに変換するとともに、変換した画像データをテレビ画像に合成して表示部２４に表示する。
【００２５】
さらに、ユーザが入力操作部１２又はリモコンＲＣを操作して表示部２４に表示中のテレビ画像のキャプチャを要求すると、画像処理部２２は、表示メモリ２３に記憶されている１フレーム分の画像データをキャプチャ画像データとして制御部１０に出力する。また、主記憶部１１やデータ記憶部４０に記憶されているキャプチャ画像やメニュー画像等を制御部１０から入力して表示部２４に表示させることが可能になっている。なお、本実施形態では、画像処理部２２と、制御プログラムを実行して画像キャプチャを行う制御部１０と、キャプチャ画像を一時記憶する主記憶部１１とが画像キャプチャ手段を構成する。
【００２６】
音声処理部２６は、音声復調部２５から入力した音声信号を増幅回路２７を介してスピーカ２８に出力することによりテレビ音声を再生する。
【００２７】
文字認識部３１は、制御部１０から画像データを受け取って、画像データに含まれる文字の抽出と認識とを行うことができるようになっている。文字の抽出と認識は、従来より知られている文字認識の技術を利用することができる。なお、本実施形態の文字認識部３１は、数字（０〜９）と、括弧やハイフン等の一部の記号とからなる文字列を認識可能になっており、認識した文字列を構成する文字の文字コードを制御部１０及び文字照合部３２に出力する。
【００２８】
文字照合部３２は、文字認識部３１から前記文字コードを入力するとともに、文字情報復調部２９から文字放送やデータ放送に含まれる文字情報を入力し、文字認識部３１で認識された文字列に類似した文字列を前記文字情報の中から検出可能になっており、検出結果を制御部１０に出力する。
【００２９】
情報検索部３３は、通信部５０を介してインターネットに接続可能になっており、文字認識部３１で認識された文字列に関連する情報を、インターネット上から検索可能になっている。本実施形態では、文字認識部３１で認識された文字列が電話番号又は郵便番号である場合に、これらの番号によって特定される地域への交通案内情報や当該地域周辺の地図を検索し、検索結果を制御部１０に出力する。
【００３０】
データ記憶部４０は、例えば、ＨＤＤ（Hard Disk Drive）等の記憶装置によって構成されており、キャプチャした画像データや情報検索部３３による検索結果等を記憶する。また、データ記憶部４０には、電話番号や郵便番号と、これらの番号によって特定される住所（地域名）やその最寄駅とを対応付けたデータベースが備えられている。
【００３１】
また、画像表示装置１には、外部記憶装置２やプリンタ３を接続するためのインタフェイス（図示せず）が備えられている。外部記憶装置２としては、例えば、ＨＤＤ等の記憶装置やカード型の記憶メディアが接続可能であり、キャプチャした画像データや検索結果等を記憶させることができる。プリンタ３を接続した場合には、キャプチャした画像や検索結果の印刷を行うことができる。
【００３２】
ここで、画像表示装置１の動作について、図面を参照して説明する。
図２は、本実施形態の画像表示装置１におけるキャプチャ時の動作を説明するフローチャートであり、図３〜図５は、キャプチャ動作時における表示部２４の画面表示を説明する説明図である。ユーザがテレビ放送を視聴中に、入力操作部１２又はリモコンＲＣによって画像のキャプチャを指示するための操作を行うと、制御部１０は、入力操作部１２又はリモコン信号受信部１３からの操作信号によって当該操作内容を認識し、図２に示すフローに従った動作を開始する。
【００３３】
図２に示すように、ステップＳ１０１では、制御部１０は、テレビ画像のキャプチャを行う。具体的には、画像処理部２２に指示をして、その時点で表示メモリ２３に記憶されている１フレーム分の画像データを読み出し、この画像データを主記憶部１１に一時的に記憶する。その後、ステップＳ１０２に移行する。
【００３４】
ステップＳ１０２では、制御部１０は、図３に示すように、表示部２４の画面２４ａ上に、リアルタイムのテレビ画像ＧＴＶと、処理内容の選択が可能なメニュー画像ＧＭＮとを表示してステップＳ１０３に移行する。メニュー画像ＧＭＮ内には、キャプチャ画像ＧＣＰが選択可能に縮小表示されており、ユーザが入力操作部１２又はリモコンＲＣを操作してキャプチャ画像ＧＣＰを選択すると、画面２４ａの全面にキャプチャ画像が拡大表示される。前述の「拡大表示」以外の処理項目としては、キャプチャ画像をデータ記憶部４０や外部記憶装置２に記憶させるための「保存」、キャプチャ画像をプリンタ３によって印刷させるための「印刷」、キャプチャ画像に含まれる電話番号や郵便番号から地域情報の検索を行う「地域情報検索」、処理を中止する「キャンセル」があり、ユーザは、前記処理項目のうち、いずれか１つを入力操作部１２又はリモコンＲＣによって選択することができる。
【００３５】
ステップＳ１０３では、制御部１０が、入力操作部１２又はリモコンＲＣからの操作信号によって、ユーザが選択した処理項目を判断する。なお、以降の説明では、ユーザが「地域情報検索」を選択した場合の処理のみを詳述し、他の項目を選択した場合の処理の説明は省略する。ユーザが「地域情報検索」を選択した場合には、ステップＳ１０４に移行し、それ以外の項目を選択した場合には、ステップＳ１１１に移行して項目に応じた処理を行う。
【００３６】
ステップＳ１０４に移行した場合には、キャプチャ画像に含まれる文字列の認識を行う。まず、制御部１０は、主記憶部１１に一時記憶されているキャプチャ画像データを読み出して文字認識部３１に出力する。文字認識部３１は、画像の中から数字と記号とからなる文字列の抽出、認識を行い、文字列に対応する文字コード列を生成する。さらに、文字認識部３１は、抽出した文字列の桁数、或いは括弧やハイフンの位置を考慮して、抽出した文字列が電話番号又は郵便番号であるか否かを判断するとともに、生成した文字コード列を制御部１０及び文字照合部３２に出力してステップＳ１０５に移行する。なお、図示は省略しているが、キャプチャ画像に電話番号及び郵便番号が含まれないと判断した場合には、その旨のメッセージを表示部２４に表示して処理を中止する。
【００３７】
ステップＳ１０５では、受信している文字放送やデータ放送の中に、視聴中のテレビ番組に関連する放送（字幕放送等）が存在する場合に、制御部１０が文字情報復調部２９に指示をして、当該放送に含まれる文字情報を文字照合部３２に出力させる。文字照合部３２は、文字情報復調部２９から入力した文字情報の中から、文字認識部３１で認識された電話番号又は郵便番号と同一又は類似の番号を検出（照合）する。ここで、類似の番号とは、文字認識部３１で認識された電話番号又は郵便番号と１〜２桁程度の数字が異なっている番号をいい、類似の番号が検出された場合には、文字認識部３１による認識結果が誤っている可能性が高いことを示す。文字照合部３２が同一番号や類似番号の有無、類似番号がある場合はその番号を制御部１０に出力した後、ステップＳ１０６に移行する。
【００３８】
ステップＳ１０６では、制御部１０は、文字認識部３１による認識結果と、文字照合部３２による照合結果とを表示部２４に表示する。具体的には、図４に示すように、認識結果として、認識した電話番号や郵便番号を表示するとともに、照合結果として、例えば、データ放送又は文字放送に同一の番号が存在すれば「◎」、同一番号及び類似番号が存在しなければ「△」を付し、類似番号が存在する場合には「×」とその番号とを表示する。照合結果を表す記号（◎、△、×）によって、ユーザは文字認識の妥当性を判断することができる。さらに、画面２４ａ中にメニューを表示して、認識した番号で地域情報の検索を実行する「検索」、及び認識した番号を修正（編集）する「番号修正」等の選択をユーザに促し、ステップＳ１０７に移行する。
【００３９】
ステップＳ１０７では、制御部１０は、ユーザが入力操作部１２又はリモコンＲＣによって前記メニューから「検索」を選択したか否かを判断し、「検索」を選択していればステップＳ１０８に移行し、「番号修正」を選択していれば、ステップＳ１０９に移行する。ステップＳ１０９に移行した場合には、ユーザがキャプチャ画像ＧＣＰ或いは類似番号を参照して番号を修正した後、ステップＳ１０７に戻る。
【００４０】
ステップＳ１０８に移行した場合には、制御部１０は、認識した番号、或いはユーザによって修正された番号を情報検索部３３に出力する。情報検索部３３は、データ記憶部４０に記憶されているデータベースを参照して、電話番号又は郵便番号から住所（地域名）やその最寄駅を特定し、これらの情報（電話番号、郵便番号、住所、最寄駅）のいずれか１つをインターネット上の地図検索サイトに送信して、当該地域の周辺地図を入手する。さらに、情報検索部３３は、ユーザの入力により予めデータ記憶部４０に記憶されている所定の駅（出発地）、及び前記最寄駅（目的地）の駅名をインターネット上の交通案内サイトに送信して、前記最寄駅までの交通案内情報を入手する。情報検索部３３が検索結果を制御部１０に出力した後、ステップＳ１１０に移行する。
【００４１】
ステップＳ１１０では、制御部１０は、画像処理部２２に指示をして、図５に示すように、情報検索部３３から入力した検索結果（交通案内情報ＧＰＴ及び地図ＧＭＰ）を表示部２４に表示して処理を終える。ここで、図示したように、検索結果を表示するとともに、検索結果の保存や印刷を選択可能なメニューを表示部２４に表示し、ユーザがこれらの項目を選択することによって、検索結果をデータ記憶部４０又は外部記憶装置２に保存したり、プリンタ３によって印刷したりできるようにしてもよい。なお、本実施形態では、交通案内情報ＧＰＴ及び地図ＧＭＰが、電話番号や郵便番号（文字列）に関連する関連情報に相当する。
【００４２】
以上説明したように、本実施形態の画像表示装置１によれば、以下の効果を得ることができる。
【００４３】
（１）本実施形態の画像表示装置１によれば、キャプチャした画像に含まれる電話番号や郵便番号（文字列）の認識を行う文字認識部３１と、認識された番号によって特定される地域への交通案内情報や地図（文字列の関連情報）を検索する情報検索部３３とを備えているため、関連情報を容易に取得することが可能となる。
【００４４】
（２）本実施形態の画像表示装置１によれば、情報検索部３３が通信部５０を介してインターネット上から関連情報を取得するため、種々の関連情報を容易に取得することが可能となる。さらに、画像表示装置１の内部にデータベースを備える必要がなく、画像表示装置１のコストを低減することが可能となるとともに、データベースの保守・管理が容易になる。
【００４５】
（３）本実施形態の画像表示装置１によれば、文字認識部３１で認識した文字列を、文字放送やデータ放送に含まれる文字情報と照合するため、文字認識部３１の認識ミスを容易に検知することが可能となる。
【００４６】
（変形例）
なお、本発明の実施形態は、以下のように変更してもよい。
・前記実施形態では、インターネット上のサイトを利用して地図や交通案内情報を入手しているが、ＬＡＮ（Local Area Network）等、より小規模なネットワーク上、或いはデータ記憶部４０上に地図や交通案内情報を取得可能なデータベースを備えるようにしてもよい。
【００４７】
・前記実施形態では、電話番号や郵便番号から住所（地域名）や最寄駅を特定する際に、データ記憶部４０上のデータベースを参照しているが、インターネットやＬＡＮ等のネットワークを通じて入手するようにしてもよい。なお、電話番号や郵便番号から地図や交通案内情報を提供可能なＷｅｂサイト等があれば、住所や最寄駅を特定する必要はない。
【００４８】
・前記実施形態では、画面に表示された電話番号や郵便番号に基づいて地域情報を検索するものであるが、本発明の適用形態は前記に限られず、例えば、音楽番組等で画面に表示されたアーティスト名や楽曲名を認識し、当該アーティストの最新情報や、当該楽曲に関する情報（発売日や歌詞等）を検索するようにしてもよい。
【００４９】
・前記実施形態では、文字照合部３２による照合結果を表示部２４の画面２４ａに表示し、ユーザが認識文字を修正する際に参照できるようにしているが、照合結果に基づいて文字照合部３２が認識文字の修正を行うようにしてもよい。
【００５０】
・前記実施形態では、電話番号や郵便番号を認識して、所定の地域情報（交通案内情報や地図）を表示するようにしているが、画像表示装置１の内部、又はネットワーク上に備えられた電話帳データベースを参照して店舗等の名称を特定し、表示するようにしてもよい。
【００５１】
・前記実施形態において、検索結果をデータ記憶部４０又は外部記憶装置２に保存する際に、検索結果とキャプチャ画像とを関連付けたデータベースとして保存するとともに、後で当該データベースから１つの検索結果を選択して表示する際に、各キャプチャ画像の縮小画像を参照しながら選択できるようにすれば、複数の検索結果から所望の１つを特定するのが容易になる。
【図面の簡単な説明】
【００５２】
【図１】実施形態の画像表示装置の概略構成を示すブロック図。
【図２】画像表示装置におけるキャプチャ時の動作を説明するフローチャート。
【図３】キャプチャ動作時における表示部の画面表示を説明する説明図。
【図４】キャプチャ動作時における表示部の画面表示を説明する説明図。
【図５】キャプチャ動作時における表示部の画面表示を説明する説明図。
【符号の説明】
【００５３】
１…画像表示装置、２…外部記憶装置、３…プリンタ、１０…制御部、１１…主記憶部、１２…入力操作部、１３…リモコン信号受信部、２０…チューナ部、２１…画像復調部、２２…画像処理部、２３…表示メモリ、２４…表示部、２４ａ…画面、２５…音声復調部、２６…音声処理部、２７…増幅回路、２８…スピーカ、２９…文字情報復調部、３１…文字認識部、３２…文字照合部、３３…情報検索部、４０…データ記憶部、５０…通信部、ＡＮ…アンテナ、ＲＣ…リモコン。
【特許請求の範囲】
【請求項１】
テレビ放送電波を受信可能なアンテナから受信信号を順次入力し、前記受信信号から特定のチャンネルの放送信号を選局して出力するチューナ部と、
前記放送信号から画像信号を復調する画像復調部と、
前記画像信号に基づいた画像データを生成する画像処理部と、
入力操作に応じた操作信号を出力する操作部と、
前記操作部からの操作信号に基づいて、前記画像処理部から１フレーム分の画像データを取得する画像キャプチャ手段と、
前記画像キャプチャ手段によって取得した画像データに基づいて、画像に含まれる文字列を認識し、当該文字列に応じた文字情報を生成する文字認識部と、
前記文字認識部によって生成された文字情報に基づいて、前記文字列に関連する関連情報を検索可能な情報検索部と、
を備えたことを特徴とする画像表示装置。
【請求項２】
請求項１に記載の画像表示装置であって、前記文字情報と前記関連情報とを関連付けて記憶するデータベースを備え、前記情報検索部は、前記データベースから関連情報を検索することを特徴とする画像表示装置。
【請求項３】
請求項１に記載の画像表示装置であって、ネットワークに接続された通信部を備え、前記情報検索部は、前記通信部を介して前記ネットワーク上から関連情報を検索することを特徴とする画像表示装置。
【請求項４】
請求項３に記載の画像表示装置であって、前記ネットワークはインターネットを含むことを特徴とする画像表示装置。
【請求項５】
請求項１〜４のいずれか１項に記載の画像表示装置であって、前記文字認識部によって認識された文字列を照合可能な文字照合部を備えたことを特徴とする画像表示装置。
【請求項６】
請求項５に記載の画像表示装置であって、前記放送信号に多重された文字情報を復調可能な文字情報復調部を備え、前記文字照合部は、前記文字認識部によって認識された文字列を、前記文字情報復調部によって復調された文字情報と照合することを特徴とする画像表示装置。
【請求項１】
テレビ放送電波を受信可能なアンテナから受信信号を順次入力し、前記受信信号から特定のチャンネルの放送信号を選局して出力するチューナ部と、
前記放送信号から画像信号を復調する画像復調部と、
前記画像信号に基づいた画像データを生成する画像処理部と、
入力操作に応じた操作信号を出力する操作部と、
前記操作部からの操作信号に基づいて、前記画像処理部から１フレーム分の画像データを取得する画像キャプチャ手段と、
前記画像キャプチャ手段によって取得した画像データに基づいて、画像に含まれる文字列を認識し、当該文字列に応じた文字情報を生成する文字認識部と、
前記文字認識部によって生成された文字情報に基づいて、前記文字列に関連する関連情報を検索可能な情報検索部と、
を備えたことを特徴とする画像表示装置。
【請求項２】
請求項１に記載の画像表示装置であって、前記文字情報と前記関連情報とを関連付けて記憶するデータベースを備え、前記情報検索部は、前記データベースから関連情報を検索することを特徴とする画像表示装置。
【請求項３】
請求項１に記載の画像表示装置であって、ネットワークに接続された通信部を備え、前記情報検索部は、前記通信部を介して前記ネットワーク上から関連情報を検索することを特徴とする画像表示装置。
【請求項４】
請求項３に記載の画像表示装置であって、前記ネットワークはインターネットを含むことを特徴とする画像表示装置。
【請求項５】
請求項１〜４のいずれか１項に記載の画像表示装置であって、前記文字認識部によって認識された文字列を照合可能な文字照合部を備えたことを特徴とする画像表示装置。
【請求項６】
請求項５に記載の画像表示装置であって、前記放送信号に多重された文字情報を復調可能な文字情報復調部を備え、前記文字照合部は、前記文字認識部によって認識された文字列を、前記文字情報復調部によって復調された文字情報と照合することを特徴とする画像表示装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２００６−１９１４１３（Ｐ２００６−１９１４１３Ａ）
【公開日】平成１８年７月２０日（２００６．７．２０）
【国際特許分類】
【出願番号】特願２００５−２１０９（Ｐ２００５−２１０９）
【出願日】平成１７年１月７日（２００５．１．７）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成１８年７月２０日（２００６．７．２０）
【国際特許分類】
【出願日】平成１７年１月７日（２００５．１．７）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]