情報処理装置、情報処理方法およびプログラム
【課題】 映像から文字列などの検索対象情報を抽出して所望の検索対象情報を検索するという一連の処理の負荷を低減し、視聴を妨げずに検索対象情報の検出結果を取得することができる情報処理装置、情報処理方法およびプログラムを提供する。
【解決手段】 テレビジョン装置３、携帯端末４、ルータ５、検索サーバ６および映像メモ用サーバ７を含み、テレビジョン装置３の画面を視聴している状態で、気になる情報が表示されたとき、リモコン装置２４のメモボタン２５を押すと、そのときの映像のスナップショット画像、すなわち静止画が画面に表示され、静止画から文字認識で１または複数の文字列などの検索対象情報を抽出する。リモコン装置２４の決定ボタン２６を操作すると、キーワードを選択するとブラウザ画面が立ち上がり、抽出した検索対象情報の中から選択したキーワードを、視聴画面を中断せずに、検索エンジンによって検索し、その検索結果を取得する。
【解決手段】 テレビジョン装置３、携帯端末４、ルータ５、検索サーバ６および映像メモ用サーバ７を含み、テレビジョン装置３の画面を視聴している状態で、気になる情報が表示されたとき、リモコン装置２４のメモボタン２５を押すと、そのときの映像のスナップショット画像、すなわち静止画が画面に表示され、静止画から文字認識で１または複数の文字列などの検索対象情報を抽出する。リモコン装置２４の決定ボタン２６を操作すると、キーワードを選択するとブラウザ画面が立ち上がり、抽出した検索対象情報の中から選択したキーワードを、視聴画面を中断せずに、検索エンジンによって検索し、その検索結果を取得する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビジョン放送の映像から所望のキーワードおよびＵＲＬ（Uniform
Resource Locator）などの文字列などの検索対象情報を抽出し、その検索対象情報をインターネットなどの情報通信網から検索して、検索対象情報に関連する情報を取得することができる情報処理装置、情報処理方法およびプログラムに関する。
【背景技術】
【０００２】
近年、テレビジョン放送において、利用者（以下、「視聴者」ともいう）が、視聴中の放送番組に関連したウェブサイト上の特定ホームページを閲覧することができるように、番組映像や文字放送内で、そのホームページのインターネット上のＵＲＬ（Uniform
Resource Locator）などのアドレス情報の紹介が行われている。
【０００３】
しかし、紹介されたアドレス情報に利用者がアクセスし、そのホームページを閲覧するためには、たとえば利用者が視聴中の映像からＵＲＬを筆記によってメモし、パーソナルコンピュータ等の通信端末装置を用いて、インターネット接続用のアプリケーションプログラムを起動し、そのＵＲＬを通信端末装置に入力するという煩雑な作業を行う必要がある。
【０００４】
このような課題に対して、利用者の作業を容易にするために、画面に表示されている映像に対して文字認識を行って、ＵＲＬや映像内で利用者に検索させるためのキーワードなどの文字列を検索対象情報として抽出し、その文字列を用いて自動的にホームページにアクセスできるテレビジョン装置や、文字列を検索システムに送信することができる技術が特許文献１〜３に示される。
【０００５】
特許文献１には、テレビジョン装置の画面上にＷＷＷ（World Wide Web）ブラウザを共同して表示し、ＷＷＷ検索エンジンによって所望のＷＷＷを表示可能な映像関係情報を検索するために、テレビジョン装置の画面に文字放送のテロップまたはフリップを検出し、文字を検出し、該認識結果とデータベースの類似語とからＷＷＷの検索キーワードを生成し、該キーワードのＷＷＷ検索エンジンに入力して検索させ、その検索結果を表示する技術が提案されている。
【０００６】
特許文献２には、映像内の文字列を含む画像データを自動的に記録し、記録した画像データを利用者に配信することができるようにするために、テレビジョン放送の映像から文字認識によって文字列を検索対象情報として検出し、検出した文字列から単語を検出し、検出した単語から所定の条件に従って、ネットワーク上の情報を検索するためのキーワードを決定し、そのキーワードをネットワーク上の情報を検索するための情報検索システムに送信して、そのシステムによる検索結果情報を取得し、その検索結果情報を表示部に表示させて、利用者に映像内の文字列を用いて情報検索システムにネットワーク上の検索結果情報を利用者に容易に提供する技術が提案されている。
【０００７】
特許文献３には、チューナ部から入力されるテレビジョン放送の映像信号や、外部信号受信部でＡＶ機器から読出されたＤＶＤ等の映像信号を映像出力処理部が取得し、画像データ取得部が映像出力処理部の映像信号から１フレーム分ずつ画像データを取得する。文字認識部は取得した画像データの文字認識処理のよって文字列を検索対象情報として抽出し、文字照合部は文字認識部が抽出した文字列と所定の照合キーとを照合して、文字列がその照合キーに相当するかを判断する。画像データ保存処理部は、照合キーに相当すると判断された文字列を含む画像データを画像データ記憶部に保存させ、通信部は画像データを、通信接続部を介してインターネット経由で携帯電話に電子メールで送信し、このようにしてこの従来技術では、所定の文字列を含む画像データを利用者に提供している。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特許第３５２４７４２号公報
【特許文献２】特開２０１０−３９６４７号公報
【特許文献３】特開２００９−１９４４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
特許文献１〜３に示される各従来技術では、テレビジョン装置の画面に表示された文字を検出し、その文字をキーワードとして検索し、ブラウザとテレビジョン装置を同時表示するが、文字の検出タイミングについては指定するように構成されていないため、利用者の意図しないときに検索が開始されてしまう場合があり、視聴の妨げになる場合が生じるという問題がある。また、常に文字認識を行うので、処理の負荷が高くなってしまうという問題がある。さらに、映像で紹介されたＵＲＬやキーワードをつかって、関連するホームページに接続するためには、一旦それらをメモして、ブラウザを起動してから入力しなければならず、検索作業に手間を要するという問題がある。
【００１０】
本発明の目的は、映像から文字列などの検索対象情報を抽出して所望の検索対象情報を検索するという一連の処理の負荷を低減し、視聴を妨げずに検索対象情報の検索結果情報を取得することができる情報処理装置、情報処理方法およびプログラムを提供することである。
【課題を解決するための手段】
【００１１】
本発明は、テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部と、
表示部に表示される映像から静止画を抽出する静止画抽出部と、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部と、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部と、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部と、
情報検索部によって検索されて抽出された情報を受信する受信部と、
受信部によって受信された情報を表示部に表示させる表示制御部とを含むことを特徴とする情報処理装置である。
【００１２】
また本発明は、検索対象情報抽出部に接続され、表示部に表示される映像から静止画を抽出させる静止画抽出指令手段を含むことを特徴とする。
【００１３】
さらに本発明は、検索対象情報抽出部に接続され、抽出した静止画から検索対象情報を抽出させる検索対象情報抽出指令手段を含むことを特徴とする。
【００１４】
さらに本発明は、静止画抽出部に接続され、静止画抽出部によって抽出された静止画を記憶するサーバを含み、
検索対象情報抽出部は、前記サーバに記憶される静止画から検索対象情報を抽出することを特徴とする。
【００１５】
さらに本発明は、検索対象情報抽出部は、前記サーバに記憶される静止画を表示可能であることを特徴とする。
【００１６】
さらに本発明は、静止画抽出指令手段および検索対象情報抽出指令手段が、通信ネットワークに接続可能な携帯端末装置であることを特徴とする。
【００１７】
さらに本発明は、前記検索対象情報が、文字列であることを特徴とする。
さらに本発明は、前記検索対象情報が、画像情報であることを特徴とする。
【００１８】
さらに本発明は、コンピュータを、
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部、
表示部に表示される映像から静止画を抽出する静止画抽出部、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部、
情報検索部によって検出されて抽出された情報を受信する受信部、および
受信部によって受信された情報を表示部に表示させる表示制御部として機能させるコンピュータ読取り可能なプログラムである。
【００１９】
さらに本発明は、テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示手段に表示させる映像表示工程と、
表示手段に表示される映像から静止画を静止画抽出手段によって抽出する静止画抽出工程と、
通信ネットワークに接続される情報検索手段によって、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索工程と、
静止画抽出手段によって抽出された静止画から検索対象情報を検索対象情報抽出手段によって抽出する検索対象情報抽出工程と、
抽出手段によって抽出した検索対象情報を情報検索手段に送信する送信工程と、
受信手段によって、情報検索手段によって検索されて抽出された情報を受信する受信工程と、
受信手段によって受信された情報を表示制御手段によって表示手段に表示させる表示制御工程とを含むことを特徴とする情報処理方法である。
【発明の効果】
【００２０】
本発明によれば、必要な映像だけに対して検索対象情報の抽出処理を行うので、処理負荷が低い情報処理装置を提供することができる。また、利用者が必要とするときにブラウザを表示するので、テレビジョン装置の視聴の妨げになることを防止することができる。
【００２１】
また本発明によれば、検索対象情報抽出部に接続される静止画抽出指令手段によって、表示部に表示される映像から静止画を抽出させるので、表示部に映像を表示した状態で、視聴を妨げずに検索対象情報に関連する静止画を取得することができる。
【００２２】
さらに本発明によれば、検索対象情報抽出部に接続される検索対象情報抽出指令手段によって静止画から検索対象情報を抽出させるので、表示部に映像を表示した状態で、視聴を妨げずに検索対象情報を抽出することができる。
【００２３】
さらに本発明によれば、静止画抽出部に接続され、静止画抽出部によって抽出された静止画を記憶するサーバを含み、検索対象情報抽出部によって、前記サーバに記憶される静止画から検索対象情報を抽出するので、検索対象情報を抽出するための処理負荷を低減することができる。
【００２４】
さらに本発明によれば、検索対象情報抽出部がサーバに記憶される静止画を表示可能であるので、情報処理装置の処理負荷を低減することができる。
【００２５】
さらに本発明によれば、静止画抽出指令手段および検索対象情報抽出指令手段が通信ネットワークに接続可能な携帯端末装置であることによって、遠隔操作によっても検索対象情報から通信ネットワークを介して検索対象情報を検索することができるので、利便性を向上を図ることができる。
【００２６】
さらに本発明は、前記検索対象情報が文字列であるので、ＵＲＬなどの長い文字列であっても容易に検索して、その検索結果情報を得ることができる。
【００２７】
さらに本発明は、前記検索対象情報が、画像情報であるので、手入力が困難な写真などの画像であっても容易に検索して、その検索結果情報を得ることができる。
【００２８】
さらに本発明によれば、コンピュータによってプログラムを実行することによって、受信したテレビジョン放送の映像信号の映像を表示部に表示させ、静止画抽出部に前記表示部に表示される映像から静止画を抽出させ、さらに抽出した静止画から検索対象情報抽出部によって、静止画から検索対象情報を抽出させ、送信部が検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信して、送信した検索対象情報を情報検索部に検索する。受信部は、情報検索部による検索結果情報を受信し、表示制御部は受信部によって受信された検索結果を表示部に表示させ、表示部に表示される映像の視聴を妨げずに、選択した検索対象情報の検索結果を取得することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の第１実施形態の情報処理装置１が適用される情報処理システム２の構成を示すブロック図である。
【図２】情報処理装置１の電気的構成を示すブロック図である。
【図３】本発明の第１実施形態の情報処理装置１によるテレビジョン装置３のリモコン装置２４を使って検索キーワードを検索して表示する処理手順を示すフローチャートである。
【図４】本発明の第２実施形態の情報処理装置１によるメモした映像に書かれているキーワードを映像と一組にして不揮発性メモリ２０に保存する処理手順を示すフローチャートである。
【図５】不揮発性メモリ２０に保存した映像の一覧から抽出したキーワードによって検索し、その検索結果を表示する処理手順を示すフローチャートである。
【図６】本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７に保存するテレビジョン装置３の処理手順を示すフローチャートである。
【図７】本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７で受信し、文字認識によって検索キーワードを抽出する処理手順を示すフローチャートである。
【図８】本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像の静止画に書かれているキーワードを使って携帯端末４上で検索するテレビジョン装置３の処理手順を示すフローチャートである。
【図９】本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像に書かれているキーワードを使って携帯端末４上で検索する映像メモ用サーバ７の処理手順を示すフローチャートである。
【図１０】本発明の第４実施形態の情報処理装置１によるテレビに接続した携帯端末上で映像に書かれているキーワードを使って検索する携帯端末４の処理手順を示すフローチャートである。
【図１１】本発明の第４実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４上で映像に書かれているキーワードを使って検索するテレビジョン装置３の処理手順を示すフローチャートである。
【図１２】本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索する携帯端末４の処理手順を示すフローチャートである。
【図１３】本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索するテレビジョン装置３の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００３０】
図１は本発明の第１実施形態の情報処理装置１が適用される情報処理システム２の構成を示すブロック図である。本実施形態の情報処理装置１は、本発明の情報処理方法が実施されるコンピュータプログラムを実行するハードウェア資源としての情報処理システム２を構築する。なお、本実施形態の情報処理装置１は、後述の第２〜第５実施形態のハードウェア資源として構成が共通であるため、第２〜第５実施形態においては、ハードウェア資源についての共通する構成の説明は省略し、主としてソフトウェア資源の構成について説明する。
【００３１】
情報処理システム２は、基本的に、テレビジョン装置３、携帯端末４、ルータ５、検索サーバ６および映像メモ用サーバ７を含み、情報処理装置１を実行することによって、テレビジョン装置３の画面を視聴している状態で、気になる情報が表示されたとき、リモコン装置２４が具備する複数のボタンの中から予め設定された所定ボタン、すなわち本実施形態ではメモボタン２５を押すと、そのときの映像のスナップショット画像、すなわち静止画が画面に表示され、次に映像の静止画から文字認識で１または複数の文字列を検索対象情報として抽出する。そしてリモコン装置２４のたとえば決定ボタン２６などによる操作で、検索キーワードを選択するとブラウザ画面が立ち上がり、抽出した文字列の中から選択したキーワードを、視聴画面を中断せずに、検索エンジンによって検索し、その検索結果を取得することができるように機能する。
【００３２】
テレビジョン装置３は、文字放送を含むテレビジョン放送の再生機能、映像記録機能およびネットワークに接続して通信することができるインターネット接続機能を有するテレビジョン受像機によって実現され、テレビジョン放送で利用される放送信号を使用したデータ送信機能と、受像機に内蔵された情報入力・通信機能を使って、視聴者がテレビジョン放送に対して何らかの働きかけを行うことができる双方向テレビを含む。
【００３３】
携帯端末４は、静止画抽出指令手段および検索対象情報抽出指令手段として機能し、無線ＬＡＮ（Local Area Network）などのネットワークに接続して通信することができる機能を有するＰＤＡ（Personal Digital Assistants）などの携帯端末機器によって実現される。
【００３４】
ルータ５は、イーサネット（Ethernet）（登録商標）または無線ＬＡＮのインターフェースを具備しており、家庭内の複数の機器をインターネットに個別に接続するために備えられる。検索サーバ６は、インターネット８上にあり、キーワードをインターネット８上で検索し、抽出した検索結果を提供することができる。このような検索サーバ６は、複数のサーバコンピュータに分散処理を行わせることによって、高速で大量の情報を処理することができるように構成されている。
【００３５】
本実施形態において「イーサネット」とは、米国電気電子学会（略称ＩＥＥＥ；
Institute of Electrical and Electronic Engineers）および国際標準化機構（略称ＩＯＳ；International Organization For Standardization）によって、標準化されたＬＡＮ（Local Area Network）をいう。また、「インターネット」とは、世界的規模で商用利用可能なＩＰネットワークを指すが、単に複数のネットワークを接続した小規模ネットワークを指す場合もある。このようなインターネットは、テレビジョン装置３、サーバ６，７、携帯端末４などの外部機器をそれぞれ双方向通信又は一方向通信可能に接続する、たとえばＮＧＮ（Next Generation Network）網、電話回線網、衛星通信網、同報通信路等の公衆回線網や、ＷＡＮ（Wide Area Network）、ＬＡＮ（Local Area Network）、ＩＰ‐ＶＰＮ（Internet Protocol-Virtual Private Network）などの専用回線網などの通信回線網で構成され、有線／無線を問わない。
【００３６】
映像メモ用サーバ７は、通信ネットワークを実現するインターネット８上にあり、利用者が取得した静止画である映像メモを保存するために用いられる。映像メモは、利用者ＩＤごとに管理され、利用者が所有する複数の端末装置間で共有することができる。このような映像メモ用サーバ７は、前述の検索サーバ６と同様に、複数のサーバコンピュータに分散処理を行わせることによって、高速で大量の情報を処理することができるように構成されている。
【００３７】
図２は情報処理装置１の電気的構成を示すブロック図である。テレビジョン装置３は、主制御部１０、メインメモリ１１、チューナ部１２、復調部１３、映像信号復号部１４、映像信号生成部１５、ビデオメモリ１６、表示制御部１７、表示部１８、通信部１９、不揮発性メモリ２０、バス２１、入力部２３、リモコン装置２４およびアンテナ２７を含んで構成される。
【００３８】
主制御部１０は、バス２１を介して接続された不揮発性メモリ２０に記憶されている前記プログラムによって、前述のメインメモリ１１、チューナ部１２、復調部１３、映像信号復号部１４、映像信号生成部１５、ビデオメモリ１６、表示制御部１７、表示部１８、通信部１９および不揮発性メモリ２０の各動作を制御するとともに、入力部２３を介してリモコン装置２４から入力される操作信号に応答して、前記メインメモリ１１、チューナ部１２、復調部１３、映像信号復号部１４、映像信号生成部１５、ビデオメモリ１６、表示制御部１７、表示部１８、通信部１９および不揮発性メモリ２０の動作を制御する。
【００３９】
このような主制御部１０は、表示部１１に表示される映像から静止画を抽出する静止画抽出部、通信ネットワークに接続され、通信ネットワーク上で情報を検索して抽出する情報検索部、静止画抽出部によって抽出された静止画から検索対象情報である文字列を抽出する検索対象情報抽出部としての文字列抽出部、文字列抽出部によって抽出した文字列を情報検索部に送信し、送信した文字列を情報検索部に検索させる送信部、および情報検索部による検索結果情報を受信する受信部を実現し、中央演算処理装置（Central
Processing Unit；略称ＣＰＵ）によって実現される。
【００４０】
主制御部１０はさらに、機能部としてキーワード決定部、検索サイト選択部およびブラウザ起動部を備える。キーワード決定部は、文字検出部が検出した単語について、所定の条件に従って、検索サイトにインターネット上の情報を検索させるためのキーワードとしての優先度を判断する。検索サイトにインターネット８上の情報を検索させるためのキーワードは、検索キーワードとも呼ぶ場合がある。所定の条件を満たす単語を、検索用キーワードとしての優先度が高い単語とみなし、それらの単語に対して他の単語よりも高い優先度を付けて抽出する。そして、キーワード決定部は、検出された単語の中から、優先度の最も高い単語を検索用キーワードとして決定し、テレビジョン放送の映像内から選ばれた文字列として可能性が高い単語を、テレビジョン装置３で用いる検索対象情報である検索キーワードとして決定することができる。
【００４１】
また、主制御部１０が有する機能部としての検索サイト選択部は、不揮発性メモリから予め登録されている検索サイトのＵＲＬ情報を呼び出し、そのＵＲＬ情報を用いて、利用する検索サイトを選択する。
【００４２】
ブラウザ起動部は、ＷＷＷブラウザを起動し、通信部を介して、選択した検索サイトにアクセスする。そして、ブラウザ起動部は、メインメモリ１１に記憶された検索キーワードを読み出し、通信部１９を介して、その検索キーワードを検索サイトに送信し、通信部１９を介して、その検索キーワードを用いて検索サイトの情報検索システムに検索させた結果のページ情報を取得する。そして、ブラウザ起動部は、取得した検索結果のページ情報を、ビデオメモリ１６に書き込んで一旦記憶させた後、ビデオメモリ１６から読み出して、表示制御部１７に入力する。表示制御部１７は、そのページ情報を画像信号に変換して、表示部１８に入力する。この結果、表示部１８から、取得した検索結果のページ画像が、ＷＷＷブラウザ画像として出力される。
【００４３】
このようにしてテレビジョン装置３は、テレビジョン放送の映像内の文字列から検索用キーワードを決定し、その検索用キーワードを用いてインターネット上の検索サイトに検索させた結果を取得して利用者に提供することができる。
【００４４】
また、ブラウザ起動部は、リモコン装置２４の操作を介して、利用者操作により、検索結果ページに検索結果として表示されているリンク先の中から利用者が希望するリンク先が選択されると、通信部１９を介して、そのリンク先のページにアクセスする。次に、ブラウザ起動部は、通信部１９を介して、アクセスしたページのページ情報を取得し、そのページ情報をビデオメモリ１６に書き込んで一旦記憶させた後、ビデオメモリ１６から読み出して、表示制御部１７に入力する。表示制御部１７は、そのページ情報を画像信号に変換して、表示部１８に入力する。この結果、表示部１８から、利用者が希望したリンク先のページ画像が、ＷＷＷブラウザ画像として出力される。
【００４５】
メインメモリ１１は、主制御部１０がプログラムを実行する上で必要とされる一時記憶領域および作業領域を提供するメモリであって、ＲＡＭ（Random Access Memory）によって実現される。
【００４６】
チューナ部１２は、アンテナ２３を介して受信した放送信号から任意のチャネルの放送信号を抽出し、復調部１３に出力する。復調部１３は、チューナ部１２から入力した放送信号を復調し、放送映像信号と放送音声信号と抽出する。放送映像信号は、映像信号復号部に入力され、音声信号は図示しない音声信号処理部に入力され、所定の音響処理が行われる。
【００４７】
映像信号復号部１４は、放送映像信号を復号し、生成された映像信号をビデオメモリ１６に逐次入力する。映像信号生成部１５は、信号生成部１５で動作するプログラムによって、文字および図形などを描画し、生成された映像信号をビデオメモリ１６に逐次入力する。ビデオメモリ１６は、映像信号生成部１５からの映像信号を一時保存するためのバッファメモリである。
【００４８】
表示制御部１７は、ビデオメモリ１６に一時保存された映像信号を加工・合成して、生成された出力用の映像信号を表示部１８に転送する。表示部１８は、表示制御部１７から転送された映像信号を表示するための装置であって、ＬＣＤ（Liquid Crystal Display）およびプラズマディスプレイによって実現される。また、ＨＤＭＩ（High-Definition
Multimedia Interface）などによって外部の表示装置に接続し、その表示装置に映像を表示させることもできる。
【００４９】
通信部１９は、主制御部１０で動作するプログラムによって、通信部１９を介してインターネット８に接続し、インターネット８上のホームページにアクセスしたり、ＬＡＮによって接続された携帯端末４との情報の送受信などの通信を行うことができる。不揮発性メモリ２０は、信号生成部１５で動作するプログラムおよび利用者によって作製されたデータなどを保存するためのメモリであり、たとえばＲＯＭ（Read Only Member）によって実現される。この不揮発性メモリ２０は、電源を切っても記憶内容を保持することができるメモリであればよく、フラッシュメモリ、強誘電体メモリ（ＦＲＡＭ）、磁気抵抗メモリ（ＭＲＡＭ）などであってもよい。
【００５０】
このような構成を有するテレビジョン装置３において、主制御部１０は、バス２１を介して接続された不揮発性メモリ２０に記憶されているプログラムによって各種処理を実行すると共に、入力部２３を介してリモコン装置２４から入力される指令に応じて各回路部の動作を制御する。また、テレビジョン装置３には、主制御部１０が前述のプログラムの実行処理を行う上で必要とされる一時記憶領域や作業領域を提供するＲＡＭ(Random
Access Memory)、ならびに表示時刻および表示時間を管理するＲＴＣ(Real Time Clock)が設けられている。
【００５１】
テレビジョン装置３は、主制御部１０の制御によって、リモコン装置２４の操作などに応答して、アンテナ２７を介して受信した放送映像をチューナ部１２に入力する。放送映像は、多数の静止画の連続表示によって構成されるテレビジョン放送の映像やビデオ映像などの動画映像である。
【００５２】
チューナ部１２は、放送信号から任意のチャネルの放送信号を抽出し、その放送信号を復調部１３に入力する。復調部１３は、入力された放送信号を復調して、復調放送信号を生成し、文字放送デコーダ部を含む映像信号復号部１４に入力する。放送信号には、番組映像信号が含まれており、また、文字放送信号が含まれている場合もある。
【００５３】
放送信号に文字放送信号が含まれている場合、映像信号復号部１４の文字放送デコーダ部は、復調放送信号からその文字放送信号を分離して復号し、文字放送データを生成する。文字放送データは、ＶＲＡＭ(Video Random Access Memory)などのビデオメモリ１６に書き込まれて一旦記憶された後、ビデオメモリ１６から読み出されて表示制御部１７に入力される。そして、表示制御部１７は、文字放送データを文字放送映像信号に変換して、映像信号生成部１５に入力する。
【００５４】
映像信号生成部１５は、復調部１３から入力された放送信号の中の番組映像信号と、表示制御部１７から入力された文字放送映像信号を重ねて、映像信号を生成する。映像信号生成部１５で生成された映像信号は、表示制御部１７を介して、表示部１８に入力される。その結果、表示部１８に番組映像と文字放送映像とが重畳されて出力される。
【００５５】
また、放送信号に文字放送信号が含まれていない場合、映像信号生成部１５は、復調部１３から入力された放送信号の中の番組映像信号から映像信号を生成し、表示制御部１７を介して、表示部１８に入力する。この結果、表示部１８から、番組映像が出力され、テレビジョン放送信号を再生することができるように構成されている。
【００５６】
また、テレビジョン装置３の主制御部１０は、ブラウザ起動部を有する。ブラウザ起動部は、リモコン装置２４の操作などに応答してＷＷＷブラウザプログラムを実行し、ＷＷＷブラウザを起動させ、通信部１９を介して、インターネット８に接続し、インターネット８上のホームページにアクセスする。次に、ブラウザ起動部は、通信部１９を介して、アクセスしたホームページの１フレーム分のページ情報を静止画として取得し、そのページ情報をビデオメモリ１６に書き込んで一旦記憶させた後、該ページ情報をビデオメモリ１６から読み出して、表示制御部１７に入力する。表示制御部１７は、そのページ情報を画像信号に変換して、表示部１８に入力する。この結果、表示部１８から、所定のホームページのページ情報が、ＷＷＷブラウザ画像の静止画として出力される。
【００５７】
このようにしてテレビジョン装置３は、インターネットに接続し、利用者に、リモコン装置２４の操作などを介して、インターネット８を利用することができるように構成されている。
【００５８】
さらに、テレビジョン装置３は、インターネット検索結果取得機能を有する。このインターネット検索結果取得機能は、主制御部１０が有する機能部としての文字検出部が、映像信号生成部１５で生成された映像信号から、文字認識によって、映像内の文字列を検出する。なお、ここでいう文字列とは、１以上の文字からなる文字の集合であって、ＵＲＬ（Uniform Resource Locator）などのアドレス情報をも含む。そして、文字検出部は、認識した文字列の中から、自然言語処理技術などを用いて、単語を検出する。
【００５９】
本実施形態において「ＵＲＬ」とは、インターネット上の各種リソースにアクセスする手段（scheme）と場所（scheme-specific-part）を表記した文字をいう。また、「アクセス」とは、コンピュータで、メモリや記憶装置に対してデータの読み出しや書き込みを行って、ネットワークや通信回線などを使って他のコンピュータに接続することをいう。さらに、「キーワード」とは、情報検索で、検索の手掛かりとして使用する語句をいう。さらに、「サーバ」とは、インターネットに接続されてＷＷＷサーバとしての機能を備えたコンピュータをいう。
【００６０】
図３は本発明の第１実施形態の情報処理装置１によるテレビジョン装置３のリモコン装置２４を使って検索キーワードを検索して表示する処理手順を示すフローチャートである。ステップＡ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＡ１で、主制御部１０がリモコン装置２４のボタンが押下されたことを検出すると、ステップＡ２で、押下されたボタンがメモボタン２５であるか否かが判断される。メモボタン２５でなければ、ステップＡ１へ戻り、前述と同様にリモコン装置２４のボタンが押下されたか否かを検出する。
【００６１】
ステップＡ１で押下されたボタンがメモボタン２５であれば、ステップＡ３へ移り、押下時点の映像を、静止画としてメインメモリ１１にコピーして記憶させる。ステップＡ４で、メインメモリ１１に転送された映像を表示部１８に表示させる。メモした静止画は、表示部１８の全画面に表示させてもよく、動画映像と静止画とを同時に表示させてもよい。
【００６２】
次に、ステップＡ５で、表示部１８に表示された静止画からキーワードを文字認識で抽出する。このようなキーワードは、静止画から文字認識によって文字列を検出し、その文字列からキーワードになる単語を抽出する処理によって達成される。
【００６３】
ステップＡ６で抽出したキーワードは、表示部１８に表示する。この抽出したキーワードは、静止画中の該当キーワード部分にリンクを埋め込んでもよく、静止画とキーワードとを分けて表示してもよい。
【００６４】
ステップＡ７で、表示部１８に表示された複数のキーワードの中から検索しようとするキーワードをリモコン装置２４などによって選択する。検索キーワードを選択すると、ブラウザが起動し、通信部１９は予め登録された検索サイトに選択したキーワードを送信する。
【００６５】
ステップＡ８で、ブラウザを起動し、検索サイトにキーワードを送信する。キーワードが送信されると、ステップＡ９で、検索サイトから検索結果を通信部１９が受信し、ステップＡ１０で、表示部１８に検索結果を表示させ、ステップＡ１１で選択したキーワードに対する検索動作を終了する。
【００６６】
このように本実施形態は、検索は後で行うアルゴリズムの一例であって、テレビジョン装置３を見ているときに、メモしたい情報がのっている映像のときに、リモコン装置２４のメモボタン２５を押すと、そのときの映像のスナップショット、すなわち静止画がテレビジョン装置３のメインメモリ１１に保存され、保存した静止画から文字認識で検索キーワードを抽出し、保存した後、リモコン装置２４の操作によってメモ一覧を表示して、保存された映像と抽出したキーワードとを確認することができる。また、キーワードを選択すると、ブラウザが立ち上がって検索エンジンで関連情報を検索することができるので、選択したキーワードについてテレビジョン装置３の映像を視聴者が見たままで調べることができる。
【００６７】
図４は本発明の第２実施形態の情報処理装置１によるメモした映像に書かれているキーワードを映像と一組にして不揮発性メモリ２０に保存するまでの処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。ステップＢ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＢ１で、リモコン装置２４のボタンを押下したことを検出する。ステップＢ２で、メモボタン２５が押下されたどうかが判断され、メモボタン２５でなければ、ステップＢ１へ戻り、リモコン装置２４のボタンが押下されたかどうかを検出する。
【００６８】
次に、ステップＢ３で、メモボタン２５の押下時点の映像の静止画がスナップショットとして、そのときの番組情報や日時などのメタ情報も併せてテレビジョン装置３のメインメモリ１１に保存される。
【００６９】
ステップＢ４で、保存された静止画から文字認識を使って全ての文字列を検出し、それらの文字列から検索対象情報として検索キーワードになる１または複数の単語を抽出する。
【００７０】
ステップＢ５で、映像とキーワードとが一組にして不揮発性メモリ２０に保存され、ステップＢ６で処理動作が終了される。映像とキーワードとの記憶は、不揮発性メモリ２０に限らず、テレビジョン装置３に内蔵されるＨＤＤなどに保存してもよい。
【００７１】
このように本実施形態においてもまた、前述の第１実施形態と同様に、テレビジョン装置３を見ているときに、メモしたい情報がのっている映像のときに、リモコン装置２４のメモボタン２５を押すと、そのときの映像のスナップショット、すなわち静止画がテレビジョン装置３のメインメモリ１１に保存して、保存した静止画から文字認識で検索キーワードを抽出し、ブラウザが立ち上がって検索エンジンで関連情報を検索することができるので、選択したキーワードについてテレビジョン装置３の映像を視聴者が見たままで調べることができる。
【００７２】
前述の図３よおび図４の各実施形態において、メモボタン２５の押下によって映像の一部を静止画としてメインメモリ１１に保存可能なメモモードに設定され、このメモモードの状態で保存保存された静止画にメモしたい情報が載っている画面であることを確認した後、リモコン装置２４の決定ボタン２６を押下することによって、その静止画をメインメモリ１１に保存するようにしてもよい。
【００７３】
図５は不揮発性メモリ２０に保存した映像の一覧から抽出したキーワードによって検索し、その検索結果を表示する処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。本実施形態では、リモコン装置２４は前記メモボタン２５および決定ボタン２６に加えて、メモ一覧ボタン２８（図１参照）を備える。
【００７４】
ステップＣ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＣ１で、リモコン装置２４のボタンが押下されたことを検出すると、ステップＣ２で、メモ一覧ボタン２８が押下されたかどうかが判断される。メモ一覧ボタン２８でなければステップＣ１へ戻り、メモ一覧ボタン２８であればステップＣ３へ移る。
【００７５】
前記ステップＣ１において、リモコン装置２４のボタンが押下されたことを検出したとき、前記メモ一覧ボタン２８に代えて、ホーム画面からメモ一覧を表示できるアプリケーションプログラムを直接起動するようにしてもよい。
【００７６】
次に、メモ一覧ボタン２８が押下されたと判断されると、ステップＣ３で、メモ一覧が表示部１８に表示される。メモ一覧は、全画面の場合と、映像とメモ一覧画像との分割表示の場合のいずれでもよい。ただし、いずれにしても利用者が意図してメモ一覧を表示させることができればよい。
【００７７】
ステップＣ４で、表示部１８に表示されたメモ一覧から検索キーワードを選択する。メモ一覧でメモした映像にリンクを埋め込んでもよく、あるいは映像とキーワードとを分けて表示させてもよいことは、前述の第１実施形態のステップＡ６と同様である。
【００７８】
ステップＣ５で、ブラウザを起動し、検索サイトにキーワードを送信する。ここでは、検索キーワードをリモコン装置２４などで選択することによって、ブラウザが起動し、予め登録された検索サイトに、選択したキーワードが通信部１９から送信される。
【００７９】
ステップＣ６で、検索サイトから検索結果を通信部１９が受信すると、ステップＣ７で検索結果が表示部１８に表示され、ステップＣ８で処理動作が終了する。このようにして、ブラウザを使って、検索結果を元にさらにＷｅｂページにアクセスして選択したキーワードについてテレビを見たまま調べることができる。
【００８０】
図６は本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７に保存するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。ステップＤ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＤ１で、インターネット８上の映像メモ用サーバ７にログインする。ステップＤ２で、リモコン装置２４のボタン押下を検出すると、ステップＤ３でメモボタン２５が押下されたかどうかが判断され、メモボタン２５でなければステップＤ２に戻り、メモボタン２５であれば、ステップＤ４へ移る。
【００８１】
ステップＤ４で、メモボタン２５の押下時点の映像のコピーをメインメモリ１１に保存する。ステップＤ５で、インターネット８上の映像メモ用サーバ７に映像を転送して保存し、ステップＤ６で処理動作を終了する。
【００８２】
このように本実施形態では、保存した映像（静止画）がインターネット８上の映像メモ用サーバ７に送られ、そのサーバ上で文字認識により検索キーワードを抽出することができる。またメモ一覧は、インターネット８上の映像メモ用サーバ７に保存される。
【００８３】
図７は本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７で受信し、文字認識によって検索キーワードを抽出する処理手順を示すフローチャートである。なお、前述の第１実施形態に対応する部分には同一の参照符を付す。ステップＥ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＥ１で、携帯端末４からのログインを受け付ける。
【００８４】
ステップＥ２で、携帯端末４からの映像を受信して保存する。このときの保存される情報は、携帯端末４からの映像だけでなく、メモボタン２５を押下したときの番組情報や日時などのメタ情報も合わせて受信して保存する。前記保存される情報は、本発明の他の実施形態において、テレビジョン装置３から転送された文字認識前の映像であってもよい。
【００８５】
ステップＥ３で、映像メモ用サーバ７に保存された映像、すなわち静止画からキーワードを文字認識で抽出する。このキーワードの抽出は、静止画から文字認識を使って文字列を検出し、その文字列からキーワードになる単語を抽出することによって行われる。このとき、文字認識は、別のサーバを使って処理してもよい。
【００８６】
ステップＥ４で、映像とキーワードとを一組にしてログインした映像メモ用サーバ７に保存した後、ステップＥ５で処理動作を終了する。
【００８７】
図８は本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像の静止画に書かれているキーワードを使って携帯端末４上で検索するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。ステップＦ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＦ１で、インターネット８上の映像メモ用サーバ７にログインする。
【００８８】
次に、ステップＦ２で、リモコン装置２４のボタン押下を検出する。ボタン押下を検出すると、ステップＦ３で、メモ一覧ボタン２８かどうかを判断し、メモ一覧ボタン２８であればステップＦ２へ戻り、メモ一覧ボタン２８であれば、ステップＦ４へ移る。
【００８９】
ステップＦ４で、メモ一覧要求を映像メモ用サーバ７に送信し、ステップＦ５で、通信部１９を介して受信したメモ一覧を表示部１８に表示させる。ステップＦ６で、利用者は表示部１８に表示されたメモ一覧から検索キーワードを選択する。キーワードが選択されると、ステップＦ７で、ブラウザが起動され、利用者が検索キーワードを選択すると、ステップＦ８で検索サイトからの検索結果が通信部１９を介して受信され、ステップＦ９で検索結果が表示部１８に表示された後、ステップＦ１０で処理動作が終了する。
【００９０】
図９は本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像に書かれているキーワードを使って携帯端末４上で検索するまでの映像メモ用サーバ７の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【００９１】
ステップＧ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＧ１で、映像メモ用サーバ７が携帯端末４からのログインを受け付け、ステップＧ２で、携帯端末４からのメモ一覧要求を受信する。
【００９２】
ステップＧ３で、映像メモ用サーバ７は携帯端末４にメモ一覧を送信し、映像メモ用サーバ７にログインＩＤごとに保存されているメモ一覧を携帯端末４に送信し、ステップＧ４で処理動作を終了する。
【００９３】
図１０は本発明の第４実施形態の情報処理装置１によるテレビに接続した携帯端末上で映像に書かれているキーワードを使って検索するまでの携帯端末４の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【００９４】
ステップＨ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＨ１で、テレビジョン装置３にログインする。このログインは、携帯端末４から利用者操作によってログインしてもよく、同じネットワーク内でリモコン装置として利用するために予め登録済みであることを示す識別情報を検出することによって自動的にログインするようにしてもよい。さらにテレビジョン装置３へのログインに代えて、映像メモ用サーバにログインしてもよい。
【００９５】
ステップＨ３で、ボタン押下が検出されると、ステップＨ４でメモ一覧ボタン２８かどうかが判断され、メモ一覧ボタン２８でなければステップＨ２へ戻り、メモ一覧ボタン２８であれば、ステップＨ４でメモ一覧要求を通信部１９から送信する。ステップＨ５で、受信したメモ一覧を表示部１８に表示させ、利用者は表示部１８に表示されたメモ一覧から検索キーワードを選択する。ステップＨ６で、メモ一覧から検索キーワードが選択されると、ステップＨ７でブラウザが起動され、検索サイトに通信部１９からキーワードが送信され、検索サイトから検索結果を通信部１９が受信すると、ステップＨ８で、その検索結果が表示部１８に表示され、ステップＨ９で処理動作が終了する。このようにして、ブラウザを使って、検索結果を元にさらにＷｅｂページにアクセスして選択したキーワードについてテレビを見たまま調べることができる。
【００９６】
図１１は本発明の第４実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４上で映像に書かれているキーワードを使って検索するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【００９７】
ステップＩ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＩ１で、携帯端末４からのログインを映像メモ用サーバ７が受け付け、ステップＩ２で、主制御部１０は携帯端末４からの割り込みを検出する。
【００９８】
次に、ステップＩ３で、主制御部１０は、メモ一覧要求かどうかを判断し、メモ一覧要求でなければステップＩ２へ戻り、メモ一覧要求であれば、ステップＩ４へ移る。
【００９９】
ステップＩ４で、メモ一覧要求であれば、メモ一覧を映像メモ用サーバ７から携帯端末４に転送させ、ステップＩ５で処理動作を終了する。
【０１００】
図１２は本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索するまでの携帯端末４の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【０１０１】
ステップＪ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＪ１で、テレビジョン装置３にログインして携帯端末４をテレビジョン装置３のリモコン装置２４として認識させる。その後、第４実施形態と同様に、テレビジョン装置３にログインすると、携帯端末４でテレビジョン装置３の操作が可能となる。
【０１０２】
次に、ステップＪ２で、ボタン押下を検出すると、ステップＪ３で、メモボタン２５が押下されたかどうかが判断される。メモボタン２５でなければステップＪ２へ戻り、メモボタン２５であればステップＪ４へ移る。
【０１０３】
メモボタン２５が押下されると、ステップＪ４で、主制御部１０はメモ作成指示を通信部１９から送信させ、ステップＪ５で、転送されてきた映像とキーワードとを表示部１８に表示させる。以下、第４実施形態と同様に、テレビジョン装置３または映像メモ用サーバ７に接続し、ステップＪ６で、キーワードを使ってブラウザで検索し、予め登録された検索サイトに、選択したキーワードを通信部１９から送信させ、検索サイトから検索結果を通信部１９が受信すると、その検索結果が表示部１８に表示され、ステップＪ７で処理動作が終了する。
【０１０４】
図１３は本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【０１０５】
ステップＫ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＫ１で、携帯端末４からのログインを受け付け、ステップＫ２で、携帯端末４からの割り込みを検出し、ステップＫ３でメモボタン２５が押下されたかどうかを判断する。メモボタン２５でなければステップＫ２へ戻り、メモボタン２５であればステップＫ４へ移る。
【０１０６】
ステップＫ４で、メモボタン２５の押下時点の映像を、静止画としてメインメモリ１１にコピーして記憶させる。このとき、第１実施形態と同様に、メモしたい情報が載っている画像であれば、リモコン装置２４の所定のボタン、すなわち決定ボタン２６を押下すると、そのときの映像のスナップショット、すなわち静止画がテレビジョン装置３のメインメモリ１１に転送されて記憶され、ステップＫ４で、メインメモリ１１に転送された映像を表示部１８に表示させる。メモした静止画は、表示部１８の全画面に表示させてもよく、動画映像と静止画とを同時に表示させてもよい。
【０１０７】
ステップＫ５で、メインメモリ１１に記憶された静止画からキーワードを文字認識で抽出し、第３実施形態と同様に、インターネット８上の映像メモ用サーバ７に送信するようにしてもよい。
【０１０８】
ステップＫ６で、静止画とキーワードとを一組にして不揮発性メモリ２０に保存する。ステップＫ７で、不揮発性メモリ２０に保存した静止画とキーワードとを携帯端末４に通信部１９から転送させ、ステップＫ８で処理動作を終了する。
【０１０９】
以上のように、テレビジョン装置３を視聴中に気になった映像があったらリモコン装置２４のメモボタン２５を押下して映像を静止画として保存し、後で保存した静止画から文字認識して抽出したキーワードを一覧し、その中からキーワードを選んで検索することができる。文字認識は、自端末であるテレビジョン装置３によって行ってもよく、インターネット８上に映像メモ用サーバ７を置いて、そこで文字認識を行ってもよい。
【０１１０】
また、検索キーワードは、Ethernet（登録商標）および無線ＬＡＮなどのネットワークで接続された携帯端末４に転送して、そこで検索するようにしてもよい。
【０１１１】
さらに、携帯端末４をテレビジョン装置３と接続して、テレビジョン装置３の視聴中に気になった映像があったとき、携帯端末４を操作すると自動的に文字認識して抽出したキーワードが携帯端末４に転送されるように構成されてもよい。
【０１１２】
第１〜５実施形態によれば、必要な映像だけ文字認識を行うので、処理負荷が低い情報処理装置１を実現することができる。また、利用者が必要とするときにブラウザを表示するので、テレビジョン装置３の視聴の妨げにならない。さらに、テレビジョン装置３を見ながら関連情報を手元の携帯端末４によって簡単に検索することができる。
【０１１３】
また、第３実施形態のように、携帯端末で映像メモを見る一例として、携帯端末４からテレビジョン装置３または映像メモ用サーバ７上のメモ一覧を見るようにすると、携帯端末４にメモ一覧が転送され、携帯端末４によってキーワードを選択すると、ブラウザが立ち上がって検索エンジンで関連情報を検索することができる。
【０１１４】
さらに、前述の第１〜第５実施形態では、検索対象情報として文字列を用いる場合について述べたが、本発明の他の実施形態では、前記文字列に代えてデジタル写真データなどの画像情報を検索対象情報として用いるようにしてもよい。この場合においても、文字列を検索対象情報とする場合と同様に、テレビジョン放送を中断でせずに、情報処理システム２の情報処理の負荷を少なくして、ユーザの希望する画像情報に関連した情報を検索結果情報として得ることができる。
【０１１５】
本発明は、ネットワーク対応のテレビジョン装置３にて、情報処理システムおよび情報処理方法について説明したが、本発明におけるテレビジョン放送は、テレビジョン放送のみならず、インターネットを介した放送、ビデオオンデマンド、インターネットＷｅｂサービスなど、テレビジョンなどの表示装置に表示して利用できるようなサービス受信機能全般に適応することができる。
【符号の説明】
【０１１６】
１ 情報処理装置
２ 情報処理システム
３ テレビジョン装置
４ 携帯端末
５ ルータ
６ 検索サーバ
７ 映像メモ用サーバ
１０ 制御部
１１ メインメモリ
１２ チューナ部
１３ 復調部
１４ 映像信号復号部
１５ 映像信号生成部
１６ ビデオメモリ
１７ 表示制御部
１８ 表示部
１９ 通信部
２０ 不揮発性メモリ
２１ バス
２３ 入力部
２４ リモコン装置
２５ メモボタン
２６ 決定ボタン
２７ アンテナ
【技術分野】
【０００１】
本発明は、テレビジョン放送の映像から所望のキーワードおよびＵＲＬ（Uniform
Resource Locator）などの文字列などの検索対象情報を抽出し、その検索対象情報をインターネットなどの情報通信網から検索して、検索対象情報に関連する情報を取得することができる情報処理装置、情報処理方法およびプログラムに関する。
【背景技術】
【０００２】
近年、テレビジョン放送において、利用者（以下、「視聴者」ともいう）が、視聴中の放送番組に関連したウェブサイト上の特定ホームページを閲覧することができるように、番組映像や文字放送内で、そのホームページのインターネット上のＵＲＬ（Uniform
Resource Locator）などのアドレス情報の紹介が行われている。
【０００３】
しかし、紹介されたアドレス情報に利用者がアクセスし、そのホームページを閲覧するためには、たとえば利用者が視聴中の映像からＵＲＬを筆記によってメモし、パーソナルコンピュータ等の通信端末装置を用いて、インターネット接続用のアプリケーションプログラムを起動し、そのＵＲＬを通信端末装置に入力するという煩雑な作業を行う必要がある。
【０００４】
このような課題に対して、利用者の作業を容易にするために、画面に表示されている映像に対して文字認識を行って、ＵＲＬや映像内で利用者に検索させるためのキーワードなどの文字列を検索対象情報として抽出し、その文字列を用いて自動的にホームページにアクセスできるテレビジョン装置や、文字列を検索システムに送信することができる技術が特許文献１〜３に示される。
【０００５】
特許文献１には、テレビジョン装置の画面上にＷＷＷ（World Wide Web）ブラウザを共同して表示し、ＷＷＷ検索エンジンによって所望のＷＷＷを表示可能な映像関係情報を検索するために、テレビジョン装置の画面に文字放送のテロップまたはフリップを検出し、文字を検出し、該認識結果とデータベースの類似語とからＷＷＷの検索キーワードを生成し、該キーワードのＷＷＷ検索エンジンに入力して検索させ、その検索結果を表示する技術が提案されている。
【０００６】
特許文献２には、映像内の文字列を含む画像データを自動的に記録し、記録した画像データを利用者に配信することができるようにするために、テレビジョン放送の映像から文字認識によって文字列を検索対象情報として検出し、検出した文字列から単語を検出し、検出した単語から所定の条件に従って、ネットワーク上の情報を検索するためのキーワードを決定し、そのキーワードをネットワーク上の情報を検索するための情報検索システムに送信して、そのシステムによる検索結果情報を取得し、その検索結果情報を表示部に表示させて、利用者に映像内の文字列を用いて情報検索システムにネットワーク上の検索結果情報を利用者に容易に提供する技術が提案されている。
【０００７】
特許文献３には、チューナ部から入力されるテレビジョン放送の映像信号や、外部信号受信部でＡＶ機器から読出されたＤＶＤ等の映像信号を映像出力処理部が取得し、画像データ取得部が映像出力処理部の映像信号から１フレーム分ずつ画像データを取得する。文字認識部は取得した画像データの文字認識処理のよって文字列を検索対象情報として抽出し、文字照合部は文字認識部が抽出した文字列と所定の照合キーとを照合して、文字列がその照合キーに相当するかを判断する。画像データ保存処理部は、照合キーに相当すると判断された文字列を含む画像データを画像データ記憶部に保存させ、通信部は画像データを、通信接続部を介してインターネット経由で携帯電話に電子メールで送信し、このようにしてこの従来技術では、所定の文字列を含む画像データを利用者に提供している。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特許第３５２４７４２号公報
【特許文献２】特開２０１０−３９６４７号公報
【特許文献３】特開２００９−１９４４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
特許文献１〜３に示される各従来技術では、テレビジョン装置の画面に表示された文字を検出し、その文字をキーワードとして検索し、ブラウザとテレビジョン装置を同時表示するが、文字の検出タイミングについては指定するように構成されていないため、利用者の意図しないときに検索が開始されてしまう場合があり、視聴の妨げになる場合が生じるという問題がある。また、常に文字認識を行うので、処理の負荷が高くなってしまうという問題がある。さらに、映像で紹介されたＵＲＬやキーワードをつかって、関連するホームページに接続するためには、一旦それらをメモして、ブラウザを起動してから入力しなければならず、検索作業に手間を要するという問題がある。
【００１０】
本発明の目的は、映像から文字列などの検索対象情報を抽出して所望の検索対象情報を検索するという一連の処理の負荷を低減し、視聴を妨げずに検索対象情報の検索結果情報を取得することができる情報処理装置、情報処理方法およびプログラムを提供することである。
【課題を解決するための手段】
【００１１】
本発明は、テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部と、
表示部に表示される映像から静止画を抽出する静止画抽出部と、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部と、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部と、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部と、
情報検索部によって検索されて抽出された情報を受信する受信部と、
受信部によって受信された情報を表示部に表示させる表示制御部とを含むことを特徴とする情報処理装置である。
【００１２】
また本発明は、検索対象情報抽出部に接続され、表示部に表示される映像から静止画を抽出させる静止画抽出指令手段を含むことを特徴とする。
【００１３】
さらに本発明は、検索対象情報抽出部に接続され、抽出した静止画から検索対象情報を抽出させる検索対象情報抽出指令手段を含むことを特徴とする。
【００１４】
さらに本発明は、静止画抽出部に接続され、静止画抽出部によって抽出された静止画を記憶するサーバを含み、
検索対象情報抽出部は、前記サーバに記憶される静止画から検索対象情報を抽出することを特徴とする。
【００１５】
さらに本発明は、検索対象情報抽出部は、前記サーバに記憶される静止画を表示可能であることを特徴とする。
【００１６】
さらに本発明は、静止画抽出指令手段および検索対象情報抽出指令手段が、通信ネットワークに接続可能な携帯端末装置であることを特徴とする。
【００１７】
さらに本発明は、前記検索対象情報が、文字列であることを特徴とする。
さらに本発明は、前記検索対象情報が、画像情報であることを特徴とする。
【００１８】
さらに本発明は、コンピュータを、
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部、
表示部に表示される映像から静止画を抽出する静止画抽出部、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部、
情報検索部によって検出されて抽出された情報を受信する受信部、および
受信部によって受信された情報を表示部に表示させる表示制御部として機能させるコンピュータ読取り可能なプログラムである。
【００１９】
さらに本発明は、テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示手段に表示させる映像表示工程と、
表示手段に表示される映像から静止画を静止画抽出手段によって抽出する静止画抽出工程と、
通信ネットワークに接続される情報検索手段によって、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索工程と、
静止画抽出手段によって抽出された静止画から検索対象情報を検索対象情報抽出手段によって抽出する検索対象情報抽出工程と、
抽出手段によって抽出した検索対象情報を情報検索手段に送信する送信工程と、
受信手段によって、情報検索手段によって検索されて抽出された情報を受信する受信工程と、
受信手段によって受信された情報を表示制御手段によって表示手段に表示させる表示制御工程とを含むことを特徴とする情報処理方法である。
【発明の効果】
【００２０】
本発明によれば、必要な映像だけに対して検索対象情報の抽出処理を行うので、処理負荷が低い情報処理装置を提供することができる。また、利用者が必要とするときにブラウザを表示するので、テレビジョン装置の視聴の妨げになることを防止することができる。
【００２１】
また本発明によれば、検索対象情報抽出部に接続される静止画抽出指令手段によって、表示部に表示される映像から静止画を抽出させるので、表示部に映像を表示した状態で、視聴を妨げずに検索対象情報に関連する静止画を取得することができる。
【００２２】
さらに本発明によれば、検索対象情報抽出部に接続される検索対象情報抽出指令手段によって静止画から検索対象情報を抽出させるので、表示部に映像を表示した状態で、視聴を妨げずに検索対象情報を抽出することができる。
【００２３】
さらに本発明によれば、静止画抽出部に接続され、静止画抽出部によって抽出された静止画を記憶するサーバを含み、検索対象情報抽出部によって、前記サーバに記憶される静止画から検索対象情報を抽出するので、検索対象情報を抽出するための処理負荷を低減することができる。
【００２４】
さらに本発明によれば、検索対象情報抽出部がサーバに記憶される静止画を表示可能であるので、情報処理装置の処理負荷を低減することができる。
【００２５】
さらに本発明によれば、静止画抽出指令手段および検索対象情報抽出指令手段が通信ネットワークに接続可能な携帯端末装置であることによって、遠隔操作によっても検索対象情報から通信ネットワークを介して検索対象情報を検索することができるので、利便性を向上を図ることができる。
【００２６】
さらに本発明は、前記検索対象情報が文字列であるので、ＵＲＬなどの長い文字列であっても容易に検索して、その検索結果情報を得ることができる。
【００２７】
さらに本発明は、前記検索対象情報が、画像情報であるので、手入力が困難な写真などの画像であっても容易に検索して、その検索結果情報を得ることができる。
【００２８】
さらに本発明によれば、コンピュータによってプログラムを実行することによって、受信したテレビジョン放送の映像信号の映像を表示部に表示させ、静止画抽出部に前記表示部に表示される映像から静止画を抽出させ、さらに抽出した静止画から検索対象情報抽出部によって、静止画から検索対象情報を抽出させ、送信部が検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信して、送信した検索対象情報を情報検索部に検索する。受信部は、情報検索部による検索結果情報を受信し、表示制御部は受信部によって受信された検索結果を表示部に表示させ、表示部に表示される映像の視聴を妨げずに、選択した検索対象情報の検索結果を取得することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の第１実施形態の情報処理装置１が適用される情報処理システム２の構成を示すブロック図である。
【図２】情報処理装置１の電気的構成を示すブロック図である。
【図３】本発明の第１実施形態の情報処理装置１によるテレビジョン装置３のリモコン装置２４を使って検索キーワードを検索して表示する処理手順を示すフローチャートである。
【図４】本発明の第２実施形態の情報処理装置１によるメモした映像に書かれているキーワードを映像と一組にして不揮発性メモリ２０に保存する処理手順を示すフローチャートである。
【図５】不揮発性メモリ２０に保存した映像の一覧から抽出したキーワードによって検索し、その検索結果を表示する処理手順を示すフローチャートである。
【図６】本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７に保存するテレビジョン装置３の処理手順を示すフローチャートである。
【図７】本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７で受信し、文字認識によって検索キーワードを抽出する処理手順を示すフローチャートである。
【図８】本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像の静止画に書かれているキーワードを使って携帯端末４上で検索するテレビジョン装置３の処理手順を示すフローチャートである。
【図９】本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像に書かれているキーワードを使って携帯端末４上で検索する映像メモ用サーバ７の処理手順を示すフローチャートである。
【図１０】本発明の第４実施形態の情報処理装置１によるテレビに接続した携帯端末上で映像に書かれているキーワードを使って検索する携帯端末４の処理手順を示すフローチャートである。
【図１１】本発明の第４実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４上で映像に書かれているキーワードを使って検索するテレビジョン装置３の処理手順を示すフローチャートである。
【図１２】本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索する携帯端末４の処理手順を示すフローチャートである。
【図１３】本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索するテレビジョン装置３の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００３０】
図１は本発明の第１実施形態の情報処理装置１が適用される情報処理システム２の構成を示すブロック図である。本実施形態の情報処理装置１は、本発明の情報処理方法が実施されるコンピュータプログラムを実行するハードウェア資源としての情報処理システム２を構築する。なお、本実施形態の情報処理装置１は、後述の第２〜第５実施形態のハードウェア資源として構成が共通であるため、第２〜第５実施形態においては、ハードウェア資源についての共通する構成の説明は省略し、主としてソフトウェア資源の構成について説明する。
【００３１】
情報処理システム２は、基本的に、テレビジョン装置３、携帯端末４、ルータ５、検索サーバ６および映像メモ用サーバ７を含み、情報処理装置１を実行することによって、テレビジョン装置３の画面を視聴している状態で、気になる情報が表示されたとき、リモコン装置２４が具備する複数のボタンの中から予め設定された所定ボタン、すなわち本実施形態ではメモボタン２５を押すと、そのときの映像のスナップショット画像、すなわち静止画が画面に表示され、次に映像の静止画から文字認識で１または複数の文字列を検索対象情報として抽出する。そしてリモコン装置２４のたとえば決定ボタン２６などによる操作で、検索キーワードを選択するとブラウザ画面が立ち上がり、抽出した文字列の中から選択したキーワードを、視聴画面を中断せずに、検索エンジンによって検索し、その検索結果を取得することができるように機能する。
【００３２】
テレビジョン装置３は、文字放送を含むテレビジョン放送の再生機能、映像記録機能およびネットワークに接続して通信することができるインターネット接続機能を有するテレビジョン受像機によって実現され、テレビジョン放送で利用される放送信号を使用したデータ送信機能と、受像機に内蔵された情報入力・通信機能を使って、視聴者がテレビジョン放送に対して何らかの働きかけを行うことができる双方向テレビを含む。
【００３３】
携帯端末４は、静止画抽出指令手段および検索対象情報抽出指令手段として機能し、無線ＬＡＮ（Local Area Network）などのネットワークに接続して通信することができる機能を有するＰＤＡ（Personal Digital Assistants）などの携帯端末機器によって実現される。
【００３４】
ルータ５は、イーサネット（Ethernet）（登録商標）または無線ＬＡＮのインターフェースを具備しており、家庭内の複数の機器をインターネットに個別に接続するために備えられる。検索サーバ６は、インターネット８上にあり、キーワードをインターネット８上で検索し、抽出した検索結果を提供することができる。このような検索サーバ６は、複数のサーバコンピュータに分散処理を行わせることによって、高速で大量の情報を処理することができるように構成されている。
【００３５】
本実施形態において「イーサネット」とは、米国電気電子学会（略称ＩＥＥＥ；
Institute of Electrical and Electronic Engineers）および国際標準化機構（略称ＩＯＳ；International Organization For Standardization）によって、標準化されたＬＡＮ（Local Area Network）をいう。また、「インターネット」とは、世界的規模で商用利用可能なＩＰネットワークを指すが、単に複数のネットワークを接続した小規模ネットワークを指す場合もある。このようなインターネットは、テレビジョン装置３、サーバ６，７、携帯端末４などの外部機器をそれぞれ双方向通信又は一方向通信可能に接続する、たとえばＮＧＮ（Next Generation Network）網、電話回線網、衛星通信網、同報通信路等の公衆回線網や、ＷＡＮ（Wide Area Network）、ＬＡＮ（Local Area Network）、ＩＰ‐ＶＰＮ（Internet Protocol-Virtual Private Network）などの専用回線網などの通信回線網で構成され、有線／無線を問わない。
【００３６】
映像メモ用サーバ７は、通信ネットワークを実現するインターネット８上にあり、利用者が取得した静止画である映像メモを保存するために用いられる。映像メモは、利用者ＩＤごとに管理され、利用者が所有する複数の端末装置間で共有することができる。このような映像メモ用サーバ７は、前述の検索サーバ６と同様に、複数のサーバコンピュータに分散処理を行わせることによって、高速で大量の情報を処理することができるように構成されている。
【００３７】
図２は情報処理装置１の電気的構成を示すブロック図である。テレビジョン装置３は、主制御部１０、メインメモリ１１、チューナ部１２、復調部１３、映像信号復号部１４、映像信号生成部１５、ビデオメモリ１６、表示制御部１７、表示部１８、通信部１９、不揮発性メモリ２０、バス２１、入力部２３、リモコン装置２４およびアンテナ２７を含んで構成される。
【００３８】
主制御部１０は、バス２１を介して接続された不揮発性メモリ２０に記憶されている前記プログラムによって、前述のメインメモリ１１、チューナ部１２、復調部１３、映像信号復号部１４、映像信号生成部１５、ビデオメモリ１６、表示制御部１７、表示部１８、通信部１９および不揮発性メモリ２０の各動作を制御するとともに、入力部２３を介してリモコン装置２４から入力される操作信号に応答して、前記メインメモリ１１、チューナ部１２、復調部１３、映像信号復号部１４、映像信号生成部１５、ビデオメモリ１６、表示制御部１７、表示部１８、通信部１９および不揮発性メモリ２０の動作を制御する。
【００３９】
このような主制御部１０は、表示部１１に表示される映像から静止画を抽出する静止画抽出部、通信ネットワークに接続され、通信ネットワーク上で情報を検索して抽出する情報検索部、静止画抽出部によって抽出された静止画から検索対象情報である文字列を抽出する検索対象情報抽出部としての文字列抽出部、文字列抽出部によって抽出した文字列を情報検索部に送信し、送信した文字列を情報検索部に検索させる送信部、および情報検索部による検索結果情報を受信する受信部を実現し、中央演算処理装置（Central
Processing Unit；略称ＣＰＵ）によって実現される。
【００４０】
主制御部１０はさらに、機能部としてキーワード決定部、検索サイト選択部およびブラウザ起動部を備える。キーワード決定部は、文字検出部が検出した単語について、所定の条件に従って、検索サイトにインターネット上の情報を検索させるためのキーワードとしての優先度を判断する。検索サイトにインターネット８上の情報を検索させるためのキーワードは、検索キーワードとも呼ぶ場合がある。所定の条件を満たす単語を、検索用キーワードとしての優先度が高い単語とみなし、それらの単語に対して他の単語よりも高い優先度を付けて抽出する。そして、キーワード決定部は、検出された単語の中から、優先度の最も高い単語を検索用キーワードとして決定し、テレビジョン放送の映像内から選ばれた文字列として可能性が高い単語を、テレビジョン装置３で用いる検索対象情報である検索キーワードとして決定することができる。
【００４１】
また、主制御部１０が有する機能部としての検索サイト選択部は、不揮発性メモリから予め登録されている検索サイトのＵＲＬ情報を呼び出し、そのＵＲＬ情報を用いて、利用する検索サイトを選択する。
【００４２】
ブラウザ起動部は、ＷＷＷブラウザを起動し、通信部を介して、選択した検索サイトにアクセスする。そして、ブラウザ起動部は、メインメモリ１１に記憶された検索キーワードを読み出し、通信部１９を介して、その検索キーワードを検索サイトに送信し、通信部１９を介して、その検索キーワードを用いて検索サイトの情報検索システムに検索させた結果のページ情報を取得する。そして、ブラウザ起動部は、取得した検索結果のページ情報を、ビデオメモリ１６に書き込んで一旦記憶させた後、ビデオメモリ１６から読み出して、表示制御部１７に入力する。表示制御部１７は、そのページ情報を画像信号に変換して、表示部１８に入力する。この結果、表示部１８から、取得した検索結果のページ画像が、ＷＷＷブラウザ画像として出力される。
【００４３】
このようにしてテレビジョン装置３は、テレビジョン放送の映像内の文字列から検索用キーワードを決定し、その検索用キーワードを用いてインターネット上の検索サイトに検索させた結果を取得して利用者に提供することができる。
【００４４】
また、ブラウザ起動部は、リモコン装置２４の操作を介して、利用者操作により、検索結果ページに検索結果として表示されているリンク先の中から利用者が希望するリンク先が選択されると、通信部１９を介して、そのリンク先のページにアクセスする。次に、ブラウザ起動部は、通信部１９を介して、アクセスしたページのページ情報を取得し、そのページ情報をビデオメモリ１６に書き込んで一旦記憶させた後、ビデオメモリ１６から読み出して、表示制御部１７に入力する。表示制御部１７は、そのページ情報を画像信号に変換して、表示部１８に入力する。この結果、表示部１８から、利用者が希望したリンク先のページ画像が、ＷＷＷブラウザ画像として出力される。
【００４５】
メインメモリ１１は、主制御部１０がプログラムを実行する上で必要とされる一時記憶領域および作業領域を提供するメモリであって、ＲＡＭ（Random Access Memory）によって実現される。
【００４６】
チューナ部１２は、アンテナ２３を介して受信した放送信号から任意のチャネルの放送信号を抽出し、復調部１３に出力する。復調部１３は、チューナ部１２から入力した放送信号を復調し、放送映像信号と放送音声信号と抽出する。放送映像信号は、映像信号復号部に入力され、音声信号は図示しない音声信号処理部に入力され、所定の音響処理が行われる。
【００４７】
映像信号復号部１４は、放送映像信号を復号し、生成された映像信号をビデオメモリ１６に逐次入力する。映像信号生成部１５は、信号生成部１５で動作するプログラムによって、文字および図形などを描画し、生成された映像信号をビデオメモリ１６に逐次入力する。ビデオメモリ１６は、映像信号生成部１５からの映像信号を一時保存するためのバッファメモリである。
【００４８】
表示制御部１７は、ビデオメモリ１６に一時保存された映像信号を加工・合成して、生成された出力用の映像信号を表示部１８に転送する。表示部１８は、表示制御部１７から転送された映像信号を表示するための装置であって、ＬＣＤ（Liquid Crystal Display）およびプラズマディスプレイによって実現される。また、ＨＤＭＩ（High-Definition
Multimedia Interface）などによって外部の表示装置に接続し、その表示装置に映像を表示させることもできる。
【００４９】
通信部１９は、主制御部１０で動作するプログラムによって、通信部１９を介してインターネット８に接続し、インターネット８上のホームページにアクセスしたり、ＬＡＮによって接続された携帯端末４との情報の送受信などの通信を行うことができる。不揮発性メモリ２０は、信号生成部１５で動作するプログラムおよび利用者によって作製されたデータなどを保存するためのメモリであり、たとえばＲＯＭ（Read Only Member）によって実現される。この不揮発性メモリ２０は、電源を切っても記憶内容を保持することができるメモリであればよく、フラッシュメモリ、強誘電体メモリ（ＦＲＡＭ）、磁気抵抗メモリ（ＭＲＡＭ）などであってもよい。
【００５０】
このような構成を有するテレビジョン装置３において、主制御部１０は、バス２１を介して接続された不揮発性メモリ２０に記憶されているプログラムによって各種処理を実行すると共に、入力部２３を介してリモコン装置２４から入力される指令に応じて各回路部の動作を制御する。また、テレビジョン装置３には、主制御部１０が前述のプログラムの実行処理を行う上で必要とされる一時記憶領域や作業領域を提供するＲＡＭ(Random
Access Memory)、ならびに表示時刻および表示時間を管理するＲＴＣ(Real Time Clock)が設けられている。
【００５１】
テレビジョン装置３は、主制御部１０の制御によって、リモコン装置２４の操作などに応答して、アンテナ２７を介して受信した放送映像をチューナ部１２に入力する。放送映像は、多数の静止画の連続表示によって構成されるテレビジョン放送の映像やビデオ映像などの動画映像である。
【００５２】
チューナ部１２は、放送信号から任意のチャネルの放送信号を抽出し、その放送信号を復調部１３に入力する。復調部１３は、入力された放送信号を復調して、復調放送信号を生成し、文字放送デコーダ部を含む映像信号復号部１４に入力する。放送信号には、番組映像信号が含まれており、また、文字放送信号が含まれている場合もある。
【００５３】
放送信号に文字放送信号が含まれている場合、映像信号復号部１４の文字放送デコーダ部は、復調放送信号からその文字放送信号を分離して復号し、文字放送データを生成する。文字放送データは、ＶＲＡＭ(Video Random Access Memory)などのビデオメモリ１６に書き込まれて一旦記憶された後、ビデオメモリ１６から読み出されて表示制御部１７に入力される。そして、表示制御部１７は、文字放送データを文字放送映像信号に変換して、映像信号生成部１５に入力する。
【００５４】
映像信号生成部１５は、復調部１３から入力された放送信号の中の番組映像信号と、表示制御部１７から入力された文字放送映像信号を重ねて、映像信号を生成する。映像信号生成部１５で生成された映像信号は、表示制御部１７を介して、表示部１８に入力される。その結果、表示部１８に番組映像と文字放送映像とが重畳されて出力される。
【００５５】
また、放送信号に文字放送信号が含まれていない場合、映像信号生成部１５は、復調部１３から入力された放送信号の中の番組映像信号から映像信号を生成し、表示制御部１７を介して、表示部１８に入力する。この結果、表示部１８から、番組映像が出力され、テレビジョン放送信号を再生することができるように構成されている。
【００５６】
また、テレビジョン装置３の主制御部１０は、ブラウザ起動部を有する。ブラウザ起動部は、リモコン装置２４の操作などに応答してＷＷＷブラウザプログラムを実行し、ＷＷＷブラウザを起動させ、通信部１９を介して、インターネット８に接続し、インターネット８上のホームページにアクセスする。次に、ブラウザ起動部は、通信部１９を介して、アクセスしたホームページの１フレーム分のページ情報を静止画として取得し、そのページ情報をビデオメモリ１６に書き込んで一旦記憶させた後、該ページ情報をビデオメモリ１６から読み出して、表示制御部１７に入力する。表示制御部１７は、そのページ情報を画像信号に変換して、表示部１８に入力する。この結果、表示部１８から、所定のホームページのページ情報が、ＷＷＷブラウザ画像の静止画として出力される。
【００５７】
このようにしてテレビジョン装置３は、インターネットに接続し、利用者に、リモコン装置２４の操作などを介して、インターネット８を利用することができるように構成されている。
【００５８】
さらに、テレビジョン装置３は、インターネット検索結果取得機能を有する。このインターネット検索結果取得機能は、主制御部１０が有する機能部としての文字検出部が、映像信号生成部１５で生成された映像信号から、文字認識によって、映像内の文字列を検出する。なお、ここでいう文字列とは、１以上の文字からなる文字の集合であって、ＵＲＬ（Uniform Resource Locator）などのアドレス情報をも含む。そして、文字検出部は、認識した文字列の中から、自然言語処理技術などを用いて、単語を検出する。
【００５９】
本実施形態において「ＵＲＬ」とは、インターネット上の各種リソースにアクセスする手段（scheme）と場所（scheme-specific-part）を表記した文字をいう。また、「アクセス」とは、コンピュータで、メモリや記憶装置に対してデータの読み出しや書き込みを行って、ネットワークや通信回線などを使って他のコンピュータに接続することをいう。さらに、「キーワード」とは、情報検索で、検索の手掛かりとして使用する語句をいう。さらに、「サーバ」とは、インターネットに接続されてＷＷＷサーバとしての機能を備えたコンピュータをいう。
【００６０】
図３は本発明の第１実施形態の情報処理装置１によるテレビジョン装置３のリモコン装置２４を使って検索キーワードを検索して表示する処理手順を示すフローチャートである。ステップＡ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＡ１で、主制御部１０がリモコン装置２４のボタンが押下されたことを検出すると、ステップＡ２で、押下されたボタンがメモボタン２５であるか否かが判断される。メモボタン２５でなければ、ステップＡ１へ戻り、前述と同様にリモコン装置２４のボタンが押下されたか否かを検出する。
【００６１】
ステップＡ１で押下されたボタンがメモボタン２５であれば、ステップＡ３へ移り、押下時点の映像を、静止画としてメインメモリ１１にコピーして記憶させる。ステップＡ４で、メインメモリ１１に転送された映像を表示部１８に表示させる。メモした静止画は、表示部１８の全画面に表示させてもよく、動画映像と静止画とを同時に表示させてもよい。
【００６２】
次に、ステップＡ５で、表示部１８に表示された静止画からキーワードを文字認識で抽出する。このようなキーワードは、静止画から文字認識によって文字列を検出し、その文字列からキーワードになる単語を抽出する処理によって達成される。
【００６３】
ステップＡ６で抽出したキーワードは、表示部１８に表示する。この抽出したキーワードは、静止画中の該当キーワード部分にリンクを埋め込んでもよく、静止画とキーワードとを分けて表示してもよい。
【００６４】
ステップＡ７で、表示部１８に表示された複数のキーワードの中から検索しようとするキーワードをリモコン装置２４などによって選択する。検索キーワードを選択すると、ブラウザが起動し、通信部１９は予め登録された検索サイトに選択したキーワードを送信する。
【００６５】
ステップＡ８で、ブラウザを起動し、検索サイトにキーワードを送信する。キーワードが送信されると、ステップＡ９で、検索サイトから検索結果を通信部１９が受信し、ステップＡ１０で、表示部１８に検索結果を表示させ、ステップＡ１１で選択したキーワードに対する検索動作を終了する。
【００６６】
このように本実施形態は、検索は後で行うアルゴリズムの一例であって、テレビジョン装置３を見ているときに、メモしたい情報がのっている映像のときに、リモコン装置２４のメモボタン２５を押すと、そのときの映像のスナップショット、すなわち静止画がテレビジョン装置３のメインメモリ１１に保存され、保存した静止画から文字認識で検索キーワードを抽出し、保存した後、リモコン装置２４の操作によってメモ一覧を表示して、保存された映像と抽出したキーワードとを確認することができる。また、キーワードを選択すると、ブラウザが立ち上がって検索エンジンで関連情報を検索することができるので、選択したキーワードについてテレビジョン装置３の映像を視聴者が見たままで調べることができる。
【００６７】
図４は本発明の第２実施形態の情報処理装置１によるメモした映像に書かれているキーワードを映像と一組にして不揮発性メモリ２０に保存するまでの処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。ステップＢ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＢ１で、リモコン装置２４のボタンを押下したことを検出する。ステップＢ２で、メモボタン２５が押下されたどうかが判断され、メモボタン２５でなければ、ステップＢ１へ戻り、リモコン装置２４のボタンが押下されたかどうかを検出する。
【００６８】
次に、ステップＢ３で、メモボタン２５の押下時点の映像の静止画がスナップショットとして、そのときの番組情報や日時などのメタ情報も併せてテレビジョン装置３のメインメモリ１１に保存される。
【００６９】
ステップＢ４で、保存された静止画から文字認識を使って全ての文字列を検出し、それらの文字列から検索対象情報として検索キーワードになる１または複数の単語を抽出する。
【００７０】
ステップＢ５で、映像とキーワードとが一組にして不揮発性メモリ２０に保存され、ステップＢ６で処理動作が終了される。映像とキーワードとの記憶は、不揮発性メモリ２０に限らず、テレビジョン装置３に内蔵されるＨＤＤなどに保存してもよい。
【００７１】
このように本実施形態においてもまた、前述の第１実施形態と同様に、テレビジョン装置３を見ているときに、メモしたい情報がのっている映像のときに、リモコン装置２４のメモボタン２５を押すと、そのときの映像のスナップショット、すなわち静止画がテレビジョン装置３のメインメモリ１１に保存して、保存した静止画から文字認識で検索キーワードを抽出し、ブラウザが立ち上がって検索エンジンで関連情報を検索することができるので、選択したキーワードについてテレビジョン装置３の映像を視聴者が見たままで調べることができる。
【００７２】
前述の図３よおび図４の各実施形態において、メモボタン２５の押下によって映像の一部を静止画としてメインメモリ１１に保存可能なメモモードに設定され、このメモモードの状態で保存保存された静止画にメモしたい情報が載っている画面であることを確認した後、リモコン装置２４の決定ボタン２６を押下することによって、その静止画をメインメモリ１１に保存するようにしてもよい。
【００７３】
図５は不揮発性メモリ２０に保存した映像の一覧から抽出したキーワードによって検索し、その検索結果を表示する処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。本実施形態では、リモコン装置２４は前記メモボタン２５および決定ボタン２６に加えて、メモ一覧ボタン２８（図１参照）を備える。
【００７４】
ステップＣ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＣ１で、リモコン装置２４のボタンが押下されたことを検出すると、ステップＣ２で、メモ一覧ボタン２８が押下されたかどうかが判断される。メモ一覧ボタン２８でなければステップＣ１へ戻り、メモ一覧ボタン２８であればステップＣ３へ移る。
【００７５】
前記ステップＣ１において、リモコン装置２４のボタンが押下されたことを検出したとき、前記メモ一覧ボタン２８に代えて、ホーム画面からメモ一覧を表示できるアプリケーションプログラムを直接起動するようにしてもよい。
【００７６】
次に、メモ一覧ボタン２８が押下されたと判断されると、ステップＣ３で、メモ一覧が表示部１８に表示される。メモ一覧は、全画面の場合と、映像とメモ一覧画像との分割表示の場合のいずれでもよい。ただし、いずれにしても利用者が意図してメモ一覧を表示させることができればよい。
【００７７】
ステップＣ４で、表示部１８に表示されたメモ一覧から検索キーワードを選択する。メモ一覧でメモした映像にリンクを埋め込んでもよく、あるいは映像とキーワードとを分けて表示させてもよいことは、前述の第１実施形態のステップＡ６と同様である。
【００７８】
ステップＣ５で、ブラウザを起動し、検索サイトにキーワードを送信する。ここでは、検索キーワードをリモコン装置２４などで選択することによって、ブラウザが起動し、予め登録された検索サイトに、選択したキーワードが通信部１９から送信される。
【００７９】
ステップＣ６で、検索サイトから検索結果を通信部１９が受信すると、ステップＣ７で検索結果が表示部１８に表示され、ステップＣ８で処理動作が終了する。このようにして、ブラウザを使って、検索結果を元にさらにＷｅｂページにアクセスして選択したキーワードについてテレビを見たまま調べることができる。
【００８０】
図６は本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７に保存するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。ステップＤ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＤ１で、インターネット８上の映像メモ用サーバ７にログインする。ステップＤ２で、リモコン装置２４のボタン押下を検出すると、ステップＤ３でメモボタン２５が押下されたかどうかが判断され、メモボタン２５でなければステップＤ２に戻り、メモボタン２５であれば、ステップＤ４へ移る。
【００８１】
ステップＤ４で、メモボタン２５の押下時点の映像のコピーをメインメモリ１１に保存する。ステップＤ５で、インターネット８上の映像メモ用サーバ７に映像を転送して保存し、ステップＤ６で処理動作を終了する。
【００８２】
このように本実施形態では、保存した映像（静止画）がインターネット８上の映像メモ用サーバ７に送られ、そのサーバ上で文字認識により検索キーワードを抽出することができる。またメモ一覧は、インターネット８上の映像メモ用サーバ７に保存される。
【００８３】
図７は本発明の第２実施形態の情報処理装置１によるメモしたい映像を映像メモ用サーバ７で受信し、文字認識によって検索キーワードを抽出する処理手順を示すフローチャートである。なお、前述の第１実施形態に対応する部分には同一の参照符を付す。ステップＥ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＥ１で、携帯端末４からのログインを受け付ける。
【００８４】
ステップＥ２で、携帯端末４からの映像を受信して保存する。このときの保存される情報は、携帯端末４からの映像だけでなく、メモボタン２５を押下したときの番組情報や日時などのメタ情報も合わせて受信して保存する。前記保存される情報は、本発明の他の実施形態において、テレビジョン装置３から転送された文字認識前の映像であってもよい。
【００８５】
ステップＥ３で、映像メモ用サーバ７に保存された映像、すなわち静止画からキーワードを文字認識で抽出する。このキーワードの抽出は、静止画から文字認識を使って文字列を検出し、その文字列からキーワードになる単語を抽出することによって行われる。このとき、文字認識は、別のサーバを使って処理してもよい。
【００８６】
ステップＥ４で、映像とキーワードとを一組にしてログインした映像メモ用サーバ７に保存した後、ステップＥ５で処理動作を終了する。
【００８７】
図８は本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像の静止画に書かれているキーワードを使って携帯端末４上で検索するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。ステップＦ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＦ１で、インターネット８上の映像メモ用サーバ７にログインする。
【００８８】
次に、ステップＦ２で、リモコン装置２４のボタン押下を検出する。ボタン押下を検出すると、ステップＦ３で、メモ一覧ボタン２８かどうかを判断し、メモ一覧ボタン２８であればステップＦ２へ戻り、メモ一覧ボタン２８であれば、ステップＦ４へ移る。
【００８９】
ステップＦ４で、メモ一覧要求を映像メモ用サーバ７に送信し、ステップＦ５で、通信部１９を介して受信したメモ一覧を表示部１８に表示させる。ステップＦ６で、利用者は表示部１８に表示されたメモ一覧から検索キーワードを選択する。キーワードが選択されると、ステップＦ７で、ブラウザが起動され、利用者が検索キーワードを選択すると、ステップＦ８で検索サイトからの検索結果が通信部１９を介して受信され、ステップＦ９で検索結果が表示部１８に表示された後、ステップＦ１０で処理動作が終了する。
【００９０】
図９は本発明の第３実施形態の情報処理装置１による映像メモ用サーバ７に保存した映像に書かれているキーワードを使って携帯端末４上で検索するまでの映像メモ用サーバ７の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【００９１】
ステップＧ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＧ１で、映像メモ用サーバ７が携帯端末４からのログインを受け付け、ステップＧ２で、携帯端末４からのメモ一覧要求を受信する。
【００９２】
ステップＧ３で、映像メモ用サーバ７は携帯端末４にメモ一覧を送信し、映像メモ用サーバ７にログインＩＤごとに保存されているメモ一覧を携帯端末４に送信し、ステップＧ４で処理動作を終了する。
【００９３】
図１０は本発明の第４実施形態の情報処理装置１によるテレビに接続した携帯端末上で映像に書かれているキーワードを使って検索するまでの携帯端末４の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【００９４】
ステップＨ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＨ１で、テレビジョン装置３にログインする。このログインは、携帯端末４から利用者操作によってログインしてもよく、同じネットワーク内でリモコン装置として利用するために予め登録済みであることを示す識別情報を検出することによって自動的にログインするようにしてもよい。さらにテレビジョン装置３へのログインに代えて、映像メモ用サーバにログインしてもよい。
【００９５】
ステップＨ３で、ボタン押下が検出されると、ステップＨ４でメモ一覧ボタン２８かどうかが判断され、メモ一覧ボタン２８でなければステップＨ２へ戻り、メモ一覧ボタン２８であれば、ステップＨ４でメモ一覧要求を通信部１９から送信する。ステップＨ５で、受信したメモ一覧を表示部１８に表示させ、利用者は表示部１８に表示されたメモ一覧から検索キーワードを選択する。ステップＨ６で、メモ一覧から検索キーワードが選択されると、ステップＨ７でブラウザが起動され、検索サイトに通信部１９からキーワードが送信され、検索サイトから検索結果を通信部１９が受信すると、ステップＨ８で、その検索結果が表示部１８に表示され、ステップＨ９で処理動作が終了する。このようにして、ブラウザを使って、検索結果を元にさらにＷｅｂページにアクセスして選択したキーワードについてテレビを見たまま調べることができる。
【００９６】
図１１は本発明の第４実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４上で映像に書かれているキーワードを使って検索するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【００９７】
ステップＩ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＩ１で、携帯端末４からのログインを映像メモ用サーバ７が受け付け、ステップＩ２で、主制御部１０は携帯端末４からの割り込みを検出する。
【００９８】
次に、ステップＩ３で、主制御部１０は、メモ一覧要求かどうかを判断し、メモ一覧要求でなければステップＩ２へ戻り、メモ一覧要求であれば、ステップＩ４へ移る。
【００９９】
ステップＩ４で、メモ一覧要求であれば、メモ一覧を映像メモ用サーバ７から携帯端末４に転送させ、ステップＩ５で処理動作を終了する。
【０１００】
図１２は本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索するまでの携帯端末４の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【０１０１】
ステップＪ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＪ１で、テレビジョン装置３にログインして携帯端末４をテレビジョン装置３のリモコン装置２４として認識させる。その後、第４実施形態と同様に、テレビジョン装置３にログインすると、携帯端末４でテレビジョン装置３の操作が可能となる。
【０１０２】
次に、ステップＪ２で、ボタン押下を検出すると、ステップＪ３で、メモボタン２５が押下されたかどうかが判断される。メモボタン２５でなければステップＪ２へ戻り、メモボタン２５であればステップＪ４へ移る。
【０１０３】
メモボタン２５が押下されると、ステップＪ４で、主制御部１０はメモ作成指示を通信部１９から送信させ、ステップＪ５で、転送されてきた映像とキーワードとを表示部１８に表示させる。以下、第４実施形態と同様に、テレビジョン装置３または映像メモ用サーバ７に接続し、ステップＪ６で、キーワードを使ってブラウザで検索し、予め登録された検索サイトに、選択したキーワードを通信部１９から送信させ、検索サイトから検索結果を通信部１９が受信すると、その検索結果が表示部１８に表示され、ステップＪ７で処理動作が終了する。
【０１０４】
図１３は本発明の第５実施形態の情報処理装置１によるテレビジョン装置３に接続した携帯端末４を使って検索キーワードを検索するまでのテレビジョン装置３の処理手順を示すフローチャートである。なお、前述の第１実施形態の情報処理装置１と対応する部分には同一の参照符を付す。
【０１０５】
ステップＫ０で、利用者が視聴者としてテレビジョン装置３を見ている状態で処理動作が開始され、ステップＫ１で、携帯端末４からのログインを受け付け、ステップＫ２で、携帯端末４からの割り込みを検出し、ステップＫ３でメモボタン２５が押下されたかどうかを判断する。メモボタン２５でなければステップＫ２へ戻り、メモボタン２５であればステップＫ４へ移る。
【０１０６】
ステップＫ４で、メモボタン２５の押下時点の映像を、静止画としてメインメモリ１１にコピーして記憶させる。このとき、第１実施形態と同様に、メモしたい情報が載っている画像であれば、リモコン装置２４の所定のボタン、すなわち決定ボタン２６を押下すると、そのときの映像のスナップショット、すなわち静止画がテレビジョン装置３のメインメモリ１１に転送されて記憶され、ステップＫ４で、メインメモリ１１に転送された映像を表示部１８に表示させる。メモした静止画は、表示部１８の全画面に表示させてもよく、動画映像と静止画とを同時に表示させてもよい。
【０１０７】
ステップＫ５で、メインメモリ１１に記憶された静止画からキーワードを文字認識で抽出し、第３実施形態と同様に、インターネット８上の映像メモ用サーバ７に送信するようにしてもよい。
【０１０８】
ステップＫ６で、静止画とキーワードとを一組にして不揮発性メモリ２０に保存する。ステップＫ７で、不揮発性メモリ２０に保存した静止画とキーワードとを携帯端末４に通信部１９から転送させ、ステップＫ８で処理動作を終了する。
【０１０９】
以上のように、テレビジョン装置３を視聴中に気になった映像があったらリモコン装置２４のメモボタン２５を押下して映像を静止画として保存し、後で保存した静止画から文字認識して抽出したキーワードを一覧し、その中からキーワードを選んで検索することができる。文字認識は、自端末であるテレビジョン装置３によって行ってもよく、インターネット８上に映像メモ用サーバ７を置いて、そこで文字認識を行ってもよい。
【０１１０】
また、検索キーワードは、Ethernet（登録商標）および無線ＬＡＮなどのネットワークで接続された携帯端末４に転送して、そこで検索するようにしてもよい。
【０１１１】
さらに、携帯端末４をテレビジョン装置３と接続して、テレビジョン装置３の視聴中に気になった映像があったとき、携帯端末４を操作すると自動的に文字認識して抽出したキーワードが携帯端末４に転送されるように構成されてもよい。
【０１１２】
第１〜５実施形態によれば、必要な映像だけ文字認識を行うので、処理負荷が低い情報処理装置１を実現することができる。また、利用者が必要とするときにブラウザを表示するので、テレビジョン装置３の視聴の妨げにならない。さらに、テレビジョン装置３を見ながら関連情報を手元の携帯端末４によって簡単に検索することができる。
【０１１３】
また、第３実施形態のように、携帯端末で映像メモを見る一例として、携帯端末４からテレビジョン装置３または映像メモ用サーバ７上のメモ一覧を見るようにすると、携帯端末４にメモ一覧が転送され、携帯端末４によってキーワードを選択すると、ブラウザが立ち上がって検索エンジンで関連情報を検索することができる。
【０１１４】
さらに、前述の第１〜第５実施形態では、検索対象情報として文字列を用いる場合について述べたが、本発明の他の実施形態では、前記文字列に代えてデジタル写真データなどの画像情報を検索対象情報として用いるようにしてもよい。この場合においても、文字列を検索対象情報とする場合と同様に、テレビジョン放送を中断でせずに、情報処理システム２の情報処理の負荷を少なくして、ユーザの希望する画像情報に関連した情報を検索結果情報として得ることができる。
【０１１５】
本発明は、ネットワーク対応のテレビジョン装置３にて、情報処理システムおよび情報処理方法について説明したが、本発明におけるテレビジョン放送は、テレビジョン放送のみならず、インターネットを介した放送、ビデオオンデマンド、インターネットＷｅｂサービスなど、テレビジョンなどの表示装置に表示して利用できるようなサービス受信機能全般に適応することができる。
【符号の説明】
【０１１６】
１ 情報処理装置
２ 情報処理システム
３ テレビジョン装置
４ 携帯端末
５ ルータ
６ 検索サーバ
７ 映像メモ用サーバ
１０ 制御部
１１ メインメモリ
１２ チューナ部
１３ 復調部
１４ 映像信号復号部
１５ 映像信号生成部
１６ ビデオメモリ
１７ 表示制御部
１８ 表示部
１９ 通信部
２０ 不揮発性メモリ
２１ バス
２３ 入力部
２４ リモコン装置
２５ メモボタン
２６ 決定ボタン
２７ アンテナ
【特許請求の範囲】
【請求項１】
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部と、
表示部に表示される映像から静止画を抽出する静止画抽出部と、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部と、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部と、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部と、
情報検索部によって検索されて抽出された情報を受信する受信部と、
受信部によって受信された情報を表示部に表示させる表示制御部とを含むことを特徴とする情報処理装置。
【請求項２】
検索対象情報抽出部に接続され、表示部に表示される映像から静止画を抽出させる静止画抽出指令手段を含むことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
検索対象情報抽出部に接続され、抽出した静止画から検索対象情報を抽出させる検索対象情報抽出指令手段を含むことを特徴とする請求項１または２に記載の情報処理装置。
【請求項４】
静止画抽出部に接続され、静止画抽出部によって抽出された静止画を記憶するサーバを含み、
検索対象情報抽出部は、前記サーバに記憶される静止画から検索対象情報を抽出することを特徴とする請求項１〜３のいずれか１つに記載の情報処理装置。
【請求項５】
検索対象情報抽出部は、前記サーバに記憶される静止画を表示可能であることを特徴とする請求項４に記載の情報処理装置。
【請求項６】
静止画抽出指令手段および検索対象情報抽出指令手段は、通信ネットワークに接続可能な携帯端末装置であることを特徴とする請求項１〜５のいずれか１つに記載の情報処理装置。
【請求項７】
前記検索対象情報は、文字列であることを特徴とする請求項１〜６のいずれか１つに記載の情報処理装置。
【請求項８】
前記検索対象情報は、画像情報であることを特徴とする請求項１〜６のいずれか１つに記載の情報処理装置。
【請求項９】
コンピュータを、
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部、
表示部に表示される映像から静止画を抽出する静止画抽出部、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部、
情報検索部によって検出されて抽出された情報を受信する受信部、および
受信部によって受信された情報を表示部に表示させる表示制御部として機能させるコンピュータ読取り可能なプログラム。
【請求項１０】
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示手段に表示させる映像表示工程と、
表示手段に表示される映像から静止画を静止画抽出手段によって抽出する静止画抽出工程と、
通信ネットワークに接続される情報検索手段によって、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索工程と、
静止画抽出手段によって抽出された静止画から検索対象情報を検索対象情報抽出手段によって抽出する検索対象情報抽出工程と、
検索対象情報抽出手段によって抽出した検索対象情報を情報検索手段に送信する送信工程と、
受信手段によって、情報検索手段によって検索されて抽出された情報を受信する受信工程と、
受信手段によって受信された情報を表示制御手段によって表示手段に表示させる表示制御工程とを含むことを特徴とする情報処理方法。
【請求項１】
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部と、
表示部に表示される映像から静止画を抽出する静止画抽出部と、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部と、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部と、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部と、
情報検索部によって検索されて抽出された情報を受信する受信部と、
受信部によって受信された情報を表示部に表示させる表示制御部とを含むことを特徴とする情報処理装置。
【請求項２】
検索対象情報抽出部に接続され、表示部に表示される映像から静止画を抽出させる静止画抽出指令手段を含むことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
検索対象情報抽出部に接続され、抽出した静止画から検索対象情報を抽出させる検索対象情報抽出指令手段を含むことを特徴とする請求項１または２に記載の情報処理装置。
【請求項４】
静止画抽出部に接続され、静止画抽出部によって抽出された静止画を記憶するサーバを含み、
検索対象情報抽出部は、前記サーバに記憶される静止画から検索対象情報を抽出することを特徴とする請求項１〜３のいずれか１つに記載の情報処理装置。
【請求項５】
検索対象情報抽出部は、前記サーバに記憶される静止画を表示可能であることを特徴とする請求項４に記載の情報処理装置。
【請求項６】
静止画抽出指令手段および検索対象情報抽出指令手段は、通信ネットワークに接続可能な携帯端末装置であることを特徴とする請求項１〜５のいずれか１つに記載の情報処理装置。
【請求項７】
前記検索対象情報は、文字列であることを特徴とする請求項１〜６のいずれか１つに記載の情報処理装置。
【請求項８】
前記検索対象情報は、画像情報であることを特徴とする請求項１〜６のいずれか１つに記載の情報処理装置。
【請求項９】
コンピュータを、
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示する表示部、
表示部に表示される映像から静止画を抽出する静止画抽出部、
通信ネットワークに接続され、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索部、
静止画抽出部によって抽出された静止画から検索対象情報を抽出する検索対象情報抽出部、
検索対象情報抽出部によって抽出した検索対象情報を情報検索部に送信する送信部、
情報検索部によって検出されて抽出された情報を受信する受信部、および
受信部によって受信された情報を表示部に表示させる表示制御部として機能させるコンピュータ読取り可能なプログラム。
【請求項１０】
テレビジョン放送の映像信号を受信し、受信した映像信号の映像を表示手段に表示させる映像表示工程と、
表示手段に表示される映像から静止画を静止画抽出手段によって抽出する静止画抽出工程と、
通信ネットワークに接続される情報検索手段によって、検索対象情報の入力に応答して、通信ネットワーク上で情報を検索して抽出する情報検索工程と、
静止画抽出手段によって抽出された静止画から検索対象情報を検索対象情報抽出手段によって抽出する検索対象情報抽出工程と、
検索対象情報抽出手段によって抽出した検索対象情報を情報検索手段に送信する送信工程と、
受信手段によって、情報検索手段によって検索されて抽出された情報を受信する受信工程と、
受信手段によって受信された情報を表示制御手段によって表示手段に表示させる表示制御工程とを含むことを特徴とする情報処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１２−１０３７６０（Ｐ２０１２−１０３７６０Ａ）
【公開日】平成２４年５月３１日（２０１２．５．３１）
【国際特許分類】
【出願番号】特願２０１０−２４９１９０（Ｐ２０１０−２４９１９０）
【出願日】平成２２年１１月５日（２０１０．１１．５）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＦＲＡＭ
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２４年５月３１日（２０１２．５．３１）
【国際特許分類】
【出願日】平成２２年１１月５日（２０１０．１１．５）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＦＲＡＭ
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]