情報処理装置、情報処理システムおよび情報処理方法
【課題】無線操作装置からの操作を通じて、任意の画像を画像処理系のアプリケーションに引き渡す際の操作性の向上を図る。
【解決手段】連続撮影が可能なカメラ部を有し、情報処理装置への操作信号の送信および前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への伝送を無線通信により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、表示画面を有する表示部と、前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、前記表示された画像の系列に対する前記無線操作装置からの第１の操作信号による任意のタイミングの画像の選択を受け付けて当該画像を保存する画像保存部とを具備する。
【解決手段】連続撮影が可能なカメラ部を有し、情報処理装置への操作信号の送信および前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への伝送を無線通信により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、表示画面を有する表示部と、前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、前記表示された画像の系列に対する前記無線操作装置からの第１の操作信号による任意のタイミングの画像の選択を受け付けて当該画像を保存する画像保存部とを具備する。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、情報処理装置、情報処理システムおよび情報処理方法に係り、特に無線操作装置からの無線信号によって操作されるテレビジョン受像機などの情報処理装置、この情報処理装置と無線操作装置からなる情報処理システムおよび情報処理方法に関する。
【背景技術】
【０００２】
テレビジョン受像機などの情報処理装置をリモートコントロールする無線操作装置は、赤外線通信を利用する赤外線リモコンが主流とされてきた。しかし、赤外線リモコンでは、赤外線の指向性が強いために、リモコンを被制御機器の方向へ赤外線の発光部を向ける必要があった。これに対し、電波の指向性は比較的弱いため、近年では、高周波電波を用いたＲＦ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）リモコンが開発されて主流となりつつある。また、ＲＦリモコンの規格を標準化するための試みが各団体によってなされている。
【０００３】
例えば、近距離無線通信規格ＩＥＥＥ（登録商標）（Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃ Ｅｎｇｉｎｅｅｒｓ）８０２．１５．４に準拠し、ＩＥＥＥ（登録商標）８０２．１５．４の上位に相当するネットワーク層、セキュリティ層、アプリケーション層の仕様としてＺｉｇＢｅｅ（登録商標）が標準化されている。さらに、ＩＥＥＥ（登録商標）８０２．１５．４をもとに、業界団体によってＲＦリモコン規格ＺｉｇＢｅｅ（登録商標） ＲＦ４ＣＥ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ｆｏｒ Ｃｏｎｓｕｍｅｒ Ｅｌｅｃｔｒｏｎｉｃｓ）が標準化されている。
【０００４】
例えば、特許文献１には、ＲＦ４ＣＥなどのＲＦ無線信号を用いてテレビジョン受像機などの情報処理装置をコントロールする操作端末に関する技術が開示されている。
【０００５】
また、特許文献２には、ウェブブラウザとつなげられたビデオカメラにより撮影された映像を遠隔でユーザが見ることを可能にするために、ウェブカメラで取得された画像をウェブサーバとインターネットなどを介してパーソナルコンピュータに送信することが記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１１−０３４２９４号公報
【特許文献２】特表２００５−５００７７２号公報（段落［０００４］等）
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、近年、テレビジョン受像機などの情報処理装置の多機能化は目覚しく、例えば、インターネットに接続して、インターネット上の様々なウェブアプリケーションを利用することが可能なテレビジョン受像機などの情報処理装置も登場している。ＲＦリモコンなどの無線操作装置は、文字列などのデータもテレビジョン受像機などの情報処理装置に伝送することができるので、情報処理装置からのウェブアプリケーションの利用性を高める上で有効な操作手段と言える。
【０００８】
しかしながら、例えば、画像に含まれる文字や人物の顔など認識し、その結果を返すといった画像処理系のウェブアプリケーションなどを、無線操作装置によって操作される情報処理装置から利用しようとなると、既存の無線操作装置を利用する範囲では不十分である。すなわち、既存の無線操作装置では、そもそも画像を情報処理装置に伝送することまでは考慮されていないからである。
【０００９】
本技術の目的は、無線操作装置からの操作を通じて、任意の画像を画像処理系のアプリケーションに引き渡す際の操作性の向上を図ることのできる情報処理装置、情報処理システムおよび情報処理方法を提供することにある。
【課題を解決するための手段】
【００１０】
上記目的を達成するため、本技術の一形態に係る情報処理装置は、連続撮影が可能なカメラ部を有し、前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への送信を無線により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、表示画面を有する表示部と、前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と具備する。
【００１１】
この情報処理装置は、表示画面を、無線操作装置のカメラ部によって連続撮影された画像の系列を無線操作装置のユーザがリアルタイムに確認するためのファインダー画面として提供する。無線操作装置のユーザは、情報処理装置の表示画面を通してカメラ部によって撮影中の画像の系列を確認しつつ、保存したい画像を選択することができる。保存された画像は、無線操作装置の操作によって、例えば、情報処理装置内のアプリケーションあるいはインターネット上のアプリケーションなどに適宜供給される。すなわち、この情報処理装置によれば、画像の取り込みから、アプリケーションへの供給などの一連の操作性の向上を図ることができる。また、無線操作装置にファインダーを設ける必要がなくなるため、無線操作装置の小型化、軽量化、消費電力の低減を図ることができる。
【００１２】
また、本技術は、表示用のコンテンツを取得するコンテンツ取得部をさらに具備し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させるものであってよい。
【００１３】
コンテンツとその中の撮影範囲の映像を情報処理装置の表示画面に同時に表示することができる。これにより、例えば、表示中のコンテンツから空間的および時間的に所望の部分を選択して保存する際の操作性が向上する。
【００１４】
この情報処理装置は、前記無線操作装置からの無線による第２の操作信号をもとに、前記保存された画像の中から処理対象の画像を選択する画像選択部と、前記無線操作装置からの無線による第３の操作信号をもとに、前記選択された処理対象の画像に対して実行する処理を選択する処理選択部とをさらに具備するものであってよい。これにより、保存された１以上の画像の中から処理対象の画像の選択、およびこの画像に対して実行する処理の選択を、無線操作装置の操作によって行うことが可能になる。
【００１５】
前記表示制御部は、前記画像保存部に保存された画像の縮小画像による一覧を前記表示部の表示画面に表示し、前記画像選択部は、前記保存された画像の縮小画像による一覧に対する前記無線操作装置からの前記第２の操作信号をもとに前記処理対象の画像を選択するものであってよい。これにより処理対象としての画像を選択する際の操作性が向上する。
【００１６】
前記表示制御部は、選択可能な処理の一覧を前記表示部の表示画面に表示し、前記処理選択部は、前記選択可能な処理の一覧に対する前記無線操作装置からの前記第３の操作信号をもとに処理を選択するものであってよい。これにより画像に対して実行する処理を選択する際の操作性が向上する。
【００１７】
この情報処理装置は、前記画像選択部により選択された前記処理対象の画像に対して、前記処理選択部により選択された処理を実行する処理実行部をさらに具備するものであってよい。
【００１８】
前記無線は無線ＬＡＮであってよい。無線ＬＡＮの利用により、カメラ部で得た画像の系列を情報処理装置に伝送してリアルタイムに表示するために必要な通信帯域を確保できる。
【００１９】
また、この情報処理装置は、前記画像選択部により選択された前記処理対象の画像を含む処理要求を、前記処理選択部により選択された処理を実行することが可能なウェブ上のサーバに送信する処理要求部をさらに具備するものであってよい。
【００２０】
本技術に係る第２の側面である情報処理システムは、無線操作装置と、この無線操作装置によって無線により操作可能な情報処理装置とを具備し、前記無線操作装置は、連続撮影が可能なカメラ部と、前記カメラ部で連続撮影された画像の系列を無線により前記情報処理装置へ送信する画像送信部とを具備し、前記情報処理装置は、表示画面を有する表示部と、前記無線操作装置より送信された前記画像の系列を受信する画像受信部と、前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と、表示用のコンテンツを取得するコンテンツ取得部とを具備し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる。
【００２１】
本技術に係る第３の側面である情報処理方法は、無線操作装置は、カメラ部で連続撮影された画像の系列を、当該無線操作装置の操作対象である情報処理装置に無線により送信し、前記情報処理装置において、表示制御部は、前記無線操作装置より受信した前記画像の系列を表示画面に順次表示し、画像保存部は、前記表示された画像の系列に対する前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存し、コンテンツ取得部は、表示用のコンテンツを取得し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる、という手順を有する。
【発明の効果】
【００２２】
本技術によれば、無線操作装置からの操作を通じて、任意の画像を画像処理系のアプリケーションに引き渡す際の操作性の向上を図れる。
【図面の簡単な説明】
【００２３】
【図１】本技術に係る第１の実施形態の情報処理システムの構成を示すブロック図である。
【図２】図１の情報処理システムにおける情報処理装置のハードウェア構成を示す図である。
【図３】図１の情報処理システムにおける無線操作装置の正面側の外観図である。
【図４】図３の無線操作装置の背面側の外観図である。
【図５】図３の無線操作装置のハードウェア構成を示す図である。
【図６】図２の情報処理装置のカメラＵＩ画面を示す図である。
【図７】図１の情報処理システムの動作シーケンス図である。
【図８】初期のカメラＵＩ画面の例を示す図である。
【図９】コンテンツ表示領域の一部を撮影対象としたときのカメラＵＩ画面の例を示す図である。
【図１０】カメラ撮影画像を保存するときの保存画像の一覧領域の更新の様子を示す図である。
【図１１】カメラＵＩ画面における保存画像の一覧領域を示す図である。
【図１２】保存画像の拡大画像を表示したカメラＵＩ画面を示す図である。
【図１３】アプリケーション選択画面を有するカメラＵＩ画面の例を示す図である。
【発明を実施するための形態】
【００２４】
以下、本技術に係る実施形態を、図面を参照しながら説明する。
＜第１の実施形態＞
図１は、本技術に係る第１の実施形態の情報処理システムの構成を示すブロック図である。同図に示すように、本実施形態の情報処理システム１００は、操作対象である情報処理装置２００と、情報処理装置２００を無線信号を用いて遠隔操作するための無線操作装置３００とを有する。情報処理装置２００は、例えば、テレビジョン受像機、パーソナルコンピュータ、レコーダ、プレーヤ、ゲーム機などであるが、ディスプレイに表示する機能を有する機器であればよい。
【００２５】
無線操作装置３００は、連続撮影が可能なカメラモジュール（カメラ部）を搭載する。ユーザはこのカメラモジュールで、情報処理装置２００の表示画面に表示されたコンテンツや、その他の任意の被写体を連続撮影することができる。カメラモジュールによる連続撮影によって得られた画像データの系列は無線ＬＡＮを使って情報処理装置２００に伝送することができる。
【００２６】
情報処理装置２００は、例えば、無線操作装置３００のカメラモジュールによって連続撮像された画像データ（以下「カメラ撮影画像」と呼ぶ。）の系列を無線ＬＡＮを通じて受信し、外部のディスプレイまたは内部のディスプレイにリアルタイムに表示することができる。また、情報処理装置２００は、カメラ撮影画像の系列の表示中に無線操作装置３００より送信される第１の操作信号をもとに、その時点で表示されているカメラ撮影画像を保存することができる。さらに、情報処理装置２００は、保存された１以上のカメラ撮影画像の中から無線操作装置３００より送信される第２の操作信号によって選択されたカメラ撮影画像を、無線操作装置３００より送信される第３の操作信号によって選択された任意のアプリケーションに引き渡してアプリケーションによる処理を実行させることができる。
【００２７】
近年、無線リモコンの分野においては、高周波電波を用いたＲＦ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）リモコンが主流となりつつある。具体的には、家電用ＲＦリモコンの国際規格であるＲＦ４ＣＥ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ｆｏｒ Ｃｏｎｓｕｍｅｒ Ｅｌｅｃｔｒｏｎｉｃｓ）などがある。しかし、ＲＦ４ＣＥの通信速度の理論値は２５０Ｋｂｐｓである。この速度は制御信号などの伝送には十分であるが、画像データのリアルタイム伝送には十分とは言えない。
【００２８】
本実施形態の情報処理システム１００は、例えばＩＥＥＥ ８０２．１１ｂ規格などに準拠した無線ＬＡＮをカメラ撮影画像のリアルタイム伝送に用いる。ＩＥＥＥ ８０２．１１ｂ規格では、公称速度が１１Ｍｂｐｓとされており、ＲＦ４ＣＥに比較して十分高速である。
以下に、本実施形態の情報処理システム１００の詳細を説明する。
【００２９】
［情報処理装置２００の構成］
まず、情報処理装置２００の構成から説明する。
図２は情報処理装置２００のハードウェア構成を示す図である。
本実施形態では、情報処理装置２００としてテレビジョン受像機を用いた場合を説明する。
【００３０】
この情報処理装置２００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１、バス２０２、メモリ２０３、ストレージ２０４、ネットワークＩ／Ｆ２０６、無線通信部２０７を有する。情報処理装置２００は、また、アンテナ２０９、チューナ２１０、デスクランブラ２１１、デマルチプレクサ２１２、Ａｕｄｉｏデコーダ２１３、Ｖｉｄｅｏデコーダ２１４、音声処理回路２１５、スピーカ２１６、ＧＵＩ重畳器２１７、映像処理回路２１８、ディスプレイ２１９（表示部）を有している。
【００３１】
この情報処理装置２００では、ＣＰＵ２０１が、バス２０２を介して接続されたメモリ２０３又はストレージ２０４に記憶されているプログラムに従って各種処理を実行する。またＣＰＵ２０１は、
【００３２】
無線通信部２０７（画像受信部）は、例えば、ＩＥＥＥ ８０２．１１ｂ規格などに準拠した無線ＬＡＮを用いて、無線操作装置３００との間で双方向の通信を行う。
アンテナ２０９は、デジタル放送信号などを受信してチューナ２１０に入力する。
【００３３】
チューナ２１０は、デジタル放送信号から所定のチャンネルの放送信号を抽出する。チューナ２１０は、この抽出した放送信号に対して復調処理を施して得た所定のチャンネルのトランスポートストリームをデスクランブラ２１１に出力する。
【００３４】
デスクランブラ２１１は、情報処理装置２００に装着された所定のＩＣカード（図示せず）にあらかじめ記憶されている解除キーを用いて、チューナ２１０から入力されたトランスポートストリームのスクランブルを解除する。デスクランブラ２１１は、このスクランブル解除済のトランスポートストリームをデマルチプレクサ２１２に出力する。
【００３５】
デマルチプレクサ２１２は、デスクランブラ２１１から入力されたスクランブル解除済のトランスポートストリームからオーディオデータとビデオデータとを分離する。デマルチプレクサ２１２は、分離したオーディオデータをＡｕｄｉｏデコーダ２１３に出力し、分離したビデオデータをＶｉｄｅｏデコーダ２１４に出力する。
【００３６】
Ａｕｄｉｏデコーダ２１３は、デマルチプレクサ２１２から入力されたオーディオデータをデコードし、得られた音声データを、音声処理回路２１５に出力する。
音声処理回路２１５は、Ａｕｄｉｏデコーダ２１３から入力された音声データに対してＤ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換、増幅処理などを施し、得られた音声信号をスピーカ２１６に出力する。
【００３７】
Ｖｉｄｅｏデコーダ２１４は、デマルチプレクサ２１２から入力されたビデオデータをデコードし、得られた映像データを、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）重畳器２１７に出力する。
【００３８】
ＧＵＩ重畳器２１７は、Ｖｉｄｅｏデコーダ２１４から入力された映像データに対して、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）などのグラフィックデータを重畳して、映像処理回路２１８に出力する。
映像処理回路２１８は、ＧＵＩ重畳器２１７から入力された映像データに対して、所定の画像処理、Ｄ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換などを施し、得られた映像信号をディスプレイ２１９に出力する。
【００３９】
また、ＣＰＵ２０１は、無線操作装置３００からの録画に関する操作信号、あるいはメモリ２０３に設定された録画予約のための情報をもとに、デジタル放送を受信し、所定のチャンネルのトランスポートストリームを得て、これを番組の映像音声データとして、ストレージ２０４に保存することができる。
【００４０】
このようにして、情報処理装置２００は、デジタル放送を受信して、その番組を視聴可能なようにディスプレイ２１９およびスピーカ２１６を通じて出力したり、ストレージ２０４に録画したりすることができる。また、ＣＰＵ２０１は、ネットワークＩ／Ｆ２０６を通じてインターネットにアクセスし、取得したウェブページをディスプレイ２１９に表示させたりすることもできる。
【００４１】
メモリ２０３あるいはストレージ２０４には、カメラ撮影アプリケーション、ウェブブラウザ、録画予約アプリケーションなど、各種のアプリケーションプログラムが格納されている。
【００４２】
［無線操作装置３００の構成］
次に、無線操作装置３００の構成を説明する。
図３及び図４は無線操作装置３００の外観図である。
【００４３】
図３に示すように、無線操作装置３００の正面にはキーボード３１０、リモコンキー３２０、ポインティングデバイス３３０などが設けられている。キーボード３１０には、文字入力などに用いられる複数のキーが設けられている。リモコンキー３２０には、テレビジョン受像機用の主電源ボタン３２１、セットトップボックス用の主電源ボタン３２２、ＢＤ（ｂｌｕ−ｒａｙ）／ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）用の操作ボタン３２３、音声ボリューム調整ボタン３２４、チャンネル切り替えボタン３２５、カメラボタン３２６などが設けられている。
【００４４】
図４に示すように、無線操作装置３００の筐体３４０の左右の部分は、ユーザの左右の手で握り易いように膨出させてある。これにより左右一対のハンドル部３４１Ｌ、３４１Ｒが設けられている。また、筐体３４０の背面の左右一対のハンドル部３４１Ｌ、３４１Ｒの間にはカメラモジュール３０３のレンズ穴３４３が設けられている。さらに、筐体３４０の背面の左右一対のハンドル部３４１Ｌ、３４１Ｒの間にはバッテリの着脱用のスライド蓋３４５が設けられている。このスライド蓋３４５を開いた場所にバッテリが装着される。
【００４５】
図５は、無線操作装置３００のハードウェア構成を示す図である。
無線操作装置３００は、ＣＰＵ３０１、無線通信部３０２、カメラモジュール３０３、エンコーダ３０４、不揮発性記憶部３０５、リモコンキー３２０、キーボード３１０を有する。無線操作装置３００は、また、ポインティングデバイス３３０、マイクユニット３０８などを有する。
【００４６】
ＣＰＵ３０１は、無線操作装置３００を構成する各ブロックの全体的な制御、各種の演算処理、各ブロック間でのデータのやりとりを制御する。
【００４７】
無線通信部３０２は、情報処理装置２００との間で双方向の通信を行う。例えば、ＩＥＥＥ ８０２．１１ｂ規格などに準拠した無線ＬＡＮを利用することができる。
【００４８】
カメラモジュール３０３は、情報処理装置２００へ伝送する画像を撮影するためのものである。カメラモジュール３０３は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ ｏｘｉｄｅ ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサなどの撮像素子と、撮像素子の出力をＡ／Ｄ変換するＡ／Ｄコンバータなどで構成される。
【００４９】
エンコーダ３０４は、カメラモジュール３０３で得た画像をＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）などの標準的な符号化データにエンコードする。
【００５０】
不揮発性記憶部３０５は、符号化された画像データなどの保存に用いられる。
ポインティングデバイス３３０は、情報処理装置２００の画面上のポインティングカーソルの操作など、座標などのデータを入力するための手段である。ポインティングデバイス３３０は光学マウスなどの構造を有するものである。
マイクユニット３０８は、主にユーザの声の集音に用いられ、音声を捕らえて電気信号に変換してＣＰＵ３０１に供給する。
【００５１】
［カメラＵＩ画面］
次に、情報処理装置２００のディスプレイ２１９に表示されるカメラＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面について説明する。
図６はカメラＵＩ画面の例を示す図である。
カメラＵＩ画面１１には、コンテンツ表示領域１２、カメラファインダー領域１３、シャッターボタン１４、保存画像の一覧領域１５などが設けられている。
【００５２】
コンテンツ表示領域１２とカメラファインダー領域１３とは互いに左右に隣り合わせで配置される。シャッターボタン１４はカメラファインダー領域１３の下方近傍に設けられる。保存画像の一覧領域１５は、カメラＵＩ画面１１の下部に設けられる。
【００５３】
コンテンツ表示領域１２は、情報処理装置２００にて受信されたデジタル放送およびウェブページなどのコンテンツが表示される領域である。情報処理装置２００は、地上デジタル放送、有線放送、衛星放送などのテレビジョン放送コンテンツを受信する機能と、インターネット上のウェブページおよび画像（静止画、動画）などのウェブコンテンツを取得する機能（コンテンツ取得部）を備える。すなわち、コンテンツ表示領域１２には、ユーザにより選択されたテレビジョン放送コンテンツ、ウェブコンテンツなどが表示される。
【００５４】
カメラファインダー領域１３は、無線操作装置３００のカメラモジュール３０３による連続撮影によって得られたカメラ撮影画像の系列が表示される領域である。
シャッターボタン１４は、カメラファインダー領域１３に表示されたカメラ撮影画像の系列において、保存したいタイミングのカメラ撮影画像をユーザに選択させるための指示を受け付けるＧＵＩ要素である。このシャッターボタン１４の操作は、例えば、無線操作装置３００のポインティングデバイス３３０を操作してポインティングカーソルをシャッターボタン１４の上に移動させて決定キーを操作したり、カメラボタン３２６を操作したりすることによって行われる。
【００５５】
情報処理装置２００のＣＰＵ２０１は、無線操作装置３００からの操作信号（第１の操作信号）をもとにシャッターボタン１４が操作されたことを知ると、その時点でカメラファインダー領域１３に表示されているカメラ撮影画像をストレージ２０４に保存する処理を行う。このとき保存画像の一覧領域１５への表示用として解像度を落とした縮小画像も生成され、カメラ撮影画像と関連付けてストレージ２０４に保存される。
【００５６】
保存画像の一覧領域１５は、ストレージ２０４に保存されたカメラ撮影画像の縮小画像が、例えば、保存日時の順番など、予め決められた順序に並べて表示される領域である。
【００５７】
［情報処理システム１００の動作］
次に、情報処理システム１００の動作を説明する。
図７は情報処理システム１００の動作、特に無線操作装置３００から情報処理装置２００へのカメラ撮影画像の系列の伝送、保存、アプリケーションへの引き渡しなどに関するシーケンス図である。
【００５８】
無線操作装置３００のカメラボタン３２６（図３参照）がユーザによって操作されると（ステップＳ１）、ＣＰＵ３０１によってこれが検出される。ＣＰＵ３０１はカメラボタン３２６が操作されたことを示すカメラボタン操作信号を無線通信部３０２によって情報処理装置２００に送信する（ステップＳ２）。
【００５９】
情報処理装置２００のＣＰＵ２０１は無線通信部２０７を介してカメラボタン操作信号を受信すると、カメラ撮影アプリケーションを起動する（ステップＳ３）。ＣＰＵ２０１は、カメラ撮影アプリケーションから与えられる処理手順に従って、まず、無線操作装置３００のカメラモジュール３０３を起動させるためのカメラ起動命令を無線通信部２０７を用いて無線操作装置３００に送信するとともに（ステップＳ４−ａ）、ディスプレイ２１９にカメラＵＩ画面を表示させる（ステップＳ４−ｂ）。
【００６０】
図８は初期のカメラＵＩ画面１１Ａの例を示す図である。カメラファインダー領域１３には、無線操作装置３００のカメラモジュール３０３からカメラ撮影画像が伝送されてくるまでの間、カメラ撮影画像の伝送待ちであることを示すアイコンや文字列が表示される。保存画像の一覧領域１５には、過去に保存されたカメラ撮影画像の縮小画像１５−１，１５−２，１５−３が保存の日時順に表示されている。
【００６１】
無線操作装置３００のＣＰＵ３０１は、無線通信部３０２を通じてカメラ起動命令を受け取ると、カメラモジュール３０３の起動処理を行う（ステップＳ５）。カメラモジュール３０３は、起動後、情報処理装置２００のカメラ撮影アプリケーションとの間での接続を確立するために必要な情報（例えば、ポート番号、ＩＰアドレスなど）の交換を行う（ステップＳ６）。無線操作装置３００のカメラモジュール３０３と情報処理装置２００のカメラ撮影アプリケーションとの接続状態が確立すると、カメラモジュール３０３は、自身の撮像素子で得た撮像信号から一定時間毎の静止画像の系列（カメラ撮影画像の系列）を生成する。静止画像の形式としては、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）などが採用される。カメラモジュール３０３によって生成されたカメラ撮影画像の系列は、無線通信部３０２によって情報処理装置２００に宛てて送信される（ステップＳ７）。
【００６２】
情報処理装置２００のＣＰＵ２０１（表示制御部）は、無線通信部２０７を通じてカメラ撮影画像の系列を受信すると、これを順次Ｖｉｄｅｏデコーダ２１４にて復号し、ディスプレイ２１９の画面に設けられたカメラファインダー領域１３に連続して表示させる（ステップＳ８）。これによりカメラファインダー領域１３にカメラ撮影画像の系列が動画として表示される。この結果、無線操作装置３００のユーザは情報処理装置２００のディスプレイ２１９に設けられたカメラファインダー領域１３を通してカメラモジュール３０３による撮影内容をリアルタイムで確認することができる。すなわち、本実施形態によれば、情報処理装置２００のディスプレイ２１９の表示空間の一部を、無線操作装置３００のカメラモジュール３０３によるカメラ撮影画像用のファンダーとして利用することができる。
【００６３】
図９はコンテンツ表示領域１２の一部を撮影対象としたときのカメラＵＩ画面１１Ｂの例を示す図である。ここで、符号１６の点線で示される矩形範囲はカメラモジュール３０３による撮影範囲である。コンテンツ表示領域１２においてカメラモジュール３０３による撮影範囲１６の映像はカメラファインダー領域１３にリアルタイムに表示される。したがって、コンテンツ表示領域１２において表示されるコンテンツの変化と、カメラモジュール３０３による撮影範囲の移動に伴い、カメラファインダー領域１３の表示内容もリアルタイムに変化する。
【００６４】
無線操作装置３００のユーザは、図９に示したように、カメラファインダー領域１３にカメラ撮影画像が表示されているとき、このカメラファインダー領域１３に表示中のカメラ撮影画像に対する保存の指示を情報処理装置２００のカメラ撮影アプリケーションに与えることができる（ステップＳ９、Ｓ１０）。この保存の指示は、例えば、無線操作装置３００のポインティングデバイス３３０を操作してポインティングカーソルをシャッターボタン１４の上に移動させて決定キーを操作したり、カメラボタン３２６を操作したりすることによって行われる。無線操作装置３００のＣＰＵ３０１は、これら保存操作に対応する第１の操作信号を無線通信部３０２によって情報処理装置２００に送信する。
【００６５】
情報処理装置２００のＣＰＵ２０１（画像保存部）は、無線操作装置３００からの第１の操作信号を無線通信部２０７により受信すると、カメラファインダー領域１３に表示中のカメラ撮影画像をストレージ２０４に保存画像として保存する（ステップＳ１１）。このカメラ撮影画像の保存の際、ＣＰＵ２０１は、そのカメラ撮影画像から縮小画像を作成し、保存画像と関連付けてストレージ２０４に保存する。カメラ撮影画像から作成された縮小画像は保存画像の一覧領域１５に追加されて表示される。この後も、カメラモジュール３０３によって生成されたカメラ撮影画像の系列が情報処理装置２００に送信され（ステップＳ１２）、情報処理装置２００のディスプレイ２１９の画面に設けられたカメラファインダー領域１３に表示される（ステップＳ１３）。
【００６６】
ところで、保存画像の一覧領域１５に一度に表示できる画像の数は表示空間の制約から有限であるため、保存画像の一覧領域１５には、例えば保存日時の新しい保存画像の縮小画像から優先的に表示されるなど、予め設定された条件に従ってソートされているすべての保存画像のうち上限数の保存画像に対応する縮小画像が表示される。ユーザは、すべての保存画像の中で保存画像の一覧領域１５に表示させる保存画像の系列を、無線操作装置３００の例えばポインティングデバイス３３０の左キー及び右キーの操作などによって全体的に左右にシフトさせることができる。
【００６７】
図１０はカメラ撮影画像の保存が行われたときのカメラＵＩ画面１１Ｃの例を示す図である。カメラファインダー領域１３に表示中のカメラ撮影画像の保存に伴って、そのカメラ撮影画像の縮小画像１５−６が保存画像の一覧領域１５の端に追加され、それまでに表示されていた各保存画像の系列１５−２，１５−３，１５−４，１５−５が右方向へ１画像分シフトされる。なお、本例では、左側に新しい保存日時の縮小画像が表示され、右側に古い保存日時の縮小画像が表示される場合を示している。
【００６８】
無線操作装置３００のユーザは、保存画像の一覧領域１５に表示された保存画像の一覧の中から任意の保存画像に対応する縮小画像を選択し、任意のアプリケーションにその保存画像の処理を実行させることができる。
次に、このときの動作を説明する。
【００６９】
図１１に示すカメラＵＩ画面１１Ｄの保存画像の一覧領域１５においては、いずれか１つの縮小画像にフォーカスが与えられている。ユーザは、無線操作装置３００の例えばポインティングデバイス３３０の左キー及び右キーを操作することなどによって、フォーカスを左右の方向に移動させることができる。また、保存画像の一覧領域１５の右端の縮小画像にフォーカスがあるときに右キーを１回操作することによって、保存画像の一覧領域１５の縮小画像の系列が１画像分右方向に全体的にシフトされるとともに、このシフトにより新たに表示された保存画像にフォーカスが移動される。同様に、保存画像の一覧領域１５の左端の縮小画像にフォーカスにあるときに左キーを１回操作することによって、保存画像の一覧領域１５の保存画像の系列が１画像分左方向に全体的にシフトされるとともに、このシフトにより新たに表示された縮小画像にフォーカスが移動される。
【００７０】
ここで、任意の縮小画像（例えば１５−３）にフォーカスを移動させた状態で無線操作装置３００の例えばポインティングデバイス３３０の決定キーが操作されたものとする（ステップＳ１４）。すると無線操作装置３００のＣＰＵ３０１は、現在フォーカスが与えられている縮小画像１５−３に対応する保存画像を任意のアプリケーションに与える画像として選択するための第２の操作信号を無線通信部３０２によって情報処理装置２００に送信するように制御を行う（ステップＳ１５）。
【００７１】
情報処理装置２００のＣＰＵ２０１は、無線操作装置３００からの第２の操作信号を無線通信部２０７により受信すると、現在フォーカス状態にある縮小画像に対応する保存画像を拡大した画像を表示する（ステップＳ１６）。
【００７２】
図１２は保存画像の拡大画像１８を表示したカメラＵＩ画面１１Ｅを示す図である。拡大画像１８の画面にはアプリケーション連携ボタン１７が設けられている。このアプリケーション連携ボタン１７が無線操作装置３００の例えばポインティングデバイス３３０などによって操作されると（ステップＳ１７）、無線操作装置３００のＣＰＵ３０１は、アプリケーション連携ボタンの操作信号を無線通信部３０２によって情報処理装置２００に送信するように制御を行う（ステップＳ１８）。
【００７３】
情報処理装置２００のＣＰＵ２０１は、アプリケーション連携ボタンの操作信号を無線通信部２０７により受信すると、カメラ撮影アプリケーションと連携可能な他のアプリケーションを選択するためのアプリケーション選択画面を表示する（ステップＳ１９）。
【００７４】
図１３はアプリケーション選択画面１９を表示したカメラＵＩ画面１１Ｆの例を示す図である。カメラ撮影アプリケーションと連携可能なアプリケーションとしては、情報処理装置２００内で実行されるアプリケーション、情報処理装置２００からインターネットにアクセスすることによって利用可能なウェブアプリケーションなどがある。より具体的には、放送番組の録画予約を行う録画予約アプリケーション、画像中の文字列などの認識を行う文字認識アプリケーション、画像中の顔部分を抽出して人物検索を行う顔認識アプリケーション、画像の類似検索などを行う画像類似検索アプリケーション、画像を共有するサービスを提供するサーバに画像をアップロードする画像アップロードアプリケーションなどがある。なお、これらアプリケーション群においても互いに連携されるものがある。アプリケーション選択画面１９には、上記のアプリケーション毎のＧＵＩ要素１９Ａ−１９Ｅが配置されている。
【００７５】
このアプリケーション選択画面１９で、無線操作装置３００のユーザは、選択された保存画像に対して処理を実行させるアプリケーションを自由に選択することができる（ステップＳ２０）。このアプリケーション選択画面１９での任意のアプリケーションの選択は、例えば、無線操作装置３００のポインティングデバイス３３０の操作によって目的のアプリケーションのＧＵＩ要素の上にポインティングカーソルを移動させて決定キーを操作することなどによって行われる。
【００７６】
無線操作装置３００のＣＰＵ３０１は、アプリケーション選択画面１９の任意のＧＵＩ要素の選択操作に対応する第３の操作信号を無線通信部３０２によって情報処理装置２００に送信するように制御を行う（ステップＳ２１）。
【００７７】
アプリケーション選択画面１９で録画予約アプリケーション１８Ａが選択されたものとして以降の動作を説明する。
情報処理装置２００のＣＰＵ２０１は、無線操作装置３００からの、録画予約アプリケーション１８Ａの選択操作に対応する第３の操作信号を無線通信部２０７により受信すると、録画予約アプリケーションを起動する（ステップＳ２２）。
【００７８】
情報処理装置２００のＣＰＵ２０１は、録画予約アプリケーションから与えられる処理手順に従って、処理対象である保存画像をストレージ２０４から読み出す。次に、ＣＰＵ２０１は、読み出した保存画像を含む処理要求を、文字認識アプリケーションを実行可能なサーバに送信する。サーバは、文字認識アプリケーションに従って、情報処理装置２００からの処理要求に含まれる画像に対して文字認識を行い、その結果を情報処理装置２００に返す。例えば、図１２の例では、保存画像に番組タイトルとして存在する"スポーツニュース"という文字列が認識結果として得られる。
【００７９】
なお、情報処理装置２００に文字認識アプリケーションが搭載されている場合、ＣＰＵ２０１はその文字認識アプリケーションを呼び出して画像を引き渡せばよい。
【００８０】
情報処理装置２００のＣＰＵ２０１は、録画予約アプリケーションから与えられる処理手順に従って、当該文字列を認識結果として受け取ると、次に、その文字列をもとにＥＰＧ（Ｉｎｔｅｒａｃｔｉｖｅ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ）データを検索して、その文字列を番組タイトルとして含む番組の検索を試みる。該当する番組が見つかれば、情報処理装置２００のＣＰＵ２０１は、その番組の録画予約のために必要な情報である例えばチャンネル、放送時刻（開始時刻／終了時刻）などの情報をＥＰＧデータから抽出し、この録画予約のために必要な情報を含む録画予約要求を、例えば、情報処理装置２００の外部に接続されたレコーダなどに出力する。また、情報処理装置２００がレコーダを内蔵するものであれば、そのレコーダに録画予約を設定する。
【００８１】
ここでは、番組タイトルの文字列を含む画像を文字認識用のアプリケーションに引き渡すようにしたが、人物の顔を含む画像を顔認識用のアプリケーションに引き渡すようにしてもよい。顔認識を行うアプリケーションを実行するサーバは、撮影画像に含まれる著名な人物の顔からその人物名を判定して情報処理装置２００に返す。情報処理装置２００のＣＰＵ２０１は、その人物名をもとにＥＰＧデータを検索して、その人物を出演者あるいは製作者などとして含む番組を検索して録画予約を行う。
【００８２】
以上のように本実施形態の情報処理システム１００によれば、コンテンツとその中の撮影範囲の映像を情報処理装置２００のディスプレイ２１９の画面に同時に表示することができる。これにより、例えば、表示中のコンテンツから空間的および時間的に所望の部分を選択して保存する際の操作性が向上する。
【００８３】
本実施形態の情報処理システム１００の無線操作装置３００において、カメラモジュール３０３の撮影対象は、情報処理装置２００のディスプレイ２１９に表示されるコンテンツ以外であってもよいのは言うまでもない。このような用途においても、ディスプレイ２１９の画面をファインダーとして利用できるので、無線操作装置３００にファインダーに設ける場合に比較して、システム全体のハードウェア構成を簡素化できるという点でメリットがある。
【００８４】
また、本実施形態の情報処理システム１００によれば、保存画像の中から処理対象とする画像の選択、およびこの選択された保存画像に対して処理を実行させるアプリケーションの選択を、無線操作装置３００の操作によってシームレスに行うことができる。その際、保存画像の中から処理対象とする画像の選択は、カメラＵＩ画面１１の保存画像の一覧領域１５に表示された保存画像毎の縮小画像を参照しながら行うことができるので、アプリケーションの処理対象としたい保存画像をユーザが用意に見つけ出すことができる。
【００８５】
なお、本技術は以下のような構成も採ることができる。
（１）連続撮影が可能なカメラ部を有し、情報処理装置への操作信号の送信および前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への伝送を無線通信により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、
表示画面を有する表示部と、
前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、
前記表示された画像の系列に対する前記無線操作装置からの第１の操作信号による任意のタイミングの画像の選択を受け付けて当該画像を保存する画像保存部と
を具備する情報処理装置。
（２）前記（１）に記載の情報処理装置であって、
表示用のコンテンツを取得するコンテンツ取得部をさらに具備し、
前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる
情報処理装置。
（３）前記（１）または（２）に記載の情報処理装置であって、
前記画像保存部により保存された１以上の画像の中から、前記無線操作装置からの第２の操作信号をもとに画像の選択を受け付ける画像選択部と、
前記無線操作装置からの第３の操作信号をもとに、前記選択された映像に対して実行する処理の選択を受け付ける処理選択部と
をさらに具備する情報処理装置。
（４）前記（３）に記載の情報処理装置であって
前記表示制御部は、前記画像保存部に保存された画像の縮小画像を作成して保存画像の一覧として前記表示部の表示画面に表示し、
前記画像選択部は、前記無線操作装置からの第３の操作信号をもとに、前記保存画像の一覧の中からの処理の選択を受け付ける
情報処理装置。
（５）前記（３）または（４）に記載の情報処理装置であって、
前記表示制御部は、選択可能な処理の一覧を前記表示部の表示画面に表示し、
前記処理選択部は、前記無線操作装置からの第３の操作信号をもとに前記処理の一覧の中からの処理の選択を受け付ける
情報処理装置。
（６）前記（１）から（５）のいずれかに記載の情報処理装置であって、
前記画像受信部は、前記無線操作装置からの前記画像の系列を無線ＬＡＮにより受信する
情報処理装置。
【００８６】
本技術は以上説明した実施の形態には限定されるものではなく、本技術の技術思想の範囲内で種々の変形が可能である。
【符号の説明】
【００８７】
１１…カメラＵＩ画面
１２…コンテンツ表示領域
１３…カメラファインダー領域
１４…シャッターボタン
１５…保存画像の一覧領域
１００…情報処理システム
２００…情報処理装置
２０１…ＣＰＵ
２０２…バス
２０３…メモリ
２０４…ストレージ
２０７…無線通信部
２１０…チューナ
２１９…ディスプレイ
３００…無線操作装置
３０１…ＣＰＵ
３０２…無線通信部
３０３…カメラモジュール
３０４…エンコーダ
３２６…カメラボタン
３３０…ポインティングデバイス
【技術分野】
【０００１】
本技術は、情報処理装置、情報処理システムおよび情報処理方法に係り、特に無線操作装置からの無線信号によって操作されるテレビジョン受像機などの情報処理装置、この情報処理装置と無線操作装置からなる情報処理システムおよび情報処理方法に関する。
【背景技術】
【０００２】
テレビジョン受像機などの情報処理装置をリモートコントロールする無線操作装置は、赤外線通信を利用する赤外線リモコンが主流とされてきた。しかし、赤外線リモコンでは、赤外線の指向性が強いために、リモコンを被制御機器の方向へ赤外線の発光部を向ける必要があった。これに対し、電波の指向性は比較的弱いため、近年では、高周波電波を用いたＲＦ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）リモコンが開発されて主流となりつつある。また、ＲＦリモコンの規格を標準化するための試みが各団体によってなされている。
【０００３】
例えば、近距離無線通信規格ＩＥＥＥ（登録商標）（Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃ Ｅｎｇｉｎｅｅｒｓ）８０２．１５．４に準拠し、ＩＥＥＥ（登録商標）８０２．１５．４の上位に相当するネットワーク層、セキュリティ層、アプリケーション層の仕様としてＺｉｇＢｅｅ（登録商標）が標準化されている。さらに、ＩＥＥＥ（登録商標）８０２．１５．４をもとに、業界団体によってＲＦリモコン規格ＺｉｇＢｅｅ（登録商標） ＲＦ４ＣＥ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ｆｏｒ Ｃｏｎｓｕｍｅｒ Ｅｌｅｃｔｒｏｎｉｃｓ）が標準化されている。
【０００４】
例えば、特許文献１には、ＲＦ４ＣＥなどのＲＦ無線信号を用いてテレビジョン受像機などの情報処理装置をコントロールする操作端末に関する技術が開示されている。
【０００５】
また、特許文献２には、ウェブブラウザとつなげられたビデオカメラにより撮影された映像を遠隔でユーザが見ることを可能にするために、ウェブカメラで取得された画像をウェブサーバとインターネットなどを介してパーソナルコンピュータに送信することが記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１１−０３４２９４号公報
【特許文献２】特表２００５−５００７７２号公報（段落［０００４］等）
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、近年、テレビジョン受像機などの情報処理装置の多機能化は目覚しく、例えば、インターネットに接続して、インターネット上の様々なウェブアプリケーションを利用することが可能なテレビジョン受像機などの情報処理装置も登場している。ＲＦリモコンなどの無線操作装置は、文字列などのデータもテレビジョン受像機などの情報処理装置に伝送することができるので、情報処理装置からのウェブアプリケーションの利用性を高める上で有効な操作手段と言える。
【０００８】
しかしながら、例えば、画像に含まれる文字や人物の顔など認識し、その結果を返すといった画像処理系のウェブアプリケーションなどを、無線操作装置によって操作される情報処理装置から利用しようとなると、既存の無線操作装置を利用する範囲では不十分である。すなわち、既存の無線操作装置では、そもそも画像を情報処理装置に伝送することまでは考慮されていないからである。
【０００９】
本技術の目的は、無線操作装置からの操作を通じて、任意の画像を画像処理系のアプリケーションに引き渡す際の操作性の向上を図ることのできる情報処理装置、情報処理システムおよび情報処理方法を提供することにある。
【課題を解決するための手段】
【００１０】
上記目的を達成するため、本技術の一形態に係る情報処理装置は、連続撮影が可能なカメラ部を有し、前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への送信を無線により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、表示画面を有する表示部と、前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と具備する。
【００１１】
この情報処理装置は、表示画面を、無線操作装置のカメラ部によって連続撮影された画像の系列を無線操作装置のユーザがリアルタイムに確認するためのファインダー画面として提供する。無線操作装置のユーザは、情報処理装置の表示画面を通してカメラ部によって撮影中の画像の系列を確認しつつ、保存したい画像を選択することができる。保存された画像は、無線操作装置の操作によって、例えば、情報処理装置内のアプリケーションあるいはインターネット上のアプリケーションなどに適宜供給される。すなわち、この情報処理装置によれば、画像の取り込みから、アプリケーションへの供給などの一連の操作性の向上を図ることができる。また、無線操作装置にファインダーを設ける必要がなくなるため、無線操作装置の小型化、軽量化、消費電力の低減を図ることができる。
【００１２】
また、本技術は、表示用のコンテンツを取得するコンテンツ取得部をさらに具備し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させるものであってよい。
【００１３】
コンテンツとその中の撮影範囲の映像を情報処理装置の表示画面に同時に表示することができる。これにより、例えば、表示中のコンテンツから空間的および時間的に所望の部分を選択して保存する際の操作性が向上する。
【００１４】
この情報処理装置は、前記無線操作装置からの無線による第２の操作信号をもとに、前記保存された画像の中から処理対象の画像を選択する画像選択部と、前記無線操作装置からの無線による第３の操作信号をもとに、前記選択された処理対象の画像に対して実行する処理を選択する処理選択部とをさらに具備するものであってよい。これにより、保存された１以上の画像の中から処理対象の画像の選択、およびこの画像に対して実行する処理の選択を、無線操作装置の操作によって行うことが可能になる。
【００１５】
前記表示制御部は、前記画像保存部に保存された画像の縮小画像による一覧を前記表示部の表示画面に表示し、前記画像選択部は、前記保存された画像の縮小画像による一覧に対する前記無線操作装置からの前記第２の操作信号をもとに前記処理対象の画像を選択するものであってよい。これにより処理対象としての画像を選択する際の操作性が向上する。
【００１６】
前記表示制御部は、選択可能な処理の一覧を前記表示部の表示画面に表示し、前記処理選択部は、前記選択可能な処理の一覧に対する前記無線操作装置からの前記第３の操作信号をもとに処理を選択するものであってよい。これにより画像に対して実行する処理を選択する際の操作性が向上する。
【００１７】
この情報処理装置は、前記画像選択部により選択された前記処理対象の画像に対して、前記処理選択部により選択された処理を実行する処理実行部をさらに具備するものであってよい。
【００１８】
前記無線は無線ＬＡＮであってよい。無線ＬＡＮの利用により、カメラ部で得た画像の系列を情報処理装置に伝送してリアルタイムに表示するために必要な通信帯域を確保できる。
【００１９】
また、この情報処理装置は、前記画像選択部により選択された前記処理対象の画像を含む処理要求を、前記処理選択部により選択された処理を実行することが可能なウェブ上のサーバに送信する処理要求部をさらに具備するものであってよい。
【００２０】
本技術に係る第２の側面である情報処理システムは、無線操作装置と、この無線操作装置によって無線により操作可能な情報処理装置とを具備し、前記無線操作装置は、連続撮影が可能なカメラ部と、前記カメラ部で連続撮影された画像の系列を無線により前記情報処理装置へ送信する画像送信部とを具備し、前記情報処理装置は、表示画面を有する表示部と、前記無線操作装置より送信された前記画像の系列を受信する画像受信部と、前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と、表示用のコンテンツを取得するコンテンツ取得部とを具備し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる。
【００２１】
本技術に係る第３の側面である情報処理方法は、無線操作装置は、カメラ部で連続撮影された画像の系列を、当該無線操作装置の操作対象である情報処理装置に無線により送信し、前記情報処理装置において、表示制御部は、前記無線操作装置より受信した前記画像の系列を表示画面に順次表示し、画像保存部は、前記表示された画像の系列に対する前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存し、コンテンツ取得部は、表示用のコンテンツを取得し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる、という手順を有する。
【発明の効果】
【００２２】
本技術によれば、無線操作装置からの操作を通じて、任意の画像を画像処理系のアプリケーションに引き渡す際の操作性の向上を図れる。
【図面の簡単な説明】
【００２３】
【図１】本技術に係る第１の実施形態の情報処理システムの構成を示すブロック図である。
【図２】図１の情報処理システムにおける情報処理装置のハードウェア構成を示す図である。
【図３】図１の情報処理システムにおける無線操作装置の正面側の外観図である。
【図４】図３の無線操作装置の背面側の外観図である。
【図５】図３の無線操作装置のハードウェア構成を示す図である。
【図６】図２の情報処理装置のカメラＵＩ画面を示す図である。
【図７】図１の情報処理システムの動作シーケンス図である。
【図８】初期のカメラＵＩ画面の例を示す図である。
【図９】コンテンツ表示領域の一部を撮影対象としたときのカメラＵＩ画面の例を示す図である。
【図１０】カメラ撮影画像を保存するときの保存画像の一覧領域の更新の様子を示す図である。
【図１１】カメラＵＩ画面における保存画像の一覧領域を示す図である。
【図１２】保存画像の拡大画像を表示したカメラＵＩ画面を示す図である。
【図１３】アプリケーション選択画面を有するカメラＵＩ画面の例を示す図である。
【発明を実施するための形態】
【００２４】
以下、本技術に係る実施形態を、図面を参照しながら説明する。
＜第１の実施形態＞
図１は、本技術に係る第１の実施形態の情報処理システムの構成を示すブロック図である。同図に示すように、本実施形態の情報処理システム１００は、操作対象である情報処理装置２００と、情報処理装置２００を無線信号を用いて遠隔操作するための無線操作装置３００とを有する。情報処理装置２００は、例えば、テレビジョン受像機、パーソナルコンピュータ、レコーダ、プレーヤ、ゲーム機などであるが、ディスプレイに表示する機能を有する機器であればよい。
【００２５】
無線操作装置３００は、連続撮影が可能なカメラモジュール（カメラ部）を搭載する。ユーザはこのカメラモジュールで、情報処理装置２００の表示画面に表示されたコンテンツや、その他の任意の被写体を連続撮影することができる。カメラモジュールによる連続撮影によって得られた画像データの系列は無線ＬＡＮを使って情報処理装置２００に伝送することができる。
【００２６】
情報処理装置２００は、例えば、無線操作装置３００のカメラモジュールによって連続撮像された画像データ（以下「カメラ撮影画像」と呼ぶ。）の系列を無線ＬＡＮを通じて受信し、外部のディスプレイまたは内部のディスプレイにリアルタイムに表示することができる。また、情報処理装置２００は、カメラ撮影画像の系列の表示中に無線操作装置３００より送信される第１の操作信号をもとに、その時点で表示されているカメラ撮影画像を保存することができる。さらに、情報処理装置２００は、保存された１以上のカメラ撮影画像の中から無線操作装置３００より送信される第２の操作信号によって選択されたカメラ撮影画像を、無線操作装置３００より送信される第３の操作信号によって選択された任意のアプリケーションに引き渡してアプリケーションによる処理を実行させることができる。
【００２７】
近年、無線リモコンの分野においては、高周波電波を用いたＲＦ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）リモコンが主流となりつつある。具体的には、家電用ＲＦリモコンの国際規格であるＲＦ４ＣＥ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ｆｏｒ Ｃｏｎｓｕｍｅｒ Ｅｌｅｃｔｒｏｎｉｃｓ）などがある。しかし、ＲＦ４ＣＥの通信速度の理論値は２５０Ｋｂｐｓである。この速度は制御信号などの伝送には十分であるが、画像データのリアルタイム伝送には十分とは言えない。
【００２８】
本実施形態の情報処理システム１００は、例えばＩＥＥＥ ８０２．１１ｂ規格などに準拠した無線ＬＡＮをカメラ撮影画像のリアルタイム伝送に用いる。ＩＥＥＥ ８０２．１１ｂ規格では、公称速度が１１Ｍｂｐｓとされており、ＲＦ４ＣＥに比較して十分高速である。
以下に、本実施形態の情報処理システム１００の詳細を説明する。
【００２９】
［情報処理装置２００の構成］
まず、情報処理装置２００の構成から説明する。
図２は情報処理装置２００のハードウェア構成を示す図である。
本実施形態では、情報処理装置２００としてテレビジョン受像機を用いた場合を説明する。
【００３０】
この情報処理装置２００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１、バス２０２、メモリ２０３、ストレージ２０４、ネットワークＩ／Ｆ２０６、無線通信部２０７を有する。情報処理装置２００は、また、アンテナ２０９、チューナ２１０、デスクランブラ２１１、デマルチプレクサ２１２、Ａｕｄｉｏデコーダ２１３、Ｖｉｄｅｏデコーダ２１４、音声処理回路２１５、スピーカ２１６、ＧＵＩ重畳器２１７、映像処理回路２１８、ディスプレイ２１９（表示部）を有している。
【００３１】
この情報処理装置２００では、ＣＰＵ２０１が、バス２０２を介して接続されたメモリ２０３又はストレージ２０４に記憶されているプログラムに従って各種処理を実行する。またＣＰＵ２０１は、
【００３２】
無線通信部２０７（画像受信部）は、例えば、ＩＥＥＥ ８０２．１１ｂ規格などに準拠した無線ＬＡＮを用いて、無線操作装置３００との間で双方向の通信を行う。
アンテナ２０９は、デジタル放送信号などを受信してチューナ２１０に入力する。
【００３３】
チューナ２１０は、デジタル放送信号から所定のチャンネルの放送信号を抽出する。チューナ２１０は、この抽出した放送信号に対して復調処理を施して得た所定のチャンネルのトランスポートストリームをデスクランブラ２１１に出力する。
【００３４】
デスクランブラ２１１は、情報処理装置２００に装着された所定のＩＣカード（図示せず）にあらかじめ記憶されている解除キーを用いて、チューナ２１０から入力されたトランスポートストリームのスクランブルを解除する。デスクランブラ２１１は、このスクランブル解除済のトランスポートストリームをデマルチプレクサ２１２に出力する。
【００３５】
デマルチプレクサ２１２は、デスクランブラ２１１から入力されたスクランブル解除済のトランスポートストリームからオーディオデータとビデオデータとを分離する。デマルチプレクサ２１２は、分離したオーディオデータをＡｕｄｉｏデコーダ２１３に出力し、分離したビデオデータをＶｉｄｅｏデコーダ２１４に出力する。
【００３６】
Ａｕｄｉｏデコーダ２１３は、デマルチプレクサ２１２から入力されたオーディオデータをデコードし、得られた音声データを、音声処理回路２１５に出力する。
音声処理回路２１５は、Ａｕｄｉｏデコーダ２１３から入力された音声データに対してＤ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換、増幅処理などを施し、得られた音声信号をスピーカ２１６に出力する。
【００３７】
Ｖｉｄｅｏデコーダ２１４は、デマルチプレクサ２１２から入力されたビデオデータをデコードし、得られた映像データを、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）重畳器２１７に出力する。
【００３８】
ＧＵＩ重畳器２１７は、Ｖｉｄｅｏデコーダ２１４から入力された映像データに対して、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）などのグラフィックデータを重畳して、映像処理回路２１８に出力する。
映像処理回路２１８は、ＧＵＩ重畳器２１７から入力された映像データに対して、所定の画像処理、Ｄ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換などを施し、得られた映像信号をディスプレイ２１９に出力する。
【００３９】
また、ＣＰＵ２０１は、無線操作装置３００からの録画に関する操作信号、あるいはメモリ２０３に設定された録画予約のための情報をもとに、デジタル放送を受信し、所定のチャンネルのトランスポートストリームを得て、これを番組の映像音声データとして、ストレージ２０４に保存することができる。
【００４０】
このようにして、情報処理装置２００は、デジタル放送を受信して、その番組を視聴可能なようにディスプレイ２１９およびスピーカ２１６を通じて出力したり、ストレージ２０４に録画したりすることができる。また、ＣＰＵ２０１は、ネットワークＩ／Ｆ２０６を通じてインターネットにアクセスし、取得したウェブページをディスプレイ２１９に表示させたりすることもできる。
【００４１】
メモリ２０３あるいはストレージ２０４には、カメラ撮影アプリケーション、ウェブブラウザ、録画予約アプリケーションなど、各種のアプリケーションプログラムが格納されている。
【００４２】
［無線操作装置３００の構成］
次に、無線操作装置３００の構成を説明する。
図３及び図４は無線操作装置３００の外観図である。
【００４３】
図３に示すように、無線操作装置３００の正面にはキーボード３１０、リモコンキー３２０、ポインティングデバイス３３０などが設けられている。キーボード３１０には、文字入力などに用いられる複数のキーが設けられている。リモコンキー３２０には、テレビジョン受像機用の主電源ボタン３２１、セットトップボックス用の主電源ボタン３２２、ＢＤ（ｂｌｕ−ｒａｙ）／ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）用の操作ボタン３２３、音声ボリューム調整ボタン３２４、チャンネル切り替えボタン３２５、カメラボタン３２６などが設けられている。
【００４４】
図４に示すように、無線操作装置３００の筐体３４０の左右の部分は、ユーザの左右の手で握り易いように膨出させてある。これにより左右一対のハンドル部３４１Ｌ、３４１Ｒが設けられている。また、筐体３４０の背面の左右一対のハンドル部３４１Ｌ、３４１Ｒの間にはカメラモジュール３０３のレンズ穴３４３が設けられている。さらに、筐体３４０の背面の左右一対のハンドル部３４１Ｌ、３４１Ｒの間にはバッテリの着脱用のスライド蓋３４５が設けられている。このスライド蓋３４５を開いた場所にバッテリが装着される。
【００４５】
図５は、無線操作装置３００のハードウェア構成を示す図である。
無線操作装置３００は、ＣＰＵ３０１、無線通信部３０２、カメラモジュール３０３、エンコーダ３０４、不揮発性記憶部３０５、リモコンキー３２０、キーボード３１０を有する。無線操作装置３００は、また、ポインティングデバイス３３０、マイクユニット３０８などを有する。
【００４６】
ＣＰＵ３０１は、無線操作装置３００を構成する各ブロックの全体的な制御、各種の演算処理、各ブロック間でのデータのやりとりを制御する。
【００４７】
無線通信部３０２は、情報処理装置２００との間で双方向の通信を行う。例えば、ＩＥＥＥ ８０２．１１ｂ規格などに準拠した無線ＬＡＮを利用することができる。
【００４８】
カメラモジュール３０３は、情報処理装置２００へ伝送する画像を撮影するためのものである。カメラモジュール３０３は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ ｏｘｉｄｅ ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサなどの撮像素子と、撮像素子の出力をＡ／Ｄ変換するＡ／Ｄコンバータなどで構成される。
【００４９】
エンコーダ３０４は、カメラモジュール３０３で得た画像をＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）などの標準的な符号化データにエンコードする。
【００５０】
不揮発性記憶部３０５は、符号化された画像データなどの保存に用いられる。
ポインティングデバイス３３０は、情報処理装置２００の画面上のポインティングカーソルの操作など、座標などのデータを入力するための手段である。ポインティングデバイス３３０は光学マウスなどの構造を有するものである。
マイクユニット３０８は、主にユーザの声の集音に用いられ、音声を捕らえて電気信号に変換してＣＰＵ３０１に供給する。
【００５１】
［カメラＵＩ画面］
次に、情報処理装置２００のディスプレイ２１９に表示されるカメラＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面について説明する。
図６はカメラＵＩ画面の例を示す図である。
カメラＵＩ画面１１には、コンテンツ表示領域１２、カメラファインダー領域１３、シャッターボタン１４、保存画像の一覧領域１５などが設けられている。
【００５２】
コンテンツ表示領域１２とカメラファインダー領域１３とは互いに左右に隣り合わせで配置される。シャッターボタン１４はカメラファインダー領域１３の下方近傍に設けられる。保存画像の一覧領域１５は、カメラＵＩ画面１１の下部に設けられる。
【００５３】
コンテンツ表示領域１２は、情報処理装置２００にて受信されたデジタル放送およびウェブページなどのコンテンツが表示される領域である。情報処理装置２００は、地上デジタル放送、有線放送、衛星放送などのテレビジョン放送コンテンツを受信する機能と、インターネット上のウェブページおよび画像（静止画、動画）などのウェブコンテンツを取得する機能（コンテンツ取得部）を備える。すなわち、コンテンツ表示領域１２には、ユーザにより選択されたテレビジョン放送コンテンツ、ウェブコンテンツなどが表示される。
【００５４】
カメラファインダー領域１３は、無線操作装置３００のカメラモジュール３０３による連続撮影によって得られたカメラ撮影画像の系列が表示される領域である。
シャッターボタン１４は、カメラファインダー領域１３に表示されたカメラ撮影画像の系列において、保存したいタイミングのカメラ撮影画像をユーザに選択させるための指示を受け付けるＧＵＩ要素である。このシャッターボタン１４の操作は、例えば、無線操作装置３００のポインティングデバイス３３０を操作してポインティングカーソルをシャッターボタン１４の上に移動させて決定キーを操作したり、カメラボタン３２６を操作したりすることによって行われる。
【００５５】
情報処理装置２００のＣＰＵ２０１は、無線操作装置３００からの操作信号（第１の操作信号）をもとにシャッターボタン１４が操作されたことを知ると、その時点でカメラファインダー領域１３に表示されているカメラ撮影画像をストレージ２０４に保存する処理を行う。このとき保存画像の一覧領域１５への表示用として解像度を落とした縮小画像も生成され、カメラ撮影画像と関連付けてストレージ２０４に保存される。
【００５６】
保存画像の一覧領域１５は、ストレージ２０４に保存されたカメラ撮影画像の縮小画像が、例えば、保存日時の順番など、予め決められた順序に並べて表示される領域である。
【００５７】
［情報処理システム１００の動作］
次に、情報処理システム１００の動作を説明する。
図７は情報処理システム１００の動作、特に無線操作装置３００から情報処理装置２００へのカメラ撮影画像の系列の伝送、保存、アプリケーションへの引き渡しなどに関するシーケンス図である。
【００５８】
無線操作装置３００のカメラボタン３２６（図３参照）がユーザによって操作されると（ステップＳ１）、ＣＰＵ３０１によってこれが検出される。ＣＰＵ３０１はカメラボタン３２６が操作されたことを示すカメラボタン操作信号を無線通信部３０２によって情報処理装置２００に送信する（ステップＳ２）。
【００５９】
情報処理装置２００のＣＰＵ２０１は無線通信部２０７を介してカメラボタン操作信号を受信すると、カメラ撮影アプリケーションを起動する（ステップＳ３）。ＣＰＵ２０１は、カメラ撮影アプリケーションから与えられる処理手順に従って、まず、無線操作装置３００のカメラモジュール３０３を起動させるためのカメラ起動命令を無線通信部２０７を用いて無線操作装置３００に送信するとともに（ステップＳ４−ａ）、ディスプレイ２１９にカメラＵＩ画面を表示させる（ステップＳ４−ｂ）。
【００６０】
図８は初期のカメラＵＩ画面１１Ａの例を示す図である。カメラファインダー領域１３には、無線操作装置３００のカメラモジュール３０３からカメラ撮影画像が伝送されてくるまでの間、カメラ撮影画像の伝送待ちであることを示すアイコンや文字列が表示される。保存画像の一覧領域１５には、過去に保存されたカメラ撮影画像の縮小画像１５−１，１５−２，１５−３が保存の日時順に表示されている。
【００６１】
無線操作装置３００のＣＰＵ３０１は、無線通信部３０２を通じてカメラ起動命令を受け取ると、カメラモジュール３０３の起動処理を行う（ステップＳ５）。カメラモジュール３０３は、起動後、情報処理装置２００のカメラ撮影アプリケーションとの間での接続を確立するために必要な情報（例えば、ポート番号、ＩＰアドレスなど）の交換を行う（ステップＳ６）。無線操作装置３００のカメラモジュール３０３と情報処理装置２００のカメラ撮影アプリケーションとの接続状態が確立すると、カメラモジュール３０３は、自身の撮像素子で得た撮像信号から一定時間毎の静止画像の系列（カメラ撮影画像の系列）を生成する。静止画像の形式としては、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）などが採用される。カメラモジュール３０３によって生成されたカメラ撮影画像の系列は、無線通信部３０２によって情報処理装置２００に宛てて送信される（ステップＳ７）。
【００６２】
情報処理装置２００のＣＰＵ２０１（表示制御部）は、無線通信部２０７を通じてカメラ撮影画像の系列を受信すると、これを順次Ｖｉｄｅｏデコーダ２１４にて復号し、ディスプレイ２１９の画面に設けられたカメラファインダー領域１３に連続して表示させる（ステップＳ８）。これによりカメラファインダー領域１３にカメラ撮影画像の系列が動画として表示される。この結果、無線操作装置３００のユーザは情報処理装置２００のディスプレイ２１９に設けられたカメラファインダー領域１３を通してカメラモジュール３０３による撮影内容をリアルタイムで確認することができる。すなわち、本実施形態によれば、情報処理装置２００のディスプレイ２１９の表示空間の一部を、無線操作装置３００のカメラモジュール３０３によるカメラ撮影画像用のファンダーとして利用することができる。
【００６３】
図９はコンテンツ表示領域１２の一部を撮影対象としたときのカメラＵＩ画面１１Ｂの例を示す図である。ここで、符号１６の点線で示される矩形範囲はカメラモジュール３０３による撮影範囲である。コンテンツ表示領域１２においてカメラモジュール３０３による撮影範囲１６の映像はカメラファインダー領域１３にリアルタイムに表示される。したがって、コンテンツ表示領域１２において表示されるコンテンツの変化と、カメラモジュール３０３による撮影範囲の移動に伴い、カメラファインダー領域１３の表示内容もリアルタイムに変化する。
【００６４】
無線操作装置３００のユーザは、図９に示したように、カメラファインダー領域１３にカメラ撮影画像が表示されているとき、このカメラファインダー領域１３に表示中のカメラ撮影画像に対する保存の指示を情報処理装置２００のカメラ撮影アプリケーションに与えることができる（ステップＳ９、Ｓ１０）。この保存の指示は、例えば、無線操作装置３００のポインティングデバイス３３０を操作してポインティングカーソルをシャッターボタン１４の上に移動させて決定キーを操作したり、カメラボタン３２６を操作したりすることによって行われる。無線操作装置３００のＣＰＵ３０１は、これら保存操作に対応する第１の操作信号を無線通信部３０２によって情報処理装置２００に送信する。
【００６５】
情報処理装置２００のＣＰＵ２０１（画像保存部）は、無線操作装置３００からの第１の操作信号を無線通信部２０７により受信すると、カメラファインダー領域１３に表示中のカメラ撮影画像をストレージ２０４に保存画像として保存する（ステップＳ１１）。このカメラ撮影画像の保存の際、ＣＰＵ２０１は、そのカメラ撮影画像から縮小画像を作成し、保存画像と関連付けてストレージ２０４に保存する。カメラ撮影画像から作成された縮小画像は保存画像の一覧領域１５に追加されて表示される。この後も、カメラモジュール３０３によって生成されたカメラ撮影画像の系列が情報処理装置２００に送信され（ステップＳ１２）、情報処理装置２００のディスプレイ２１９の画面に設けられたカメラファインダー領域１３に表示される（ステップＳ１３）。
【００６６】
ところで、保存画像の一覧領域１５に一度に表示できる画像の数は表示空間の制約から有限であるため、保存画像の一覧領域１５には、例えば保存日時の新しい保存画像の縮小画像から優先的に表示されるなど、予め設定された条件に従ってソートされているすべての保存画像のうち上限数の保存画像に対応する縮小画像が表示される。ユーザは、すべての保存画像の中で保存画像の一覧領域１５に表示させる保存画像の系列を、無線操作装置３００の例えばポインティングデバイス３３０の左キー及び右キーの操作などによって全体的に左右にシフトさせることができる。
【００６７】
図１０はカメラ撮影画像の保存が行われたときのカメラＵＩ画面１１Ｃの例を示す図である。カメラファインダー領域１３に表示中のカメラ撮影画像の保存に伴って、そのカメラ撮影画像の縮小画像１５−６が保存画像の一覧領域１５の端に追加され、それまでに表示されていた各保存画像の系列１５−２，１５−３，１５−４，１５−５が右方向へ１画像分シフトされる。なお、本例では、左側に新しい保存日時の縮小画像が表示され、右側に古い保存日時の縮小画像が表示される場合を示している。
【００６８】
無線操作装置３００のユーザは、保存画像の一覧領域１５に表示された保存画像の一覧の中から任意の保存画像に対応する縮小画像を選択し、任意のアプリケーションにその保存画像の処理を実行させることができる。
次に、このときの動作を説明する。
【００６９】
図１１に示すカメラＵＩ画面１１Ｄの保存画像の一覧領域１５においては、いずれか１つの縮小画像にフォーカスが与えられている。ユーザは、無線操作装置３００の例えばポインティングデバイス３３０の左キー及び右キーを操作することなどによって、フォーカスを左右の方向に移動させることができる。また、保存画像の一覧領域１５の右端の縮小画像にフォーカスがあるときに右キーを１回操作することによって、保存画像の一覧領域１５の縮小画像の系列が１画像分右方向に全体的にシフトされるとともに、このシフトにより新たに表示された保存画像にフォーカスが移動される。同様に、保存画像の一覧領域１５の左端の縮小画像にフォーカスにあるときに左キーを１回操作することによって、保存画像の一覧領域１５の保存画像の系列が１画像分左方向に全体的にシフトされるとともに、このシフトにより新たに表示された縮小画像にフォーカスが移動される。
【００７０】
ここで、任意の縮小画像（例えば１５−３）にフォーカスを移動させた状態で無線操作装置３００の例えばポインティングデバイス３３０の決定キーが操作されたものとする（ステップＳ１４）。すると無線操作装置３００のＣＰＵ３０１は、現在フォーカスが与えられている縮小画像１５−３に対応する保存画像を任意のアプリケーションに与える画像として選択するための第２の操作信号を無線通信部３０２によって情報処理装置２００に送信するように制御を行う（ステップＳ１５）。
【００７１】
情報処理装置２００のＣＰＵ２０１は、無線操作装置３００からの第２の操作信号を無線通信部２０７により受信すると、現在フォーカス状態にある縮小画像に対応する保存画像を拡大した画像を表示する（ステップＳ１６）。
【００７２】
図１２は保存画像の拡大画像１８を表示したカメラＵＩ画面１１Ｅを示す図である。拡大画像１８の画面にはアプリケーション連携ボタン１７が設けられている。このアプリケーション連携ボタン１７が無線操作装置３００の例えばポインティングデバイス３３０などによって操作されると（ステップＳ１７）、無線操作装置３００のＣＰＵ３０１は、アプリケーション連携ボタンの操作信号を無線通信部３０２によって情報処理装置２００に送信するように制御を行う（ステップＳ１８）。
【００７３】
情報処理装置２００のＣＰＵ２０１は、アプリケーション連携ボタンの操作信号を無線通信部２０７により受信すると、カメラ撮影アプリケーションと連携可能な他のアプリケーションを選択するためのアプリケーション選択画面を表示する（ステップＳ１９）。
【００７４】
図１３はアプリケーション選択画面１９を表示したカメラＵＩ画面１１Ｆの例を示す図である。カメラ撮影アプリケーションと連携可能なアプリケーションとしては、情報処理装置２００内で実行されるアプリケーション、情報処理装置２００からインターネットにアクセスすることによって利用可能なウェブアプリケーションなどがある。より具体的には、放送番組の録画予約を行う録画予約アプリケーション、画像中の文字列などの認識を行う文字認識アプリケーション、画像中の顔部分を抽出して人物検索を行う顔認識アプリケーション、画像の類似検索などを行う画像類似検索アプリケーション、画像を共有するサービスを提供するサーバに画像をアップロードする画像アップロードアプリケーションなどがある。なお、これらアプリケーション群においても互いに連携されるものがある。アプリケーション選択画面１９には、上記のアプリケーション毎のＧＵＩ要素１９Ａ−１９Ｅが配置されている。
【００７５】
このアプリケーション選択画面１９で、無線操作装置３００のユーザは、選択された保存画像に対して処理を実行させるアプリケーションを自由に選択することができる（ステップＳ２０）。このアプリケーション選択画面１９での任意のアプリケーションの選択は、例えば、無線操作装置３００のポインティングデバイス３３０の操作によって目的のアプリケーションのＧＵＩ要素の上にポインティングカーソルを移動させて決定キーを操作することなどによって行われる。
【００７６】
無線操作装置３００のＣＰＵ３０１は、アプリケーション選択画面１９の任意のＧＵＩ要素の選択操作に対応する第３の操作信号を無線通信部３０２によって情報処理装置２００に送信するように制御を行う（ステップＳ２１）。
【００７７】
アプリケーション選択画面１９で録画予約アプリケーション１８Ａが選択されたものとして以降の動作を説明する。
情報処理装置２００のＣＰＵ２０１は、無線操作装置３００からの、録画予約アプリケーション１８Ａの選択操作に対応する第３の操作信号を無線通信部２０７により受信すると、録画予約アプリケーションを起動する（ステップＳ２２）。
【００７８】
情報処理装置２００のＣＰＵ２０１は、録画予約アプリケーションから与えられる処理手順に従って、処理対象である保存画像をストレージ２０４から読み出す。次に、ＣＰＵ２０１は、読み出した保存画像を含む処理要求を、文字認識アプリケーションを実行可能なサーバに送信する。サーバは、文字認識アプリケーションに従って、情報処理装置２００からの処理要求に含まれる画像に対して文字認識を行い、その結果を情報処理装置２００に返す。例えば、図１２の例では、保存画像に番組タイトルとして存在する"スポーツニュース"という文字列が認識結果として得られる。
【００７９】
なお、情報処理装置２００に文字認識アプリケーションが搭載されている場合、ＣＰＵ２０１はその文字認識アプリケーションを呼び出して画像を引き渡せばよい。
【００８０】
情報処理装置２００のＣＰＵ２０１は、録画予約アプリケーションから与えられる処理手順に従って、当該文字列を認識結果として受け取ると、次に、その文字列をもとにＥＰＧ（Ｉｎｔｅｒａｃｔｉｖｅ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ）データを検索して、その文字列を番組タイトルとして含む番組の検索を試みる。該当する番組が見つかれば、情報処理装置２００のＣＰＵ２０１は、その番組の録画予約のために必要な情報である例えばチャンネル、放送時刻（開始時刻／終了時刻）などの情報をＥＰＧデータから抽出し、この録画予約のために必要な情報を含む録画予約要求を、例えば、情報処理装置２００の外部に接続されたレコーダなどに出力する。また、情報処理装置２００がレコーダを内蔵するものであれば、そのレコーダに録画予約を設定する。
【００８１】
ここでは、番組タイトルの文字列を含む画像を文字認識用のアプリケーションに引き渡すようにしたが、人物の顔を含む画像を顔認識用のアプリケーションに引き渡すようにしてもよい。顔認識を行うアプリケーションを実行するサーバは、撮影画像に含まれる著名な人物の顔からその人物名を判定して情報処理装置２００に返す。情報処理装置２００のＣＰＵ２０１は、その人物名をもとにＥＰＧデータを検索して、その人物を出演者あるいは製作者などとして含む番組を検索して録画予約を行う。
【００８２】
以上のように本実施形態の情報処理システム１００によれば、コンテンツとその中の撮影範囲の映像を情報処理装置２００のディスプレイ２１９の画面に同時に表示することができる。これにより、例えば、表示中のコンテンツから空間的および時間的に所望の部分を選択して保存する際の操作性が向上する。
【００８３】
本実施形態の情報処理システム１００の無線操作装置３００において、カメラモジュール３０３の撮影対象は、情報処理装置２００のディスプレイ２１９に表示されるコンテンツ以外であってもよいのは言うまでもない。このような用途においても、ディスプレイ２１９の画面をファインダーとして利用できるので、無線操作装置３００にファインダーに設ける場合に比較して、システム全体のハードウェア構成を簡素化できるという点でメリットがある。
【００８４】
また、本実施形態の情報処理システム１００によれば、保存画像の中から処理対象とする画像の選択、およびこの選択された保存画像に対して処理を実行させるアプリケーションの選択を、無線操作装置３００の操作によってシームレスに行うことができる。その際、保存画像の中から処理対象とする画像の選択は、カメラＵＩ画面１１の保存画像の一覧領域１５に表示された保存画像毎の縮小画像を参照しながら行うことができるので、アプリケーションの処理対象としたい保存画像をユーザが用意に見つけ出すことができる。
【００８５】
なお、本技術は以下のような構成も採ることができる。
（１）連続撮影が可能なカメラ部を有し、情報処理装置への操作信号の送信および前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への伝送を無線通信により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、
表示画面を有する表示部と、
前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、
前記表示された画像の系列に対する前記無線操作装置からの第１の操作信号による任意のタイミングの画像の選択を受け付けて当該画像を保存する画像保存部と
を具備する情報処理装置。
（２）前記（１）に記載の情報処理装置であって、
表示用のコンテンツを取得するコンテンツ取得部をさらに具備し、
前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる
情報処理装置。
（３）前記（１）または（２）に記載の情報処理装置であって、
前記画像保存部により保存された１以上の画像の中から、前記無線操作装置からの第２の操作信号をもとに画像の選択を受け付ける画像選択部と、
前記無線操作装置からの第３の操作信号をもとに、前記選択された映像に対して実行する処理の選択を受け付ける処理選択部と
をさらに具備する情報処理装置。
（４）前記（３）に記載の情報処理装置であって
前記表示制御部は、前記画像保存部に保存された画像の縮小画像を作成して保存画像の一覧として前記表示部の表示画面に表示し、
前記画像選択部は、前記無線操作装置からの第３の操作信号をもとに、前記保存画像の一覧の中からの処理の選択を受け付ける
情報処理装置。
（５）前記（３）または（４）に記載の情報処理装置であって、
前記表示制御部は、選択可能な処理の一覧を前記表示部の表示画面に表示し、
前記処理選択部は、前記無線操作装置からの第３の操作信号をもとに前記処理の一覧の中からの処理の選択を受け付ける
情報処理装置。
（６）前記（１）から（５）のいずれかに記載の情報処理装置であって、
前記画像受信部は、前記無線操作装置からの前記画像の系列を無線ＬＡＮにより受信する
情報処理装置。
【００８６】
本技術は以上説明した実施の形態には限定されるものではなく、本技術の技術思想の範囲内で種々の変形が可能である。
【符号の説明】
【００８７】
１１…カメラＵＩ画面
１２…コンテンツ表示領域
１３…カメラファインダー領域
１４…シャッターボタン
１５…保存画像の一覧領域
１００…情報処理システム
２００…情報処理装置
２０１…ＣＰＵ
２０２…バス
２０３…メモリ
２０４…ストレージ
２０７…無線通信部
２１０…チューナ
２１９…ディスプレイ
３００…無線操作装置
３０１…ＣＰＵ
３０２…無線通信部
３０３…カメラモジュール
３０４…エンコーダ
３２６…カメラボタン
３３０…ポインティングデバイス
【特許請求の範囲】
【請求項１】
連続撮影が可能なカメラ部を有し、前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への送信を無線により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、
表示画面を有する表示部と、
前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、
前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と、
表示用のコンテンツを取得するコンテンツ取得部とを具備し、
前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる
情報処理装置。
【請求項２】
請求項１に記載の情報処理装置であって、
前記無線操作装置からの無線による第２の操作信号をもとに、前記保存された画像の中から処理対象の画像を選択する画像選択部と、
前記無線操作装置からの無線による第３の操作信号をもとに、前記選択された処理対象の画像に対して実行する処理を選択する処理選択部と
をさらに具備する情報処理装置。
【請求項３】
請求項２に記載の情報処理装置であって、
前記表示制御部は、前記画像保存部に保存された画像の縮小画像による一覧を前記表示部の表示画面に表示し、
前記画像選択部は、前記保存された画像の縮小画像による一覧に対する前記無線操作装置からの前記第２の操作信号をもとに前記処理対象の画像を選択する
情報処理装置。
【請求項４】
請求項３に記載の情報処理装置であって、
前記表示制御部は、選択可能な処理の一覧を前記表示部の表示画面に表示し、
前記処理選択部は、前記選択可能な処理の一覧に対する前記無線操作装置からの前記第３の操作信号をもとに処理を選択する
情報処理装置。
【請求項５】
請求項４に記載の情報処理装置であって、
前記画像選択部により選択された前記処理対象の画像に対して、前記処理選択部により選択された処理を実行する処理実行部をさらに具備する
情報処理装置。
【請求項６】
請求項５に記載の情報処理装置であって、
前記無線は無線ＬＡＮである
情報処理装置。
【請求項７】
請求項４に記載の情報処理装置であって、
前記画像選択部により選択された前記処理対象の画像を含む処理要求を、前記処理選択部により選択された処理を実行することが可能なウェブ上のサーバに送信する処理要求部をさらに具備する
情報処理装置。
【請求項８】
無線操作装置と、この無線操作装置によって無線により操作可能な情報処理装置とを具備し、
前記無線操作装置は、
連続撮影が可能なカメラ部と、
前記カメラ部で連続撮影された画像の系列を無線により前記情報処理装置へ送信する画像送信部とを具備し、
前記情報処理装置は、
表示画面を有する表示部と、
前記無線操作装置より送信された前記画像の系列を受信する画像受信部と、
前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、
前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と、
表示用のコンテンツを取得するコンテンツ取得部とを具備し、
前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる情報処理システム。
【請求項９】
無線操作装置は、カメラ部で連続撮影された画像の系列を、当該無線操作装置の操作対象である情報処理装置に無線により送信し、
前記情報処理装置において、表示制御部は、前記無線操作装置より受信した前記画像の系列を表示画面に順次表示し、画像保存部は、前記表示された画像の系列に対する前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存し、コンテンツ取得部は、表示用のコンテンツを取得し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる
情報処理方法。
【請求項１】
連続撮影が可能なカメラ部を有し、前記カメラ部による連続撮影によって得られた画像の系列の前記情報処理装置への送信を無線により行うことが可能な無線操作装置より、前記画像の系列を受信する画像受信部と、
表示画面を有する表示部と、
前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、
前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と、
表示用のコンテンツを取得するコンテンツ取得部とを具備し、
前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる
情報処理装置。
【請求項２】
請求項１に記載の情報処理装置であって、
前記無線操作装置からの無線による第２の操作信号をもとに、前記保存された画像の中から処理対象の画像を選択する画像選択部と、
前記無線操作装置からの無線による第３の操作信号をもとに、前記選択された処理対象の画像に対して実行する処理を選択する処理選択部と
をさらに具備する情報処理装置。
【請求項３】
請求項２に記載の情報処理装置であって、
前記表示制御部は、前記画像保存部に保存された画像の縮小画像による一覧を前記表示部の表示画面に表示し、
前記画像選択部は、前記保存された画像の縮小画像による一覧に対する前記無線操作装置からの前記第２の操作信号をもとに前記処理対象の画像を選択する
情報処理装置。
【請求項４】
請求項３に記載の情報処理装置であって、
前記表示制御部は、選択可能な処理の一覧を前記表示部の表示画面に表示し、
前記処理選択部は、前記選択可能な処理の一覧に対する前記無線操作装置からの前記第３の操作信号をもとに処理を選択する
情報処理装置。
【請求項５】
請求項４に記載の情報処理装置であって、
前記画像選択部により選択された前記処理対象の画像に対して、前記処理選択部により選択された処理を実行する処理実行部をさらに具備する
情報処理装置。
【請求項６】
請求項５に記載の情報処理装置であって、
前記無線は無線ＬＡＮである
情報処理装置。
【請求項７】
請求項４に記載の情報処理装置であって、
前記画像選択部により選択された前記処理対象の画像を含む処理要求を、前記処理選択部により選択された処理を実行することが可能なウェブ上のサーバに送信する処理要求部をさらに具備する
情報処理装置。
【請求項８】
無線操作装置と、この無線操作装置によって無線により操作可能な情報処理装置とを具備し、
前記無線操作装置は、
連続撮影が可能なカメラ部と、
前記カメラ部で連続撮影された画像の系列を無線により前記情報処理装置へ送信する画像送信部とを具備し、
前記情報処理装置は、
表示画面を有する表示部と、
前記無線操作装置より送信された前記画像の系列を受信する画像受信部と、
前記受信した画像の系列を前記表示画面に順次表示させる表示制御部と、
前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存する画像保存部と、
表示用のコンテンツを取得するコンテンツ取得部とを具備し、
前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる情報処理システム。
【請求項９】
無線操作装置は、カメラ部で連続撮影された画像の系列を、当該無線操作装置の操作対象である情報処理装置に無線により送信し、
前記情報処理装置において、表示制御部は、前記無線操作装置より受信した前記画像の系列を表示画面に順次表示し、画像保存部は、前記表示された画像の系列に対する前記無線操作装置からの無線による第１の操作信号をもとに、前記表示された画像の系列から保存対象の画像を選択して保存し、コンテンツ取得部は、表示用のコンテンツを取得し、前記表示制御部は、前記取得した表示用のコンテンツと前記受信した画像の系列を前記表示部の表示画面に同時に表示させる
情報処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１３−４６３０６（Ｐ２０１３−４６３０６Ａ）
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願番号】特願２０１１−１８４００１（Ｐ２０１１−１８４００１）
【出願日】平成２３年８月２５日（２０１１．８．２５）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願日】平成２３年８月２５日（２０１１．８．２５）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]