情報処理装置，情報表示方法，情報表示プログラム，及び記録媒体
【課題】撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができ，かつ，文書の撮影から翻訳語の表示までのタイムラグによって，ユーザにストレスを与えることのないカメラを用いた翻訳装置を提供する。
【解決手段】装置は，基本的には，文書の撮影から単語の翻訳語の表示までの間に，翻訳の対象となる単語を指示するカーソルを移動する処理を行うことにより，ユーザの視線をカーソルに惹きつけることができる。これにより，翻訳装置によってどの単語が翻訳されたのかを簡明に表示することができるとともに，文書の撮影から翻訳語の表示まで間にタイムラグが生じた場合であっても，ユーザにストレスを感じさせることがなくなる。
【解決手段】装置は，基本的には，文書の撮影から単語の翻訳語の表示までの間に，翻訳の対象となる単語を指示するカーソルを移動する処理を行うことにより，ユーザの視線をカーソルに惹きつけることができる。これにより，翻訳装置によってどの単語が翻訳されたのかを簡明に表示することができるとともに，文書の撮影から翻訳語の表示まで間にタイムラグが生じた場合であっても，ユーザにストレスを感じさせることがなくなる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は，撮影した文書に含まれるキャラクタの翻訳語を表示することができるカメラ辞書に関する。
【背景技術】
【０００２】
特開２００７−２８０１６６号公報（特許文献１）には，電子辞書が開示されている。この電子辞書は，視野内の中心部分にある単語または文章を他の形態の単語または文章に変換して，ユーザの視野内に表示する。
【０００３】
携帯電話Ｗ３１ＳＡの取り扱い説明書１６０ページ（非特許文献１）には，「カメラｄｅ辞書」サービスが掲載されている。このカメラｄｅ辞書サービスは，携帯電話にＯＣＲ機能を付加したものである。そして，この携帯電話は，撮影した写真に基づいてＯＣＲで用語を読み出し，読み出した用語を翻訳する機能を有するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２８０１６６号公報
【非特許文献】
【０００５】
【非特許文献１】携帯電話Ｗ３１ＳＡの取り扱い説明書１６０ページ
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１及び特許文献２に開示された装置は，いずれも，ある文章やある単語を撮影し，それに基づいてその翻訳文や翻訳語をモニタの所定の表示領域に表示するものである。このため，撮影された文書内に複数の単語がある場合，翻訳装置により，どの単語が翻訳されたのかがユーザに分かりにくくなるという問題があった。
【０００７】
また，カメラを用いた翻訳装置においては，一般的に，翻訳の対象となる文章をカメラで撮影し，撮影した文書から翻訳する単語を抽出し，抽出した単語を判別し，辞書を参照して，判別した単語の翻訳語を抽出する。そして，抽出した単語の翻訳語を表示部に表示するという処理が行われる。また，単語辞書には，一般的に，８万語程度の単語が記憶されている。従って，一般的な翻訳装置においては，文書の撮影から翻訳語の表示までの処理を行うのに時間がかかるものであり，文書を撮影してから単語の翻訳語が表示されるまでの間に，数秒のタイムタグが生じることとなる。このようなタイムラグは，翻訳装置を扱うユーザに対して，ストレスを与えることとなっていた。
【０００８】
そこで，本発明は，撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができるカメラを用いた翻訳装置を提供することを目的とする。
【０００９】
また，本発明は，文書の撮影から翻訳語の表示までのタイムラグによって，ユーザにストレスを与えることのないカメラを用いた翻訳装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明は，上記課題に鑑みてなされたものであり，基本的には，文書の撮影から単語の翻訳語の表示までの間に，翻訳の対象となる単語を指示するカーソルを移動する処理を行うことにより，ユーザの視線をカーソルに惹きつけることができるという知見に基づく。これにより，本発明は，翻訳装置によってどの単語が翻訳されたのかを簡明に表示することができるとともに，文書の撮影から翻訳語の表示まで間にタイムラグが生じた場合であっても，ユーザにストレスを感じさせることがない。
【００１１】
本発明の第１の側面は，カメラで撮影したキャラクタの翻訳を行う情報処理装置に関する。なお，本明細書中において，「翻訳」とは，日本語を外国語に置き換えることや，外国語を日本語に置き換えること，外国語を他の外国語に置き換えること，ある図形を言葉に置き換えること，ある言葉を図形に置き換えることのような様々な意味を有するものとして使用する。
この情報処理装置は，基本的には，撮影部と，辞書と，キャラクタ判別部と，情報抽出部と，表示部を備える。
この情報処理装置は，撮影部により，対象物を撮影する。辞書には，複数のキャラクタに関連した情報が記憶されている。キャラクタ判別部は，撮影部で撮影された対象物に含まれるあるキャラクタを判別する。情報抽出部は，キャラクタ判別部により判別されたあるキャラクタに基づいて，辞書から，あるキャラクタに対応した情報を抽出する。キャラクタに対応した情報の例は，ある用語に対する翻訳語や用例である。キャラクタは，一般的な文字であってもよいし，絵文字や，コード情報，記号であってもよい。表示部には，撮影部により撮影された撮影画像と，情報抽出部により抽出されたあるキャラクタに対応した情報が表示される。
そして，この情報処理装置は，さらに，カーソル表示部と，キャラクタ位置特定部と，カーソル位置移動部を備えている。
カーソル表示部は，表示部の所定箇所にカーソルを表示する。キャラクタ位置特定部は，キャラクタ判別部により判別されたあるキャラクタの，表示部における位置を特定する。
カーソル移動手段は，キャラクタ位置特定部により特定したあるキャラクタの位置の情報に基づいて，表示部の所定箇所に表示されたカーソルを，あるキャラクタの表示部における位置に移動させる制御を行う。
【００１２】
このように，本発明に係る情報処理装置においては，文書の撮影から翻訳語表示までの処理の間に，表示部に表示されたカーソルが，翻訳の対象のキャラクタ位置に移動するものである。このため，ユーザは，その処理の間，移動するカーソルを注視する。従って，この情報処理装置は，文書の撮影から翻訳語表示までのタイムラグによってストレスを感じさせることなく，ユーザに対して，翻訳語を提示することができる。さらに，表示部に表示されたカーソルは，翻訳の対象であるキャラクタの位置に移動する。従って，この情報処理装置は，撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができる。
【００１３】
本発明に係る情報処理装置においては，さらに，キャラクタサイズ特定部と，カーソルサイズ制御部を備えることが好ましい。キャラクタサイズ特定部は，キャラクタ位置特定部により対象物における位置が特定されたあるキャラクタの大きさを特定する。カーソル形状制御部は，キャラクタサイズ特定部が特定したあるキャラクタの大きさの情報に基づいて，カーソル位置移動部によりあるキャラクタの位置に移動したカーソルの大きさを制御する。
【００１４】
このように，本発明の情報処理装置の好ましい態様においては，カーソルが翻訳の対象であるキャラクタの位置に移動するだけでなく，その後，カーソルの大きさがそのキャラクタの大きさに合せて可変するものであるため，よりユーザの興味を惹きつけることができる。
【００１５】
本発明に係る情報処理装置においては，さらに，撮影部で撮影された対象物の種類を判別するための対象物判別部を備えることが好ましい。特に，対象物判別部は，カーソル位置特定部により特定されたあるキャラクタの大きさの情報に基づいて対象物の種類を判別するものでることが好ましい。この場合において，辞書は，対象物の種類に応じたデータベースを有する辞書である。また，情報抽出部は，対象物判別部により判別された対象物の種類を用いて，辞書に含まれる対象物の種類に応じた前記データベースを選択し，判別部により判別されたあるキャラクタに基づいて，選択されたデータベースから，あるキャラクタに対応した情報を抽出することが好ましい。
【００１６】
このように，本発明の好ましい態様においては，情報抽出部が，撮影の対象物に含まれるキャラクタの大きさに基づいて，情報を抽出する辞書のデータベースを選択するものである。このため，情報抽出部が，辞書データベースを参酌する処理を迅速なものとすることができる。例えば，情報処理抽出部は，キャラクタサイズ特定手段が，表示部に表示されたキャラクタの大きさが，所定の閾値よりも大きいものであると判断した場合，対象物が，撮影位置から近いもの（例えば雑誌），又はキャラクタが大きく表示されるもの（例えば看板）であると判断することができる。従って，辞書に記録されているキャラクタを，予め，例えば，「雑誌」や「看板」のように分類しておけば，情報抽出部が，辞書を参酌する時間を短縮することができる。
【００１７】
また，本発明に係る情報処理装置は，対象物を撮影するための撮影部を２つ備えることが好ましい。そして，キャラクタ判別部は，２つの撮影部で撮影された２つの撮影データに基づいて，対象物に含まれるあるキャラクタを判別するものであることが好ましい。
【００１８】
このように，本発明の好ましい態様においては，キャラクタ判別部は，異なる方向に設けられた撮影部により撮影された２つの撮影データを参酌して，対象物に含まれるキャラクタを判別するものである。従って，例えば，一方の撮影部によって撮影された撮影データに光が映りこみ対象物に含まれるキャラクタを判別できないものであっても，他方の撮影部により撮影された撮影データが正常であれば，このデータに基づいて対象物に含まれるキャラクタを判別することができる。
【００１９】
また，本発明に係る情報処理装置が，対象物を撮影するための撮影部を２つ備える場合，それらの撮影部により撮影された対象物を，表示部に立体表示することとしてもよい。従来のカメラ付き翻訳装置は，平面（二次元）の撮影対象物に含まれるキャラクタを撮影し，それを表示部に表示するものであった。しかし，本発明に係る情報処理装置のように，撮影部を２つ備えるものである場合，三次元空間に含まれる対象物を次々と撮影し，対象物のキャラクタを翻訳することができる。そして，２つの撮影部により撮影された対象物，その対象物に含まれるキャラクタの翻訳語，及びカーソルを，実空間における配置に対応させて，表示部に表示することにより，よりリアリティのある翻訳語表示が可能となる。
【００２０】
また，表示部は，第１表示部と，第２表示部に，ハードウェア的に分離されているものであることが好ましい。そして，第１表示部には，撮影部により撮影された撮影画像と，カーソル表示部により表示されるカーソルと，辞書に記憶されているキャラクタ詳細な説明の要約が表示される。一方，第２表示部には，辞書に記憶されているキャラクタの詳細な説明が表示される。この場合において辞書は，複数のキャラクタに関連した情報として，キャラクタの詳細な説明と，キャラクタの詳細な説明の要約を関連付けて記憶するものである。キャラクタの詳細な説明としては，例えば，キャラクタの用例や解説を含めた辞典に掲載されるような内容が表示され，キャラクタの詳細な説明の要約としては，例えば，用例や解説を省略し，最も一般的な用法の単語が３つ〜５つ程度表示されるものである。
【００２１】
このように，本発明に係る情報処理装置が，キャラクタの翻訳語の詳細な説明と要約を２つの表示部に分けて別々に表示することにより，ユーザは，例えば，詳しく知りたいキャラクタについては詳細画面を参酌し，簡潔に知りたいキャラクタについては要約画面を参酌するような，使い分けをすることができる。また，キャラクタの翻訳後の要約は，撮影部により撮影された撮影画像と同一の表示部に表示されるものであるため，ユーザは，視線方向の切り換えを行わずに，キャラクタの翻訳語の要約を知ることができる。
【００２２】
また，本発明に係る情報処理装置は，さらに，バルーン表示部を備えることが好ましい。バルーン表示部は，少なくとも，情報抽出部により抽出されたあるキャラクタに対応した情報を，表示部にバルーン表示するものである。
【００２３】
このように，本発明に係る情報処理装置は，情報抽出部に抽出されたキャラクタをバルーン表示するものであるため，ユーザの嗜好性を高めることができる。また，本発明に係る情報処理装置は，バルーン表示部によるバルーン表示のアクションを制御することにより，さらにユーザの嗜好性を高めることができる。
【００２４】
さらに，本発明に係る情報処理装置は，バルーン表示部によって表示部に表示されたバルーンを立体表示するように，バルーン画像の処理を行うこととしてもよい。このように，バルーン表示された翻訳語が，ユーザが立体的に視認できるよう表示されることにより，撮影部により撮影された対象物と，その対象物に含まれるキャラクタの翻訳語（バルーン）を区別して表示部に表示することができる。また，立体表示されたバルーンを，例えば揺動させるようにすることにより，ユーザは，より撮影対象物と翻訳語（バルーン）を区別して視認することができる。
【００２５】
本発明の第２の側面は，カメラで撮影したキャラクタの翻訳語を表示する情報表示方法に関する。
本発明に係る情報表示方法は，基本的には，撮影工程と，キャラクタ判別工程と，情報抽出工程と，表示工程を有し，情報抽出工程から表示工程の処理が行われる間に，カーソル表示工程と，キャラクタ位置特定工程と，カーソル位置移動工程を行う。
撮影工程においては，撮影部により，対象物を撮影する。キャラクタ判別工程においては，キャラクタ判別部により，撮影工程で撮影された対象物に含まれるあるキャラクタを判別する。情報抽出工程においては，情報抽出部により，キャラクタ判別工程で判別されたあるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，あるキャラクタに対応した情報を抽出する。表示工程においては，表示部に，撮影部により撮影された撮影画像と，情報抽出工程で抽出したあるキャラクタに対応した情報を表示する。カーソル表示工程においては，カーソル部により，表示部の所定箇所にカーソルを表示する。キャラクタ位置特定工程においては，キャラクタ位置特定部により，キャラクタ判別工程で判別されたあるキャラクタの表示部における位置を特定する。カーソル移動工程においては，カーソル位置移動部により，キャラクタ位置特定工程で特定されたあるキャラクタの位置の情報に基づいて，表示部の所定箇所に表示されたカーソルを，あるキャラクタの位置に移動させる。
【００２６】
本発明の第３の側面は，情報処理装置を，カメラで撮影したキャラクタの翻訳後を表示する装置として機能させるプログラムに関する。
本発明に係る情報表示プログラムは，基本的には，情報処理装置を，撮影手段と，キャラクタ判別手段と，情報抽出手段と，表示手段と，カーソル表示手段と，キャラクタ位置特定手段と，カーソル位置移動手段として機能させる。
撮影手段は，対象物を撮影する。キャラクタ判別手段は，撮影手段で撮影された対象物に含まれるあるキャラクタを判別する。情報抽出手段は，キャラクタ判別手段で判別されたあるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，あるキャラクタに対応した情報を抽出する。表示手段は，撮影手段により撮影された撮影画像と，情報抽出手段で抽出したあるキャラクタに対応した情報を表示する。カーソル表示手段は，表示手段の所定箇所にカーソルを表示する。キャラクタ位置特定手段は，キャラクタ判別手段で判別されたあるキャラクタの表示手段における位置を特定する。カーソル移動手段は，キャラクタ位置特定手段で特定されたあるキャラクタの位置の情報に基づいて，表示手段の所定箇所に表示されたカーソルを，あるキャラクタの位置に移動させる。
【００２７】
本発明の第４の側面は，本発明の第３の側面に係る情報表示プログラムを格納したコンピュータが読み取り可能な情報記録媒体に関する。
【発明の効果】
【００２８】
本発明においては，文書の撮影から単語表示までの処理の間に，モニタに表示されたカーソルが，翻訳対象のキャラクタ位置に移動する。このため，ユーザは，その処理の間，移動するカーソルを注視する。従って，本発明は，ユーザに対して，文書の撮影から単語表示までのタイムラグをストレスに感じさせることなく，キャラクタに対応する情報を表示することができる。
【００２９】
また，本発明においては，モニタに表示されたカーソルが，翻訳の対象であるキャラクタの位置に移動する。従って，本発明は，撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができる。
【図面の簡単な説明】
【００３０】
【図１】図１は，本発明の情報表示装置を説明するためのブロック図である。
【図２】図２は，本発明の情報処理装置が行う処理を説明するためのフロー図である
【図３】図３は，本発明の情報表示装置を用いた情報の表示例を示す図である。
【図４】図４は，本発明の情報処理装置に表示されたカーソルの動きの例を示す図である。
【図５】図５は，本発明の情報処理装置に表示されたカーソルの移動の例を示す図である。
【図６】図５は，本発明の情報処理装置が２画面式携帯用ゲーム機である場合の例を示す図である。
【図７】図７は，本発明の情報処理装置が携帯電話である場合の例を示す図である。
【図８】図８は，本発明の情報処理装置がデジタルカメラである場合の例を示す図である。
【図９】図９は，本発明の情報処理装置がスマートフォンである場合の例を示す図である。
【発明を実施するための形態】
【００３１】
以下，図面に基づいて本発明を実施するための形態について説明する。本発明は，以下の説明に限定されることなく，当業者に自明な範囲で適宜修正を加えたものも含む。
【００３２】
図１は，本発明の情報表示装置を説明するためのブロック図である。図１に示されるように，本発明の情報表示装置１は，撮影部１１と，辞書１２と，対象物判別部１３と，キャラクタ判別部１４と，情報抽出部１５と，表示部１６と，カーソル表示部２１と，キャラクタ位置特定部２２と，カーソル位置移動部２３と，キャラクタサイズ特定部２４と，カーソルサイズ制御部２５を含む。
【００３３】
情報表示装置は，撮影部１１及び表示部１６を有するものであればどのような形態のものであってもよい。また，情報表示装置は，撮影部１１が情報表示装置から離れた位置に存在し，撮影部１１が撮影した情報を受信して表示部１６に表示するものであってもよい。さらに，情報表示装置は，表示部１６が情報表示装置から離れた位置に存在するものであってもよい。情報表示装置の例は，２画面式携帯用ゲーム機，１画面式携帯用ゲーム機，デジタルカメラ，ビデオカメラ，携帯電話，スマートフォン，携帯型パーソナルコンピュータ，及びその他携帯端末である。また，情報処理装置は，表示部１６に三次元の立体映像を表示する立体映像表示装置であってもよい。立体映像表示装置は，偏光眼鏡やシャッター眼鏡を利用して立体映像を提示する眼鏡式ものであってもよいし，モニタにレンチキュラーレンズやパララックスバリアの視差障壁を備える裸眼式のものであってもよい。
【００３４】
撮影部１１は，対象物を撮影するための装置である。撮影部１１の例は，カメラである。カメラの例は，ＣＣＤカメラである。ＣＣＤカメラは，たとえば，動画撮影モードを用いる。この場合，たとえば１／３０秒ごとに被写体を捕らえて，ビデオメモリなどの画像記憶部へ連続的に記憶させる。情報処理装置は，撮影部１１を２以上備えるものであってもよい。複数の撮影部１１のそれぞれは，情報処理装置の異なる位置に備えられ，異なる角度で，対象物を撮影する。異なる視点において撮影された撮影画像は，例えば，立体映像表示装置において立体画像を表示するための画像として用いることができる。
【００３５】
辞書１２は，複数のキャラクタに関連した情報を記憶する電子的な辞書である。辞書の例は，英和辞書，和英辞書，国語辞典，地名事典，及び名称事典である。また，辞書１２は，ユーザによる情報の入力操作によって更新されることしてもよい。例えば，辞書１２にデフォルトで記憶されている情報は，ユーザが適宜追加・改変できることとしてもよい。
【００３６】
辞書１２は，撮影の対象物の種類に応じたデータベースを有することが好ましい。対象物の種類の例は，書籍，ノート，ポスター，地図，ゲーム画面，人形，表札，道路標識，掲示板及び看板である。これらの対象物のうち，例えば，ポスターや，表札，看板，ノートに含まれるキャラクタが撮影された場合，撮影画像におけるキャラクタの大きさは，比較的大きいものとなる。一方，例えば，書籍や，地図，道路標識，掲示板に含まれるキャラクタが撮影された場合に，撮影画像におけるキャラクタの大きさは，比較的小さいものとなる。
【００３７】
対象物判別部１３は，撮影部１１で撮影された対象物の種類を判別する機能を有する。
【００３８】
対象物判別部１３は，対象物に含まれるキャラクタの情報を用いて，対象物の種類を判別するものであってもよい。たとえば，後述のキャラクタサイズ特定部が，撮影部により撮影され表示部に表示されるキャラクタの大きさが，一定の閾値以上であると判断した
場合には，対象物判別部１３は，その対象物はキャラクタが大きく記載されたもの（例えば，ポスター，看板，表札）であると判別することができる。
【００３９】
この対象物判別部１３は，例えば，キャラクタの大きさに関する情報と対象物の種類とを関連付けたテーブルを有する。そして，撮影部により撮影され表示部に表示されたキャラクタの大きさに関する情報に基づいて，そのテーブルから対象物の種類に関する情報を読み出す。
【００４０】
対象物判別部１３は，対象物のうちキャラクタ以外の部分の色情報を用いて，対象物の種類を判別するものであってもよい。対象物判別部１３は，対象物のうちキャラクタ以外の部分の色情報と，キャラクタの色情報とを用いて，対象物の種類を判別するものであってもよい。
【００４１】
この対象物判別部１３は，例えば，キャラクタ以外の部分の色と対象物の種類とを関連付けたテーブルを有する。そして，キャラクタ以外の部分の色情報に基づいて，そのテーブルから対象物の種類に関する情報を読み出す。また，この対象物判別部１３の別の例は，キャラクタの色及びキャラクタ以外の部分の色と対象物の種類とを関連付けたテーブルを有する。この場合も，撮影部１１が撮影した対象物からキャラクタ部分を判別し，その上でキャラクタ部分の色及びキャラクタ以外の部分の色を判別する。そして，得られた色情報を用いてテーブルから対象物の種類に関する情報を抽出する。
【００４２】
対象物判別部１３は，撮影部１１の向きに基づいて，対象物の種類を判別するものであってもよい。たとえば，情報表示装置は，コンパスを有している。コンパスは，情報表示装置の向きを把握するものである。情報表示装置の向きを把握できれば，撮影部１１の向きをも把握することができる。すなわち，この対象物判別部１３は，コンパスと，コンパスからの情報に基づいて撮影部１１の向きを判断する向き判断部と，撮影部１１の向きと対象物の種類とを関連付けて記憶するテーブルを有するものである。コンパスからの情報を受け取った向き判断部が情報表示装置の向き及び撮影部の向きを判別する。そして，この対象物判別部１３は，求められた撮影部の向きに基づいてテーブルから対象物の種類を判別する。このようにして，容易に対象物を推測することができる。
【００４３】
対象物判別部１３は，入力情報に基づいて，対象物の種類を判別するものであってもよい。たとえば，表示部１６に，対象物の種類を選択させる表示が表示される。そして，表示部１６がタッチパネルである。そして，ユーザがタッチパネルを用いて対象物の種類を選択する。すると，タッチパネルから対象物の種類に関する情報が情報表示装置に入力される。そして，情報表示装置は，入力された対象物の種類に関する情報を用いて後述する処理を行う。
【００４４】
対象物判別部１３は，撮影部１１と，対象物との距離に基づいて，対象物の種類を判別するものであってもよい。カメラは通常対象物との距離を測定するための距離測定手段を有している。そして，この対象物判別部１３は，そのような距離測定手段を有する。距離測定手段を有するため，たとえば，遠方にある対象物は看板であるといったように対象物の種類を判別できる。
【００４５】
キャラクタ判別部１４は，撮影部１１で撮影された対象物に含まれるキャラクタを判別するための装置である。キャラクタ判別部１４の例は，ＯＣＲ又はＯＭＲである。
【００４６】
情報抽出部１５は，対象物の種類及びキャラクタに基づいて，辞書１２から，このキャラクタに対応した情報を抽出するための装置である。
【００４７】
表示部１６は，情報抽出部１５により抽出されたキャラクタに対応した情報を表示するための装置である。
【００４８】
カーソル表示部２１は，表示部１６の所定箇所に，カーソルを表示するための装置である。カーソル表示部２１によって表示されるカーソルの位置は，予め設定しておくこととしてもよい。また，カーソル表示部２１によって表示されるカーソルの位置は，乱数によって定めることとしてもよい。カーソルは，翻訳の対象であるキャラクタが表示部１６に表示される位置とは，異なる位置に表示されることが好ましい。カーソルは，矩形の枠体であってもよいし，アンダーラインのようなものであってもよい。
【００４９】
キャラクタ位置特定部２２は，キャラクタ判別部１４により判別されたキャラクタの，表示部１６における位置を特定する装置である。撮影部１１により対象物が撮影されると，表示部１６には，撮影部１１による撮影画像が表示される。キャラクタ判別部１４は，その撮影画像に基づいて，対象物に含まれるキャラクタを判別する。また，キャラクタ位置特定部２２は，そのキャラクタが，表示部１６に表示された位置を特定する。
【００５０】
カーソル位置移動部２３は，キャラクタ位置特定部２２により特定したキャラクタの位置の情報に基づいて，表示部１６の所定箇所に表示されたカーソルを，そのキャラクタの位置に移動させる装置である。カーソルの移動制御は，表示部１６に表示された所定箇所から，キャラクタ位置特定部より特定されたキャラクタの位置まで，最短ルートで，移動させることとしてもよい。また，カーソルの移動制御は，キャラクタの位置まで蛇行するようにして移動させることとしてもよい。カーソル位置移動部は，キャラクタの判別から翻訳語の表示までの処理時間を予め算出し，算出した処理時間に合わせて，カーソルの移動制御を行うことが好ましい。すなわち，カーソル位置移動部は，翻訳語が表示されるタイミングに合わせて，カーソルがキャラクタの位置に到達するよう制御を行うことが好ましい。
【００５１】
キャラクタサイズ特定部２４は，キャラクタ位置特定部２４により表示部１６における位置が特定されたキャラクタの大きさを特定する装置である。キャラクタサイズ特定部は，例えば，対象物に含まれる文字の間隔を検出し，相対的に文字間隔が大きくなっている箇所の間に含まれる文字群を１のキャラクタと判断し，これによりキャラクタの横幅及び縦幅を特定する。このように，キャラクタサイズ特定部２４は，キャラクタの横幅及び縦幅を求める。
【００５２】
カーソルサイズ制御部２５は，キャラクタサイズ特定部２４が特定したキャラクタの大きさの情報に基づいて，カーソル位置移動部２３によりそのキャラクタの位置に移動したカーソルの大きさを制御する装置である。カーソルサイズ制御部２５は，表示部１６に表示されているカーソルの大きさ（縦幅・横幅）と，キャラクタの大きさ（縦幅・横幅）を比較し，カーソルの大きさがキャラクタの大きさより小さい場合には，カーソルのサイズを大きくする制御をおこない，キャラクタの大きさに適合させる。一方，カーソルサイズ制御部は，カーソルの大きさがキャラクタの大きさより大きい場合には，カーソルの大きさを小さくする制御をおこない，キャラクタの大きさに適合させる。これにより，カーソルの大きさは，翻訳の対象となるキャラクタのみを囲い，他のキャラクタには重畳しない大きさとなるよう制御されることが好ましい。
【００５３】
情報処理装置は，さらに，バルーン表示部２６を備えることとしてもよい。バルーン表示部２６は，表示部１６に，翻訳語を表示する際に，その翻訳語をバルーン表示する画像処理を行う。バルーン表示とは，図３に示すように，翻訳語を，吹き出し枠（バルーン）内に表示し，吹き出し枠を，撮影部１１による撮影画像に重畳して表示させる処理である。バルーン表示部２６により表示されたバルーンは，揺動するように表示されるものであってもよい。また，情報処理装置が備える物体の角度や角速度を検出する計測器（加速度センサ・ジャイロセンサ）を用いて，情報処理装置の角度や移動速度を検出し，検出した角度・速度に基づいて，バルーンを揺動させることとしてもよい。また，表示部１６に表示されるバルーン画像について，ユーザが，表示部１６の手前（０位置）で，バルーンを視認できるよう処理を施すこととしてもよい。
【００５４】
次に，図２を参照して，上記した情報表示装置の動作例について説明する。図２は，本発明に係る情報処理装置が行う処理のフローを示す図である。まず，撮影部１１が対象物を撮影する（ステップＳ１）。この撮影は，連続的に行われる。撮影頻度は，たとえば１／３０秒である。このため，撮影部１１は，情報表示装置がわずかでも移動した瞬間に，被写体の異なる部分を撮影することとなる。すると，撮影部１１が撮影した画像は，画像処理部３１へ伝えられる。画像処理部３１は，撮影部１１から受け取った情報を分析して，表示部１６に表示できる画像となるよう処理を行う。画像処理部３１は，撮影部１１から受領した画像情報を連続的にビデオメモリなどの画像記憶部３２に伝え，画像記憶部３２は画像情報を一時
的に記憶する。
【００５５】
一方，画像処理部３１が処理を行った画像は，判別部３３へ伝えられる。判別部３３には，ＯＣＲ及びＯＭＲが含まれている。そして，ＯＣＲ又はＯＭＲが，画像に含まれるキャラクタを判別する。ＯＣＲ及びＯＭＲによるキャラクタ判別処理は既に知られている。
【００５６】
また，判別部３３は，対象物の種類を判別する（ステップＳ２）。判別部３３に含まれる対象物判別部１３は，例えば，対象物のうちキャラクタ以外の部分の色情報と，テーブルとを用いて対象物の種類を判別する。対象物のうちキャラクタ以外の部分の例は，キャラクタの背景色である。この場合，判別部３３は，対象物のうちキャラクタ以外の部分の色情報と対象物の種類とを関連付けたテーブルを有する。そして，キャラクタ以外の部分の色情報に基づいて，そのテーブルから対象物の種類に関する情報を読み出す。この例は，キャラクタの背景が白からクリーム色であれば，対象物は書類というものである。
【００５７】
また，対象物判別部１３は，後述するキャラクタサイズ特定処理において得られた対象物に含まれるキャラクタの大きさの情報を用いて，対象物の種類を判別することとしてもよい。この場合，判別部３３は，撮影部により撮影され表示部に表示されるキャラクタの大きさに関する情報と，対象物の種類とを関連付けて記憶するテーブルを有する。そして，対象物判別部１３は，表示部におけるキャラクタの大きさに関する情報を用いて，テーブルを参照し，対象物の種類に関する情報を読み出す。そして，判別部３３で判別された情報は適宜，判別情報記憶部３５に記憶される。
【００５８】
また，判別部３３は，キャラクタの種類を判別する（ステップＳ３）。判別部３３には，ＯＣＲ及びＯＭＲが含まれており，ＯＣＲ又はＯＭＲが，画像に含まれるキャラクタを判別する。ＯＣＲ及びＯＭＲによるキャラクタ判別処理は既に知られた方法によればよい。
【００５９】
情報抽出部１５は，対象物の種類に関する情報を用いて，辞書１２のうち対象物の種類に応じたデータベースを選択する（ステップＳ４）。すなわち，辞書は，対象物の種類に対応した複数のデータベースを有している。情報抽出部１５は，対象物の種類に関する情報を用いて，辞書１２のうち対象物の種類に応じたデータベースを選択する。その上で，情報抽出部１５は，キャラクタに基づいて，選択されたデータベースから，このキャラクタに対応した情報を抽出する。
【００６０】
情報抽出部１５が抽出した情報は，画像調整部３４によって，表示部１６に表示される画像に調整され，表示部１６に表示される（ステップＳ５）。画像調整部３４から表示情報を受け取った表示部１６は，次の撮影画像が撮影される前に所定の情報を表示することが好ましい。これにより，この情報表示装置は，対象語について適切な対応情報（訳など）をリアルタイムに次々と表示でき，リアルタイムレスポンスが可能となる。また，例えば，情報処理装置が備えるジャイロセンサと加速度センサを用いて，情報処理装置自体が移動していることを検知した場合には，撮影部１１により連続的に対象物を撮影し，情報抽出部１５によりリアルタイムに対象後についての対応情報を表示することとしてもよい。これにより，ユーザが，例えば，デジタルカメラにより，雑誌に含まれる単語を，そのデジタルカメラを文字列に沿ってスライドさせて連続的に読み込む場合，デジタルカメラは，リアルタイムにその単語の対応情報を次々と表示することができる。
【００６１】
また，対象物に含まれるキャラクタの対応情報が，表示部１６に表示されに際して，バルーン表示部によって，バルーン表示処理が行われることとしてもよい。キャラクタの対応情報をバルーン表示し，そのバルーンを揺動させる処理を行うことにより，よりユーザの興味をひくことができる。バルーン画像については，例えば，複数視点分の画像を生成し，レンチキュラーレンズやパララックスバリアのような視差障壁を介して表示することにより，バルーンが浮き上がるような裸眼立体表示を行うこともできる。
【００６２】
また，表示部１６は，２画面式パネルであってもよい。また，表示部１６は，タッチパネルであってもよい。表示部が２画面式である場合，それぞれの表示部には，異なった情報が表示される。例えば，表示部の一方の画面には，対象物に含まれるキャラクタの翻訳語の詳細な説明を表示し，他方の画面には，その詳細な説明に要約を表示する。
【００６３】
一方，上記撮影工程（ステップＳ１）から情報抽出工程（ステップＳ２）と並行して，カーソル制御工程（ステップＳ６からステップＳ１０）が行われる。カーソル制御工程は，表示部の所定箇所に表示したカーソルを，その表示部における翻訳の対象となるキャラクタの位置へと移動させる処理である。カーソル制御工程は，撮影部により対象物が撮影されたことを契機として処置が開始され，情報抽出部により抽出した対応情報が表示部に表示されるタイミングに併せて終了する。カーソル制御工程は，撮影部より対象物が撮影され表示部に対応情報が表示されるまでのタイムラグによって，ユーザが，ストレスを感じることが無いよう，カーソルを移動させることによってユーザの興味を惹きつけるための処理である。
【００６４】
カーソル表示部２１は，撮影部１１に対象物が撮影されたことを検知し，その後，表示部の所定箇所にカーソルを表示させる（ステップＳ６）。カーソルは，ユーザの興味を惹きつけるものであれば，どのような態様であってもよい。例えば，カーソル表示部２１は，枠体のカーソルを表示部の端部に表示するものであってもよい。また，カーソル表示部２１は，情報処理装置が備えるジャイロセンサと加速度センサを用いて，情報処理装置自体が移動していることを検知している場合には，撮影部１１により対象物が撮影されたとしても，カーソル表示を行わないこととしてもよい。一方，この場合において，カーソル表示部は２１，情報処理装置の移動が静止したことを検知した場合に，カーソル表示を行う。すなわち，カーソルは，携帯型の情報処理装置が，例えば書籍に含まれる単語を，その文字列によって連続的に撮影している場合には表示されず，情報処理装置の移動が静止したな愛には，静止したことを契機として，表示画面上に表示される。これにより，ユーザにとっての使いやすさを向上させることができる。
【００６５】
キャラクタ位置特定部２２は，キャラクタ判別工程で判別されたキャラクタが表示部に表示される位置を特定する（ステップＳ８）。キャラクタ位置特定部２２は，翻訳の対象となるキャラクタの表示部におけるｘ座標ｙ座標情報を検出することにより，そのキャラクタの位置を特定する。特定されたキャラクタの位置情報は，一旦，記憶部に記憶される。
【００６６】
カーソル位置移動部２３は，表示部１６の所定箇所に表示されたカーソルを，翻訳の対象となるキャラクタが表示部に表示される位置に移動させる処理をおこなう（ステップＳ９）。カーソル移動部２３は，記憶部に記憶されている翻訳の対象であるキャラクタの位置情報を読み出し，カーソルを，そのキャラクタの位置に移動させる。カーソルの移動は，例えば，直線的な移動，蛇行した移動，旋回した移動のような種々のパターンで行われるように制御することとしてもよい。カーソル移動パターンは，例えば乱数を用いて決定される。
【００６７】
キャラクタサイズ特定部２４は，翻訳の対象であるキャラクタが表示部に表示される大きさを特定する（ステップＳ９）キャラクタの大きさは，例えば，表示部においてそのキャラクタが，どの程度の割合の領域を占めているか，又はそのキャラクタを表示するための画像数を測定することにより求めることができる。このようにしてキャラクタサイズ特定部２４により特定されたキャラクタの大きさは，一旦，記憶部に記憶される。
【００６８】
カーソルサイズ制御部２５は，カーソルの表示画面上における大きさを，翻訳の対象であるキャラクタの表示画面上における大きさに適合させる（ステップＳ１０）。例えば，
カーソルサイズ制御部２５は，表示部１６に表示されているカーソルの大きさ（縦幅・横幅）と，キャラクタの大きさ（縦幅・横幅）を比較し，カーソルの大きさが，そのキャラクタの大きさに適合するよう制御を行う。これにより，キャラクタ位置に位置するカーソルは，その大きさが制御され，そのキャラクタにのみを囲う大きさとなることが好ましい。
【００６９】
なお，上記では，キャラクタ位置特定工程（ステップＳ７）及びカーソル位置移動工程（ステップ８）の後に，キャラクタサイズ特定工程（ステップＳ８）及びカーソルサイズ制御工程（ステップＳ１０）が行われる場合について説明した。しかし，キャラクタサイズ特定工程（ステップＳ８）及びカーソルサイズ制御工程（ステップＳ１０）の後に，キャラクタ位置特定工程（ステップＳ７）及びカーソル位置移動工程（ステップ８）が行われることとしてもよい。この場合には，表示部の所定箇所に表示されたカーソルは，まず，翻訳の対象であるキャラクタの大きさに適合され，その後に，カーソルがそのキャラクタの位置に移動される。
【００７０】
上記の動作は，制御部４１からの制御指令に基づいて行われる。例えば，入力部４２から所定の情報が制御部４１に入力されると，制御部４１は主記憶部４３に記憶されたメインメモリから制御プログラムを読み出す。そして，制御部４１は，読み出した制御プログラムからの指令に基づいて各種演算部に所定の演算処理を行わせる。そして，制御部４１は，得られた演算結果を表示部１６や出力部４４から出力する。
【００７１】
図３は，本発明に係る情報表示装置を用いた情報の表示例を示す図である。この例は，情報表示装置が，カメラを備えた２画面式携帯型ゲーム機の場合のものである。この例では，ゲーム機にカメラを用いて英語の本を写している。情報表示装置は，カメラによって本を撮影すると，撮影対象物の色情報や表示画面におけるキャラクタの大きさに関する情報に基づいて，撮影対象が書籍であると認識する。上画面には，カメラから撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の詳細な説明の要約のバルーンが表示されている。そして，下画面には，翻訳語の詳細な説明が表示されている。
【００７２】
つまり，下画面には，上画面において指定された翻訳対象語に対応する英和辞書の該当部分が表示されている。図３に示す例では，特に翻訳語を指定する必要がなく，ゲーム機自体と文字列に沿って移動させ，カメラで英語の本を連続的に撮影している間に翻訳領域に存在する語が自動的に翻訳される。そして，ゲーム機自体の移動が止まり，ある１つの単語（図３においては“ｆｏｒｅｓｔ”）を一定時間撮影すると，カーソルが表示される。なお，情報表示装置が移動すると翻訳対象語が変化するため，入力ボタンのいずれかを押すことで，翻訳対象語が変化する事態を防止するようにしてもよい。この場合，いずれかのボタンから入力を受けた情報表示装置は，現在表示されている語（図３においては“ｆｏｒｅｓｔ”）を表示させ続けるように処理すればよい。
【００７３】
図３に示す例では，上画面には，翻訳対象領域が指定されている。なお，翻訳対象領域は，図２に示される十字キーを用いて適宜移動できるものであってもよい。この場合，十字キーの操作又は上画面若しくは下画面をタッチ操作することにより，翻訳対象領域を移動する旨の指令が情報表示装置に入力される。すると，情報表示装置は，制御プログラムからの指令に基づいて，翻訳対象領域を移動させるための演算処理を行うとともに，モニタが移動した後の翻訳対象領域を表示するように表示処理を行う。
【００７４】
図４は，本発明の情報処理装置に表示されるカーソルの動きの例を示した図である。図４に示す例においては，ゲーム機のカメラを用いて，英語の本を撮影している。カメラにり，翻訳対象領域に英語の文章が入るようにしつつ，その文字列沿って英単語を連続的に撮影されている。そして，カメラの動きが，文章内に含まれるある単語（図４においては“ｆｏｒｅｓｔ”）を撮影したまま，一定時間（例えば，１〜３秒）静止したとする（図４（Ａ））。この場合，情報処理装置は，加速度センサやジャイロセンサにより，カメラの静止を検知する。すると，カメラが静止したことを契機として，モニタの左隅に枠状のカーソルが表示される（図４（Ｂ））。なお，カーソルは，例えば，ある指定されたボタン操作が押下されたことを契機としてモニタ上に表示されるものであってもよい。また，カーソルの出現位置は，一定であってもよいし，乱数によって定められるものであってもよい。
【００７５】
モニタにカーソルが表示されると，情報処理装置は，キャラクタ位置特定部によって，表示部における翻訳の対象である単語の位置を特定する。キャラクタ位置特定部は，キャラクタ判別部により判別された単語の表示部における位置を特定するものであってもよい。そして，情報処理装置のカーソル位置移動部は，モニタの左隅に表示されているカーソルを，キャラクタ位置特定部によって特定された単語の位置まで，移動させる（図４（Ｃ））。このとき，図４（Ｂ）に示す状態から図４（Ｃ）に示す状態までにカーソルが辿る軌跡は，例えば，直線的であったり，ジグザグに蛇行するものであったり，回転又は旋回するものであったりしてもよい。図５においては，モニタ上に表示されたカーソルの移動動作の軌跡（破線）が制御される例を示している。例えば，図５（Ａ）に示す例においては，モニタ上に表示されたカーソルが，翻訳の対象である単語の位置まで，略直線的に移動する。また，図５（Ｂ）に示す例においては，モニタ上に表示されたカーソルが，翻訳の対象である単語の位置まで，蛇行して移動する。また，図５（Ｃ）に示す例においては，モニタ上に表示されたカーソルが，一度旋回した後，翻訳対象である単語の位置まで移動する。
【００７６】
そして，キャラクタ位置特定部により特定された単語の位置までカーソルが移動すると，情報処理装置は，キャラクタサイズ特定部を用いて，その単語の大きさ（横幅及び縦幅）を特定する。キャラクタサイズ特定部が，単語の大きさを特定すると，情報処理装置は，カーソルサイズ制御部を用いて，カーソルの枠体の大きさを制御する。図４（Ｃ）に示す例は，単語の大きさより，カーソルの大きさが大きい場合である。この場合において，図４（Ｄ）に示すように，カーソルサイズ制御部は，単語の縦幅に合せて，カーソルの縦幅を縮小させる制御を行なう。また，図４（Ｄ）に示すように，カーソルサイズ制御部は，単語の横幅に合せて，カーソルの横幅を縮小させる制御を行う。このようにして，カーソルの大きさは，翻訳の対象である単語の大きさに適合するものとなる（図４（Ｄ））。
【００７７】
上記したカーソルの表示，カーソルの移動，及びカーソルの大きさの制御の処理は，情報処理装置における単語の翻訳の処理と並行して行われる。そして，情報処理装置における単語の翻訳の処理が完了するタイミングに合わせて，カーソルサイズの適合処理が終了することが好ましい。従って，図４（Ｅ）に示すように，カーソルの大きさが，翻訳の対象である単語の大きさに適合すると，その単語及びその単語の翻訳語（要約）が同一画面上にバルーン表示される（図４（Ｆ））。図４（Ｆ）に示す例においては，モニタに表示されたバルーンが立体映像としてポップアップするように画像処理が施されている。このように，カメラにより撮影された単語の翻訳語をモニタに表示する処理が行われている間，モニタにカーソルを表示し，そのカーソルを動作させることにより，ユーザにストレスを
【００７８】
図６は，情報表示装置を用いた表示例を示す図である。この例は，ゲーム機のカメラを用いて空港の表示板を写している。この例では，上画面で選択された単語“Ｃｈｉｎａ”に対応する英和辞書の部分が下画面に表示されている。また，単語選択画面である上画面には，英和辞書の要約と，“Ｃｈｉｎａ”の文字が，バルーン表示されている。このバルーンは，立体映像として視認されるよう画像処理が施されたものである。この例では，ユーザは表示板を撮影するため，ゲーム機のカメラを下向きではなく，上方に向ける。そして，情報表示装置に内蔵されているジャイロは，撮影部の向きが上方であることを感知し，制御部へ伝える。すると，制御部は，制御プログラムの指令を受け，対象物判別部１３に対象物を判別させる。その結果，対象物判別部１３は,撮影部の角度が所定値以上であるという情報に基づいて，対象物が書籍ではないと判断する。そして，情報抽出部１５は，対象物が書籍ではないという情報に基づいて辞書１２中のデータベースを選択する。その上で，適切な辞書部分を抽出し，表示してもよい。
【００７９】
図７は，カメラを備えた１画面式の携帯電話を用いた情報の表示例を示す図である。この例では，携帯電話に備えられたカメラを用いて英語の本を撮影している。携帯電話は，カメラによって本を撮影すると，例えば，撮影対象物の色情報や，表示画面におけるキャラクタの大きさに関する情報に基づいて，撮影対象が書籍であると認識する。携帯電話のモニタには，カメラによって撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の要約を表示するバルーンが表示される。また，このバルーンは立体画像として視認されるよう画像処理が施されている。
【００８０】
図８は，デジタルカメラを用いた情報の表示例を示す図である。この例では，デジタルカメラの撮影部により英語の本を撮影し，撮影画像をそのモニタに表示している。デジタルカメラによって本を撮影すると，例えば，撮影位置から撮影対象物までの距離を認識し，その距離に関する情報に基づいて，撮影対象が書籍であると認識する。デジタルカメラのモニタには，カメラによって撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の要約を表示するバルーンが表示されている。また，このバルーンは立体画像として視認されるよう画像処理が施されている。
【００８１】
図９は，カメラを備えた１画面式のスマートフォンを用いた情報の表示例を示す図である。この例では，携帯電話に備えられたカメラを用いて英語の本を撮影している。また，この例では，モニタ（表示部）はタッチパネル式であり，入力部としても機能する。スマートフォンは，カメラによって本を撮影すると，ジャイロセンサにより本体の傾きを検知して，その傾きの情報に基づいて，撮影対象が書籍であると認識する。タッチパネルには，カメラによって撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の要約を表示するバルーンが表示されている。また，このバルーンは立体画像として視認されるよう画像処理が施されている。
【産業上の利用可能性】
【００８２】
本発明は，学習や旅行に際して用いられる翻訳ルーツとして好適に利用され得る。
【符号の説明】
【００８３】
１ 情報表示装置
１１ 撮影部
１２ 辞書
１３ 対象物判別部
１４ キャラクタ判別部
１５ 情報抽出部
１６ 表示部
２１ カーソル表示部
２２ キャラクタ位置特定部
２３ カーソル位置移動部
２４ キャラクタサイズ特定部
２５ カーソルサイズ制御部
２６ バルーン表示部
３１ 画像処理部
３２ 画像記憶部
３３ 判別部
３４ 画像調整部
３５ 一時記憶部
４１ 制御部
４２ 入力部
４３ 主記憶部
４４ 出力部
【技術分野】
【０００１】
本発明は，撮影した文書に含まれるキャラクタの翻訳語を表示することができるカメラ辞書に関する。
【背景技術】
【０００２】
特開２００７−２８０１６６号公報（特許文献１）には，電子辞書が開示されている。この電子辞書は，視野内の中心部分にある単語または文章を他の形態の単語または文章に変換して，ユーザの視野内に表示する。
【０００３】
携帯電話Ｗ３１ＳＡの取り扱い説明書１６０ページ（非特許文献１）には，「カメラｄｅ辞書」サービスが掲載されている。このカメラｄｅ辞書サービスは，携帯電話にＯＣＲ機能を付加したものである。そして，この携帯電話は，撮影した写真に基づいてＯＣＲで用語を読み出し，読み出した用語を翻訳する機能を有するものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２８０１６６号公報
【非特許文献】
【０００５】
【非特許文献１】携帯電話Ｗ３１ＳＡの取り扱い説明書１６０ページ
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１及び特許文献２に開示された装置は，いずれも，ある文章やある単語を撮影し，それに基づいてその翻訳文や翻訳語をモニタの所定の表示領域に表示するものである。このため，撮影された文書内に複数の単語がある場合，翻訳装置により，どの単語が翻訳されたのかがユーザに分かりにくくなるという問題があった。
【０００７】
また，カメラを用いた翻訳装置においては，一般的に，翻訳の対象となる文章をカメラで撮影し，撮影した文書から翻訳する単語を抽出し，抽出した単語を判別し，辞書を参照して，判別した単語の翻訳語を抽出する。そして，抽出した単語の翻訳語を表示部に表示するという処理が行われる。また，単語辞書には，一般的に，８万語程度の単語が記憶されている。従って，一般的な翻訳装置においては，文書の撮影から翻訳語の表示までの処理を行うのに時間がかかるものであり，文書を撮影してから単語の翻訳語が表示されるまでの間に，数秒のタイムタグが生じることとなる。このようなタイムラグは，翻訳装置を扱うユーザに対して，ストレスを与えることとなっていた。
【０００８】
そこで，本発明は，撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができるカメラを用いた翻訳装置を提供することを目的とする。
【０００９】
また，本発明は，文書の撮影から翻訳語の表示までのタイムラグによって，ユーザにストレスを与えることのないカメラを用いた翻訳装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明は，上記課題に鑑みてなされたものであり，基本的には，文書の撮影から単語の翻訳語の表示までの間に，翻訳の対象となる単語を指示するカーソルを移動する処理を行うことにより，ユーザの視線をカーソルに惹きつけることができるという知見に基づく。これにより，本発明は，翻訳装置によってどの単語が翻訳されたのかを簡明に表示することができるとともに，文書の撮影から翻訳語の表示まで間にタイムラグが生じた場合であっても，ユーザにストレスを感じさせることがない。
【００１１】
本発明の第１の側面は，カメラで撮影したキャラクタの翻訳を行う情報処理装置に関する。なお，本明細書中において，「翻訳」とは，日本語を外国語に置き換えることや，外国語を日本語に置き換えること，外国語を他の外国語に置き換えること，ある図形を言葉に置き換えること，ある言葉を図形に置き換えることのような様々な意味を有するものとして使用する。
この情報処理装置は，基本的には，撮影部と，辞書と，キャラクタ判別部と，情報抽出部と，表示部を備える。
この情報処理装置は，撮影部により，対象物を撮影する。辞書には，複数のキャラクタに関連した情報が記憶されている。キャラクタ判別部は，撮影部で撮影された対象物に含まれるあるキャラクタを判別する。情報抽出部は，キャラクタ判別部により判別されたあるキャラクタに基づいて，辞書から，あるキャラクタに対応した情報を抽出する。キャラクタに対応した情報の例は，ある用語に対する翻訳語や用例である。キャラクタは，一般的な文字であってもよいし，絵文字や，コード情報，記号であってもよい。表示部には，撮影部により撮影された撮影画像と，情報抽出部により抽出されたあるキャラクタに対応した情報が表示される。
そして，この情報処理装置は，さらに，カーソル表示部と，キャラクタ位置特定部と，カーソル位置移動部を備えている。
カーソル表示部は，表示部の所定箇所にカーソルを表示する。キャラクタ位置特定部は，キャラクタ判別部により判別されたあるキャラクタの，表示部における位置を特定する。
カーソル移動手段は，キャラクタ位置特定部により特定したあるキャラクタの位置の情報に基づいて，表示部の所定箇所に表示されたカーソルを，あるキャラクタの表示部における位置に移動させる制御を行う。
【００１２】
このように，本発明に係る情報処理装置においては，文書の撮影から翻訳語表示までの処理の間に，表示部に表示されたカーソルが，翻訳の対象のキャラクタ位置に移動するものである。このため，ユーザは，その処理の間，移動するカーソルを注視する。従って，この情報処理装置は，文書の撮影から翻訳語表示までのタイムラグによってストレスを感じさせることなく，ユーザに対して，翻訳語を提示することができる。さらに，表示部に表示されたカーソルは，翻訳の対象であるキャラクタの位置に移動する。従って，この情報処理装置は，撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができる。
【００１３】
本発明に係る情報処理装置においては，さらに，キャラクタサイズ特定部と，カーソルサイズ制御部を備えることが好ましい。キャラクタサイズ特定部は，キャラクタ位置特定部により対象物における位置が特定されたあるキャラクタの大きさを特定する。カーソル形状制御部は，キャラクタサイズ特定部が特定したあるキャラクタの大きさの情報に基づいて，カーソル位置移動部によりあるキャラクタの位置に移動したカーソルの大きさを制御する。
【００１４】
このように，本発明の情報処理装置の好ましい態様においては，カーソルが翻訳の対象であるキャラクタの位置に移動するだけでなく，その後，カーソルの大きさがそのキャラクタの大きさに合せて可変するものであるため，よりユーザの興味を惹きつけることができる。
【００１５】
本発明に係る情報処理装置においては，さらに，撮影部で撮影された対象物の種類を判別するための対象物判別部を備えることが好ましい。特に，対象物判別部は，カーソル位置特定部により特定されたあるキャラクタの大きさの情報に基づいて対象物の種類を判別するものでることが好ましい。この場合において，辞書は，対象物の種類に応じたデータベースを有する辞書である。また，情報抽出部は，対象物判別部により判別された対象物の種類を用いて，辞書に含まれる対象物の種類に応じた前記データベースを選択し，判別部により判別されたあるキャラクタに基づいて，選択されたデータベースから，あるキャラクタに対応した情報を抽出することが好ましい。
【００１６】
このように，本発明の好ましい態様においては，情報抽出部が，撮影の対象物に含まれるキャラクタの大きさに基づいて，情報を抽出する辞書のデータベースを選択するものである。このため，情報抽出部が，辞書データベースを参酌する処理を迅速なものとすることができる。例えば，情報処理抽出部は，キャラクタサイズ特定手段が，表示部に表示されたキャラクタの大きさが，所定の閾値よりも大きいものであると判断した場合，対象物が，撮影位置から近いもの（例えば雑誌），又はキャラクタが大きく表示されるもの（例えば看板）であると判断することができる。従って，辞書に記録されているキャラクタを，予め，例えば，「雑誌」や「看板」のように分類しておけば，情報抽出部が，辞書を参酌する時間を短縮することができる。
【００１７】
また，本発明に係る情報処理装置は，対象物を撮影するための撮影部を２つ備えることが好ましい。そして，キャラクタ判別部は，２つの撮影部で撮影された２つの撮影データに基づいて，対象物に含まれるあるキャラクタを判別するものであることが好ましい。
【００１８】
このように，本発明の好ましい態様においては，キャラクタ判別部は，異なる方向に設けられた撮影部により撮影された２つの撮影データを参酌して，対象物に含まれるキャラクタを判別するものである。従って，例えば，一方の撮影部によって撮影された撮影データに光が映りこみ対象物に含まれるキャラクタを判別できないものであっても，他方の撮影部により撮影された撮影データが正常であれば，このデータに基づいて対象物に含まれるキャラクタを判別することができる。
【００１９】
また，本発明に係る情報処理装置が，対象物を撮影するための撮影部を２つ備える場合，それらの撮影部により撮影された対象物を，表示部に立体表示することとしてもよい。従来のカメラ付き翻訳装置は，平面（二次元）の撮影対象物に含まれるキャラクタを撮影し，それを表示部に表示するものであった。しかし，本発明に係る情報処理装置のように，撮影部を２つ備えるものである場合，三次元空間に含まれる対象物を次々と撮影し，対象物のキャラクタを翻訳することができる。そして，２つの撮影部により撮影された対象物，その対象物に含まれるキャラクタの翻訳語，及びカーソルを，実空間における配置に対応させて，表示部に表示することにより，よりリアリティのある翻訳語表示が可能となる。
【００２０】
また，表示部は，第１表示部と，第２表示部に，ハードウェア的に分離されているものであることが好ましい。そして，第１表示部には，撮影部により撮影された撮影画像と，カーソル表示部により表示されるカーソルと，辞書に記憶されているキャラクタ詳細な説明の要約が表示される。一方，第２表示部には，辞書に記憶されているキャラクタの詳細な説明が表示される。この場合において辞書は，複数のキャラクタに関連した情報として，キャラクタの詳細な説明と，キャラクタの詳細な説明の要約を関連付けて記憶するものである。キャラクタの詳細な説明としては，例えば，キャラクタの用例や解説を含めた辞典に掲載されるような内容が表示され，キャラクタの詳細な説明の要約としては，例えば，用例や解説を省略し，最も一般的な用法の単語が３つ〜５つ程度表示されるものである。
【００２１】
このように，本発明に係る情報処理装置が，キャラクタの翻訳語の詳細な説明と要約を２つの表示部に分けて別々に表示することにより，ユーザは，例えば，詳しく知りたいキャラクタについては詳細画面を参酌し，簡潔に知りたいキャラクタについては要約画面を参酌するような，使い分けをすることができる。また，キャラクタの翻訳後の要約は，撮影部により撮影された撮影画像と同一の表示部に表示されるものであるため，ユーザは，視線方向の切り換えを行わずに，キャラクタの翻訳語の要約を知ることができる。
【００２２】
また，本発明に係る情報処理装置は，さらに，バルーン表示部を備えることが好ましい。バルーン表示部は，少なくとも，情報抽出部により抽出されたあるキャラクタに対応した情報を，表示部にバルーン表示するものである。
【００２３】
このように，本発明に係る情報処理装置は，情報抽出部に抽出されたキャラクタをバルーン表示するものであるため，ユーザの嗜好性を高めることができる。また，本発明に係る情報処理装置は，バルーン表示部によるバルーン表示のアクションを制御することにより，さらにユーザの嗜好性を高めることができる。
【００２４】
さらに，本発明に係る情報処理装置は，バルーン表示部によって表示部に表示されたバルーンを立体表示するように，バルーン画像の処理を行うこととしてもよい。このように，バルーン表示された翻訳語が，ユーザが立体的に視認できるよう表示されることにより，撮影部により撮影された対象物と，その対象物に含まれるキャラクタの翻訳語（バルーン）を区別して表示部に表示することができる。また，立体表示されたバルーンを，例えば揺動させるようにすることにより，ユーザは，より撮影対象物と翻訳語（バルーン）を区別して視認することができる。
【００２５】
本発明の第２の側面は，カメラで撮影したキャラクタの翻訳語を表示する情報表示方法に関する。
本発明に係る情報表示方法は，基本的には，撮影工程と，キャラクタ判別工程と，情報抽出工程と，表示工程を有し，情報抽出工程から表示工程の処理が行われる間に，カーソル表示工程と，キャラクタ位置特定工程と，カーソル位置移動工程を行う。
撮影工程においては，撮影部により，対象物を撮影する。キャラクタ判別工程においては，キャラクタ判別部により，撮影工程で撮影された対象物に含まれるあるキャラクタを判別する。情報抽出工程においては，情報抽出部により，キャラクタ判別工程で判別されたあるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，あるキャラクタに対応した情報を抽出する。表示工程においては，表示部に，撮影部により撮影された撮影画像と，情報抽出工程で抽出したあるキャラクタに対応した情報を表示する。カーソル表示工程においては，カーソル部により，表示部の所定箇所にカーソルを表示する。キャラクタ位置特定工程においては，キャラクタ位置特定部により，キャラクタ判別工程で判別されたあるキャラクタの表示部における位置を特定する。カーソル移動工程においては，カーソル位置移動部により，キャラクタ位置特定工程で特定されたあるキャラクタの位置の情報に基づいて，表示部の所定箇所に表示されたカーソルを，あるキャラクタの位置に移動させる。
【００２６】
本発明の第３の側面は，情報処理装置を，カメラで撮影したキャラクタの翻訳後を表示する装置として機能させるプログラムに関する。
本発明に係る情報表示プログラムは，基本的には，情報処理装置を，撮影手段と，キャラクタ判別手段と，情報抽出手段と，表示手段と，カーソル表示手段と，キャラクタ位置特定手段と，カーソル位置移動手段として機能させる。
撮影手段は，対象物を撮影する。キャラクタ判別手段は，撮影手段で撮影された対象物に含まれるあるキャラクタを判別する。情報抽出手段は，キャラクタ判別手段で判別されたあるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，あるキャラクタに対応した情報を抽出する。表示手段は，撮影手段により撮影された撮影画像と，情報抽出手段で抽出したあるキャラクタに対応した情報を表示する。カーソル表示手段は，表示手段の所定箇所にカーソルを表示する。キャラクタ位置特定手段は，キャラクタ判別手段で判別されたあるキャラクタの表示手段における位置を特定する。カーソル移動手段は，キャラクタ位置特定手段で特定されたあるキャラクタの位置の情報に基づいて，表示手段の所定箇所に表示されたカーソルを，あるキャラクタの位置に移動させる。
【００２７】
本発明の第４の側面は，本発明の第３の側面に係る情報表示プログラムを格納したコンピュータが読み取り可能な情報記録媒体に関する。
【発明の効果】
【００２８】
本発明においては，文書の撮影から単語表示までの処理の間に，モニタに表示されたカーソルが，翻訳対象のキャラクタ位置に移動する。このため，ユーザは，その処理の間，移動するカーソルを注視する。従って，本発明は，ユーザに対して，文書の撮影から単語表示までのタイムラグをストレスに感じさせることなく，キャラクタに対応する情報を表示することができる。
【００２９】
また，本発明においては，モニタに表示されたカーソルが，翻訳の対象であるキャラクタの位置に移動する。従って，本発明は，撮影された文書内に複数の単語が存在する場合であっても，どの単語を翻訳したのかをユーザに分かりやすく示すことができる。
【図面の簡単な説明】
【００３０】
【図１】図１は，本発明の情報表示装置を説明するためのブロック図である。
【図２】図２は，本発明の情報処理装置が行う処理を説明するためのフロー図である
【図３】図３は，本発明の情報表示装置を用いた情報の表示例を示す図である。
【図４】図４は，本発明の情報処理装置に表示されたカーソルの動きの例を示す図である。
【図５】図５は，本発明の情報処理装置に表示されたカーソルの移動の例を示す図である。
【図６】図５は，本発明の情報処理装置が２画面式携帯用ゲーム機である場合の例を示す図である。
【図７】図７は，本発明の情報処理装置が携帯電話である場合の例を示す図である。
【図８】図８は，本発明の情報処理装置がデジタルカメラである場合の例を示す図である。
【図９】図９は，本発明の情報処理装置がスマートフォンである場合の例を示す図である。
【発明を実施するための形態】
【００３１】
以下，図面に基づいて本発明を実施するための形態について説明する。本発明は，以下の説明に限定されることなく，当業者に自明な範囲で適宜修正を加えたものも含む。
【００３２】
図１は，本発明の情報表示装置を説明するためのブロック図である。図１に示されるように，本発明の情報表示装置１は，撮影部１１と，辞書１２と，対象物判別部１３と，キャラクタ判別部１４と，情報抽出部１５と，表示部１６と，カーソル表示部２１と，キャラクタ位置特定部２２と，カーソル位置移動部２３と，キャラクタサイズ特定部２４と，カーソルサイズ制御部２５を含む。
【００３３】
情報表示装置は，撮影部１１及び表示部１６を有するものであればどのような形態のものであってもよい。また，情報表示装置は，撮影部１１が情報表示装置から離れた位置に存在し，撮影部１１が撮影した情報を受信して表示部１６に表示するものであってもよい。さらに，情報表示装置は，表示部１６が情報表示装置から離れた位置に存在するものであってもよい。情報表示装置の例は，２画面式携帯用ゲーム機，１画面式携帯用ゲーム機，デジタルカメラ，ビデオカメラ，携帯電話，スマートフォン，携帯型パーソナルコンピュータ，及びその他携帯端末である。また，情報処理装置は，表示部１６に三次元の立体映像を表示する立体映像表示装置であってもよい。立体映像表示装置は，偏光眼鏡やシャッター眼鏡を利用して立体映像を提示する眼鏡式ものであってもよいし，モニタにレンチキュラーレンズやパララックスバリアの視差障壁を備える裸眼式のものであってもよい。
【００３４】
撮影部１１は，対象物を撮影するための装置である。撮影部１１の例は，カメラである。カメラの例は，ＣＣＤカメラである。ＣＣＤカメラは，たとえば，動画撮影モードを用いる。この場合，たとえば１／３０秒ごとに被写体を捕らえて，ビデオメモリなどの画像記憶部へ連続的に記憶させる。情報処理装置は，撮影部１１を２以上備えるものであってもよい。複数の撮影部１１のそれぞれは，情報処理装置の異なる位置に備えられ，異なる角度で，対象物を撮影する。異なる視点において撮影された撮影画像は，例えば，立体映像表示装置において立体画像を表示するための画像として用いることができる。
【００３５】
辞書１２は，複数のキャラクタに関連した情報を記憶する電子的な辞書である。辞書の例は，英和辞書，和英辞書，国語辞典，地名事典，及び名称事典である。また，辞書１２は，ユーザによる情報の入力操作によって更新されることしてもよい。例えば，辞書１２にデフォルトで記憶されている情報は，ユーザが適宜追加・改変できることとしてもよい。
【００３６】
辞書１２は，撮影の対象物の種類に応じたデータベースを有することが好ましい。対象物の種類の例は，書籍，ノート，ポスター，地図，ゲーム画面，人形，表札，道路標識，掲示板及び看板である。これらの対象物のうち，例えば，ポスターや，表札，看板，ノートに含まれるキャラクタが撮影された場合，撮影画像におけるキャラクタの大きさは，比較的大きいものとなる。一方，例えば，書籍や，地図，道路標識，掲示板に含まれるキャラクタが撮影された場合に，撮影画像におけるキャラクタの大きさは，比較的小さいものとなる。
【００３７】
対象物判別部１３は，撮影部１１で撮影された対象物の種類を判別する機能を有する。
【００３８】
対象物判別部１３は，対象物に含まれるキャラクタの情報を用いて，対象物の種類を判別するものであってもよい。たとえば，後述のキャラクタサイズ特定部が，撮影部により撮影され表示部に表示されるキャラクタの大きさが，一定の閾値以上であると判断した
場合には，対象物判別部１３は，その対象物はキャラクタが大きく記載されたもの（例えば，ポスター，看板，表札）であると判別することができる。
【００３９】
この対象物判別部１３は，例えば，キャラクタの大きさに関する情報と対象物の種類とを関連付けたテーブルを有する。そして，撮影部により撮影され表示部に表示されたキャラクタの大きさに関する情報に基づいて，そのテーブルから対象物の種類に関する情報を読み出す。
【００４０】
対象物判別部１３は，対象物のうちキャラクタ以外の部分の色情報を用いて，対象物の種類を判別するものであってもよい。対象物判別部１３は，対象物のうちキャラクタ以外の部分の色情報と，キャラクタの色情報とを用いて，対象物の種類を判別するものであってもよい。
【００４１】
この対象物判別部１３は，例えば，キャラクタ以外の部分の色と対象物の種類とを関連付けたテーブルを有する。そして，キャラクタ以外の部分の色情報に基づいて，そのテーブルから対象物の種類に関する情報を読み出す。また，この対象物判別部１３の別の例は，キャラクタの色及びキャラクタ以外の部分の色と対象物の種類とを関連付けたテーブルを有する。この場合も，撮影部１１が撮影した対象物からキャラクタ部分を判別し，その上でキャラクタ部分の色及びキャラクタ以外の部分の色を判別する。そして，得られた色情報を用いてテーブルから対象物の種類に関する情報を抽出する。
【００４２】
対象物判別部１３は，撮影部１１の向きに基づいて，対象物の種類を判別するものであってもよい。たとえば，情報表示装置は，コンパスを有している。コンパスは，情報表示装置の向きを把握するものである。情報表示装置の向きを把握できれば，撮影部１１の向きをも把握することができる。すなわち，この対象物判別部１３は，コンパスと，コンパスからの情報に基づいて撮影部１１の向きを判断する向き判断部と，撮影部１１の向きと対象物の種類とを関連付けて記憶するテーブルを有するものである。コンパスからの情報を受け取った向き判断部が情報表示装置の向き及び撮影部の向きを判別する。そして，この対象物判別部１３は，求められた撮影部の向きに基づいてテーブルから対象物の種類を判別する。このようにして，容易に対象物を推測することができる。
【００４３】
対象物判別部１３は，入力情報に基づいて，対象物の種類を判別するものであってもよい。たとえば，表示部１６に，対象物の種類を選択させる表示が表示される。そして，表示部１６がタッチパネルである。そして，ユーザがタッチパネルを用いて対象物の種類を選択する。すると，タッチパネルから対象物の種類に関する情報が情報表示装置に入力される。そして，情報表示装置は，入力された対象物の種類に関する情報を用いて後述する処理を行う。
【００４４】
対象物判別部１３は，撮影部１１と，対象物との距離に基づいて，対象物の種類を判別するものであってもよい。カメラは通常対象物との距離を測定するための距離測定手段を有している。そして，この対象物判別部１３は，そのような距離測定手段を有する。距離測定手段を有するため，たとえば，遠方にある対象物は看板であるといったように対象物の種類を判別できる。
【００４５】
キャラクタ判別部１４は，撮影部１１で撮影された対象物に含まれるキャラクタを判別するための装置である。キャラクタ判別部１４の例は，ＯＣＲ又はＯＭＲである。
【００４６】
情報抽出部１５は，対象物の種類及びキャラクタに基づいて，辞書１２から，このキャラクタに対応した情報を抽出するための装置である。
【００４７】
表示部１６は，情報抽出部１５により抽出されたキャラクタに対応した情報を表示するための装置である。
【００４８】
カーソル表示部２１は，表示部１６の所定箇所に，カーソルを表示するための装置である。カーソル表示部２１によって表示されるカーソルの位置は，予め設定しておくこととしてもよい。また，カーソル表示部２１によって表示されるカーソルの位置は，乱数によって定めることとしてもよい。カーソルは，翻訳の対象であるキャラクタが表示部１６に表示される位置とは，異なる位置に表示されることが好ましい。カーソルは，矩形の枠体であってもよいし，アンダーラインのようなものであってもよい。
【００４９】
キャラクタ位置特定部２２は，キャラクタ判別部１４により判別されたキャラクタの，表示部１６における位置を特定する装置である。撮影部１１により対象物が撮影されると，表示部１６には，撮影部１１による撮影画像が表示される。キャラクタ判別部１４は，その撮影画像に基づいて，対象物に含まれるキャラクタを判別する。また，キャラクタ位置特定部２２は，そのキャラクタが，表示部１６に表示された位置を特定する。
【００５０】
カーソル位置移動部２３は，キャラクタ位置特定部２２により特定したキャラクタの位置の情報に基づいて，表示部１６の所定箇所に表示されたカーソルを，そのキャラクタの位置に移動させる装置である。カーソルの移動制御は，表示部１６に表示された所定箇所から，キャラクタ位置特定部より特定されたキャラクタの位置まで，最短ルートで，移動させることとしてもよい。また，カーソルの移動制御は，キャラクタの位置まで蛇行するようにして移動させることとしてもよい。カーソル位置移動部は，キャラクタの判別から翻訳語の表示までの処理時間を予め算出し，算出した処理時間に合わせて，カーソルの移動制御を行うことが好ましい。すなわち，カーソル位置移動部は，翻訳語が表示されるタイミングに合わせて，カーソルがキャラクタの位置に到達するよう制御を行うことが好ましい。
【００５１】
キャラクタサイズ特定部２４は，キャラクタ位置特定部２４により表示部１６における位置が特定されたキャラクタの大きさを特定する装置である。キャラクタサイズ特定部は，例えば，対象物に含まれる文字の間隔を検出し，相対的に文字間隔が大きくなっている箇所の間に含まれる文字群を１のキャラクタと判断し，これによりキャラクタの横幅及び縦幅を特定する。このように，キャラクタサイズ特定部２４は，キャラクタの横幅及び縦幅を求める。
【００５２】
カーソルサイズ制御部２５は，キャラクタサイズ特定部２４が特定したキャラクタの大きさの情報に基づいて，カーソル位置移動部２３によりそのキャラクタの位置に移動したカーソルの大きさを制御する装置である。カーソルサイズ制御部２５は，表示部１６に表示されているカーソルの大きさ（縦幅・横幅）と，キャラクタの大きさ（縦幅・横幅）を比較し，カーソルの大きさがキャラクタの大きさより小さい場合には，カーソルのサイズを大きくする制御をおこない，キャラクタの大きさに適合させる。一方，カーソルサイズ制御部は，カーソルの大きさがキャラクタの大きさより大きい場合には，カーソルの大きさを小さくする制御をおこない，キャラクタの大きさに適合させる。これにより，カーソルの大きさは，翻訳の対象となるキャラクタのみを囲い，他のキャラクタには重畳しない大きさとなるよう制御されることが好ましい。
【００５３】
情報処理装置は，さらに，バルーン表示部２６を備えることとしてもよい。バルーン表示部２６は，表示部１６に，翻訳語を表示する際に，その翻訳語をバルーン表示する画像処理を行う。バルーン表示とは，図３に示すように，翻訳語を，吹き出し枠（バルーン）内に表示し，吹き出し枠を，撮影部１１による撮影画像に重畳して表示させる処理である。バルーン表示部２６により表示されたバルーンは，揺動するように表示されるものであってもよい。また，情報処理装置が備える物体の角度や角速度を検出する計測器（加速度センサ・ジャイロセンサ）を用いて，情報処理装置の角度や移動速度を検出し，検出した角度・速度に基づいて，バルーンを揺動させることとしてもよい。また，表示部１６に表示されるバルーン画像について，ユーザが，表示部１６の手前（０位置）で，バルーンを視認できるよう処理を施すこととしてもよい。
【００５４】
次に，図２を参照して，上記した情報表示装置の動作例について説明する。図２は，本発明に係る情報処理装置が行う処理のフローを示す図である。まず，撮影部１１が対象物を撮影する（ステップＳ１）。この撮影は，連続的に行われる。撮影頻度は，たとえば１／３０秒である。このため，撮影部１１は，情報表示装置がわずかでも移動した瞬間に，被写体の異なる部分を撮影することとなる。すると，撮影部１１が撮影した画像は，画像処理部３１へ伝えられる。画像処理部３１は，撮影部１１から受け取った情報を分析して，表示部１６に表示できる画像となるよう処理を行う。画像処理部３１は，撮影部１１から受領した画像情報を連続的にビデオメモリなどの画像記憶部３２に伝え，画像記憶部３２は画像情報を一時
的に記憶する。
【００５５】
一方，画像処理部３１が処理を行った画像は，判別部３３へ伝えられる。判別部３３には，ＯＣＲ及びＯＭＲが含まれている。そして，ＯＣＲ又はＯＭＲが，画像に含まれるキャラクタを判別する。ＯＣＲ及びＯＭＲによるキャラクタ判別処理は既に知られている。
【００５６】
また，判別部３３は，対象物の種類を判別する（ステップＳ２）。判別部３３に含まれる対象物判別部１３は，例えば，対象物のうちキャラクタ以外の部分の色情報と，テーブルとを用いて対象物の種類を判別する。対象物のうちキャラクタ以外の部分の例は，キャラクタの背景色である。この場合，判別部３３は，対象物のうちキャラクタ以外の部分の色情報と対象物の種類とを関連付けたテーブルを有する。そして，キャラクタ以外の部分の色情報に基づいて，そのテーブルから対象物の種類に関する情報を読み出す。この例は，キャラクタの背景が白からクリーム色であれば，対象物は書類というものである。
【００５７】
また，対象物判別部１３は，後述するキャラクタサイズ特定処理において得られた対象物に含まれるキャラクタの大きさの情報を用いて，対象物の種類を判別することとしてもよい。この場合，判別部３３は，撮影部により撮影され表示部に表示されるキャラクタの大きさに関する情報と，対象物の種類とを関連付けて記憶するテーブルを有する。そして，対象物判別部１３は，表示部におけるキャラクタの大きさに関する情報を用いて，テーブルを参照し，対象物の種類に関する情報を読み出す。そして，判別部３３で判別された情報は適宜，判別情報記憶部３５に記憶される。
【００５８】
また，判別部３３は，キャラクタの種類を判別する（ステップＳ３）。判別部３３には，ＯＣＲ及びＯＭＲが含まれており，ＯＣＲ又はＯＭＲが，画像に含まれるキャラクタを判別する。ＯＣＲ及びＯＭＲによるキャラクタ判別処理は既に知られた方法によればよい。
【００５９】
情報抽出部１５は，対象物の種類に関する情報を用いて，辞書１２のうち対象物の種類に応じたデータベースを選択する（ステップＳ４）。すなわち，辞書は，対象物の種類に対応した複数のデータベースを有している。情報抽出部１５は，対象物の種類に関する情報を用いて，辞書１２のうち対象物の種類に応じたデータベースを選択する。その上で，情報抽出部１５は，キャラクタに基づいて，選択されたデータベースから，このキャラクタに対応した情報を抽出する。
【００６０】
情報抽出部１５が抽出した情報は，画像調整部３４によって，表示部１６に表示される画像に調整され，表示部１６に表示される（ステップＳ５）。画像調整部３４から表示情報を受け取った表示部１６は，次の撮影画像が撮影される前に所定の情報を表示することが好ましい。これにより，この情報表示装置は，対象語について適切な対応情報（訳など）をリアルタイムに次々と表示でき，リアルタイムレスポンスが可能となる。また，例えば，情報処理装置が備えるジャイロセンサと加速度センサを用いて，情報処理装置自体が移動していることを検知した場合には，撮影部１１により連続的に対象物を撮影し，情報抽出部１５によりリアルタイムに対象後についての対応情報を表示することとしてもよい。これにより，ユーザが，例えば，デジタルカメラにより，雑誌に含まれる単語を，そのデジタルカメラを文字列に沿ってスライドさせて連続的に読み込む場合，デジタルカメラは，リアルタイムにその単語の対応情報を次々と表示することができる。
【００６１】
また，対象物に含まれるキャラクタの対応情報が，表示部１６に表示されに際して，バルーン表示部によって，バルーン表示処理が行われることとしてもよい。キャラクタの対応情報をバルーン表示し，そのバルーンを揺動させる処理を行うことにより，よりユーザの興味をひくことができる。バルーン画像については，例えば，複数視点分の画像を生成し，レンチキュラーレンズやパララックスバリアのような視差障壁を介して表示することにより，バルーンが浮き上がるような裸眼立体表示を行うこともできる。
【００６２】
また，表示部１６は，２画面式パネルであってもよい。また，表示部１６は，タッチパネルであってもよい。表示部が２画面式である場合，それぞれの表示部には，異なった情報が表示される。例えば，表示部の一方の画面には，対象物に含まれるキャラクタの翻訳語の詳細な説明を表示し，他方の画面には，その詳細な説明に要約を表示する。
【００６３】
一方，上記撮影工程（ステップＳ１）から情報抽出工程（ステップＳ２）と並行して，カーソル制御工程（ステップＳ６からステップＳ１０）が行われる。カーソル制御工程は，表示部の所定箇所に表示したカーソルを，その表示部における翻訳の対象となるキャラクタの位置へと移動させる処理である。カーソル制御工程は，撮影部により対象物が撮影されたことを契機として処置が開始され，情報抽出部により抽出した対応情報が表示部に表示されるタイミングに併せて終了する。カーソル制御工程は，撮影部より対象物が撮影され表示部に対応情報が表示されるまでのタイムラグによって，ユーザが，ストレスを感じることが無いよう，カーソルを移動させることによってユーザの興味を惹きつけるための処理である。
【００６４】
カーソル表示部２１は，撮影部１１に対象物が撮影されたことを検知し，その後，表示部の所定箇所にカーソルを表示させる（ステップＳ６）。カーソルは，ユーザの興味を惹きつけるものであれば，どのような態様であってもよい。例えば，カーソル表示部２１は，枠体のカーソルを表示部の端部に表示するものであってもよい。また，カーソル表示部２１は，情報処理装置が備えるジャイロセンサと加速度センサを用いて，情報処理装置自体が移動していることを検知している場合には，撮影部１１により対象物が撮影されたとしても，カーソル表示を行わないこととしてもよい。一方，この場合において，カーソル表示部は２１，情報処理装置の移動が静止したことを検知した場合に，カーソル表示を行う。すなわち，カーソルは，携帯型の情報処理装置が，例えば書籍に含まれる単語を，その文字列によって連続的に撮影している場合には表示されず，情報処理装置の移動が静止したな愛には，静止したことを契機として，表示画面上に表示される。これにより，ユーザにとっての使いやすさを向上させることができる。
【００６５】
キャラクタ位置特定部２２は，キャラクタ判別工程で判別されたキャラクタが表示部に表示される位置を特定する（ステップＳ８）。キャラクタ位置特定部２２は，翻訳の対象となるキャラクタの表示部におけるｘ座標ｙ座標情報を検出することにより，そのキャラクタの位置を特定する。特定されたキャラクタの位置情報は，一旦，記憶部に記憶される。
【００６６】
カーソル位置移動部２３は，表示部１６の所定箇所に表示されたカーソルを，翻訳の対象となるキャラクタが表示部に表示される位置に移動させる処理をおこなう（ステップＳ９）。カーソル移動部２３は，記憶部に記憶されている翻訳の対象であるキャラクタの位置情報を読み出し，カーソルを，そのキャラクタの位置に移動させる。カーソルの移動は，例えば，直線的な移動，蛇行した移動，旋回した移動のような種々のパターンで行われるように制御することとしてもよい。カーソル移動パターンは，例えば乱数を用いて決定される。
【００６７】
キャラクタサイズ特定部２４は，翻訳の対象であるキャラクタが表示部に表示される大きさを特定する（ステップＳ９）キャラクタの大きさは，例えば，表示部においてそのキャラクタが，どの程度の割合の領域を占めているか，又はそのキャラクタを表示するための画像数を測定することにより求めることができる。このようにしてキャラクタサイズ特定部２４により特定されたキャラクタの大きさは，一旦，記憶部に記憶される。
【００６８】
カーソルサイズ制御部２５は，カーソルの表示画面上における大きさを，翻訳の対象であるキャラクタの表示画面上における大きさに適合させる（ステップＳ１０）。例えば，
カーソルサイズ制御部２５は，表示部１６に表示されているカーソルの大きさ（縦幅・横幅）と，キャラクタの大きさ（縦幅・横幅）を比較し，カーソルの大きさが，そのキャラクタの大きさに適合するよう制御を行う。これにより，キャラクタ位置に位置するカーソルは，その大きさが制御され，そのキャラクタにのみを囲う大きさとなることが好ましい。
【００６９】
なお，上記では，キャラクタ位置特定工程（ステップＳ７）及びカーソル位置移動工程（ステップ８）の後に，キャラクタサイズ特定工程（ステップＳ８）及びカーソルサイズ制御工程（ステップＳ１０）が行われる場合について説明した。しかし，キャラクタサイズ特定工程（ステップＳ８）及びカーソルサイズ制御工程（ステップＳ１０）の後に，キャラクタ位置特定工程（ステップＳ７）及びカーソル位置移動工程（ステップ８）が行われることとしてもよい。この場合には，表示部の所定箇所に表示されたカーソルは，まず，翻訳の対象であるキャラクタの大きさに適合され，その後に，カーソルがそのキャラクタの位置に移動される。
【００７０】
上記の動作は，制御部４１からの制御指令に基づいて行われる。例えば，入力部４２から所定の情報が制御部４１に入力されると，制御部４１は主記憶部４３に記憶されたメインメモリから制御プログラムを読み出す。そして，制御部４１は，読み出した制御プログラムからの指令に基づいて各種演算部に所定の演算処理を行わせる。そして，制御部４１は，得られた演算結果を表示部１６や出力部４４から出力する。
【００７１】
図３は，本発明に係る情報表示装置を用いた情報の表示例を示す図である。この例は，情報表示装置が，カメラを備えた２画面式携帯型ゲーム機の場合のものである。この例では，ゲーム機にカメラを用いて英語の本を写している。情報表示装置は，カメラによって本を撮影すると，撮影対象物の色情報や表示画面におけるキャラクタの大きさに関する情報に基づいて，撮影対象が書籍であると認識する。上画面には，カメラから撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の詳細な説明の要約のバルーンが表示されている。そして，下画面には，翻訳語の詳細な説明が表示されている。
【００７２】
つまり，下画面には，上画面において指定された翻訳対象語に対応する英和辞書の該当部分が表示されている。図３に示す例では，特に翻訳語を指定する必要がなく，ゲーム機自体と文字列に沿って移動させ，カメラで英語の本を連続的に撮影している間に翻訳領域に存在する語が自動的に翻訳される。そして，ゲーム機自体の移動が止まり，ある１つの単語（図３においては“ｆｏｒｅｓｔ”）を一定時間撮影すると，カーソルが表示される。なお，情報表示装置が移動すると翻訳対象語が変化するため，入力ボタンのいずれかを押すことで，翻訳対象語が変化する事態を防止するようにしてもよい。この場合，いずれかのボタンから入力を受けた情報表示装置は，現在表示されている語（図３においては“ｆｏｒｅｓｔ”）を表示させ続けるように処理すればよい。
【００７３】
図３に示す例では，上画面には，翻訳対象領域が指定されている。なお，翻訳対象領域は，図２に示される十字キーを用いて適宜移動できるものであってもよい。この場合，十字キーの操作又は上画面若しくは下画面をタッチ操作することにより，翻訳対象領域を移動する旨の指令が情報表示装置に入力される。すると，情報表示装置は，制御プログラムからの指令に基づいて，翻訳対象領域を移動させるための演算処理を行うとともに，モニタが移動した後の翻訳対象領域を表示するように表示処理を行う。
【００７４】
図４は，本発明の情報処理装置に表示されるカーソルの動きの例を示した図である。図４に示す例においては，ゲーム機のカメラを用いて，英語の本を撮影している。カメラにり，翻訳対象領域に英語の文章が入るようにしつつ，その文字列沿って英単語を連続的に撮影されている。そして，カメラの動きが，文章内に含まれるある単語（図４においては“ｆｏｒｅｓｔ”）を撮影したまま，一定時間（例えば，１〜３秒）静止したとする（図４（Ａ））。この場合，情報処理装置は，加速度センサやジャイロセンサにより，カメラの静止を検知する。すると，カメラが静止したことを契機として，モニタの左隅に枠状のカーソルが表示される（図４（Ｂ））。なお，カーソルは，例えば，ある指定されたボタン操作が押下されたことを契機としてモニタ上に表示されるものであってもよい。また，カーソルの出現位置は，一定であってもよいし，乱数によって定められるものであってもよい。
【００７５】
モニタにカーソルが表示されると，情報処理装置は，キャラクタ位置特定部によって，表示部における翻訳の対象である単語の位置を特定する。キャラクタ位置特定部は，キャラクタ判別部により判別された単語の表示部における位置を特定するものであってもよい。そして，情報処理装置のカーソル位置移動部は，モニタの左隅に表示されているカーソルを，キャラクタ位置特定部によって特定された単語の位置まで，移動させる（図４（Ｃ））。このとき，図４（Ｂ）に示す状態から図４（Ｃ）に示す状態までにカーソルが辿る軌跡は，例えば，直線的であったり，ジグザグに蛇行するものであったり，回転又は旋回するものであったりしてもよい。図５においては，モニタ上に表示されたカーソルの移動動作の軌跡（破線）が制御される例を示している。例えば，図５（Ａ）に示す例においては，モニタ上に表示されたカーソルが，翻訳の対象である単語の位置まで，略直線的に移動する。また，図５（Ｂ）に示す例においては，モニタ上に表示されたカーソルが，翻訳の対象である単語の位置まで，蛇行して移動する。また，図５（Ｃ）に示す例においては，モニタ上に表示されたカーソルが，一度旋回した後，翻訳対象である単語の位置まで移動する。
【００７６】
そして，キャラクタ位置特定部により特定された単語の位置までカーソルが移動すると，情報処理装置は，キャラクタサイズ特定部を用いて，その単語の大きさ（横幅及び縦幅）を特定する。キャラクタサイズ特定部が，単語の大きさを特定すると，情報処理装置は，カーソルサイズ制御部を用いて，カーソルの枠体の大きさを制御する。図４（Ｃ）に示す例は，単語の大きさより，カーソルの大きさが大きい場合である。この場合において，図４（Ｄ）に示すように，カーソルサイズ制御部は，単語の縦幅に合せて，カーソルの縦幅を縮小させる制御を行なう。また，図４（Ｄ）に示すように，カーソルサイズ制御部は，単語の横幅に合せて，カーソルの横幅を縮小させる制御を行う。このようにして，カーソルの大きさは，翻訳の対象である単語の大きさに適合するものとなる（図４（Ｄ））。
【００７７】
上記したカーソルの表示，カーソルの移動，及びカーソルの大きさの制御の処理は，情報処理装置における単語の翻訳の処理と並行して行われる。そして，情報処理装置における単語の翻訳の処理が完了するタイミングに合わせて，カーソルサイズの適合処理が終了することが好ましい。従って，図４（Ｅ）に示すように，カーソルの大きさが，翻訳の対象である単語の大きさに適合すると，その単語及びその単語の翻訳語（要約）が同一画面上にバルーン表示される（図４（Ｆ））。図４（Ｆ）に示す例においては，モニタに表示されたバルーンが立体映像としてポップアップするように画像処理が施されている。このように，カメラにより撮影された単語の翻訳語をモニタに表示する処理が行われている間，モニタにカーソルを表示し，そのカーソルを動作させることにより，ユーザにストレスを
【００７８】
図６は，情報表示装置を用いた表示例を示す図である。この例は，ゲーム機のカメラを用いて空港の表示板を写している。この例では，上画面で選択された単語“Ｃｈｉｎａ”に対応する英和辞書の部分が下画面に表示されている。また，単語選択画面である上画面には，英和辞書の要約と，“Ｃｈｉｎａ”の文字が，バルーン表示されている。このバルーンは，立体映像として視認されるよう画像処理が施されたものである。この例では，ユーザは表示板を撮影するため，ゲーム機のカメラを下向きではなく，上方に向ける。そして，情報表示装置に内蔵されているジャイロは，撮影部の向きが上方であることを感知し，制御部へ伝える。すると，制御部は，制御プログラムの指令を受け，対象物判別部１３に対象物を判別させる。その結果，対象物判別部１３は,撮影部の角度が所定値以上であるという情報に基づいて，対象物が書籍ではないと判断する。そして，情報抽出部１５は，対象物が書籍ではないという情報に基づいて辞書１２中のデータベースを選択する。その上で，適切な辞書部分を抽出し，表示してもよい。
【００７９】
図７は，カメラを備えた１画面式の携帯電話を用いた情報の表示例を示す図である。この例では，携帯電話に備えられたカメラを用いて英語の本を撮影している。携帯電話は，カメラによって本を撮影すると，例えば，撮影対象物の色情報や，表示画面におけるキャラクタの大きさに関する情報に基づいて，撮影対象が書籍であると認識する。携帯電話のモニタには，カメラによって撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の要約を表示するバルーンが表示される。また，このバルーンは立体画像として視認されるよう画像処理が施されている。
【００８０】
図８は，デジタルカメラを用いた情報の表示例を示す図である。この例では，デジタルカメラの撮影部により英語の本を撮影し，撮影画像をそのモニタに表示している。デジタルカメラによって本を撮影すると，例えば，撮影位置から撮影対象物までの距離を認識し，その距離に関する情報に基づいて，撮影対象が書籍であると認識する。デジタルカメラのモニタには，カメラによって撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の要約を表示するバルーンが表示されている。また，このバルーンは立体画像として視認されるよう画像処理が施されている。
【００８１】
図９は，カメラを備えた１画面式のスマートフォンを用いた情報の表示例を示す図である。この例では，携帯電話に備えられたカメラを用いて英語の本を撮影している。また，この例では，モニタ（表示部）はタッチパネル式であり，入力部としても機能する。スマートフォンは，カメラによって本を撮影すると，ジャイロセンサにより本体の傾きを検知して，その傾きの情報に基づいて，撮影対象が書籍であると認識する。タッチパネルには，カメラによって撮影された英語の本のページと，翻訳対象の文字を指示するカーソルと，翻訳対象の文字を示すバルーンと，翻訳語の要約を表示するバルーンが表示されている。また，このバルーンは立体画像として視認されるよう画像処理が施されている。
【産業上の利用可能性】
【００８２】
本発明は，学習や旅行に際して用いられる翻訳ルーツとして好適に利用され得る。
【符号の説明】
【００８３】
１ 情報表示装置
１１ 撮影部
１２ 辞書
１３ 対象物判別部
１４ キャラクタ判別部
１５ 情報抽出部
１６ 表示部
２１ カーソル表示部
２２ キャラクタ位置特定部
２３ カーソル位置移動部
２４ キャラクタサイズ特定部
２５ カーソルサイズ制御部
２６ バルーン表示部
３１ 画像処理部
３２ 画像記憶部
３３ 判別部
３４ 画像調整部
３５ 一時記憶部
４１ 制御部
４２ 入力部
４３ 主記憶部
４４ 出力部
【特許請求の範囲】
【請求項１】
対象物を撮影するための撮影部と，
複数のキャラクタに関連した情報を記憶する辞書と，
前記撮影部で撮影された対象物に含まれるあるキャラクタを判別するためのキャラクタ判別部と，
前記キャラクタ判別部により判別された前記あるキャラクタに基づいて，前記辞書から，前記あるキャラクタに対応した情報を抽出する情報抽出部と，
前記撮影部により撮影された撮影画像と，前記情報抽出部により抽出された前記あるキャラクタに対応した情報を表示するための表示部と，
前記表示部の所定箇所にカーソルを表示するカーソル部表示部と，
前記キャラクタ判別部により判別された前記あるキャラクタの前記表示部における位置を特定するキャラクタ位置特定部と，
前記キャラクタ位置特定部により特定した前記あるキャラクタの位置の情報に基づいて，前記表示部の所定箇所に表示されたカーソルを，前記あるキャラクタの位置に移動させるカーソル位置移動部と，を備える
情報処理装置。
【請求項２】
前記キャラクタ位置特定部により前記表示部における位置が特定された前記あるキャラクタの大きさを特定するキャラクタサイズ特定部と，
前記キャラクタサイズ特定部が特定した前記あるキャラクタの大きさの情報に基づいて，前記カーソル位置移動部により前記あるキャラクタの位置に移動したカーソルの大きさを制御するカーソルサイズ制御部とを，さらに備える
請求項１に記載の情報処理装置。
【請求項３】
前記撮影部で撮影された対象物の種類を判別するための対象物判別部を，さらに備え，
前記対象物判別部は，
前記カーソル位置特定部により特定された前記あるキャラクタの大きさの情報に基づいて対象物の種類を判別するものであり，
前記辞書は，
対象物の種類に応じたデータベースを有する辞書であり，
前記情報抽出部は，
前記対象物判別部により判別された対象物の種類を用いて，前記辞書に含まれる対象物の種類に応じた前記データベースを選択し，
前記判別部により判別された前記あるキャラクタに基づいて，前記選択されたデータベースから，前記あるキャラクタに対応した情報を抽出する
請求項２に記載の情報処理装置。
【請求項４】
前記対象物を撮影するための撮影部を，２つ備え，
前記キャラクタ判別部は，前記２つの撮影部で撮影された２つの撮影データに基づいて，前記対象物に含まれるあるキャラクタを判別する
請求項１に記載の情報処理装置。
【請求項５】
前記辞書は，
前記複数のキャラクタに関連した情報として，前記キャラクタの詳細な説明と，前記キャラクタの詳細な説明の要約を関連付けて記憶する辞書であり，
前記表示部は，
前記撮影部により，対象物に含まれるあるキャラクタが撮影された場合，
前記撮影部により撮影された撮影画像と，前記カーソル表示部により表示されるカーソルと，前記辞書に記憶されている前記キャラクタ詳細な説明の要約を表示する第１表示部と，
前記辞書に記憶されている前記キャラクタの詳細な説明を表示する第２表示部とからなる
請求項１に記載の情報処理装置。
【請求項６】
さらに，
少なくとも，前記情報抽出部により抽出された前記あるキャラクタに対応した情報を，前記表示部にバルーン表示するバルーン表示部を備える
請求項１に記載の情報処理装置。
【請求項７】
情報処理装置を用いた情報の表示方法であって，
撮影部により，対象物を撮影する撮影工程と，
キャラクタ判別部により，前記撮影工程で撮影された対象物に含まれるあるキャラクタを判別するためのキャラクタ判別工程と，
情報抽出部により，前記キャラクタ判別工程で判別された前記あるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，前記あるキャラクタに対応した情報を抽出する情報抽出工程と，
表示部に，前記撮影部により撮影された撮影画像と，前記情報抽出工程で抽出した前記あるキャラクタに対応した情報を表示する表示工程を有し，
前記撮影工程から前記表示工程の処理が行われる間に，
カーソル部により，前記表示部の所定箇所にカーソルを表示するカーソル表示工程と，
キャラクタ位置特定部により，前記キャラクタ判別工程で判別された前記あるキャラクタの，前記表示部における位置を特定するキャラクタ位置特定工程と，
カーソル位置移動部により，前記キャラクタ位置特定工程で特定された前記あるキャラクタの位置の情報に基づいて，前記表示部の所定箇所に表示されたカーソルを，前記あるキャラクタの位置に移動させるカーソル位置移動工程を行う
情報表示方法。
【請求項８】
情報処理装置に情報を表示させるプログラムであって，
前記情報処理装置を，
対象物を撮影する撮影手段と，
前記撮影手段により撮影された対象物に含まれるあるキャラクタを判別するキャラクタ判別手段と，
前記キャラクタ判別手段により判別された前記あるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，前記あるキャラクタに対応した情報を抽出する情報抽出手段と，
前記撮影手段により撮影された撮影画像と，前記情報抽出手段により抽出された前記あるキャラクタに対応した情報を表示する表示手段と，
前記撮影手段により対象物が撮影され，前記表示手段に前記あるキャラクタに対応した情報が表示されるまでの間に，
前記表示手段の所定箇所にカーソルを表示するカーソル表示手段と，
前記キャラクタ判別手段により判別された前記あるキャラクタの，前記撮影部により撮影された対象物における位置を特定するキャラクタ位置特定手段と，
前記キャラクタ位置特定手段により特定された前記あるキャラクタの位置の情報に基づいて，前記表示手段の所定箇所に表示されたカーソルを，前記あるキャラクタの位置に移動させるカーソル位置移動手段として機能させる
情報表示プログラム。
【請求項９】
請求項８に記載の情報表示プログラムを格納したコンピュータが読み取り可能な記録媒体。
【請求項１】
対象物を撮影するための撮影部と，
複数のキャラクタに関連した情報を記憶する辞書と，
前記撮影部で撮影された対象物に含まれるあるキャラクタを判別するためのキャラクタ判別部と，
前記キャラクタ判別部により判別された前記あるキャラクタに基づいて，前記辞書から，前記あるキャラクタに対応した情報を抽出する情報抽出部と，
前記撮影部により撮影された撮影画像と，前記情報抽出部により抽出された前記あるキャラクタに対応した情報を表示するための表示部と，
前記表示部の所定箇所にカーソルを表示するカーソル部表示部と，
前記キャラクタ判別部により判別された前記あるキャラクタの前記表示部における位置を特定するキャラクタ位置特定部と，
前記キャラクタ位置特定部により特定した前記あるキャラクタの位置の情報に基づいて，前記表示部の所定箇所に表示されたカーソルを，前記あるキャラクタの位置に移動させるカーソル位置移動部と，を備える
情報処理装置。
【請求項２】
前記キャラクタ位置特定部により前記表示部における位置が特定された前記あるキャラクタの大きさを特定するキャラクタサイズ特定部と，
前記キャラクタサイズ特定部が特定した前記あるキャラクタの大きさの情報に基づいて，前記カーソル位置移動部により前記あるキャラクタの位置に移動したカーソルの大きさを制御するカーソルサイズ制御部とを，さらに備える
請求項１に記載の情報処理装置。
【請求項３】
前記撮影部で撮影された対象物の種類を判別するための対象物判別部を，さらに備え，
前記対象物判別部は，
前記カーソル位置特定部により特定された前記あるキャラクタの大きさの情報に基づいて対象物の種類を判別するものであり，
前記辞書は，
対象物の種類に応じたデータベースを有する辞書であり，
前記情報抽出部は，
前記対象物判別部により判別された対象物の種類を用いて，前記辞書に含まれる対象物の種類に応じた前記データベースを選択し，
前記判別部により判別された前記あるキャラクタに基づいて，前記選択されたデータベースから，前記あるキャラクタに対応した情報を抽出する
請求項２に記載の情報処理装置。
【請求項４】
前記対象物を撮影するための撮影部を，２つ備え，
前記キャラクタ判別部は，前記２つの撮影部で撮影された２つの撮影データに基づいて，前記対象物に含まれるあるキャラクタを判別する
請求項１に記載の情報処理装置。
【請求項５】
前記辞書は，
前記複数のキャラクタに関連した情報として，前記キャラクタの詳細な説明と，前記キャラクタの詳細な説明の要約を関連付けて記憶する辞書であり，
前記表示部は，
前記撮影部により，対象物に含まれるあるキャラクタが撮影された場合，
前記撮影部により撮影された撮影画像と，前記カーソル表示部により表示されるカーソルと，前記辞書に記憶されている前記キャラクタ詳細な説明の要約を表示する第１表示部と，
前記辞書に記憶されている前記キャラクタの詳細な説明を表示する第２表示部とからなる
請求項１に記載の情報処理装置。
【請求項６】
さらに，
少なくとも，前記情報抽出部により抽出された前記あるキャラクタに対応した情報を，前記表示部にバルーン表示するバルーン表示部を備える
請求項１に記載の情報処理装置。
【請求項７】
情報処理装置を用いた情報の表示方法であって，
撮影部により，対象物を撮影する撮影工程と，
キャラクタ判別部により，前記撮影工程で撮影された対象物に含まれるあるキャラクタを判別するためのキャラクタ判別工程と，
情報抽出部により，前記キャラクタ判別工程で判別された前記あるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，前記あるキャラクタに対応した情報を抽出する情報抽出工程と，
表示部に，前記撮影部により撮影された撮影画像と，前記情報抽出工程で抽出した前記あるキャラクタに対応した情報を表示する表示工程を有し，
前記撮影工程から前記表示工程の処理が行われる間に，
カーソル部により，前記表示部の所定箇所にカーソルを表示するカーソル表示工程と，
キャラクタ位置特定部により，前記キャラクタ判別工程で判別された前記あるキャラクタの，前記表示部における位置を特定するキャラクタ位置特定工程と，
カーソル位置移動部により，前記キャラクタ位置特定工程で特定された前記あるキャラクタの位置の情報に基づいて，前記表示部の所定箇所に表示されたカーソルを，前記あるキャラクタの位置に移動させるカーソル位置移動工程を行う
情報表示方法。
【請求項８】
情報処理装置に情報を表示させるプログラムであって，
前記情報処理装置を，
対象物を撮影する撮影手段と，
前記撮影手段により撮影された対象物に含まれるあるキャラクタを判別するキャラクタ判別手段と，
前記キャラクタ判別手段により判別された前記あるキャラクタに基づいて，複数のキャラクタに関連した情報を記憶する辞書から，前記あるキャラクタに対応した情報を抽出する情報抽出手段と，
前記撮影手段により撮影された撮影画像と，前記情報抽出手段により抽出された前記あるキャラクタに対応した情報を表示する表示手段と，
前記撮影手段により対象物が撮影され，前記表示手段に前記あるキャラクタに対応した情報が表示されるまでの間に，
前記表示手段の所定箇所にカーソルを表示するカーソル表示手段と，
前記キャラクタ判別手段により判別された前記あるキャラクタの，前記撮影部により撮影された対象物における位置を特定するキャラクタ位置特定手段と，
前記キャラクタ位置特定手段により特定された前記あるキャラクタの位置の情報に基づいて，前記表示手段の所定箇所に表示されたカーソルを，前記あるキャラクタの位置に移動させるカーソル位置移動手段として機能させる
情報表示プログラム。
【請求項９】
請求項８に記載の情報表示プログラムを格納したコンピュータが読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−７９０７６（Ｐ２０１２−７９０７６Ａ）
【公開日】平成２４年４月１９日（２０１２．４．１９）
【国際特許分類】
【出願番号】特願２０１０−２２３４１９（Ｐ２０１０−２２３４１９）
【出願日】平成２２年１０月１日（２０１０．１０．１）
【特許番号】特許第４７９００８０号（Ｐ４７９００８０）
【特許公報発行日】平成２３年１０月１２日（２０１１．１０．１２）
【出願人】（３０８０３３２８３）株式会社スクウェア・エニックス (173)
【Ｆターム（参考）】
【公開日】平成２４年４月１９日（２０１２．４．１９）
【国際特許分類】
【出願日】平成２２年１０月１日（２０１０．１０．１）
【特許番号】特許第４７９００８０号（Ｐ４７９００８０）
【特許公報発行日】平成２３年１０月１２日（２０１１．１０．１２）
【出願人】（３０８０３３２８３）株式会社スクウェア・エニックス (173)
【Ｆターム（参考）】
[ Back to top ]