プロジェクタ機能付き画像処理装置およびプログラム
【課題】出力対象画像を光変換して投影画像として出力している状態において、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を識別できるようにする。
【解決手段】プレゼンテーションシステムにおいてＰＣ３は、出力対象画像がプロジェクタ１を介してスクリーン４に投影出力されている投影画像内の任意の領域が指定されている状態において、メニュー項目内の「拡大」、「太線」が選択指定された場合に、デジタルカメラ２によって投影画像を撮影した撮影画像を取得し、この撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する。そして、この出力対象画像内の対応領域の画像部分を識別可能にするために当該画像部分に識別処理を施した後の出力対象画像を投影画像としてプロジェクタ１から出力させる。
【解決手段】プレゼンテーションシステムにおいてＰＣ３は、出力対象画像がプロジェクタ１を介してスクリーン４に投影出力されている投影画像内の任意の領域が指定されている状態において、メニュー項目内の「拡大」、「太線」が選択指定された場合に、デジタルカメラ２によって投影画像を撮影した撮影画像を取得し、この撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する。そして、この出力対象画像内の対応領域の画像部分を識別可能にするために当該画像部分に識別処理を施した後の出力対象画像を投影画像としてプロジェクタ１から出力させる。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、出力対象画像を光変換して投影画像として出力するプロジェクタ機能付き画像処理装置およびプログラムに関する。
【背景技術】
【０００２】
従来、ＣＲＴ(ブラウン管)あるいは液晶パネルなどを使用して、出力対象画像を光変換してスクリーン上に投影表示するプロジェクタは、高解像で鮮明なカラー投影を得ることができるようになり、また、パーソナルコンピュータ(ＰＣ)からの画像をスクリーン上に投影表示するようにしたプレゼンテーションシステムとしては、たとえば、ＰＣから外部表示装置に対して送られた出力対象画像のうち、任意の領域をＰＣ側から指定すると、この指定領域内の画像部分を抽出して外部表示装置に送り、この外部表示装置を介してスクリーン上に投影するようにした表示用画面の部分選択装置が知られている（特許文献１参照）。
【特許文献１】特開２０００−１８１４２２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上述した特許文献の部分選択装置にあっては、指定領域内の画像部分を抽出して投影表示させるようにしているため、プレゼンテーションの参加者にあっては、その部分を注視することができるが、領域が指定される以前の画像全体までも知ることはできず、部分画像が表示されている状態では、画像全体に対して当該部分がどのような関係にあるかを把握することはできなかった。
【０００４】
ところで、各種資料をスクリーン上に投影表示させているプレゼンテーション時において、発表者は、スクリーン上の資料に沿って説明を行うようにしているが、その際、発表内容と参考資料との対応関係を口述で説明しながら行うようにしている。この場合、参加者にあっては、スクリーン上に投影表示されている多くの資料の中から現在の説明内容に該当する参考資料を即座に見つけ出すことができなかったり、間違った資料を見てしまうことがあり、さらには、説明内容を聞き逃すことがあるなど、発表者と参加者との間に大きなギャップが生じることがあった。このことは、プレゼンテーションの進行が速くなればなる程、顕著なものとなる。
【０００５】
第１の発明の課題は、出力対象画像を光変換して投影画像として出力している状態において、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を識別できるようにすることである。
第２の発明の課題は、出力対象画像を光変換して投影画像として出力している状態において、投影画像内の任意の領域が指定されると、この指定領域に関する関連情報を出力できるようにすることである。
【課題を解決するための手段】
【０００６】
請求項１記載の発明（第１の発明）は、出力対象画像を光変換して投影画像として出力するプロジェクタ機能付き画像処理装置において、出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、この領域特定手段によって特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す識別処理手段と、この識別処理手段によって識別処理が施された後の出力対象画像を投影画像として出力する出力手段とを具備したことを特徴とする。
さらに、コンピュータに対して、上述した請求項１記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１１記載の発明）。
【０００７】
なお、請求項１記載の発明は次のようなものであってもよい。
前記出力対象画像内の対応領域の画像部分を識別するために予め用意されている複数の識別種の中から任意の種類を選択指定する識別種選択手段を設け、前記識別処理手段は、この識別種選択手段によって任意に選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理する（請求項２記載の発明）。
【０００８】
投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって前記選択指定された識別種を特定する（請求項３記載の発明）。
【０００９】
前記指定手段は、発光体を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定する（請求項５記載の発明）。
この場合、前記領域特定手段は、発光体を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定するようにしてもよい（請求項６記載の発明）。
【００１０】
投影画像と共に処理メニューが投影されている状態において、この処理メニューの中から任意のメニュー項目が投影画像内で選択指定された際に、そのときの撮影画像を解析することによって前記選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行する（請求項７記載の発明）。
【００１１】
請求項４記載の発明（第２の発明）は、出力対象画像を光変換して投影画像として出力するプロジェクタ機能を備えた画像処理装置において、出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、この領域特定手段によって特定された出力対象画像内の対応領域に関する関連情報を取得する取得手段と、この取得手段によって得られた関連情報を出力する出力手段とを具備したことを特徴とする。
さらに、コンピュータに対して、上述した請求項４記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１２記載の発明）。
【００１２】
なお、請求項４記載の発明は次のようなものであってもよい。
前記出力手段は、出力対象画像内の対応領域に関する関連情報が音声情報であれば、この音声情報を合成出力する（請求項８記載の発明）。
【００１３】
前記取得手段は、出力対象画像内の対応領域に関する関連情報を取得する際に、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換することによって対応領域に関する関連情報を取得し、前記出力手段は、この取得手段によって得られた音声情報を合成出力する（請求項９記載の発明）。
【００１４】
前記出力手段は、出力対象画像内の対応領域に関する関連情報が登録画像であれば、この登録画像を投影画像として出力する（請求項１０記載の発明）。
その他、請求項４記載の発明（第２の発明）にあっても、上述した請求項５〜請求項７記載の発明であってもよい。
【発明の効果】
【００１５】
請求項１記載の発明（第１の発明）によれば、出力対象画像が投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影した撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施した後の出力対象画像を投影画像として出力するようにしたから、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を識別することができ、たとえば、プレゼンテーションにおいて、スクリーン上に多くの資料が投影表示されている場合でも、説明内容と参考資料との対応関係を即座に確認することができず、対応する資料を探したり、間違った資料を見たり、説明内容を聞き逃すことを効果的に防止することが可能となる。
なお、識別処理としては、領域拡大処理、領域アウトラインの太線化処理、網掛け処理、着色処理、反転処理、輝度変化処理、点滅処理など任意である。
【００１６】
請求項２記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、出力対象画像内の対応領域の画像部分を識別可能とするために予め用意されている複数の識別種の中から任意の種類が選択指定されると、選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理するようにしたから、所望する領域識別を実現することができると共に、必要に応じて識別の仕方を変更することができるなど、より効果的なプレゼンテーションが可能となる。
【００１７】
請求項３記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって選択指定された識別種を特定するようにしたから、所望する識別種を投影画像内で選択指定することができる。
【００１８】
請求項５記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、発光体を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定するようにしたから、たとえば、レーザ発光ペンを使用して遠方から投影画像内の任意の領域を照明するだけで、この照明部分の領域を容易に指定することができる。
なお、発光ペンは、たとえば、赤色のレーザビームを発光するもので、その指向性によって遠方からでも所望する位置をポイント照明することができるものである。
この場合、発光体を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定するようにすれば(請求項６記載の発明)、詳細な領域指定を実現することが可能となる。
【００１９】
請求項７記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、投影画像と共に処理メニューが投影されている状態において、この処理メニューの中から任意のメニュー項目が投影画像内で選択指定された際に、そのときの撮影画像を解析することによって選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行するようにしたから、たとえば、画像切り換えなどの各種の処理を投影画像内で選択指定することができる。
【００２０】
請求項４記載の発明（第２の発明）によれば、出力対象画像が投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影した撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域に関する関連情報を取得して出力するようにしたから、投影画像内の任意の領域が指定されると、この指定領域に関する関連情報を出力することができ、たとえば、プレゼンテーションにおいて、スクリーン上に投影表示されている資料に関する補足説明などを出力することによって、より効果的なプレゼンテーションが可能となる。
【００２１】
請求項８記載の発明によれば、上述した請求項４記載の発明と同様の効果を有する他、出力対象画像内の対応領域に関する関連情報が音声情報であれば、この音声情報を合成出力するようにしたから、投影画像の補足説明として音声による説明が可能となる。
この場合、出力対象画像内の対応領域に関する関連情報を取得する際に、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換することによって音声情報を合成出力するようにしてもよい(請求項９記載の発明)。
【００２２】
請求項１０記載の発明によれば、上述した請求項４記載の発明と同様の効果を有する他、出力対象画像内の対応領域に関する関連情報が登録画像であれば、この登録画像を投影画像として出力するようにしたから、投影画像の補足説明として別画像による説明が可能となる。
なお、請求項４記載の発明（第２の発明）においても、上述した請求項５〜請求項７記載の発明と同様の効果を有する。
【発明を実施するための最良の形態】
【００２３】
以下、図１〜図１０を参照して本発明の実施例を説明する。
図１は、この実施例におけるプレゼンテーションシステムの全体構成の概要を示したブロック図である。
このプレゼンテーションシステムは、プロジェクタ機能付き画像処理装置を構成するもので、たとえば、会社等における商談会、報告会、審議会などのビジネスミーティング用として使用され、プロジェクタ１、デジタルカメラ２、パーソナルコンピュータ(ＰＣ)３、スクリーン４を有する構成となっている。
【００２４】
プロジェクタ１は、たとえば、液晶パネルを使用した液晶プロジェクタであり、光源、プリズム、投影レンズのほか、ＣＰＵ、通信インターフェイスなどを有する構成で、プロジェクタ１とＰＣ３とは、無線あるいは有線によって接続され、ＰＣ３から送信されてきた画像を受信すると、液晶パネルを介してスクリーン４上に投影出力するようにしている。デジタルカメラ２は、ＣＣＤ等の撮像素子、光学系、ＣＰＵ、記録メディアなどを有し、ＰＣ３からの指示によって動作するもので、プレゼンテーションの開始が指示された際に、スクリーン４を被写体として投影画像の全体を動画撮影するビデオカメラあるいは動画撮影が可能なスチルカメラであり、プロジェクタ１に取り付けられている。
【００２５】
この場合、プロジェクタ１の上面部には、デジタルカメラ２が取り付けられており、プロジェクタ１の投影レンズとデジタルカメラ２の撮影レンズとの光軸が上下相対するように極力接近させてある。なお、プロジェクタ１とデジタルカメラ２との間には、プロジェクタ１内の光源からの発熱がデジタルカメラ２に影響しないように断熱部材(図示せず)が設けられている。
レーザ発光ペン５は、プロジェクタ１からスクリーン４上に投影出力された投影画像内において、たとえば、任意の位置をポイント照明する赤色のレーザビームを発光する棒状の発光体であり、その指向性によって遠方からでも所望する位置をポイント照明することができるものである
【００２６】
図２は、プロジェクタ１側において出力対象画像を光変換して投影画像として出力させた状態を示した図である。
この場合、ＰＣ３側の画面(ＰＣ画面)には、出力対象画像と共に、その下側にはメニュー項目が表示され、また、スクリーン４上には、この出力対象画像の投影画像とメニュー項目の投影画像が並列的に表示される。このようにＰＣ画面の表示内容とスクリーン４上の投影内容とは対応付けられており、ＰＣ画面の表示内容がそのまま投影画像となる。ここの投影画像内において、発表者は、レーザ発光ペン５を使用することによって、投影画像内の任意の領域を指定したり、投影画像内のメニュー項目を任意に指定する。
【００２７】
この場合、レーザ発光ペン５によって投影画像内の任意の位置がポイント照明されている状態において、デジタルカメラ２は、この投影画像の全体を撮影するようにしている。ＰＣ３は、この撮影画像を順次取り込みながら画像解析を行い、レーザ発光ペン５によってポイント照明されている位置の移動軌跡(発光照明軌跡)を追随検出し、この照明ポイントの移動軌跡によって指示された領域を特定するようにしている。ここで、ＰＣ３は、投影画像内の照明軌跡に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施すと共に、識別処理を施した後の出力対象画像を投影画像として再出力させるようにしている。また、ＰＣ３は、識別処理を施す以外に、出力対象画像内の対応領域に対応して登録されている関連情報を読み出し、この関連情報が音声であれば、この関連情報を音声出力させ、画像であれば、この関連情報を出力対象画像に合成して再出力させるようにしている。
【００２８】
また、ＰＣ３は、照明ポイントの位置が投影画像内のメニュー項目上であれば、このメニュー項目対応の処理を実行するようにしている。メニュー項目は、「拡大」、「太線」、「音声」、「補足」、‥‥の各項目を有している。ここで、「拡大」のメニュー項目は、識別処理の１つで、指定領域内の画像部分を拡大すべきことを指示するためのメニュー項目である。「太線」のメニュー項目は、他の識別処理で、指定領域のアウトラインを特定すると共にこのアウトラインを太線で囲むべきことを指示するためのメニュー項目である。「音声」のメニュー項目は、指定領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換して合成出力すべきことを指示するためのメニュー項目である。「補足」のメニュー項目は、指定領域に対応して予め登録されている関連情報を出力すべきこと指示するためのメニュー項目である。この場合、関連情報が音声情報であれば、この音声情報を合成出力し、関連情報が登録画像であれば、この登録画像を投影画像として当該指定領域に対応付けて出力する。
【００２９】
図３は、ＰＣ３の基本的構成要素を示したブロック図である。
ＣＰＵ３１は、記憶部３２内のオペレーティングシステム、各種アプリケーションソフトに応じてこのＰＣ３の全体動作を制御する中央演算処理装置である。記憶部３２は、プログラム領域とデータ領域とを有し、磁気的メモリ、光学的メモリ、半導体メモリ等の他、その駆動系を有する構成となっている。この記憶部３２内のプログラム領域には、後述する図４〜図６に示す動作手順に応じて本実施例を実現するためのアプリケーションプログラムが格納されている。
【００３０】
この記憶部３２内のプログラム、データは、必要に応じてＲＡＭ（たとえば、スタティックＲＡＭ）３３にロードされたり、このＲＡＭ３３内のデータが記憶部３２にセーブされる。なお、ＲＡＭ３３内の移動軌跡メモリ３３−１は、上述した投影画像内の照明ポイントが順次セットされるもので、ＣＰＵ３１は、この移動軌跡メモリ３３−１に基づいて照明ポイントの移動軌跡を解析し、この移動軌跡が閉曲線に近似したものであれば、この閉曲線を指定領域として特定するようにしている。なお、記録媒体３４は、ＣＤ−ＲＯＭ、フレキシブルディスク、ＲＡＭカード等である。
【００３１】
ＣＰＵ３１には、その入出力周辺デバイスである通信Ｉ／Ｆ(インターフェイス)３５、入力装置３６、表示装置３７、音声出力部３８がバスラインを介して接続されており、入出力プログラムによってＣＰＵ３１は、これらの入出力デバイスの動作制御を行う。
通信Ｉ／Ｆ３５は、プロジェクタ１、デジタルカメラ２との間で画像データ等の送受信を行う有線／無線インターフェイスである。入力装置３６は、キーボード、タッチパネルあるいはマウス、タッチ入力ペン等のポインティングデバイスを構成する操作部であり、文字列データ、各種コマンドの入力を行う。表示装置３７は、フルカラー表示を行う液晶表示装置、ＣＲＴ表示装置、プラズマ表示装置等である。音声出力部３８は、スピーカ等を有し、たとえば、スクリーン４の両側などに配置されている。
【００３２】
次ぎに、この実施例におけるプレゼンテーションシステムの動作概念を図４〜図６に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体の他に、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施例特有の動作を実行することもできる。
【００３３】
図４は、プレゼンテーションの開始指示に応答して実行開始されるＰＣ３の全体動作を示したフローチャートである。
先ず、ＣＰＵ３１は、プレゼンテーションの開始指示に応答してプロジェクタ１およびデジタルカメラ２を起動させると共に(ステップＡ１)、図２に示したように「拡大」、「太線」、「音声」、「補足」、‥‥の各項目を有するメニュー項目画像を投影出力の対象画像として生成する(ステップＡ２)。そして、予め登録されている各種画像の一覧画面を表示出力させると共に、この一覧画面の中から複数の画像が投影出力の対象画像群として任意に選択指定されると(ステップＡ３)、この選択画像群の先頭から１画像データを読み出すと共に(ステップＡ４)、この読み出し画像をＰＣ画面に表示出力させる(ステップＡ５)。この場合、ＰＣ画面には、図２で示したように、当該読み出し画像と共にメニュー項目画像が並列的に表示出力される。
【００３４】
そして、この読み出し画像とメニュー項目画像との合成画像を生成して(ステップＡ６)、この合成画像をプロジェクタ１に送信する(ステップＡ７)。ここで、プロジェクタ１側では、この合成画像が液晶パネルに展開されて、プリズム、投影レンズなどを介してスクリーン４上に投影出力させる。この状態において、ＰＣ３側においては、その入力装置３６に設けられている画像送りキー(図示せず)の操作有無をチェックし(ステップＡ８)、この画像送りキーが操作された際には、上述の選択画像群の中から次ぎの１画像データを読み出して(ステップＡ９)、次画像の有無をチェックする(ステップＡ１０)。ここで、次画像が有れば、ステップＡ５に戻り、この読み出し画像をメニュー項目画像と共にＰＣ画面に表示出力させる。最初は、先頭画像の投影を開始した場合であり、画像送りキーが操作されなければ(ステップＡ１０でＮＯ)、デジタルカメラ２から撮影画像を取得して(ステップＡ１１)、後述する撮影画像解析処理を行うと共に(ステップＡ１２)、解析結果対応処理を実行した後に(ステップＡ１３)、画像送りキーの操作有無をチェックし(ステップＡ８)、以下、画像送りキーが操作されるまで撮影画像を取得しながら撮影画像解析処理(ステップＡ１２)、解析結果対応処理(ステップＡ１３)が繰り返し実行される。
【００３５】
図５は、撮影画像解析処理を詳述するためのフローチャートである。
この撮影画像解析処理は、デジタルカメラ２から取得した撮影画像を解析し、この撮影画像内に含まれている照明ポイントを特定すると共に、この照明ポイントに対応する出力対象画像内の位置を特定するもので、先ず、ＣＰＵ３１は、撮影画像全体を解析しながら(ステップＢ１)、レーザ発光ペン５による照明ポイント(所定大の赤色部分)の有無を調べ(ステップＢ２)、撮影画像内に照明ポイントが含まれていなければ(ステップＢ２でＮＯ)、移動軌跡メモリ３３−１の内容をクリアして初期化するが(ステップＢ３)、撮影画像内に照明ポイントが含まれていれば、撮影画像内における照明ポイントの位置を特定し(ステップＢ４)、この照明ポイントの位置は、メニュー項目の表示上か否かを判別する(ステップＢ５)。いま、メニュー項目が発光照明されている場合には(ステップＢ５でＹＥＳ)、当該照明位置に基づいて対応のメニュー項目として、「拡大」、「太線」、「音声」、「補足」、‥‥のうち、何れの項目が指定されたかを特定する(ステップＢ６)。
【００３６】
一方、照明ポイントの位置がメニュー項目の表示上ではなければ(ステップＢ５でＮＯ)、移動軌跡メモリ３３−１から前回の照明位置を読み出し(ステップＢ７)、この前回の照明位置と今回特定した照明位置とを比較して(ステップＢ８)、今回の照明位置は前回の照明位置の近傍かを判別する(ステップＢ９)。ここで、今回の照明位置と前回の照明位置とが離れている場合には、新たな領域を指定するためにポイント指定されたものと判別するが、投影画像内の任意の領域を指定するために、発光ポイントの位置が連続的に変化しているような場合には、今回の照明位置は前回の照明位置の近傍であると判別する。
【００３７】
図７は、今回の照明位置が前回の照明位置の近傍であるか否かを判別するための判別方法を説明するための図である。
たとえば、出力対象画像全体を「４×４」、「６×６」、「８×８」のようにマトリックス状に分割した場合において、今回の照明位置と前回の照明位置が同一の分割領域内に存在しているときには今回の照明位置は前回の照明位置の近傍であると判別され、また、今回の照明位置と前回の照明位置が異なる分割領域であっても、その距離が分割領域サイズ分以下のときにも今回の照明位置は前回の照明位置の近傍であると判別される。この場合、出力対象画像の複雑度合いに基づいて「４×４」、「６×６」、「８×８」の何れか一方で画像全体を分割するようにしている。なお、図７の例では、「４×４」で分割した場合を例示したもので、たとえば、図示のように今回の照明位置が存在する分割エリアが (３、３)の座標値で示されるエリアで、前回の照明位置が存在する分割エリアも (３、３) の座標値で示されるエリアであれば、今回の照明位置は前回の照明位置の近傍であると判別されるが、今回の照明位置が存在する分割エリアが (３、３)で、前回の照明位置が存在する分割エリアが (３、４)であり、その距離が分割領域サイズを超える場合には、今回の照明位置は前回の照明位置の近傍ではないと判別される。
【００３８】
いま、今回の照明位置が前回の照明位置の近傍であれば(ステップＢ９でＹＥＳ)、今回の照明位置データを移動軌跡メモリ３３−１に追加記憶させた後(ステップＢ１０)、移動軌跡メモリ３３−１内の各位置データを全て読み出して解析し(ステップＢ１１)、各位置によって特定される形状、つまり、発光ポイントの移動軌跡は、閉曲線に近似するか否かを調べる(ステップＢ１２)。
図８は、発光ポイントの移動軌跡に応じて指定領域が特定される場合を例示した図であり、発光ポイントの移動軌跡は、投影画像内において任意に指定された領域を特定可能であればよく、略矩形、三角形などであってもく、また、完全な閉曲線を成す必要はなく、たとえば、略半円形であっても閉曲線に近似すると判別される。なお、移動軌跡の形状によってメニュー項目の種類を特定しても良い。例えば、移動軌跡の形状が三角あれば音声、四角であれば拡大、丸であれば太線、∞であれば補足のメニュー項目を特定するようにしても良い。
【００３９】
ここで、移動軌跡メモリ３３−１の内容を解析した結果、各位置によって特定された形状が閉曲線に近似する場合には(ステップＢ１２でＹＥＳ)、この発光ポイントの移動軌跡によって囲まれた領域は、投影画像内において任意に指定された領域であるとして、当該領域を照明指示領域として特定した後に(ステップＢ１３)、移動軌跡メモリ３３−１の内容を全てクリアして初期状態に戻すが(ステップＢ１４)、閉曲線に近似せず、発光ポイントの移動軌跡が直線的であったり、半円形にも達していないような場合には(ステップＢ１２でＮＯ)、上述の各ステップＢ１３およびＢ１４をスキップすることによって発光ポイントの移動軌跡を追跡する処理を引き続いて行うようにしている。
一方、今回の照明位置が前回の照明位置の近傍ではなく、互いに離れている場合には(ステップＢ９でＮＯ)、新たな領域を指定するためにポイント指定されたものと判別し、移動軌跡メモリ３３−１の内容を全てクリアして初期状態に戻した後に(ステップＢ１５)、今回の照明位置を始点位置として移動軌跡メモリ３３−１に記憶させる(ステップＢ１６)。
【００４０】
図６は、撮影画像解析処理の終了後に実行開始される解析結果対応処理を詳述するためのフローチャートである。
先ず、ＣＰＵ３１は、上述した撮影画像解析処理によってメニュー項目が特定されたか否かをチェックする(ステップＣ１)。いま、投影画像内のメニュー項目の何れかの位置がレーザ発光ペン５によって照明されている場合には(ステップＣ１でＹＥＳ)、この特定メニュー項目をアクティブメニュー項目としてセットすることによって当該メニュー処理を実行可能な状態にセットしておく(ステップＣ２)。なお、アクティブメニュー項目のデフォルト値は、「拡大」に設定されており、投影画像内のメニュー項目として、たとえば、「太線」の位置がポイント照明された際には、アクティブメニュー項目は、「太線」のメニュー項目に変更される。
【００４１】
また、メニュー項目が特定されていない場合、つまり、投影画像内のメニュー項目がスポット照明されていない場合には(ステップＣ１でＮＯ)、上述した撮影画像解析処理によって発光ポイントの移動軌跡によって囲まれた領域(照明指示領域)が特定されたか否かをチェックし(ステップＣ３)、照明指示領域が特定されなければ、この時点で当該フローから抜けるが、照明指示領域が特定されている場合には、現在のアクティブメニュー項目を判別する(ステップＣ４)。ここで、アクティブメニュー項目が「音声」であれば、音声認識プログラムを起動させて、照明指示領域内のデータ(文字列)を文字認識すると共に(ステップＣ５)、この認識結果を音声データに変換し(ステップＣ６)、この音声データを合成出力させる(ステップＣ７)。すなわち、これら(ステップＣ５〜７)による音声変換処理によって照明指示領域内のデータがそのまま読み上げられるので、参加者にあっては、照明指示領域内の文字列を読み取らなくても音声によってその内容を知ることができる。
【００４２】
また、アクティブメニュー項目が「拡大」であれば、照明指示領域全体を所定倍率(たとえば、２倍)に拡大すると共に(ステップＣ８)、この拡大画像を元画像(出力対象画像)の対応位置に貼り付ける画像合成を行い(ステップＣ９)。そして、この合成画像にメニュー項目画像を合成した後(ステップＣ１０)、この合成画像をプロジェクタ１に送信する(ステップＣ１１)修飾処理がなされる。
図９は、発光ポイントの移動軌跡を追随することによって特定された照明指示領域に対して各種の処理を施した後の投影画像を例示した図で、図９(Ａ)に示すように、照明指示領域が２行目〜３行目内の「いいい‥‥」、「ううう‥‥」であれば、この照明指示領域内の各データは、図９(Ｂ)に示すように２倍に拡大されて、プロジェクタ１から投影出力される。なお、修飾処理(ステップＣ８〜１１)で施される修飾種としては、縮小処理、網掛け処理、着色処理、反転処理、輝度変化処理、ぼかし処理、するなどの修飾であってもよい。
【００４３】
また、アクティブメニュー項目が「太線」であれば、照明指示領域のアウトラインを特定すると共に(ステップＣ１２)、このアウトラインを太線に変換し(ステップＣ１３)、この太線を元の出力対象画像の対応位置に貼り付けて画像合成する(ステップＣ１４)。さらに、この合成画像にメニュー項目画像を合成した後(ステップＣ１０)、この合成画像をプロジェクタ１に送信する(ステップＣ１１)。この場合、図９(Ａ)に示す照明指示領域は、図９(Ｃ)に示すような太線のアウトラインによって囲まれて、デジタルカメラ２から投影出力される。このように「太線」により文字列を囲んで、他の文字と区別可能にする以外に、点線、波線などによって文字列を囲んだり、図形を丸や四角で囲んだり、点滅処理、背景の色を変更するような強調処理であってもよい(ステップＣ１２〜１４)。
【００４４】
また、アクティブメニュー項目が「補足」であれば、記憶部３２に設けられている補足説明ファイル３２−１をアクセスして、当該照明指示領域に対応する関連情報を読み出す(ステップＣ１５)。
図１０は、補足説明ファイル３２−１の内容を示した図であり、この補足説明ファイル３２−１は、出力対象画像毎に「構成要素」、「関連情報」、「種類」とを対応付けて記憶管理するもので、補足説明ファイル３２−１の内容は、予め任意に登録されたものである。ここで、「構成要素」は、図表、写真、項目別文章などを示し、「関連情報」は、図表、写真、項目別文章などを補足説明するための音声データ、文字列・図表・写真などの画像データを示し、「種類」は、関連情報のデータ種を示し、音声データか画像データかを示している。
【００４５】
この場合、ＣＰＵ３１は、照明指示領域に基づいて出力対象画像内の該当領域を特定すると共に、この領域内に含まれている「構成要素」を特定し、この「構成要素」に基づいて補足説明ファイル３２−１を検索することによって「構成要素」に対応する「関連情報」、「種類」を読み出す(ステップＣ１５)。そして、この「種類」は、音声データか画像データかを判別し(ステップＣ１６)、音声であれば、登録されている音声データ「関連情報」を音声出力するが(ステップＣ１７)、画像であれば、登録されている画像データ「関連情報」を出力対象画像の対応位置に貼り付ける画像合成を行うと共に(ステップＣ１８)、この合成画像にメニュー項目画像を合成した後(ステップＣ１０)、この合成画像をプロジェクタ１に送信する(ステップＣ１１)。この場合、図９(Ａ)に示す照明指示領域には、図９(Ｄ)に示すような関連情報「ＡＡ‥‥」、「ＢＢ‥‥」が補足説明として付加されて、プロジェクタ１から投影出力される。なお、ステップＣ１７では、予め登録されている音声を出力する以外に、照明指示領域内のデータの内容に応じた楽曲を出力するような補足付加処理(ステップＣ１６〜１７)にしてもよい。また、ステップＣ１８の合成画像は静止画であっても動画であってもよい。
【００４６】
以上のように、この実施例のプレゼンテーションシステムにおいてＰＣ３は、出力対象画像がプロジェクタ１を介して投影出力されている投影画像内の任意の領域が指定されている状態において、メニュー項目内の「拡大」、「太線」が選択指定された場合に、デジタルカメラ２によって投影画像を撮影した撮影画像を取得し、この撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施した後の出力対象画像を投影画像としてプロジェクタ１から出力させるようにしたから、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を「拡大」、「太線」によって識別することができ、プレゼンテーションにおいて、スクリーン上に多くの資料が投影表示されている場合でも、説明内容と参考資料との対応関係を即座に確認することができず、対応する資料を探したり、間違った資料を見たり、説明内容を聞き逃すことを効果的に防止することが可能となる。
【００４７】
この場合、ＰＣ３は、出力対象画像内の対応領域の画像部分を識別可能とするために予め用意されている複数の識別種「拡大」、「太線」の中から任意の種類が選択指定されると、選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理するようにしたから、所望する領域識別を実現することができると共に、必要に応じて識別の仕方を変更することができるなど、より効果的なプレゼンテーションが可能となる。また、投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって選択指定された識別種を特定するようにしたから、所望する識別種を投影画像内で選択指定することができる。
【００４８】
ＰＣ３は、出力対象画像が投影出力されている投影画像内の任意の領域が指定されている状態において、メニュー項目内の「補足」が選択指定された場合には、当該投影画像を撮影した撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域に関する関連情報を取得して出力するようにしたから、投影画像内の任意の領域が指定されると、この指定領域に関する関連情報を出力することができ、プレゼンテーションにおいて、スクリーンに投影表示されている資料に関する補足説明などを出力することによって、より効果的なプレゼンテーションが可能となる。
【００４９】
この場合、関連情報が音声データであれば、補足説明ファイル３２−１から音声データを取得して音声出力するようにしたから、投影画像の補足説明として音声による説明が可能となる。また、関連情報が画像データであれば、補足説明ファイル３２−１から画像データを取得して投影画像として出力するようにしたから、投影画像の補足説明として別画像による説明が可能となる。この場合、元の出力対象画像と補足説明用の画像とを合成し、この合成画像を投影画像として出力させることができる。
【００５０】
一方、メニュー項目内の「音声」が選択指定された場合、ＰＣ３は、出力対象画像内の対応領域に関する関連情報を補足説明ファイル３２−１から取得せず、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声データに変換することによって音声データを合成出力するようにしたから、指定領域内のデータをそのまま読み上げることができ、参加者にあっては、照明指示領域内の文字列を読み取らなくても音声によってその内容を知ることができる。
【００５１】
また、レーザ発光ペン５を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定するようにしたから、遠方から投影画像内の任意の領域を照明するだけで、この照明部分の領域を容易に指定することができる。この場合、ＰＣ３は、レーザ発光ペン５を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定するようにしたから、詳細な領域指定を実現することが可能となる。
【００５２】
ＰＣ３は、投影画像と共にメニュー項目が投影されている状態において、このメニュー項目の中から任意のメニュー項目がレーザ発光ペン５を操作することによって投影画像内で選択指定された際に、そのときの撮影画像を解析することによって選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行するようにしたから、たとえば、画像切り換えなどの各種の処理を投影画像内で選択指定することができる。
【００５３】
なお、上述した実施例においては、指定領域内のデータを拡大（修飾処理）した後、この拡大画像を元の画像に貼り付ける際に、この拡大画像の大きさ、拡大画像の貼り付け位置によっては元の画像に影響を及ぼすことも考えられるが、このような場合、図１１に示すように画像の一部分をシフトするようにしていもよい。すなわち、図１１(Ａ)に示すように、２行目の文字列「ＢＢＢＢ‥‥」と、３行目の文字列「ＣＣＣＣ‥‥」のうち、その一部が領域指定された場合、つまり、各行の先頭から２文字を除く部分が領域指定された場合には、当該領域内の各文字を拡大した後、図１１(Ｂ)に示すように、１行目、２行目の先頭２文字「ＢＢ」、「ＣＣ」を領域拡大に応じてシフトするようにしてもよい。図１１(Ｂ)は、このような文字位置をシフトによってその一部が他の画像に重なり合った場合を示している。
【００５４】
上述した実施例において、発光ポイントの移動軌跡を追随検出する際に、投影画像(出力対象画像)全体を「４×４」、「６×６」、「８×８」のようにマトリックス状に分割し、今回の照明位置と前回の照明位置が同一の分割領域内に存在しているか否かに基づいて今回の照明位置は前回の照明位置の近傍か否かを判別するようにしたが、時間的要素を加味することによって発光ポイントの移動軌跡を追随検出するようにしてもよい。たとえば、前回の照明から今回の照明までの経過時間を計測し、この計測時間が一定時間を経過した場合には、新たな領域が指定された場合であると判断し、一定時間以下の場合には、引き続いて移動軌跡を追随検出するようにしてもよい。
【００５５】
また、上述した実施例においては、メニュー項目として、（「拡大」修飾処理）、（「太線」強調処理）、（「音声」音声変換処理）、（「補足」識別データ付加処理）を例示したが、これに限らず、たとえば、プレゼンテーションの開始／終了を指示するコマンド、次頁画像の切り換えを指示するコマンドなどを含むメニュー項目を投影画像として出力するようにしてもよい。
【００５６】
また、上述した実施例においては、投影画像内にメニュー項目を一覧表示させたが、メニュー項目を一覧表示させる場合に限らず、たとえば、所定の操作に応じてプルダウン形式のメニューを投影画像内に表示させ、その中から所望するメニュー項目を選択指定するようにしてもよく、また、投影画像内に１つの項目を表示させ、この項目が発光指定されるごとに、サイクリックに「拡大」、「太線」、「音声」、「補足」のメニュー項目に切り換えるようにしてもよい。
【００５７】
上述した実施例においては、レーザ発光ペン５を操作することによって投影画像内の任意のメニュー項目を選択指定したり、任意の領域を指定するようにしたが、レーザ発光ペンによって投影画像内の任意の位置をポイント指定する場合に限らず、たとえば、光の拡散を任意に可変可能な発光ペンを用いて、光の拡散している領域を指定領域として直接的に指定するようにしてもよい。例えば、光の拡散形状が丸であれば音声、四角であれば拡大、星であれば太線、∞であれば補足のメニュー項目を特定するようにしても良い。
また、発光ポイントの移動軌跡を追随検出し、その形が閉曲線に近似する場合には、この閉曲線で囲まれている領域を指定領域としたが、発光ポイントの移動軌跡が直線の場合には、この直線に対応する行を指定領域としてもよい。
【００５８】
その他、会社等における商談会、報告会、審議会などのビジネスミーティング用に限らず、一般家庭用であってもよい。また、デスクトップ型のパーソナルコンピュータに限らず、携帯情報端末であってもよく、また、プロジェクタ１の中にデジタルカメラ２を一体的に組み込んだ構成であってもよく、また、プロジェクタ１、デジタルカメラ２、ＰＣ３をそれぞれ一体的に組み込んだ構成であってもよい。つまり、プレゼンテーションシステムに限らず、スタンドアロンタイプのプロジェクタ機能付き画像処理装置であってもよい。
【００５９】
一方、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（たとえば、ＣＤ−ＲＯＭ、フレキシブルディスク、ＲＡＭカード等）を提供するようにしてもよい。すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、出力対象画像が光変換されて投影出力されいる投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す機能と、識別処理が施された後の出力対象画像を投影画像として出力する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００６０】
また、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、出力対象画像が光変換されて投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、特定された出力対象画像内の対応領域に対応付けて予め登録されている関連情報を取得する機能と、取得した関連情報を出力する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【図面の簡単な説明】
【００６１】
【図１】プレゼンテーションシステムの全体構成の概要を示したブロック図。
【図２】プロジェクタ１側において出力対象画像を光変換して投影画像として出力させた状態を示した図。
【図３】ＰＣ３の基本的構成要素を示したブロック図。
【図４】プレゼンテーションの開始指示に応答して実行開始されるＰＣ３の全体動作を示したフローチャート。
【図５】図４で示した撮影画像解析処理を詳述するためのフローチャート。
【図６】図４で示した撮影画像解析処理の終了後に実行開始される解析結果対応処理を詳述するためのフローチャート。
【図７】今回の照明位置が前回の照明位置の近傍であるか否かを判別するための判別方法を説明するための図。
【図８】発光ポイントの移動軌跡に応じて指定領域が特定される場合を例示した図。
【図９】発光軌跡を追随することによって特定された照明指示領域に対して各種の処理を施した後の投影画像で、(Ａ)は特定された照明指示領域を示し、(Ｂ)は照明指示領域内のデータを拡大した状態、(Ｃ)は照明指示領域のアウトラインを太線化した状態、(Ｄ)は照明指示領域に対応する関連情報を付加した状態を示した図。
【図１０】補足説明ファイル３２−１の内容を示した図。
【図１１】この実施例の変形応用例を説明するための図。
【符号の説明】
【００６２】
１ プロジェクタ
２ デジタルカメラ
３ ＰＣ
４ スクリーン
５ レーザ発光ペン
３１ ＣＰＵ
３２ 記憶部
３５ 通信Ｉ／Ｆ
３６ 入力装置
３７ 表示装置
３８ 音声出力部
３２−１ 補足説明ファイル
３３−１ 移動軌跡メモリ
【技術分野】
【０００１】
この発明は、出力対象画像を光変換して投影画像として出力するプロジェクタ機能付き画像処理装置およびプログラムに関する。
【背景技術】
【０００２】
従来、ＣＲＴ(ブラウン管)あるいは液晶パネルなどを使用して、出力対象画像を光変換してスクリーン上に投影表示するプロジェクタは、高解像で鮮明なカラー投影を得ることができるようになり、また、パーソナルコンピュータ(ＰＣ)からの画像をスクリーン上に投影表示するようにしたプレゼンテーションシステムとしては、たとえば、ＰＣから外部表示装置に対して送られた出力対象画像のうち、任意の領域をＰＣ側から指定すると、この指定領域内の画像部分を抽出して外部表示装置に送り、この外部表示装置を介してスクリーン上に投影するようにした表示用画面の部分選択装置が知られている（特許文献１参照）。
【特許文献１】特開２０００−１８１４２２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上述した特許文献の部分選択装置にあっては、指定領域内の画像部分を抽出して投影表示させるようにしているため、プレゼンテーションの参加者にあっては、その部分を注視することができるが、領域が指定される以前の画像全体までも知ることはできず、部分画像が表示されている状態では、画像全体に対して当該部分がどのような関係にあるかを把握することはできなかった。
【０００４】
ところで、各種資料をスクリーン上に投影表示させているプレゼンテーション時において、発表者は、スクリーン上の資料に沿って説明を行うようにしているが、その際、発表内容と参考資料との対応関係を口述で説明しながら行うようにしている。この場合、参加者にあっては、スクリーン上に投影表示されている多くの資料の中から現在の説明内容に該当する参考資料を即座に見つけ出すことができなかったり、間違った資料を見てしまうことがあり、さらには、説明内容を聞き逃すことがあるなど、発表者と参加者との間に大きなギャップが生じることがあった。このことは、プレゼンテーションの進行が速くなればなる程、顕著なものとなる。
【０００５】
第１の発明の課題は、出力対象画像を光変換して投影画像として出力している状態において、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を識別できるようにすることである。
第２の発明の課題は、出力対象画像を光変換して投影画像として出力している状態において、投影画像内の任意の領域が指定されると、この指定領域に関する関連情報を出力できるようにすることである。
【課題を解決するための手段】
【０００６】
請求項１記載の発明（第１の発明）は、出力対象画像を光変換して投影画像として出力するプロジェクタ機能付き画像処理装置において、出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、この領域特定手段によって特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す識別処理手段と、この識別処理手段によって識別処理が施された後の出力対象画像を投影画像として出力する出力手段とを具備したことを特徴とする。
さらに、コンピュータに対して、上述した請求項１記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１１記載の発明）。
【０００７】
なお、請求項１記載の発明は次のようなものであってもよい。
前記出力対象画像内の対応領域の画像部分を識別するために予め用意されている複数の識別種の中から任意の種類を選択指定する識別種選択手段を設け、前記識別処理手段は、この識別種選択手段によって任意に選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理する（請求項２記載の発明）。
【０００８】
投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって前記選択指定された識別種を特定する（請求項３記載の発明）。
【０００９】
前記指定手段は、発光体を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定する（請求項５記載の発明）。
この場合、前記領域特定手段は、発光体を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定するようにしてもよい（請求項６記載の発明）。
【００１０】
投影画像と共に処理メニューが投影されている状態において、この処理メニューの中から任意のメニュー項目が投影画像内で選択指定された際に、そのときの撮影画像を解析することによって前記選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行する（請求項７記載の発明）。
【００１１】
請求項４記載の発明（第２の発明）は、出力対象画像を光変換して投影画像として出力するプロジェクタ機能を備えた画像処理装置において、出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、この領域特定手段によって特定された出力対象画像内の対応領域に関する関連情報を取得する取得手段と、この取得手段によって得られた関連情報を出力する出力手段とを具備したことを特徴とする。
さらに、コンピュータに対して、上述した請求項４記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１２記載の発明）。
【００１２】
なお、請求項４記載の発明は次のようなものであってもよい。
前記出力手段は、出力対象画像内の対応領域に関する関連情報が音声情報であれば、この音声情報を合成出力する（請求項８記載の発明）。
【００１３】
前記取得手段は、出力対象画像内の対応領域に関する関連情報を取得する際に、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換することによって対応領域に関する関連情報を取得し、前記出力手段は、この取得手段によって得られた音声情報を合成出力する（請求項９記載の発明）。
【００１４】
前記出力手段は、出力対象画像内の対応領域に関する関連情報が登録画像であれば、この登録画像を投影画像として出力する（請求項１０記載の発明）。
その他、請求項４記載の発明（第２の発明）にあっても、上述した請求項５〜請求項７記載の発明であってもよい。
【発明の効果】
【００１５】
請求項１記載の発明（第１の発明）によれば、出力対象画像が投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影した撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施した後の出力対象画像を投影画像として出力するようにしたから、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を識別することができ、たとえば、プレゼンテーションにおいて、スクリーン上に多くの資料が投影表示されている場合でも、説明内容と参考資料との対応関係を即座に確認することができず、対応する資料を探したり、間違った資料を見たり、説明内容を聞き逃すことを効果的に防止することが可能となる。
なお、識別処理としては、領域拡大処理、領域アウトラインの太線化処理、網掛け処理、着色処理、反転処理、輝度変化処理、点滅処理など任意である。
【００１６】
請求項２記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、出力対象画像内の対応領域の画像部分を識別可能とするために予め用意されている複数の識別種の中から任意の種類が選択指定されると、選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理するようにしたから、所望する領域識別を実現することができると共に、必要に応じて識別の仕方を変更することができるなど、より効果的なプレゼンテーションが可能となる。
【００１７】
請求項３記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって選択指定された識別種を特定するようにしたから、所望する識別種を投影画像内で選択指定することができる。
【００１８】
請求項５記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、発光体を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定するようにしたから、たとえば、レーザ発光ペンを使用して遠方から投影画像内の任意の領域を照明するだけで、この照明部分の領域を容易に指定することができる。
なお、発光ペンは、たとえば、赤色のレーザビームを発光するもので、その指向性によって遠方からでも所望する位置をポイント照明することができるものである。
この場合、発光体を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定するようにすれば(請求項６記載の発明)、詳細な領域指定を実現することが可能となる。
【００１９】
請求項７記載の発明によれば、上述した請求項１記載の発明と同様の効果を有する他、投影画像と共に処理メニューが投影されている状態において、この処理メニューの中から任意のメニュー項目が投影画像内で選択指定された際に、そのときの撮影画像を解析することによって選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行するようにしたから、たとえば、画像切り換えなどの各種の処理を投影画像内で選択指定することができる。
【００２０】
請求項４記載の発明（第２の発明）によれば、出力対象画像が投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影した撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域に関する関連情報を取得して出力するようにしたから、投影画像内の任意の領域が指定されると、この指定領域に関する関連情報を出力することができ、たとえば、プレゼンテーションにおいて、スクリーン上に投影表示されている資料に関する補足説明などを出力することによって、より効果的なプレゼンテーションが可能となる。
【００２１】
請求項８記載の発明によれば、上述した請求項４記載の発明と同様の効果を有する他、出力対象画像内の対応領域に関する関連情報が音声情報であれば、この音声情報を合成出力するようにしたから、投影画像の補足説明として音声による説明が可能となる。
この場合、出力対象画像内の対応領域に関する関連情報を取得する際に、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換することによって音声情報を合成出力するようにしてもよい(請求項９記載の発明)。
【００２２】
請求項１０記載の発明によれば、上述した請求項４記載の発明と同様の効果を有する他、出力対象画像内の対応領域に関する関連情報が登録画像であれば、この登録画像を投影画像として出力するようにしたから、投影画像の補足説明として別画像による説明が可能となる。
なお、請求項４記載の発明（第２の発明）においても、上述した請求項５〜請求項７記載の発明と同様の効果を有する。
【発明を実施するための最良の形態】
【００２３】
以下、図１〜図１０を参照して本発明の実施例を説明する。
図１は、この実施例におけるプレゼンテーションシステムの全体構成の概要を示したブロック図である。
このプレゼンテーションシステムは、プロジェクタ機能付き画像処理装置を構成するもので、たとえば、会社等における商談会、報告会、審議会などのビジネスミーティング用として使用され、プロジェクタ１、デジタルカメラ２、パーソナルコンピュータ(ＰＣ)３、スクリーン４を有する構成となっている。
【００２４】
プロジェクタ１は、たとえば、液晶パネルを使用した液晶プロジェクタであり、光源、プリズム、投影レンズのほか、ＣＰＵ、通信インターフェイスなどを有する構成で、プロジェクタ１とＰＣ３とは、無線あるいは有線によって接続され、ＰＣ３から送信されてきた画像を受信すると、液晶パネルを介してスクリーン４上に投影出力するようにしている。デジタルカメラ２は、ＣＣＤ等の撮像素子、光学系、ＣＰＵ、記録メディアなどを有し、ＰＣ３からの指示によって動作するもので、プレゼンテーションの開始が指示された際に、スクリーン４を被写体として投影画像の全体を動画撮影するビデオカメラあるいは動画撮影が可能なスチルカメラであり、プロジェクタ１に取り付けられている。
【００２５】
この場合、プロジェクタ１の上面部には、デジタルカメラ２が取り付けられており、プロジェクタ１の投影レンズとデジタルカメラ２の撮影レンズとの光軸が上下相対するように極力接近させてある。なお、プロジェクタ１とデジタルカメラ２との間には、プロジェクタ１内の光源からの発熱がデジタルカメラ２に影響しないように断熱部材(図示せず)が設けられている。
レーザ発光ペン５は、プロジェクタ１からスクリーン４上に投影出力された投影画像内において、たとえば、任意の位置をポイント照明する赤色のレーザビームを発光する棒状の発光体であり、その指向性によって遠方からでも所望する位置をポイント照明することができるものである
【００２６】
図２は、プロジェクタ１側において出力対象画像を光変換して投影画像として出力させた状態を示した図である。
この場合、ＰＣ３側の画面(ＰＣ画面)には、出力対象画像と共に、その下側にはメニュー項目が表示され、また、スクリーン４上には、この出力対象画像の投影画像とメニュー項目の投影画像が並列的に表示される。このようにＰＣ画面の表示内容とスクリーン４上の投影内容とは対応付けられており、ＰＣ画面の表示内容がそのまま投影画像となる。ここの投影画像内において、発表者は、レーザ発光ペン５を使用することによって、投影画像内の任意の領域を指定したり、投影画像内のメニュー項目を任意に指定する。
【００２７】
この場合、レーザ発光ペン５によって投影画像内の任意の位置がポイント照明されている状態において、デジタルカメラ２は、この投影画像の全体を撮影するようにしている。ＰＣ３は、この撮影画像を順次取り込みながら画像解析を行い、レーザ発光ペン５によってポイント照明されている位置の移動軌跡(発光照明軌跡)を追随検出し、この照明ポイントの移動軌跡によって指示された領域を特定するようにしている。ここで、ＰＣ３は、投影画像内の照明軌跡に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施すと共に、識別処理を施した後の出力対象画像を投影画像として再出力させるようにしている。また、ＰＣ３は、識別処理を施す以外に、出力対象画像内の対応領域に対応して登録されている関連情報を読み出し、この関連情報が音声であれば、この関連情報を音声出力させ、画像であれば、この関連情報を出力対象画像に合成して再出力させるようにしている。
【００２８】
また、ＰＣ３は、照明ポイントの位置が投影画像内のメニュー項目上であれば、このメニュー項目対応の処理を実行するようにしている。メニュー項目は、「拡大」、「太線」、「音声」、「補足」、‥‥の各項目を有している。ここで、「拡大」のメニュー項目は、識別処理の１つで、指定領域内の画像部分を拡大すべきことを指示するためのメニュー項目である。「太線」のメニュー項目は、他の識別処理で、指定領域のアウトラインを特定すると共にこのアウトラインを太線で囲むべきことを指示するためのメニュー項目である。「音声」のメニュー項目は、指定領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換して合成出力すべきことを指示するためのメニュー項目である。「補足」のメニュー項目は、指定領域に対応して予め登録されている関連情報を出力すべきこと指示するためのメニュー項目である。この場合、関連情報が音声情報であれば、この音声情報を合成出力し、関連情報が登録画像であれば、この登録画像を投影画像として当該指定領域に対応付けて出力する。
【００２９】
図３は、ＰＣ３の基本的構成要素を示したブロック図である。
ＣＰＵ３１は、記憶部３２内のオペレーティングシステム、各種アプリケーションソフトに応じてこのＰＣ３の全体動作を制御する中央演算処理装置である。記憶部３２は、プログラム領域とデータ領域とを有し、磁気的メモリ、光学的メモリ、半導体メモリ等の他、その駆動系を有する構成となっている。この記憶部３２内のプログラム領域には、後述する図４〜図６に示す動作手順に応じて本実施例を実現するためのアプリケーションプログラムが格納されている。
【００３０】
この記憶部３２内のプログラム、データは、必要に応じてＲＡＭ（たとえば、スタティックＲＡＭ）３３にロードされたり、このＲＡＭ３３内のデータが記憶部３２にセーブされる。なお、ＲＡＭ３３内の移動軌跡メモリ３３−１は、上述した投影画像内の照明ポイントが順次セットされるもので、ＣＰＵ３１は、この移動軌跡メモリ３３−１に基づいて照明ポイントの移動軌跡を解析し、この移動軌跡が閉曲線に近似したものであれば、この閉曲線を指定領域として特定するようにしている。なお、記録媒体３４は、ＣＤ−ＲＯＭ、フレキシブルディスク、ＲＡＭカード等である。
【００３１】
ＣＰＵ３１には、その入出力周辺デバイスである通信Ｉ／Ｆ(インターフェイス)３５、入力装置３６、表示装置３７、音声出力部３８がバスラインを介して接続されており、入出力プログラムによってＣＰＵ３１は、これらの入出力デバイスの動作制御を行う。
通信Ｉ／Ｆ３５は、プロジェクタ１、デジタルカメラ２との間で画像データ等の送受信を行う有線／無線インターフェイスである。入力装置３６は、キーボード、タッチパネルあるいはマウス、タッチ入力ペン等のポインティングデバイスを構成する操作部であり、文字列データ、各種コマンドの入力を行う。表示装置３７は、フルカラー表示を行う液晶表示装置、ＣＲＴ表示装置、プラズマ表示装置等である。音声出力部３８は、スピーカ等を有し、たとえば、スクリーン４の両側などに配置されている。
【００３２】
次ぎに、この実施例におけるプレゼンテーションシステムの動作概念を図４〜図６に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体の他に、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施例特有の動作を実行することもできる。
【００３３】
図４は、プレゼンテーションの開始指示に応答して実行開始されるＰＣ３の全体動作を示したフローチャートである。
先ず、ＣＰＵ３１は、プレゼンテーションの開始指示に応答してプロジェクタ１およびデジタルカメラ２を起動させると共に(ステップＡ１)、図２に示したように「拡大」、「太線」、「音声」、「補足」、‥‥の各項目を有するメニュー項目画像を投影出力の対象画像として生成する(ステップＡ２)。そして、予め登録されている各種画像の一覧画面を表示出力させると共に、この一覧画面の中から複数の画像が投影出力の対象画像群として任意に選択指定されると(ステップＡ３)、この選択画像群の先頭から１画像データを読み出すと共に(ステップＡ４)、この読み出し画像をＰＣ画面に表示出力させる(ステップＡ５)。この場合、ＰＣ画面には、図２で示したように、当該読み出し画像と共にメニュー項目画像が並列的に表示出力される。
【００３４】
そして、この読み出し画像とメニュー項目画像との合成画像を生成して(ステップＡ６)、この合成画像をプロジェクタ１に送信する(ステップＡ７)。ここで、プロジェクタ１側では、この合成画像が液晶パネルに展開されて、プリズム、投影レンズなどを介してスクリーン４上に投影出力させる。この状態において、ＰＣ３側においては、その入力装置３６に設けられている画像送りキー(図示せず)の操作有無をチェックし(ステップＡ８)、この画像送りキーが操作された際には、上述の選択画像群の中から次ぎの１画像データを読み出して(ステップＡ９)、次画像の有無をチェックする(ステップＡ１０)。ここで、次画像が有れば、ステップＡ５に戻り、この読み出し画像をメニュー項目画像と共にＰＣ画面に表示出力させる。最初は、先頭画像の投影を開始した場合であり、画像送りキーが操作されなければ(ステップＡ１０でＮＯ)、デジタルカメラ２から撮影画像を取得して(ステップＡ１１)、後述する撮影画像解析処理を行うと共に(ステップＡ１２)、解析結果対応処理を実行した後に(ステップＡ１３)、画像送りキーの操作有無をチェックし(ステップＡ８)、以下、画像送りキーが操作されるまで撮影画像を取得しながら撮影画像解析処理(ステップＡ１２)、解析結果対応処理(ステップＡ１３)が繰り返し実行される。
【００３５】
図５は、撮影画像解析処理を詳述するためのフローチャートである。
この撮影画像解析処理は、デジタルカメラ２から取得した撮影画像を解析し、この撮影画像内に含まれている照明ポイントを特定すると共に、この照明ポイントに対応する出力対象画像内の位置を特定するもので、先ず、ＣＰＵ３１は、撮影画像全体を解析しながら(ステップＢ１)、レーザ発光ペン５による照明ポイント(所定大の赤色部分)の有無を調べ(ステップＢ２)、撮影画像内に照明ポイントが含まれていなければ(ステップＢ２でＮＯ)、移動軌跡メモリ３３−１の内容をクリアして初期化するが(ステップＢ３)、撮影画像内に照明ポイントが含まれていれば、撮影画像内における照明ポイントの位置を特定し(ステップＢ４)、この照明ポイントの位置は、メニュー項目の表示上か否かを判別する(ステップＢ５)。いま、メニュー項目が発光照明されている場合には(ステップＢ５でＹＥＳ)、当該照明位置に基づいて対応のメニュー項目として、「拡大」、「太線」、「音声」、「補足」、‥‥のうち、何れの項目が指定されたかを特定する(ステップＢ６)。
【００３６】
一方、照明ポイントの位置がメニュー項目の表示上ではなければ(ステップＢ５でＮＯ)、移動軌跡メモリ３３−１から前回の照明位置を読み出し(ステップＢ７)、この前回の照明位置と今回特定した照明位置とを比較して(ステップＢ８)、今回の照明位置は前回の照明位置の近傍かを判別する(ステップＢ９)。ここで、今回の照明位置と前回の照明位置とが離れている場合には、新たな領域を指定するためにポイント指定されたものと判別するが、投影画像内の任意の領域を指定するために、発光ポイントの位置が連続的に変化しているような場合には、今回の照明位置は前回の照明位置の近傍であると判別する。
【００３７】
図７は、今回の照明位置が前回の照明位置の近傍であるか否かを判別するための判別方法を説明するための図である。
たとえば、出力対象画像全体を「４×４」、「６×６」、「８×８」のようにマトリックス状に分割した場合において、今回の照明位置と前回の照明位置が同一の分割領域内に存在しているときには今回の照明位置は前回の照明位置の近傍であると判別され、また、今回の照明位置と前回の照明位置が異なる分割領域であっても、その距離が分割領域サイズ分以下のときにも今回の照明位置は前回の照明位置の近傍であると判別される。この場合、出力対象画像の複雑度合いに基づいて「４×４」、「６×６」、「８×８」の何れか一方で画像全体を分割するようにしている。なお、図７の例では、「４×４」で分割した場合を例示したもので、たとえば、図示のように今回の照明位置が存在する分割エリアが (３、３)の座標値で示されるエリアで、前回の照明位置が存在する分割エリアも (３、３) の座標値で示されるエリアであれば、今回の照明位置は前回の照明位置の近傍であると判別されるが、今回の照明位置が存在する分割エリアが (３、３)で、前回の照明位置が存在する分割エリアが (３、４)であり、その距離が分割領域サイズを超える場合には、今回の照明位置は前回の照明位置の近傍ではないと判別される。
【００３８】
いま、今回の照明位置が前回の照明位置の近傍であれば(ステップＢ９でＹＥＳ)、今回の照明位置データを移動軌跡メモリ３３−１に追加記憶させた後(ステップＢ１０)、移動軌跡メモリ３３−１内の各位置データを全て読み出して解析し(ステップＢ１１)、各位置によって特定される形状、つまり、発光ポイントの移動軌跡は、閉曲線に近似するか否かを調べる(ステップＢ１２)。
図８は、発光ポイントの移動軌跡に応じて指定領域が特定される場合を例示した図であり、発光ポイントの移動軌跡は、投影画像内において任意に指定された領域を特定可能であればよく、略矩形、三角形などであってもく、また、完全な閉曲線を成す必要はなく、たとえば、略半円形であっても閉曲線に近似すると判別される。なお、移動軌跡の形状によってメニュー項目の種類を特定しても良い。例えば、移動軌跡の形状が三角あれば音声、四角であれば拡大、丸であれば太線、∞であれば補足のメニュー項目を特定するようにしても良い。
【００３９】
ここで、移動軌跡メモリ３３−１の内容を解析した結果、各位置によって特定された形状が閉曲線に近似する場合には(ステップＢ１２でＹＥＳ)、この発光ポイントの移動軌跡によって囲まれた領域は、投影画像内において任意に指定された領域であるとして、当該領域を照明指示領域として特定した後に(ステップＢ１３)、移動軌跡メモリ３３−１の内容を全てクリアして初期状態に戻すが(ステップＢ１４)、閉曲線に近似せず、発光ポイントの移動軌跡が直線的であったり、半円形にも達していないような場合には(ステップＢ１２でＮＯ)、上述の各ステップＢ１３およびＢ１４をスキップすることによって発光ポイントの移動軌跡を追跡する処理を引き続いて行うようにしている。
一方、今回の照明位置が前回の照明位置の近傍ではなく、互いに離れている場合には(ステップＢ９でＮＯ)、新たな領域を指定するためにポイント指定されたものと判別し、移動軌跡メモリ３３−１の内容を全てクリアして初期状態に戻した後に(ステップＢ１５)、今回の照明位置を始点位置として移動軌跡メモリ３３−１に記憶させる(ステップＢ１６)。
【００４０】
図６は、撮影画像解析処理の終了後に実行開始される解析結果対応処理を詳述するためのフローチャートである。
先ず、ＣＰＵ３１は、上述した撮影画像解析処理によってメニュー項目が特定されたか否かをチェックする(ステップＣ１)。いま、投影画像内のメニュー項目の何れかの位置がレーザ発光ペン５によって照明されている場合には(ステップＣ１でＹＥＳ)、この特定メニュー項目をアクティブメニュー項目としてセットすることによって当該メニュー処理を実行可能な状態にセットしておく(ステップＣ２)。なお、アクティブメニュー項目のデフォルト値は、「拡大」に設定されており、投影画像内のメニュー項目として、たとえば、「太線」の位置がポイント照明された際には、アクティブメニュー項目は、「太線」のメニュー項目に変更される。
【００４１】
また、メニュー項目が特定されていない場合、つまり、投影画像内のメニュー項目がスポット照明されていない場合には(ステップＣ１でＮＯ)、上述した撮影画像解析処理によって発光ポイントの移動軌跡によって囲まれた領域(照明指示領域)が特定されたか否かをチェックし(ステップＣ３)、照明指示領域が特定されなければ、この時点で当該フローから抜けるが、照明指示領域が特定されている場合には、現在のアクティブメニュー項目を判別する(ステップＣ４)。ここで、アクティブメニュー項目が「音声」であれば、音声認識プログラムを起動させて、照明指示領域内のデータ(文字列)を文字認識すると共に(ステップＣ５)、この認識結果を音声データに変換し(ステップＣ６)、この音声データを合成出力させる(ステップＣ７)。すなわち、これら(ステップＣ５〜７)による音声変換処理によって照明指示領域内のデータがそのまま読み上げられるので、参加者にあっては、照明指示領域内の文字列を読み取らなくても音声によってその内容を知ることができる。
【００４２】
また、アクティブメニュー項目が「拡大」であれば、照明指示領域全体を所定倍率(たとえば、２倍)に拡大すると共に(ステップＣ８)、この拡大画像を元画像(出力対象画像)の対応位置に貼り付ける画像合成を行い(ステップＣ９)。そして、この合成画像にメニュー項目画像を合成した後(ステップＣ１０)、この合成画像をプロジェクタ１に送信する(ステップＣ１１)修飾処理がなされる。
図９は、発光ポイントの移動軌跡を追随することによって特定された照明指示領域に対して各種の処理を施した後の投影画像を例示した図で、図９(Ａ)に示すように、照明指示領域が２行目〜３行目内の「いいい‥‥」、「ううう‥‥」であれば、この照明指示領域内の各データは、図９(Ｂ)に示すように２倍に拡大されて、プロジェクタ１から投影出力される。なお、修飾処理(ステップＣ８〜１１)で施される修飾種としては、縮小処理、網掛け処理、着色処理、反転処理、輝度変化処理、ぼかし処理、するなどの修飾であってもよい。
【００４３】
また、アクティブメニュー項目が「太線」であれば、照明指示領域のアウトラインを特定すると共に(ステップＣ１２)、このアウトラインを太線に変換し(ステップＣ１３)、この太線を元の出力対象画像の対応位置に貼り付けて画像合成する(ステップＣ１４)。さらに、この合成画像にメニュー項目画像を合成した後(ステップＣ１０)、この合成画像をプロジェクタ１に送信する(ステップＣ１１)。この場合、図９(Ａ)に示す照明指示領域は、図９(Ｃ)に示すような太線のアウトラインによって囲まれて、デジタルカメラ２から投影出力される。このように「太線」により文字列を囲んで、他の文字と区別可能にする以外に、点線、波線などによって文字列を囲んだり、図形を丸や四角で囲んだり、点滅処理、背景の色を変更するような強調処理であってもよい(ステップＣ１２〜１４)。
【００４４】
また、アクティブメニュー項目が「補足」であれば、記憶部３２に設けられている補足説明ファイル３２−１をアクセスして、当該照明指示領域に対応する関連情報を読み出す(ステップＣ１５)。
図１０は、補足説明ファイル３２−１の内容を示した図であり、この補足説明ファイル３２−１は、出力対象画像毎に「構成要素」、「関連情報」、「種類」とを対応付けて記憶管理するもので、補足説明ファイル３２−１の内容は、予め任意に登録されたものである。ここで、「構成要素」は、図表、写真、項目別文章などを示し、「関連情報」は、図表、写真、項目別文章などを補足説明するための音声データ、文字列・図表・写真などの画像データを示し、「種類」は、関連情報のデータ種を示し、音声データか画像データかを示している。
【００４５】
この場合、ＣＰＵ３１は、照明指示領域に基づいて出力対象画像内の該当領域を特定すると共に、この領域内に含まれている「構成要素」を特定し、この「構成要素」に基づいて補足説明ファイル３２−１を検索することによって「構成要素」に対応する「関連情報」、「種類」を読み出す(ステップＣ１５)。そして、この「種類」は、音声データか画像データかを判別し(ステップＣ１６)、音声であれば、登録されている音声データ「関連情報」を音声出力するが(ステップＣ１７)、画像であれば、登録されている画像データ「関連情報」を出力対象画像の対応位置に貼り付ける画像合成を行うと共に(ステップＣ１８)、この合成画像にメニュー項目画像を合成した後(ステップＣ１０)、この合成画像をプロジェクタ１に送信する(ステップＣ１１)。この場合、図９(Ａ)に示す照明指示領域には、図９(Ｄ)に示すような関連情報「ＡＡ‥‥」、「ＢＢ‥‥」が補足説明として付加されて、プロジェクタ１から投影出力される。なお、ステップＣ１７では、予め登録されている音声を出力する以外に、照明指示領域内のデータの内容に応じた楽曲を出力するような補足付加処理(ステップＣ１６〜１７)にしてもよい。また、ステップＣ１８の合成画像は静止画であっても動画であってもよい。
【００４６】
以上のように、この実施例のプレゼンテーションシステムにおいてＰＣ３は、出力対象画像がプロジェクタ１を介して投影出力されている投影画像内の任意の領域が指定されている状態において、メニュー項目内の「拡大」、「太線」が選択指定された場合に、デジタルカメラ２によって投影画像を撮影した撮影画像を取得し、この撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施した後の出力対象画像を投影画像としてプロジェクタ１から出力させるようにしたから、投影画像内の任意の領域が指定されると、この指定領域内の画像部分を「拡大」、「太線」によって識別することができ、プレゼンテーションにおいて、スクリーン上に多くの資料が投影表示されている場合でも、説明内容と参考資料との対応関係を即座に確認することができず、対応する資料を探したり、間違った資料を見たり、説明内容を聞き逃すことを効果的に防止することが可能となる。
【００４７】
この場合、ＰＣ３は、出力対象画像内の対応領域の画像部分を識別可能とするために予め用意されている複数の識別種「拡大」、「太線」の中から任意の種類が選択指定されると、選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理するようにしたから、所望する領域識別を実現することができると共に、必要に応じて識別の仕方を変更することができるなど、より効果的なプレゼンテーションが可能となる。また、投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって選択指定された識別種を特定するようにしたから、所望する識別種を投影画像内で選択指定することができる。
【００４８】
ＰＣ３は、出力対象画像が投影出力されている投影画像内の任意の領域が指定されている状態において、メニュー項目内の「補足」が選択指定された場合には、当該投影画像を撮影した撮影画像を解析することによって指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定し、この出力対象画像内の対応領域に関する関連情報を取得して出力するようにしたから、投影画像内の任意の領域が指定されると、この指定領域に関する関連情報を出力することができ、プレゼンテーションにおいて、スクリーンに投影表示されている資料に関する補足説明などを出力することによって、より効果的なプレゼンテーションが可能となる。
【００４９】
この場合、関連情報が音声データであれば、補足説明ファイル３２−１から音声データを取得して音声出力するようにしたから、投影画像の補足説明として音声による説明が可能となる。また、関連情報が画像データであれば、補足説明ファイル３２−１から画像データを取得して投影画像として出力するようにしたから、投影画像の補足説明として別画像による説明が可能となる。この場合、元の出力対象画像と補足説明用の画像とを合成し、この合成画像を投影画像として出力させることができる。
【００５０】
一方、メニュー項目内の「音声」が選択指定された場合、ＰＣ３は、出力対象画像内の対応領域に関する関連情報を補足説明ファイル３２−１から取得せず、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声データに変換することによって音声データを合成出力するようにしたから、指定領域内のデータをそのまま読み上げることができ、参加者にあっては、照明指示領域内の文字列を読み取らなくても音声によってその内容を知ることができる。
【００５１】
また、レーザ発光ペン５を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定するようにしたから、遠方から投影画像内の任意の領域を照明するだけで、この照明部分の領域を容易に指定することができる。この場合、ＰＣ３は、レーザ発光ペン５を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定するようにしたから、詳細な領域指定を実現することが可能となる。
【００５２】
ＰＣ３は、投影画像と共にメニュー項目が投影されている状態において、このメニュー項目の中から任意のメニュー項目がレーザ発光ペン５を操作することによって投影画像内で選択指定された際に、そのときの撮影画像を解析することによって選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行するようにしたから、たとえば、画像切り換えなどの各種の処理を投影画像内で選択指定することができる。
【００５３】
なお、上述した実施例においては、指定領域内のデータを拡大（修飾処理）した後、この拡大画像を元の画像に貼り付ける際に、この拡大画像の大きさ、拡大画像の貼り付け位置によっては元の画像に影響を及ぼすことも考えられるが、このような場合、図１１に示すように画像の一部分をシフトするようにしていもよい。すなわち、図１１(Ａ)に示すように、２行目の文字列「ＢＢＢＢ‥‥」と、３行目の文字列「ＣＣＣＣ‥‥」のうち、その一部が領域指定された場合、つまり、各行の先頭から２文字を除く部分が領域指定された場合には、当該領域内の各文字を拡大した後、図１１(Ｂ)に示すように、１行目、２行目の先頭２文字「ＢＢ」、「ＣＣ」を領域拡大に応じてシフトするようにしてもよい。図１１(Ｂ)は、このような文字位置をシフトによってその一部が他の画像に重なり合った場合を示している。
【００５４】
上述した実施例において、発光ポイントの移動軌跡を追随検出する際に、投影画像(出力対象画像)全体を「４×４」、「６×６」、「８×８」のようにマトリックス状に分割し、今回の照明位置と前回の照明位置が同一の分割領域内に存在しているか否かに基づいて今回の照明位置は前回の照明位置の近傍か否かを判別するようにしたが、時間的要素を加味することによって発光ポイントの移動軌跡を追随検出するようにしてもよい。たとえば、前回の照明から今回の照明までの経過時間を計測し、この計測時間が一定時間を経過した場合には、新たな領域が指定された場合であると判断し、一定時間以下の場合には、引き続いて移動軌跡を追随検出するようにしてもよい。
【００５５】
また、上述した実施例においては、メニュー項目として、（「拡大」修飾処理）、（「太線」強調処理）、（「音声」音声変換処理）、（「補足」識別データ付加処理）を例示したが、これに限らず、たとえば、プレゼンテーションの開始／終了を指示するコマンド、次頁画像の切り換えを指示するコマンドなどを含むメニュー項目を投影画像として出力するようにしてもよい。
【００５６】
また、上述した実施例においては、投影画像内にメニュー項目を一覧表示させたが、メニュー項目を一覧表示させる場合に限らず、たとえば、所定の操作に応じてプルダウン形式のメニューを投影画像内に表示させ、その中から所望するメニュー項目を選択指定するようにしてもよく、また、投影画像内に１つの項目を表示させ、この項目が発光指定されるごとに、サイクリックに「拡大」、「太線」、「音声」、「補足」のメニュー項目に切り換えるようにしてもよい。
【００５７】
上述した実施例においては、レーザ発光ペン５を操作することによって投影画像内の任意のメニュー項目を選択指定したり、任意の領域を指定するようにしたが、レーザ発光ペンによって投影画像内の任意の位置をポイント指定する場合に限らず、たとえば、光の拡散を任意に可変可能な発光ペンを用いて、光の拡散している領域を指定領域として直接的に指定するようにしてもよい。例えば、光の拡散形状が丸であれば音声、四角であれば拡大、星であれば太線、∞であれば補足のメニュー項目を特定するようにしても良い。
また、発光ポイントの移動軌跡を追随検出し、その形が閉曲線に近似する場合には、この閉曲線で囲まれている領域を指定領域としたが、発光ポイントの移動軌跡が直線の場合には、この直線に対応する行を指定領域としてもよい。
【００５８】
その他、会社等における商談会、報告会、審議会などのビジネスミーティング用に限らず、一般家庭用であってもよい。また、デスクトップ型のパーソナルコンピュータに限らず、携帯情報端末であってもよく、また、プロジェクタ１の中にデジタルカメラ２を一体的に組み込んだ構成であってもよく、また、プロジェクタ１、デジタルカメラ２、ＰＣ３をそれぞれ一体的に組み込んだ構成であってもよい。つまり、プレゼンテーションシステムに限らず、スタンドアロンタイプのプロジェクタ機能付き画像処理装置であってもよい。
【００５９】
一方、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（たとえば、ＣＤ−ＲＯＭ、フレキシブルディスク、ＲＡＭカード等）を提供するようにしてもよい。すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、出力対象画像が光変換されて投影出力されいる投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す機能と、識別処理が施された後の出力対象画像を投影画像として出力する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００６０】
また、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、出力対象画像が光変換されて投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、特定された出力対象画像内の対応領域に対応付けて予め登録されている関連情報を取得する機能と、取得した関連情報を出力する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【図面の簡単な説明】
【００６１】
【図１】プレゼンテーションシステムの全体構成の概要を示したブロック図。
【図２】プロジェクタ１側において出力対象画像を光変換して投影画像として出力させた状態を示した図。
【図３】ＰＣ３の基本的構成要素を示したブロック図。
【図４】プレゼンテーションの開始指示に応答して実行開始されるＰＣ３の全体動作を示したフローチャート。
【図５】図４で示した撮影画像解析処理を詳述するためのフローチャート。
【図６】図４で示した撮影画像解析処理の終了後に実行開始される解析結果対応処理を詳述するためのフローチャート。
【図７】今回の照明位置が前回の照明位置の近傍であるか否かを判別するための判別方法を説明するための図。
【図８】発光ポイントの移動軌跡に応じて指定領域が特定される場合を例示した図。
【図９】発光軌跡を追随することによって特定された照明指示領域に対して各種の処理を施した後の投影画像で、(Ａ)は特定された照明指示領域を示し、(Ｂ)は照明指示領域内のデータを拡大した状態、(Ｃ)は照明指示領域のアウトラインを太線化した状態、(Ｄ)は照明指示領域に対応する関連情報を付加した状態を示した図。
【図１０】補足説明ファイル３２−１の内容を示した図。
【図１１】この実施例の変形応用例を説明するための図。
【符号の説明】
【００６２】
１ プロジェクタ
２ デジタルカメラ
３ ＰＣ
４ スクリーン
５ レーザ発光ペン
３１ ＣＰＵ
３２ 記憶部
３５ 通信Ｉ／Ｆ
３６ 入力装置
３７ 表示装置
３８ 音声出力部
３２−１ 補足説明ファイル
３３−１ 移動軌跡メモリ
【特許請求の範囲】
【請求項１】
出力対象画像を光変換して投影画像として出力するプロジェクタ機能付き画像処理装置において、
出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、
この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、
この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、
この領域特定手段によって特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す識別処理手段と、
この識別処理手段によって識別処理が施された後の出力対象画像を投影画像として出力する出力手段と、
を具備したことを特徴とするプロジェクタ機能付き画像処理装置。
【請求項２】
前記出力対象画像内の対応領域の画像部分を識別するために予め用意されている複数の識別種の中から任意の種類を選択指定する識別種選択手段を設け、
前記識別処理手段は、この識別種選択手段によって任意に選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理する、
ようにしたことを特徴とする請求項1のプロジェクタ機能付き画像処理装置。
【請求項３】
投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって前記選択指定された識別種を特定する、
ようにしたことを特徴とする請求項２のプロジェクタ機能付き画像処理装置。
【請求項４】
出力対象画像を光変換して投影画像として出力するプロジェクタ機能を備えた画像処理装置において、
出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、
この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、
この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、
この領域特定手段によって特定された出力対象画像内の対応領域に関する関連情報を取得する取得手段と、
この取得手段によって得られた関連情報を出力する出力手段と、
を具備したことを特徴とするプロジェクタ機能付き画像処理装置。
【請求項５】
前記指定手段は、発光体を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定する、
ようにしたことを特徴とする請求項1あるいは請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項６】
前記領域特定手段は、発光体を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定する、
ようにしたことを特徴とする請求項５記載のプロジェクタ機能付き画像処理装置。
【請求項７】
投影画像と共に処理メニューが投影されている状態において、この処理メニューの中から任意のメニュー項目が投影画像内で選択指定された際に、そのときの撮影画像を解析することによって前記選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行する、
ようにしたことを特徴とする請求項1あるいは請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項８】
前記出力手段は、出力対象画像内の対応領域に関する関連情報が音声情報であれば、この音声情報を合成出力する、
ようにしたことを特徴とする請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項９】
前記取得手段は、出力対象画像内の対応領域に関する関連情報を取得する際に、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換することによって対応領域に関する関連情報を取得し、
前記出力手段は、この取得手段によって得られた音声情報を合成出力する、
ようにしたことを特徴とする請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項１０】
前記出力手段は、出力対象画像内の対応領域に関する関連情報が登録画像であれば、この登録画像を投影画像として出力する、
ようにしたことを特徴とする請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項１１】
コンピュータに対して、
出力対象画像が光変換されて投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、
撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、
特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す機能と、
識別処理が施された後の出力対象画像を投影画像として出力する機能と、
を実現させるためのプログラム。
【請求項１２】
コンピュータに対して、
出力対象画像が光変換されて投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、
撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、
特定された出力対象画像内の対応領域に対応付けて予め登録されている関連情報を取得する機能と、
取得した関連情報を出力する機能と、
を実現させるためのプログラム。
【請求項１】
出力対象画像を光変換して投影画像として出力するプロジェクタ機能付き画像処理装置において、
出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、
この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、
この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、
この領域特定手段によって特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す識別処理手段と、
この識別処理手段によって識別処理が施された後の出力対象画像を投影画像として出力する出力手段と、
を具備したことを特徴とするプロジェクタ機能付き画像処理装置。
【請求項２】
前記出力対象画像内の対応領域の画像部分を識別するために予め用意されている複数の識別種の中から任意の種類を選択指定する識別種選択手段を設け、
前記識別処理手段は、この識別種選択手段によって任意に選択された識別種に基づいて出力対象画像内の対応領域の画像部分を識別処理する、
ようにしたことを特徴とする請求項1のプロジェクタ機能付き画像処理装置。
【請求項３】
投影画像と共に識別種メニューが投影されている状態において、この識別種メニューの中から任意の種類が投影画像内で選択指定された際に、このときの撮影画像を解析することによって前記選択指定された識別種を特定する、
ようにしたことを特徴とする請求項２のプロジェクタ機能付き画像処理装置。
【請求項４】
出力対象画像を光変換して投影画像として出力するプロジェクタ機能を備えた画像処理装置において、
出力対象画像が投影出力されている投影画像内の任意の領域を指定する領域指定手段と、
この領域指定手段によって領域指定されている状態において当該投影画像を撮影してデジタル変換する撮影手段と、
この撮影手段からの撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する領域特定手段と、
この領域特定手段によって特定された出力対象画像内の対応領域に関する関連情報を取得する取得手段と、
この取得手段によって得られた関連情報を出力する出力手段と、
を具備したことを特徴とするプロジェクタ機能付き画像処理装置。
【請求項５】
前記指定手段は、発光体を操作することによって投影画像内の任意の領域が照明された際に、この照明部分を領域指定する、
ようにしたことを特徴とする請求項1あるいは請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項６】
前記領域特定手段は、発光体を操作することによって投影画像内の任意の照明ポイントが移動される毎に、撮影画像を順次取り込みながらその照明位置の移動軌跡を追随検出し、この照明ポイントの移動軌跡によって指示された領域を撮影画像内の対応領域として特定する、
ようにしたことを特徴とする請求項５記載のプロジェクタ機能付き画像処理装置。
【請求項７】
投影画像と共に処理メニューが投影されている状態において、この処理メニューの中から任意のメニュー項目が投影画像内で選択指定された際に、そのときの撮影画像を解析することによって前記選択指定されたメニュー項目を特定すると共に、このメニュー項目に対応する処理を実行する、
ようにしたことを特徴とする請求項1あるいは請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項８】
前記出力手段は、出力対象画像内の対応領域に関する関連情報が音声情報であれば、この音声情報を合成出力する、
ようにしたことを特徴とする請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項９】
前記取得手段は、出力対象画像内の対応領域に関する関連情報を取得する際に、当該対応領域内に含まれている文字列を文字認識すると共に、この認識結果を音声情報に変換することによって対応領域に関する関連情報を取得し、
前記出力手段は、この取得手段によって得られた音声情報を合成出力する、
ようにしたことを特徴とする請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項１０】
前記出力手段は、出力対象画像内の対応領域に関する関連情報が登録画像であれば、この登録画像を投影画像として出力する、
ようにしたことを特徴とする請求項４記載のプロジェクタ機能付き画像処理装置。
【請求項１１】
コンピュータに対して、
出力対象画像が光変換されて投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、
撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、
特定された出力対象画像内の対応領域の画像部分を識別可能とするために当該画像部分に識別処理を施す機能と、
識別処理が施された後の出力対象画像を投影画像として出力する機能と、
を実現させるためのプログラム。
【請求項１２】
コンピュータに対して、
出力対象画像が光変換されて投影出力されている投影画像内の任意の領域が指定されている状態において、当該投影画像を撮影してデジタル変換する機能と、
撮影画像を解析することによって前記指定領域に対応する撮影画像内の対応領域を特定すると共に、この特定領域に対応する出力対象画像内の対応領域を特定する機能と、
特定された出力対象画像内の対応領域に対応付けて予め登録されている関連情報を取得する機能と、
取得した関連情報を出力する機能と、
を実現させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２００６−１８３７４（Ｐ２００６−１８３７４Ａ）
【公開日】平成１８年１月１９日（２００６．１．１９）
【国際特許分類】
【出願番号】特願２００４−１９２８９０（Ｐ２００４−１９２８９０）
【出願日】平成１６年６月３０日（２００４．６．３０）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【出願人】（３０００１５５２８）カシオソフト株式会社 (8)
【Ｆターム（参考）】
【公開日】平成１８年１月１９日（２００６．１．１９）
【国際特許分類】
【出願日】平成１６年６月３０日（２００４．６．３０）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【出願人】（３０００１５５２８）カシオソフト株式会社 (8)
【Ｆターム（参考）】
[ Back to top ]