画像供給装置、画像表示システム、画像供給装置の制御方法、画像表示装置、及び、プログラム
【課題】表示面への操作により入力が可能なＧＵＩの操作用グラフィックスを、操作の妨げにならないように適切に表示面に表示する。
【解決手段】プロジェクター１１に接続されたＰＣ１３は、原画像を取得してプロジェクター１１に出力するとともに、プロジェクター１１が検出したペン型デバイス１５の指示位置に応じて重畳画像を生成し、生成した重畳画像を原画像に重畳して第１の合成画像を生成してプロジェクター１１に出力し、原画像が変化した場合には、操作用画像を重畳して第２の合成画像を生成してプロジェクター１１に出力する。
【解決手段】プロジェクター１１に接続されたＰＣ１３は、原画像を取得してプロジェクター１１に出力するとともに、プロジェクター１１が検出したペン型デバイス１５の指示位置に応じて重畳画像を生成し、生成した重畳画像を原画像に重畳して第１の合成画像を生成してプロジェクター１１に出力し、原画像が変化した場合には、操作用画像を重畳して第２の合成画像を生成してプロジェクター１１に出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置に画像を出力する画像供給装置、画像表示システム、画像供給装置の制御方法、画像表示装置、及び、プログラムに関する。
【背景技術】
【０００２】
従来、表示面に対してタッチペン等の座標入力デバイスで操作を行うことにより、手書き入力を行うことが可能なシステムが知られている（例えば、特許文献１参照）。特許文献１記載のシステムのように、座標入力デバイスを用いて描画を行ったり、情報の処理を指示したりする場合、例えばメニュー画面のような操作用のグラフィックスを用いたグラフィカルユーザーインターフェイス（ＧＵＩ：Graphical User Interface）が採用される。特許文献１のシステムでは、表示画面に操作用のグラフィックであるメニュー画面が配置され、このメニュー画面を操作することによって手書き入力した情報を処理させることが可能となっている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１５７４４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、メニュー画面のような操作用のグラフィックスを表示すると、その表示位置においては描画等の操作を行えなくなるので、操作用のグラフィックスが不必要に表示されると操作性を損なうおそれがある。その一方で、操作用のグラフィックスが必要なときに表示されていないことも操作性を損なう要因となり得る。このため、必要な場合にＧＵＩの操作用グラフィックスを表示する一方、この操作用グラフィックスが操作の妨げにならないような制御方法が望まれていた。
本発明は、上述した事情に鑑みてなされたものであり、画像が表示された表示面への操作により位置入力が可能なＧＵＩの操作用グラフィックスを、操作の妨げにならないように適切に表示することを目的とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置であって、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段とを備えることを特徴とする。
本発明によれば、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【０００６】
また、本発明は、上記画像供給装置において、前記操作用画像は、前記描画手段が生成した前記重畳画像、または前記第１の画像生成手段が生成した第１の合成画像の消去処理及び保存処理のうち少なくとも一方を指示するボタンを含むことを特徴とする。
本発明によれば、表示面に対する操作によって生成された重畳画像、またはこの重畳画像を原画像に重畳した第１の合成画像の保存または消去を指示できる操作用画像が必要な場合に表示されるので、画像を消去する操作や画像を保存する操作を速やかに行える。
【０００７】
また、本発明は、上記画像供給装置システムにおいて、前記第２の画像生成手段は、前記操作検出装置により検出された指示位置をもとに、前記操作用画像の表示位置を決定することを特徴とする。
本発明によれば、操作用画像を操作位置に近づけて表示し、利便性の向上を図ることや、操作の妨げにならないように操作位置から離れた場所に表示することができ、操作性の向上を図ることができる。
【０００８】
また、上記課題を解決するため、本発明は、画像を出力する画像供給装置と、前記画像供給装置が出力する画像を表示面に表示する画像表示装置と、前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とを有し、前記画像供給装置は、原画像を取得して前記画像表示装置に出力する出力手段と、前記操作検出装置が検出した指示位置に基づいて、前記原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段とを備えることを特徴とする。
本発明によれば、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【０００９】
また、本発明は、上記画像表示システムにおいて、前記表示面に対する位置指示操作と、位置指示操作以外の特定の操作とが可能な操作用デバイスを備え、前記操作検出装置は、前記操作用デバイスの位置指示操作により指示された位置を検出する一方、前記操作用デバイスによる前記特定の操作を検出し、前記画像供給装置の前記第２の画像生成手段は、前記操作検出装置が前記操作用デバイスによる特定の操作を検出した場合に、前記操作用画像を表示させることを特徴とする。
本発明によれば、操作用デバイスの特定の操作によって、操作用画像を表示させることができるので、表示画像の変化により表示する機能に加え、操作者が必要な場合に意図して操作用画像を呼び出すことができる。これにより、操作者の意図を反映して操作性のより一層の向上を図ることができる。
また、上記画像表示システムにおいて、前記画像表示装置が前記操作検出装置を備える構成としてもよく、この場合、画像表示装置によって表示面に対する操作を検出することで、表示面近傍の装置の数を減らして設置性を向上させることができ、また、より正確に操作を検出できる。
【００１０】
また、上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置であって、前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を表示する表示手段とを備えることを特徴とする。
本発明によれば、画像表示装置が表示面に対する操作に応じて重畳画像を生成し、この重畳画像をもとの表示画像に重畳して表示し、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像を表示する。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【００１１】
また、上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置の制御方法であって、表示用の画像を取得して前記画像表示装置に出力するとともに、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成し、生成した前記重畳画像を前記原画像に重畳して第１の合成画像を生成して、前記画像表示装置に出力し、前記原画像が変化した場合には、生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成し、この第２の合成画像を前記画像表示装置に出力することを特徴とする。
本発明の制御方法を実行することにより、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【００１２】
また、上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられるコンピューターが実行可能なプログラムであって、前記コンピューターを、原画像を取得して前記画像表示装置に出力する出力手段と、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段として機能させることを特徴とするプログラムである。
本発明のプログラムをコンピューターにより実行することで、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【００１３】
また、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられるコンピューターコンピューターにより読み取り可能な記録媒体であって、上記記録媒体に、前記コンピューターを、原画像を取得して前記画像表示装置に出力する出力手段と、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段として機能させるプログラムを、前記コンピューターによって読み取り可能に記録してもよい。
【発明の効果】
【００１４】
本発明によれば、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示するための操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施形態に係る表示システムの構成を示す図である。
【図２】ペン型デバイスによるスクリーンへの操作の態様を示す図である。
【図３】表示システムの機能的構成を示すブロック図である。
【図４】スクリーンにメニューバーを表示する様子を示す図であり、（Ａ）はメニューバーが表示されていない例を示し、（Ｂ）は表示用画像が切り替えられた例を示し、図４（Ｃ）はメニューバーが表示された例を示す。
【図５】操作用グラフィックスの構成例を示す図である。
【図６】操作用グラフィックスの表示態様の別の例を示す図である。
【図７】表示システムの動作を示すフローチャートである。
【発明を実施するための形態】
【００１６】
以下、図面を参照して本発明を適用した実施形態について説明する。
図１は、実施形態に係る表示システム１０の構成を示す図である。
表示システム１０（画像表示システム）は、スクリーンＳＣに画像を投射するプロジェクター１１と、このプロジェクター１１に対して画像を送信するＰＣ（Personal Computer）１３とを備えて構成される。プロジェクター１１とＰＣ１３とは通信ネットワーク１２を介して相互に通信可能に接続され、また、通信ネットワーク１２には複数台のＰＣ１３が接続されている。各ＰＣ１３は、それぞれプロジェクター１１を制御するプロジェクター制御プログラム１３Ａを実行可能であり、個別にプロジェクター１１を制御することが可能であるが、プロジェクター１１を同時に制御可能なＰＣ１３は１台である。このため、各ＰＣ１３は、他のＰＣ１３がプロジェクター１１を制御していない状態で、プロジェクター１１の制御を開始できる。
通信ネットワーク１２は、例えばEthernet（登録商標）規格に準拠して構成されたＬＡＮであるが、その一部を公衆回線網や専用線で構成して遠隔地のＰＣ１３を接続してもよく、通信ネットワーク１２の具体的構成は任意である。また、表示システム１０が備えるＰＣ１３の数に制限はない。各ＰＣ１３は同様の構成となっているため、図１には１台のＰＣ１３について機能ブロックを図示する。
【００１７】
プロジェクター１１は、画像表示装置として機能し、スクリーンＳＣに対してＰＣ１３から入力される表示用画像２０１を投射する。また、プロジェクター１１は操作検出装置として機能し、スクリーンＳＣ上でペン型デバイス１５が操作された場合に、このペン型デバイス１５の操作位置を検出して、検出した位置をＰＣ１３に送信する。表示システム１０では、スクリーンＳＣでペン型デバイス１５を操作すると、このペン型デバイス１５の操作に追従して描画画像２１１を描画して、投射中の表示用画像２０１に重ねて描画画像２１１をスクリーンＳＣに投射する機能を有する。これにより、表示用画像２０１に重ねて絵を描いたり、表示用画像２０１を用いたプレゼンテーションの実行中に、表示用画像２０１に文字や記号等を書き込んだりすることができる。また、ペン型デバイス１５はスイッチ１５Ａを備えており、プロジェクター１１はスイッチ１５Ａの操作を検出して後述するメニューバー２２１（図４（Ｂ））を表示する。
【００１８】
図２は、ペン型デバイス１５によるスクリーンＳＣへの操作態様を示す図である。
この図２に示す例では、プロジェクター１１は、画像を投射するための開口部（図示略）が設けられた天面部２Ａを下方に向けた状態で使用されるものであり、スクリーンＳＣが形成される壁面に取り付けられたアーム１４に、天面部２Ａとは反対側の底面部２Ｂが固定されて使用される。底面部２Ｂには、アーム１４に連結される金具類を取り付け可能な取付部が適所に複数設けられ、ＰＣ１３等の外部の装置に繋がる通信ケーブルやプロジェクター１１の電源ケーブル等が接続されるケーブル接続部（図示略）が設けられる。これらのケーブルはアーム１４内を挿通し、表示システム１０が設置された室の天井や壁面内部に配線される。また、スクリーンＳＣは壁面に固定された平板に限らず、壁面自体をスクリーンＳＣとして使用することも可能である。
【００１９】
プロジェクター１１の外装筐体２には、図２の設置状態においてスクリーンＳＣ側を向く傾斜面２１Ａが形成され、この傾斜面２１Ａから後述する投射光学系３３（図３）が投射光をスクリーンＳＣに向けて投射する。このため図２に示すように、スクリーンＳＣには、斜め上方から投射光が当たって画像が投射される。
ここで、ペン型デバイス１５を操作する操作者はスクリーンＳＣの前に立ち、ペン型デバイス１５をスクリーンＳＣ上で移動させ、或いはペン型デバイス１５でスクリーンＳＣ上の位置を指し示す操作を行う。ペン型デバイス１５は、赤外光を放射する発光部（図示略）を備えており、プロジェクター１１は、ペン型デバイス１５が発する赤外光を受光して、スクリーンＳＣにおけるペン型デバイス１５の位置を検出する機能を有する。具体的には、ペン型デバイス１５は、その側面に赤外ＬＥＤを内蔵した発光窓を備え、この発光窓から赤外光を発する構成を有し、プロジェクター１１は、赤外光を検出する赤外光撮像部を傾斜面２１Ａに設けて、傾斜面２１ＡからスクリーンＳＣを撮影する。この構成により、スクリーンＳＣ上におけるペン型デバイス１５の位置をプロジェクター１１によって検出できる。
また、プロジェクター１１は、ペン型デバイス１５の使用開始に先だって、予め用意された調整用の画像をスクリーンＳＣに投射し、この調整用の画像上の点をペン型デバイス１５によって順次指し示す操作を行わせて、検出位置のキャリブレーションを行う。
【００２０】
さらに、ペン型デバイス１５の側面には押圧操作可能なスイッチ１５Ａが設けられ、操作者がスイッチ１５Ａを押下すると、ペン型デバイス１５の発光部からスイッチ１５Ａの操作を示す赤外線信号が送信される。この赤外線信号をプロジェクター１１が受光し、デコードすることにより、ペン型デバイス１５が指示する位置と、その位置におけるスイッチ１５Ａの操作とをプロジェクター１１が検出できる。プロジェクター１１は、検出した位置と、スイッチ１５Ａの操作の有無を示す情報とをＰＣ１３に送信する。
ＰＣ１３は、プロジェクター１１から受信した位置情報に基づき、この位置に投射画像に重ねて描画を行って新たな投射画像を作成する等の処理を行って、位置入力操作の内容を投射画像に反映させる。
【００２１】
また、ＰＣ１３は、図１に示すように、基本制御プログラムを実行してＰＣ１３の各部を制御するとともに、各種アプリケーションプログラムを実行して、画像供給装置としての機能を実現するＣＰＵ１３１、ＣＰＵ１３１が実行する基本制御プログラム等を不揮発的に記憶するＲＯＭ１３２、ＣＰＵ１３１が実行するプログラムやＣＰＵ１３１が処理するデータ等を一時的に記憶するＲＡＭ１３３、ＣＰＵ１３１が実行するアプリケーションプログラム及び当該アプリケーションプログラムの機能により処理するデータを記憶する記憶部１３４、キーボードやマウス等の入力デバイスによる入力操作を検出して操作内容を示すデータをＣＰＵ１３１に出力する入力部１３５、ＣＰＵ１３１による処理結果等をディスプレイやプリンター等の出力デバイスに出力する出力部１３６、及び、通信ネットワーク１２を介して他のＰＣ１３やプロジェクター１１との間で通信を実行する通信Ｉ／Ｆ１３７を備えている。
【００２２】
記憶部１３４は、プロジェクター１１を制御して、プロジェクター１１に画像を投射させるとともに、ペン型デバイス１５による操作に対応した処理を行うためのアプリケーションプログラムであるプロジェクター制御プログラム１３Ａを記憶している。また、記憶部１３４は、プロジェクター１１によって投射される表示画像データ１３Ｂを記憶している。表示画像データ１３Ｂは、静止画像データ、動画像データ、複数の静止画像を含むプレゼンテーションファイル等の統合データを含み、特定のアプリケーションプログラムにより再生可能なファイルを含む。ＰＣ１３は、表示画像データ１３Ｂを用いて出力部１３６によってディスプレイに画像を表示させるとともに、この表示される画像と同じ画像をプロジェクター１１に送信することができ、また、表示画像データ１３Ｂを再生してプロジェクター１１に対してのみ画像を送信することもできる。
【００２３】
図３は、表示システム１０の機能的構成を示すブロック図である。
プロジェクター１１は、ＰＣ１３やビデオ再生装置、ＤＶＤ再生装置等の外部の装置に接続される外部Ｉ／Ｆ（インターフェイス）部１０１を備えている。例えば、外部Ｉ／Ｆ部１０１は、ＵＳＢインターフェイス、有線または無線ＬＡＮインターフェイス、アナログ映像信号が入力されるＶＧＡ端子、デジタル映像信号が入力されるＤＶＩ（Digital Visual Interface）、ＮＴＳＣ、ＰＡＬ、ＳＥＣＡＭ等のコンポジット映像信号が入力されるＳ映像端子、コンポジット映像信号が入力されるＲＣＡ端子、コンポーネント映像信号が入力されるＤ端子、ＨＤＭＩ（登録商標）規格に準拠したＨＤＭＩコネクター等を備えている。本実施形態のプロジェクター１１は、外部Ｉ／Ｆ部１０１のＬＡＮインターフェイスを介して通信ネットワーク１２に接続される。
【００２４】
プロジェクター１１は、大きく分けて光学的な画像の形成を行う光学系と映像信号を電気的に処理する画像処理系とからなる。光学系としての投射部３（表示手段）は、照明光学系３１、光変調装置である液晶パネル３２、及び投射光学系３３から構成されている。照明光学系３１は、キセノンランプ、超高圧水銀ランプ、ＬＥＤ（Light Emitting Diode）等からなる光源を備えている。また、照明光学系３１は、光源が発した光を液晶パネル３２に導くリフレクター及び補助リフレクターを備えていてもよく、投射光の光学特性を高めるためのレンズ群（図示略）、偏光板、或いは光源が発した光の光量を液晶パネル３２に至る経路上で低減させる調光素子等を備えたものであってもよい。
液晶パネル３２は、後述する画像処理系からの信号を受けて、パネル面に画像を形成する。液晶パネル３２は、カラーの投影を行うため、ＲＧＢの三原色に対応した３枚の液晶パネルからなる。そのため、照明光学系３１からの光はＲＧＢの３色の色光に分離され、各色光は対応する各液晶パネルに入射する。各液晶パネルを通過して変調された色光はクロスダイクロイックプリズム等の合成光学系によって合成され、投射光学系３３に射出される。
【００２５】
投射光学系３３は、投射する画像の拡大・縮小および焦点の調整を行うズームレンズ、ズームの度合いを調整するズーム調整用モーター、フォーカスの調整を行うフォーカス調整用モーター、投射光をスクリーンＳＣに向ける凹面鏡等を備えている。投射光学系３３は、液晶パネル３２で変調された入射光を、ズームレンズを通してズーム調整及びフォーカス調整し、このズームレンズを通った光を凹面鏡によりスクリーンＳＣ方向へ導き、スクリーンＳＣ上に結像させる。この光学系には、制御部１０３の制御に従って投射光学系３３が備える各モーターを駆動する投射光学系駆動部１２１、及び、制御部１０３の制御に従って照明光学系３１が備える光源を駆動する光源駆動部１１７が接続されている。なお、投射光学系３３の具体的構成は上記の例に限定されず、例えば凹面鏡を含むミラーを用いない構成により、液晶パネル３２で変調された光をレンズによってスクリーンＳＣに投射し、結像させることも可能である。
【００２６】
一方、画像処理系は、プロジェクター１１全体を統合的に制御する制御部１０３を中心に構成され、制御部１０３が処理するデータや制御部１０３が実行するプログラムを記憶した記憶部１０５、操作パネル２３及びリモコン受光部４１を介した操作を検出する入力処理部１２３、外部Ｉ／Ｆ部１０１を介して入力された入力映像を処理する表示制御部１０７、フレームメモリー１１５を備えた画像処理部１１３、表示制御部１０７から出力される映像信号に基づいて液晶パネル３２を駆動して描画を行う光変調装置駆動部１１９を備えている。
【００２７】
制御部１０３は、記憶部１０５に記憶された制御プログラム１０５Ａを読み出して実行することにより、プロジェクター１１の各部を制御する。制御部１０３は、入力処理部１２３から入力される操作信号に基づいて、操作者が行った操作の内容を検出し、この操作に応じて表示制御部１０７、投射光学系駆動部１２１及び光源駆動部１１７を制御して、スクリーンＳＣに映像を投射させる。
【００２８】
プロジェクター１１の外装筐体２には、各種スイッチ及びインジケーターランプを備えた操作パネル２３が配置されている。操作パネル２３は入力処理部１２３に接続されており、入力処理部１２３は、制御部１０３の制御に従い、プロジェクター１１の動作状態や設定状態に応じて操作パネル２３のインジケーターランプを適宜点灯或いは点滅させる。この操作パネル２３のスイッチが操作されると、操作されたスイッチに対応する操作信号が入力処理部１２３から制御部１０３に出力される。
また、プロジェクター１１は、操作者が使用するリモコン（図示略）がボタン操作に対応して送信した赤外線信号を、リモコン受光部４１によって受光する。リモコン受光部４１は、上記リモコンから受光した赤外線信号をデコードして、上記リモコンにおける操作内容を示す操作信号を生成し、制御部１０３に出力する。
【００２９】
外部Ｉ／Ｆ部１０１には表示制御部１０７が接続される。表示制御部１０７に接続された画像処理部１１３は、表示制御部１０７に外部Ｉ／Ｆ部１０１を介して入力される入力映像をフレームメモリー１１５に展開し、アナログ／デジタル変換、インターレース／プログレッシブ変換、解像度変換等の各種変換処理を適宜実行し、予め設定されたフォーマットの映像信号を生成して表示制御部１０７に出力する。表示制御部１０７は、画像処理部１１３により処理された映像信号を光変調装置駆動部１１９に出力し、液晶パネル３２に表示させる。
【００３０】
また、プロジェクター１１は、上述したようにペン型デバイス１５が発する赤外光を検出する赤外線受光部４２を備えている。赤外線受光部４２は、具体的にはスクリーンＳＣの赤外光を撮影する撮像素子と、この撮像素子によって取得された撮影画像データを出力する撮影回路とを備えて構成される。赤外線受光部４２は、制御部１０３の制御に従ってスクリーンＳＣを所定の周期で撮影し、撮影画像データを制御部１０３に出力する。
制御部１０３は、記憶部１０５に記憶された制御プログラム１０５Ａを実行することにより、操作検出部１０２として機能する。この操作検出部１０２の機能により、プロジェクター１１は操作検出装置として動作する。制御部１０３は、操作検出部１０２の機能によって、赤外線受光部４２から入力される撮影画像データに基づいてスクリーンＳＣ上におけるペン型デバイス１５の指示位置を特定する。例えば、スクリーンＳＣ上に仮想Ｘ−Ｙ直交座標が設定され、操作検出部１０２は、赤外線受光部４２から入力されるデータに基づいて、指示位置のＸ座標とＹ座標とを求める処理を行う。また、赤外線受光部４２は、ペン型デバイス１５がスイッチ１５Ａの操作時に発する赤外線信号を受信した場合に、対応する操作データを操作検出部１０２に出力する。操作検出部１０２は、赤外線受光部４２から入力されるデータに基づいてスイッチ１５Ａの操作を検出する。操作検出部１０２は、ペン型デバイス１５の指示位置とスイッチ１５Ａの操作状態とを示すデータを、外部Ｉ／Ｆ部１０１を介してＰＣ１３へ送信する。ここで送信先となるＰＣ１３は、現在プロジェクター制御プログラム１３Ａを実行してプロジェクター１１を制御しているＰＣ１３である。
【００３１】
ＰＣ１３は、図１に示すＣＰＵ１３１によってプロジェクター制御プログラム１３Ａを実行することにより、画像出力部５１（出力手段）、出力画像生成部５２（第１の画像生成手段）、重畳画像生成部５３（描画手段）、及びＧＵＩ制御部５４（第２の画像生成手段）としての機能を実現する。
ＰＣ１３は、画像出力部５１の機能により、記憶部１３４に記憶された表示画像データ１３Ｂを再生して画像をプロジェクター１１に送信する。また、ＰＣ１３は、重畳画像生成部５３の機能によって、プロジェクター１１から通信Ｉ／Ｆ１３７により受信したデータに基づいて、ペン型デバイス１５の指示位置を検出し、検出した位置の軌跡に沿って線や図形を描画する。すなわち、線や図形の画像を生成し、この生成した画像（重畳画像）を重畳画像生成部５３に出力する。重畳画像生成部５３は、現在出力中の画像（例えば、表示画像データ１３Ｂを再生した画像）に、出力画像生成部５２が生成した重畳画像を重畳して画像を合成し、新たな表示用の画像を生成する。そして、出力画像生成部５２は、生成した新たな表示用の画像を画像出力部５１によってプロジェクター１１へ送信させる。
【００３２】
さらに、ＰＣ１３は、ＧＵＩ制御部５４の機能により、スクリーンＳＣに後述するメニューバー２２１（図４（Ｂ））を表示させる制御を行う。ＧＵＩ制御部５４は、メニューバー２２１の画像を記憶部１３４から読み出して、重畳画像生成部５３に出力し、重畳画像を生成して出力画像生成部５２に出力する際に、メニューバー２２１の画像も合わせて重畳するよう制御を行い、メニューバー２２１の画像を出力画像生成部５２へ出力する。出力画像生成部５２は、出力中の画像に、重畳画像生成部５３が生成した重畳画像と、ＧＵＩ制御部５４が取得したメニューバー２２１の画像とを重ねることで新たな表示用の画像を生成し、この画像を画像出力部５１によって送信させる。
【００３３】
本実施形態のＰＣ１３は、プロジェクター１１に表示させる画像が変化した場合に、ＧＵＩ制御部５４によりメニューバー２２１を表示させる。画像が変化した場合とは、例えば、複数枚のスライドからなるファイルを再生している間に、表示されるスライドが切り替わった場合を指す。ＰＣ１３は、画像出力部５１によりプロジェクター１１に送信している画像を所定時間毎に比較して前後の画像の差分を求め、この差分が予め設定されたしきい値を越える場合に、画像が変化したと判定する。ＰＣ１３は、静止画像であっても動画像であっても、所定のフレームレートでフレーム毎に画像を送信するので、静止画像であっても同一画像のフレームを連続して送信することになる。そこで、プロジェクター１１にフレームを送信する毎に、その前に送信したフレームとの差分を求めれば、速やかに画像の変化を検出できる。なお、差分を求める処理の負荷を軽減するため、比較の頻度を複数フレーム毎にしてもよい。
【００３４】
図４は、スクリーンＳＣにメニューバー２２１を表示する様子を示す説明図であり、図４（Ａ）はメニューバー２２１が表示されていない例を示し、図４（Ｂ）は表示用画像が切り替えられた例を示し、図４（Ｃ）はメニューバー２２１が表示された例を示す。
図４（Ａ）の例ではスクリーンＳＣに教育用のスライドが表示用画像２０１として表示されており、ペン型デバイス１５の軌跡に沿って描画画像２１１が表示されている。描画画像２１１は、操作検出部１０２が検出したペン型デバイス１５の位置の軌跡をたどって重畳画像生成部５３が生成した重畳画像である。
【００３５】
ここで、スクリーンＳＣに投射されている表示用画像２０１が、操作パネル２３またはリモコンの操作によって図４（Ｂ）に示す表示用画像２０２に切り替えられると、表示用画像２０１と表示用画像２０２との差分がしきい値を越える。例えば、図４（Ｂ）に示す表示用画像２０２には、図４（Ａ）に示す表示用画像２０１には無い線が現れている。表示用画像２０１は教育用の問題であり、表示用画像２０２は、教育用の表示用画像２０１の続きとして、正解が明記された画像となっている。表示用画像２０２で新たに現れた線、すなわち相違部分は問題の解答である。この表示用画像２０２と表示用画像２０１との差がしきい値を超えたことにより、スクリーンＳＣに投射中の表示用画像２０２に重ねて、図４（Ｃ）に示すようにメニューバー２２１が表示される。
ここで、表示用画像２０１は原画像に相当し、図４（Ａ）及び（Ｂ）で表示用画像２０１に描画された描画画像２１１が重畳された画像は第１の合成画像に相当し、図４（Ｃ）でメニューバー２２１が重畳表示された画像は第２の合成画像に相当する。
【００３６】
メニューバー２２１は特定の機能が割り当てられたボタンが複数配置された操作用グラフィックス（操作用画像）であり、ペン型デバイス１５によりメニューバー２２１の各ボタンを指定する操作を行うと、操作されたボタンに対応する処理をＰＣ１３が実行する。ＰＣ１３は、ＧＵＩ制御部５４の機能によって、プロジェクター１１にメニューバー２２１を表示させる。このため、ＧＵＩ制御部５４の機能によって、メニューバー２２１の表示位置、サイズ、配置されたボタンの種類等のデータを保持しており、ペン型デバイス１５の操作位置に対応するボタンを特定し、このボタンに対応する動作をＣＰＵ１３１により実行できる。
【００３７】
図５は操作用グラフィックスの一態様としてのメニューバー２２１の構成例を示す図である。
この図５に示す例では、メニューバー２２１には描画ボタン２３１、描画設定ボタン２３２、消しゴムボタン２３３、ＵＮＤＯ／ＲＥＤＯボタン２３４、選択開始ボタン２３５、全消去ボタン２４１及び画面キャプチャーボタン２４２の各ボタンが配置されている。描画ボタン２３１及び描画設定ボタン２３２は、ペン型デバイス１５の操作によって描画をする場合の線の太さや線の色、線の端の形状等を設定するボタンである。消しゴムボタン２３３は、ペン型デバイス１５の操作により既に描画された線や記号等のうち指定した位置を消去する、いわゆる消しゴム機能の開始を指示するボタンである。ＵＮＤＯ／ＲＥＤＯボタン２３４は、直前に実行した動作の取り消しと、動作の再実行を指示するボタンである。選択開始ボタン２３５は、ペン型デバイス１５の操作により既に描画された線や記号等の一部または全部を選択する動作の開始を指示するボタンであり、拡大ボタン２３６はペン型デバイス１５の操作により既に描画された線や記号等の一部または全部の拡大表示を指示するボタンである。
【００３８】
また、全消去ボタン２４１は、ペン型デバイス１５の操作により既に描画された線や記号等の全部の消去を指示するボタンであり、画面キャプチャーボタン２４２はペン型デバイス１５の操作により既に描画された線や記号等の保存を指示するボタンである。画面キャプチャーボタン２４２の操作により、スクリーンＳＣ上の描画画像２１１が、背景としてスクリーンＳＣに投射されている表示用画像２０１，２０２ごとキャプチャーされ、一つの画像としてＰＣ１３の記憶部１３４に保存される。
ここで、ＰＣ１３は、描画画像２１１のみを画像として保存してもよいし、描画画像２１１と表示用画像２０１，２０２を区別可能なデータ形式で保存してもよい。また、キャプチャキャプチャーされたデータは、再びプロジェクター１１によって表示用画像２０１，２０２とともに描画画像２１１を投射できるように記憶部１３４に記憶される。
【００３９】
このように、メニューバー２２１は、ペン型デバイス１５の操作により描画された重畳画像としての描画画像２１１の処理を指示するボタンが集約された操作用グラフィックスである。図４（Ａ）及び（Ｂ）に示すように、表示用画像２０１から表示用画像２０２に画像が変化した場合、ペン型デバイス１５を操作する操作者は、既に描画した描画画像２１１を消したり、消した上で描き直したりすることが考えられる。この場合、描画画像２１１を保存し、消去し、再び描画可能な状態にするため、操作者はメニューバー２２１を表示させる必要が生じる。このため、表示用画像が変化したタイミングでメニューバー２２１を表示させることで、利便性が高まるという利点がある。また、表示用画像が変化していない間は描画画像２１１を処理する可能性が高くないので、メニューバー２２１を表示することで描画の妨げになる可能性がある。このため、表示用画像が変化した場合にメニューバー２２１を表示することで、通常時は邪魔にならず、必要なときにメニューバー２２１が現れる。このため、より一層の利便性の向上を図ることができる。
【００４０】
メニューバー２２１は、ペン型デバイス１５の操作による描画操作に係る多数の機能、或いはＰＣ１３の制御により実行可能な全ての機能の操作ボタンが配置された操作用グラフィックスである。すなわち、ペン型デバイス１５の操作によって、描画を行い、描画した内容の編集、消去及び保存に係る、ＰＣ１３が実行可能な全て或いは多数の処理を指示するための操作用グラフィックスである。これに対し、ペン型デバイス１５の操作によりＰＣ１３が実行可能な描画に係る処理の一部のみについて、当該処理を指示する操作用グラフィックスを表示する構成としてもよい。
【００４１】
図６は、操作用グラフィックスの一態様としてのメニューバー２２１の別の例を示す図である。
この図６の例では、複数のボタンを有するメニューバー２２１とは異なり、画面キャプチャーボタンのみが配置されたメニュー画像２２３や、全消去ボタンのみが配置されたメニュー画像２２５が表示される。これらメニュー画像２２３，２２５により指示される処理は、ＰＣ１３が実行可能な描画に係る処理のうち一部のみであり、特に実行頻度が高い処理である画面キャプチャー（保存）、全消去（消去）を指示するボタンである。換言すれば、メニュー画像２２３及び２２５は、メニューバー２２１が対応している複数の機能のうち、一部の機能にそれぞれ対応する操作用グラフィックスである。また、メニュー画像２２３，２２５は、ＰＣ１３が実行可能な処理のうち、描画領域であるスクリーンＳＣの投射領域全体に対する処理を指示する操作用グラフィックスということもできる。さらには、ペン型デバイス１５の操作により描画を行った後で、次の表示用画像に切り替えて、新たに描画を開始する場合には、いったん描画された状態の投射領域全体を保存する画面キャプチャーを実行し、次いで全消去により描画内容を全て消去する動作が行われる。この観点から、メニュー画像２２３，２２５は、描画を終了して新たに描画を開始する際に必要な処理（機能）を指示するための操作用グラフィックスということができる。
【００４２】
これらメニュー画像２２３，２２５はボタンが一つであるためペン型デバイス１５の操作の妨げにならないという利点がある。ＧＵＩ制御部５４（図３）は、スクリーンＳＣに表示される表示用画像の変化がしきい値を越えた場合に、メニュー画像２２３，２２５のみを表示用画像及び重畳画像に重畳させて表示させてもよい。
また、ＧＵＩ制御部５４がメニューバー２２１を表示させる位置は任意であるが、図６に示すようにスクリーンＳＣ上右端の初期位置（規定の位置）としてもよいし、ペン型デバイス１５の近くに表示してもよい。しかしながら、上記のようにペン型デバイス１５の操作の妨げにならないことを考慮すると、ペン型デバイス１５の近くに表示するのはメニュー画像２２３、２２５のような小型の操作用グラフィックスにすると良い。この場合に、メニュー画像２２３、２２５とメニューバー２２１とを組み合わせて、図６のように同時に表示しても良い。また、メニューバー２２１は表示させず、メニュー画像２２３及び２２５の少なくとも一方を表示しても良い。さらに、図６においてメニュー画像２２３及び２２５はそれぞれ１つの機能にのみ対応しているが、メニュー画像２２３及び２２５は２以上の機能に対応するものであっても良い。
【００４３】
図７は、表示システム１０の動作を示すフローチャートであり、特に、ＰＣ１３の動作を示す。
まず、プロジェクター１１におけるリモコン装置や操作パネル２３の操作、或いはＰＣ１３の入力部１３５が検出した操作によって、位置入力モードの開始が指示されると、ＣＰＵ１３１はプロジェクター制御プログラム１３Ａを実行して位置入力モードの動作を開始する（ステップＳ１１）。
続いて、ＣＰＵ１３１はキャリブレーションを実行する（ステップＳ１２）。このキャリブレーションでは、プロジェクター１１にキャリブレーション用の画像を送信し、或いは、プロジェクター１１が記憶部１０５からキャリブレーション用の画像を読み出して投射する。このキャリブレーション用の画像に対するペン型デバイス１５の操作を検出し、検出した位置とキャリブレーション用のデータとを対比することでキャリブレーションが行われる。
【００４４】
その後、ＣＰＵ１３１は記憶部１３４から表示画像データ１３Ｂを取得して（ステップＳ１３）、この表示画像データ１３Ｂを再生して、画像出力部５１による表示用画像の送信（出力）を開始する（ステップＳ１４）。また、ＣＰＵ１３１は、表示用画像の送信開始とともに、画像出力部５１が取得してプロジェクター１１に送信する画像の変化（フレーム間の差分）の検出を開始する（ステップＳ１５）。
ＣＰＵ１３１は、プロジェクター１１が送信するデータに基づいてペン型デバイス１５の指示位置を取得し（ステップＳ１６）、取得した位置の軌跡に沿うように重畳画像生成部５３の機能によって描画画像を生成する（ステップＳ１７）。そして、出力画像生成部５２の機能により描画画像を表示用の画像に重畳して新たな表示用の画像を生成して、画像出力部５１によってプロジェクター１１に送信する（ステップＳ１８）。これにより、プロジェクター１１がスクリーンＳＣに投射する画像が更新される。
【００４５】
ＣＰＵ１３１は、画像出力部５１が取得した画像に、しきい値を越える変化があったか否かを判別し（ステップＳ１９）、変化があった場合にはＧＵＩ制御部５４によってメニューバー２２１を表示する表示用の画像を生成して、画像出力部５１によって１１に出力し、スクリーンＳＣに投射させる（ステップＳ２０）。
また、画像に変化がないと判別した場合であっても（ステップＳ１９；Ｎｏ）、プロジェクター１１からスイッチ１５Ａの操作を示すデータを受信した場合（ステップＳ２１；Ｙｅｓ）には、ステップＳ２０に移行してメニューバーを含む画像を投射させる。メニューバーを含む画像を表示させた後、ＣＰＵ１３１は、位置入力モードを継続するか終了するかを判別し（ステップＳ２２）、継続する場合（ステップＳ２２；Ｎｏ）にはステップＳ１６に戻る。また、画像に変化がなく（ステップＳ１９；Ｎｏ）、スイッチ１５Ａの操作も無い場合（ステップＳ２１；Ｎｏ）、ＣＰＵ１３１はステップＳ２２に移行する。
【００４６】
以上のように、本発明を適用した実施形態に係る表示システム１０は、画像を出力するＰＣ１３と、ＰＣ１３が出力する画像をスクリーンＳＣに投射する画像表示装置としての機能とスクリーンＳＣにおける位置指示操作に応じて指示位置を検出する操作検出部１０２とを有するプロジェクター１１とを備え、ＰＣ１３は、表示用の画像を取得してプロジェクター１１に出力する画像出力部５１と、操作検出部１０２が検出した指示位置に基づいて、表示用の画像に重畳表示する重畳画像を生成する重畳画像生成部５３と、重畳画像生成部５３により生成された重畳画像を表示用の画像に重畳して新たに表示用の画像を生成し、画像出力部５１によって出力させる出力画像生成部５２と、出力画像生成部５２が重畳する前の画像が変化した場合に、重畳画像生成部５３が生成した重畳画像の処理を指示するための操作用グラフィックスを、出力画像生成部５２が生成した新たな表示用の画像に重畳し、この重畳した画像を画像出力部５１によって出力させるＧＵＩ制御部５４とを備えるので、スクリーンＳＣに対する操作に応じて描画画像２１１等の重畳画像が生成され、この重畳画像がもとの表示画像である表示用画像２０１，２０２に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用グラフィックスが表示される。これにより、ペン型デバイス１５の操作に応じて重畳画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用グラフィックスを、画像を生成する操作の妨げにならないように、必要な場合に表示できる。すなわち、ペン型デバイス１５を操作する操作者が、描画した重畳画像の処理を必要とする場合に、操作グラフィックスを表示させるので、不要な操作グラフィックスの表示によって操作を妨げることが無く、利便性の向上を図ることができる。
【００４７】
また、表示システム１０は、スクリーンＳＣに対する位置指示操作と、位置指示操作以外にスイッチ１５Ａの押圧操作が可能なペン型デバイス１５を備え、操作検出部１０２は、ペン型デバイス１５の位置指示操作により指示された位置を検出する一方、スイッチ１５Ａの操作を検出し、ＰＣ１３のＧＵＩ制御部５４は、操作検出部１０２がスイッチ１５Ａの操作を検出した場合に、操作用グラフィックスを表示させる。このため、操作用グラフィックスを表示する機能に加え、操作者が必要な場合に意図してスイッチ１５Ａを操作することで、操作用グラフィックスを呼び出すことができる。これにより、操作者の意図を反映して操作性のより一層の向上を図ることができる。
また、プロジェクター１１が操作検出部１０２を備え、スクリーンＳＣに対する操作を検出する構成としたので、スクリーンＳＣ近傍の装置の数を減らして設置性を向上させることができ、また、より正確に操作を検出できる。
【００４８】
また、ＰＣ１３は、重畳画像生成部５３が生成した重畳画像の消去処理及び保存処理のうち少なくとも一方を指示するボタンを含むメニューバー２２１、メニュー画像２２３或いはメニュー画像２２５を操作用グラフィックスとして投射させる。このため、画像を消去する操作や画像を保存する操作を速やかに行える。
ＰＣ１３はＧＵＩ制御部５４の機能により、ペン型デバイス１５の指示位置をもとに操作用グラフィックスの表示位置を決定するので、操作用グラフィックスをペン型デバイス１５の操作位置に近づけて表示して利便性の向上を図ることができ、また、操作の妨げにならないように操作位置から離れた場所に表示することもでき、操作性の向上を図ることができる。
【００４９】
なお、上述した各実施形態は本発明を適用した具体的態様の例に過ぎず、本発明を限定するものではなく、上記実施形態とは異なる態様として本発明を適用することも可能である。例えば、上記実施形態においては、プロジェクター１１が操作検出部１０２の機能によって、ペン型デバイス１５により指示された位置を検出し、指示状態を判定し、その結果を示す情報をＰＣ１３に送信する構成を例に挙げて説明したが、本発明はこれに限定されるものではなく、赤外線受光部４２を備え、操作検出部１０２の機能を実行する検出装置を、プロジェクター１１とは別体として構成し、プロジェクター１１またはＰＣ１３に接続する構成としても良い。
また、上記実施形態では、プロジェクター１１が検出したペン型デバイス１５の位置に基づいて、ＰＣ１３が、重畳画像生成部５３の機能により描画画像を生成して、出力画像生成部５２の機能によって表示画像に重畳する処理、ＧＵＩ制御部５４の機能によって操作用グラフィックスを生成して出力画像生成部５２の機能によって表示画像に重畳する処理を実行していたが、これら出力画像生成部５２，重畳画像生成部５３，及びＧＵＩ制御部５４の機能をプロジェクター１１が実行してもよい。この場合、プロジェクター１１事態が上記処理を実行するためのプログラムを、記憶部１０５に記憶し、当該プログラムを制御部１０３が実行することで、上記機能を実現する。
【００５０】
また、上記実施形態では、光源が発した光を変調する手段として、ＲＧＢの各色に対応した３枚の透過型または反射型の液晶パネル３２を用いた構成を例に挙げて説明したが、本発明はこれに限定されるものではなく、例えば、１枚の液晶パネルとカラーホイールを組み合わせた方式、３枚のデジタルミラーデバイス（ＤＭＤ）を用いた方式、１枚のデジタルミラーデバイスとカラーホイールを組み合わせた方式等により構成してもよい。ここで、光変調装置として１枚のみの液晶パネルまたはＤＭＤを用いる場合には、クロスダイクロイックプリズム等の合成光学系に相当する部材は不要である。また、液晶パネル及びＤＭＤ以外にも、光源が発した光を変調可能な構成であれば問題なく採用できる。
また、本発明の画像表示装置は、スクリーンＳＣに映像を投射するプロジェクターに限定されず、液晶表示パネルに画像／映像を表示する液晶モニターまたは液晶テレビ、或いは、ＰＤＰ（プラズマディスプレイパネル）に画像／映像を表示するモニター装置またはテレビ受像機、ＯＬＥＤ（Organic light-emitting diode）、ＯＥＬ（Organic Electro-Luminescence）等と呼ばれる有機ＥＬ表示パネルに画像／映像を表示するモニター装置またはテレビ受像機等の自発光型の表示装置など、各種の表示装置も本発明の画像表示装置に含まれる。
【００５１】
また、図１及び図３に示した表示システム１０の各機能部は機能的構成を示すものであって、具体的な実装形態は特に制限されない。必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。
ＰＣ１３は記憶部１３４に記憶したプロジェクター制御プログラム１３ＡをＣＰＵ１３１により実行し、プロジェクター１１は記憶部１０５の制御プログラム１０５Ａを制御部１０３により実行する構成として説明したが、プロジェクター制御プログラム１３Ａ或いは制御プログラム１０５Ａを、通信ネットワーク１２を介して接続された他の装置からダウンロードして実行しても良いし、可搬型の記録媒体にプロジェクター制御プログラム１３Ａまたは制御プログラム１０５Ａを記録して、この記録媒体から上記各プログラムを読み取って実行する構成としても良い。
また、上記実施形態においてソフトウェアで実現されている機能の一部をハードウェアで実現してもよく、あるいは、ハードウェアで実現されている機能の一部をソフトウェアで実現してもよい。その他、表示システム１０の他の各部の具体的な細部構成についても、本発明の趣旨を逸脱しない範囲で任意に変更可能である。
【符号の説明】
【００５２】
１０…表示システム（画像表示システム）、１１…プロジェクター（画像表示装置、操作検出装置）、１２…通信ネットワーク、１３…ＰＣ（画像供給装置）、１３Ａ…プロジェクター制御プログラム、１５…ペン型デバイス（操作用デバイス）、１５Ａ…スイッチ、４２…赤外線受光部、５１…画像出力部（出力手段）、５２…出力画像生成部（第１の画像生成手段）、５３…重畳画像生成部（描画手段）、５４…ＧＵＩ制御部（第２の画像生成手段）、１０１…外部Ｉ／Ｆ部、１０２…操作検出部、１０３…制御部、１０５…記憶部、１０５Ａ…制御プログラム、１３１…ＣＰＵ、２０１、２０２…表示用画像、２１１…描画画像、２２１…メニューバー（操作用グラフィックス）、２２３、２２５…メニュー画像（操作用グラフィックス）、ＳＣ…スクリーン（投射面）。
【技術分野】
【０００１】
本発明は、画像表示装置に画像を出力する画像供給装置、画像表示システム、画像供給装置の制御方法、画像表示装置、及び、プログラムに関する。
【背景技術】
【０００２】
従来、表示面に対してタッチペン等の座標入力デバイスで操作を行うことにより、手書き入力を行うことが可能なシステムが知られている（例えば、特許文献１参照）。特許文献１記載のシステムのように、座標入力デバイスを用いて描画を行ったり、情報の処理を指示したりする場合、例えばメニュー画面のような操作用のグラフィックスを用いたグラフィカルユーザーインターフェイス（ＧＵＩ：Graphical User Interface）が採用される。特許文献１のシステムでは、表示画面に操作用のグラフィックであるメニュー画面が配置され、このメニュー画面を操作することによって手書き入力した情報を処理させることが可能となっている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１５７４４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、メニュー画面のような操作用のグラフィックスを表示すると、その表示位置においては描画等の操作を行えなくなるので、操作用のグラフィックスが不必要に表示されると操作性を損なうおそれがある。その一方で、操作用のグラフィックスが必要なときに表示されていないことも操作性を損なう要因となり得る。このため、必要な場合にＧＵＩの操作用グラフィックスを表示する一方、この操作用グラフィックスが操作の妨げにならないような制御方法が望まれていた。
本発明は、上述した事情に鑑みてなされたものであり、画像が表示された表示面への操作により位置入力が可能なＧＵＩの操作用グラフィックスを、操作の妨げにならないように適切に表示することを目的とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置であって、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段とを備えることを特徴とする。
本発明によれば、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【０００６】
また、本発明は、上記画像供給装置において、前記操作用画像は、前記描画手段が生成した前記重畳画像、または前記第１の画像生成手段が生成した第１の合成画像の消去処理及び保存処理のうち少なくとも一方を指示するボタンを含むことを特徴とする。
本発明によれば、表示面に対する操作によって生成された重畳画像、またはこの重畳画像を原画像に重畳した第１の合成画像の保存または消去を指示できる操作用画像が必要な場合に表示されるので、画像を消去する操作や画像を保存する操作を速やかに行える。
【０００７】
また、本発明は、上記画像供給装置システムにおいて、前記第２の画像生成手段は、前記操作検出装置により検出された指示位置をもとに、前記操作用画像の表示位置を決定することを特徴とする。
本発明によれば、操作用画像を操作位置に近づけて表示し、利便性の向上を図ることや、操作の妨げにならないように操作位置から離れた場所に表示することができ、操作性の向上を図ることができる。
【０００８】
また、上記課題を解決するため、本発明は、画像を出力する画像供給装置と、前記画像供給装置が出力する画像を表示面に表示する画像表示装置と、前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とを有し、前記画像供給装置は、原画像を取得して前記画像表示装置に出力する出力手段と、前記操作検出装置が検出した指示位置に基づいて、前記原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段とを備えることを特徴とする。
本発明によれば、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【０００９】
また、本発明は、上記画像表示システムにおいて、前記表示面に対する位置指示操作と、位置指示操作以外の特定の操作とが可能な操作用デバイスを備え、前記操作検出装置は、前記操作用デバイスの位置指示操作により指示された位置を検出する一方、前記操作用デバイスによる前記特定の操作を検出し、前記画像供給装置の前記第２の画像生成手段は、前記操作検出装置が前記操作用デバイスによる特定の操作を検出した場合に、前記操作用画像を表示させることを特徴とする。
本発明によれば、操作用デバイスの特定の操作によって、操作用画像を表示させることができるので、表示画像の変化により表示する機能に加え、操作者が必要な場合に意図して操作用画像を呼び出すことができる。これにより、操作者の意図を反映して操作性のより一層の向上を図ることができる。
また、上記画像表示システムにおいて、前記画像表示装置が前記操作検出装置を備える構成としてもよく、この場合、画像表示装置によって表示面に対する操作を検出することで、表示面近傍の装置の数を減らして設置性を向上させることができ、また、より正確に操作を検出できる。
【００１０】
また、上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置であって、前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を表示する表示手段とを備えることを特徴とする。
本発明によれば、画像表示装置が表示面に対する操作に応じて重畳画像を生成し、この重畳画像をもとの表示画像に重畳して表示し、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像を表示する。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【００１１】
また、上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置の制御方法であって、表示用の画像を取得して前記画像表示装置に出力するとともに、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成し、生成した前記重畳画像を前記原画像に重畳して第１の合成画像を生成して、前記画像表示装置に出力し、前記原画像が変化した場合には、生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成し、この第２の合成画像を前記画像表示装置に出力することを特徴とする。
本発明の制御方法を実行することにより、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【００１２】
また、上記課題を解決するため、本発明は、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられるコンピューターが実行可能なプログラムであって、前記コンピューターを、原画像を取得して前記画像表示装置に出力する出力手段と、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段として機能させることを特徴とするプログラムである。
本発明のプログラムをコンピューターにより実行することで、表示面に対する操作に応じて重畳画像が生成され、この重畳画像がもとの表示画像に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用画像が表示される。これにより、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【００１３】
また、画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられるコンピューターコンピューターにより読み取り可能な記録媒体であって、上記記録媒体に、前記コンピューターを、原画像を取得して前記画像表示装置に出力する出力手段と、前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、前記第２の合成画像を前記画像表示装置に出力する出力手段として機能させるプログラムを、前記コンピューターによって読み取り可能に記録してもよい。
【発明の効果】
【００１４】
本発明によれば、操作に応じて画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示するための操作用画像を、画像を生成する操作の妨げにならないように、必要な場合に表示できる。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施形態に係る表示システムの構成を示す図である。
【図２】ペン型デバイスによるスクリーンへの操作の態様を示す図である。
【図３】表示システムの機能的構成を示すブロック図である。
【図４】スクリーンにメニューバーを表示する様子を示す図であり、（Ａ）はメニューバーが表示されていない例を示し、（Ｂ）は表示用画像が切り替えられた例を示し、図４（Ｃ）はメニューバーが表示された例を示す。
【図５】操作用グラフィックスの構成例を示す図である。
【図６】操作用グラフィックスの表示態様の別の例を示す図である。
【図７】表示システムの動作を示すフローチャートである。
【発明を実施するための形態】
【００１６】
以下、図面を参照して本発明を適用した実施形態について説明する。
図１は、実施形態に係る表示システム１０の構成を示す図である。
表示システム１０（画像表示システム）は、スクリーンＳＣに画像を投射するプロジェクター１１と、このプロジェクター１１に対して画像を送信するＰＣ（Personal Computer）１３とを備えて構成される。プロジェクター１１とＰＣ１３とは通信ネットワーク１２を介して相互に通信可能に接続され、また、通信ネットワーク１２には複数台のＰＣ１３が接続されている。各ＰＣ１３は、それぞれプロジェクター１１を制御するプロジェクター制御プログラム１３Ａを実行可能であり、個別にプロジェクター１１を制御することが可能であるが、プロジェクター１１を同時に制御可能なＰＣ１３は１台である。このため、各ＰＣ１３は、他のＰＣ１３がプロジェクター１１を制御していない状態で、プロジェクター１１の制御を開始できる。
通信ネットワーク１２は、例えばEthernet（登録商標）規格に準拠して構成されたＬＡＮであるが、その一部を公衆回線網や専用線で構成して遠隔地のＰＣ１３を接続してもよく、通信ネットワーク１２の具体的構成は任意である。また、表示システム１０が備えるＰＣ１３の数に制限はない。各ＰＣ１３は同様の構成となっているため、図１には１台のＰＣ１３について機能ブロックを図示する。
【００１７】
プロジェクター１１は、画像表示装置として機能し、スクリーンＳＣに対してＰＣ１３から入力される表示用画像２０１を投射する。また、プロジェクター１１は操作検出装置として機能し、スクリーンＳＣ上でペン型デバイス１５が操作された場合に、このペン型デバイス１５の操作位置を検出して、検出した位置をＰＣ１３に送信する。表示システム１０では、スクリーンＳＣでペン型デバイス１５を操作すると、このペン型デバイス１５の操作に追従して描画画像２１１を描画して、投射中の表示用画像２０１に重ねて描画画像２１１をスクリーンＳＣに投射する機能を有する。これにより、表示用画像２０１に重ねて絵を描いたり、表示用画像２０１を用いたプレゼンテーションの実行中に、表示用画像２０１に文字や記号等を書き込んだりすることができる。また、ペン型デバイス１５はスイッチ１５Ａを備えており、プロジェクター１１はスイッチ１５Ａの操作を検出して後述するメニューバー２２１（図４（Ｂ））を表示する。
【００１８】
図２は、ペン型デバイス１５によるスクリーンＳＣへの操作態様を示す図である。
この図２に示す例では、プロジェクター１１は、画像を投射するための開口部（図示略）が設けられた天面部２Ａを下方に向けた状態で使用されるものであり、スクリーンＳＣが形成される壁面に取り付けられたアーム１４に、天面部２Ａとは反対側の底面部２Ｂが固定されて使用される。底面部２Ｂには、アーム１４に連結される金具類を取り付け可能な取付部が適所に複数設けられ、ＰＣ１３等の外部の装置に繋がる通信ケーブルやプロジェクター１１の電源ケーブル等が接続されるケーブル接続部（図示略）が設けられる。これらのケーブルはアーム１４内を挿通し、表示システム１０が設置された室の天井や壁面内部に配線される。また、スクリーンＳＣは壁面に固定された平板に限らず、壁面自体をスクリーンＳＣとして使用することも可能である。
【００１９】
プロジェクター１１の外装筐体２には、図２の設置状態においてスクリーンＳＣ側を向く傾斜面２１Ａが形成され、この傾斜面２１Ａから後述する投射光学系３３（図３）が投射光をスクリーンＳＣに向けて投射する。このため図２に示すように、スクリーンＳＣには、斜め上方から投射光が当たって画像が投射される。
ここで、ペン型デバイス１５を操作する操作者はスクリーンＳＣの前に立ち、ペン型デバイス１５をスクリーンＳＣ上で移動させ、或いはペン型デバイス１５でスクリーンＳＣ上の位置を指し示す操作を行う。ペン型デバイス１５は、赤外光を放射する発光部（図示略）を備えており、プロジェクター１１は、ペン型デバイス１５が発する赤外光を受光して、スクリーンＳＣにおけるペン型デバイス１５の位置を検出する機能を有する。具体的には、ペン型デバイス１５は、その側面に赤外ＬＥＤを内蔵した発光窓を備え、この発光窓から赤外光を発する構成を有し、プロジェクター１１は、赤外光を検出する赤外光撮像部を傾斜面２１Ａに設けて、傾斜面２１ＡからスクリーンＳＣを撮影する。この構成により、スクリーンＳＣ上におけるペン型デバイス１５の位置をプロジェクター１１によって検出できる。
また、プロジェクター１１は、ペン型デバイス１５の使用開始に先だって、予め用意された調整用の画像をスクリーンＳＣに投射し、この調整用の画像上の点をペン型デバイス１５によって順次指し示す操作を行わせて、検出位置のキャリブレーションを行う。
【００２０】
さらに、ペン型デバイス１５の側面には押圧操作可能なスイッチ１５Ａが設けられ、操作者がスイッチ１５Ａを押下すると、ペン型デバイス１５の発光部からスイッチ１５Ａの操作を示す赤外線信号が送信される。この赤外線信号をプロジェクター１１が受光し、デコードすることにより、ペン型デバイス１５が指示する位置と、その位置におけるスイッチ１５Ａの操作とをプロジェクター１１が検出できる。プロジェクター１１は、検出した位置と、スイッチ１５Ａの操作の有無を示す情報とをＰＣ１３に送信する。
ＰＣ１３は、プロジェクター１１から受信した位置情報に基づき、この位置に投射画像に重ねて描画を行って新たな投射画像を作成する等の処理を行って、位置入力操作の内容を投射画像に反映させる。
【００２１】
また、ＰＣ１３は、図１に示すように、基本制御プログラムを実行してＰＣ１３の各部を制御するとともに、各種アプリケーションプログラムを実行して、画像供給装置としての機能を実現するＣＰＵ１３１、ＣＰＵ１３１が実行する基本制御プログラム等を不揮発的に記憶するＲＯＭ１３２、ＣＰＵ１３１が実行するプログラムやＣＰＵ１３１が処理するデータ等を一時的に記憶するＲＡＭ１３３、ＣＰＵ１３１が実行するアプリケーションプログラム及び当該アプリケーションプログラムの機能により処理するデータを記憶する記憶部１３４、キーボードやマウス等の入力デバイスによる入力操作を検出して操作内容を示すデータをＣＰＵ１３１に出力する入力部１３５、ＣＰＵ１３１による処理結果等をディスプレイやプリンター等の出力デバイスに出力する出力部１３６、及び、通信ネットワーク１２を介して他のＰＣ１３やプロジェクター１１との間で通信を実行する通信Ｉ／Ｆ１３７を備えている。
【００２２】
記憶部１３４は、プロジェクター１１を制御して、プロジェクター１１に画像を投射させるとともに、ペン型デバイス１５による操作に対応した処理を行うためのアプリケーションプログラムであるプロジェクター制御プログラム１３Ａを記憶している。また、記憶部１３４は、プロジェクター１１によって投射される表示画像データ１３Ｂを記憶している。表示画像データ１３Ｂは、静止画像データ、動画像データ、複数の静止画像を含むプレゼンテーションファイル等の統合データを含み、特定のアプリケーションプログラムにより再生可能なファイルを含む。ＰＣ１３は、表示画像データ１３Ｂを用いて出力部１３６によってディスプレイに画像を表示させるとともに、この表示される画像と同じ画像をプロジェクター１１に送信することができ、また、表示画像データ１３Ｂを再生してプロジェクター１１に対してのみ画像を送信することもできる。
【００２３】
図３は、表示システム１０の機能的構成を示すブロック図である。
プロジェクター１１は、ＰＣ１３やビデオ再生装置、ＤＶＤ再生装置等の外部の装置に接続される外部Ｉ／Ｆ（インターフェイス）部１０１を備えている。例えば、外部Ｉ／Ｆ部１０１は、ＵＳＢインターフェイス、有線または無線ＬＡＮインターフェイス、アナログ映像信号が入力されるＶＧＡ端子、デジタル映像信号が入力されるＤＶＩ（Digital Visual Interface）、ＮＴＳＣ、ＰＡＬ、ＳＥＣＡＭ等のコンポジット映像信号が入力されるＳ映像端子、コンポジット映像信号が入力されるＲＣＡ端子、コンポーネント映像信号が入力されるＤ端子、ＨＤＭＩ（登録商標）規格に準拠したＨＤＭＩコネクター等を備えている。本実施形態のプロジェクター１１は、外部Ｉ／Ｆ部１０１のＬＡＮインターフェイスを介して通信ネットワーク１２に接続される。
【００２４】
プロジェクター１１は、大きく分けて光学的な画像の形成を行う光学系と映像信号を電気的に処理する画像処理系とからなる。光学系としての投射部３（表示手段）は、照明光学系３１、光変調装置である液晶パネル３２、及び投射光学系３３から構成されている。照明光学系３１は、キセノンランプ、超高圧水銀ランプ、ＬＥＤ（Light Emitting Diode）等からなる光源を備えている。また、照明光学系３１は、光源が発した光を液晶パネル３２に導くリフレクター及び補助リフレクターを備えていてもよく、投射光の光学特性を高めるためのレンズ群（図示略）、偏光板、或いは光源が発した光の光量を液晶パネル３２に至る経路上で低減させる調光素子等を備えたものであってもよい。
液晶パネル３２は、後述する画像処理系からの信号を受けて、パネル面に画像を形成する。液晶パネル３２は、カラーの投影を行うため、ＲＧＢの三原色に対応した３枚の液晶パネルからなる。そのため、照明光学系３１からの光はＲＧＢの３色の色光に分離され、各色光は対応する各液晶パネルに入射する。各液晶パネルを通過して変調された色光はクロスダイクロイックプリズム等の合成光学系によって合成され、投射光学系３３に射出される。
【００２５】
投射光学系３３は、投射する画像の拡大・縮小および焦点の調整を行うズームレンズ、ズームの度合いを調整するズーム調整用モーター、フォーカスの調整を行うフォーカス調整用モーター、投射光をスクリーンＳＣに向ける凹面鏡等を備えている。投射光学系３３は、液晶パネル３２で変調された入射光を、ズームレンズを通してズーム調整及びフォーカス調整し、このズームレンズを通った光を凹面鏡によりスクリーンＳＣ方向へ導き、スクリーンＳＣ上に結像させる。この光学系には、制御部１０３の制御に従って投射光学系３３が備える各モーターを駆動する投射光学系駆動部１２１、及び、制御部１０３の制御に従って照明光学系３１が備える光源を駆動する光源駆動部１１７が接続されている。なお、投射光学系３３の具体的構成は上記の例に限定されず、例えば凹面鏡を含むミラーを用いない構成により、液晶パネル３２で変調された光をレンズによってスクリーンＳＣに投射し、結像させることも可能である。
【００２６】
一方、画像処理系は、プロジェクター１１全体を統合的に制御する制御部１０３を中心に構成され、制御部１０３が処理するデータや制御部１０３が実行するプログラムを記憶した記憶部１０５、操作パネル２３及びリモコン受光部４１を介した操作を検出する入力処理部１２３、外部Ｉ／Ｆ部１０１を介して入力された入力映像を処理する表示制御部１０７、フレームメモリー１１５を備えた画像処理部１１３、表示制御部１０７から出力される映像信号に基づいて液晶パネル３２を駆動して描画を行う光変調装置駆動部１１９を備えている。
【００２７】
制御部１０３は、記憶部１０５に記憶された制御プログラム１０５Ａを読み出して実行することにより、プロジェクター１１の各部を制御する。制御部１０３は、入力処理部１２３から入力される操作信号に基づいて、操作者が行った操作の内容を検出し、この操作に応じて表示制御部１０７、投射光学系駆動部１２１及び光源駆動部１１７を制御して、スクリーンＳＣに映像を投射させる。
【００２８】
プロジェクター１１の外装筐体２には、各種スイッチ及びインジケーターランプを備えた操作パネル２３が配置されている。操作パネル２３は入力処理部１２３に接続されており、入力処理部１２３は、制御部１０３の制御に従い、プロジェクター１１の動作状態や設定状態に応じて操作パネル２３のインジケーターランプを適宜点灯或いは点滅させる。この操作パネル２３のスイッチが操作されると、操作されたスイッチに対応する操作信号が入力処理部１２３から制御部１０３に出力される。
また、プロジェクター１１は、操作者が使用するリモコン（図示略）がボタン操作に対応して送信した赤外線信号を、リモコン受光部４１によって受光する。リモコン受光部４１は、上記リモコンから受光した赤外線信号をデコードして、上記リモコンにおける操作内容を示す操作信号を生成し、制御部１０３に出力する。
【００２９】
外部Ｉ／Ｆ部１０１には表示制御部１０７が接続される。表示制御部１０７に接続された画像処理部１１３は、表示制御部１０７に外部Ｉ／Ｆ部１０１を介して入力される入力映像をフレームメモリー１１５に展開し、アナログ／デジタル変換、インターレース／プログレッシブ変換、解像度変換等の各種変換処理を適宜実行し、予め設定されたフォーマットの映像信号を生成して表示制御部１０７に出力する。表示制御部１０７は、画像処理部１１３により処理された映像信号を光変調装置駆動部１１９に出力し、液晶パネル３２に表示させる。
【００３０】
また、プロジェクター１１は、上述したようにペン型デバイス１５が発する赤外光を検出する赤外線受光部４２を備えている。赤外線受光部４２は、具体的にはスクリーンＳＣの赤外光を撮影する撮像素子と、この撮像素子によって取得された撮影画像データを出力する撮影回路とを備えて構成される。赤外線受光部４２は、制御部１０３の制御に従ってスクリーンＳＣを所定の周期で撮影し、撮影画像データを制御部１０３に出力する。
制御部１０３は、記憶部１０５に記憶された制御プログラム１０５Ａを実行することにより、操作検出部１０２として機能する。この操作検出部１０２の機能により、プロジェクター１１は操作検出装置として動作する。制御部１０３は、操作検出部１０２の機能によって、赤外線受光部４２から入力される撮影画像データに基づいてスクリーンＳＣ上におけるペン型デバイス１５の指示位置を特定する。例えば、スクリーンＳＣ上に仮想Ｘ−Ｙ直交座標が設定され、操作検出部１０２は、赤外線受光部４２から入力されるデータに基づいて、指示位置のＸ座標とＹ座標とを求める処理を行う。また、赤外線受光部４２は、ペン型デバイス１５がスイッチ１５Ａの操作時に発する赤外線信号を受信した場合に、対応する操作データを操作検出部１０２に出力する。操作検出部１０２は、赤外線受光部４２から入力されるデータに基づいてスイッチ１５Ａの操作を検出する。操作検出部１０２は、ペン型デバイス１５の指示位置とスイッチ１５Ａの操作状態とを示すデータを、外部Ｉ／Ｆ部１０１を介してＰＣ１３へ送信する。ここで送信先となるＰＣ１３は、現在プロジェクター制御プログラム１３Ａを実行してプロジェクター１１を制御しているＰＣ１３である。
【００３１】
ＰＣ１３は、図１に示すＣＰＵ１３１によってプロジェクター制御プログラム１３Ａを実行することにより、画像出力部５１（出力手段）、出力画像生成部５２（第１の画像生成手段）、重畳画像生成部５３（描画手段）、及びＧＵＩ制御部５４（第２の画像生成手段）としての機能を実現する。
ＰＣ１３は、画像出力部５１の機能により、記憶部１３４に記憶された表示画像データ１３Ｂを再生して画像をプロジェクター１１に送信する。また、ＰＣ１３は、重畳画像生成部５３の機能によって、プロジェクター１１から通信Ｉ／Ｆ１３７により受信したデータに基づいて、ペン型デバイス１５の指示位置を検出し、検出した位置の軌跡に沿って線や図形を描画する。すなわち、線や図形の画像を生成し、この生成した画像（重畳画像）を重畳画像生成部５３に出力する。重畳画像生成部５３は、現在出力中の画像（例えば、表示画像データ１３Ｂを再生した画像）に、出力画像生成部５２が生成した重畳画像を重畳して画像を合成し、新たな表示用の画像を生成する。そして、出力画像生成部５２は、生成した新たな表示用の画像を画像出力部５１によってプロジェクター１１へ送信させる。
【００３２】
さらに、ＰＣ１３は、ＧＵＩ制御部５４の機能により、スクリーンＳＣに後述するメニューバー２２１（図４（Ｂ））を表示させる制御を行う。ＧＵＩ制御部５４は、メニューバー２２１の画像を記憶部１３４から読み出して、重畳画像生成部５３に出力し、重畳画像を生成して出力画像生成部５２に出力する際に、メニューバー２２１の画像も合わせて重畳するよう制御を行い、メニューバー２２１の画像を出力画像生成部５２へ出力する。出力画像生成部５２は、出力中の画像に、重畳画像生成部５３が生成した重畳画像と、ＧＵＩ制御部５４が取得したメニューバー２２１の画像とを重ねることで新たな表示用の画像を生成し、この画像を画像出力部５１によって送信させる。
【００３３】
本実施形態のＰＣ１３は、プロジェクター１１に表示させる画像が変化した場合に、ＧＵＩ制御部５４によりメニューバー２２１を表示させる。画像が変化した場合とは、例えば、複数枚のスライドからなるファイルを再生している間に、表示されるスライドが切り替わった場合を指す。ＰＣ１３は、画像出力部５１によりプロジェクター１１に送信している画像を所定時間毎に比較して前後の画像の差分を求め、この差分が予め設定されたしきい値を越える場合に、画像が変化したと判定する。ＰＣ１３は、静止画像であっても動画像であっても、所定のフレームレートでフレーム毎に画像を送信するので、静止画像であっても同一画像のフレームを連続して送信することになる。そこで、プロジェクター１１にフレームを送信する毎に、その前に送信したフレームとの差分を求めれば、速やかに画像の変化を検出できる。なお、差分を求める処理の負荷を軽減するため、比較の頻度を複数フレーム毎にしてもよい。
【００３４】
図４は、スクリーンＳＣにメニューバー２２１を表示する様子を示す説明図であり、図４（Ａ）はメニューバー２２１が表示されていない例を示し、図４（Ｂ）は表示用画像が切り替えられた例を示し、図４（Ｃ）はメニューバー２２１が表示された例を示す。
図４（Ａ）の例ではスクリーンＳＣに教育用のスライドが表示用画像２０１として表示されており、ペン型デバイス１５の軌跡に沿って描画画像２１１が表示されている。描画画像２１１は、操作検出部１０２が検出したペン型デバイス１５の位置の軌跡をたどって重畳画像生成部５３が生成した重畳画像である。
【００３５】
ここで、スクリーンＳＣに投射されている表示用画像２０１が、操作パネル２３またはリモコンの操作によって図４（Ｂ）に示す表示用画像２０２に切り替えられると、表示用画像２０１と表示用画像２０２との差分がしきい値を越える。例えば、図４（Ｂ）に示す表示用画像２０２には、図４（Ａ）に示す表示用画像２０１には無い線が現れている。表示用画像２０１は教育用の問題であり、表示用画像２０２は、教育用の表示用画像２０１の続きとして、正解が明記された画像となっている。表示用画像２０２で新たに現れた線、すなわち相違部分は問題の解答である。この表示用画像２０２と表示用画像２０１との差がしきい値を超えたことにより、スクリーンＳＣに投射中の表示用画像２０２に重ねて、図４（Ｃ）に示すようにメニューバー２２１が表示される。
ここで、表示用画像２０１は原画像に相当し、図４（Ａ）及び（Ｂ）で表示用画像２０１に描画された描画画像２１１が重畳された画像は第１の合成画像に相当し、図４（Ｃ）でメニューバー２２１が重畳表示された画像は第２の合成画像に相当する。
【００３６】
メニューバー２２１は特定の機能が割り当てられたボタンが複数配置された操作用グラフィックス（操作用画像）であり、ペン型デバイス１５によりメニューバー２２１の各ボタンを指定する操作を行うと、操作されたボタンに対応する処理をＰＣ１３が実行する。ＰＣ１３は、ＧＵＩ制御部５４の機能によって、プロジェクター１１にメニューバー２２１を表示させる。このため、ＧＵＩ制御部５４の機能によって、メニューバー２２１の表示位置、サイズ、配置されたボタンの種類等のデータを保持しており、ペン型デバイス１５の操作位置に対応するボタンを特定し、このボタンに対応する動作をＣＰＵ１３１により実行できる。
【００３７】
図５は操作用グラフィックスの一態様としてのメニューバー２２１の構成例を示す図である。
この図５に示す例では、メニューバー２２１には描画ボタン２３１、描画設定ボタン２３２、消しゴムボタン２３３、ＵＮＤＯ／ＲＥＤＯボタン２３４、選択開始ボタン２３５、全消去ボタン２４１及び画面キャプチャーボタン２４２の各ボタンが配置されている。描画ボタン２３１及び描画設定ボタン２３２は、ペン型デバイス１５の操作によって描画をする場合の線の太さや線の色、線の端の形状等を設定するボタンである。消しゴムボタン２３３は、ペン型デバイス１５の操作により既に描画された線や記号等のうち指定した位置を消去する、いわゆる消しゴム機能の開始を指示するボタンである。ＵＮＤＯ／ＲＥＤＯボタン２３４は、直前に実行した動作の取り消しと、動作の再実行を指示するボタンである。選択開始ボタン２３５は、ペン型デバイス１５の操作により既に描画された線や記号等の一部または全部を選択する動作の開始を指示するボタンであり、拡大ボタン２３６はペン型デバイス１５の操作により既に描画された線や記号等の一部または全部の拡大表示を指示するボタンである。
【００３８】
また、全消去ボタン２４１は、ペン型デバイス１５の操作により既に描画された線や記号等の全部の消去を指示するボタンであり、画面キャプチャーボタン２４２はペン型デバイス１５の操作により既に描画された線や記号等の保存を指示するボタンである。画面キャプチャーボタン２４２の操作により、スクリーンＳＣ上の描画画像２１１が、背景としてスクリーンＳＣに投射されている表示用画像２０１，２０２ごとキャプチャーされ、一つの画像としてＰＣ１３の記憶部１３４に保存される。
ここで、ＰＣ１３は、描画画像２１１のみを画像として保存してもよいし、描画画像２１１と表示用画像２０１，２０２を区別可能なデータ形式で保存してもよい。また、キャプチャキャプチャーされたデータは、再びプロジェクター１１によって表示用画像２０１，２０２とともに描画画像２１１を投射できるように記憶部１３４に記憶される。
【００３９】
このように、メニューバー２２１は、ペン型デバイス１５の操作により描画された重畳画像としての描画画像２１１の処理を指示するボタンが集約された操作用グラフィックスである。図４（Ａ）及び（Ｂ）に示すように、表示用画像２０１から表示用画像２０２に画像が変化した場合、ペン型デバイス１５を操作する操作者は、既に描画した描画画像２１１を消したり、消した上で描き直したりすることが考えられる。この場合、描画画像２１１を保存し、消去し、再び描画可能な状態にするため、操作者はメニューバー２２１を表示させる必要が生じる。このため、表示用画像が変化したタイミングでメニューバー２２１を表示させることで、利便性が高まるという利点がある。また、表示用画像が変化していない間は描画画像２１１を処理する可能性が高くないので、メニューバー２２１を表示することで描画の妨げになる可能性がある。このため、表示用画像が変化した場合にメニューバー２２１を表示することで、通常時は邪魔にならず、必要なときにメニューバー２２１が現れる。このため、より一層の利便性の向上を図ることができる。
【００４０】
メニューバー２２１は、ペン型デバイス１５の操作による描画操作に係る多数の機能、或いはＰＣ１３の制御により実行可能な全ての機能の操作ボタンが配置された操作用グラフィックスである。すなわち、ペン型デバイス１５の操作によって、描画を行い、描画した内容の編集、消去及び保存に係る、ＰＣ１３が実行可能な全て或いは多数の処理を指示するための操作用グラフィックスである。これに対し、ペン型デバイス１５の操作によりＰＣ１３が実行可能な描画に係る処理の一部のみについて、当該処理を指示する操作用グラフィックスを表示する構成としてもよい。
【００４１】
図６は、操作用グラフィックスの一態様としてのメニューバー２２１の別の例を示す図である。
この図６の例では、複数のボタンを有するメニューバー２２１とは異なり、画面キャプチャーボタンのみが配置されたメニュー画像２２３や、全消去ボタンのみが配置されたメニュー画像２２５が表示される。これらメニュー画像２２３，２２５により指示される処理は、ＰＣ１３が実行可能な描画に係る処理のうち一部のみであり、特に実行頻度が高い処理である画面キャプチャー（保存）、全消去（消去）を指示するボタンである。換言すれば、メニュー画像２２３及び２２５は、メニューバー２２１が対応している複数の機能のうち、一部の機能にそれぞれ対応する操作用グラフィックスである。また、メニュー画像２２３，２２５は、ＰＣ１３が実行可能な処理のうち、描画領域であるスクリーンＳＣの投射領域全体に対する処理を指示する操作用グラフィックスということもできる。さらには、ペン型デバイス１５の操作により描画を行った後で、次の表示用画像に切り替えて、新たに描画を開始する場合には、いったん描画された状態の投射領域全体を保存する画面キャプチャーを実行し、次いで全消去により描画内容を全て消去する動作が行われる。この観点から、メニュー画像２２３，２２５は、描画を終了して新たに描画を開始する際に必要な処理（機能）を指示するための操作用グラフィックスということができる。
【００４２】
これらメニュー画像２２３，２２５はボタンが一つであるためペン型デバイス１５の操作の妨げにならないという利点がある。ＧＵＩ制御部５４（図３）は、スクリーンＳＣに表示される表示用画像の変化がしきい値を越えた場合に、メニュー画像２２３，２２５のみを表示用画像及び重畳画像に重畳させて表示させてもよい。
また、ＧＵＩ制御部５４がメニューバー２２１を表示させる位置は任意であるが、図６に示すようにスクリーンＳＣ上右端の初期位置（規定の位置）としてもよいし、ペン型デバイス１５の近くに表示してもよい。しかしながら、上記のようにペン型デバイス１５の操作の妨げにならないことを考慮すると、ペン型デバイス１５の近くに表示するのはメニュー画像２２３、２２５のような小型の操作用グラフィックスにすると良い。この場合に、メニュー画像２２３、２２５とメニューバー２２１とを組み合わせて、図６のように同時に表示しても良い。また、メニューバー２２１は表示させず、メニュー画像２２３及び２２５の少なくとも一方を表示しても良い。さらに、図６においてメニュー画像２２３及び２２５はそれぞれ１つの機能にのみ対応しているが、メニュー画像２２３及び２２５は２以上の機能に対応するものであっても良い。
【００４３】
図７は、表示システム１０の動作を示すフローチャートであり、特に、ＰＣ１３の動作を示す。
まず、プロジェクター１１におけるリモコン装置や操作パネル２３の操作、或いはＰＣ１３の入力部１３５が検出した操作によって、位置入力モードの開始が指示されると、ＣＰＵ１３１はプロジェクター制御プログラム１３Ａを実行して位置入力モードの動作を開始する（ステップＳ１１）。
続いて、ＣＰＵ１３１はキャリブレーションを実行する（ステップＳ１２）。このキャリブレーションでは、プロジェクター１１にキャリブレーション用の画像を送信し、或いは、プロジェクター１１が記憶部１０５からキャリブレーション用の画像を読み出して投射する。このキャリブレーション用の画像に対するペン型デバイス１５の操作を検出し、検出した位置とキャリブレーション用のデータとを対比することでキャリブレーションが行われる。
【００４４】
その後、ＣＰＵ１３１は記憶部１３４から表示画像データ１３Ｂを取得して（ステップＳ１３）、この表示画像データ１３Ｂを再生して、画像出力部５１による表示用画像の送信（出力）を開始する（ステップＳ１４）。また、ＣＰＵ１３１は、表示用画像の送信開始とともに、画像出力部５１が取得してプロジェクター１１に送信する画像の変化（フレーム間の差分）の検出を開始する（ステップＳ１５）。
ＣＰＵ１３１は、プロジェクター１１が送信するデータに基づいてペン型デバイス１５の指示位置を取得し（ステップＳ１６）、取得した位置の軌跡に沿うように重畳画像生成部５３の機能によって描画画像を生成する（ステップＳ１７）。そして、出力画像生成部５２の機能により描画画像を表示用の画像に重畳して新たな表示用の画像を生成して、画像出力部５１によってプロジェクター１１に送信する（ステップＳ１８）。これにより、プロジェクター１１がスクリーンＳＣに投射する画像が更新される。
【００４５】
ＣＰＵ１３１は、画像出力部５１が取得した画像に、しきい値を越える変化があったか否かを判別し（ステップＳ１９）、変化があった場合にはＧＵＩ制御部５４によってメニューバー２２１を表示する表示用の画像を生成して、画像出力部５１によって１１に出力し、スクリーンＳＣに投射させる（ステップＳ２０）。
また、画像に変化がないと判別した場合であっても（ステップＳ１９；Ｎｏ）、プロジェクター１１からスイッチ１５Ａの操作を示すデータを受信した場合（ステップＳ２１；Ｙｅｓ）には、ステップＳ２０に移行してメニューバーを含む画像を投射させる。メニューバーを含む画像を表示させた後、ＣＰＵ１３１は、位置入力モードを継続するか終了するかを判別し（ステップＳ２２）、継続する場合（ステップＳ２２；Ｎｏ）にはステップＳ１６に戻る。また、画像に変化がなく（ステップＳ１９；Ｎｏ）、スイッチ１５Ａの操作も無い場合（ステップＳ２１；Ｎｏ）、ＣＰＵ１３１はステップＳ２２に移行する。
【００４６】
以上のように、本発明を適用した実施形態に係る表示システム１０は、画像を出力するＰＣ１３と、ＰＣ１３が出力する画像をスクリーンＳＣに投射する画像表示装置としての機能とスクリーンＳＣにおける位置指示操作に応じて指示位置を検出する操作検出部１０２とを有するプロジェクター１１とを備え、ＰＣ１３は、表示用の画像を取得してプロジェクター１１に出力する画像出力部５１と、操作検出部１０２が検出した指示位置に基づいて、表示用の画像に重畳表示する重畳画像を生成する重畳画像生成部５３と、重畳画像生成部５３により生成された重畳画像を表示用の画像に重畳して新たに表示用の画像を生成し、画像出力部５１によって出力させる出力画像生成部５２と、出力画像生成部５２が重畳する前の画像が変化した場合に、重畳画像生成部５３が生成した重畳画像の処理を指示するための操作用グラフィックスを、出力画像生成部５２が生成した新たな表示用の画像に重畳し、この重畳した画像を画像出力部５１によって出力させるＧＵＩ制御部５４とを備えるので、スクリーンＳＣに対する操作に応じて描画画像２１１等の重畳画像が生成され、この重畳画像がもとの表示画像である表示用画像２０１，２０２に重畳して表示され、さらに、もとの表示画像が変化した場合に、重畳画像の処理を指示するための操作用グラフィックスが表示される。これにより、ペン型デバイス１５の操作に応じて重畳画像を生成して表示する機能を実行する際に、この生成された画像の処理を指示する操作用グラフィックスを、画像を生成する操作の妨げにならないように、必要な場合に表示できる。すなわち、ペン型デバイス１５を操作する操作者が、描画した重畳画像の処理を必要とする場合に、操作グラフィックスを表示させるので、不要な操作グラフィックスの表示によって操作を妨げることが無く、利便性の向上を図ることができる。
【００４７】
また、表示システム１０は、スクリーンＳＣに対する位置指示操作と、位置指示操作以外にスイッチ１５Ａの押圧操作が可能なペン型デバイス１５を備え、操作検出部１０２は、ペン型デバイス１５の位置指示操作により指示された位置を検出する一方、スイッチ１５Ａの操作を検出し、ＰＣ１３のＧＵＩ制御部５４は、操作検出部１０２がスイッチ１５Ａの操作を検出した場合に、操作用グラフィックスを表示させる。このため、操作用グラフィックスを表示する機能に加え、操作者が必要な場合に意図してスイッチ１５Ａを操作することで、操作用グラフィックスを呼び出すことができる。これにより、操作者の意図を反映して操作性のより一層の向上を図ることができる。
また、プロジェクター１１が操作検出部１０２を備え、スクリーンＳＣに対する操作を検出する構成としたので、スクリーンＳＣ近傍の装置の数を減らして設置性を向上させることができ、また、より正確に操作を検出できる。
【００４８】
また、ＰＣ１３は、重畳画像生成部５３が生成した重畳画像の消去処理及び保存処理のうち少なくとも一方を指示するボタンを含むメニューバー２２１、メニュー画像２２３或いはメニュー画像２２５を操作用グラフィックスとして投射させる。このため、画像を消去する操作や画像を保存する操作を速やかに行える。
ＰＣ１３はＧＵＩ制御部５４の機能により、ペン型デバイス１５の指示位置をもとに操作用グラフィックスの表示位置を決定するので、操作用グラフィックスをペン型デバイス１５の操作位置に近づけて表示して利便性の向上を図ることができ、また、操作の妨げにならないように操作位置から離れた場所に表示することもでき、操作性の向上を図ることができる。
【００４９】
なお、上述した各実施形態は本発明を適用した具体的態様の例に過ぎず、本発明を限定するものではなく、上記実施形態とは異なる態様として本発明を適用することも可能である。例えば、上記実施形態においては、プロジェクター１１が操作検出部１０２の機能によって、ペン型デバイス１５により指示された位置を検出し、指示状態を判定し、その結果を示す情報をＰＣ１３に送信する構成を例に挙げて説明したが、本発明はこれに限定されるものではなく、赤外線受光部４２を備え、操作検出部１０２の機能を実行する検出装置を、プロジェクター１１とは別体として構成し、プロジェクター１１またはＰＣ１３に接続する構成としても良い。
また、上記実施形態では、プロジェクター１１が検出したペン型デバイス１５の位置に基づいて、ＰＣ１３が、重畳画像生成部５３の機能により描画画像を生成して、出力画像生成部５２の機能によって表示画像に重畳する処理、ＧＵＩ制御部５４の機能によって操作用グラフィックスを生成して出力画像生成部５２の機能によって表示画像に重畳する処理を実行していたが、これら出力画像生成部５２，重畳画像生成部５３，及びＧＵＩ制御部５４の機能をプロジェクター１１が実行してもよい。この場合、プロジェクター１１事態が上記処理を実行するためのプログラムを、記憶部１０５に記憶し、当該プログラムを制御部１０３が実行することで、上記機能を実現する。
【００５０】
また、上記実施形態では、光源が発した光を変調する手段として、ＲＧＢの各色に対応した３枚の透過型または反射型の液晶パネル３２を用いた構成を例に挙げて説明したが、本発明はこれに限定されるものではなく、例えば、１枚の液晶パネルとカラーホイールを組み合わせた方式、３枚のデジタルミラーデバイス（ＤＭＤ）を用いた方式、１枚のデジタルミラーデバイスとカラーホイールを組み合わせた方式等により構成してもよい。ここで、光変調装置として１枚のみの液晶パネルまたはＤＭＤを用いる場合には、クロスダイクロイックプリズム等の合成光学系に相当する部材は不要である。また、液晶パネル及びＤＭＤ以外にも、光源が発した光を変調可能な構成であれば問題なく採用できる。
また、本発明の画像表示装置は、スクリーンＳＣに映像を投射するプロジェクターに限定されず、液晶表示パネルに画像／映像を表示する液晶モニターまたは液晶テレビ、或いは、ＰＤＰ（プラズマディスプレイパネル）に画像／映像を表示するモニター装置またはテレビ受像機、ＯＬＥＤ（Organic light-emitting diode）、ＯＥＬ（Organic Electro-Luminescence）等と呼ばれる有機ＥＬ表示パネルに画像／映像を表示するモニター装置またはテレビ受像機等の自発光型の表示装置など、各種の表示装置も本発明の画像表示装置に含まれる。
【００５１】
また、図１及び図３に示した表示システム１０の各機能部は機能的構成を示すものであって、具体的な実装形態は特に制限されない。必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。
ＰＣ１３は記憶部１３４に記憶したプロジェクター制御プログラム１３ＡをＣＰＵ１３１により実行し、プロジェクター１１は記憶部１０５の制御プログラム１０５Ａを制御部１０３により実行する構成として説明したが、プロジェクター制御プログラム１３Ａ或いは制御プログラム１０５Ａを、通信ネットワーク１２を介して接続された他の装置からダウンロードして実行しても良いし、可搬型の記録媒体にプロジェクター制御プログラム１３Ａまたは制御プログラム１０５Ａを記録して、この記録媒体から上記各プログラムを読み取って実行する構成としても良い。
また、上記実施形態においてソフトウェアで実現されている機能の一部をハードウェアで実現してもよく、あるいは、ハードウェアで実現されている機能の一部をソフトウェアで実現してもよい。その他、表示システム１０の他の各部の具体的な細部構成についても、本発明の趣旨を逸脱しない範囲で任意に変更可能である。
【符号の説明】
【００５２】
１０…表示システム（画像表示システム）、１１…プロジェクター（画像表示装置、操作検出装置）、１２…通信ネットワーク、１３…ＰＣ（画像供給装置）、１３Ａ…プロジェクター制御プログラム、１５…ペン型デバイス（操作用デバイス）、１５Ａ…スイッチ、４２…赤外線受光部、５１…画像出力部（出力手段）、５２…出力画像生成部（第１の画像生成手段）、５３…重畳画像生成部（描画手段）、５４…ＧＵＩ制御部（第２の画像生成手段）、１０１…外部Ｉ／Ｆ部、１０２…操作検出部、１０３…制御部、１０５…記憶部、１０５Ａ…制御プログラム、１３１…ＣＰＵ、２０１、２０２…表示用画像、２１１…描画画像、２２１…メニューバー（操作用グラフィックス）、２２３、２２５…メニュー画像（操作用グラフィックス）、ＳＣ…スクリーン（投射面）。
【特許請求の範囲】
【請求項１】
画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置であって、
前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を前記画像表示装置に出力する出力手段と、
を備えることを特徴とする画像供給装置。
【請求項２】
前記操作用画像は、前記描画手段が生成した前記重畳画像、または前記第１の画像生成手段が生成した第１の合成画像の消去処理及び保存処理のうち少なくとも一方を指示するボタンを含むことを特徴とする請求項１記載の画像供給装置。
【請求項３】
前記第２の画像生成手段は、前記操作検出装置により検出された指示位置をもとに、前記操作用画像の表示位置を決定することを特徴とする請求項１または２記載の画像供給装置。
【請求項４】
画像を出力する画像供給装置と、前記画像供給装置が出力する画像を表示面に表示する画像表示装置と、前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とを有し、
前記画像供給装置は、
原画像を取得して前記画像表示装置に出力する出力手段と、
前記操作検出装置が検出した指示位置に基づいて、前記原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を前記画像表示装置に出力する出力手段と、
を備えることを特徴とする画像表示システム。
【請求項５】
前記表示面に対する位置指示操作と、位置指示操作以外の特定の操作とが可能な操作用デバイスを備え、
前記操作検出装置は、前記操作用デバイスの位置指示操作により指示された位置を検出する一方、前記操作用デバイスによる前記特定の操作を検出し、
前記画像供給装置の前記第２の画像生成手段は、前記操作検出装置が前記操作用デバイスによる特定の操作を検出した場合に、前記操作用画像を表示させることを特徴とする請求項４記載の画像表示システム。
【請求項６】
前記画像表示装置は前記操作検出装置を備えることを特徴とする請求項４または５記載の画像表示システム。
【請求項７】
画像を表示面に表示する画像表示装置であって、
前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を表示する表示手段と、
を備えることを特徴とする画像表示装置。
【請求項８】
画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置の制御方法であって、
表示用の画像を取得して前記画像表示装置に出力するとともに、
前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成し、
生成した前記重畳画像を前記原画像に重畳して第１の合成画像を生成して、前記画像表示装置に出力し、
前記原画像が変化した場合には、生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成し、この第２の合成画像を前記画像表示装置に出力すること、
を特徴とする画像供給装置の制御方法。
【請求項９】
画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられるコンピューターが実行可能なプログラムであって、
前記コンピューターを、
原画像を取得して前記画像表示装置に出力する出力手段と、
前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を前記画像表示装置に出力する出力手段と、
して機能させることを特徴とするプログラム。
【請求項１】
画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置であって、
前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を前記画像表示装置に出力する出力手段と、
を備えることを特徴とする画像供給装置。
【請求項２】
前記操作用画像は、前記描画手段が生成した前記重畳画像、または前記第１の画像生成手段が生成した第１の合成画像の消去処理及び保存処理のうち少なくとも一方を指示するボタンを含むことを特徴とする請求項１記載の画像供給装置。
【請求項３】
前記第２の画像生成手段は、前記操作検出装置により検出された指示位置をもとに、前記操作用画像の表示位置を決定することを特徴とする請求項１または２記載の画像供給装置。
【請求項４】
画像を出力する画像供給装置と、前記画像供給装置が出力する画像を表示面に表示する画像表示装置と、前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とを有し、
前記画像供給装置は、
原画像を取得して前記画像表示装置に出力する出力手段と、
前記操作検出装置が検出した指示位置に基づいて、前記原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を前記画像表示装置に出力する出力手段と、
を備えることを特徴とする画像表示システム。
【請求項５】
前記表示面に対する位置指示操作と、位置指示操作以外の特定の操作とが可能な操作用デバイスを備え、
前記操作検出装置は、前記操作用デバイスの位置指示操作により指示された位置を検出する一方、前記操作用デバイスによる前記特定の操作を検出し、
前記画像供給装置の前記第２の画像生成手段は、前記操作検出装置が前記操作用デバイスによる特定の操作を検出した場合に、前記操作用画像を表示させることを特徴とする請求項４記載の画像表示システム。
【請求項６】
前記画像表示装置は前記操作検出装置を備えることを特徴とする請求項４または５記載の画像表示システム。
【請求項７】
画像を表示面に表示する画像表示装置であって、
前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を表示する表示手段と、
を備えることを特徴とする画像表示装置。
【請求項８】
画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられる画像供給装置の制御方法であって、
表示用の画像を取得して前記画像表示装置に出力するとともに、
前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成し、
生成した前記重畳画像を前記原画像に重畳して第１の合成画像を生成して、前記画像表示装置に出力し、
前記原画像が変化した場合には、生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成し、この第２の合成画像を前記画像表示装置に出力すること、
を特徴とする画像供給装置の制御方法。
【請求項９】
画像を表示面に表示する画像表示装置、及び前記表示面における位置指示操作に応じて指示位置を検出する操作検出装置とともに用いられるコンピューターが実行可能なプログラムであって、
前記コンピューターを、
原画像を取得して前記画像表示装置に出力する出力手段と、
前記操作検出装置が検出した指示位置に基づいて、原画像に重畳表示する重畳画像を生成する描画手段と、
前記描画手段により生成された前記重畳画像を前記原画像に重畳して第１の合成画像を生成する第１の画像生成手段と、
前記原画像が変化した場合に、前記描画手段が生成した前記重畳画像の処理を指示するための操作用画像を、前記第１の合成画像に重畳して第２の合成画像を生成する第２の画像生成手段と、
前記第２の合成画像を前記画像表示装置に出力する出力手段と、
して機能させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１２−１９４８５０（Ｐ２０１２−１９４８５０Ａ）
【公開日】平成２４年１０月１１日（２０１２．１０．１１）
【国際特許分類】
【出願番号】特願２０１１−５９０５３（Ｐ２０１１−５９０５３）
【出願日】平成２３年３月１７日（２０１１．３．１７）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成２４年１０月１１日（２０１２．１０．１１）
【国際特許分類】
【出願日】平成２３年３月１７日（２０１１．３．１７）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]