表示装置および表示方法
【課題】 ディジタイザシステムの操作性を向上させる表示装置を提供する。
【解決手段】 画面上のポインティング状態を検出する検出手段と、多画面処理を行う画像処理手段と、前記検出手段からのポインティング情報を受信する制御手段とを備え、多画面表示を行っていないとき、前記制御手段は、画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、多画面表示を行っているとき、前記制御手段は、多画面のうちいづれかの画面上でポインティングを検出したとき、ポインティングを検出した画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、他の画面上のポインティングを無効とし、前記ポインティングを検出した画面上のポインティングが解除されたとき、他の画面上のポインティングを有効とする。
【解決手段】 画面上のポインティング状態を検出する検出手段と、多画面処理を行う画像処理手段と、前記検出手段からのポインティング情報を受信する制御手段とを備え、多画面表示を行っていないとき、前記制御手段は、画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、多画面表示を行っているとき、前記制御手段は、多画面のうちいづれかの画面上でポインティングを検出したとき、ポインティングを検出した画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、他の画面上のポインティングを無効とし、前記ポインティングを検出した画面上のポインティングが解除されたとき、他の画面上のポインティングを有効とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置および表示方法に関し、特にディジタイザシステムを備えた表示装置および表示方法に関するものである。
【背景技術】
【０００２】
近年、液晶ディスプレイ、プラズマディスプレイ、リアプロジェクションディスプレイなどのディスプレイの大型化が進んでいる。これらの大型ディスプレイは例えば駅、空港や病院などさまざまな場所で利用されている。また企業などでも会議室などに設置して、会議やプレゼンテーションで利用するといったことも多くなってきた。
【０００３】
これらの大型ディスプレイを会議やプレゼンテーションで利用するときには、例えば会議の司会者やプレゼンテーションを行う発表者などが画面上を指し示すための手段として、従来から指し棒やレーザーポインタなどが使用されてきた。一方で近年では、これまでより高機能なポインティングシステムとして、ディスプレイの画面上を指し示した位置を検出してシステムの処理と連動させるような機構を備えたものが開発されている。このようなポインティングシステムによって、例えば画面上の指示位置にカーソルなどの画像を表示して指示位置をより分かりやすくしたり、画像上に文字や図形等を描画したりすることが可能となり、操作性を向上することができる。
【０００４】
画面上の指示位置を検出する方法としては、表示装置の画面の内部に圧力センサーを備えて物体が触れたときの圧力を検出する方式、超音波あるいは赤外線の発信子およびセンサーを表示装置画面の枠部分などに配置して画面上の物体の位置を検出する方式、赤外線を発信するペンを使用してその赤外線を表示装置内部のセンサーにより受信する方式などが発明されており、そのうちいくつかは実用化されている。
【０００５】
このようなポインティングシステムにおいては、ポインティングが大きな面積にわたって検出されたときや、あるいはポインティングが複数の位置で検出されたときに、ポインティング座標を算出する必要がある。
【０００６】
従来例のひとつとして、ポインティングが複数の位置で行われた場合、画面上でポインティングされている点を全て検出して、全ポイントの重心を算出したものをポインティング座標とする方法がある。この方法では例えば、画面上の２点をポインティングした場合には、ポインティングした２点の中点が有効なポインティング座標として算出されることになる。
【０００７】
次に、ディスプレイの使い勝手をより向上させる機能として、多画面と呼ばれる技術が挙げられる。例としてはテレビジョン放送受信機において複数のチューナーを内蔵し、複数チャンネルの放送を受信してその画像を画面上に同時に表示させるという機能があり一般に普及している。他の例では、図面編集などのシステムにおいて、メイン画面の他に図面の一部分の拡大画像あるいは図面の縮小画像を表示するといった機能が一般的に利用されている。例えば特開平１０−３４００７５号公報に開示された技術においては、親画面のほかに子画面を表示して、子画面上で編集作業を行うようにして、編集操作の効率を改善している。
【特許文献１】特開平１０−３４００７５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
大型ディスプレイの使われ方の一例として、多画面を表示して、複数のオペレーターによって各画面の操作を行うことが考えられる。例えば、親画面とその縮小画面をディスプレイの画面上にそれぞれ表示して、親画面に対しては発表者が注目箇所を指し示したり上書きなどのアノテーション操作を行いながら、子画面は別のオペレーターによって例えば表示資料のページめくりやアプリケーション切り換えなど補助のための操作を行うという使い方が考えられる。
【０００９】
このとき、発表者がアノテーションを行っている最中に、オペレーターが誤って子画面上をポインティングしたとする。このとき、ポインティング座標の算出方法として、前述したような全てのポインティングの重心を算出する方法であった場合、発表者のポインティング位置と、オペレーターのポインティング位置の中間の座標が有効なポインティング座標として算出されてしまうため、発表者やオペレーターが意図しない操作が行われてしまうという問題がある。
【００１０】
本発明は上記問題点に鑑みなされたもので、その目的は、上記問題を解決しより操作性を改善した表示装置および表示方法を提供することである。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、本発明の表示装置は、映像機器の出力画像を受信し表示する表示装置において、画面上のポインティング状態を検出する検出手段と、多画面処理を行う画像処理手段と、前記検出手段からのポインティング情報を受信する制御手段とを備え、多画面表示を行っていないとき、前記制御手段は、画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、多画面表示を行っているとき、前記制御手段は、多画面のうちいづれかの画面上でポインティングを検出したとき、ポインティングを検出した画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、他の画面上のポインティングを無効とし、前記ポインティングを検出した画面上のポインティングが解除されたとき、他の画面上のポインティングを有効とすることを特徴とする。
【００１２】
また、本発明の表示方法は、映像機器の出力画像を受信し表示する表示方法であって、多画面表示を行っているかどうかを判断するステップと、多画面表示を行っていない場合、表示画像上でポインティングがあるかどうかを判定するステップと、ポインティングがあるときにはポインティング有効座標を算出し、映像機器の画像上の座標に変換し、映像機器に対して座標を送信するステップと、多画面表示を行っている場合、多画面のうちいづれかの画面の占有フラグが１かどうかを判定するステップと、いづれの占有フラグも０であるとき、各画面でのポインティングの検出を行うステップと、新たなポインティングが検出されたとき、該当する画面の占有フラグを１にセットするステップと、いづれかの占有フラグが１であるとき、該当する画面のポインティングが継続しているかどうかを判断するステップと、ポインティングが解除されていた場合は該当する画面の占有フラグを０にクリアするステップとを有することを特徴とする。
【発明の効果】
【００１３】
以上に説明したように本発明においては、多画面表示におけるポインティングシステムを備えた表示装置および表示方法において、多画面表示状態で各画面の操作を行うときのポインティング処理を、多画面表示でない通常表示時のポインティング処理から変更するようにした。この処理により、ユーザーが意図しない位置にポインティングが行われてしまうという問題を回避することができる。特に、複数のユーザーでポインティングシステムを使用するような場合により操作性を改善することができる。
【発明を実施するための最良の形態】
【００１４】
本発明の遮光型座標入力装置及びその座標入力方法、並びに制御プログラムの実施の形態について、図面を参照しながら説明する。
【００１５】
［第１の実施の形態］
本発明の第１の実施の形態である表示装置について図面を用いて説明する。
【００１６】
図１は、本発明の第１の実施の形態のシステム構成の一部を表すブロック図である。１はリアプロジェクションディスプレイ、２はパーソナルコンピュータである。
【００１７】
まずリアプロジェクションディスプレイ１はその内部に、光源ランプ、光学レンズ、ミラー、カラーフィルタ、液晶パネルなどからなる光学系が構成されている。光源ランプが発生した光は、カラーフィルタなどによりＲＧＢの３色に分離され、それぞれ液晶パネルに照射される。そして液晶パネルを透過して変調された光は投影光学系によりリアプロジェクションディスプレイ１の画面上に拡大投影されて画像が表示される。
【００１８】
リアプロジェクションディスプレイ１とパーソナルコンピュータ２は、画像ケーブル及びＵＳＢケーブルで接続されており、パーソナルコンピュータ２から出力された画像はデジタル画像受信部５に入力される。またＵＳＢラインはシステムコントロール部３の内部に備えられたＵＳＢインタフェース部に接続され、リアプロジェクションディスプレイ１とパーソナルコンピュータ２の間でＵＳＢ通信を行うようになっている。
【００１９】
パーソナルコンピュータ２は、発表資料やプレゼンテーションスライド等の編集、表示やアノテーションを行うためのアプリケーションを内蔵しており、ここでは予めユーザーが作成した発表資料を表示しているものとする。
【００２０】
デジタル画像受信部５で受信された画像は次に画像処理部６に入力される。画像処理部６では、画像とともに入力される同期信号から入力画像の解像度を判定する。そして液晶パネルの画素数と異なる場合には液晶パネル上の表示に合った画素数に変換する。ここでは入力画像の解像度が横方向１０２４画素、縦方向７６８画素からなっており、また液晶パネルは横方向１９２０画素、縦方向１０８０画素からなるものとする。
【００２１】
ここで、ユーザーはリアプロジェクションディスプレイ１が備えるＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）メニューなどから表示のパターンを選択するようになっている。例えば、入力画像の解像度を変更せずに画面の中央に表示させるリアルサイズ表示や、入力画像のアスペクト比を保ったまま画面の縦あるいは横方向のいづれかを一致させるように入力画像を変換する通常表示、または入力画像のアスペクト比を保たないで縦方向および横方向をそれぞれ変換して画面全体に表示させる全体表示、そのほか多画面表示、子画面表示などがある。まず初めには、通常表示に設定されているものとする。
【００２２】
画像処理部６はまず、横方向および縦方向の変換比率をそれぞれ算出する。
【００２３】
１０８０／７６８＝１．４０６２５
１９２０／１０２４＝１．８７５ …（１）
となる。ここで画像処理部６は入力画像のアスペクト比を保持するために、２つの変換比率を比較して低い方の変換比率である１．４０６２５を選択し、横方向および縦方向についてそれぞれ１．４０６２５倍とする拡大処理を行う。
【００２４】
１０２４×１．４０６２５＝１４４０
７６８×１．４０６２５＝１０８０ …（２）
従って、液晶パネルの縦方向の画素に合わせた形で、横方向１４４０画素、縦方向１０８０画素からなる画像を生成する。また画像処理部６においては、後述の画像の縮小表示のために、入力画像の縮小処理も行うようになっている。
【００２５】
次に画像処理部６ではコントラスト、ブライトなどの画質調整が行われる。これらの画質調整は、リアプロジェクションディスプレイ１が備えるＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）メニューなどからユーザーによって調整が行われる。
【００２６】
次にＤ／Ａ変換部７において、デジタル画像信号をアナログ画像信号に変換する。そして画像信号は、各液晶パネル８（Ｒ）、液晶パネル９（Ｇ）、および液晶パネル１０（Ｂ）に入力され、各液晶パネル上に画像が形成される。このときの画面の状態を図３に示す。リアプロジェクションディスプレイ１の画面全体を２５として横方向１９２０画素、縦方向１０８０画素あるうち、入力画像２６はその中央に表示され、左右の領域は黒表示となる。ここで画像の右下部分にあるのはアプリケーション操作のためのアイコンの一例であり、２つの矢印アイコンは次の画像へのページ送りとページ戻し、また×印アイコンはアプリケーション終了のためのアイコンである。
【００２７】
次に、ディジタイザ検出部４はリアプロジェクションディスプレイ１の画面右上部および左上部に備えられた赤外線モジュールと、画面の左右端および下端に設置された赤外線反射板からなっており、赤外線モジュールから赤外線を発信し、その反射を検出している。画面上に障害物が存在すると、発信した赤外線がさえぎられ、受信信号のレベルが変化する。従って、例えば指や指示棒などで画面上のある位置をポインティングしたようなときに、受信信号のレベル変化からその位置および大きさを検出することが出来る。さらに、本ディジタイザシステムではペンを備え、ペンによって画面上で押下操作が行われるとペンから押下信号が発信され、その信号を赤外線モジュールで検出することで押下操作を検出するようになっている。
【００２８】
システムコントロール部３はディジタイザ検出部４からの検出信号を受信して、ポインティングの位置や押下の判断を行う。
【００２９】
ポインティングの状態として、１点のみがポインティングされる場合のほかに、例えば手のひらなど面積が大きいもので画面上を触ったときや、画面上の複数の場所でポインティングが行われることなどが考えられる。このような場合に対応するために、ポインティングを検出した全ポイントの平均を有効なポインティング座標として算出するという処理を行う。すなわち座標（Ｘ１、Ｙ１）、・・・（Ｘｎ、Ｙｎ）のｎ点でポインティングを検出したときの有効なポインティング座標（Ｘｐ、Ｙｐ）は、
Ｘｐ＝（Ｘ１＋・・・＋Ｘｎ）／ｎ
Ｙｐ＝（Ｙ１＋・・・＋Ｙｎ）／ｎ …（３）
と算出する。
【００３０】
次にシステムコントロール部３は、（Ｘｐ、Ｙｐ）が画像表示２６の領域にあるか、画像表示領域以外の黒表示領域にあるかの判断を行う。全体画面２５の左上座標を（０、０）、右下座標を（１９１９、１０７９）とすると、画像表示２６は画面の中央に位置しているから、（２４０、０）から（１６７９、１０７９）の範囲となる。画像表示２６の領域でポインティングや押下が行われた場合は、システムコントロール部３は算出したポインティング座標（Ｘｐ、Ｙｐ）をパーソナルコンピュータ２の画像上の座標に変換する。パーソナルコンピュータ２の画像上の座標は、左上座標が（０、０）、右下座標が（６５５３５、６５５３５）であるとする。ポインティング座標（Ｘｐ、Ｙｐ）に対応するパーソナルコンピュータ２の画像上の座標を（Ｘｃ、Ｙｃ）とすると、
Ｘｃ＝（Ｘｐ−２４０）×６５５３５／１４３９
Ｙｃ＝Ｙｐ×６５５３５／１０７９ …（４）
となる。
【００３１】
システムコントロール部３は（Ｘｃ、Ｙｃ）を算出し、ＵＳＢを介してパーソナルコンピュータ２へ座標（Ｘｃ、Ｙｃ）や押下信号を送信する。パーソナルコンピュータ２では受信した座標に従って各操作の処理を行う。従って、ペンによる画面上へのポインティング操作により、表示している画像１への上書きや編集、またはアイコン押下によるページ送り、ページ戻し、アプリケーション終了などを行うことが出来る。
【００３２】
一方で、（Ｘｐ、Ｙｐ）が画像表示領域以外の黒表示領域、すなわち（０、０）から（２３９、１０７９）の範囲かまたは、（１６８０、０）から（１９１９、１０７９）の範囲である場合は、システムコントロール部３はパーソナルコンピュータ２へのポインティング信号の送信を行わない。
【００３３】
次に、ユーザーがＯＳＤメニューから表示状態の変更として、子画面表示を選択したとする。このときの画面の状態を図４に示す。まずパーソナルコンピュータ２から入力された画像の親画面２６は、リアプロジェクションディスプレイ１の全体画面２５の中で、右端を一致させた位置に表示される。従って、親画面２６の座標範囲は、（４８０、０）から（１９１９、１０７９）である。さらに、画面左側に空いた表示領域に入力画像を縮小した子画面２７を表示する。なお画像の縮小処理は、システムコントロール部３からの指示に従って画像処理部６において行われ、子画面２７の座標は、（４０、７００）から（４３９、９９９）の範囲であるものとする。
【００３４】
このときシステムコントロール部３は、親画面２６の領域におけるポインティング状態と、子画面２７の領域におけるポインティング状態とをそれぞれ監視する。ここでまず親画面２６の領域内でポインティングを検出したとする。
【００３５】
システムコントロール部３は、親画面２６の領域において検出したポインティング座標（ＸＡ１、ＹＡ１）、・・・（ＸＡｉ、ＹＡｉ）のｉ個の点から、親画面２６上の有効なポインティング座標（ＸＡｐ、ＹＡｐ）を算出する。
【００３６】
ＸＡｐ＝（ＸＡ１＋・・・＋ＸＡｉ）／ｉ
ＹＡｐ＝（ＹＡ１＋・・・＋ＹＡｉ）／ｉ …（５）
となる。
【００３７】
システムコントロール部３は算出したポインティング座標（ＸＡｐ、ＹＡｐ）をパーソナルコンピュータ２の画像上の座標に変換する。ポインティング座標（ＸＡｐ、ＹＡｐ）に対応するパーソナルコンピュータ２の画像上の座標を（ＸＡｃ、ＹＡｃ）とすると、
ＸＡｃ＝（ＸＡｐ−４８０）×６５５３５／１４３９
ＹＡｃ＝ＹＡｐ×６５５３５／１０７９ …（６）
となる。
【００３８】
そしてシステムコントロール部３はパーソナルコンピュータ２へ座標（ＸＡｃ、ＹＡｃ）を送信する。
【００３９】
次に、親画面２６の領域でのポインティングが継続しているときに、子画面２７の領域でポインティングを開始したとする。システムコントロール部３は、親画面２６または子画面２７におけるポインティングが継続しているときに、その領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わない。すなわちこの場合には、親画面２６のポインティングはそのまま継続されるが、子画面２７でのポインティングは無効となり操作はできない。
【００４０】
その状態で親画面２６で継続していたポインティングを解除したとする。するとシステムコントロール部３は、子画面２７でのポインティングを有効にして受け付ける。
【００４１】
システムコントロール部３は、子画面２７の領域において検出したポインティング座標（ＸＢ１、ＹＢ１）、・・・（ＸＢｊ、ＹＢｊ）のｊ個の点から、子画面１５上の有効なポインティング座標（ＸＢｐ、ＹＢｐ）を算出する。
【００４２】
ＸＢｐ＝（ＸＢ１＋・・・＋ＸＡｊ）／ｊ
ＹＢｐ＝（ＹＢ１＋・・・＋ＹＢｊ）／ｊ …（７）
となる。
【００４３】
システムコントロール部３は算出したポインティング座標（ＸＢｐ、ＹＢｐ）をパーソナルコンピュータ２の画像上の座標に変換する。ポインティング座標（ＸＢｐ、ＹＢｐ）に対応するパーソナルコンピュータ２の画像上の座標を（ＸＢｃ、ＹＢｃ）とすると、
ＸＢｃ＝（ＸＢｐ−４０）×６５５３５／３９９
ＹＢｃ＝（ＹＢｐ−７００）×６５５３５／２９９ …（８）
となる。
【００４４】
そしてシステムコントロール部３はパーソナルコンピュータ２へ座標（ＸＢｃ、ＹＢｃ）を送信する。
【００４５】
子画面２７の領域でのポインティングが継続しているときには、親画面２６の領域でポインティングを開始しても、子画面２７のポインティングが継続され、親画面１４でのポインティングは無効となり操作はできない。
【００４６】
なお本実施の形態においては上述のように、システムコントロール部３は、親画面２６または子画面２７におけるポインティングが継続しているときにその領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わないようにしたが、他の例として、親画面２６でのポインティングを常に優先するようにしてもよい。その場合には、子画面２７の領域でのポインティングが継続しているとき親画面２６の領域でポインティングを開始した場合に、その時点で子画面２７のポインティングが無効となり、親画面２６でのポインティングが有効となる。また同様にして、子画面２７でのポインティングを優先するようにしても良い。
【００４７】
［第２の実施の形態］
本発明の第２の実施の形態として、リアプロジェクションディスプレイに対してパーソナルコンピュータを３台接続して構成した例について説明する。
【００４８】
図２は、本発明の第２の実施の形態のシステム構成の一部を表すブロック図である。１１はリアプロジェクションディスプレイ、１２、１３、および１４はパーソナルコンピュータである。
【００４９】
リアプロジェクションディスプレイ１１とパーソナルコンピュータ１２、パーソナルコンピュータ１３およびパーソナルコンピュータ１４は、ＵＳＢケーブルによってリアプロジェクションディスプレイ１１内部のシステムコントロール部１５に備えられたＵＳＢインタフェース部にそれぞれ接続され、リアプロジェクションディスプレイ１１と各パーソナルコンピュータの間でＵＳＢ通信を行うようになっている。
【００５０】
３台のパーソナルコンピュータからはアナログ画像が出力され、それぞれリアプロジェクションディスプレイ１１内部のＡ／Ｄ変換部１７、１８および１９に入力される。各画像信号はＡ／Ｄ変換部１７、１８および１９でデジタル信号に変換され、画像処理部２０に入力される。
【００５１】
ユーザーはリアプロジェクションディスプレイ１１が備えるＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）メニューなどから表示のパターンを選択するようになっている。図３に示したように入力画像のいづれかひとつを表示する通常の表示のほかに、図５に示したように３つの入力画像を同時に表示する多画面表示などがある。ここでは図５の多画面表示が選択され表示されているとする。
【００５２】
画像処理部２０においては、各入力画像に対して拡大あるいは縮小処理を行ったのち各画像の出力タイミングを調整して、図５の多画面表示を生成する。画像処理部２０により多画面化され出力された画像信号はＤ／Ａ変換部２１においてデジタルからアナログ信号に変換される。そして各液晶パネル２２（Ｒ）、液晶パネル２３（Ｇ）、および液晶パネル２４（Ｂ）に入力され、各液晶パネル上に画像が形成される。
【００５３】
システムコントロール部１５はディジタイザ検出部１６からの検出信号を受信して、ポインティングの位置や押下の判断を行う。
【００５４】
多画面状態においては、システムコントロール部１５は、各画面２８、２９および３０の領域におけるポインティング状態をそれぞれ監視する。
【００５５】
ここで例えば、初めに画面２８の領域でのポインティングが継続していたときに、画面２９の領域でポインティングを開始したとする。システムコントロール部１５は、画面２８、２９または３０のうちいづれかにおいてポインティングが継続しているときには、その領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わない。すなわちこの場合には、画面２８のポインティングはそのまま継続されるが、画面２９で開始したポインティングは無効となり操作はできない。ポインティング検出後はパーソナルコンピュータ画像上の座標への変換、パーソナルコンピュータへの座標信号送信を行うが、処理の手順は第１の実施の形態と同様であり詳細な説明は省く。
【００５６】
その後、画面２８で継続していたポインティングを解除したら、システムコントロール部３は、画面２９でのポインティングを有効にして受け付けるようにする。
【００５７】
なお本実施の形態においては上述のように、システムコントロール部１５は、いづれかの画面におけるポインティングが継続しているときにその領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わないようにしたが、他の例として、特定の画面でのポインティングを常に優先するようにしてもよい。その場合には、非優先の画面でのポインティングが継続しているときに優先画面でポインティングを開始した場合に、その時点で非優先画面のポインティングが無効となり、優先画面でのポインティングが有効となる。
【００５８】
［第３の実施の形態］
本発明の第３の実施の形態である表示方法について説明する。
【００５９】
構成は本発明の第２の実施の形態と同様である。システムコントロール部１５は、リアプロジェクションディスプレイ１１内部のシステム全体の制御を行っている。その中で、ディジタイザに関わる処理のフローを図６に示し、その処理について説明する。
【００６０】
図６のディジタイザ処理は、システムコントロール部１５の内部に備えたタイマーなどを使用して定期的に実行されるように設定されている。ここでは１０ｍｓごとに実行されるように設定されているものとする。
【００６１】
ディジタイザ処理が開始されると、まずＳ６０２で、多画面表示を行っているかどうかの判断を行う。多画面表示を行っていない場合、すなわち図３に示したような、入力画像のアスペクト比を保ったまま画面の縦あるいは横方向のいづれかを一致させるように入力画像を変換する通常表示やあるいは、入力画像の解像度を変更せずに画面の中央に表示させるリアルサイズ表示、または入力画像のアスペクト比を保たないで縦方向および横方向をそれぞれ変換して画面全体に表示させる全体表示などである場合は、Ｓ６０８で、表示画像上でポインティングがあるかどうかを判定する。ポインティングが無いときにはＳ６１２へ進みディジタイザ処理を終了する。ポインティングがあるときにはＳ６０５へ進み、ポインティング有効座標を算出する。次にＳ６０６で、該当するパーソナルコンピュータの画像上の座標に変換する。なおポインティング有効座標の算出方法、パーソナルコンピュータの画像上の座標への変換の手順は第１の実施の形態において述べた手順と同様であり詳細な説明は省く。Ｓ６０７でパーソナルコンピュータ２に対して座標を送信し、Ｓ６１２でディジタイザ処理を終了する。
【００６２】
次に、図５に示した多画面表示を行っている場合について説明する。この場合にはＳ６０２において多画面表示を行っていると判断されＳ６０３へ進む。Ｓ６０３では、ディジタイザが画面２８、２９、３０のうちいづれかの画面によって占有されているか、すなわち現在ポインティングが継続されているかどうかを示すディジタイザ占有フラグが１かどうかを判定する。画面２８、２９、３０のディジタイザ占有フラグがともに０であるならＳ６０９へ進む。Ｓ６０９では、画面２８、２９、３０でのポインティングの検出を行う。
【００６３】
ポインティングが無いならばＳ６１２に達しディジタイザ処理を終了する。ここでは、画面３０において新たなポインティングが検出されたとする。その場合はＳ６１０で画面３０のディジタイザ占有フラグを１にセットする。次にＳ６０５以降へ進み、ポインティング有効座標の算出、パーソナルコンピュータの画像上の座標への変換、パーソナルコンピュータへの座標の送信を行い、Ｓ６１２でディジタイザ処理を終了する。
【００６４】
１０ｍｓが経過して次のディジタイザ処理が開始されるとＳ６０３の判断において、上述のように画面３０のディジタイザ占有フラグが１となっているから、Ｓ６０４へ進む。Ｓ６０４ではディジタイザの占有が継続しているかどうかを判断する。画面３０でのポインティングが継続している場合はＳ６０５以降へ進み、ポインティング有効座標の算出、パーソナルコンピュータの画像上の座標への変換、パーソナルコンピュータへの座標の送信を行い、Ｓ６１２でディジタイザ処理を終了する。画面３０でのポインティングが解除されていた場合はＳ６１１へ進み、画面３０のディジタイザ占有フラグを０にクリアしたのちディジタイザ処理を終了する。
【００６５】
以上に説明した処理によって、多画面表示などの場合、ある画面でポインティングを継続している場合には、他の画面でのポインティングを無効として、ポインティングが終了した時点で他の画面のポインティングを有効とするという機能が実現できる。
【図面の簡単な説明】
【００６６】
【図１】本発明の第１の実施の形態の構成の一部を表すブロック図である。
【図２】本発明の第２の実施の形態の構成の一部を表すブロック図である。
【図３】画面の表示状態を示す図である。
【図４】子画面表示の例を示す図である。
【図５】多画面表示の例を示す図である。
【図６】本発明の第３の実施の形態の表示方法を示すフローチャートである。
【符号の説明】
【００６７】
１ リアプロジェクションディスプレイ
２ パーソナルコンピュータ
３ システムコントロール部
４ ディジタイザ検出部
５ デジタル画像受信部
６ 画像処理部
７ Ｄ／Ａ変換部
８ 液晶パネル（Ｒ）
９ 液晶パネル（Ｇ）
１０ および液晶パネル（Ｂ）
１１ リアプロジェクションディスプレイ
１２ パーソナルコンピュータ
１３ パーソナルコンピュータ
１４ パーソナルコンピュータ
１５ システムコントロール部
１６ ディジタイザ検出部
１７ Ａ／Ｄ変換部
１８ Ａ／Ｄ変換部
１９ Ａ／Ｄ変換部
２０ 画像処理部
２１ Ｄ／Ａ変換部
２２ 液晶パネル（Ｒ）
２３ 液晶パネル（Ｇ）
２４ 液晶パネル（Ｂ）
２５ 全体画面
２６ 画像表示部分
２７ 子画面
２８ 画像表示部分
２９ 画像表示部分
３０ 画像表示部分
【技術分野】
【０００１】
本発明は、表示装置および表示方法に関し、特にディジタイザシステムを備えた表示装置および表示方法に関するものである。
【背景技術】
【０００２】
近年、液晶ディスプレイ、プラズマディスプレイ、リアプロジェクションディスプレイなどのディスプレイの大型化が進んでいる。これらの大型ディスプレイは例えば駅、空港や病院などさまざまな場所で利用されている。また企業などでも会議室などに設置して、会議やプレゼンテーションで利用するといったことも多くなってきた。
【０００３】
これらの大型ディスプレイを会議やプレゼンテーションで利用するときには、例えば会議の司会者やプレゼンテーションを行う発表者などが画面上を指し示すための手段として、従来から指し棒やレーザーポインタなどが使用されてきた。一方で近年では、これまでより高機能なポインティングシステムとして、ディスプレイの画面上を指し示した位置を検出してシステムの処理と連動させるような機構を備えたものが開発されている。このようなポインティングシステムによって、例えば画面上の指示位置にカーソルなどの画像を表示して指示位置をより分かりやすくしたり、画像上に文字や図形等を描画したりすることが可能となり、操作性を向上することができる。
【０００４】
画面上の指示位置を検出する方法としては、表示装置の画面の内部に圧力センサーを備えて物体が触れたときの圧力を検出する方式、超音波あるいは赤外線の発信子およびセンサーを表示装置画面の枠部分などに配置して画面上の物体の位置を検出する方式、赤外線を発信するペンを使用してその赤外線を表示装置内部のセンサーにより受信する方式などが発明されており、そのうちいくつかは実用化されている。
【０００５】
このようなポインティングシステムにおいては、ポインティングが大きな面積にわたって検出されたときや、あるいはポインティングが複数の位置で検出されたときに、ポインティング座標を算出する必要がある。
【０００６】
従来例のひとつとして、ポインティングが複数の位置で行われた場合、画面上でポインティングされている点を全て検出して、全ポイントの重心を算出したものをポインティング座標とする方法がある。この方法では例えば、画面上の２点をポインティングした場合には、ポインティングした２点の中点が有効なポインティング座標として算出されることになる。
【０００７】
次に、ディスプレイの使い勝手をより向上させる機能として、多画面と呼ばれる技術が挙げられる。例としてはテレビジョン放送受信機において複数のチューナーを内蔵し、複数チャンネルの放送を受信してその画像を画面上に同時に表示させるという機能があり一般に普及している。他の例では、図面編集などのシステムにおいて、メイン画面の他に図面の一部分の拡大画像あるいは図面の縮小画像を表示するといった機能が一般的に利用されている。例えば特開平１０−３４００７５号公報に開示された技術においては、親画面のほかに子画面を表示して、子画面上で編集作業を行うようにして、編集操作の効率を改善している。
【特許文献１】特開平１０−３４００７５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
大型ディスプレイの使われ方の一例として、多画面を表示して、複数のオペレーターによって各画面の操作を行うことが考えられる。例えば、親画面とその縮小画面をディスプレイの画面上にそれぞれ表示して、親画面に対しては発表者が注目箇所を指し示したり上書きなどのアノテーション操作を行いながら、子画面は別のオペレーターによって例えば表示資料のページめくりやアプリケーション切り換えなど補助のための操作を行うという使い方が考えられる。
【０００９】
このとき、発表者がアノテーションを行っている最中に、オペレーターが誤って子画面上をポインティングしたとする。このとき、ポインティング座標の算出方法として、前述したような全てのポインティングの重心を算出する方法であった場合、発表者のポインティング位置と、オペレーターのポインティング位置の中間の座標が有効なポインティング座標として算出されてしまうため、発表者やオペレーターが意図しない操作が行われてしまうという問題がある。
【００１０】
本発明は上記問題点に鑑みなされたもので、その目的は、上記問題を解決しより操作性を改善した表示装置および表示方法を提供することである。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、本発明の表示装置は、映像機器の出力画像を受信し表示する表示装置において、画面上のポインティング状態を検出する検出手段と、多画面処理を行う画像処理手段と、前記検出手段からのポインティング情報を受信する制御手段とを備え、多画面表示を行っていないとき、前記制御手段は、画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、多画面表示を行っているとき、前記制御手段は、多画面のうちいづれかの画面上でポインティングを検出したとき、ポインティングを検出した画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、他の画面上のポインティングを無効とし、前記ポインティングを検出した画面上のポインティングが解除されたとき、他の画面上のポインティングを有効とすることを特徴とする。
【００１２】
また、本発明の表示方法は、映像機器の出力画像を受信し表示する表示方法であって、多画面表示を行っているかどうかを判断するステップと、多画面表示を行っていない場合、表示画像上でポインティングがあるかどうかを判定するステップと、ポインティングがあるときにはポインティング有効座標を算出し、映像機器の画像上の座標に変換し、映像機器に対して座標を送信するステップと、多画面表示を行っている場合、多画面のうちいづれかの画面の占有フラグが１かどうかを判定するステップと、いづれの占有フラグも０であるとき、各画面でのポインティングの検出を行うステップと、新たなポインティングが検出されたとき、該当する画面の占有フラグを１にセットするステップと、いづれかの占有フラグが１であるとき、該当する画面のポインティングが継続しているかどうかを判断するステップと、ポインティングが解除されていた場合は該当する画面の占有フラグを０にクリアするステップとを有することを特徴とする。
【発明の効果】
【００１３】
以上に説明したように本発明においては、多画面表示におけるポインティングシステムを備えた表示装置および表示方法において、多画面表示状態で各画面の操作を行うときのポインティング処理を、多画面表示でない通常表示時のポインティング処理から変更するようにした。この処理により、ユーザーが意図しない位置にポインティングが行われてしまうという問題を回避することができる。特に、複数のユーザーでポインティングシステムを使用するような場合により操作性を改善することができる。
【発明を実施するための最良の形態】
【００１４】
本発明の遮光型座標入力装置及びその座標入力方法、並びに制御プログラムの実施の形態について、図面を参照しながら説明する。
【００１５】
［第１の実施の形態］
本発明の第１の実施の形態である表示装置について図面を用いて説明する。
【００１６】
図１は、本発明の第１の実施の形態のシステム構成の一部を表すブロック図である。１はリアプロジェクションディスプレイ、２はパーソナルコンピュータである。
【００１７】
まずリアプロジェクションディスプレイ１はその内部に、光源ランプ、光学レンズ、ミラー、カラーフィルタ、液晶パネルなどからなる光学系が構成されている。光源ランプが発生した光は、カラーフィルタなどによりＲＧＢの３色に分離され、それぞれ液晶パネルに照射される。そして液晶パネルを透過して変調された光は投影光学系によりリアプロジェクションディスプレイ１の画面上に拡大投影されて画像が表示される。
【００１８】
リアプロジェクションディスプレイ１とパーソナルコンピュータ２は、画像ケーブル及びＵＳＢケーブルで接続されており、パーソナルコンピュータ２から出力された画像はデジタル画像受信部５に入力される。またＵＳＢラインはシステムコントロール部３の内部に備えられたＵＳＢインタフェース部に接続され、リアプロジェクションディスプレイ１とパーソナルコンピュータ２の間でＵＳＢ通信を行うようになっている。
【００１９】
パーソナルコンピュータ２は、発表資料やプレゼンテーションスライド等の編集、表示やアノテーションを行うためのアプリケーションを内蔵しており、ここでは予めユーザーが作成した発表資料を表示しているものとする。
【００２０】
デジタル画像受信部５で受信された画像は次に画像処理部６に入力される。画像処理部６では、画像とともに入力される同期信号から入力画像の解像度を判定する。そして液晶パネルの画素数と異なる場合には液晶パネル上の表示に合った画素数に変換する。ここでは入力画像の解像度が横方向１０２４画素、縦方向７６８画素からなっており、また液晶パネルは横方向１９２０画素、縦方向１０８０画素からなるものとする。
【００２１】
ここで、ユーザーはリアプロジェクションディスプレイ１が備えるＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）メニューなどから表示のパターンを選択するようになっている。例えば、入力画像の解像度を変更せずに画面の中央に表示させるリアルサイズ表示や、入力画像のアスペクト比を保ったまま画面の縦あるいは横方向のいづれかを一致させるように入力画像を変換する通常表示、または入力画像のアスペクト比を保たないで縦方向および横方向をそれぞれ変換して画面全体に表示させる全体表示、そのほか多画面表示、子画面表示などがある。まず初めには、通常表示に設定されているものとする。
【００２２】
画像処理部６はまず、横方向および縦方向の変換比率をそれぞれ算出する。
【００２３】
１０８０／７６８＝１．４０６２５
１９２０／１０２４＝１．８７５ …（１）
となる。ここで画像処理部６は入力画像のアスペクト比を保持するために、２つの変換比率を比較して低い方の変換比率である１．４０６２５を選択し、横方向および縦方向についてそれぞれ１．４０６２５倍とする拡大処理を行う。
【００２４】
１０２４×１．４０６２５＝１４４０
７６８×１．４０６２５＝１０８０ …（２）
従って、液晶パネルの縦方向の画素に合わせた形で、横方向１４４０画素、縦方向１０８０画素からなる画像を生成する。また画像処理部６においては、後述の画像の縮小表示のために、入力画像の縮小処理も行うようになっている。
【００２５】
次に画像処理部６ではコントラスト、ブライトなどの画質調整が行われる。これらの画質調整は、リアプロジェクションディスプレイ１が備えるＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）メニューなどからユーザーによって調整が行われる。
【００２６】
次にＤ／Ａ変換部７において、デジタル画像信号をアナログ画像信号に変換する。そして画像信号は、各液晶パネル８（Ｒ）、液晶パネル９（Ｇ）、および液晶パネル１０（Ｂ）に入力され、各液晶パネル上に画像が形成される。このときの画面の状態を図３に示す。リアプロジェクションディスプレイ１の画面全体を２５として横方向１９２０画素、縦方向１０８０画素あるうち、入力画像２６はその中央に表示され、左右の領域は黒表示となる。ここで画像の右下部分にあるのはアプリケーション操作のためのアイコンの一例であり、２つの矢印アイコンは次の画像へのページ送りとページ戻し、また×印アイコンはアプリケーション終了のためのアイコンである。
【００２７】
次に、ディジタイザ検出部４はリアプロジェクションディスプレイ１の画面右上部および左上部に備えられた赤外線モジュールと、画面の左右端および下端に設置された赤外線反射板からなっており、赤外線モジュールから赤外線を発信し、その反射を検出している。画面上に障害物が存在すると、発信した赤外線がさえぎられ、受信信号のレベルが変化する。従って、例えば指や指示棒などで画面上のある位置をポインティングしたようなときに、受信信号のレベル変化からその位置および大きさを検出することが出来る。さらに、本ディジタイザシステムではペンを備え、ペンによって画面上で押下操作が行われるとペンから押下信号が発信され、その信号を赤外線モジュールで検出することで押下操作を検出するようになっている。
【００２８】
システムコントロール部３はディジタイザ検出部４からの検出信号を受信して、ポインティングの位置や押下の判断を行う。
【００２９】
ポインティングの状態として、１点のみがポインティングされる場合のほかに、例えば手のひらなど面積が大きいもので画面上を触ったときや、画面上の複数の場所でポインティングが行われることなどが考えられる。このような場合に対応するために、ポインティングを検出した全ポイントの平均を有効なポインティング座標として算出するという処理を行う。すなわち座標（Ｘ１、Ｙ１）、・・・（Ｘｎ、Ｙｎ）のｎ点でポインティングを検出したときの有効なポインティング座標（Ｘｐ、Ｙｐ）は、
Ｘｐ＝（Ｘ１＋・・・＋Ｘｎ）／ｎ
Ｙｐ＝（Ｙ１＋・・・＋Ｙｎ）／ｎ …（３）
と算出する。
【００３０】
次にシステムコントロール部３は、（Ｘｐ、Ｙｐ）が画像表示２６の領域にあるか、画像表示領域以外の黒表示領域にあるかの判断を行う。全体画面２５の左上座標を（０、０）、右下座標を（１９１９、１０７９）とすると、画像表示２６は画面の中央に位置しているから、（２４０、０）から（１６７９、１０７９）の範囲となる。画像表示２６の領域でポインティングや押下が行われた場合は、システムコントロール部３は算出したポインティング座標（Ｘｐ、Ｙｐ）をパーソナルコンピュータ２の画像上の座標に変換する。パーソナルコンピュータ２の画像上の座標は、左上座標が（０、０）、右下座標が（６５５３５、６５５３５）であるとする。ポインティング座標（Ｘｐ、Ｙｐ）に対応するパーソナルコンピュータ２の画像上の座標を（Ｘｃ、Ｙｃ）とすると、
Ｘｃ＝（Ｘｐ−２４０）×６５５３５／１４３９
Ｙｃ＝Ｙｐ×６５５３５／１０７９ …（４）
となる。
【００３１】
システムコントロール部３は（Ｘｃ、Ｙｃ）を算出し、ＵＳＢを介してパーソナルコンピュータ２へ座標（Ｘｃ、Ｙｃ）や押下信号を送信する。パーソナルコンピュータ２では受信した座標に従って各操作の処理を行う。従って、ペンによる画面上へのポインティング操作により、表示している画像１への上書きや編集、またはアイコン押下によるページ送り、ページ戻し、アプリケーション終了などを行うことが出来る。
【００３２】
一方で、（Ｘｐ、Ｙｐ）が画像表示領域以外の黒表示領域、すなわち（０、０）から（２３９、１０７９）の範囲かまたは、（１６８０、０）から（１９１９、１０７９）の範囲である場合は、システムコントロール部３はパーソナルコンピュータ２へのポインティング信号の送信を行わない。
【００３３】
次に、ユーザーがＯＳＤメニューから表示状態の変更として、子画面表示を選択したとする。このときの画面の状態を図４に示す。まずパーソナルコンピュータ２から入力された画像の親画面２６は、リアプロジェクションディスプレイ１の全体画面２５の中で、右端を一致させた位置に表示される。従って、親画面２６の座標範囲は、（４８０、０）から（１９１９、１０７９）である。さらに、画面左側に空いた表示領域に入力画像を縮小した子画面２７を表示する。なお画像の縮小処理は、システムコントロール部３からの指示に従って画像処理部６において行われ、子画面２７の座標は、（４０、７００）から（４３９、９９９）の範囲であるものとする。
【００３４】
このときシステムコントロール部３は、親画面２６の領域におけるポインティング状態と、子画面２７の領域におけるポインティング状態とをそれぞれ監視する。ここでまず親画面２６の領域内でポインティングを検出したとする。
【００３５】
システムコントロール部３は、親画面２６の領域において検出したポインティング座標（ＸＡ１、ＹＡ１）、・・・（ＸＡｉ、ＹＡｉ）のｉ個の点から、親画面２６上の有効なポインティング座標（ＸＡｐ、ＹＡｐ）を算出する。
【００３６】
ＸＡｐ＝（ＸＡ１＋・・・＋ＸＡｉ）／ｉ
ＹＡｐ＝（ＹＡ１＋・・・＋ＹＡｉ）／ｉ …（５）
となる。
【００３７】
システムコントロール部３は算出したポインティング座標（ＸＡｐ、ＹＡｐ）をパーソナルコンピュータ２の画像上の座標に変換する。ポインティング座標（ＸＡｐ、ＹＡｐ）に対応するパーソナルコンピュータ２の画像上の座標を（ＸＡｃ、ＹＡｃ）とすると、
ＸＡｃ＝（ＸＡｐ−４８０）×６５５３５／１４３９
ＹＡｃ＝ＹＡｐ×６５５３５／１０７９ …（６）
となる。
【００３８】
そしてシステムコントロール部３はパーソナルコンピュータ２へ座標（ＸＡｃ、ＹＡｃ）を送信する。
【００３９】
次に、親画面２６の領域でのポインティングが継続しているときに、子画面２７の領域でポインティングを開始したとする。システムコントロール部３は、親画面２６または子画面２７におけるポインティングが継続しているときに、その領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わない。すなわちこの場合には、親画面２６のポインティングはそのまま継続されるが、子画面２７でのポインティングは無効となり操作はできない。
【００４０】
その状態で親画面２６で継続していたポインティングを解除したとする。するとシステムコントロール部３は、子画面２７でのポインティングを有効にして受け付ける。
【００４１】
システムコントロール部３は、子画面２７の領域において検出したポインティング座標（ＸＢ１、ＹＢ１）、・・・（ＸＢｊ、ＹＢｊ）のｊ個の点から、子画面１５上の有効なポインティング座標（ＸＢｐ、ＹＢｐ）を算出する。
【００４２】
ＸＢｐ＝（ＸＢ１＋・・・＋ＸＡｊ）／ｊ
ＹＢｐ＝（ＹＢ１＋・・・＋ＹＢｊ）／ｊ …（７）
となる。
【００４３】
システムコントロール部３は算出したポインティング座標（ＸＢｐ、ＹＢｐ）をパーソナルコンピュータ２の画像上の座標に変換する。ポインティング座標（ＸＢｐ、ＹＢｐ）に対応するパーソナルコンピュータ２の画像上の座標を（ＸＢｃ、ＹＢｃ）とすると、
ＸＢｃ＝（ＸＢｐ−４０）×６５５３５／３９９
ＹＢｃ＝（ＹＢｐ−７００）×６５５３５／２９９ …（８）
となる。
【００４４】
そしてシステムコントロール部３はパーソナルコンピュータ２へ座標（ＸＢｃ、ＹＢｃ）を送信する。
【００４５】
子画面２７の領域でのポインティングが継続しているときには、親画面２６の領域でポインティングを開始しても、子画面２７のポインティングが継続され、親画面１４でのポインティングは無効となり操作はできない。
【００４６】
なお本実施の形態においては上述のように、システムコントロール部３は、親画面２６または子画面２７におけるポインティングが継続しているときにその領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わないようにしたが、他の例として、親画面２６でのポインティングを常に優先するようにしてもよい。その場合には、子画面２７の領域でのポインティングが継続しているとき親画面２６の領域でポインティングを開始した場合に、その時点で子画面２７のポインティングが無効となり、親画面２６でのポインティングが有効となる。また同様にして、子画面２７でのポインティングを優先するようにしても良い。
【００４７】
［第２の実施の形態］
本発明の第２の実施の形態として、リアプロジェクションディスプレイに対してパーソナルコンピュータを３台接続して構成した例について説明する。
【００４８】
図２は、本発明の第２の実施の形態のシステム構成の一部を表すブロック図である。１１はリアプロジェクションディスプレイ、１２、１３、および１４はパーソナルコンピュータである。
【００４９】
リアプロジェクションディスプレイ１１とパーソナルコンピュータ１２、パーソナルコンピュータ１３およびパーソナルコンピュータ１４は、ＵＳＢケーブルによってリアプロジェクションディスプレイ１１内部のシステムコントロール部１５に備えられたＵＳＢインタフェース部にそれぞれ接続され、リアプロジェクションディスプレイ１１と各パーソナルコンピュータの間でＵＳＢ通信を行うようになっている。
【００５０】
３台のパーソナルコンピュータからはアナログ画像が出力され、それぞれリアプロジェクションディスプレイ１１内部のＡ／Ｄ変換部１７、１８および１９に入力される。各画像信号はＡ／Ｄ変換部１７、１８および１９でデジタル信号に変換され、画像処理部２０に入力される。
【００５１】
ユーザーはリアプロジェクションディスプレイ１１が備えるＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）メニューなどから表示のパターンを選択するようになっている。図３に示したように入力画像のいづれかひとつを表示する通常の表示のほかに、図５に示したように３つの入力画像を同時に表示する多画面表示などがある。ここでは図５の多画面表示が選択され表示されているとする。
【００５２】
画像処理部２０においては、各入力画像に対して拡大あるいは縮小処理を行ったのち各画像の出力タイミングを調整して、図５の多画面表示を生成する。画像処理部２０により多画面化され出力された画像信号はＤ／Ａ変換部２１においてデジタルからアナログ信号に変換される。そして各液晶パネル２２（Ｒ）、液晶パネル２３（Ｇ）、および液晶パネル２４（Ｂ）に入力され、各液晶パネル上に画像が形成される。
【００５３】
システムコントロール部１５はディジタイザ検出部１６からの検出信号を受信して、ポインティングの位置や押下の判断を行う。
【００５４】
多画面状態においては、システムコントロール部１５は、各画面２８、２９および３０の領域におけるポインティング状態をそれぞれ監視する。
【００５５】
ここで例えば、初めに画面２８の領域でのポインティングが継続していたときに、画面２９の領域でポインティングを開始したとする。システムコントロール部１５は、画面２８、２９または３０のうちいづれかにおいてポインティングが継続しているときには、その領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わない。すなわちこの場合には、画面２８のポインティングはそのまま継続されるが、画面２９で開始したポインティングは無効となり操作はできない。ポインティング検出後はパーソナルコンピュータ画像上の座標への変換、パーソナルコンピュータへの座標信号送信を行うが、処理の手順は第１の実施の形態と同様であり詳細な説明は省く。
【００５６】
その後、画面２８で継続していたポインティングを解除したら、システムコントロール部３は、画面２９でのポインティングを有効にして受け付けるようにする。
【００５７】
なお本実施の形態においては上述のように、システムコントロール部１５は、いづれかの画面におけるポインティングが継続しているときにその領域以外でのポインティングが発生した場合、そのポインティングを無効と判断して処理を行わないようにしたが、他の例として、特定の画面でのポインティングを常に優先するようにしてもよい。その場合には、非優先の画面でのポインティングが継続しているときに優先画面でポインティングを開始した場合に、その時点で非優先画面のポインティングが無効となり、優先画面でのポインティングが有効となる。
【００５８】
［第３の実施の形態］
本発明の第３の実施の形態である表示方法について説明する。
【００５９】
構成は本発明の第２の実施の形態と同様である。システムコントロール部１５は、リアプロジェクションディスプレイ１１内部のシステム全体の制御を行っている。その中で、ディジタイザに関わる処理のフローを図６に示し、その処理について説明する。
【００６０】
図６のディジタイザ処理は、システムコントロール部１５の内部に備えたタイマーなどを使用して定期的に実行されるように設定されている。ここでは１０ｍｓごとに実行されるように設定されているものとする。
【００６１】
ディジタイザ処理が開始されると、まずＳ６０２で、多画面表示を行っているかどうかの判断を行う。多画面表示を行っていない場合、すなわち図３に示したような、入力画像のアスペクト比を保ったまま画面の縦あるいは横方向のいづれかを一致させるように入力画像を変換する通常表示やあるいは、入力画像の解像度を変更せずに画面の中央に表示させるリアルサイズ表示、または入力画像のアスペクト比を保たないで縦方向および横方向をそれぞれ変換して画面全体に表示させる全体表示などである場合は、Ｓ６０８で、表示画像上でポインティングがあるかどうかを判定する。ポインティングが無いときにはＳ６１２へ進みディジタイザ処理を終了する。ポインティングがあるときにはＳ６０５へ進み、ポインティング有効座標を算出する。次にＳ６０６で、該当するパーソナルコンピュータの画像上の座標に変換する。なおポインティング有効座標の算出方法、パーソナルコンピュータの画像上の座標への変換の手順は第１の実施の形態において述べた手順と同様であり詳細な説明は省く。Ｓ６０７でパーソナルコンピュータ２に対して座標を送信し、Ｓ６１２でディジタイザ処理を終了する。
【００６２】
次に、図５に示した多画面表示を行っている場合について説明する。この場合にはＳ６０２において多画面表示を行っていると判断されＳ６０３へ進む。Ｓ６０３では、ディジタイザが画面２８、２９、３０のうちいづれかの画面によって占有されているか、すなわち現在ポインティングが継続されているかどうかを示すディジタイザ占有フラグが１かどうかを判定する。画面２８、２９、３０のディジタイザ占有フラグがともに０であるならＳ６０９へ進む。Ｓ６０９では、画面２８、２９、３０でのポインティングの検出を行う。
【００６３】
ポインティングが無いならばＳ６１２に達しディジタイザ処理を終了する。ここでは、画面３０において新たなポインティングが検出されたとする。その場合はＳ６１０で画面３０のディジタイザ占有フラグを１にセットする。次にＳ６０５以降へ進み、ポインティング有効座標の算出、パーソナルコンピュータの画像上の座標への変換、パーソナルコンピュータへの座標の送信を行い、Ｓ６１２でディジタイザ処理を終了する。
【００６４】
１０ｍｓが経過して次のディジタイザ処理が開始されるとＳ６０３の判断において、上述のように画面３０のディジタイザ占有フラグが１となっているから、Ｓ６０４へ進む。Ｓ６０４ではディジタイザの占有が継続しているかどうかを判断する。画面３０でのポインティングが継続している場合はＳ６０５以降へ進み、ポインティング有効座標の算出、パーソナルコンピュータの画像上の座標への変換、パーソナルコンピュータへの座標の送信を行い、Ｓ６１２でディジタイザ処理を終了する。画面３０でのポインティングが解除されていた場合はＳ６１１へ進み、画面３０のディジタイザ占有フラグを０にクリアしたのちディジタイザ処理を終了する。
【００６５】
以上に説明した処理によって、多画面表示などの場合、ある画面でポインティングを継続している場合には、他の画面でのポインティングを無効として、ポインティングが終了した時点で他の画面のポインティングを有効とするという機能が実現できる。
【図面の簡単な説明】
【００６６】
【図１】本発明の第１の実施の形態の構成の一部を表すブロック図である。
【図２】本発明の第２の実施の形態の構成の一部を表すブロック図である。
【図３】画面の表示状態を示す図である。
【図４】子画面表示の例を示す図である。
【図５】多画面表示の例を示す図である。
【図６】本発明の第３の実施の形態の表示方法を示すフローチャートである。
【符号の説明】
【００６７】
１ リアプロジェクションディスプレイ
２ パーソナルコンピュータ
３ システムコントロール部
４ ディジタイザ検出部
５ デジタル画像受信部
６ 画像処理部
７ Ｄ／Ａ変換部
８ 液晶パネル（Ｒ）
９ 液晶パネル（Ｇ）
１０ および液晶パネル（Ｂ）
１１ リアプロジェクションディスプレイ
１２ パーソナルコンピュータ
１３ パーソナルコンピュータ
１４ パーソナルコンピュータ
１５ システムコントロール部
１６ ディジタイザ検出部
１７ Ａ／Ｄ変換部
１８ Ａ／Ｄ変換部
１９ Ａ／Ｄ変換部
２０ 画像処理部
２１ Ｄ／Ａ変換部
２２ 液晶パネル（Ｒ）
２３ 液晶パネル（Ｇ）
２４ 液晶パネル（Ｂ）
２５ 全体画面
２６ 画像表示部分
２７ 子画面
２８ 画像表示部分
２９ 画像表示部分
３０ 画像表示部分
【特許請求の範囲】
【請求項１】
映像機器の出力画像を受信し表示する表示装置において、
画面上のポインティング状態を検出する検出手段と、
多画面処理を行う画像処理手段と、
前記検出手段からのポインティング情報を受信する制御手段とを備え、
多画面表示を行っていないとき、前記制御手段は、画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、
多画面表示を行っているとき、前記制御手段は、多画面のうちいづれかの画面上でポインティングを検出したとき、ポインティングを検出した画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、他の画面上のポインティングを無効とし、
前記ポインティングを検出した画面上のポインティングが解除されたとき、他の画面上のポインティングを有効とすることを特徴とする表示装置。
【請求項２】
前記制御手段は、算出した前記有効なポインティング座標を、前記ポインティングを検出した画面内に表示された画像上の座標に変換し、前記映像機器に送信することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記多画面表示は、前記映像機器の出力画像の表示画面とその縮小画面からなる２画面表示であることを特徴とする請求項１または２に記載の表示装置。
【請求項４】
前記多画面表示は、複数の前記映像機器の出力画像を同時に表示することを特徴とする請求項１または２に記載の表示装置。
【請求項５】
映像機器の出力画像を受信し表示する表示方法であって、
多画面表示を行っているかどうかを判断するステップと、
多画面表示を行っていない場合、表示画像上でポインティングがあるかどうかを判定するステップと、
ポインティングがあるときにはポインティング有効座標を算出し、映像機器の画像上の座標に変換し、映像機器に対して座標を送信するステップと、
多画面表示を行っている場合、多画面のうちいづれかの画面の占有フラグが１かどうかを判定するステップと、
いづれの占有フラグも０であるとき、各画面でのポインティングの検出を行うステップと、新たなポインティングが検出されたとき、該当する画面の占有フラグを１にセットするステップと、
いづれかの占有フラグが１であるとき、該当する画面のポインティングが継続しているかどうかを判断するステップと、
ポインティングが解除されていた場合は該当する画面の占有フラグを０にクリアするステップとを有することを特徴とする表示方法。
【請求項６】
前記多画面表示は、前記映像機器の出力画像の表示画面とその縮小画面からなる２画面表示であることを特徴とする請求項５に記載の表示方法。
【請求項７】
前記多画面表示は、複数の前記映像機器の出力画像を同時に表示することを特徴とする請求項５に記載の表示方法。
【請求項１】
映像機器の出力画像を受信し表示する表示装置において、
画面上のポインティング状態を検出する検出手段と、
多画面処理を行う画像処理手段と、
前記検出手段からのポインティング情報を受信する制御手段とを備え、
多画面表示を行っていないとき、前記制御手段は、画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、
多画面表示を行っているとき、前記制御手段は、多画面のうちいづれかの画面上でポインティングを検出したとき、ポインティングを検出した画面上の全ての前記ポインティング情報の平均を有効なポインティング座標として算出し、他の画面上のポインティングを無効とし、
前記ポインティングを検出した画面上のポインティングが解除されたとき、他の画面上のポインティングを有効とすることを特徴とする表示装置。
【請求項２】
前記制御手段は、算出した前記有効なポインティング座標を、前記ポインティングを検出した画面内に表示された画像上の座標に変換し、前記映像機器に送信することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記多画面表示は、前記映像機器の出力画像の表示画面とその縮小画面からなる２画面表示であることを特徴とする請求項１または２に記載の表示装置。
【請求項４】
前記多画面表示は、複数の前記映像機器の出力画像を同時に表示することを特徴とする請求項１または２に記載の表示装置。
【請求項５】
映像機器の出力画像を受信し表示する表示方法であって、
多画面表示を行っているかどうかを判断するステップと、
多画面表示を行っていない場合、表示画像上でポインティングがあるかどうかを判定するステップと、
ポインティングがあるときにはポインティング有効座標を算出し、映像機器の画像上の座標に変換し、映像機器に対して座標を送信するステップと、
多画面表示を行っている場合、多画面のうちいづれかの画面の占有フラグが１かどうかを判定するステップと、
いづれの占有フラグも０であるとき、各画面でのポインティングの検出を行うステップと、新たなポインティングが検出されたとき、該当する画面の占有フラグを１にセットするステップと、
いづれかの占有フラグが１であるとき、該当する画面のポインティングが継続しているかどうかを判断するステップと、
ポインティングが解除されていた場合は該当する画面の占有フラグを０にクリアするステップとを有することを特徴とする表示方法。
【請求項６】
前記多画面表示は、前記映像機器の出力画像の表示画面とその縮小画面からなる２画面表示であることを特徴とする請求項５に記載の表示方法。
【請求項７】
前記多画面表示は、複数の前記映像機器の出力画像を同時に表示することを特徴とする請求項５に記載の表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２００６−８５３４３（Ｐ２００６−８５３４３Ａ）
【公開日】平成１８年３月３０日（２００６．３．３０）
【国際特許分類】
【出願番号】特願２００４−２６８３０８（Ｐ２００４−２６８３０８）
【出願日】平成１６年９月１５日（２００４．９．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成１８年３月３０日（２００６．３．３０）
【国際特許分類】
【出願日】平成１６年９月１５日（２００４．９．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]