ネットワーク対応表示装置およびネットワーク対応プロジェクタ
【課題】ネットワーク対応表示装置やネットワークの負荷増大を招くことなく、ネットワーク接続された複数の端末機器における表示画面を、ネットワーク対応表示装置の表示画面上に多画面表示することを可能にする技術を提供する。
【解決手段】画面キャプチャ機能を有する各端末機器から縮少変換処理および色変換処理済のキャプチャ画像データを通信部２８で受信する。そして、表示制御部２２において、画像合成部４２によりその各キャプチャ画像データを画面分割により１画面の画像データに合成する。
【解決手段】画面キャプチャ機能を有する各端末機器から縮少変換処理および色変換処理済のキャプチャ画像データを通信部２８で受信する。そして、表示制御部２２において、画像合成部４２によりその各キャプチャ画像データを画面分割により１画面の画像データに合成する。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ネットワーク上に接続された複数の端末機器の画面を表示装置の１つの画面上に多画面表示するための技術に関する。
【０００２】
【従来の技術】
図２５は、従来の表示システムの一例を示す構成図である。
図２５において、ネットワーク２１０には、ネットワーク対応表示装置としての例えばプロジェクタ２２０、ノートパソコン２３０、デスクトップパソコン２５１、２５２、２５３、２５４がそれぞれ接続され、更に、プロジェクタ２２０には、プロジェクタ２２０に直接図画等を入力して投射させたり、投射されているデータへの線図の挿入等が可能なタブレット２６１、２６２、２６３、２６４が直接接続されている。なお、ノートパソコン２３０およびデスクトップパソコン２５１、２５２、２５３、２５４には画面キャプチャソフトウェアがインストールされている。
【０００３】
このように構成された従来の表示システムでは、例えばノートパソコン２３０上の画面の内容を画面キャプチャソフトウェアによりキャプチャし、キャプチャされたそのキャプチャ画像データをネットワーク２１０を介してプロジェクタ２２０に送信することにより、ノートパソコン２３０上に表示されている画面をプロジェクタ２２０で投写表示することが可能となっている。そして、プロジェクタ付属のリモコンなどで切替操作を行うことにより、プロジェクタ２２０の投写画像を、ノートパソコン２３０の画面から別の例えばデスクトップパソコン２５１の画面の画像に切り換えることが可能となっている。
【０００４】
【発明が解決しようとする課題】
上記従来の表示システムでは、上述したようにプロジェクタ２２０で表示することのできる画像は、プロジェクタ２２０に接続されているノートパソコン２３０、デスクトップパソコン２５１、２５２、２５３、２５４のうちの何れか１つのパソコンの画像となっている。このため、ノートパソコン２３０、デスクトップパソコン２５１、２５２、２５３、２５４の各表示画面の内容を見比べて議論したい場合など、１画面ずつ切り替えて行わなければならず、このようなことから、近年、複数パソコンの画面を１画面で同時に表示することのできる機能が強く要望されている。
【０００５】
この要望に応えるべく、近年、開発が進められているが、現状では未だ存在せず、また、このような表示システムを実現するに際し、プロジェクタ（ネットワーク対応表示装置）で行うべき処理量が増加してネットワーク対応表示装置に多大な処理能力が要求されたり、ネットワークの負荷増大を招いたのでは問題があるという一面もある。
【０００６】
本発明は、このような点に鑑みなされたもので、ネットワーク対応表示装置やネットワークの負荷増大を招くことなく、ネットワーク接続された複数の端末機器における表示画面を、ネットワーク対応表示装置の表示画面上に多画面表示することが可能な表示システム、ネットワーク対応表示装置、表示制御プログラム、ネットワーク対応プロジェクタ、ネットワーク対応プラズマディスプレイ、ネットワーク対応液晶モニタ、端末機器、制御プログラムを提供することを目的とする。
【０００７】
【課題を解決するための手段】
（１）本発明に係る表示システムは、画面キャプチャ機能を有し、画面キャプチャ機能によって取得したキャプチャ画像データをネットワークを介して送信する複数の端末機器と、表示部を有し、端末機器から送信されたキャプチャ画像データをネットワークを介して受信し、画面分割により１画面の画像データに合成して表示部の表示画面に表示させる多画面表示機能を有するネットワーク対応表示装置とを備え、ネットワーク対応表示装置の表示画面への多画面表示のために必要な処理である、画面キャプチャ機能により取得されたキャプチャ画像データの画像サイズのサイズ変換処理を端末機器側で行うようにし、ネットワーク対応表示装置側では、そのサイズ変換後のキャプチャ画像データを端末機器から取得して合成を行うようにしたものである。
【０００８】
本発明によれば、多画面表示機能を実現するに際して必要なサイズ変換処理を端末機器側で行うようにしているため、ネットワーク対応表示装置やネットワークの負荷増大を招くことなく、ネットワーク接続された複数の端末機器における表示画面をネットワーク対応表示装置上に多画面表示することが可能な表示システムを得ることができる。
【０００９】
（２）本発明に係る表示システムは、上記（１）において、ネットワーク対応表示装置が、表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定して該当端末機器に送信し、その表示サイズを受信した端末機器は、サイズ変換処理の際、キャプチャ画像データの画像サイズを、受信した表示サイズにサイズ変換するものである。
【００１０】
本発明によれば、ネットワーク対応表示装置側で決定した表示サイズに基づいて端末機器側でサイズ変換処理を行うことができる。
【００１１】
（３）本発明に係る表示システムは、上記（１）又は（２）において、端末機器が、画面キャプチャ機能によって取得したキャプチャ画像データを、サイズ変換処理に加え、更にネットワーク対応表示装置の表示部の表示色数への色変換処理を行ってからネットワーク対応表示装置に送信するものである。
【００１２】
本発明によれば、端末機器側で更に色変換処理を行ってからネットワーク対応表示装置側にキャプチャ画像データを送信するため、更にネットワーク対応表示装置の負荷を軽減することが可能となる。
【００１３】
（４）本発明に係る表示システムは、上記（３）において、ネットワーク対応表示装置が、端末機器に表示サイズを送信する際に、自身の表示部の表示色数も送信し、端末機器が、ネットワーク対応表示装置から受信した表示色数に基づいて色変換処理を行うものである。
【００１４】
本発明によれば、ネットワーク対応表示装置側が指定した、ネットワーク対応表示装置の表示部の表示色数に基づいて端末機器側で色変換処理を行うことができる。
【００１５】
（５）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置がプロジェクタであるものである。
【００１６】
本発明によれば、ネットワーク対応表示装置としてプロジェクタを使用できる。
【００１７】
（６）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置がプラズマディスプレイであるものである。
【００１８】
本発明によれば、ネットワーク対応表示装置としてプラズマディスプレイを使用できる。
【００１９】
（７）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置が液晶モニタであるものである。
【００２０】
本発明によれば、ネットワーク対応表示装置として液晶モニタを使用できる。
【００２１】
（８）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置が有機ＥＬディスプレイであるものである。
【００２２】
本発明によれば、ネットワーク対応表示装置として有機ＥＬディスプレイを使用できる。
【００２３】
（９）本発明に係る表示システムは、上記（１）〜（８）の何れかにおいて、端末機器がパソコンまたはＰＤＡであるものである。
【００２４】
本発明によれば、端末機器にパソコンまたはＰＤＡを使用できる。
【００２５】
（１０）本発明に係るネットワーク対応表示装置は、画面キャプチャ機能をそれぞれ備えた複数の端末機器とネットワークを介して接続されるネットワーク対応表示装置であって、表示部と、各端末機器との双方向通信が可能な通信部と、表示制御部とを備え、各端末機器それぞれで画面キャプチャ機能により取得され所定の画像サイズにサイズ変換されたキャプチャ画像データを通信部で受信し、表示制御部は、通信部で受信した各キャプチャ画像データを画面分割により１画面の画像データに合成して表示部の表示画面に表示させる多画面表示機能を有するものである。
【００２６】
本発明によれば、サイズ変換済のキャプチャ画像データを端末機器側から取得して合成表示するので、多画面表示のための処理の負荷を軽減することが可能なネットワーク対応表示装置を得ることができる。
【００２７】
（１１）本発明に係るネットワーク対応表示装置は、上記（１０）において、表示制御部が、現在の表示画面に新たな画面を割り込ませて表示させる割り込み機能を有するものである。
【００２８】
本発明によれば、割り込み機能を有するネットワーク対応表示装置を得ることができる。
【００２９】
（１２）本発明に係るネットワーク対応表示装置は、上記（１０）又は（１１）において、ネットワーク対応表示装置に接続されている複数の端末機器の中から、表示画面にキャプチャ画像データを表示させる端末機器をユーザが任意に選択できるようにしたものである。
【００３０】
本発明によれば、複数の端末機器の中から、キャプチャ画像データをネットワーク対応表示装置上に表示させる端末機器をユーザが選択することが可能なネットワーク対応表示装置を得ることができる。
【００３１】
（１３）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１２）の何れかにおいて、表示画面にキャプチャ画像データを表示させる端末機器の選択を、通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも可能としたものである。
【００３２】
本発明によれば、ネットワーク対応表示装置上にキャプチャ画像データを表示させる端末機器をネットワーク対応表示装置側からも、端末機器側からも指定することが可能なネットワーク対応表示装置を得ることができる。
【００３３】
（１４）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１３）の何れかにおいて、表示制御部が、表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を拡大表示させる拡大表示機能を有するものである。
【００３４】
本発明によれば、所定の分割画面を拡大表示させる拡大表示機能を有するネットワーク対応表示装置を得ることができる。
【００３５】
（１５）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１３）の何れかにおいて、表示制御部が、表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を表示画面全体の表示に切り替える単画面切替機能を有するものである。
【００３６】
本発明によれば、所定の分割画面を表示画面全体の表示に切り替える単画面切替機能を有するネットワーク対応表示装置を得ることができる。
【００３７】
（１６）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１３）の何れかにおいて、表示制御部が、表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を消去させる消去機能を有するものである。
【００３８】
本発明によれば、所定の分割画面を消去させる消去機能を有するネットワーク対応表示装置を得ることができる。
【００３９】
（１７）本発明に係るネットワーク対応表示装置は、上記（１４）〜（１６）の何れかにおいて、所定の分割画面が、ユーザ操作に基づいて選択されたものである。
【００４０】
本発明によれば、拡大表示させる分割画面、単画面表示させる分割画面、消去させる分割画面をユーザが選択することが可能なネットワーク対応表示装置を得ることができる。
【００４１】
（１８）本発明に係るネットワーク対応表示装置は、上記（１７）において、所定の分割画面が、通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも選択可能としたものである。
【００４２】
本発明によれば、拡大表示させる分割画面、単画面表示させる分割画面、消去させる分割画面をネットワーク対応表示装置側からも、端末機器側からも指定することが可能なネットワーク対応表示装置を得ることができる。
【００４３】
（１９）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１８）の何れかにおいて、端末機器から受信したキャプチャ画像データが、端末機器の表示画面の全部または一部範囲を指定してキャプチャして得られた画像データであるものである。
【００４４】
本発明によれば、表示部の表示画面上に表示するキャプチャ画像データは、全画面キャプチャにより得られたキャプチャ画像データ、部分キャプチャにより得られたキャプチャ画像データのどちらも表示することが可能なネットワーク対応表示装置を得ることができる。
【００４５】
（２０）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１８）の何れかにおいて、端末機器から取得するキャプチャデータが、端末機器の表示画面上の変化を検出し、画面上の変化分のみをキャプチャして得られた画像データであるものである。
【００４６】
本発明によれば、端末機器の表示画面上の変化部分のみをキャプチャすることによりネットワークへの負荷が軽減され、これを既存のキャプチャデータと合成した画像データを表示することが可能なネットワーク対応表示装置を得ることができる。
【００４７】
（２１）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２０）の何れかにおいて、表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定する表示サイズ決定部と、表示サイズ決定部で決定された表示サイズを通信部により該当の各端末機器にそれぞれ送信する制御部とを備え、制御部は、表示サイズを送信した各端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換されたキャプチャ画像データを通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して表示部に表示するように表示制御部を制御するものである。
【００４８】
本発明によれば、端末機器側でサイズ変換処理するときの表示サイズを、表示サイズ決定部で決定した表示サイズとすることができる。
【００４９】
（２２）本発明に係るネットワーク対応表示装置は、上記（２１）において、表示すべき端末機器に割り当てる分割画面のアスペクト比を、その端末機器の表示部の表示画面のアスペクト比と同じとしたものである。
【００５０】
本発明によれば、違和感のない表示画面を構成することが可能なネットワーク対応表示装置を得ることができる。
【００５１】
（２３）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２２）の何れかにおいて、制御部が、端末機器に表示サイズを送信する際に、表示部の表示色数も送信し、表示サイズおよび表示色数を送信した端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換され、且つ表示色数に変換されたキャプチャ画像データを通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して表示部に表示するように表示制御部を制御するものである。
【００５２】
本発明によれば、端末機器側で縮少変換に加えて更に色変換も施されたキャプチャ画像データを受信して合成表示するので、多画面表示のための処理の負荷を更に軽減することが可能なネットワーク対応表示装置を得ることができる。
【００５３】
（２４）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２３）の何れかにおいて、通信部の通信プロトコルがＴＣＰ／ＩＰであるものである。
【００５４】
本発明によれば、通信部の通信プロトコルとして、一般的なＴＣＰ／ＩＰを利用できる。
【００５５】
（２５）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２４）の何れかにおいて、ネットワークが、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮのうちの何れかであるものである。
【００５６】
本発明によれば、ネットワークとして、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮを利用できる。
【００５７】
（２６）本発明に係るネットワーク対応プロジェクタは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載したものである。
【００５８】
本発明によれば、上記効果を備えたプロジェクタを得ることが可能となる。
【００５９】
（２７）本発明に係るネットワーク対応プロジェクタは、上記（２６）において、表示部が液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤの何れかであるものである。
【００６０】
本発明によれば、表示部に液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤを使用したプロジェクタにおいて上記効果を奏することが可能となる。
【００６１】
（２８）本発明に係るネットワーク対応プラズマディスプレイは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載し、表示部をプラズマディスプレイパネルとしたものである。
【００６２】
本発明によれば、上記効果を備えたプラズマディスプレイを得ることが可能となる。
【００６３】
（２９）本発明に係るネットワーク対応液晶モニタは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載し、表示部を液晶パネルとしたものである。
【００６４】
本発明によれば、上記効果を備えた液晶モニタを得ることが可能となる。
【００６５】
（３０）本発明に係るネットワーク対応有機ＥＬディスプレイは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載し、表示部を有機ＥＬパネルとしたものである。
【００６６】
本発明によれば、上記効果を備えたネットワーク対応有機ＥＬディスプレイを得ることが可能となる。
【００６７】
（３１）本発明に係る表示制御プログラムは、上記（１０）〜（２５）の何れかのネットワーク表示装置の表示制御部をＣＰＵにより実現させるものである。
【００６８】
本発明によれば、上記の効果を表示装置に提供することのできる表示制御プログラムを得ることが可能となる。
【００６９】
（３２）本発明に係る端末機器は、上記（１０）〜（２５）の何れかのネットワーク対応表示装置にネットワークを介して接続される端末機器であって、表示部と、ネットワーク対応表示装置との双方向通信が可能な通信部と、表示部の表示画面に表示された内容をキャプチャする画面キャプチャ処理部と、画面キャプチャ処理部でキャプチャしたキャプチャ画像データを所定の画像サイズにサイズ変換する画像変換部と、画像変換部でサイズ変換されたキャプチャ画像データを通信部からネットワーク対応表示装置に送信させる制御部とを備え、ネットワーク対応表示装置の表示画面に表示される多画面のうちの１分割画面に表示されるキャプチャ画像データを生成するものである。
【００７０】
本発明によれば、ネットワーク対応表示装置の表示画面に表示される多画面のうちの１分割画面に表示されるキャプチャ画像データを生成するに際し、多画面表示に必要な処理の一部、具体的にはサイズ変換処理を担うことで、ネットワーク対応表示装置の負荷低減に貢献できる端末機器を得ることが可能となる。
【００７１】
（３３）本発明に係る端末機器は、上記（３２）において、ネットワーク対応表示装置の表示画面が、表示すべき端末機器台数分に分割され、その表示すべき端末機器に割り当てられる分割画面の表示サイズが決められており、画像変換部は、画面キャプチャ処理部で取得したキャプチャ画像データを、自端末機器に割り当てられた表示サイズにサイズ変換するものである。
【００７２】
本発明によれば、ネットワーク対応表示装置側で決定された表示サイズに基づいてサイズ変換処理を行うことができる。
【００７３】
（３４）本発明に係る端末機器は、上記（３２）又は（３３）において、画像変換部が、サイズ変換に加えて、更に、ネットワーク対応表示装置の表示部の表示色数に色変換を行い、制御部は、サイズ変換処理および色変換処理を施したキャプチャ画像データを通信部からネットワーク対応表示装置に送信するものである。
【００７４】
本発明によれば、サイズ変換処理に加えて更に色変換処理も行うことで、ネットワーク対応表示装置の更なる負荷軽減に貢献できる。
【００７５】
（３５）本発明に係る制御プログラムは、上記（３２）〜（３４）の何れかの端末機器の各処理部をＣＰＵにより実現させるものである。
【００７６】
本発明によれば、上記の効果を端末機器に提供することのできる制御プログラムを得ることが可能となる。
【００７７】
【発明の実施の形態】
図１は本発明の一実施の形態のネットワーク対応表示装置を備えた表示システムのネットワーク構成を示す図である。
この表示システム１００は、複数の端末機器１（図１では１ａ，１ｂ，１ｃ，１ｄの４台のみを図示）と、本発明の主要機能である多画面表示機能を有するネットワーク対応表示装置２（図にはプロジェクタの例を図示）（以下、略して表示装置２という）とを備え、複数の端末機器１と表示装置２とがネットワーク３を介してＴＣＰ／ＩＰ等の通信プロトコルを用いて双方向通信可能に接続されている。各端末機器１にはそれぞれ固有の名前（以下、端末名という）が予め与えられている。なお、ネットワーク３には、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮのＢｌｕｅｔｏｏｔｈ（Ｂｌｕｅｔｏｏｄｈ ＳＩＧ Ｉｎｃ．， Ｕ．Ｓ．Ａの登録商標）などの各種ネットワークが利用できる。
【００７８】
この表示システム１００は、複数の端末機器１でそれぞれ表示されている画面を、表示装置２の表示画面上に画面分割により同時に表示させることを可能とするシステムであり、例えば会議やプレゼンテーションなどの際に用いて有効なシステムである。以下、端末機器１、表示装置２それぞれの構成について詳細に説明する。
【００７９】
図２は端末機器の構成を示すブロック図である。
端末機器１は、例えばパソコンやＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）などで構成されるもので、プレゼンテーション用の資料などの各種情報を表示するための表示部１１、該表示部１１に表示される内容を記憶するビデオメモリ１２、例えばタブレット、マウス、操作キーで構成される入力部１３、該入力部１３からの操作入力を検出して入力情報を後述の制御部１６に出力するユーザインタフェース部１４、本発明に係る処理を行なうためのアプリケーション（制御プログラム）や各種データを格納する記憶部１５、制御部（ＣＰＵ）１６、通信部１７を備えている。
【００８０】
記憶部１５に格納されている制御プログラムは、表示装置２での多画面機能を実現するための端末機器側制御機能と、表示部１１の画面の全部又は一部をキャプチャすることのできる画面キャプチャ機能と、画面キャプチャ機能によって取得されたキャプチャ画像データを表示装置２の表示部２１の形式に変換する画像変換機能と、表示部１１の画面上の変化を検出する機能を実現するためのもので、該制御プログラムとＣＰＵとによって制御部１６、画面キャプチャ処理部１８、画像変換部１９、画面比較処理部２０が構成されている。
【００８１】
制御部１６は、接続要求、表示要求、拡大表示要求、単画面切替要求、消去要求などの各種要求をユーザインタフェース部１４または通信部１７を介して受け取り、その要求内容に応じた処理を行うとともに、画面キャプチャ処理部１８で取得されたキャプチャ画像データを画像変換部１９で変換させ、変換後のキャプチャ画像データを通信部１７から表示装置２に送信させる処理などを行う。
【００８２】
通信部１７は、表示装置２との双方向通信を行う部分で、ここでは通信プロトコルがＴＣＰ／ＩＰで、このＴＣＰ／ＩＰ接続に必要なＡＲＰ，ＩＣＭＰ，ＩＰ，ＴＣＰ，ＵＤＰ等のプロトコル処理機能を有するものである。なお、この機能はＯＳによって実現される。
【００８３】
なお、画像変換部１９で行われる変換処理は、以下に詳述するが表示装置２で多画面表示を行うに際し必要な処理であり、具体的には自端末機器１に割り当てられた分割画面の表示サイズへのサイズ変換処理と、表示装置２の表示部２１の表示色数への色変換処理である。このように、端末機器１では、画面キャプチャ処理部１８で取得されたキャプチャ画像データに対し、表示装置２での多画面表示に必要な変換処理を行ってから表示装置２に送信するように構成される。
【００８４】
図３は表示装置の構成を示すブロック図である。
表示装置２は、表示部２１、本発明の多画面表示機能、拡大表示機能、単画面切替機能、割り込み機能および消去機能を有し、表示部２１に表示させる表示画面の制御を行う表示制御部２２、例えばリモコン、マウス、操作キーで構成される入力部２３、入力部２３からの操作入力を検出して入力内容を後述の制御部２７に出力するユーザインタフェース部２４、本発明の多画面表示機能を提供する表示制御プログラムを格納するプログラム記憶部２５、この表示制御プログラムの実行に際して必要となる各種ファイルや各種データが記憶されるデータ記憶部２６、表示装置２全体の動作制御を行う制御部（ＣＰＵ）２７、端末機器１との双方向通信を行う通信部２８を備えている。
【００８５】
通信部２８は、端末機器１との双方向通信を行う部分で、ここでは通信プロトコルがＴＣＰ／ＩＰで、このＴＣＰ／ＩＰ接続に必要なＡＲＰＩＣＭＰ，ＩＰ，ＴＣＰ，ＵＤＰ等のプロトコル処理機能を有するものである。
【００８６】
なお、この表示装置２は、具体的には、図１に例示したプロジェクタの他に、例えばプラズマディスプレイ、液晶モニタなどで構成される。図３には、本発明の趣旨と関連のある主要部のみを図示し、プロジェクタ、プラズマディスプレイ、液晶モニタにおいてそれぞれ特有の他の機構については本発明の趣旨とは関連性がないので省略しているが、既存のプロジェクタ、プラズマディスプレイ、液晶モニタにそれぞれ図３に示す各処理部を備えることにより、ネットワーク対応プロジェクタ、ネットワーク対応プラズマディスプレイ、ネットワーク対応液晶モニタを実現することができる。また、表示部２１はこれら表示装置２の種類によって異なる表示要素で、具体的には、プロジェクタであれば液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤ（Ｄｉｇｉｔａｌ Ｍｉｃｒｏｍｉｒｒｏｒ Ｄｅｖｉｃｅ）（テキサスインスツルメンツ社の商標）となり、この場合、表示部２１の表示画面は投射面となる。また、例えばプラズマディスプレイであれば、表示部２１はプラズマディスプレイパネルとなり、液晶モニタであれば液晶パネルとなり、有機ＥＬディスプレイであれば、有機ＥＬパネルとなる。
【００８７】
次に、図４を参照してデータ記憶部に格納されている各種ファイル等について説明する。
データ記憶部２６には、表示部仕様管理ファイル３０、接続許可管理ファイル３１、表示許可管理ファイル３２、接続状況管理ファイル３３、表示状況管理ファイル３４、仮・分割エリア設定ファイル３５、分割エリア情報ファイル３６が格納され、また、各端末機器１から送信されてきたキャプチャ画像データを記憶するためのキャプチャ画像データ記憶部３７を備えている。
【００８８】
表示部仕様管理ファイル３０は、表示部２１の表示画面の横・縦のピクセル数を示す画面サイズと、表示部２１の表示色数を示す色数情報とが登録されたファイルである。なお、本例では、画面サイズが１２８０×１０２４（ＳＸＧＡ）、色数が１６７７万７２１６色であるとする。
【００８９】
接続許可管理ファイル３１は、接続が許可されている端末機器１の端末名が登録されているファイル、表示許可管理ファイル３２は、画面表示が許可されている端末機器１の端末名が登録されているファイルである。
【００９０】
接続状況管理ファイル３３は、現在、表示装置２に接続されている端末機器１の端末名が登録されるファイルである。
【００９１】
表示状況管理ファイル３４は、現在の表示部２１の表示状況を管理するファイルで、現在の表示部２１の表示画面に表示されているキャプチャ画像データ発信元の端末機器１に関する端末機器情報をテーブル形式で管理する。この表示状況管理ファイル３４は、表示部２１の表示画面が変更される毎に更新され、例えば、４分割画面から３分割画面に変更された場合、消去された分割画面に対応する端末機器１の端末機器情報は当該テーブルから消去され、逆に４分割画面から５分割画面に変更された場合、その追加された画面に対応する端末機器１の端末情報が新たに登録されるようになっている。
【００９２】
図５は、表示状況管理ファイルで管理される端末機器情報の各項目を示す図である。
表示状況管理ファイル３４は、「端末名」、「ＩＰアドレス」、「画面サイズ」、「色数情報」、「優先度」、「キャプチャ範囲管理フラグ」、「差分キャプチャ管理フラグ」、「キャプチャ画像サイズ」、「差分キャプチャ画像サイズ１」、「差分キャプチャ画像サイズ２」、「差分キャプチャ原点１」、「差分キャプチャ原点２」の項目で構成されている。
【００９３】
「端末名」は、端末機器１に予め与えられた名前、「画面サイズ」は表示部１１の表示画面の横・縦のピクセル数で、例えば、解像度がＳＸＧＡの端末機器であれば１２８０×１０２４、ＸＧＡであれば１０２４×７６８である。「色数情報」は、表示部１１の表示色数で、例えば２５６色、１６７７万７２１６色などである。以上の「端末名」、「ＩＰアドレス」、「画面サイズ」、「色数情報」は、この表示状況管理ファイル３４への登録時には必ず格納されるデータであり、その他の項目は、ユーザ操作等に応じて適宜設定（更新）されるデータである。
【００９４】
「優先度」は、「端末名」で特定される端末機器１に割り当てる分割画面の表示サイズの大きさを左右するもので、「最高」、「高」、「なし」などの値をとり、以下に詳述するが、本例では優先度が高いと割り当てられる表示サイズが大きくなるように構成されている。「キャプチャ範囲管理フラグ」は「端末名」で特定される端末機器１での画面キャプチャが全画面キャプチャか部分キャプチャかを管理するフラグで、通常は全画面キャプチャを示す「０」を示し、部分キャプチャである場合に「１」に設定される。
【００９５】
「差分キャプチャ管理フラグ」は「端末名」で特定される端末機器１での画面キャプチャが、通常のキャプチャか画面上の変化分のみのキャプチャ（以後、差分キャプチャと呼ぶ）かを管理するフラグで、通常キャプチャである場合は「０」を示し、差分キャプチャである場合は「１」に設定される。
【００９６】
「キャプチャ画像サイズ」は「キャプチャ範囲管理フラグ」が「１」の場合すなわち部分キャプチャの場合のキャプチャ画像データのサイズ（縦横のピクセル数）である。
【００９７】
「差分キャプチャ画像サイズ１」と「差分キャプチャ画像サイズ２」は「差分キャプチャ管理フラグ」が「１」の場合の、差分キャプチャにおいて取得される２つの異なる範囲のエリアのサイズである。「差分キャプチャ原点１」と「差分キャプチャ原点２」は、差分キャプチャにおいて取得される２つの異なる範囲のエリアの原点であり、「キャプチャ画像サイズ」で規定されるエリア内での絶対座標で示す。
【００９８】
仮・分割エリア設定ファイル３５は、各端末機器１に割り当てる仮の分割エリアを特定するための情報が予め設定されているファイルで、端末台数毎に準備された複数のテーブルから構成される。このテーブルは後述の図１１（ａ）、図１６（ａ）に示すような構成となっており、その詳細については以下の該当箇所で説明することにする。なお、分割エリア情報ファイル３６についても以下で詳述することにする。
【００９９】
以上の各ファイル３０，３１，３２，３３，３４，３５，３６は、入力部２３で所定の操作を行うと、ファイルの内容が表示部２１に表示され、表示画面上で確認、データ変更が自由に行えるようになっている。
【０１００】
ここで、図４の説明に戻る。
表示制御部２２は、表示サイズ決定部としての分割エリア情報作成部４１、画像合成部４２および画像処理部４３とを備え、制御部２７でユーザインタフェース部２４あるいは通信部２８を介して受け取ったユーザからの接続要求、表示要求、割り込み表示要求、消去要求などの各種要求内容に応じて、必要な処理を各処理部４１，４２，４３にデータ記憶部２６内の必要ファイルを適宜アクセスさせながら実施させ、表示部２１の表示制御を行う。表示制御部２２は、プログラム記憶部２５に格納された多画面機能を提供する表示制御プログラムと制御部（ＣＰＵ）２７とによって実現される。
【０１０１】
分割エリア情報作成部４１は、表示状況管理ファイル３４に基づいて表示対象の端末機器１の台数を把握するとともに、表示対象の各端末機器１それぞれの優先度および画面サイズを取得する。そして、これら表示対象の端末機器１の台数、表示対象の端末機器１それぞれの優先度および画面サイズに応じて表示部２１の表示画面サイズの分割を行い、表示対象の各端末機器１それぞれに割り当てる表示部２１上の分割画面の表示サイズ（以下、分割エリアサイズという）、およびその分割画面の表示位置を特定する情報（表示画面に対する分割画面の左上の絶対座標で、以下、原点という）とを含む分割エリア情報を作成し、分割エリア情報ファイル３６としてデータ記憶部２６に格納する動作を行う。
【０１０２】
分割エリア情報作成部４１で作成された分割エリア情報ファイル３６において、表示対象の各端末機器１それぞれに割り当てた分割画面の分割エリアサイズは、表示部仕様管理ファイル３０に格納された表示部２１の表示色数と共に、制御部２７により通信部２８から、表示対象の各端末機器１それぞれに送信され、これを受信した各端末機器１から返信されてくるキャプチャ画像データすなわち送信した分割エリアサイズおよび表示色に基づいて前述のサイズ変換処理および色変換処理が施されたキャプチャ画像データがキャプチャ画像データ記憶部３７に書き込まれる。なお、いま分割エリアサイズと呼ばれている情報は、以下で真の分割エリアサイズと呼ばれているものと同一である。
【０１０３】
画像合成部４２は、キャプチャ画像データ記憶部３７に格納された各端末機器１からのサイズ変換処理および色変換処理済のキャプチャ画像データを、分割エリア情報作成部４１で作成された分割エリア情報ファイル３６に基づいて合成し、合成画像データを生成する。
【０１０４】
画像処理部４３は、画像合成部４２で生成された合成画像データや、ＯＳＤ（オン・スクリーン・ディスプレイ）機能等を用いて参照されたデータ記憶部２６の表示状況管理ファイル３４などの各種画像データに対し走査周波数変換処理を行って表示画像データを生成し、表示部２１に出力する部分で、例えばスキャンコンバータで構成される。
【０１０５】
以下、本実施の形態の動作を説明する。図６、図７は本実施の形態の動作を示すフロチャートである。
まず、表示装置２側では、多画面表示を行うための準備段階として入力部２３から所定の操作入力が行われ、制御部２７はその操作入力をユーザインタフェース部２４を介して検知すると、通信部２８およびネットワーク３を介して端末名およびＩＰアドレスの返信要求を表示装置２のＩＰアドレスと共に一斉同報する。この一斉同報された端末名およびＩＰアドレスの返信要求は、ネットワーク３上の各端末機器１に受信され、各端末機器１のそれぞれは、自身の端末名およびＩＰアドレスを表示装置２に返信する。
【０１０６】
表示装置２は、通信部２８を介して各端末機器１からの返信（端末名およびＩＰアドレス）を受信し、接続許可端末であるか否かを判定する。具体的には、返信された端末名が、接続許可管理ファイル３１に登録されてる端末名と一致するかをチェックし、一致すれば接続許可端末と判定する。
【０１０７】
接続許可端末と判定した端末機器１からの端末名およびＩＰアドレスを順次、接続状況管理ファイル３３に登録する。この接続状況管理ファイル３３により、表示装置２側で、今現在、何台の端末機器１が接続されているのかを把握することができる。また、端末名に基づいて接続許可・不許可を判断するようにしているので、例えばＤＨＣＰによって端末機器１にＩＰアドレスが与えられ、その与えられるＩＰアドレスが接続の度に異なる場合などにおいても、対応できるようになっている。
【０１０８】
以上の準備作業が終了したところで、表示装置２は、各種要求待ちの状態で待機する。いま、各会議出席者が操作する各端末機器１のうち、次の図に示すように端末機器１ａ〜１ｄの４台の表示画面を表示装置２の表示画面５０に多画面表示させたい場合を考える。ここでそれぞれの端末機器１の解像度を、端末機器１ａはＳＸＧＡ（１２８０×１０２４ピクセル）、端末機器１ｂはＳＶＧＡ（８００×６００ピクセル）、端末機器１ｃはＸＧＡ（１０２４×７６８ピクセル）、端末機器１ｄは４８０×６４０ピクセルとした例として説明していく。
【０１０９】
＜多画面表示機能＞
図８は端末機器１ａ〜１ｄの４台の表示画面を表示装置の表示画面に多画面表示させた状態を示す模式図である。
まず、入力部２３の例えばリモコンを操作して端末機器１ａ〜１ｄの多画面表示の意図を入力する。すると、この入力情報、すなわち端末機器１ａ〜１ｄそれぞれの識別情報を含む表示要求がユーザインタフェース部２４を介して制御部２７に通知される（Ｓ１）。なお、この表示要求の際に、優先度や、部分キャプチャや、差分キャプチャの指定も可能であるが、ここでは何れの指定もしないこととする。
【０１１０】
表示要求を受信した表示装置２の制御部２７は、表示対象の各端末機器１ａ〜１ｄそれぞれについて以下のステップＳ３〜ステップＳ９の処理を行う（Ｓ２）。すなわち、接続許可端末であるか、表示許可端末であるかを、表示要求に含まれる識別情報により特定される端末名に基づいて接続許可管理ファイル３１、表示許可管理ファイル３２を参照してそれぞれ判定し（Ｓ３）、接続・表示共に許可した場合には（Ｓ４）、その端末機器に通信部２８を介して端末機器情報（端末名、ＩＰアドレス、画面サイズ、色数情報）を要求する（Ｓ５）。そして、この要求に応答して返信されてきた端末機器情報を受信し（Ｓ６）、表示状況管理ファイル３４に登録する（Ｓ７）。なお、この表示要求の際に、優先度や、部分キャプチャの指定、差分キャプチャの指定が行われていた場合には、このステップＳ７の登録の際に、「優先度」、「キャプチャ範囲管理フラグ」、「差分キャプチャ管理フラグ」も同様に登録される。
【０１１１】
そして、接続・表示共に許可した端末機器１に対し、表示状況管理ファイル３４とともに画面キャプチャ開始指示を送信する（Ｓ８）。なお、接続・表示を許可しない端末機器１に対しては、その旨を通信部２８を介して通知する（Ｓ９）。
【０１１２】
ここでは、端末機器１ａ〜１ｄの全てが接続・表示共に許可する端末機器１とすると、ステップＳ２〜ステップＳ９の処理により、各端末機器１ａ〜１ｄからの端末機器情報が表示状況管理ファイル３４に登録されるとともに、各端末機器１ａ〜１ｄに対し、表示状況管理ファイル３４とともに画面キャプチャ開始指示が通信部２８を介して送信されることになる。
【０１１３】
以上の処理が終了すると、制御部２７は、表示制御部２２の分割エリア情報作成部４１にエリア分割要求を通知する。これにより表示装置２は分割エリア情報作成処理に入る（Ｓ１０）。画面キャプチャ開始指示を受け取った端末機器１側の動作は後述することにして、以下、エリア分割要求を受信した分割エリア情報作成部４１での分割エリア情報作成処理について説明する。
【０１１４】
図９は、分割エリア情報作成処理の流れを示すフロチャートである。ここでは、表示状況管理ファイル３４が図１０のように構成されているものとし、以下に分割エリア情報作成部４１の動作を具体的に説明する。なお、図１０において端末名がＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１がそれぞれ端末機器１ａ，１ｂ，１ｃ，１ｄに対応しているものとする。
【０１１５】
分割エリア情報作成部４１は、制御部２７からエリア分割要求を受信すると、表示状況管理ファイル３４を参照して表示対象の端末機器１の台数（ここでは４台）を把握するとともに、各端末機器１ａ，１ｂ，１ｃ，１ｄそれぞれの優先度を取得する（Ｓ２１）。そして、これら端末機器１の台数と、各端末機器１ａ〜１ｄそれぞれの優先度とに基づいて仮・分割エリア設定ファイル３５を参照し、各端末機器１ａ，１ｂ，１ｃ，１ｄそれぞれに割り当てるべき仮の分割エリアの仮のサイズと、仮の原点とを取得する（Ｓ２２）。なお、「仮」とした理由については以下の説明で明らかになるが、ここで割り当てられる分割エリアは、後のステップにおいてキャプチャ画像データをサイズ変換する際に変更されることになるからである。
【０１１６】
ここでは、図１０に示すように表示対象の端末機器台数が４台で、その全てに優先度の設定がないため、この場合に仮・分割エリア設定ファイル３５で参照される該当の仮・分割エリア設定テーブルは例えば図１１（ａ）のように構成されている。なお、本例では表示部２１の表示画面の画面サイズを１２８０×１０２４（ＳＸＧＡ）としており、図１１（ａ）の仮・分割エリア設定テーブルはこの場合の一例である。また、図１１（ｂ）は（ａ）の仮・分割エリア設定テーブルに基づく仮の分割エリアを図示したものである。
【０１１７】
ここで、図１１（ａ）の優先順位とは、表示状況管理ファイル３４の「優先度」の項目に基づいて順位付けが決定されるもので、優先度の高いものから順に１台目、２台目、３台目、４台目とされる。そして、そのそれぞれには、その下のテーブルに示される「仮サイズ」、「仮原点」で特定される領域が仮の分割エリアとして割り当てられる。ここでは表示対象の全端末機器１ａ，１ｂ，１ｃ，１ｄの全てにおいて「なし」であるため（図１０参照）、実質上、優先順位は無い。このように優先度の設定が無い場合の割り当て順は予め決められた所定の順序としてもよいし、表示状況管理ファイル３４への登録順とするなど任意であるが、本例では、各端末機器１ａ，１ｂ，１ｃ，１ｄ（以下、適宜、端末名のＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１と呼ぶことにする）に、それぞれ順に仮の分割エリア５０Ａ，５０Ｂ，５０Ｃ，５０Ｄが割り当てられるとして以下に説明を続けることにする。
【０１１８】
分割エリア情報作成部４１は、さらに表示状況管理ファイル３４（図１０参照）から各ＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１それぞれの画面サイズを取得し、これら取得した情報に基づいて、それぞれに割り当てる真の分割エリアサイズと、真の原点を決定する（Ｓ２３）。
【０１１９】
図１２は、真の分割エリアの説明図である。なお、図１２において５１Ａ，５１Ｂ，５１Ｃ，５１Ｄは、それぞれＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１にそれぞれ割り当てられた真の分割エリアを示している。真の分割エリアとは、仮の分割エリア内に、その仮の分割エリア内に表示させるべきキャプチャ画像データを、アスペクト比を維持したままサイズ変換し、なおかつその変換後の画像を、仮の分割エリア５０Ａ，５０Ｂ，５０Ｃ，５０Ｄそれぞれの中心部に表示させるための表示領域のことである。ここで、この真の分割エリアを特定するための真の分割エリアサイズについて具体的にＰＣ−２の例で説明すると、ＰＣ−２は画面サイズが１０２４×７６８ピクセル（図１０参照）であり、このサイズの画像データを、当該ＰＣ−２に割り当てられた６４０×５１２ピクセルの仮の分割エリア５０Ｂ内に表示させるために、元の画像のアスペクト比（すなわち表示部１１の表示画面のアスペクト比に相当）を維持したまま縮小したときのサイズである。また、真の原点とは、図１２に示すように、そのサイズの分割画面を仮の分割エリア５０Ｂの中心部に位置させるためのもので、分割画面の左上のピクセルの座標（表示画面全体に対する絶対座標）である。
【０１２０】
分割エリア情報作成部４１は、以上のような真の分割エリアサイズと真の原点とをＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１それぞれについて決定し、端末名、分割エリア、原点の項目からなる図１３に示すような内容の分割エリア情報を作成して分割エリア情報ファイル３６としてデータ記憶部２６に記憶させる（Ｓ２４）。これにより分割エリア情報作成処理が終了する。なお、この分割エリア情報ファイル３６には作成日時（２００２年５月２１日 １７：００：３２）が付されるようになっている。
【０１２１】
ここで、図６に戻る。
表示装置２の制御部２７は、分割エリア情報作成部４１での分割エリア情報作成処理（Ｓ１０）が終了すると、表示対象の各端末機器１ａ，１ｂ，１ｃ，１ｄに対し、ステップＳ１２〜ステップＳ１４の処理を行う（Ｓ１１）。すなわち、キャプチャ画像データ送信要求を送信する（Ｓ１２）。このキャプチャ画像データ送信要求には、分割エリア情報ファイル３６に格納されている、当該要求の送信先の端末機器１に割り当てた真の分割エリアサイズと、表示部仕様管理ファイル３０に格納されている自表示装置２の表示部２１の表示色数とが含めて送信される。すなわち、例えば端末機器１ａ（ＰＣ−１）に対しては、真の分割エリアサイズ６４０×５１２（図１３参照）と、表示装置２の表示色数１６７７万７２１６色とを含むキャプチャ画像データ送信要求が送信されることになる。
【０１２２】
ところで、端末機器１側ではステップＳ８で表示装置２から送信されたキャプチャ開始要求を受信後、画面キャプチャを開始しており、端末機器１で行われた画面キャプチャが全画面キャプチャであれば、このステップＳ１２のキャプチャ画像データ送信要求に対し、後述するように該キャプチャ画像データ送信要求に含まれる真の分割エリアサイズおよび表示色数に基づきサイズ変換処理・色数変換処理が施されたキャプチャ画像データが表示装置２に返信され、部分キャプチャであれば部分キャプチャ画像の画像サイズが返信されてくる。
【０１２３】
表示装置２は、端末機器１からの返信を受信し（Ｓ１３）、返信内容がキャプチャ画像データであるときは、端末機器１で行われた画面キャプチャが全画面キャプチャであると判断し（Ｓ１４）、その受信したキャプチャ画像データをキャプチャ画像データ記憶部３７に書き込む（Ｓ１８）。
【０１２４】
一方、ステップＳ１３で受信した端末機器１からの返信が画像サイズであるときは当該端末機器１で行われた画面キャプチャが部分キャプチャであると判断し（Ｓ１４）、受信した画像サイズで表示状況管理ファイル３４の「キャプチャ画像サイズ」を更新するとともに、受信した画像サイズに基づいて分割エリア情報（真の分割エリアサイズ及び真の原点）を上記と同様の処理により再作成して（Ｓ１５）分割エリア情報ファイル３６の該当箇所を更新し、再作成した真の分割エリアサイズと表示部２１の表示色数とを含む再・キャプチャ画像データ送信要求を送信する（Ｓ１６）。この再・キャプチャ画像データ送信要求は後述するように端末機器１に受信され、再・キャプチャ画像データ送信要求に含まれる真の分割エリアサイズおよび表示装置２の表示色数に基づきサイズ変換処理・色数変換処理が施されたキャプチャ画像データが表示装置２に返信され、表示装置２は端末機器１からの返信を受信し（Ｓ１７）、キャプチャ画像データ記憶部３７に書き込む（Ｓ１８）。
【０１２５】
以上の処理を表示対象の各端末機器１ａ〜１ｄそれぞれについて行い、表示対象の端末機器１ａ，１ｂ，１ｃ，１ｄからのキャプチャ画像データが全て揃うと、制御部２７は画像合成部４２に画像合成指示を通知する。これにより表示装置２は画像合成処理に入る（Ｓ１９）。
【０１２６】
画像合成部４２は、画像合成指示を受け取ると、キャプチャ画像データ記憶部３７に格納されたサイズ変換処理済・色変換処理済の各キャプチャ画像データのそれぞれを、分割エリア情報ファイル３６の分割エリア情報の真の原点に基づいて合成箇所を特定して１画面の画像データに合成して合成画像データを生成し、生成した合成画像データを画像処理部４３に出力する。
【０１２７】
画像処理部４３は、画像合成部４２からの合成画像データを、表示部２１の走査周波数にコンバートして表示画像データを生成し、表示部２１に出力する。これにより、図８に示したように、真の分割エリア（以下、分割画面ということがある）５１Ａ，５１Ｂ，５１Ｃ，５１Ｄに、それぞれ端末機器１ａ，１ｂ，１ｃ，１ｄのキャプチャ画像データ（表示画面）がそれぞれ表示された多画面が表示画面５０に表示される（Ｓ２０）。
【０１２８】
次に、表示装置２からキャプチャ開始指示および表示状況管理ファイル３４を受け取った端末機器１側の動作について説明する。
図１４は、表示装置からキャプチャ開始指示および表示状況管理ファイルを受け取った端末機器側の動作を示すフローチャートである。ここでは、端末機器１ａ（ＰＣ−１）の動作として説明する。
【０１２９】
端末機器１ａの制御部１６は、表示装置２から送信されてくるキャプチャ開始指示と表示状況管理ファイル３４とを通信部１７を介して受信し（Ｓ３１）、表示状況管理ファイル３４の自端末機器１ａのキャプチャ範囲指定フラグを参照する（Ｓ３２）。ここでは「０」であるので（Ｓ３３）、全画面キャプチャと判断して画面キャプチャ処理部１８に全画面キャプチャを指示する。全画面キャプチャの指示を受けた画面キャプチャ処理部１８は、ビデオメモリ１２の内容（すなわち、現在、表示部１１の表示画面に表示されている内容）を例えばビットマップなどの形式で記憶部１５に格納する（全画面キャプチャ処理）（Ｓ３４）。
【０１３０】
そして、表示装置２からキャプチャ画像データ送信要求を受信すると（Ｓ３５）、ステップＳ３４の全画面キャプチャ処理で取得したキャプチャ画像データをキャプチャ画像データ送信要求に含まれる真の分割エリアサイズに基づいてサイズ変換を行うとともに、キャプチャ画像データ送信要求に含まれる表示色数に基づいて色変換を行う（Ｓ３６）。ここでは、端末機器１ａ（ＰＣ−１）の画面サイズが１２８０×１０２４（図１０参照）であるため、このサイズのキャプチャ画像データを、割り当てられた真の分割エリアサイズ６４０×５１２（図１３参照）にサイズ変換（縮小変換）する。なお、表示色数は、表示装置２と同様の１６７７万２１６色であるため実際には色変換は行われないが、表示装置２の表示色数よりも多い場合には、表示装置２の表示色数に合わせてダウンコンバートされることになる。このようにサイズ変換処理・色変換処理が施されたキャプチャ画像データを通信部１７を介して送信する（Ｓ３７）。
【０１３１】
一方、ステップＳ３３において、キャプチャ範囲管理フラグが「１」である場合には、部分キャプチャと判断して例えば「キャプチャ範囲を指定してください」などのメッセージを示すキャプチャ範囲指定指示画面が表示部１１に表示される（Ｓ３８）とともに、画面キャプチャ処理部１８に部分キャプチャが指示される。そして、キャプチャ範囲指定指示画面を確認したユーザによってウィンドウの選択や、所望の領域を囲む操作などが入力部１３を介して行われると、画面キャプチャ処理部１８は、ユーザインタフェース部１４を介してユーザ操作を認識し、指定された領域に対応するビデオメモリ１２上の画像データとその画像サイズを記憶部１５に格納する（部分キャプチャ処理）（Ｓ３９）。
【０１３２】
そして、表示装置２からキャプチャ画像データ送信要求を受信すると（Ｓ４０）、ステップＳ３９の部分キャプチャ処理で取得した部分キャプチャ画像の画像サイズを返信する（Ｓ４１）。この返信は上述したように表示装置２で受信され、表示装置２によって部分キャプチャでの画像サイズに基づき真の分割エリアサイズが再作成され、この再作成された真の分割エリアサイズと表示装置２の表示部２１の表示色数とを含む再・キャプチャ画像データ送信要求が端末機器１に送信される。端末機器１はこれを受信し、ステップＳ３９で記憶部１５に格納した部分キャプチャ画像データを、再・キャプチャ画像データ送信要求に含まれる真の分割エリアサイズに基づいてサイズ変換するとともに、キャプチャ画像データ送信要求に含まれる表示色数に基づいて色変換を行い（Ｓ３６）、このようにサイズ変換処理・色変換処理を行ったキャプチャ画像データを通信部１７を介して送信する（Ｓ３７）。
【０１３３】
以上の処理が端末機器１ａ以外の端末機器１ｂ，１ｃ，１ｄでも同様に行われる。その結果、上述したように、表示装置２には、各端末機器１ａ，１ｂ，１ｃ，１ｄそれぞれから、それぞれに割り当てた真の分割エリアサイズにサイズ変換され、また、表示装置２の表示部２１の表示色数に色変換されたキャプチャ画像データが送信されてくることになる。
【０１３４】
ところで、各端末機器１には、表示装置２から表示状況管理ファイル３４が送信されてくるが、この表示状況管理ファイル３４は、上述したように自端末機器１のキャプチャ範囲指定フラグの設定状態をチェックする際に利用される以外に、入力部１３で所定の操作を行うことによりファイルの内容を表示部１１に表示させることができるようになっている。また、接続許可管理ファイル３１、表示許可管理ファイル３２、接続状況管理ファイル３３についても適宜表示装置２から取得して同様に表示部１１に表示させることができるようになっており、これにより、ユーザが、自身が操作する端末機器１以外にどの端末機器が表示されているのか、また、自身の端末機器１に与えられた権限などを知ることができるようになっている。
【０１３５】
＜拡大表示機能＞
以下、現在表示されている複数分割画面のうち、任意の分割画面を拡大表示させる拡大表示機能について説明する。この拡大表示機能は、上記の構成において、優先度を変更することで対応できる。
【０１３６】
図１５は、拡大表示機能を説明するための模式図である。ここでは端末機器１ａの優先度を高めて拡大表示させた場合の例を示している。
この場合、例えばリモコンを操作して端末機器１ａの画面を指定する。この指定は、リモコンに端末機器１が割り当てられている場合はそのキーを押下することにより指定でき、また、割り当てられていない場合は、リモコンを操作して表示部２１に表示させたメニュー画面から選択したり、リモコンで表示画面上にポインタを表示させてそのポインタで端末機器１ａの画面を指し示してクリックするなどにより指定することができる。
【０１３７】
このようにして指定されたその指定情報、すなわち端末機器１ａの識別情報を含む拡大表示要求は、ユーザインタフェース部２４を介して制御部２７に通知され、制御部２７は拡大表示要求に含まれる識別情報に基づいて端末機器１ａを特定し、表示状況管理ファイル３４の端末機器１ａ（ＰＣ−１）の「優先度」の項目を「高」に設定し、分割エリア情報作成部４１にエリア分割要求を通知する。
【０１３８】
分割エリア情報作成部４１では、上記と同様にして分割エリア情報ファイル３６を作成する。この作成に際し、参照される仮・分割エリア設定テーブルは、例えば図１６（ａ）のように構成されており、図１６（ｂ）はその仮・分割エリア設定テーブルに基づく仮の分割エリアを図示したものである。ここで、図１６（ｂ）中の優先順位は、上述したように表示状況管理ファイル３４の「優先度」の項目に基づいて順位付けが決定されるもので、ここでは端末機器１ａの優先度が「高」で他の端末機器１ｂ，１ｃ，１ｄよりも高いため、優先順位が１番目すなわち図１６（ｂ）の仮の分割エリア（１台目用分割エリア）５２Ａが割り当てられる。その他の優先度の設定のない端末機器１ｂ，１ｃ，１ｄに対しての分割エリアの割り当ては、上述したように任意であり、ここでは、端末機器１ｂ，１ｃ，１ｄに、それぞれ順に仮の分割エリア５２Ｂ，５２Ｃ，５２Ｄが割り当てられるとする。そして、上記と同様にして各端末機器１ａ，１ｂ，１ｃ，１ｄに割り当てられる真の分割エリアを決定する。
【０１３９】
図１７は、この場合の真の分割エリアを示す図で、分割エリア５３Ａ，５３Ｂ，５３Ｃ，５３Ｄは、それぞれ端末機器１ａ，１ｂ，１ｃ，１ｄにそれぞれ割り当てられた真の分割エリアで、このときの分割エリア情報ファイル３６は図１８に示すような内容に構成される。
【０１４０】
そして、上記と同様の動作が行われ、その結果、図１５に示したように、真の分割エリア５３Ａ，５３Ｂ，５３Ｃ，５３Ｄに、各端末機器１ａ，１ｂ，１ｃ，１ｄのキャプチャ画像データ（表示画面）がそれぞれ表示され、各分割画面５３Ａ，５３Ｂ，５３Ｃ，５３Ｄのうち、指定された分割画面５１Ａが拡大された状態の多画面が表示画面５０に表示される。
【０１４１】
＜単画面切替機能＞
また、図１９に示すように、複数分割画面のうちの何れか１つを単画面表示させることも可能である。この場合、例えばリモコンを操作してその旨の入力操作を行う。その入力情報、すなわち単画面表示させたい分割画面５１Ｃに対応する端末機器１ｃの識別情報を含む単画面表示要求がユーザインタフェース部２４を介して制御部２７に通知され、制御部２７は単画面表示要求に含まれる識別情報に基づいて端末機器１ｃを特定し、表示状況管理ファイル３４の端末機器１ｃ（ＰＣ−３）の「優先度」の項目を「最高」に設定し、分割エリア情報作成部４１にエリア分割要求を通知する。
【０１４２】
そして、上記と同様の動作が行われ、その結果、図１９に示すように多画面から単画面に変更される。また、例えばリモコンによって所定の操作を行うことによって「優先度」の項目を「なし」に戻すことにより、元の多画面に戻ることのできる構成とする。
【０１４３】
このような単画面切替機能により、縮小されていて細部が見えない分割画面の細部を確認することが可能となり、また所定の操作によって多画面に戻ることができ使い勝手が良い。
【０１４４】
＜割り込み機能＞
また、図２０に示すように、現在、表示されている多画面に対し、新たな画面を割り込ませることも可能である。この割り込みは、多画面が表示された後の表示要求に相当し、上記の表示要求の際と同様の処理によって割り込みが可能である。
【０１４５】
＜消去機能＞
また、図２１に示すように、現在、表示されている複数分割画面のうち、任意の分割画面を消去することも可能である。この場合、リモコンを操作してその旨の入力操作を行う。その入力情報、すなわち消去したい分割画面５１Ｄに対応する端末機器１ｄの識別情報を含む消去要求がユーザインタフェース部２４を介して制御部２７に通知され、制御部２７は消去要求に含まれる識別情報に基づいて端末機器１ｄを特定し、該端末機器１ｄの端末機器情報を表示状況管理ファイル３４から削除し、分割エリア情報作成部４１にエリア分割要求を通知する。その後の動作は上記と同様であり、これにより、図２１に示すように消去指定された分割画面５０Ｄが削除され、消去後の台数分の複数分割画面に再構成された多画面が表示される。なお、単純に、消去指定された分割画面５１Ｄだけ削除する構成を採用してもよい。
【０１４６】
このように、本実施の形態によれば、ネットワーク３に接続されている複数の端末機器１で表示されている画面を、表示装置２の表示画面に、画面分割により１画面に表示する多画面表示機能を備えた表示システム１００を得ることができ、且つこの多画面表示機能を実現するに際して必要な処理、すなわち前述のサイズ変換処理および色変換処理を端末機器１側で行うようにしているため、仮に表示装置２側で各端末機器１からのキャプチャ画像データそれぞれに対して同様の変換処理を行うこととした場合に比べて表示装置２側の負荷を格段に軽減することができる。また、このように各端末機器側でサイズ変換処理および色変換処理を行うことにより、表示システム１００において、端末機器１の接続台数が増加しても、表示装置２側で行う処理への影響を最小減とすることができる。
【０１４７】
また、このように端末機器１側でキャプチャ画像データのサイズ変換を行ってからネットワーク３を介して表示装置２に送信するようにしているため、ネットワーク３の負荷も軽減することができる。
【０１４８】
また、多画面表示機能に加え、拡大表示機能、単画面切替機能、割り込み機能、消去機能を備えており、非常に使い勝手がよい。
【０１４９】
また、各端末機器１で取得されたキャプチャ画像データは、そのアスペクト比を維持したまま表示画面上の対応する分割画面に表示されるため、違和感のない表示画面を構成することができる。
【０１５０】
なお、表示要求を会議出席者（ユーザ）が入力部２３を介して都度行うのではなく、表示装置２主導で例えば３秒に１回毎に、表示画面を更新していくような方法でもよい。この場合は、表示装置２の制御部２７が時間を管理し、一定時間毎にその後の動作を上記と同様に行えばよく、常に最新の端末機器１の表示画面を得ることができる。
【０１５１】
＜差分キャプチャ機能＞
ここまでは全画面キャプチャ（または部分のキャプチャ）による方法を説明してきたが、以下、端末機器の表示画面上の変化を検出し、変化分のみをキャプチャして得られた画像データを送信する方法について説明する。
【０１５２】
まず、入力部２３の例えばリモコンを操作して、端末機器１ａ〜１ｄに対する差分キャプチャを行いたい意図を入力する。すなわち表示状況管理ファイル３４の差分キャプチャ管理フラグを「１」に設定する。
【０１５３】
差分キャプチャ管理フラグが「１」に設定された初回は、通常通り上記ステップＳ１〜Ｓ２０の処理を行って、多画面表示を行う。
【０１５４】
多画面表示が完了した後、表示装置２は、差分キャプチャ管理フラグが「１」となっている端末機器１に対して、制御部２７から通信部２８、ネットワーク３を介して、表示状況管理ファイル３４とともに差分キャプチャ開始指示を送信する。
【０１５５】
次に、表示装置２から差分キャプチャ開始指示および表示状況管理ファイルを受け取った端末機器１側の動作について説明する。
図２２は、表示装置２から差分キャプチャ開始指示および表示状況管理ファイルを受け取った端末機器１側の動作を示すフローチャートである。ここでは、端末機器１ａ（ＰＣ−１）の動作として説明する。
【０１５６】
端末機器１ａのデータ管理処理部１８は、表示装置２から送信されてくる差分キャプチャ開始指示と表示状況管理ファイル３４とを通信部１７を介して受信する（Ｓ４１）。これを受けて以後の全画面キャプチャ処理を実行する。すなわち画面キャプチャ処理部１９はビデオメモリ１２の内容を記憶部１５に格納する（Ｓ４２）。ここで得た画像データを、前・全画面データと呼ぶ。
【０１５７】
画面比較処理部２０は、データ管理処理部１８が受信した表示状況管理ファイル３４の差分キャプチャ管理フラグを一定時間毎（例えば０．５秒に１回などで、設定は任意）に参照し（Ｓ４３）、差分キャプチャ管理フラグ「１」であるならば（Ｓ４４）、以後の差分キャプチャ動作を行う。
また、例えばユーザ差分キャプチャ動作を停止するよう指示するには、表示状況管理ファイル３４を変更する方法で差分キャプチャ管理フラグを、「０」に書き換えればよい。これを画面比較処理部２０が参照することで、キャプチャ動作停止を判断する。
【０１５８】
全画面キャプチャ処理を実行し、画面キャプチャ処理１９はビデオメモリ１２の内容を記憶部１５に格納する（Ｓ４５）。ここで得た画像データを、後・全画面データと呼ぶ。次に、演算部１６の画面比較処理部２０は、前・全画面データと後・全画面データの比較を行う（Ｓ４６）。
【０１５９】
この画面比較処理の一例として、マウスポインタを動かしたときの例（図２３）で説明する。この図では、前・全画面データ６０と、後・全画面データ６１でマウスポインタの位置が変化している。すなわち図２４のように、２つの領域（７０，７１）が変化した領域として認識される。これを画面比較処理部２０は検出するが、ここで画面の変化があったと判断できた場合（Ｓ４７）、画面比較処理部２０は変化のあった領域の画像データと、画像データのサイズ（縦×横ピクセル）と、画像データの原点座標（表示状況管理ファイル３４の「キャプチャ画像サイズ」で規定されるエリア内での絶対座標）を取得する。
【０１６０】
この例の場合は、領域７０に関して、該領域７０部分のキャプチャ画像データ（以下、差分キャプチャ画像データ１という）、差分キャプチャ画像サイズ１、差分キャプチャ原点１が、領域７１に関しては、該領域７１部分のキャプチャ画像データ（以下、差分キャプチャ画像データ２という）、差分キャプチャ画像サイズ２、差分キャプチャ原点２が取得され、これらの情報を記憶部１５に格納すると同時に差分キャプチャ画像データ等を取得したことをデータ管理処理部１８に通知する（Ｓ４８）。なお、差分キャプチャ画像サイズ１、差分キャプチャ画像サイズ２、差分キャプチャ原点１、差分キャプチャ原点２は、表示状況管理ファイル３４の該当部分に書き込むことになる。
【０１６１】
これらのデータを通信部１７とネットワーク３を介して、ネットワーク管理部１８は表示装置２へ送信する（Ｓ４９）。なお、この差分キャプチャ機能では、上記全画面キャプチャ（または部分キャプチャ）による方法とは異なり、表示装置２側から送信要求を都度受けるのではなく、画面比較処理部２０で画面上の変換が検知されたこと場合、これが要因となって送信動作を行う。
次回の画面比較処理のために、後・全画面データを前・全画面データとする（Ｓ５０）。
【０１６２】
次に、端末機器１ａから差分キャプチャ画像データ１、差分キャプチャ画像データ２および表示状況管理ファイル３４を受け取った表示装置２側の動作について説明する。
【０１６３】
表示装置２は、端末機器１ａから差分キャプチャ画像データ１、差分キャプチャ画像データ２および表示状況管理ファイル３４を通信部２８で受信すると、制御部２７は画像合成部４２に画像合成指示を通知する。これにより表示装置２は差分キャプチャ機能による画像合成処理に入る。
【０１６４】
画像合成部４２は、画像合成指示を受け取ると、現在表示部２１で表示されている画像に該当する分離エリア情報ファイル３６と、端末機器１ａから受け取った表示状況管理ファイル３４（差分キャプチャ画像サイズ１、差分キャプチャ画像サイズ２、差分キャプチャ原点１、差分キャプチャ原点２）に基づいて、キャプチャ画像データ記憶部３７に格納されたキャプチャ画像データのうち、差分キャプチャ画像データ１、差分キャプチャ画像データ２に該当する部分を書き換える。この後の動作は上記のステップ１９、ステップ２０と同様である。
【０１６５】
この方法は、上記の全画面キャプチャ（または部分キャプチャ）による方法よりも、ネットワーク３で送信する画像データの量が少なくなるので、ネットワークへの負荷を低減できる。また、常に最新の端末機器１の表示画像を得ることができる。
【０１６６】
なお、上記の説明では差分検出の際、端末機器１に導入された専用のプログラムでキャプチャして処理することを想定しているが、これをビデオメモリの内容の差分を直接検出することができるようなドライバがＯＳ上で利用できる場合は、これを利用してもよい。
【０１６７】
なお、上記画像データは、圧縮画像形式（たとえばＪＰＥＧ形式など）で端末機器１と表示装置２の間で送受信を行うことにして、ネットワークへの負荷を軽減させてもよい。
【０１６８】
なお、上記では、表示要求や単画面表示要求などの各種要求を表示装置２側の入力部２３を操作することによって行う場合、すなわち表示装置２側主導で表示画面の構成を決定する場合を例に説明してきたが、各端末機器１側からも可能である。その場合、会議出席者（ユーザ）が、自身が操作する端末機器１から、その意図を入力部１３を操作して入力する。この入力情報は、ユーザインタフェース部１４を介して制御部１６に通知され、該制御部１６は、表示装置２に対し、通信部１７およびネットワーク３を介して自端末機器１の端末名とＩＰアドレスとを含む前記入力情報に応じた要求を送信する。この要求が、ネットワーク３を介して表示装置２の通信部２８で受信され、制御部２７に通知される。その後の動作は上記と同様であり、このように、各端末機器１側からも各種要求が可能となっている。
【０１６９】
なお、前記各種要求に全画面キャプチャか部分キャプチャかを指定する情報を含めることにより、キャプチャ範囲の指定も端末機器１側から可能である。
【０１７０】
また、優先度は、上述したようにユーザ操作により適宜指定できるようにしてもよいし、表示装置２に接続されることが予定される複数の端末機器１に対して予め与えられたものであってもよい。予め与えられている場合は、表示状況管理ファイル３４に端末機器情報を登録する際に、その端末機器１に与えられた優先度が自動的に表示状況管理ファイル３４の優先度の項目に設定されるような構成とされる。
【０１７１】
なお、本実施の形態では、仮・分割エリアを仮・分割エリア設定ファイル３５に基づき決定するとして説明してきたが、毎回、計算によって決定するようにしてもよい。
【０１７２】
また、部分キャプチャの場合、端末機器１から表示装置２に画像サイズを返信し、返信された画像サイズに基づいて表示装置２側で真の分割エリアの再作成を行う場合を例示したが、この再作成の処理も端末機器１側で行うようにしてもよい。
【図面の簡単な説明】
【図１】本発明の一実施の形態のネットワーク対応表示装置を備えた表示システムのネットワーク構成を示す図である。
【図２】端末機器の構成を示すブロック図である。
【図３】ネットワーク対応表示装置の構成を示すブロック図である。
【図４】ネットワーク対応表示装置の機能的な構成を示す図である。
【図５】表示状況管理ファイルで管理される端末機器情報の各項目を示す図である。
【図６】本実施の形態の動作の流れを示すフロチャート（１／２）である。
【図７】本実施の形態の動作の流れを示すフロチャート（２／２）である。
【図８】端末機器１ａ〜１ｄの４台の表示画面を表示装置の表示画面に多画面表示させた状態を示す模式図である。
【図９】分割エリア情報作成処理の流れを示すフロチャートである。
【図１０】表示状況管理ファイルの具体的構成の一例を示す図である。
【図１１】（ａ）は仮・分割エリア設定ファイルに格納されたテーブルの具体的構成の一例を示す図、（ｂ）は（ａ）のテーブルに基づく仮の分割エリアを示す図である。
【図１２】真の分割エリアサイズと真の原点の説明図である。
【図１３】分割エリア情報ファイルの一例を示す図である。
【図１４】表示装置からキャプチャ開始指示および表示状況管理ファイルを受け取った端末機器側の動作を示すフローチャートである。
【図１５】拡大表示機能を説明するための模式図である。
【図１６】（ａ）は優先度を変更した場合に参照される仮・分割エリア設定テーブルの一例を示す図、（ｂ）は（ａ）のテーブルに基づく仮の分割エリアを示す図である。
【図１７】優先度を変更した場合の真の分割エリアの一例を示す図である。
【図１８】優先度を変更した場合に作成される分割エリア情報ファイルの一例を示す図である。
【図１９】単画面表示機能を説明するための模式図である。
【図２０】割り込み機能を説明するための模式図である。
【図２１】画面消去機能を説明するための模式図である。
【図２２】表示装置から差分キャプチャ開始指示および表示状況管理ファイルを受け取った端末機器側の動作を示すフローチャートである。
【図２３】画面比較処理の一例として、マウスポインタを動かしたときの例を示す図である。
【図２４】図２３の画面比較処理の説明図である。
【図２５】従来の表示システムの一例を示す構成図である。
【符号の説明】
１ 端末機器
２ 表示装置
３ ネットワーク
１１ 表示部
１６ 制御部
１７ 通信部
１８ 画面キャプチャ処理部
１９ 画像変換部
２１ 表示部
２２ 表示制御部
２３ 入力部
２７ 制御部
２８ 通信部
４１ 分割エリア情報作成部（表示サイズ決定部）
４２ 画像合成部
４３ 画像処理部
１００ 表示システム
【０００１】
【発明の属する技術分野】
本発明は、ネットワーク上に接続された複数の端末機器の画面を表示装置の１つの画面上に多画面表示するための技術に関する。
【０００２】
【従来の技術】
図２５は、従来の表示システムの一例を示す構成図である。
図２５において、ネットワーク２１０には、ネットワーク対応表示装置としての例えばプロジェクタ２２０、ノートパソコン２３０、デスクトップパソコン２５１、２５２、２５３、２５４がそれぞれ接続され、更に、プロジェクタ２２０には、プロジェクタ２２０に直接図画等を入力して投射させたり、投射されているデータへの線図の挿入等が可能なタブレット２６１、２６２、２６３、２６４が直接接続されている。なお、ノートパソコン２３０およびデスクトップパソコン２５１、２５２、２５３、２５４には画面キャプチャソフトウェアがインストールされている。
【０００３】
このように構成された従来の表示システムでは、例えばノートパソコン２３０上の画面の内容を画面キャプチャソフトウェアによりキャプチャし、キャプチャされたそのキャプチャ画像データをネットワーク２１０を介してプロジェクタ２２０に送信することにより、ノートパソコン２３０上に表示されている画面をプロジェクタ２２０で投写表示することが可能となっている。そして、プロジェクタ付属のリモコンなどで切替操作を行うことにより、プロジェクタ２２０の投写画像を、ノートパソコン２３０の画面から別の例えばデスクトップパソコン２５１の画面の画像に切り換えることが可能となっている。
【０００４】
【発明が解決しようとする課題】
上記従来の表示システムでは、上述したようにプロジェクタ２２０で表示することのできる画像は、プロジェクタ２２０に接続されているノートパソコン２３０、デスクトップパソコン２５１、２５２、２５３、２５４のうちの何れか１つのパソコンの画像となっている。このため、ノートパソコン２３０、デスクトップパソコン２５１、２５２、２５３、２５４の各表示画面の内容を見比べて議論したい場合など、１画面ずつ切り替えて行わなければならず、このようなことから、近年、複数パソコンの画面を１画面で同時に表示することのできる機能が強く要望されている。
【０００５】
この要望に応えるべく、近年、開発が進められているが、現状では未だ存在せず、また、このような表示システムを実現するに際し、プロジェクタ（ネットワーク対応表示装置）で行うべき処理量が増加してネットワーク対応表示装置に多大な処理能力が要求されたり、ネットワークの負荷増大を招いたのでは問題があるという一面もある。
【０００６】
本発明は、このような点に鑑みなされたもので、ネットワーク対応表示装置やネットワークの負荷増大を招くことなく、ネットワーク接続された複数の端末機器における表示画面を、ネットワーク対応表示装置の表示画面上に多画面表示することが可能な表示システム、ネットワーク対応表示装置、表示制御プログラム、ネットワーク対応プロジェクタ、ネットワーク対応プラズマディスプレイ、ネットワーク対応液晶モニタ、端末機器、制御プログラムを提供することを目的とする。
【０００７】
【課題を解決するための手段】
（１）本発明に係る表示システムは、画面キャプチャ機能を有し、画面キャプチャ機能によって取得したキャプチャ画像データをネットワークを介して送信する複数の端末機器と、表示部を有し、端末機器から送信されたキャプチャ画像データをネットワークを介して受信し、画面分割により１画面の画像データに合成して表示部の表示画面に表示させる多画面表示機能を有するネットワーク対応表示装置とを備え、ネットワーク対応表示装置の表示画面への多画面表示のために必要な処理である、画面キャプチャ機能により取得されたキャプチャ画像データの画像サイズのサイズ変換処理を端末機器側で行うようにし、ネットワーク対応表示装置側では、そのサイズ変換後のキャプチャ画像データを端末機器から取得して合成を行うようにしたものである。
【０００８】
本発明によれば、多画面表示機能を実現するに際して必要なサイズ変換処理を端末機器側で行うようにしているため、ネットワーク対応表示装置やネットワークの負荷増大を招くことなく、ネットワーク接続された複数の端末機器における表示画面をネットワーク対応表示装置上に多画面表示することが可能な表示システムを得ることができる。
【０００９】
（２）本発明に係る表示システムは、上記（１）において、ネットワーク対応表示装置が、表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定して該当端末機器に送信し、その表示サイズを受信した端末機器は、サイズ変換処理の際、キャプチャ画像データの画像サイズを、受信した表示サイズにサイズ変換するものである。
【００１０】
本発明によれば、ネットワーク対応表示装置側で決定した表示サイズに基づいて端末機器側でサイズ変換処理を行うことができる。
【００１１】
（３）本発明に係る表示システムは、上記（１）又は（２）において、端末機器が、画面キャプチャ機能によって取得したキャプチャ画像データを、サイズ変換処理に加え、更にネットワーク対応表示装置の表示部の表示色数への色変換処理を行ってからネットワーク対応表示装置に送信するものである。
【００１２】
本発明によれば、端末機器側で更に色変換処理を行ってからネットワーク対応表示装置側にキャプチャ画像データを送信するため、更にネットワーク対応表示装置の負荷を軽減することが可能となる。
【００１３】
（４）本発明に係る表示システムは、上記（３）において、ネットワーク対応表示装置が、端末機器に表示サイズを送信する際に、自身の表示部の表示色数も送信し、端末機器が、ネットワーク対応表示装置から受信した表示色数に基づいて色変換処理を行うものである。
【００１４】
本発明によれば、ネットワーク対応表示装置側が指定した、ネットワーク対応表示装置の表示部の表示色数に基づいて端末機器側で色変換処理を行うことができる。
【００１５】
（５）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置がプロジェクタであるものである。
【００１６】
本発明によれば、ネットワーク対応表示装置としてプロジェクタを使用できる。
【００１７】
（６）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置がプラズマディスプレイであるものである。
【００１８】
本発明によれば、ネットワーク対応表示装置としてプラズマディスプレイを使用できる。
【００１９】
（７）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置が液晶モニタであるものである。
【００２０】
本発明によれば、ネットワーク対応表示装置として液晶モニタを使用できる。
【００２１】
（８）本発明に係る表示システムは、上記（１）〜（４）の何れかにおいて、ネットワーク対応表示装置が有機ＥＬディスプレイであるものである。
【００２２】
本発明によれば、ネットワーク対応表示装置として有機ＥＬディスプレイを使用できる。
【００２３】
（９）本発明に係る表示システムは、上記（１）〜（８）の何れかにおいて、端末機器がパソコンまたはＰＤＡであるものである。
【００２４】
本発明によれば、端末機器にパソコンまたはＰＤＡを使用できる。
【００２５】
（１０）本発明に係るネットワーク対応表示装置は、画面キャプチャ機能をそれぞれ備えた複数の端末機器とネットワークを介して接続されるネットワーク対応表示装置であって、表示部と、各端末機器との双方向通信が可能な通信部と、表示制御部とを備え、各端末機器それぞれで画面キャプチャ機能により取得され所定の画像サイズにサイズ変換されたキャプチャ画像データを通信部で受信し、表示制御部は、通信部で受信した各キャプチャ画像データを画面分割により１画面の画像データに合成して表示部の表示画面に表示させる多画面表示機能を有するものである。
【００２６】
本発明によれば、サイズ変換済のキャプチャ画像データを端末機器側から取得して合成表示するので、多画面表示のための処理の負荷を軽減することが可能なネットワーク対応表示装置を得ることができる。
【００２７】
（１１）本発明に係るネットワーク対応表示装置は、上記（１０）において、表示制御部が、現在の表示画面に新たな画面を割り込ませて表示させる割り込み機能を有するものである。
【００２８】
本発明によれば、割り込み機能を有するネットワーク対応表示装置を得ることができる。
【００２９】
（１２）本発明に係るネットワーク対応表示装置は、上記（１０）又は（１１）において、ネットワーク対応表示装置に接続されている複数の端末機器の中から、表示画面にキャプチャ画像データを表示させる端末機器をユーザが任意に選択できるようにしたものである。
【００３０】
本発明によれば、複数の端末機器の中から、キャプチャ画像データをネットワーク対応表示装置上に表示させる端末機器をユーザが選択することが可能なネットワーク対応表示装置を得ることができる。
【００３１】
（１３）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１２）の何れかにおいて、表示画面にキャプチャ画像データを表示させる端末機器の選択を、通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも可能としたものである。
【００３２】
本発明によれば、ネットワーク対応表示装置上にキャプチャ画像データを表示させる端末機器をネットワーク対応表示装置側からも、端末機器側からも指定することが可能なネットワーク対応表示装置を得ることができる。
【００３３】
（１４）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１３）の何れかにおいて、表示制御部が、表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を拡大表示させる拡大表示機能を有するものである。
【００３４】
本発明によれば、所定の分割画面を拡大表示させる拡大表示機能を有するネットワーク対応表示装置を得ることができる。
【００３５】
（１５）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１３）の何れかにおいて、表示制御部が、表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を表示画面全体の表示に切り替える単画面切替機能を有するものである。
【００３６】
本発明によれば、所定の分割画面を表示画面全体の表示に切り替える単画面切替機能を有するネットワーク対応表示装置を得ることができる。
【００３７】
（１６）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１３）の何れかにおいて、表示制御部が、表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を消去させる消去機能を有するものである。
【００３８】
本発明によれば、所定の分割画面を消去させる消去機能を有するネットワーク対応表示装置を得ることができる。
【００３９】
（１７）本発明に係るネットワーク対応表示装置は、上記（１４）〜（１６）の何れかにおいて、所定の分割画面が、ユーザ操作に基づいて選択されたものである。
【００４０】
本発明によれば、拡大表示させる分割画面、単画面表示させる分割画面、消去させる分割画面をユーザが選択することが可能なネットワーク対応表示装置を得ることができる。
【００４１】
（１８）本発明に係るネットワーク対応表示装置は、上記（１７）において、所定の分割画面が、通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも選択可能としたものである。
【００４２】
本発明によれば、拡大表示させる分割画面、単画面表示させる分割画面、消去させる分割画面をネットワーク対応表示装置側からも、端末機器側からも指定することが可能なネットワーク対応表示装置を得ることができる。
【００４３】
（１９）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１８）の何れかにおいて、端末機器から受信したキャプチャ画像データが、端末機器の表示画面の全部または一部範囲を指定してキャプチャして得られた画像データであるものである。
【００４４】
本発明によれば、表示部の表示画面上に表示するキャプチャ画像データは、全画面キャプチャにより得られたキャプチャ画像データ、部分キャプチャにより得られたキャプチャ画像データのどちらも表示することが可能なネットワーク対応表示装置を得ることができる。
【００４５】
（２０）本発明に係るネットワーク対応表示装置は、上記（１０）〜（１８）の何れかにおいて、端末機器から取得するキャプチャデータが、端末機器の表示画面上の変化を検出し、画面上の変化分のみをキャプチャして得られた画像データであるものである。
【００４６】
本発明によれば、端末機器の表示画面上の変化部分のみをキャプチャすることによりネットワークへの負荷が軽減され、これを既存のキャプチャデータと合成した画像データを表示することが可能なネットワーク対応表示装置を得ることができる。
【００４７】
（２１）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２０）の何れかにおいて、表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定する表示サイズ決定部と、表示サイズ決定部で決定された表示サイズを通信部により該当の各端末機器にそれぞれ送信する制御部とを備え、制御部は、表示サイズを送信した各端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換されたキャプチャ画像データを通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して表示部に表示するように表示制御部を制御するものである。
【００４８】
本発明によれば、端末機器側でサイズ変換処理するときの表示サイズを、表示サイズ決定部で決定した表示サイズとすることができる。
【００４９】
（２２）本発明に係るネットワーク対応表示装置は、上記（２１）において、表示すべき端末機器に割り当てる分割画面のアスペクト比を、その端末機器の表示部の表示画面のアスペクト比と同じとしたものである。
【００５０】
本発明によれば、違和感のない表示画面を構成することが可能なネットワーク対応表示装置を得ることができる。
【００５１】
（２３）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２２）の何れかにおいて、制御部が、端末機器に表示サイズを送信する際に、表示部の表示色数も送信し、表示サイズおよび表示色数を送信した端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換され、且つ表示色数に変換されたキャプチャ画像データを通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して表示部に表示するように表示制御部を制御するものである。
【００５２】
本発明によれば、端末機器側で縮少変換に加えて更に色変換も施されたキャプチャ画像データを受信して合成表示するので、多画面表示のための処理の負荷を更に軽減することが可能なネットワーク対応表示装置を得ることができる。
【００５３】
（２４）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２３）の何れかにおいて、通信部の通信プロトコルがＴＣＰ／ＩＰであるものである。
【００５４】
本発明によれば、通信部の通信プロトコルとして、一般的なＴＣＰ／ＩＰを利用できる。
【００５５】
（２５）本発明に係るネットワーク対応表示装置は、上記（１０）〜（２４）の何れかにおいて、ネットワークが、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮのうちの何れかであるものである。
【００５６】
本発明によれば、ネットワークとして、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮを利用できる。
【００５７】
（２６）本発明に係るネットワーク対応プロジェクタは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載したものである。
【００５８】
本発明によれば、上記効果を備えたプロジェクタを得ることが可能となる。
【００５９】
（２７）本発明に係るネットワーク対応プロジェクタは、上記（２６）において、表示部が液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤの何れかであるものである。
【００６０】
本発明によれば、表示部に液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤを使用したプロジェクタにおいて上記効果を奏することが可能となる。
【００６１】
（２８）本発明に係るネットワーク対応プラズマディスプレイは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載し、表示部をプラズマディスプレイパネルとしたものである。
【００６２】
本発明によれば、上記効果を備えたプラズマディスプレイを得ることが可能となる。
【００６３】
（２９）本発明に係るネットワーク対応液晶モニタは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載し、表示部を液晶パネルとしたものである。
【００６４】
本発明によれば、上記効果を備えた液晶モニタを得ることが可能となる。
【００６５】
（３０）本発明に係るネットワーク対応有機ＥＬディスプレイは、上記（１０）〜（２５）の何れかのネットワーク対応表示装置を搭載し、表示部を有機ＥＬパネルとしたものである。
【００６６】
本発明によれば、上記効果を備えたネットワーク対応有機ＥＬディスプレイを得ることが可能となる。
【００６７】
（３１）本発明に係る表示制御プログラムは、上記（１０）〜（２５）の何れかのネットワーク表示装置の表示制御部をＣＰＵにより実現させるものである。
【００６８】
本発明によれば、上記の効果を表示装置に提供することのできる表示制御プログラムを得ることが可能となる。
【００６９】
（３２）本発明に係る端末機器は、上記（１０）〜（２５）の何れかのネットワーク対応表示装置にネットワークを介して接続される端末機器であって、表示部と、ネットワーク対応表示装置との双方向通信が可能な通信部と、表示部の表示画面に表示された内容をキャプチャする画面キャプチャ処理部と、画面キャプチャ処理部でキャプチャしたキャプチャ画像データを所定の画像サイズにサイズ変換する画像変換部と、画像変換部でサイズ変換されたキャプチャ画像データを通信部からネットワーク対応表示装置に送信させる制御部とを備え、ネットワーク対応表示装置の表示画面に表示される多画面のうちの１分割画面に表示されるキャプチャ画像データを生成するものである。
【００７０】
本発明によれば、ネットワーク対応表示装置の表示画面に表示される多画面のうちの１分割画面に表示されるキャプチャ画像データを生成するに際し、多画面表示に必要な処理の一部、具体的にはサイズ変換処理を担うことで、ネットワーク対応表示装置の負荷低減に貢献できる端末機器を得ることが可能となる。
【００７１】
（３３）本発明に係る端末機器は、上記（３２）において、ネットワーク対応表示装置の表示画面が、表示すべき端末機器台数分に分割され、その表示すべき端末機器に割り当てられる分割画面の表示サイズが決められており、画像変換部は、画面キャプチャ処理部で取得したキャプチャ画像データを、自端末機器に割り当てられた表示サイズにサイズ変換するものである。
【００７２】
本発明によれば、ネットワーク対応表示装置側で決定された表示サイズに基づいてサイズ変換処理を行うことができる。
【００７３】
（３４）本発明に係る端末機器は、上記（３２）又は（３３）において、画像変換部が、サイズ変換に加えて、更に、ネットワーク対応表示装置の表示部の表示色数に色変換を行い、制御部は、サイズ変換処理および色変換処理を施したキャプチャ画像データを通信部からネットワーク対応表示装置に送信するものである。
【００７４】
本発明によれば、サイズ変換処理に加えて更に色変換処理も行うことで、ネットワーク対応表示装置の更なる負荷軽減に貢献できる。
【００７５】
（３５）本発明に係る制御プログラムは、上記（３２）〜（３４）の何れかの端末機器の各処理部をＣＰＵにより実現させるものである。
【００７６】
本発明によれば、上記の効果を端末機器に提供することのできる制御プログラムを得ることが可能となる。
【００７７】
【発明の実施の形態】
図１は本発明の一実施の形態のネットワーク対応表示装置を備えた表示システムのネットワーク構成を示す図である。
この表示システム１００は、複数の端末機器１（図１では１ａ，１ｂ，１ｃ，１ｄの４台のみを図示）と、本発明の主要機能である多画面表示機能を有するネットワーク対応表示装置２（図にはプロジェクタの例を図示）（以下、略して表示装置２という）とを備え、複数の端末機器１と表示装置２とがネットワーク３を介してＴＣＰ／ＩＰ等の通信プロトコルを用いて双方向通信可能に接続されている。各端末機器１にはそれぞれ固有の名前（以下、端末名という）が予め与えられている。なお、ネットワーク３には、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮのＢｌｕｅｔｏｏｔｈ（Ｂｌｕｅｔｏｏｄｈ ＳＩＧ Ｉｎｃ．， Ｕ．Ｓ．Ａの登録商標）などの各種ネットワークが利用できる。
【００７８】
この表示システム１００は、複数の端末機器１でそれぞれ表示されている画面を、表示装置２の表示画面上に画面分割により同時に表示させることを可能とするシステムであり、例えば会議やプレゼンテーションなどの際に用いて有効なシステムである。以下、端末機器１、表示装置２それぞれの構成について詳細に説明する。
【００７９】
図２は端末機器の構成を示すブロック図である。
端末機器１は、例えばパソコンやＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）などで構成されるもので、プレゼンテーション用の資料などの各種情報を表示するための表示部１１、該表示部１１に表示される内容を記憶するビデオメモリ１２、例えばタブレット、マウス、操作キーで構成される入力部１３、該入力部１３からの操作入力を検出して入力情報を後述の制御部１６に出力するユーザインタフェース部１４、本発明に係る処理を行なうためのアプリケーション（制御プログラム）や各種データを格納する記憶部１５、制御部（ＣＰＵ）１６、通信部１７を備えている。
【００８０】
記憶部１５に格納されている制御プログラムは、表示装置２での多画面機能を実現するための端末機器側制御機能と、表示部１１の画面の全部又は一部をキャプチャすることのできる画面キャプチャ機能と、画面キャプチャ機能によって取得されたキャプチャ画像データを表示装置２の表示部２１の形式に変換する画像変換機能と、表示部１１の画面上の変化を検出する機能を実現するためのもので、該制御プログラムとＣＰＵとによって制御部１６、画面キャプチャ処理部１８、画像変換部１９、画面比較処理部２０が構成されている。
【００８１】
制御部１６は、接続要求、表示要求、拡大表示要求、単画面切替要求、消去要求などの各種要求をユーザインタフェース部１４または通信部１７を介して受け取り、その要求内容に応じた処理を行うとともに、画面キャプチャ処理部１８で取得されたキャプチャ画像データを画像変換部１９で変換させ、変換後のキャプチャ画像データを通信部１７から表示装置２に送信させる処理などを行う。
【００８２】
通信部１７は、表示装置２との双方向通信を行う部分で、ここでは通信プロトコルがＴＣＰ／ＩＰで、このＴＣＰ／ＩＰ接続に必要なＡＲＰ，ＩＣＭＰ，ＩＰ，ＴＣＰ，ＵＤＰ等のプロトコル処理機能を有するものである。なお、この機能はＯＳによって実現される。
【００８３】
なお、画像変換部１９で行われる変換処理は、以下に詳述するが表示装置２で多画面表示を行うに際し必要な処理であり、具体的には自端末機器１に割り当てられた分割画面の表示サイズへのサイズ変換処理と、表示装置２の表示部２１の表示色数への色変換処理である。このように、端末機器１では、画面キャプチャ処理部１８で取得されたキャプチャ画像データに対し、表示装置２での多画面表示に必要な変換処理を行ってから表示装置２に送信するように構成される。
【００８４】
図３は表示装置の構成を示すブロック図である。
表示装置２は、表示部２１、本発明の多画面表示機能、拡大表示機能、単画面切替機能、割り込み機能および消去機能を有し、表示部２１に表示させる表示画面の制御を行う表示制御部２２、例えばリモコン、マウス、操作キーで構成される入力部２３、入力部２３からの操作入力を検出して入力内容を後述の制御部２７に出力するユーザインタフェース部２４、本発明の多画面表示機能を提供する表示制御プログラムを格納するプログラム記憶部２５、この表示制御プログラムの実行に際して必要となる各種ファイルや各種データが記憶されるデータ記憶部２６、表示装置２全体の動作制御を行う制御部（ＣＰＵ）２７、端末機器１との双方向通信を行う通信部２８を備えている。
【００８５】
通信部２８は、端末機器１との双方向通信を行う部分で、ここでは通信プロトコルがＴＣＰ／ＩＰで、このＴＣＰ／ＩＰ接続に必要なＡＲＰＩＣＭＰ，ＩＰ，ＴＣＰ，ＵＤＰ等のプロトコル処理機能を有するものである。
【００８６】
なお、この表示装置２は、具体的には、図１に例示したプロジェクタの他に、例えばプラズマディスプレイ、液晶モニタなどで構成される。図３には、本発明の趣旨と関連のある主要部のみを図示し、プロジェクタ、プラズマディスプレイ、液晶モニタにおいてそれぞれ特有の他の機構については本発明の趣旨とは関連性がないので省略しているが、既存のプロジェクタ、プラズマディスプレイ、液晶モニタにそれぞれ図３に示す各処理部を備えることにより、ネットワーク対応プロジェクタ、ネットワーク対応プラズマディスプレイ、ネットワーク対応液晶モニタを実現することができる。また、表示部２１はこれら表示装置２の種類によって異なる表示要素で、具体的には、プロジェクタであれば液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤ（Ｄｉｇｉｔａｌ Ｍｉｃｒｏｍｉｒｒｏｒ Ｄｅｖｉｃｅ）（テキサスインスツルメンツ社の商標）となり、この場合、表示部２１の表示画面は投射面となる。また、例えばプラズマディスプレイであれば、表示部２１はプラズマディスプレイパネルとなり、液晶モニタであれば液晶パネルとなり、有機ＥＬディスプレイであれば、有機ＥＬパネルとなる。
【００８７】
次に、図４を参照してデータ記憶部に格納されている各種ファイル等について説明する。
データ記憶部２６には、表示部仕様管理ファイル３０、接続許可管理ファイル３１、表示許可管理ファイル３２、接続状況管理ファイル３３、表示状況管理ファイル３４、仮・分割エリア設定ファイル３５、分割エリア情報ファイル３６が格納され、また、各端末機器１から送信されてきたキャプチャ画像データを記憶するためのキャプチャ画像データ記憶部３７を備えている。
【００８８】
表示部仕様管理ファイル３０は、表示部２１の表示画面の横・縦のピクセル数を示す画面サイズと、表示部２１の表示色数を示す色数情報とが登録されたファイルである。なお、本例では、画面サイズが１２８０×１０２４（ＳＸＧＡ）、色数が１６７７万７２１６色であるとする。
【００８９】
接続許可管理ファイル３１は、接続が許可されている端末機器１の端末名が登録されているファイル、表示許可管理ファイル３２は、画面表示が許可されている端末機器１の端末名が登録されているファイルである。
【００９０】
接続状況管理ファイル３３は、現在、表示装置２に接続されている端末機器１の端末名が登録されるファイルである。
【００９１】
表示状況管理ファイル３４は、現在の表示部２１の表示状況を管理するファイルで、現在の表示部２１の表示画面に表示されているキャプチャ画像データ発信元の端末機器１に関する端末機器情報をテーブル形式で管理する。この表示状況管理ファイル３４は、表示部２１の表示画面が変更される毎に更新され、例えば、４分割画面から３分割画面に変更された場合、消去された分割画面に対応する端末機器１の端末機器情報は当該テーブルから消去され、逆に４分割画面から５分割画面に変更された場合、その追加された画面に対応する端末機器１の端末情報が新たに登録されるようになっている。
【００９２】
図５は、表示状況管理ファイルで管理される端末機器情報の各項目を示す図である。
表示状況管理ファイル３４は、「端末名」、「ＩＰアドレス」、「画面サイズ」、「色数情報」、「優先度」、「キャプチャ範囲管理フラグ」、「差分キャプチャ管理フラグ」、「キャプチャ画像サイズ」、「差分キャプチャ画像サイズ１」、「差分キャプチャ画像サイズ２」、「差分キャプチャ原点１」、「差分キャプチャ原点２」の項目で構成されている。
【００９３】
「端末名」は、端末機器１に予め与えられた名前、「画面サイズ」は表示部１１の表示画面の横・縦のピクセル数で、例えば、解像度がＳＸＧＡの端末機器であれば１２８０×１０２４、ＸＧＡであれば１０２４×７６８である。「色数情報」は、表示部１１の表示色数で、例えば２５６色、１６７７万７２１６色などである。以上の「端末名」、「ＩＰアドレス」、「画面サイズ」、「色数情報」は、この表示状況管理ファイル３４への登録時には必ず格納されるデータであり、その他の項目は、ユーザ操作等に応じて適宜設定（更新）されるデータである。
【００９４】
「優先度」は、「端末名」で特定される端末機器１に割り当てる分割画面の表示サイズの大きさを左右するもので、「最高」、「高」、「なし」などの値をとり、以下に詳述するが、本例では優先度が高いと割り当てられる表示サイズが大きくなるように構成されている。「キャプチャ範囲管理フラグ」は「端末名」で特定される端末機器１での画面キャプチャが全画面キャプチャか部分キャプチャかを管理するフラグで、通常は全画面キャプチャを示す「０」を示し、部分キャプチャである場合に「１」に設定される。
【００９５】
「差分キャプチャ管理フラグ」は「端末名」で特定される端末機器１での画面キャプチャが、通常のキャプチャか画面上の変化分のみのキャプチャ（以後、差分キャプチャと呼ぶ）かを管理するフラグで、通常キャプチャである場合は「０」を示し、差分キャプチャである場合は「１」に設定される。
【００９６】
「キャプチャ画像サイズ」は「キャプチャ範囲管理フラグ」が「１」の場合すなわち部分キャプチャの場合のキャプチャ画像データのサイズ（縦横のピクセル数）である。
【００９７】
「差分キャプチャ画像サイズ１」と「差分キャプチャ画像サイズ２」は「差分キャプチャ管理フラグ」が「１」の場合の、差分キャプチャにおいて取得される２つの異なる範囲のエリアのサイズである。「差分キャプチャ原点１」と「差分キャプチャ原点２」は、差分キャプチャにおいて取得される２つの異なる範囲のエリアの原点であり、「キャプチャ画像サイズ」で規定されるエリア内での絶対座標で示す。
【００９８】
仮・分割エリア設定ファイル３５は、各端末機器１に割り当てる仮の分割エリアを特定するための情報が予め設定されているファイルで、端末台数毎に準備された複数のテーブルから構成される。このテーブルは後述の図１１（ａ）、図１６（ａ）に示すような構成となっており、その詳細については以下の該当箇所で説明することにする。なお、分割エリア情報ファイル３６についても以下で詳述することにする。
【００９９】
以上の各ファイル３０，３１，３２，３３，３４，３５，３６は、入力部２３で所定の操作を行うと、ファイルの内容が表示部２１に表示され、表示画面上で確認、データ変更が自由に行えるようになっている。
【０１００】
ここで、図４の説明に戻る。
表示制御部２２は、表示サイズ決定部としての分割エリア情報作成部４１、画像合成部４２および画像処理部４３とを備え、制御部２７でユーザインタフェース部２４あるいは通信部２８を介して受け取ったユーザからの接続要求、表示要求、割り込み表示要求、消去要求などの各種要求内容に応じて、必要な処理を各処理部４１，４２，４３にデータ記憶部２６内の必要ファイルを適宜アクセスさせながら実施させ、表示部２１の表示制御を行う。表示制御部２２は、プログラム記憶部２５に格納された多画面機能を提供する表示制御プログラムと制御部（ＣＰＵ）２７とによって実現される。
【０１０１】
分割エリア情報作成部４１は、表示状況管理ファイル３４に基づいて表示対象の端末機器１の台数を把握するとともに、表示対象の各端末機器１それぞれの優先度および画面サイズを取得する。そして、これら表示対象の端末機器１の台数、表示対象の端末機器１それぞれの優先度および画面サイズに応じて表示部２１の表示画面サイズの分割を行い、表示対象の各端末機器１それぞれに割り当てる表示部２１上の分割画面の表示サイズ（以下、分割エリアサイズという）、およびその分割画面の表示位置を特定する情報（表示画面に対する分割画面の左上の絶対座標で、以下、原点という）とを含む分割エリア情報を作成し、分割エリア情報ファイル３６としてデータ記憶部２６に格納する動作を行う。
【０１０２】
分割エリア情報作成部４１で作成された分割エリア情報ファイル３６において、表示対象の各端末機器１それぞれに割り当てた分割画面の分割エリアサイズは、表示部仕様管理ファイル３０に格納された表示部２１の表示色数と共に、制御部２７により通信部２８から、表示対象の各端末機器１それぞれに送信され、これを受信した各端末機器１から返信されてくるキャプチャ画像データすなわち送信した分割エリアサイズおよび表示色に基づいて前述のサイズ変換処理および色変換処理が施されたキャプチャ画像データがキャプチャ画像データ記憶部３７に書き込まれる。なお、いま分割エリアサイズと呼ばれている情報は、以下で真の分割エリアサイズと呼ばれているものと同一である。
【０１０３】
画像合成部４２は、キャプチャ画像データ記憶部３７に格納された各端末機器１からのサイズ変換処理および色変換処理済のキャプチャ画像データを、分割エリア情報作成部４１で作成された分割エリア情報ファイル３６に基づいて合成し、合成画像データを生成する。
【０１０４】
画像処理部４３は、画像合成部４２で生成された合成画像データや、ＯＳＤ（オン・スクリーン・ディスプレイ）機能等を用いて参照されたデータ記憶部２６の表示状況管理ファイル３４などの各種画像データに対し走査周波数変換処理を行って表示画像データを生成し、表示部２１に出力する部分で、例えばスキャンコンバータで構成される。
【０１０５】
以下、本実施の形態の動作を説明する。図６、図７は本実施の形態の動作を示すフロチャートである。
まず、表示装置２側では、多画面表示を行うための準備段階として入力部２３から所定の操作入力が行われ、制御部２７はその操作入力をユーザインタフェース部２４を介して検知すると、通信部２８およびネットワーク３を介して端末名およびＩＰアドレスの返信要求を表示装置２のＩＰアドレスと共に一斉同報する。この一斉同報された端末名およびＩＰアドレスの返信要求は、ネットワーク３上の各端末機器１に受信され、各端末機器１のそれぞれは、自身の端末名およびＩＰアドレスを表示装置２に返信する。
【０１０６】
表示装置２は、通信部２８を介して各端末機器１からの返信（端末名およびＩＰアドレス）を受信し、接続許可端末であるか否かを判定する。具体的には、返信された端末名が、接続許可管理ファイル３１に登録されてる端末名と一致するかをチェックし、一致すれば接続許可端末と判定する。
【０１０７】
接続許可端末と判定した端末機器１からの端末名およびＩＰアドレスを順次、接続状況管理ファイル３３に登録する。この接続状況管理ファイル３３により、表示装置２側で、今現在、何台の端末機器１が接続されているのかを把握することができる。また、端末名に基づいて接続許可・不許可を判断するようにしているので、例えばＤＨＣＰによって端末機器１にＩＰアドレスが与えられ、その与えられるＩＰアドレスが接続の度に異なる場合などにおいても、対応できるようになっている。
【０１０８】
以上の準備作業が終了したところで、表示装置２は、各種要求待ちの状態で待機する。いま、各会議出席者が操作する各端末機器１のうち、次の図に示すように端末機器１ａ〜１ｄの４台の表示画面を表示装置２の表示画面５０に多画面表示させたい場合を考える。ここでそれぞれの端末機器１の解像度を、端末機器１ａはＳＸＧＡ（１２８０×１０２４ピクセル）、端末機器１ｂはＳＶＧＡ（８００×６００ピクセル）、端末機器１ｃはＸＧＡ（１０２４×７６８ピクセル）、端末機器１ｄは４８０×６４０ピクセルとした例として説明していく。
【０１０９】
＜多画面表示機能＞
図８は端末機器１ａ〜１ｄの４台の表示画面を表示装置の表示画面に多画面表示させた状態を示す模式図である。
まず、入力部２３の例えばリモコンを操作して端末機器１ａ〜１ｄの多画面表示の意図を入力する。すると、この入力情報、すなわち端末機器１ａ〜１ｄそれぞれの識別情報を含む表示要求がユーザインタフェース部２４を介して制御部２７に通知される（Ｓ１）。なお、この表示要求の際に、優先度や、部分キャプチャや、差分キャプチャの指定も可能であるが、ここでは何れの指定もしないこととする。
【０１１０】
表示要求を受信した表示装置２の制御部２７は、表示対象の各端末機器１ａ〜１ｄそれぞれについて以下のステップＳ３〜ステップＳ９の処理を行う（Ｓ２）。すなわち、接続許可端末であるか、表示許可端末であるかを、表示要求に含まれる識別情報により特定される端末名に基づいて接続許可管理ファイル３１、表示許可管理ファイル３２を参照してそれぞれ判定し（Ｓ３）、接続・表示共に許可した場合には（Ｓ４）、その端末機器に通信部２８を介して端末機器情報（端末名、ＩＰアドレス、画面サイズ、色数情報）を要求する（Ｓ５）。そして、この要求に応答して返信されてきた端末機器情報を受信し（Ｓ６）、表示状況管理ファイル３４に登録する（Ｓ７）。なお、この表示要求の際に、優先度や、部分キャプチャの指定、差分キャプチャの指定が行われていた場合には、このステップＳ７の登録の際に、「優先度」、「キャプチャ範囲管理フラグ」、「差分キャプチャ管理フラグ」も同様に登録される。
【０１１１】
そして、接続・表示共に許可した端末機器１に対し、表示状況管理ファイル３４とともに画面キャプチャ開始指示を送信する（Ｓ８）。なお、接続・表示を許可しない端末機器１に対しては、その旨を通信部２８を介して通知する（Ｓ９）。
【０１１２】
ここでは、端末機器１ａ〜１ｄの全てが接続・表示共に許可する端末機器１とすると、ステップＳ２〜ステップＳ９の処理により、各端末機器１ａ〜１ｄからの端末機器情報が表示状況管理ファイル３４に登録されるとともに、各端末機器１ａ〜１ｄに対し、表示状況管理ファイル３４とともに画面キャプチャ開始指示が通信部２８を介して送信されることになる。
【０１１３】
以上の処理が終了すると、制御部２７は、表示制御部２２の分割エリア情報作成部４１にエリア分割要求を通知する。これにより表示装置２は分割エリア情報作成処理に入る（Ｓ１０）。画面キャプチャ開始指示を受け取った端末機器１側の動作は後述することにして、以下、エリア分割要求を受信した分割エリア情報作成部４１での分割エリア情報作成処理について説明する。
【０１１４】
図９は、分割エリア情報作成処理の流れを示すフロチャートである。ここでは、表示状況管理ファイル３４が図１０のように構成されているものとし、以下に分割エリア情報作成部４１の動作を具体的に説明する。なお、図１０において端末名がＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１がそれぞれ端末機器１ａ，１ｂ，１ｃ，１ｄに対応しているものとする。
【０１１５】
分割エリア情報作成部４１は、制御部２７からエリア分割要求を受信すると、表示状況管理ファイル３４を参照して表示対象の端末機器１の台数（ここでは４台）を把握するとともに、各端末機器１ａ，１ｂ，１ｃ，１ｄそれぞれの優先度を取得する（Ｓ２１）。そして、これら端末機器１の台数と、各端末機器１ａ〜１ｄそれぞれの優先度とに基づいて仮・分割エリア設定ファイル３５を参照し、各端末機器１ａ，１ｂ，１ｃ，１ｄそれぞれに割り当てるべき仮の分割エリアの仮のサイズと、仮の原点とを取得する（Ｓ２２）。なお、「仮」とした理由については以下の説明で明らかになるが、ここで割り当てられる分割エリアは、後のステップにおいてキャプチャ画像データをサイズ変換する際に変更されることになるからである。
【０１１６】
ここでは、図１０に示すように表示対象の端末機器台数が４台で、その全てに優先度の設定がないため、この場合に仮・分割エリア設定ファイル３５で参照される該当の仮・分割エリア設定テーブルは例えば図１１（ａ）のように構成されている。なお、本例では表示部２１の表示画面の画面サイズを１２８０×１０２４（ＳＸＧＡ）としており、図１１（ａ）の仮・分割エリア設定テーブルはこの場合の一例である。また、図１１（ｂ）は（ａ）の仮・分割エリア設定テーブルに基づく仮の分割エリアを図示したものである。
【０１１７】
ここで、図１１（ａ）の優先順位とは、表示状況管理ファイル３４の「優先度」の項目に基づいて順位付けが決定されるもので、優先度の高いものから順に１台目、２台目、３台目、４台目とされる。そして、そのそれぞれには、その下のテーブルに示される「仮サイズ」、「仮原点」で特定される領域が仮の分割エリアとして割り当てられる。ここでは表示対象の全端末機器１ａ，１ｂ，１ｃ，１ｄの全てにおいて「なし」であるため（図１０参照）、実質上、優先順位は無い。このように優先度の設定が無い場合の割り当て順は予め決められた所定の順序としてもよいし、表示状況管理ファイル３４への登録順とするなど任意であるが、本例では、各端末機器１ａ，１ｂ，１ｃ，１ｄ（以下、適宜、端末名のＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１と呼ぶことにする）に、それぞれ順に仮の分割エリア５０Ａ，５０Ｂ，５０Ｃ，５０Ｄが割り当てられるとして以下に説明を続けることにする。
【０１１８】
分割エリア情報作成部４１は、さらに表示状況管理ファイル３４（図１０参照）から各ＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１それぞれの画面サイズを取得し、これら取得した情報に基づいて、それぞれに割り当てる真の分割エリアサイズと、真の原点を決定する（Ｓ２３）。
【０１１９】
図１２は、真の分割エリアの説明図である。なお、図１２において５１Ａ，５１Ｂ，５１Ｃ，５１Ｄは、それぞれＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１にそれぞれ割り当てられた真の分割エリアを示している。真の分割エリアとは、仮の分割エリア内に、その仮の分割エリア内に表示させるべきキャプチャ画像データを、アスペクト比を維持したままサイズ変換し、なおかつその変換後の画像を、仮の分割エリア５０Ａ，５０Ｂ，５０Ｃ，５０Ｄそれぞれの中心部に表示させるための表示領域のことである。ここで、この真の分割エリアを特定するための真の分割エリアサイズについて具体的にＰＣ−２の例で説明すると、ＰＣ−２は画面サイズが１０２４×７６８ピクセル（図１０参照）であり、このサイズの画像データを、当該ＰＣ−２に割り当てられた６４０×５１２ピクセルの仮の分割エリア５０Ｂ内に表示させるために、元の画像のアスペクト比（すなわち表示部１１の表示画面のアスペクト比に相当）を維持したまま縮小したときのサイズである。また、真の原点とは、図１２に示すように、そのサイズの分割画面を仮の分割エリア５０Ｂの中心部に位置させるためのもので、分割画面の左上のピクセルの座標（表示画面全体に対する絶対座標）である。
【０１２０】
分割エリア情報作成部４１は、以上のような真の分割エリアサイズと真の原点とをＰＣ−１，ＰＣ−２，ＰＣ−３，ＰＤＡ−１それぞれについて決定し、端末名、分割エリア、原点の項目からなる図１３に示すような内容の分割エリア情報を作成して分割エリア情報ファイル３６としてデータ記憶部２６に記憶させる（Ｓ２４）。これにより分割エリア情報作成処理が終了する。なお、この分割エリア情報ファイル３６には作成日時（２００２年５月２１日 １７：００：３２）が付されるようになっている。
【０１２１】
ここで、図６に戻る。
表示装置２の制御部２７は、分割エリア情報作成部４１での分割エリア情報作成処理（Ｓ１０）が終了すると、表示対象の各端末機器１ａ，１ｂ，１ｃ，１ｄに対し、ステップＳ１２〜ステップＳ１４の処理を行う（Ｓ１１）。すなわち、キャプチャ画像データ送信要求を送信する（Ｓ１２）。このキャプチャ画像データ送信要求には、分割エリア情報ファイル３６に格納されている、当該要求の送信先の端末機器１に割り当てた真の分割エリアサイズと、表示部仕様管理ファイル３０に格納されている自表示装置２の表示部２１の表示色数とが含めて送信される。すなわち、例えば端末機器１ａ（ＰＣ−１）に対しては、真の分割エリアサイズ６４０×５１２（図１３参照）と、表示装置２の表示色数１６７７万７２１６色とを含むキャプチャ画像データ送信要求が送信されることになる。
【０１２２】
ところで、端末機器１側ではステップＳ８で表示装置２から送信されたキャプチャ開始要求を受信後、画面キャプチャを開始しており、端末機器１で行われた画面キャプチャが全画面キャプチャであれば、このステップＳ１２のキャプチャ画像データ送信要求に対し、後述するように該キャプチャ画像データ送信要求に含まれる真の分割エリアサイズおよび表示色数に基づきサイズ変換処理・色数変換処理が施されたキャプチャ画像データが表示装置２に返信され、部分キャプチャであれば部分キャプチャ画像の画像サイズが返信されてくる。
【０１２３】
表示装置２は、端末機器１からの返信を受信し（Ｓ１３）、返信内容がキャプチャ画像データであるときは、端末機器１で行われた画面キャプチャが全画面キャプチャであると判断し（Ｓ１４）、その受信したキャプチャ画像データをキャプチャ画像データ記憶部３７に書き込む（Ｓ１８）。
【０１２４】
一方、ステップＳ１３で受信した端末機器１からの返信が画像サイズであるときは当該端末機器１で行われた画面キャプチャが部分キャプチャであると判断し（Ｓ１４）、受信した画像サイズで表示状況管理ファイル３４の「キャプチャ画像サイズ」を更新するとともに、受信した画像サイズに基づいて分割エリア情報（真の分割エリアサイズ及び真の原点）を上記と同様の処理により再作成して（Ｓ１５）分割エリア情報ファイル３６の該当箇所を更新し、再作成した真の分割エリアサイズと表示部２１の表示色数とを含む再・キャプチャ画像データ送信要求を送信する（Ｓ１６）。この再・キャプチャ画像データ送信要求は後述するように端末機器１に受信され、再・キャプチャ画像データ送信要求に含まれる真の分割エリアサイズおよび表示装置２の表示色数に基づきサイズ変換処理・色数変換処理が施されたキャプチャ画像データが表示装置２に返信され、表示装置２は端末機器１からの返信を受信し（Ｓ１７）、キャプチャ画像データ記憶部３７に書き込む（Ｓ１８）。
【０１２５】
以上の処理を表示対象の各端末機器１ａ〜１ｄそれぞれについて行い、表示対象の端末機器１ａ，１ｂ，１ｃ，１ｄからのキャプチャ画像データが全て揃うと、制御部２７は画像合成部４２に画像合成指示を通知する。これにより表示装置２は画像合成処理に入る（Ｓ１９）。
【０１２６】
画像合成部４２は、画像合成指示を受け取ると、キャプチャ画像データ記憶部３７に格納されたサイズ変換処理済・色変換処理済の各キャプチャ画像データのそれぞれを、分割エリア情報ファイル３６の分割エリア情報の真の原点に基づいて合成箇所を特定して１画面の画像データに合成して合成画像データを生成し、生成した合成画像データを画像処理部４３に出力する。
【０１２７】
画像処理部４３は、画像合成部４２からの合成画像データを、表示部２１の走査周波数にコンバートして表示画像データを生成し、表示部２１に出力する。これにより、図８に示したように、真の分割エリア（以下、分割画面ということがある）５１Ａ，５１Ｂ，５１Ｃ，５１Ｄに、それぞれ端末機器１ａ，１ｂ，１ｃ，１ｄのキャプチャ画像データ（表示画面）がそれぞれ表示された多画面が表示画面５０に表示される（Ｓ２０）。
【０１２８】
次に、表示装置２からキャプチャ開始指示および表示状況管理ファイル３４を受け取った端末機器１側の動作について説明する。
図１４は、表示装置からキャプチャ開始指示および表示状況管理ファイルを受け取った端末機器側の動作を示すフローチャートである。ここでは、端末機器１ａ（ＰＣ−１）の動作として説明する。
【０１２９】
端末機器１ａの制御部１６は、表示装置２から送信されてくるキャプチャ開始指示と表示状況管理ファイル３４とを通信部１７を介して受信し（Ｓ３１）、表示状況管理ファイル３４の自端末機器１ａのキャプチャ範囲指定フラグを参照する（Ｓ３２）。ここでは「０」であるので（Ｓ３３）、全画面キャプチャと判断して画面キャプチャ処理部１８に全画面キャプチャを指示する。全画面キャプチャの指示を受けた画面キャプチャ処理部１８は、ビデオメモリ１２の内容（すなわち、現在、表示部１１の表示画面に表示されている内容）を例えばビットマップなどの形式で記憶部１５に格納する（全画面キャプチャ処理）（Ｓ３４）。
【０１３０】
そして、表示装置２からキャプチャ画像データ送信要求を受信すると（Ｓ３５）、ステップＳ３４の全画面キャプチャ処理で取得したキャプチャ画像データをキャプチャ画像データ送信要求に含まれる真の分割エリアサイズに基づいてサイズ変換を行うとともに、キャプチャ画像データ送信要求に含まれる表示色数に基づいて色変換を行う（Ｓ３６）。ここでは、端末機器１ａ（ＰＣ−１）の画面サイズが１２８０×１０２４（図１０参照）であるため、このサイズのキャプチャ画像データを、割り当てられた真の分割エリアサイズ６４０×５１２（図１３参照）にサイズ変換（縮小変換）する。なお、表示色数は、表示装置２と同様の１６７７万２１６色であるため実際には色変換は行われないが、表示装置２の表示色数よりも多い場合には、表示装置２の表示色数に合わせてダウンコンバートされることになる。このようにサイズ変換処理・色変換処理が施されたキャプチャ画像データを通信部１７を介して送信する（Ｓ３７）。
【０１３１】
一方、ステップＳ３３において、キャプチャ範囲管理フラグが「１」である場合には、部分キャプチャと判断して例えば「キャプチャ範囲を指定してください」などのメッセージを示すキャプチャ範囲指定指示画面が表示部１１に表示される（Ｓ３８）とともに、画面キャプチャ処理部１８に部分キャプチャが指示される。そして、キャプチャ範囲指定指示画面を確認したユーザによってウィンドウの選択や、所望の領域を囲む操作などが入力部１３を介して行われると、画面キャプチャ処理部１８は、ユーザインタフェース部１４を介してユーザ操作を認識し、指定された領域に対応するビデオメモリ１２上の画像データとその画像サイズを記憶部１５に格納する（部分キャプチャ処理）（Ｓ３９）。
【０１３２】
そして、表示装置２からキャプチャ画像データ送信要求を受信すると（Ｓ４０）、ステップＳ３９の部分キャプチャ処理で取得した部分キャプチャ画像の画像サイズを返信する（Ｓ４１）。この返信は上述したように表示装置２で受信され、表示装置２によって部分キャプチャでの画像サイズに基づき真の分割エリアサイズが再作成され、この再作成された真の分割エリアサイズと表示装置２の表示部２１の表示色数とを含む再・キャプチャ画像データ送信要求が端末機器１に送信される。端末機器１はこれを受信し、ステップＳ３９で記憶部１５に格納した部分キャプチャ画像データを、再・キャプチャ画像データ送信要求に含まれる真の分割エリアサイズに基づいてサイズ変換するとともに、キャプチャ画像データ送信要求に含まれる表示色数に基づいて色変換を行い（Ｓ３６）、このようにサイズ変換処理・色変換処理を行ったキャプチャ画像データを通信部１７を介して送信する（Ｓ３７）。
【０１３３】
以上の処理が端末機器１ａ以外の端末機器１ｂ，１ｃ，１ｄでも同様に行われる。その結果、上述したように、表示装置２には、各端末機器１ａ，１ｂ，１ｃ，１ｄそれぞれから、それぞれに割り当てた真の分割エリアサイズにサイズ変換され、また、表示装置２の表示部２１の表示色数に色変換されたキャプチャ画像データが送信されてくることになる。
【０１３４】
ところで、各端末機器１には、表示装置２から表示状況管理ファイル３４が送信されてくるが、この表示状況管理ファイル３４は、上述したように自端末機器１のキャプチャ範囲指定フラグの設定状態をチェックする際に利用される以外に、入力部１３で所定の操作を行うことによりファイルの内容を表示部１１に表示させることができるようになっている。また、接続許可管理ファイル３１、表示許可管理ファイル３２、接続状況管理ファイル３３についても適宜表示装置２から取得して同様に表示部１１に表示させることができるようになっており、これにより、ユーザが、自身が操作する端末機器１以外にどの端末機器が表示されているのか、また、自身の端末機器１に与えられた権限などを知ることができるようになっている。
【０１３５】
＜拡大表示機能＞
以下、現在表示されている複数分割画面のうち、任意の分割画面を拡大表示させる拡大表示機能について説明する。この拡大表示機能は、上記の構成において、優先度を変更することで対応できる。
【０１３６】
図１５は、拡大表示機能を説明するための模式図である。ここでは端末機器１ａの優先度を高めて拡大表示させた場合の例を示している。
この場合、例えばリモコンを操作して端末機器１ａの画面を指定する。この指定は、リモコンに端末機器１が割り当てられている場合はそのキーを押下することにより指定でき、また、割り当てられていない場合は、リモコンを操作して表示部２１に表示させたメニュー画面から選択したり、リモコンで表示画面上にポインタを表示させてそのポインタで端末機器１ａの画面を指し示してクリックするなどにより指定することができる。
【０１３７】
このようにして指定されたその指定情報、すなわち端末機器１ａの識別情報を含む拡大表示要求は、ユーザインタフェース部２４を介して制御部２７に通知され、制御部２７は拡大表示要求に含まれる識別情報に基づいて端末機器１ａを特定し、表示状況管理ファイル３４の端末機器１ａ（ＰＣ−１）の「優先度」の項目を「高」に設定し、分割エリア情報作成部４１にエリア分割要求を通知する。
【０１３８】
分割エリア情報作成部４１では、上記と同様にして分割エリア情報ファイル３６を作成する。この作成に際し、参照される仮・分割エリア設定テーブルは、例えば図１６（ａ）のように構成されており、図１６（ｂ）はその仮・分割エリア設定テーブルに基づく仮の分割エリアを図示したものである。ここで、図１６（ｂ）中の優先順位は、上述したように表示状況管理ファイル３４の「優先度」の項目に基づいて順位付けが決定されるもので、ここでは端末機器１ａの優先度が「高」で他の端末機器１ｂ，１ｃ，１ｄよりも高いため、優先順位が１番目すなわち図１６（ｂ）の仮の分割エリア（１台目用分割エリア）５２Ａが割り当てられる。その他の優先度の設定のない端末機器１ｂ，１ｃ，１ｄに対しての分割エリアの割り当ては、上述したように任意であり、ここでは、端末機器１ｂ，１ｃ，１ｄに、それぞれ順に仮の分割エリア５２Ｂ，５２Ｃ，５２Ｄが割り当てられるとする。そして、上記と同様にして各端末機器１ａ，１ｂ，１ｃ，１ｄに割り当てられる真の分割エリアを決定する。
【０１３９】
図１７は、この場合の真の分割エリアを示す図で、分割エリア５３Ａ，５３Ｂ，５３Ｃ，５３Ｄは、それぞれ端末機器１ａ，１ｂ，１ｃ，１ｄにそれぞれ割り当てられた真の分割エリアで、このときの分割エリア情報ファイル３６は図１８に示すような内容に構成される。
【０１４０】
そして、上記と同様の動作が行われ、その結果、図１５に示したように、真の分割エリア５３Ａ，５３Ｂ，５３Ｃ，５３Ｄに、各端末機器１ａ，１ｂ，１ｃ，１ｄのキャプチャ画像データ（表示画面）がそれぞれ表示され、各分割画面５３Ａ，５３Ｂ，５３Ｃ，５３Ｄのうち、指定された分割画面５１Ａが拡大された状態の多画面が表示画面５０に表示される。
【０１４１】
＜単画面切替機能＞
また、図１９に示すように、複数分割画面のうちの何れか１つを単画面表示させることも可能である。この場合、例えばリモコンを操作してその旨の入力操作を行う。その入力情報、すなわち単画面表示させたい分割画面５１Ｃに対応する端末機器１ｃの識別情報を含む単画面表示要求がユーザインタフェース部２４を介して制御部２７に通知され、制御部２７は単画面表示要求に含まれる識別情報に基づいて端末機器１ｃを特定し、表示状況管理ファイル３４の端末機器１ｃ（ＰＣ−３）の「優先度」の項目を「最高」に設定し、分割エリア情報作成部４１にエリア分割要求を通知する。
【０１４２】
そして、上記と同様の動作が行われ、その結果、図１９に示すように多画面から単画面に変更される。また、例えばリモコンによって所定の操作を行うことによって「優先度」の項目を「なし」に戻すことにより、元の多画面に戻ることのできる構成とする。
【０１４３】
このような単画面切替機能により、縮小されていて細部が見えない分割画面の細部を確認することが可能となり、また所定の操作によって多画面に戻ることができ使い勝手が良い。
【０１４４】
＜割り込み機能＞
また、図２０に示すように、現在、表示されている多画面に対し、新たな画面を割り込ませることも可能である。この割り込みは、多画面が表示された後の表示要求に相当し、上記の表示要求の際と同様の処理によって割り込みが可能である。
【０１４５】
＜消去機能＞
また、図２１に示すように、現在、表示されている複数分割画面のうち、任意の分割画面を消去することも可能である。この場合、リモコンを操作してその旨の入力操作を行う。その入力情報、すなわち消去したい分割画面５１Ｄに対応する端末機器１ｄの識別情報を含む消去要求がユーザインタフェース部２４を介して制御部２７に通知され、制御部２７は消去要求に含まれる識別情報に基づいて端末機器１ｄを特定し、該端末機器１ｄの端末機器情報を表示状況管理ファイル３４から削除し、分割エリア情報作成部４１にエリア分割要求を通知する。その後の動作は上記と同様であり、これにより、図２１に示すように消去指定された分割画面５０Ｄが削除され、消去後の台数分の複数分割画面に再構成された多画面が表示される。なお、単純に、消去指定された分割画面５１Ｄだけ削除する構成を採用してもよい。
【０１４６】
このように、本実施の形態によれば、ネットワーク３に接続されている複数の端末機器１で表示されている画面を、表示装置２の表示画面に、画面分割により１画面に表示する多画面表示機能を備えた表示システム１００を得ることができ、且つこの多画面表示機能を実現するに際して必要な処理、すなわち前述のサイズ変換処理および色変換処理を端末機器１側で行うようにしているため、仮に表示装置２側で各端末機器１からのキャプチャ画像データそれぞれに対して同様の変換処理を行うこととした場合に比べて表示装置２側の負荷を格段に軽減することができる。また、このように各端末機器側でサイズ変換処理および色変換処理を行うことにより、表示システム１００において、端末機器１の接続台数が増加しても、表示装置２側で行う処理への影響を最小減とすることができる。
【０１４７】
また、このように端末機器１側でキャプチャ画像データのサイズ変換を行ってからネットワーク３を介して表示装置２に送信するようにしているため、ネットワーク３の負荷も軽減することができる。
【０１４８】
また、多画面表示機能に加え、拡大表示機能、単画面切替機能、割り込み機能、消去機能を備えており、非常に使い勝手がよい。
【０１４９】
また、各端末機器１で取得されたキャプチャ画像データは、そのアスペクト比を維持したまま表示画面上の対応する分割画面に表示されるため、違和感のない表示画面を構成することができる。
【０１５０】
なお、表示要求を会議出席者（ユーザ）が入力部２３を介して都度行うのではなく、表示装置２主導で例えば３秒に１回毎に、表示画面を更新していくような方法でもよい。この場合は、表示装置２の制御部２７が時間を管理し、一定時間毎にその後の動作を上記と同様に行えばよく、常に最新の端末機器１の表示画面を得ることができる。
【０１５１】
＜差分キャプチャ機能＞
ここまでは全画面キャプチャ（または部分のキャプチャ）による方法を説明してきたが、以下、端末機器の表示画面上の変化を検出し、変化分のみをキャプチャして得られた画像データを送信する方法について説明する。
【０１５２】
まず、入力部２３の例えばリモコンを操作して、端末機器１ａ〜１ｄに対する差分キャプチャを行いたい意図を入力する。すなわち表示状況管理ファイル３４の差分キャプチャ管理フラグを「１」に設定する。
【０１５３】
差分キャプチャ管理フラグが「１」に設定された初回は、通常通り上記ステップＳ１〜Ｓ２０の処理を行って、多画面表示を行う。
【０１５４】
多画面表示が完了した後、表示装置２は、差分キャプチャ管理フラグが「１」となっている端末機器１に対して、制御部２７から通信部２８、ネットワーク３を介して、表示状況管理ファイル３４とともに差分キャプチャ開始指示を送信する。
【０１５５】
次に、表示装置２から差分キャプチャ開始指示および表示状況管理ファイルを受け取った端末機器１側の動作について説明する。
図２２は、表示装置２から差分キャプチャ開始指示および表示状況管理ファイルを受け取った端末機器１側の動作を示すフローチャートである。ここでは、端末機器１ａ（ＰＣ−１）の動作として説明する。
【０１５６】
端末機器１ａのデータ管理処理部１８は、表示装置２から送信されてくる差分キャプチャ開始指示と表示状況管理ファイル３４とを通信部１７を介して受信する（Ｓ４１）。これを受けて以後の全画面キャプチャ処理を実行する。すなわち画面キャプチャ処理部１９はビデオメモリ１２の内容を記憶部１５に格納する（Ｓ４２）。ここで得た画像データを、前・全画面データと呼ぶ。
【０１５７】
画面比較処理部２０は、データ管理処理部１８が受信した表示状況管理ファイル３４の差分キャプチャ管理フラグを一定時間毎（例えば０．５秒に１回などで、設定は任意）に参照し（Ｓ４３）、差分キャプチャ管理フラグ「１」であるならば（Ｓ４４）、以後の差分キャプチャ動作を行う。
また、例えばユーザ差分キャプチャ動作を停止するよう指示するには、表示状況管理ファイル３４を変更する方法で差分キャプチャ管理フラグを、「０」に書き換えればよい。これを画面比較処理部２０が参照することで、キャプチャ動作停止を判断する。
【０１５８】
全画面キャプチャ処理を実行し、画面キャプチャ処理１９はビデオメモリ１２の内容を記憶部１５に格納する（Ｓ４５）。ここで得た画像データを、後・全画面データと呼ぶ。次に、演算部１６の画面比較処理部２０は、前・全画面データと後・全画面データの比較を行う（Ｓ４６）。
【０１５９】
この画面比較処理の一例として、マウスポインタを動かしたときの例（図２３）で説明する。この図では、前・全画面データ６０と、後・全画面データ６１でマウスポインタの位置が変化している。すなわち図２４のように、２つの領域（７０，７１）が変化した領域として認識される。これを画面比較処理部２０は検出するが、ここで画面の変化があったと判断できた場合（Ｓ４７）、画面比較処理部２０は変化のあった領域の画像データと、画像データのサイズ（縦×横ピクセル）と、画像データの原点座標（表示状況管理ファイル３４の「キャプチャ画像サイズ」で規定されるエリア内での絶対座標）を取得する。
【０１６０】
この例の場合は、領域７０に関して、該領域７０部分のキャプチャ画像データ（以下、差分キャプチャ画像データ１という）、差分キャプチャ画像サイズ１、差分キャプチャ原点１が、領域７１に関しては、該領域７１部分のキャプチャ画像データ（以下、差分キャプチャ画像データ２という）、差分キャプチャ画像サイズ２、差分キャプチャ原点２が取得され、これらの情報を記憶部１５に格納すると同時に差分キャプチャ画像データ等を取得したことをデータ管理処理部１８に通知する（Ｓ４８）。なお、差分キャプチャ画像サイズ１、差分キャプチャ画像サイズ２、差分キャプチャ原点１、差分キャプチャ原点２は、表示状況管理ファイル３４の該当部分に書き込むことになる。
【０１６１】
これらのデータを通信部１７とネットワーク３を介して、ネットワーク管理部１８は表示装置２へ送信する（Ｓ４９）。なお、この差分キャプチャ機能では、上記全画面キャプチャ（または部分キャプチャ）による方法とは異なり、表示装置２側から送信要求を都度受けるのではなく、画面比較処理部２０で画面上の変換が検知されたこと場合、これが要因となって送信動作を行う。
次回の画面比較処理のために、後・全画面データを前・全画面データとする（Ｓ５０）。
【０１６２】
次に、端末機器１ａから差分キャプチャ画像データ１、差分キャプチャ画像データ２および表示状況管理ファイル３４を受け取った表示装置２側の動作について説明する。
【０１６３】
表示装置２は、端末機器１ａから差分キャプチャ画像データ１、差分キャプチャ画像データ２および表示状況管理ファイル３４を通信部２８で受信すると、制御部２７は画像合成部４２に画像合成指示を通知する。これにより表示装置２は差分キャプチャ機能による画像合成処理に入る。
【０１６４】
画像合成部４２は、画像合成指示を受け取ると、現在表示部２１で表示されている画像に該当する分離エリア情報ファイル３６と、端末機器１ａから受け取った表示状況管理ファイル３４（差分キャプチャ画像サイズ１、差分キャプチャ画像サイズ２、差分キャプチャ原点１、差分キャプチャ原点２）に基づいて、キャプチャ画像データ記憶部３７に格納されたキャプチャ画像データのうち、差分キャプチャ画像データ１、差分キャプチャ画像データ２に該当する部分を書き換える。この後の動作は上記のステップ１９、ステップ２０と同様である。
【０１６５】
この方法は、上記の全画面キャプチャ（または部分キャプチャ）による方法よりも、ネットワーク３で送信する画像データの量が少なくなるので、ネットワークへの負荷を低減できる。また、常に最新の端末機器１の表示画像を得ることができる。
【０１６６】
なお、上記の説明では差分検出の際、端末機器１に導入された専用のプログラムでキャプチャして処理することを想定しているが、これをビデオメモリの内容の差分を直接検出することができるようなドライバがＯＳ上で利用できる場合は、これを利用してもよい。
【０１６７】
なお、上記画像データは、圧縮画像形式（たとえばＪＰＥＧ形式など）で端末機器１と表示装置２の間で送受信を行うことにして、ネットワークへの負荷を軽減させてもよい。
【０１６８】
なお、上記では、表示要求や単画面表示要求などの各種要求を表示装置２側の入力部２３を操作することによって行う場合、すなわち表示装置２側主導で表示画面の構成を決定する場合を例に説明してきたが、各端末機器１側からも可能である。その場合、会議出席者（ユーザ）が、自身が操作する端末機器１から、その意図を入力部１３を操作して入力する。この入力情報は、ユーザインタフェース部１４を介して制御部１６に通知され、該制御部１６は、表示装置２に対し、通信部１７およびネットワーク３を介して自端末機器１の端末名とＩＰアドレスとを含む前記入力情報に応じた要求を送信する。この要求が、ネットワーク３を介して表示装置２の通信部２８で受信され、制御部２７に通知される。その後の動作は上記と同様であり、このように、各端末機器１側からも各種要求が可能となっている。
【０１６９】
なお、前記各種要求に全画面キャプチャか部分キャプチャかを指定する情報を含めることにより、キャプチャ範囲の指定も端末機器１側から可能である。
【０１７０】
また、優先度は、上述したようにユーザ操作により適宜指定できるようにしてもよいし、表示装置２に接続されることが予定される複数の端末機器１に対して予め与えられたものであってもよい。予め与えられている場合は、表示状況管理ファイル３４に端末機器情報を登録する際に、その端末機器１に与えられた優先度が自動的に表示状況管理ファイル３４の優先度の項目に設定されるような構成とされる。
【０１７１】
なお、本実施の形態では、仮・分割エリアを仮・分割エリア設定ファイル３５に基づき決定するとして説明してきたが、毎回、計算によって決定するようにしてもよい。
【０１７２】
また、部分キャプチャの場合、端末機器１から表示装置２に画像サイズを返信し、返信された画像サイズに基づいて表示装置２側で真の分割エリアの再作成を行う場合を例示したが、この再作成の処理も端末機器１側で行うようにしてもよい。
【図面の簡単な説明】
【図１】本発明の一実施の形態のネットワーク対応表示装置を備えた表示システムのネットワーク構成を示す図である。
【図２】端末機器の構成を示すブロック図である。
【図３】ネットワーク対応表示装置の構成を示すブロック図である。
【図４】ネットワーク対応表示装置の機能的な構成を示す図である。
【図５】表示状況管理ファイルで管理される端末機器情報の各項目を示す図である。
【図６】本実施の形態の動作の流れを示すフロチャート（１／２）である。
【図７】本実施の形態の動作の流れを示すフロチャート（２／２）である。
【図８】端末機器１ａ〜１ｄの４台の表示画面を表示装置の表示画面に多画面表示させた状態を示す模式図である。
【図９】分割エリア情報作成処理の流れを示すフロチャートである。
【図１０】表示状況管理ファイルの具体的構成の一例を示す図である。
【図１１】（ａ）は仮・分割エリア設定ファイルに格納されたテーブルの具体的構成の一例を示す図、（ｂ）は（ａ）のテーブルに基づく仮の分割エリアを示す図である。
【図１２】真の分割エリアサイズと真の原点の説明図である。
【図１３】分割エリア情報ファイルの一例を示す図である。
【図１４】表示装置からキャプチャ開始指示および表示状況管理ファイルを受け取った端末機器側の動作を示すフローチャートである。
【図１５】拡大表示機能を説明するための模式図である。
【図１６】（ａ）は優先度を変更した場合に参照される仮・分割エリア設定テーブルの一例を示す図、（ｂ）は（ａ）のテーブルに基づく仮の分割エリアを示す図である。
【図１７】優先度を変更した場合の真の分割エリアの一例を示す図である。
【図１８】優先度を変更した場合に作成される分割エリア情報ファイルの一例を示す図である。
【図１９】単画面表示機能を説明するための模式図である。
【図２０】割り込み機能を説明するための模式図である。
【図２１】画面消去機能を説明するための模式図である。
【図２２】表示装置から差分キャプチャ開始指示および表示状況管理ファイルを受け取った端末機器側の動作を示すフローチャートである。
【図２３】画面比較処理の一例として、マウスポインタを動かしたときの例を示す図である。
【図２４】図２３の画面比較処理の説明図である。
【図２５】従来の表示システムの一例を示す構成図である。
【符号の説明】
１ 端末機器
２ 表示装置
３ ネットワーク
１１ 表示部
１６ 制御部
１７ 通信部
１８ 画面キャプチャ処理部
１９ 画像変換部
２１ 表示部
２２ 表示制御部
２３ 入力部
２７ 制御部
２８ 通信部
４１ 分割エリア情報作成部（表示サイズ決定部）
４２ 画像合成部
４３ 画像処理部
１００ 表示システム
【特許請求の範囲】
【請求項１】
画面キャプチャ機能を有し、該画面キャプチャ機能によって取得したキャプチャ画像データをネットワークを介して送信する複数の端末機器と、表示部を有し、前記端末機器から送信された前記キャプチャ画像データをネットワークを介して受信し、画面分割により１画面の画像データに合成して前記表示部の表示画面に表示させる多画面表示機能を有するネットワーク対応表示装置とを備え、
前記ネットワーク対応表示装置の前記表示画面への多画面表示のために必要な処理である、前記画面キャプチャ機能により取得された前記キャプチャ画像データの画像サイズのサイズ変換処理を前記端末機器側で行うようにし、前記ネットワーク対応表示装置側では、そのサイズ変換後のキャプチャ画像データを前記端末機器から取得して前記合成を行うようにしたことを特徴とする表示システム。
【請求項２】
前記ネットワーク対応表示装置は、前記表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定して該当端末機器に送信し、その表示サイズを受信した端末機器は、前記サイズ変換処理の際、前記キャプチャ画像データの画像サイズを、前記受信した前記表示サイズにサイズ変換することを特徴とする請求項１記載の表示システム。
【請求項３】
前記端末機器は、前記画面キャプチャ機能によって取得したキャプチャ画像データを、前記サイズ変換処理に加え、更に前記ネットワーク対応表示装置の前記表示部の表示色数への色変換処理を行ってから前記ネットワーク対応表示装置に送信することを特徴とする請求項１又は請求項２記載の表示システム。
【請求項４】
前記ネットワーク対応表示装置は、前記端末機器に表示サイズを送信する際に、自身の前記表示部の表示色数も送信し、前記端末機器は、前記ネットワーク対応表示装置から受信した前記表示色数に基づいて前記色変換処理を行うことを特徴とする請求項３記載の表示システム。
【請求項５】
前記ネットワーク対応表示装置がプロジェクタであることを特徴とする請求項１乃至請求項４の何れかに記載の表示システム。
【請求項６】
前記ネットワーク対応表示装置がプラズマディスプレイであることを特徴とする請求項１乃至請求項４の何れかに記載の表示システム。
【請求項７】
前記ネットワーク対応表示装置が液晶モニタであることを特徴とする請求項１乃至請求項４の何れかに記載の表示システム。
【請求項８】
前記ネットワーク対応表示装置が有機ＥＬディスプレイであることを特徴とする請求項１乃至請求項４の何れかに記載のネットワーク対応表示装置。
【請求項９】
前記端末機器がパソコンまたはＰＤＡであることを特徴とする請求項１乃至請求項８の何れかに記載の表示システム。
【請求項１０】
画面キャプチャ機能をそれぞれ備えた複数の端末機器とネットワークを介して接続されるネットワーク対応表示装置であって、
表示部と、
前記各端末機器との双方向通信が可能な通信部と、
表示制御部とを備え、
前記各端末機器それぞれで前記画面キャプチャ機能により取得され所定の画像サイズにサイズ変換されたキャプチャ画像データを前記通信部で受信し、前記表示制御部は、前記通信部で受信した前記各キャプチャ画像データを画面分割により１画面の画像データに合成して前記表示部の表示画面に表示させる多画面表示機能を有することを特徴とするネットワーク対応表示装置。
【請求項１１】
前記表示制御部は、現在の表示画面に新たな画面を割り込ませて表示させる割り込み機能を有することを特徴とする請求項１０記載のネットワーク対応表示装置。
【請求項１２】
前記ネットワーク対応表示装置に接続されている複数の端末機器の中から、前記表示画面にキャプチャ画像データを表示させる端末機器をユーザが任意に選択できるようにしたことを特徴とする請求項１０又は請求項１１記載のネットワーク対応表示装置。
【請求項１３】
前記表示画面にキャプチャ画像データを表示させる端末機器の選択を、前記通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも可能とすることを特徴とする請求項１０乃至請求項１２の何れかに記載のネットワーク対応表示装置。
【請求項１４】
前記表示制御部は、前記表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を拡大表示させる拡大表示機能を有することを特徴とする請求項１０乃至請求項１３の何れかに記載のネットワーク対応表示装置。
【請求項１５】
前記表示制御部は、前記表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を前記表示画面全体の表示に切り替える単画面切替機能を有することを特徴とする請求項１０乃至請求項１３の何れかに記載のネットワーク対応表示装置。
【請求項１６】
前記表示制御部は、前記表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を消去させる消去機能を有することを特徴とする請求項１０乃至請求項１３の何れかに記載のネットワーク対応表示装置。
【請求項１７】
前記所定の分割画面は、ユーザ操作に基づいて選択されたものであることを特徴とする請求項１４乃至請求項１６の何れかに記載のネットワーク対応表示装置。
【請求項１８】
前記所定の分割画面は、前記通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも選択可能であることを特徴とする請求項１７記載のネットワーク対応表示装置。
【請求項１９】
前記端末機器から受信した前記キャプチャ画像データが、前記端末機器の表示画面の全部または一部範囲を指定してキャプチャして得られた画像データであることを特徴とする請求項１０乃至請求項１８の何れかに記載のネットワーク対応表示装置。
【請求項２０】
前記端末機器から取得するキャプチャデータが、端末機器の表示画面上の変化を検出し、画面上の変化分のみをキャプチャして得られた画像データであることを特徴とする請求項１０乃至請求項１８の何れかに記載のネットワーク対応表示装置。
【請求項２１】
前記表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定する表示サイズ決定部と、該表示サイズ決定部で決定された表示サイズを前記通信部により該当の各端末機器にそれぞれ送信する制御部とを備え、該制御部は、前記表示サイズを送信した各端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換されたキャプチャ画像データを前記通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して前記表示部に表示するように前記表示制御部を制御することを特徴とする請求項１０乃至請求項２０の何れかに記載のネットワーク対応表示装置。
【請求項２２】
表示すべき端末機器に割り当てる分割画面のアスペクト比を、その端末機器の表示部の表示画面のアスペクト比と同じとしたことを特徴とする請求項２１記載のネットワーク対応表示装置。
【請求項２３】
前記制御部は、端末機器に表示サイズを送信する際に、前記表示部の表示色数も送信し、前記表示サイズおよび前記表示色数を送信した端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換され、且つ前記表示色数に変換されたキャプチャ画像データを前記通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して前記表示部に表示するように前記表示制御部を制御することを特徴とする請求項１０乃至請求項２２の何れかに記載のネットワーク対応表示装置。
【請求項２４】
前記通信部の通信プロトコルがＴＣＰ／ＩＰであることを特徴とする請求項１０乃至請求項２３の何れかに記載のネットワーク対応表示装置。
【請求項２５】
前記ネットワークが、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮのうちの何れかであることを特徴とする請求項１０乃至請求項２４の何れかに記載のネットワーク対応表示装置。
【請求項２６】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載したことを特徴とするネットワーク対応プロジェクタ。
【請求項２７】
前記表示部が液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤの何れかであることを特徴とする請求項２６記載のネットワーク対応プロジェクタ。
【請求項２８】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載し、前記表示部がプラズマディスプレイパネルであることを特徴とするネットワーク対応プラズマディスプレイ。
【請求項２９】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載し、前記表示部が液晶パネルであることを特徴とするネットワーク対応液晶モニタ。
【請求項３０】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載し、前記表示部が有機ＥＬパネルであることを特徴とするネットワーク対応有機ＥＬディスプレイ。
【請求項３１】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置の前記表示制御部をＣＰＵにより実現させることを特徴とする表示制御プログラム。
【請求項３２】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置にネットワークを介して接続される端末機器であって、
表示部と、
前記ネットワーク対応表示装置との双方向通信が可能な通信部と、
前記表示部の表示画面に表示された内容をキャプチャする画面キャプチャ処理部と、
前記画面キャプチャ処理部でキャプチャしたキャプチャ画像データを所定の画像サイズにサイズ変換する画像変換部と、
該画像変換部でサイズ変換されたキャプチャ画像データを前記通信部から前記ネットワーク対応表示装置に送信させる制御部とを備え、
前記ネットワーク対応表示装置の前記表示画面に表示される多画面のうちの１分割画面に表示されるキャプチャ画像データを生成するものであることを特徴とする端末機器。
【請求項３３】
前記ネットワーク対応表示装置の前記表示画面は、表示すべき端末機器台数分に分割され、その表示すべき端末機器に割り当てられる分割画面の表示サイズが決められており、前記画像変換部は、前記画面キャプチャ処理部で取得したキャプチャ画像データを、自端末機器に割り当てられた表示サイズにサイズ変換することを特徴とする請求項３２記載の端末機器。
【請求項３４】
前記画像変換部は、前記サイズ変換に加えて、更に、前記ネットワーク対応表示装置の前記表示部の表示色数に色変換を行い、前記制御部は、前記サイズ変換処理および前記色変換処理を施したキャプチャ画像データを前記通信部から前記ネットワーク対応表示装置に送信することを特徴とする請求項３２又は請求項３３記載の端末機器。
【請求項３５】
請求項３２乃至請求項３４の何れかに記載の端末機器の各処理部をＣＰＵにより実現させることを特徴とする制御プログラム。
【請求項１】
画面キャプチャ機能を有し、該画面キャプチャ機能によって取得したキャプチャ画像データをネットワークを介して送信する複数の端末機器と、表示部を有し、前記端末機器から送信された前記キャプチャ画像データをネットワークを介して受信し、画面分割により１画面の画像データに合成して前記表示部の表示画面に表示させる多画面表示機能を有するネットワーク対応表示装置とを備え、
前記ネットワーク対応表示装置の前記表示画面への多画面表示のために必要な処理である、前記画面キャプチャ機能により取得された前記キャプチャ画像データの画像サイズのサイズ変換処理を前記端末機器側で行うようにし、前記ネットワーク対応表示装置側では、そのサイズ変換後のキャプチャ画像データを前記端末機器から取得して前記合成を行うようにしたことを特徴とする表示システム。
【請求項２】
前記ネットワーク対応表示装置は、前記表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定して該当端末機器に送信し、その表示サイズを受信した端末機器は、前記サイズ変換処理の際、前記キャプチャ画像データの画像サイズを、前記受信した前記表示サイズにサイズ変換することを特徴とする請求項１記載の表示システム。
【請求項３】
前記端末機器は、前記画面キャプチャ機能によって取得したキャプチャ画像データを、前記サイズ変換処理に加え、更に前記ネットワーク対応表示装置の前記表示部の表示色数への色変換処理を行ってから前記ネットワーク対応表示装置に送信することを特徴とする請求項１又は請求項２記載の表示システム。
【請求項４】
前記ネットワーク対応表示装置は、前記端末機器に表示サイズを送信する際に、自身の前記表示部の表示色数も送信し、前記端末機器は、前記ネットワーク対応表示装置から受信した前記表示色数に基づいて前記色変換処理を行うことを特徴とする請求項３記載の表示システム。
【請求項５】
前記ネットワーク対応表示装置がプロジェクタであることを特徴とする請求項１乃至請求項４の何れかに記載の表示システム。
【請求項６】
前記ネットワーク対応表示装置がプラズマディスプレイであることを特徴とする請求項１乃至請求項４の何れかに記載の表示システム。
【請求項７】
前記ネットワーク対応表示装置が液晶モニタであることを特徴とする請求項１乃至請求項４の何れかに記載の表示システム。
【請求項８】
前記ネットワーク対応表示装置が有機ＥＬディスプレイであることを特徴とする請求項１乃至請求項４の何れかに記載のネットワーク対応表示装置。
【請求項９】
前記端末機器がパソコンまたはＰＤＡであることを特徴とする請求項１乃至請求項８の何れかに記載の表示システム。
【請求項１０】
画面キャプチャ機能をそれぞれ備えた複数の端末機器とネットワークを介して接続されるネットワーク対応表示装置であって、
表示部と、
前記各端末機器との双方向通信が可能な通信部と、
表示制御部とを備え、
前記各端末機器それぞれで前記画面キャプチャ機能により取得され所定の画像サイズにサイズ変換されたキャプチャ画像データを前記通信部で受信し、前記表示制御部は、前記通信部で受信した前記各キャプチャ画像データを画面分割により１画面の画像データに合成して前記表示部の表示画面に表示させる多画面表示機能を有することを特徴とするネットワーク対応表示装置。
【請求項１１】
前記表示制御部は、現在の表示画面に新たな画面を割り込ませて表示させる割り込み機能を有することを特徴とする請求項１０記載のネットワーク対応表示装置。
【請求項１２】
前記ネットワーク対応表示装置に接続されている複数の端末機器の中から、前記表示画面にキャプチャ画像データを表示させる端末機器をユーザが任意に選択できるようにしたことを特徴とする請求項１０又は請求項１１記載のネットワーク対応表示装置。
【請求項１３】
前記表示画面にキャプチャ画像データを表示させる端末機器の選択を、前記通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも可能とすることを特徴とする請求項１０乃至請求項１２の何れかに記載のネットワーク対応表示装置。
【請求項１４】
前記表示制御部は、前記表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を拡大表示させる拡大表示機能を有することを特徴とする請求項１０乃至請求項１３の何れかに記載のネットワーク対応表示装置。
【請求項１５】
前記表示制御部は、前記表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を前記表示画面全体の表示に切り替える単画面切替機能を有することを特徴とする請求項１０乃至請求項１３の何れかに記載のネットワーク対応表示装置。
【請求項１６】
前記表示制御部は、前記表示画面に表示されている多画面を構成する複数の分割画面の中から、所定の分割画面を消去させる消去機能を有することを特徴とする請求項１０乃至請求項１３の何れかに記載のネットワーク対応表示装置。
【請求項１７】
前記所定の分割画面は、ユーザ操作に基づいて選択されたものであることを特徴とする請求項１４乃至請求項１６の何れかに記載のネットワーク対応表示装置。
【請求項１８】
前記所定の分割画面は、前記通信部の双方向通信によってネットワーク対応表示装置側からも、端末機器側からも選択可能であることを特徴とする請求項１７記載のネットワーク対応表示装置。
【請求項１９】
前記端末機器から受信した前記キャプチャ画像データが、前記端末機器の表示画面の全部または一部範囲を指定してキャプチャして得られた画像データであることを特徴とする請求項１０乃至請求項１８の何れかに記載のネットワーク対応表示装置。
【請求項２０】
前記端末機器から取得するキャプチャデータが、端末機器の表示画面上の変化を検出し、画面上の変化分のみをキャプチャして得られた画像データであることを特徴とする請求項１０乃至請求項１８の何れかに記載のネットワーク対応表示装置。
【請求項２１】
前記表示部の表示画面を、表示すべき端末機器台数分に分割し、その表示すべき端末機器に割り当てる分割画面の表示サイズを決定する表示サイズ決定部と、該表示サイズ決定部で決定された表示サイズを前記通信部により該当の各端末機器にそれぞれ送信する制御部とを備え、該制御部は、前記表示サイズを送信した各端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換されたキャプチャ画像データを前記通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して前記表示部に表示するように前記表示制御部を制御することを特徴とする請求項１０乃至請求項２０の何れかに記載のネットワーク対応表示装置。
【請求項２２】
表示すべき端末機器に割り当てる分割画面のアスペクト比を、その端末機器の表示部の表示画面のアスペクト比と同じとしたことを特徴とする請求項２１記載のネットワーク対応表示装置。
【請求項２３】
前記制御部は、端末機器に表示サイズを送信する際に、前記表示部の表示色数も送信し、前記表示サイズおよび前記表示色数を送信した端末機器から、その端末機器に割り当てた分割画面の表示サイズにサイズ変換され、且つ前記表示色数に変換されたキャプチャ画像データを前記通信部で受信し、受信した各キャプチャ画像データを１画面の画像データに合成して前記表示部に表示するように前記表示制御部を制御することを特徴とする請求項１０乃至請求項２２の何れかに記載のネットワーク対応表示装置。
【請求項２４】
前記通信部の通信プロトコルがＴＣＰ／ＩＰであることを特徴とする請求項１０乃至請求項２３の何れかに記載のネットワーク対応表示装置。
【請求項２５】
前記ネットワークが、ＬＡＮ、無線ＬＡＮ、近距離無線ＬＡＮのうちの何れかであることを特徴とする請求項１０乃至請求項２４の何れかに記載のネットワーク対応表示装置。
【請求項２６】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載したことを特徴とするネットワーク対応プロジェクタ。
【請求項２７】
前記表示部が液晶ライトバルブ、ＬＣＯＳライトバルブ、ＤＭＤの何れかであることを特徴とする請求項２６記載のネットワーク対応プロジェクタ。
【請求項２８】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載し、前記表示部がプラズマディスプレイパネルであることを特徴とするネットワーク対応プラズマディスプレイ。
【請求項２９】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載し、前記表示部が液晶パネルであることを特徴とするネットワーク対応液晶モニタ。
【請求項３０】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置を搭載し、前記表示部が有機ＥＬパネルであることを特徴とするネットワーク対応有機ＥＬディスプレイ。
【請求項３１】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置の前記表示制御部をＣＰＵにより実現させることを特徴とする表示制御プログラム。
【請求項３２】
請求項１０乃至請求項２５の何れかに記載のネットワーク対応表示装置にネットワークを介して接続される端末機器であって、
表示部と、
前記ネットワーク対応表示装置との双方向通信が可能な通信部と、
前記表示部の表示画面に表示された内容をキャプチャする画面キャプチャ処理部と、
前記画面キャプチャ処理部でキャプチャしたキャプチャ画像データを所定の画像サイズにサイズ変換する画像変換部と、
該画像変換部でサイズ変換されたキャプチャ画像データを前記通信部から前記ネットワーク対応表示装置に送信させる制御部とを備え、
前記ネットワーク対応表示装置の前記表示画面に表示される多画面のうちの１分割画面に表示されるキャプチャ画像データを生成するものであることを特徴とする端末機器。
【請求項３３】
前記ネットワーク対応表示装置の前記表示画面は、表示すべき端末機器台数分に分割され、その表示すべき端末機器に割り当てられる分割画面の表示サイズが決められており、前記画像変換部は、前記画面キャプチャ処理部で取得したキャプチャ画像データを、自端末機器に割り当てられた表示サイズにサイズ変換することを特徴とする請求項３２記載の端末機器。
【請求項３４】
前記画像変換部は、前記サイズ変換に加えて、更に、前記ネットワーク対応表示装置の前記表示部の表示色数に色変換を行い、前記制御部は、前記サイズ変換処理および前記色変換処理を施したキャプチャ画像データを前記通信部から前記ネットワーク対応表示装置に送信することを特徴とする請求項３２又は請求項３３記載の端末機器。
【請求項３５】
請求項３２乃至請求項３４の何れかに記載の端末機器の各処理部をＣＰＵにより実現させることを特徴とする制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【公開番号】特開２００４−５４７８３（Ｐ２００４−５４７８３Ａ）
【公開日】平成１６年２月１９日（２００４．２．１９）
【国際特許分類】
【出願番号】特願２００２−２１４４０６（Ｐ２００２−２１４４０６）
【出願日】平成１４年７月２３日（２００２．７．２３）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成１６年２月１９日（２００４．２．１９）
【国際特許分類】
【出願日】平成１４年７月２３日（２００２．７．２３）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]