撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラム
【課題】カメラを操作してない端末からもカメラの操作に制限を加えることのできるテレビ会議システムのカメラの撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムを提供する。
【解決手段】会議サーバでは、撮影範囲の選択枠の操作制限情報を端末から受信した場合には（Ｓ２４：ＹＥＳ）、受信した座標を含む範囲でのみ撮影範囲の選択枠の操作を操作端末に許可する（Ｓ２５）。そして、操作端末から撮影範囲の確定信号を受信した場合には（Ｓ２６：ＹＥＳ）、操作対象端末に撮影範囲の選択枠の中心の座標と選択枠の拡大率をカメラ制御信号として作成して送信する。その後、処理を終了する。尚、Ｓ２４の判断処理において、一定時間以内に操作制限信号を受信しない場合には（Ｓ２４：ＮＯ）、Ｓ２６に移行する。
【解決手段】会議サーバでは、撮影範囲の選択枠の操作制限情報を端末から受信した場合には（Ｓ２４：ＹＥＳ）、受信した座標を含む範囲でのみ撮影範囲の選択枠の操作を操作端末に許可する（Ｓ２５）。そして、操作端末から撮影範囲の確定信号を受信した場合には（Ｓ２６：ＹＥＳ）、操作対象端末に撮影範囲の選択枠の中心の座標と選択枠の拡大率をカメラ制御信号として作成して送信する。その後、処理を終了する。尚、Ｓ２４の判断処理において、一定時間以内に操作制限信号を受信しない場合には（Ｓ２４：ＮＯ）、Ｓ２６に移行する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムに関し、詳細には、複数の地点をネットワークで結んで行うテレビ会議システムのカメラの撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
従来、複数の端末をネットワークを介して接続し、画像と音声を双方向に送受信することにより、遠隔の地にある者同士の会議を実現するテレビ会議システムが知られている。このテレビ会議システムにおいて、相手側の端末のカメラの撮影範囲を制御する技術が提案されている（例えば、特許文献１参照。）。このテレビ会議システムでは、相手側のカメラの撮影範囲を制御する権利は、制御を始めた側の端末が持っている。
【特許文献１】特開平２００３−２７４２５５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記従来のテレビ会議システムでは、３箇所以上の複数の地点を結んでテレビ会議を行う場合には、現在、カメラの撮影範囲を制御している端末以外の地点の端末からカメラの撮影範囲を制御したくても出来ないという問題点があった。この場合には、第一の地点が第二の地点のカメラを操作すると、第三の地点は、新しく決まる画角について、実際にカメラが動いた後でないと確認できなかった。従って、第三の地点の見ていた物が写らなくなることがあり、カメラを再度操作しなければならず、スムーズな会議ができなくなるという問題点もあった。
【０００４】
本発明は、上記課題を解決するためになされたものであり、テレビ会議システムにおいて、カメラを操作してない端末からもカメラの操作に制限を加えることのできるテレビ会議システムのカメラの撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、請求項１に係る発明の撮影範囲制御装置は、遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御装置であって、前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御手段と、前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成手段と、操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成手段と、前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成手段と、前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信手段と、次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信手段と、前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信手段が受信した指定座標情報を含む範囲で前記選択枠情報を作成するように前記選択枠情報作成手段を制御する選択枠制御手段と、前記選択枠制御手段の制御により前記選択枠情報作成手段が作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成手段と、当該撮影制御情報作成手段が作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信手段とを備えたことを特徴とする。
【０００６】
また、請求項２に係る発明の撮影範囲制御装置は、請求項１に記載の発明の構成に加え、前記指定座標情報受信手段が前記指定座標情報を複数受信した場合には、前記撮影制御情報作成手段は、その複数の座標の重心を次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする。
【０００７】
また、請求項３に係る発明の撮影範囲制御装置は、請求項２に記載の発明の構成に加え、前記複数の指定座標情報に重みを付与する重み付与手段を設け、前記撮影制御情報作成手段は、前記重み付与手段が付与した重みに基づいて、複数の座標の重心を決定して、次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする。
【０００８】
また、請求項４に係る発明の撮影範囲制御装置は、請求項１乃至３の何れかに記載の発明の構成に加え、前記遠隔会議の参加時に、前記遠隔会議装置から属するグループを示すグループ情報を受信するグループ情報受信手段と、前記グループ情報受信手段が同じグループ情報を受信した遠隔会議装置に対してのみ前記選択枠情報を送信する選択枠情報送信手段とを備えたことを特徴とする。
【０００９】
また、請求項５に係る発明の撮影範囲制御装置は、請求項１乃至４の何れかに記載の発明の構成に加え、前記指定座標情報を複数受信した場合に、当該複数の指定座標情報が画角に入らない場合に、前記選択枠情報を操作している遠隔会議装置からの操作情報により前記選択枠情報が操作されて、画角に入れる指定座標情報を選択可能であることを特徴とする。
【００１０】
また、請求項６に係る発明の撮影範囲制御装置は、請求項１乃至５の何れかに記載の発明の構成に加え、前記撮影範囲制御装置は、各遠隔会議装置を接続するサーバから構成されることを特徴とする。
【００１１】
また、請求項７に係る発明の撮影範囲制御装置は、請求項１乃至５の何れかに記載の発明の構成に加え、前記撮影範囲制御装置は、各遠隔会議装置の何れかで構成されることを特徴とする。
【００１２】
また、請求項８に係る発明の撮影範囲制御方法は、遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御方法であって、前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御ステップと、前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成ステップと、操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成ステップと、前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成ステップと、前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信ステップと、次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信ステップと、前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信ステップで受信した指定座標情報を含む範囲で前記選択枠情報を作成するように制御する選択枠制御ステップと、前記選択枠制御ステップの制御により作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成ステップと、当該撮影制御情報作成ステップが作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信ステップとを備えたことを特徴とする。
【００１３】
また、請求項９に係る発明のコンピュータプログラムは、コンピュータに請求項８に記載の撮影範囲制御方法の各ステップを実行させることを特徴とする。
【発明の効果】
【００１４】
請求項１に係る発明の撮影範囲制御装置では、第一の遠隔会議装置が第二の遠隔会議装置の撮影手段の撮影範囲の画角の制御をしているときに、第三の遠隔会議装置が第二の遠隔会議装置の撮影手段が撮影可能な全範囲の画像を合成した一枚の静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を撮影範囲制御装置に送信することにより、第一の遠隔会議装置以外の遠隔会議装置からも必ず次に撮影させたい地点をしてすることが可能となる。従って、他地点の見ていた物が写らなくなることを防止でき、カメラを再度操作する必要を無くし、スムーズな会議ができる。
【００１５】
また、請求項２に係る発明の撮影範囲制御装置では、請求項１に記載の発明の効果に加え、指定座標情報を複数受信した場合には、撮影制御情報作成手段は、その複数の座標の重心を次に撮影する画角の中心にするように撮影制御情報を作成するので、複数の遠隔会議装置が次に撮影させたい地点を中心として、画角を決定することができる。撮影範囲制御装置の多くのユーザが希望する地点を中心として、画角を決定することができる。
【００１６】
また、請求項３に係る発明の撮影範囲制御装置では、請求項２に記載の発明の効果に加え、撮影制御情報作成手段は、重み付与手段が付与した重みに基づいて、複数の座標の重心を決定して、次に撮影する画角の中心にするように撮影制御情報を作成するので、優先度が高い地点よりに画角を決定することができる。
【００１７】
また、請求項４に係る発明の撮影範囲制御装置では、請求項１乃至３の何れかに記載の発明の効果に加え、選択枠情報送信手段はグループ情報受信手段が同じグループ情報を受信した遠隔会議装置に対してのみ前記選択枠情報を送信するので、限定された範囲の遠隔会議装置のみに次に撮影する画角の制御を行わせることができる。
【００１８】
また、請求項５に係る発明の撮影範囲制御装置では、請求項１乃至４の何れかに記載の発明の効果に加え、指定座標情報を複数受信した場合に、複数の指定座標情報が画角に入らない場合に、選択枠情報を操作している遠隔会議装置からの操作情報により選択枠情報が操作されて、画角に入れる指定座標情報を選択可能であるので、複数の地点から任意の地点を選択して選択枠に入れることができる。
【００１９】
また、請求項６に係る発明の撮影範囲制御装置では、請求項１乃至５の何れかに記載の発明の効果に加え、撮影範囲制御装置としてサーバを利用できるので、遠隔会議装置の能力が高くなくてもサーバにより各種の処理を行うことができる。
【００２０】
また、請求項７に係る発明の撮影範囲制御装置では、請求項１乃至５の何れかに記載の発明の効果に加え、撮影範囲制御装置として遠隔会議装置を利用できるので、サーバを省略できる。
【００２１】
また、請求項８に係る発明の撮影範囲制御方法では、第一の遠隔会議装置が第二の遠隔会議装置の撮影手段の撮影範囲の画角の制御をしているときに、第三の遠隔会議装置が第二の遠隔会議装置の撮影手段が撮影可能な全範囲の画像を合成した一枚の静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を撮影範囲制御装置に送信することにより、第一の遠隔会議装置以外の遠隔会議装置からも必ず次に撮影させたい地点をしてすることが可能となる。従って、他地点の見ていた物が写らなくなることを防止でき、カメラを再度操作する必要を無くし、スムーズな会議ができる。
【００２２】
また、請求項９に係る発明のコンピュータプログラムでは、コンピュータに請求項８に記載の撮影範囲制御方法の各ステップを実行させることにより、請求項８に記載の発明の効果を奏することができる。
【発明を実施するための最良の形態】
【００２３】
以下、本発明の一実施形態であるテレビ会議システム１について、図面を参照して説明する。はじめに、テレビ会議システム１の構成について、図１を参照して説明する。図１は、テレビ会議システム１の構成を示すブロック図である。
【００２４】
図１に示すように、テレビ会議システム１は、各地点毎に設けられた複数の端末３と、これら複数の端末３間で開催される会議を統括する会議サーバ４とを備え、これらがネットワーク２を介して相互に接続されている。尚、説明のため、Ａ地点に設置された端末を端末３Ａとし、Ｂ地点に設置された端末を端末３Ｂとし、Ｃ地点に設置された端末を端末３Ｃとする。このテレビ会議システム１では、端末３間において、ネットワーク２を介して、画像、音声が互いに送受信されることで、遠隔会議が実施される。
【００２５】
次に、端末３の電気的構成について、図２を参照して説明する。図２は、端末３の電気的構成を示すブロック図である。端末３には、端末３の制御を司るコントローラとしてのＣＰＵ２０が設けられ、そのＣＰＵ２０には、ＢＩＯＳ等を記憶したＲＯＭ２１と、各種データを一時的に記憶するＲＡＭ２２と、データの受け渡しの仲介を行うＩ／Ｏインタフェイス３０とが接続されている。Ｉ／Ｏインタフェイス３０には、ハードディスクドライブ３１（以下、ＨＤＤ３１）が接続されている。ＨＤＤ３１には、プログラム記憶エリア３１２と、その他の情報記憶エリア３１３とが少なくとも設けられている。
【００２６】
プログラム記憶エリア３１２には、端末３のメインプログラムや、他の端末３との間で会議を実行するための会議実行プログラム等が記憶されている。その他の情報記憶エリア３１３には、端末３で使用されるその他の情報が記憶されている。なお、端末３がＨＤＤ３１を備えていない専用機の場合は、ＲＯＭ２１に各種プログラムが記憶される。
【００２７】
また、Ｉ／Ｏインタフェイス３０には、ネットワーク２と通信するための通信装置２５と、マウス２７と、ビデオコントローラ２３と、キーコントローラ２４と、カードリーダ制御部３２と、ユーザを撮影するためのカメラ３４の方向やレンズのズームを制御するカメラ制御部３６と、ユーザの音声を取り込むためのマイク３５と、ＣＤ−ＲＯＭドライブ２６とが接続されている。ビデオコントローラ２３にはディスプレイ２８が接続され、キーコントローラ２４にはキーボード２９が接続され、カードリーダ制御部３２には、各ユーザが所有する識別カード（図示外）に記憶されたユーザを識別するためのユーザＩＤを読み込むためのカードリーダ３３が接続され、カメラ制御部３６には、カメラ３４が接続されている。尚、カメラ３４には、上下左右に方向を変えるための電動雲台３７と電動のズームレンズ３８が備えられており、カメラ制御部３６の制御によりこれらは駆動されて、カメラの方向及び画角が変更される。
【００２８】
なお、ＣＤ−ＲＯＭドライブ２６に挿入されるＣＤ−ＲＯＭ１１４には、上記したメインプログラムや、会議実行プログラム、撮影範囲制御方法のプログラム等が記憶され、導入時には、これら各種プログラムが、ＣＤ−ＲＯＭ１１４からハードディスクドライブ３１にセットアップされて、プログラム記憶エリア３１２に記憶される。
【００２９】
次に、会議サーバ４の電気的構成について、図３を参照して説明する。図３は、会議サーバ４の電気的構成を示すブロック図である。会議サーバ４には、会議サーバ４の制御を司るコントローラとしてのＣＰＵ４０が設けられ、そのＣＰＵ４０には、ＢＩＯＳ等を記憶したＲＯＭ４１と、各種データを一時的に記憶するＲＡＭ４２と、データの受け渡しの仲介を行うＩ／Ｏインタフェイス５０とが接続されている。Ｉ／Ｏインタフェイス５０には、ハードディスクドライブ５１（以下、「ＨＤＤ５１」と言う。）が接続されている。ＨＤＤ５１には、後述する各種記憶エリアが少なくとも設けられている（図４参照）。
【００３０】
また、Ｉ／Ｏインタフェイス５０には、ネットワーク２と通信するための通信装置４５と、マウス４７と、ビデオコントローラ４３と、キーコントローラ４４と、ＣＤ−ＲＯＭドライブ４６と、計時装置５２が接続されている。ビデオコントローラ４３にはディスプレイ４８が接続され、キーコントローラ４４にはキーボード４９が接続されている。
【００３１】
なお、ＣＤ−ＲＯＭドライブ４６に挿入されるＣＤ−ＲＯＭ１１５には、後述するメインプログラムや、会議管理プログラムや、撮影範囲制御方法のプログラム等が記憶され、導入時には、これら各種プログラムが、ＣＤ−ＲＯＭ１１５からＨＤＤ５１にセットアップされて、プログラム記憶エリア５１６に記憶される。
【００３２】
次に、ＨＤＤ５１の各種記憶エリアについて、図４を参照して説明する。図４は、ＨＤＤ５１の各記憶エリアを示す概念図である。ＨＤＤ５１には、ユーザ情報テーブル記憶エリア５１１と、ログインテーブル記憶エリア５１２と、会議テーブル記憶エリア５１３と、参加受付テーブル記憶エリア５１４と、カメラ操作参加情報テーブル記憶エリア５１５と、プログラム記憶エリア５１６と、端末毎の重み付けを記憶した重み付け記憶エリア５１７と、その他の情報記憶エリア５１８とが少なくとも設けられている。
【００３３】
ユーザ情報テーブル記憶エリア５１１には、ユーザ情報テーブル５１１１（図５参照）が記憶されている。ログインテーブル記憶エリア５１２には、ログインテーブル５１２１（図６参照）が記憶されている。会議テーブル記憶エリア５１３には、会議テーブル５１３１（図７参照）が記憶されている。参加受付テーブル記憶エリア５１４には、参加受付テーブル５１４１（図８参照）が記憶されている。カメラ操作参加情報テーブル記憶エリア５１５には、カメラ操作参加情報テーブル５１５１（図９参照）が記憶されている。また、プログラム記憶エリア５１６には、会議サーバ４のメインプログラムや、端末３間で開催される会議を管理するための会議管理プログラム等が記憶されている。重み付け記憶エリア５１７には、後述する複数の操作制限情報（ポインタ）の各座標に重みを付けて重心を算出するための重みが記憶されている。その他の情報記憶エリア５１８には、会議サーバ４で使用されるその他の情報が記憶されている。なお、会議サーバ４がＨＤＤ５１を備えていない専用機の場合は、ＲＯＭ４１に各種プログラムが記憶される。以下、各テーブルについて順に説明する。
【００３４】
まず、ユーザ情報テーブル５１１１について、図５を参照して説明する。図５は、ユーザ情報テーブル５１１１の概念図である。ユーザ情報テーブル５１１１は、ユーザがテレビ会議システム１にログインする際の認証に用いるためのテーブルである。ユーザ情報テーブル５１１１には、各ユーザにそれぞれ対応するユーザ情報が各々記憶されている。具体的には、ユーザを識別するためのユーザＩＤ、ログインする際のパスワード、氏名、会社名等が各々記憶されている。ユーザは、これらのユーザ情報を、ユーザ情報テーブル５１１１に事前に登録を済ませておくこととする。このユーザ情報テーブル５１１１により、テレビ会議システム１を利用するユーザを管理できる。
【００３５】
次に、ログインテーブル５１２１について、図６を参照して説明する。図６は、ログインテーブル５１２１の概念図である。ログインテーブル５１２１には、ネットワーク２にログインしたユーザのユーザＩＤと、そのユーザＩＤが登録された端末３の端末ＩＤとが記憶される。即ち、ログインテーブル５１２１のユーザＩＤの欄には、カードリーダ３３で読み取られた識別カード（図示外）に記憶されたユーザＩＤが記憶される。さらに、端末ＩＤの欄には、そのユーザＩＤを送信した端末３を識別する端末ＩＤが記憶される。なお、端末ＩＤとは、端末３のマックアドレス等である。
【００３６】
例えば、ユーザである「兄弟太郎」さん（図５参照）がログインした場合、兄弟太郎さんが所有する識別カードをカードリーダ３３に読み取らせる。この場合、その識別カードに記憶されたユーザＩＤ＝「Ａ０００１」と、そのユーザＩＤを送信した端末３の端末ＩＤ＝「０００１」とが、ログインテーブル５１２１に各々記憶される。その他のユーザである兄弟次郎さん、兄弟三郎さん、販売太郎さん、販売次郎さん達についても同様に設定される。このように、ログインテーブル５１２１は、ネットワーク２にログインしたユーザと、そのユーザが登録された端末３とを管理するものである。
【００３７】
次に、会議テーブル５１３１について、図７を参照して説明する。図７は、会議テーブル５１３１の概念図である。会議テーブル５１３１には、ユーザＩＤと、そのユーザＩＤが参加メンバーとして予め登録されている会議を識別する会議ＩＤとが各々記憶されている。例えば、兄弟太郎さん、兄弟次郎さん、兄弟三郎さん、販売太郎さん、販売次郎さんは、会議ＩＤ＝００１の会議の参加メンバーとして、会議テーブル５１３１に予め登録されている。これにより、会議の参加者を管理できる。
【００３８】
次に、参加受付テーブル５１４１について、図８を参照して説明する。図８は、参加受付テーブル５１４１の概念図である。参加受付テーブル５１４１には、予め登録された会議ＩＤに対して、その会議ＩＤに対応する会議に現在ログインしているユーザＩＤが、会議参加ＩＤとして記憶されている。例えば、参加受付テーブル５１４１の１行目では、会議ＩＤ＝「００１」に対して、会議参加ＩＤ＝「Ａ０００１」、「Ａ０００２」、「Ｂ０００１」のユーザが現在ログインしていることを示している。
【００３９】
次に、カメラ操作参加情報テーブル５１５１について、図９を参照して説明する。図９は、カメラ操作参加情報テーブル５１５１の概念図である。カメラ操作参加情報テーブル５１５１には、カメラ３４の画角を調整する操作に参加する端末３の端末ＩＤが記憶されている。
【００４０】
次に、図１０を参照して、端末３のＲＡＭ２２の記憶エリアを説明する。図１０は、端末３のＲＡＭ２２の記憶エリアの概念図である。図１０に示すように、端末３のＲＡＭ２２には、自身が備えるカメラ３４で撮影した撮影可能範囲の合成画像と、撮影可能範囲等を記憶する自端末撮影情報記憶エリア２２１と、他の端末３から受信した他の端末３の合成画像と撮影可能範囲等を記憶する他端末撮影情報記憶エリア２２２と、その他データを記憶するエリア等が設けられている。
【００４１】
次に、端末３のディスプレイ２８に表示される画面について、図１１を参照して説明する。図１１は、Ａ地点の端末３Ａのディスプレイ２８に表示された分割された表示部２８１〜２８４を示す図である。例えば、図１に示すように、テレビ会議システム１において、Ａ地点〜Ｃの３つの地点がある場合を想定する。Ａ地点には、端末ＩＤ＝０００１の端末３が設置され、Ｂ地点には、端末ＩＤ＝０００２の端末３が設置され、Ｃ地点には、端末ＩＤ＝０００３の端末３が設置され設置されている。
【００４２】
そして、Ａ地点の端末３Ａからは、１人の参加者が会議にログインし、Ｂ地点の端末３Ｂからは、２人のユーザが会議にログインし、Ｃ地点の端末３Ｃからは、２人のユーザが会議にログインした場合を想定する。
【００４３】
このような状況の場合、Ａ地点〜Ｃ地点の各端末３のディスプレイ２８には、図１１に示す４つの表示部２８１〜２８４が表示される。例えば、表示部２８１には、Ａ地点のカメラ３４（図２参照）で撮影された参加者の画像が表示される。表示部２８２には、Ｂ地点のカメラ３４（図２参照）で撮影された参加者の画像が表示される。表示部２８３には、Ｃ地点のカメラ３４（図２参照）で撮影された参加者の画像が表示される。この段階では、表示部２８４には何も表示されない。これに合わせ、各端末３Ａ〜３Ｃのマイク３５（図２参照）によって、各Ａ地点、Ｂ地点、Ｃ地点の各音声が端末３Ａ〜３Ｃのスピーカ（図示外）から出力されるので、遠く離れた他のＡ地点、Ｂ地点、Ｃ地点の間で会議を行うことができる。
【００４４】
次に、上記構成からなるテレビ会議システム１で行われる処理について説明する。まず、初めに、図１２に示すフローチャートを参照して、テレビ会議に参加する各端末３で行われる処理について説明する。図１２は、端末３の主制御のフローチャートである。端末３では、電源が投入されると、初めに、ＣＰＵ２０がカメラ制御部３６を制御して、カメラ３４の電動のズームレンズ３８が回転して最大の広角の画角になる。次いで、カメラ３４が載置された電動雲台３７が上下左右の最大角度まで回転して、カメラ３４による撮影可能範囲の全てを撮影する（Ｓ１１）。そして、その撮影データは、図１０に示すＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶される。次いで、ＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶された複数の静止画像を合成して、一枚の合成画像を作成する（Ｓ１１）。この合成画像の作成には周知の画像合成の技術を採用すれば良い。例えば、各静止画像の画像認識を行って、同じ画像の部分を繋ぎ合わせるように合成する処理により行えばよい。合成画像は、ＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶される（Ｓ１１）。また、この撮影可能範囲の合成画像に対応するカメラ３４の画像の中心に対する上下の角度、左右の角度からなる撮影可能範囲データも自端末撮影情報記憶エリア２２１に記憶される（Ｓ１１）。
【００４５】
次いで、ＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶した自端末撮影可能範囲の合成画像と、撮影可能範囲データと、ズームレンズ３８をズームインしたときの拡大率のデータを他の端末３に送信する（Ｓ１２）。このときに、後述するグループコードを記憶している場合には、当該グループコードも他の端末３に送信する（Ｓ１２）。
【００４６】
次いで、他の端末３から送られて来る他の端末の撮影可能範囲の合成画像と、撮影可能範囲データと、ズームレンズ３８をズームインしたときの拡大率のデータを受信し（Ｓ１３）、図１０に示すＲＡＭ２２の他端末撮影情報記憶エリア２２２に記憶する（Ｓ１３）。このときに、後述するグループコードを受信している場合には、当該グループコードも他端末撮影情報記憶エリア２２２に記憶する（Ｓ１３）。次いで、複数の端末３間での多地点会議を開始する（Ｓ１４）。次いで、映像とともに現在のカメラ３４の中心位置の座標（Ｘ．Ｙ）と、ズームレンズ３８の拡大率を送信する（Ｓ１５）。
【００４７】
次いで、他の端末３からの映像と現在のカメラ３４の中心位置の座標（Ｘ．Ｙ）と、ズームレンズ３８の拡大率を受信して、図１１に示す合成画像を更新する（Ｓ１６）。
【００４８】
次に、図１３乃至図１５に示すフローチャートと、図１１、図１６及び至図１７を参照して、端末３におけるカメラ３４の撮影範囲制御について説明する。図１３は、会議サーバ４で行われる処理のフローチャートである。図１４は、撮影範囲の操作を指示しない非操作指示の端末３で行われる制御のフローチャートである。図１５は、他の端末３から撮影範囲の操作を指示を受ける端末３でのカメラ３４の調整のフローチャートである。図１６及び至図１７は、端末３のディスプレイ２８に表示される画像の図である。
【００４９】
ここでは、一例として、Ａ地点の端末３Ａ、Ｂ地点の端末３Ｂ、Ｃ地点の端末３Ｃの３つの間でテレビ会議が行われ、Ａ地点の端末３ＡがＢ地点の端末３Ｂのカメラ３４を操作するものとする。まず、会議サーバ４では、図１１に示すように、Ａ地点、Ｂ地点及びＣ地点の端末３のディスプレイ２８に図１１に示す合成画像を表示する。この合成画像では、左上の表示部２８１にＡ地点の画像を表示し、右上の表示部２８２にＢ地点の画像を表示し、左下の表示部２８３にＢ地点の画像を表示し、右下の表示部２８４が空欄で表示されている。
【００５０】
次いで、会議サーバ４がＡ地点の端末３ＡからＢ地点の端末３Ｂのカメラ３４の操作指示信号を受信すると（Ｓ２１：ＹＥＳ）、図１６に示すように、端末３Ａ、端末３Ｂ、端末３Ｃ全部のディスプレイ２８の画面の表示部２８４に操作対象の端末３Ｂの静止画像２８４０と、次に撮影する撮影範囲の選択枠２８４２と、現在の表示範囲である現在枠２８４１を表示する（Ｓ２２）。次いで、操作指示端末であるＡ地点の端末３Ａに次に撮影する撮影範囲の選択枠２８４２の操作を許可する（Ｓ２３）。
【００５１】
このときに、端末３Ｂのカメラ３４の撮影範囲の制御をしていないＣ地点の端末３Ｃの制御について図１４のフローチャートを参照して説明する。Ｃ地点の端末３Ｃでは、会議サーバ４から被操作端末である端末３Ｂの情報と、操作指示端末である端末３Ａの情報を受信する（Ｓ３１）。これらの情報によりどの端末がどの端末を制御しているかを端末３Ｃが知ることができる。
【００５２】
次いで、ディスプレイ２８の画面の表示部２８４に操作対象の端末３Ｂの静止画像２８４０と、次に撮影する撮影範囲の選択枠２８４２と、現在の表示範囲である現在枠２８４１とを表示する（Ｓ３２）。次に、端末３Ｃから撮影範囲の選択枠２８４２への移動範囲の制限をしたい場合には（Ｓ３４：ＹＥＳ）、図１７に示すように、ディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上に見たい場所を指示するためのポインタ２８４５を表示する（Ｓ３５）。ポインタ２８４５の表示の指示は、図２に示す端末３のマウス２７及びキーボード２９の所定の操作により行われる。
【００５３】
次いで、会議サーバ４と通信して、ポインタ２８４５の位置を確定する信号を会議サーバ４から受信する（Ｓ３６）。その後、ポインタ２８４５の中心のディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上の座標（Ｘ，Ｙ）を操作制限情報として会議サーバ４へ送信する（Ｓ３７）。その後、処理を終了する。また、端末３Ｃから撮影範囲の選択枠２８４２の移動範囲の制限をしない場合には（Ｓ３４：ＮＯ）、処理を終了する。
【００５４】
一方、会議サーバ４では、撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の中心の静止画像２８４０上の座標（Ｘ，Ｙ））を端末３Ｃから受信した場合には（Ｓ２４：ＹＥＳ）、受信した座標（Ｘ，Ｙ）を含む範囲でのみ撮影範囲の選択枠２８４２の操作を操作端末である端末３Ａに許可する（Ｓ２５）。そして、操作端末である端末３Ａから撮影範囲の確定信号を受信した場合には（Ｓ２６：ＹＥＳ）、操作対象端末（被操作端末）である端末Ｂに撮影範囲の選択枠２８４２の中心の座標（Ｘ，Ｙ）と選択枠２８４２の拡大率をカメラ制御信号（撮影制御情報）として作成して送信する（Ｓ２７）。その後、処理を終了する。尚、Ｓ２４の判断処理において、一定時間以内に操作制限信号を受信しない場合には（Ｓ２４：ＮＯ）、Ｓ２６に移行する。
【００５５】
次に、図１５に示すフローチャートを参照して、被操作端末である端末３Ｂで行われるカメラ３４の調整について説明する。端末３Ｂでは、カメラ３４の制御信号を受信するまで待機し（Ｓ４１：ＮＯ）、カメラ３４の制御信号を受信すると（Ｓ４１：ＹＥＳ）、端末３ＢのＣＰＵ２０は、受信した制御信号に基づいて電動雲台３７によるカメラ３４の方向及びズームレンズ３８の画角の調整をする（Ｓ４２）。その後、処理を終了する。
【００５６】
以上説明したように、上記の実施の形態では、端末３Ａが端末３Ｂのカメラ３４の次に撮影する撮影範囲の選択枠２８４２の操作をしている場合でも、端末３Ａ以外の端末Ｃから見たい位置をポインタ２８４５で指定することにより、その位置が必ず入った範囲の撮影を行うことができる。
【００５７】
次に、図１８及び図１９を参照して、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合の処理について説明する。図１８は、端末３のディスプレイ２８に表示される画像の図である。また、図１９は、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信した場合の会議サーバ４の処理のフローチャートである。この例では、端末３Ａが端末３Ｂのカメラ３４の制御をしており、端末３Ｃが撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１））を送信し、端末３Ａ、端末３Ｂ及び端末３Ｃ以外の端末３が操作制限情報（ポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を送信するものとする（図１８参照）。
【００５８】
会議サーバ４では、図１８のフローチャートに示すように、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合に（図１９：Ｓ６０：ＹＥＳ）、受信した複数の操作制限情報（ポインタ）の重心の座標で画角中心の座標を決める設定になっている場合には（Ｓ６１：ＹＥＳ）、撮影範囲の確定信号を受信すると（Ｓ６２：ＹＥＳ）、端末３毎に重み付けの設定がなされている場合には（Ｓ６３：ＹＥＳ）、複数の操作制限情報（ポインタ）の各座標に重みを付けて重心を算出する（Ｓ６６）。この重みは、ＨＤＤ５１の重み付け記憶エリア５１７に予め記憶されている（図４参照）。例えば、端末３Ｃから座標（Ｘ１，Ｙ１）及び他の端末３から座標（Ｘ２，Ｙ２）を受信した場合に、端末３Ｃの重みが「３」で、他の端末３の重みが「２」とＨＤＤ５１の重み付け記憶エリア５１７に記憶されている場合には、操作制限情報（ポインタ）の座標としては、座標（Ｘ＝（３Ｘ１＋２Ｘ２）／５、Ｙ＝（３Ｙ１＋２Ｙ２）／５）を採用する（Ｓ６３）。その後、算出した座標（Ｘ＝（３Ｘ１＋２Ｘ２）／５、Ｙ＝（３Ｙ１＋２Ｙ２）／５）を撮影範囲の選択枠２８４２の中心の座標とする（Ｓ６５）。
【００５９】
また、端末３毎に重み付けの設定がなされていない場合には（Ｓ６３：ＮＯ）、単純に複数の操作制限情報（ポインタ）の各座標から重心を算出する（Ｓ６４）。例えば、座標（Ｘ１，Ｙ１）及び座標（Ｘ２，Ｙ２）を受信した場合には、操作制限情報（ポインタ）の座標としては、座標（Ｘ＝（Ｘ１＋Ｘ２）／２、Ｙ＝（Ｙ１＋Ｙ２）／２）を採用する（Ｓ６４）。その後、算出した座標（Ｘ＝（Ｘ１＋Ｘ２）／２、Ｙ＝（Ｙ１＋Ｙ２）／２）を撮影範囲の選択枠２８４２の中心の座標とする（Ｓ６５）。その後、処理を終了する。尚、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合に（Ｓ６０：ＹＥＳ）、受信した複数の操作制限情報（ポインタ）の重心の座標で画角を決める設定になっていない場合には（Ｓ６１：ＮＯ）、処理を終了する。また、Ｓ６０の判断処理では、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信するまで待機する（Ｓ６０：ＮＯ）。さらに、Ｓ６２の判断処理では、撮影範囲の確定信号を受信するまで待機する（Ｓ６２：ＮＯ）。
【００６０】
次に、図２０に示すフローチャートを参照して、被操作端末と操作指示端末とが同じグループに属する場合のみに被操作端末のカメラ３４の操作を許可する方法について説明する。図２０は、会議サーバ４において、被操作端末と操作指示端末とが同じグループに属する場合のみに被操作端末のカメラ３４の操作を許可する処理のフローチャートである。ここで、同じグループに属する場合には、同じグループコードを持つ設定となっている。尚、グループコードとは、テレビ会議を行う所定の組織単位（会社毎ごとや、部署毎）に定められている所定のコードであり、一例としては、Ａ社：Ａ００１，Ｂ社：Ｂ００１、Ｃ社：Ｃ００１等である。
【００６１】
会議サーバ４で、被操作指示端末と操作指示端末の情報（グループコードを含む）を受信した場合に（Ｓ５１：ＹＥＳ）、各端末３のディスプレイ２８の表示部２８４に被操作端末の静止画像２８４０と撮影範囲の選択枠２８４２と現在の表示範囲である現在枠２８４１を表示する（Ｓ５２）。ここで、操作指示端末と被操作指示端末が同じグループである場合（同じブループコードを持つ場合）（Ｓ５３：ＹＥＳ）、被操作指示端末に選択枠２８４２の操作を許可する（Ｓ５４）、操作指示端末と被操作指示端末が同じグループでない場合（同じブループコードを持たない場合）（Ｓ５３：ＮＯ）には、処理を終了する。また、Ｓ５１の判断処理では、被操作指示端末と操作指示端末の情報（グループコードを含む）を受信するまで待機する（Ｓ５１：ＮＯ）。
【００６２】
次に、図２１を参照して、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５やポインタ２８４６の静止画像２８４０上の座標（Ｘ，Ｙ））を受信した場合の第二の処理について説明する。図２１は、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信した場合の会議サーバ４の第二の処理のフローチャートである。この例では、端末３Ａが端末３Ｂのカメラ３４の制御をしており、端末３Ｃが撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１））を送信し、端末３Ａ乃至端末３Ｃ以外の端末３が操作制限情報（ポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を送信するものとする（図１８参照）。
【００６３】
会議サーバ４において、図１８に示すように、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合には（図２１：Ｓ７０：ＹＥＳ）、撮影範囲の選択枠２８４２を最大まで拡大する（Ｓ７１）。次に、この拡大した選択枠２８４２に全ての操作制限情報の座標（座標（Ｘ１，Ｙ１）、座標（Ｘ２，Ｙ２））が入った場合には（Ｓ７２：ＹＥＳ）、処理をそのまま終了する。この拡大した選択枠２８４２に全ての操作制限情報の座標（座標（Ｘ１，Ｙ１）、座標（Ｘ２，Ｙ２））が入らなかった場合には（Ｓ７２：ＮＯ）、何れかの操作制限情報の座標（（Ｘ１，Ｙ１）又は座標（Ｘ２，Ｙ２））を含む範囲で、撮影範囲の選択枠２８４２の操作を許可する（Ｓ７３）。この場合は、選択枠２８４２の操作をしている端末３Ａが選択枠２８４２の操作により、何れかの操作制限情報の座標を外すことができるようになっている。但し、全部の操作制限情報の座標を外すことはできず、最低１つは操作制限情報の座標が残る（Ｓ７３）。このときに、手動による選択枠２８４２の移動でなく、先に受信した操作制限情報の座標を優先するようにしても良いし、後に受信した操作制限情報の座標を優先するようにしても良い。また、端末毎に優先順位を決めておき、その優先順位の高い端末を優先するようにしても良い。何れの操作制限情報を優先するかは、予めルールとしてプログラム中で決めておけばよい。
【００６４】
次いで、撮影範囲の確定信号を操作端末から受信した場合に（Ｓ７４：ＹＥＳ）、一部の端末の制御を無視したことを全部の端末に通知する（Ｓ７５）。その後、処理を終了する。また、Ｓ７０の判断処理では、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信するまで待機する（Ｓ７０：ＮＯ）。また、Ｓ７４の判断処理では、撮影範囲の確定信号を操作端末から受信するまで待機する（Ｓ７４：ＮＯ）。
【００６５】
次に、図２２に示すフローチャートを参照して、テレビ会議システム１の主制御について説明する。図２２は、会議サーバ４のＣＰＵ４０による主制御の処理を示すフローチャートである。
【００６６】
図２２に示すように、まず、端末３からユーザ情報を受信したか否かが判断される（Ｓ１）。ユーザ情報は、端末３において、会議に参加する参加者が、識別カード（図示外）をカードリーダ３３に読み込ませることで、端末３の通信装置２５からネットワーク２を介して会議サーバ４に向けて送信される。このとき、ユーザ情報と共に、そのユーザ情報を送信した端末３の端末ＩＤも共に送信される。なお、ユーザ情報を受信しない間は（Ｓ１：ＮＯ）、Ｓ１に戻って、引き続きユーザ情報の受信が監視される。
【００６７】
次いで、ユーザ情報が受信されると（Ｓ１：ＹＥＳ）、ログイン処理が実行される（Ｓ２）。この処理では、まず、各地点の端末３から受信したユーザ情報に基づき、その参加者が、予め登録されているユーザであるか否かの認証が行われる。即ち、ユーザ情報テーブル５１１１（図５参照）に登録されているか否かが判断される。登録されているユーザであれば、そのユーザＩＤと、ユーザ情報を送信した端末ＩＤが、ＨＤＤ５１のログインテーブル５１２１（図６参照）に記憶される。なお、図示しないが、登録されていないユーザであれば認証されないので、そのまま処理は終了する。
【００６８】
次に、会議受付処理が実行される（Ｓ３）。この処理では、まず、ログインしたユーザが参加可能な会議が、会議テーブル５１３１（図７参照）から検索される。会議は、その会議主催者が開催を決定する。例えば、会議サーバ４に登録された会議主催者が、端末３から会議開催の要求を会議サーバ４に向けて送信する。すると、会議サーバ４で予め登録された会議の開催が決定される。
【００６９】
そして、参加受付テーブル５１４１（図８参照）に登録された該当する会議ＩＤに対して、ユーザＩＤが記憶される。例えば、ユーザＩＤ＝０００１である「兄弟太郎」さんが、会議ＩＤ＝０００１の会議にログインした場合、参加受付テーブル５１４１には、会議ＩＤ＝００１に対して、ユーザＩＤ＝Ａ０００１が記憶される。そして、会議ＩＤ＝００１の会議に対して、さらに、「兄弟次郎」さん、「販売太郎」さんがログインした場合は、参加受付テーブル５１４１の会議ＩＤ＝０００１に対して、ユーザＩＤ＝Ａ０００１に加え、Ａ０００２、Ｂ０００１がそれぞれ随時記憶される。
【００７０】
次に、そのユーザが参加する会議において、ログインテーブル５１２１に基づき、ログインした端末が２以上あるか否が判断される（Ｓ４）。会議は、ログインする端末３が少なくとも２つなければ開催できない。よって、同じ会議について、ログインする端末３が１つの場合（Ｓ４：ＮＯ）、Ｓ１に戻って、他の端末のログインを待つために、ユーザ情報を受信したか否かが引き続き監視される。
【００７１】
そして、例えば、ログインテーブル５１２１（図６参照）に、ユーザＩＤ＝Ａ０００１、Ｂ０００１が記憶された場合、これらは互いに別の端末であって、会議テーブル５１３１を参照すると、何れも会議ＩＤ＝００１の参加メンバーである。この場合、会議を開催できるので、ユーザＩＤ＝Ａ０００１、Ｂ０００１が登録された端末３の端末ＩＤ「０００１」、「０００２」に対して、会議開始命令がそれぞれ送信され、それらの端末３が設置された地点間を接続し、会議が開始される（Ｓ５）。
【００７２】
続いて、開催されている会議に途中参加者がいるか否かが判断される（Ｓ６）。ここでは、他の端末３から同一会議にログインしたユーザがいるか否かが判断される。途中参加者がいない場合（Ｓ６：ＮＯ）、会議主催者の端末３から会議終了要求信号を受信したか否かが判断される（Ｓ８）。途中参加者がいた場合（Ｓ６：ＹＥＳ）、参加受付テーブル５１４１に、途中参加者のユーザＩＤがその会議ＩＤに対して記憶される（Ｓ７）。そして、会議終了要求信号を受信しない間は（Ｓ８：ＮＯ）、引き続き会議を実行すると共に、途中参加者の監視が行われる（Ｓ６）。また、会議主催者の端末３から会議終了要求があった場合（Ｓ８：ＹＥＳ）、会議を終了させるために、その会議に参加している各参加者の端末３に向けて、会議終了通知が送信される（Ｓ９）。
【００７３】
最後に、まとめとして、図２３に示すフローチャートを参照して、一つの端末３から見た場合の上記の撮影範囲制御処理の流れを説明する。図２３は、一つの端末３から見た場合の撮影範囲制御処理の流れのフローチャートである。この撮影範囲制御処理が開始されると、図１６に示すように端末３のディスプレイ２８の表示部２８４に操作対象の端末の合成画像としての静止画像２８４０を表示する（Ｓ８１）、次いで、表示部２８４に画角の選択枠２８４２と現在枠２８４１とを表示する（Ｓ８２）。次いで、自端末が、画角の選択枠２８４２の操作を指示している場合には（Ｓ８３：ＹＥＳ）、画角の選択枠２８４２の操作が可能となる（Ｓ８４）。次いで、他の端末がディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上に見たい場所を指示するためのポインタ２８４５を作成した場合には（Ｓ８５：ＹＥＳ）、ポインタ２８４５を含んだ範囲でのみ画角の選択枠２８４２の操作が可能となる（Ｓ８６）。次いで、画角を確定する（Ｓ８７）。他の端末がポインタ２８４５を作成してない場合には（Ｓ８５：ＮＯ）、画角を確定する（Ｓ８７）。次いで、新しい座標を会議サーバ４に通知し、制御対象の端末３のカメラ３４の制御信号が会議サーバ４から制御対象の端末３に送られる（Ｓ８８）。その後、処理を終了する。
【００７４】
また、自端末が、画角の選択枠２８４２の操作を指示していない場合に（Ｓ８３：ＮＯ）、操作を全て他の端末に任せる場合は（Ｓ８９：ＹＥＳ）、処理を終了する。また、自端末が、画角の選択枠２８４２の操作を指示していない場合に（Ｓ８３：ＮＯ）、操作を全て他の端末に任せない場合は（Ｓ８９：ＮＯ）、映しておきたいポイントにポインタ２８４５を作成する（Ｓ９０）。その後、ポインタ２８４５の座標を操作制限情報として会議サーバ４に送信する（Ｓ９１）。その後、処理を終了する。
【００７５】
本発明は、上記の実施の形態に限られず、各種の変形が可能である。例えば、上記の実施の形態では撮影範囲制御装置として会議サーバ４を用いたが、会議サーバ４の機能を何れかの端末３に持たせて、会議サーバ４を用いないようにしても良い。この場合には、ネットワーク２を介して複数の端末３を相互に接続し、何れかの端末３が撮影範囲制御装置として機能する。
【００７６】
なお、以上の説明において、図１に示す会議サーバ４が本発明の「撮影範囲制御装置」に相当し、端末３及び端末３Ａ〜３Ｃが本発明の「遠隔会議装置」に相当する。図２に示すカメラ３４が本発明の「撮影手段」に相当し、電動雲台３７及びズームレンズ３８が本発明の「切替手段」に相当する。また、ＣＰＵ２０及びカメラ制御部３６が、本発明の「撮影制御手段」に相当する。また、図１２に示すＳ１１の処理を実行するＣＰＵ２０が本発明の「画像合成手段」に相当する。また、図１３に示すＳ２２の処理を実行するＣＰＵ４０が本発明の「現在枠情報作成手段」、「選択枠情報作成手段」に相当する。また、図１３に示すＳ２１の処理を実行するＣＰＵ４０及び図２に示す通信装置２５が本発明の「操作情報受信手段」に相当する。また、図１３に示すＳ２４の処理を実行するＣＰＵ４０及び図２に示す通信装置２５が本発明の「指定座標情報受信手段」に相当する。また、図１３に示すＳ２５の処理を実行するＣＰＵ４０が本発明の「選択枠制御手段」に相当する。また、図１３に示すＳ２７の処理を実行するＣＰＵ４０が本発明の「撮影制御情報作成手段」に相当する。また、図２に示す通信装置２５が、本発明の「送信手段」に相当する。また、図１９に示すＳ６６の処理を実行するＣＰＵ４０が本発明の「重み付与手段」に相当する。図２０に示すＳ５３の処理を実行するＣＰＵ４０が本発明の「通信装置２５が、本発明の「送信手段」に相当する。また、図１９に示すＳ６６の処理を実行するＣＰＵ４０が本発明の「グループ情報受信手段」に相当する。また、ポインタ２８４５やポインタ２８４６の中心のディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上の座標（Ｘ，Ｙ）の情報（操作制限情報）が本発明の「指定座標情報」に相当する。
【図面の簡単な説明】
【００７７】
【図１】テレビ会議システム１の構成を示すブロック図である。
【図２】端末３の電気的構成を示すブロック図である。
【図３】会議サーバ４の電気的構成を示すブロック図である。
【図４】ＨＤＤ５１の各記憶エリアを示す概念図である。
【図５】ユーザ情報テーブル５１１１の概念図である。
【図６】ログインテーブル５１２１の概念図である。
【図７】会議テーブル５１３１の概念図である。
【図８】参加受付テーブル５１４１の概念図である。
【図９】カメラ操作参加情報テーブル５１５１の概念図である。
【図１０】端末３のＲＡＭ２２の記憶エリアの概念図である。
【図１１】Ａ地点の端末３Ａのディスプレイ２８に表示された表示部２８１〜２８４を示す図である。
【図１２】端末３の主制御のフローチャートである。
【図１３】会議サーバ４で行われる処理のフローチャートである。
【図１４】撮影範囲の操作を指示しない非操作指示の端末３で行われる制御のフローチャートである。
【図１５】他の端末３から撮影範囲の操作を指示を受ける端末３でのカメラ３４の調整のフローチャートである。
【図１６】端末３のディスプレイ２８に表示される画像の図である。
【図１７】端末３のディスプレイ２８に表示される画像の図である。
【図１８】端末３のディスプレイ２８に表示される画像の図である。
【図１９】複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信した場合の会議サーバ４の処理のフローチャートである。
【図２０】会議サーバ４において、被操作端末と操作指示端末とが同じグループに属する場合のみに被操作端末のカメラ３４の操作を許可する処理のフローチャートである。
【図２１】端末３のディスプレイ２８に表示される画像の図である。
【図２２】会議サーバ４のＣＰＵ４０による主制御の処理を示すフローチャートである。
【図２３】一つの端末３から見た場合の撮影範囲制御処理の流れのフローチャートである。
【符号の説明】
【００７８】
１ テレビ会議システム
２ ネットワーク
３ 端末
４ 会議サーバ
２０ ＣＰＵ
２１ ＲＯＭ
２２ ＲＡＭ
２８ ディスプレイ
３４ カメラ
３６ カメラ制御部
３７ 電動雲台
３８ ズームレンズ
４０ ＣＰＵ
４１ ＲＯＭ
４２ ＲＡＭ
５１ ＨＤＤ
２２１ 自端末撮影情報記憶エリア
２８１ 表示部
２８２ 表示部
２８３ 表示部
２８４ 表示部
５１７ 重み付け記憶エリア
２８４０ 静止画像
２８４１ 現在枠
２８４２ 選択枠
２８４５ ポインタ
２８４６ ポインタ
【技術分野】
【０００１】
本発明は、撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムに関し、詳細には、複数の地点をネットワークで結んで行うテレビ会議システムのカメラの撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
従来、複数の端末をネットワークを介して接続し、画像と音声を双方向に送受信することにより、遠隔の地にある者同士の会議を実現するテレビ会議システムが知られている。このテレビ会議システムにおいて、相手側の端末のカメラの撮影範囲を制御する技術が提案されている（例えば、特許文献１参照。）。このテレビ会議システムでは、相手側のカメラの撮影範囲を制御する権利は、制御を始めた側の端末が持っている。
【特許文献１】特開平２００３−２７４２５５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記従来のテレビ会議システムでは、３箇所以上の複数の地点を結んでテレビ会議を行う場合には、現在、カメラの撮影範囲を制御している端末以外の地点の端末からカメラの撮影範囲を制御したくても出来ないという問題点があった。この場合には、第一の地点が第二の地点のカメラを操作すると、第三の地点は、新しく決まる画角について、実際にカメラが動いた後でないと確認できなかった。従って、第三の地点の見ていた物が写らなくなることがあり、カメラを再度操作しなければならず、スムーズな会議ができなくなるという問題点もあった。
【０００４】
本発明は、上記課題を解決するためになされたものであり、テレビ会議システムにおいて、カメラを操作してない端末からもカメラの操作に制限を加えることのできるテレビ会議システムのカメラの撮影範囲制御装置、撮影範囲制御方法及びコンピュータプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、請求項１に係る発明の撮影範囲制御装置は、遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御装置であって、前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御手段と、前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成手段と、操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成手段と、前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成手段と、前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信手段と、次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信手段と、前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信手段が受信した指定座標情報を含む範囲で前記選択枠情報を作成するように前記選択枠情報作成手段を制御する選択枠制御手段と、前記選択枠制御手段の制御により前記選択枠情報作成手段が作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成手段と、当該撮影制御情報作成手段が作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信手段とを備えたことを特徴とする。
【０００６】
また、請求項２に係る発明の撮影範囲制御装置は、請求項１に記載の発明の構成に加え、前記指定座標情報受信手段が前記指定座標情報を複数受信した場合には、前記撮影制御情報作成手段は、その複数の座標の重心を次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする。
【０００７】
また、請求項３に係る発明の撮影範囲制御装置は、請求項２に記載の発明の構成に加え、前記複数の指定座標情報に重みを付与する重み付与手段を設け、前記撮影制御情報作成手段は、前記重み付与手段が付与した重みに基づいて、複数の座標の重心を決定して、次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする。
【０００８】
また、請求項４に係る発明の撮影範囲制御装置は、請求項１乃至３の何れかに記載の発明の構成に加え、前記遠隔会議の参加時に、前記遠隔会議装置から属するグループを示すグループ情報を受信するグループ情報受信手段と、前記グループ情報受信手段が同じグループ情報を受信した遠隔会議装置に対してのみ前記選択枠情報を送信する選択枠情報送信手段とを備えたことを特徴とする。
【０００９】
また、請求項５に係る発明の撮影範囲制御装置は、請求項１乃至４の何れかに記載の発明の構成に加え、前記指定座標情報を複数受信した場合に、当該複数の指定座標情報が画角に入らない場合に、前記選択枠情報を操作している遠隔会議装置からの操作情報により前記選択枠情報が操作されて、画角に入れる指定座標情報を選択可能であることを特徴とする。
【００１０】
また、請求項６に係る発明の撮影範囲制御装置は、請求項１乃至５の何れかに記載の発明の構成に加え、前記撮影範囲制御装置は、各遠隔会議装置を接続するサーバから構成されることを特徴とする。
【００１１】
また、請求項７に係る発明の撮影範囲制御装置は、請求項１乃至５の何れかに記載の発明の構成に加え、前記撮影範囲制御装置は、各遠隔会議装置の何れかで構成されることを特徴とする。
【００１２】
また、請求項８に係る発明の撮影範囲制御方法は、遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御方法であって、前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御ステップと、前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成ステップと、操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成ステップと、前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成ステップと、前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信ステップと、次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信ステップと、前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信ステップで受信した指定座標情報を含む範囲で前記選択枠情報を作成するように制御する選択枠制御ステップと、前記選択枠制御ステップの制御により作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成ステップと、当該撮影制御情報作成ステップが作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信ステップとを備えたことを特徴とする。
【００１３】
また、請求項９に係る発明のコンピュータプログラムは、コンピュータに請求項８に記載の撮影範囲制御方法の各ステップを実行させることを特徴とする。
【発明の効果】
【００１４】
請求項１に係る発明の撮影範囲制御装置では、第一の遠隔会議装置が第二の遠隔会議装置の撮影手段の撮影範囲の画角の制御をしているときに、第三の遠隔会議装置が第二の遠隔会議装置の撮影手段が撮影可能な全範囲の画像を合成した一枚の静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を撮影範囲制御装置に送信することにより、第一の遠隔会議装置以外の遠隔会議装置からも必ず次に撮影させたい地点をしてすることが可能となる。従って、他地点の見ていた物が写らなくなることを防止でき、カメラを再度操作する必要を無くし、スムーズな会議ができる。
【００１５】
また、請求項２に係る発明の撮影範囲制御装置では、請求項１に記載の発明の効果に加え、指定座標情報を複数受信した場合には、撮影制御情報作成手段は、その複数の座標の重心を次に撮影する画角の中心にするように撮影制御情報を作成するので、複数の遠隔会議装置が次に撮影させたい地点を中心として、画角を決定することができる。撮影範囲制御装置の多くのユーザが希望する地点を中心として、画角を決定することができる。
【００１６】
また、請求項３に係る発明の撮影範囲制御装置では、請求項２に記載の発明の効果に加え、撮影制御情報作成手段は、重み付与手段が付与した重みに基づいて、複数の座標の重心を決定して、次に撮影する画角の中心にするように撮影制御情報を作成するので、優先度が高い地点よりに画角を決定することができる。
【００１７】
また、請求項４に係る発明の撮影範囲制御装置では、請求項１乃至３の何れかに記載の発明の効果に加え、選択枠情報送信手段はグループ情報受信手段が同じグループ情報を受信した遠隔会議装置に対してのみ前記選択枠情報を送信するので、限定された範囲の遠隔会議装置のみに次に撮影する画角の制御を行わせることができる。
【００１８】
また、請求項５に係る発明の撮影範囲制御装置では、請求項１乃至４の何れかに記載の発明の効果に加え、指定座標情報を複数受信した場合に、複数の指定座標情報が画角に入らない場合に、選択枠情報を操作している遠隔会議装置からの操作情報により選択枠情報が操作されて、画角に入れる指定座標情報を選択可能であるので、複数の地点から任意の地点を選択して選択枠に入れることができる。
【００１９】
また、請求項６に係る発明の撮影範囲制御装置では、請求項１乃至５の何れかに記載の発明の効果に加え、撮影範囲制御装置としてサーバを利用できるので、遠隔会議装置の能力が高くなくてもサーバにより各種の処理を行うことができる。
【００２０】
また、請求項７に係る発明の撮影範囲制御装置では、請求項１乃至５の何れかに記載の発明の効果に加え、撮影範囲制御装置として遠隔会議装置を利用できるので、サーバを省略できる。
【００２１】
また、請求項８に係る発明の撮影範囲制御方法では、第一の遠隔会議装置が第二の遠隔会議装置の撮影手段の撮影範囲の画角の制御をしているときに、第三の遠隔会議装置が第二の遠隔会議装置の撮影手段が撮影可能な全範囲の画像を合成した一枚の静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を撮影範囲制御装置に送信することにより、第一の遠隔会議装置以外の遠隔会議装置からも必ず次に撮影させたい地点をしてすることが可能となる。従って、他地点の見ていた物が写らなくなることを防止でき、カメラを再度操作する必要を無くし、スムーズな会議ができる。
【００２２】
また、請求項９に係る発明のコンピュータプログラムでは、コンピュータに請求項８に記載の撮影範囲制御方法の各ステップを実行させることにより、請求項８に記載の発明の効果を奏することができる。
【発明を実施するための最良の形態】
【００２３】
以下、本発明の一実施形態であるテレビ会議システム１について、図面を参照して説明する。はじめに、テレビ会議システム１の構成について、図１を参照して説明する。図１は、テレビ会議システム１の構成を示すブロック図である。
【００２４】
図１に示すように、テレビ会議システム１は、各地点毎に設けられた複数の端末３と、これら複数の端末３間で開催される会議を統括する会議サーバ４とを備え、これらがネットワーク２を介して相互に接続されている。尚、説明のため、Ａ地点に設置された端末を端末３Ａとし、Ｂ地点に設置された端末を端末３Ｂとし、Ｃ地点に設置された端末を端末３Ｃとする。このテレビ会議システム１では、端末３間において、ネットワーク２を介して、画像、音声が互いに送受信されることで、遠隔会議が実施される。
【００２５】
次に、端末３の電気的構成について、図２を参照して説明する。図２は、端末３の電気的構成を示すブロック図である。端末３には、端末３の制御を司るコントローラとしてのＣＰＵ２０が設けられ、そのＣＰＵ２０には、ＢＩＯＳ等を記憶したＲＯＭ２１と、各種データを一時的に記憶するＲＡＭ２２と、データの受け渡しの仲介を行うＩ／Ｏインタフェイス３０とが接続されている。Ｉ／Ｏインタフェイス３０には、ハードディスクドライブ３１（以下、ＨＤＤ３１）が接続されている。ＨＤＤ３１には、プログラム記憶エリア３１２と、その他の情報記憶エリア３１３とが少なくとも設けられている。
【００２６】
プログラム記憶エリア３１２には、端末３のメインプログラムや、他の端末３との間で会議を実行するための会議実行プログラム等が記憶されている。その他の情報記憶エリア３１３には、端末３で使用されるその他の情報が記憶されている。なお、端末３がＨＤＤ３１を備えていない専用機の場合は、ＲＯＭ２１に各種プログラムが記憶される。
【００２７】
また、Ｉ／Ｏインタフェイス３０には、ネットワーク２と通信するための通信装置２５と、マウス２７と、ビデオコントローラ２３と、キーコントローラ２４と、カードリーダ制御部３２と、ユーザを撮影するためのカメラ３４の方向やレンズのズームを制御するカメラ制御部３６と、ユーザの音声を取り込むためのマイク３５と、ＣＤ−ＲＯＭドライブ２６とが接続されている。ビデオコントローラ２３にはディスプレイ２８が接続され、キーコントローラ２４にはキーボード２９が接続され、カードリーダ制御部３２には、各ユーザが所有する識別カード（図示外）に記憶されたユーザを識別するためのユーザＩＤを読み込むためのカードリーダ３３が接続され、カメラ制御部３６には、カメラ３４が接続されている。尚、カメラ３４には、上下左右に方向を変えるための電動雲台３７と電動のズームレンズ３８が備えられており、カメラ制御部３６の制御によりこれらは駆動されて、カメラの方向及び画角が変更される。
【００２８】
なお、ＣＤ−ＲＯＭドライブ２６に挿入されるＣＤ−ＲＯＭ１１４には、上記したメインプログラムや、会議実行プログラム、撮影範囲制御方法のプログラム等が記憶され、導入時には、これら各種プログラムが、ＣＤ−ＲＯＭ１１４からハードディスクドライブ３１にセットアップされて、プログラム記憶エリア３１２に記憶される。
【００２９】
次に、会議サーバ４の電気的構成について、図３を参照して説明する。図３は、会議サーバ４の電気的構成を示すブロック図である。会議サーバ４には、会議サーバ４の制御を司るコントローラとしてのＣＰＵ４０が設けられ、そのＣＰＵ４０には、ＢＩＯＳ等を記憶したＲＯＭ４１と、各種データを一時的に記憶するＲＡＭ４２と、データの受け渡しの仲介を行うＩ／Ｏインタフェイス５０とが接続されている。Ｉ／Ｏインタフェイス５０には、ハードディスクドライブ５１（以下、「ＨＤＤ５１」と言う。）が接続されている。ＨＤＤ５１には、後述する各種記憶エリアが少なくとも設けられている（図４参照）。
【００３０】
また、Ｉ／Ｏインタフェイス５０には、ネットワーク２と通信するための通信装置４５と、マウス４７と、ビデオコントローラ４３と、キーコントローラ４４と、ＣＤ−ＲＯＭドライブ４６と、計時装置５２が接続されている。ビデオコントローラ４３にはディスプレイ４８が接続され、キーコントローラ４４にはキーボード４９が接続されている。
【００３１】
なお、ＣＤ−ＲＯＭドライブ４６に挿入されるＣＤ−ＲＯＭ１１５には、後述するメインプログラムや、会議管理プログラムや、撮影範囲制御方法のプログラム等が記憶され、導入時には、これら各種プログラムが、ＣＤ−ＲＯＭ１１５からＨＤＤ５１にセットアップされて、プログラム記憶エリア５１６に記憶される。
【００３２】
次に、ＨＤＤ５１の各種記憶エリアについて、図４を参照して説明する。図４は、ＨＤＤ５１の各記憶エリアを示す概念図である。ＨＤＤ５１には、ユーザ情報テーブル記憶エリア５１１と、ログインテーブル記憶エリア５１２と、会議テーブル記憶エリア５１３と、参加受付テーブル記憶エリア５１４と、カメラ操作参加情報テーブル記憶エリア５１５と、プログラム記憶エリア５１６と、端末毎の重み付けを記憶した重み付け記憶エリア５１７と、その他の情報記憶エリア５１８とが少なくとも設けられている。
【００３３】
ユーザ情報テーブル記憶エリア５１１には、ユーザ情報テーブル５１１１（図５参照）が記憶されている。ログインテーブル記憶エリア５１２には、ログインテーブル５１２１（図６参照）が記憶されている。会議テーブル記憶エリア５１３には、会議テーブル５１３１（図７参照）が記憶されている。参加受付テーブル記憶エリア５１４には、参加受付テーブル５１４１（図８参照）が記憶されている。カメラ操作参加情報テーブル記憶エリア５１５には、カメラ操作参加情報テーブル５１５１（図９参照）が記憶されている。また、プログラム記憶エリア５１６には、会議サーバ４のメインプログラムや、端末３間で開催される会議を管理するための会議管理プログラム等が記憶されている。重み付け記憶エリア５１７には、後述する複数の操作制限情報（ポインタ）の各座標に重みを付けて重心を算出するための重みが記憶されている。その他の情報記憶エリア５１８には、会議サーバ４で使用されるその他の情報が記憶されている。なお、会議サーバ４がＨＤＤ５１を備えていない専用機の場合は、ＲＯＭ４１に各種プログラムが記憶される。以下、各テーブルについて順に説明する。
【００３４】
まず、ユーザ情報テーブル５１１１について、図５を参照して説明する。図５は、ユーザ情報テーブル５１１１の概念図である。ユーザ情報テーブル５１１１は、ユーザがテレビ会議システム１にログインする際の認証に用いるためのテーブルである。ユーザ情報テーブル５１１１には、各ユーザにそれぞれ対応するユーザ情報が各々記憶されている。具体的には、ユーザを識別するためのユーザＩＤ、ログインする際のパスワード、氏名、会社名等が各々記憶されている。ユーザは、これらのユーザ情報を、ユーザ情報テーブル５１１１に事前に登録を済ませておくこととする。このユーザ情報テーブル５１１１により、テレビ会議システム１を利用するユーザを管理できる。
【００３５】
次に、ログインテーブル５１２１について、図６を参照して説明する。図６は、ログインテーブル５１２１の概念図である。ログインテーブル５１２１には、ネットワーク２にログインしたユーザのユーザＩＤと、そのユーザＩＤが登録された端末３の端末ＩＤとが記憶される。即ち、ログインテーブル５１２１のユーザＩＤの欄には、カードリーダ３３で読み取られた識別カード（図示外）に記憶されたユーザＩＤが記憶される。さらに、端末ＩＤの欄には、そのユーザＩＤを送信した端末３を識別する端末ＩＤが記憶される。なお、端末ＩＤとは、端末３のマックアドレス等である。
【００３６】
例えば、ユーザである「兄弟太郎」さん（図５参照）がログインした場合、兄弟太郎さんが所有する識別カードをカードリーダ３３に読み取らせる。この場合、その識別カードに記憶されたユーザＩＤ＝「Ａ０００１」と、そのユーザＩＤを送信した端末３の端末ＩＤ＝「０００１」とが、ログインテーブル５１２１に各々記憶される。その他のユーザである兄弟次郎さん、兄弟三郎さん、販売太郎さん、販売次郎さん達についても同様に設定される。このように、ログインテーブル５１２１は、ネットワーク２にログインしたユーザと、そのユーザが登録された端末３とを管理するものである。
【００３７】
次に、会議テーブル５１３１について、図７を参照して説明する。図７は、会議テーブル５１３１の概念図である。会議テーブル５１３１には、ユーザＩＤと、そのユーザＩＤが参加メンバーとして予め登録されている会議を識別する会議ＩＤとが各々記憶されている。例えば、兄弟太郎さん、兄弟次郎さん、兄弟三郎さん、販売太郎さん、販売次郎さんは、会議ＩＤ＝００１の会議の参加メンバーとして、会議テーブル５１３１に予め登録されている。これにより、会議の参加者を管理できる。
【００３８】
次に、参加受付テーブル５１４１について、図８を参照して説明する。図８は、参加受付テーブル５１４１の概念図である。参加受付テーブル５１４１には、予め登録された会議ＩＤに対して、その会議ＩＤに対応する会議に現在ログインしているユーザＩＤが、会議参加ＩＤとして記憶されている。例えば、参加受付テーブル５１４１の１行目では、会議ＩＤ＝「００１」に対して、会議参加ＩＤ＝「Ａ０００１」、「Ａ０００２」、「Ｂ０００１」のユーザが現在ログインしていることを示している。
【００３９】
次に、カメラ操作参加情報テーブル５１５１について、図９を参照して説明する。図９は、カメラ操作参加情報テーブル５１５１の概念図である。カメラ操作参加情報テーブル５１５１には、カメラ３４の画角を調整する操作に参加する端末３の端末ＩＤが記憶されている。
【００４０】
次に、図１０を参照して、端末３のＲＡＭ２２の記憶エリアを説明する。図１０は、端末３のＲＡＭ２２の記憶エリアの概念図である。図１０に示すように、端末３のＲＡＭ２２には、自身が備えるカメラ３４で撮影した撮影可能範囲の合成画像と、撮影可能範囲等を記憶する自端末撮影情報記憶エリア２２１と、他の端末３から受信した他の端末３の合成画像と撮影可能範囲等を記憶する他端末撮影情報記憶エリア２２２と、その他データを記憶するエリア等が設けられている。
【００４１】
次に、端末３のディスプレイ２８に表示される画面について、図１１を参照して説明する。図１１は、Ａ地点の端末３Ａのディスプレイ２８に表示された分割された表示部２８１〜２８４を示す図である。例えば、図１に示すように、テレビ会議システム１において、Ａ地点〜Ｃの３つの地点がある場合を想定する。Ａ地点には、端末ＩＤ＝０００１の端末３が設置され、Ｂ地点には、端末ＩＤ＝０００２の端末３が設置され、Ｃ地点には、端末ＩＤ＝０００３の端末３が設置され設置されている。
【００４２】
そして、Ａ地点の端末３Ａからは、１人の参加者が会議にログインし、Ｂ地点の端末３Ｂからは、２人のユーザが会議にログインし、Ｃ地点の端末３Ｃからは、２人のユーザが会議にログインした場合を想定する。
【００４３】
このような状況の場合、Ａ地点〜Ｃ地点の各端末３のディスプレイ２８には、図１１に示す４つの表示部２８１〜２８４が表示される。例えば、表示部２８１には、Ａ地点のカメラ３４（図２参照）で撮影された参加者の画像が表示される。表示部２８２には、Ｂ地点のカメラ３４（図２参照）で撮影された参加者の画像が表示される。表示部２８３には、Ｃ地点のカメラ３４（図２参照）で撮影された参加者の画像が表示される。この段階では、表示部２８４には何も表示されない。これに合わせ、各端末３Ａ〜３Ｃのマイク３５（図２参照）によって、各Ａ地点、Ｂ地点、Ｃ地点の各音声が端末３Ａ〜３Ｃのスピーカ（図示外）から出力されるので、遠く離れた他のＡ地点、Ｂ地点、Ｃ地点の間で会議を行うことができる。
【００４４】
次に、上記構成からなるテレビ会議システム１で行われる処理について説明する。まず、初めに、図１２に示すフローチャートを参照して、テレビ会議に参加する各端末３で行われる処理について説明する。図１２は、端末３の主制御のフローチャートである。端末３では、電源が投入されると、初めに、ＣＰＵ２０がカメラ制御部３６を制御して、カメラ３４の電動のズームレンズ３８が回転して最大の広角の画角になる。次いで、カメラ３４が載置された電動雲台３７が上下左右の最大角度まで回転して、カメラ３４による撮影可能範囲の全てを撮影する（Ｓ１１）。そして、その撮影データは、図１０に示すＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶される。次いで、ＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶された複数の静止画像を合成して、一枚の合成画像を作成する（Ｓ１１）。この合成画像の作成には周知の画像合成の技術を採用すれば良い。例えば、各静止画像の画像認識を行って、同じ画像の部分を繋ぎ合わせるように合成する処理により行えばよい。合成画像は、ＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶される（Ｓ１１）。また、この撮影可能範囲の合成画像に対応するカメラ３４の画像の中心に対する上下の角度、左右の角度からなる撮影可能範囲データも自端末撮影情報記憶エリア２２１に記憶される（Ｓ１１）。
【００４５】
次いで、ＲＡＭ２２の自端末撮影情報記憶エリア２２１に記憶した自端末撮影可能範囲の合成画像と、撮影可能範囲データと、ズームレンズ３８をズームインしたときの拡大率のデータを他の端末３に送信する（Ｓ１２）。このときに、後述するグループコードを記憶している場合には、当該グループコードも他の端末３に送信する（Ｓ１２）。
【００４６】
次いで、他の端末３から送られて来る他の端末の撮影可能範囲の合成画像と、撮影可能範囲データと、ズームレンズ３８をズームインしたときの拡大率のデータを受信し（Ｓ１３）、図１０に示すＲＡＭ２２の他端末撮影情報記憶エリア２２２に記憶する（Ｓ１３）。このときに、後述するグループコードを受信している場合には、当該グループコードも他端末撮影情報記憶エリア２２２に記憶する（Ｓ１３）。次いで、複数の端末３間での多地点会議を開始する（Ｓ１４）。次いで、映像とともに現在のカメラ３４の中心位置の座標（Ｘ．Ｙ）と、ズームレンズ３８の拡大率を送信する（Ｓ１５）。
【００４７】
次いで、他の端末３からの映像と現在のカメラ３４の中心位置の座標（Ｘ．Ｙ）と、ズームレンズ３８の拡大率を受信して、図１１に示す合成画像を更新する（Ｓ１６）。
【００４８】
次に、図１３乃至図１５に示すフローチャートと、図１１、図１６及び至図１７を参照して、端末３におけるカメラ３４の撮影範囲制御について説明する。図１３は、会議サーバ４で行われる処理のフローチャートである。図１４は、撮影範囲の操作を指示しない非操作指示の端末３で行われる制御のフローチャートである。図１５は、他の端末３から撮影範囲の操作を指示を受ける端末３でのカメラ３４の調整のフローチャートである。図１６及び至図１７は、端末３のディスプレイ２８に表示される画像の図である。
【００４９】
ここでは、一例として、Ａ地点の端末３Ａ、Ｂ地点の端末３Ｂ、Ｃ地点の端末３Ｃの３つの間でテレビ会議が行われ、Ａ地点の端末３ＡがＢ地点の端末３Ｂのカメラ３４を操作するものとする。まず、会議サーバ４では、図１１に示すように、Ａ地点、Ｂ地点及びＣ地点の端末３のディスプレイ２８に図１１に示す合成画像を表示する。この合成画像では、左上の表示部２８１にＡ地点の画像を表示し、右上の表示部２８２にＢ地点の画像を表示し、左下の表示部２８３にＢ地点の画像を表示し、右下の表示部２８４が空欄で表示されている。
【００５０】
次いで、会議サーバ４がＡ地点の端末３ＡからＢ地点の端末３Ｂのカメラ３４の操作指示信号を受信すると（Ｓ２１：ＹＥＳ）、図１６に示すように、端末３Ａ、端末３Ｂ、端末３Ｃ全部のディスプレイ２８の画面の表示部２８４に操作対象の端末３Ｂの静止画像２８４０と、次に撮影する撮影範囲の選択枠２８４２と、現在の表示範囲である現在枠２８４１を表示する（Ｓ２２）。次いで、操作指示端末であるＡ地点の端末３Ａに次に撮影する撮影範囲の選択枠２８４２の操作を許可する（Ｓ２３）。
【００５１】
このときに、端末３Ｂのカメラ３４の撮影範囲の制御をしていないＣ地点の端末３Ｃの制御について図１４のフローチャートを参照して説明する。Ｃ地点の端末３Ｃでは、会議サーバ４から被操作端末である端末３Ｂの情報と、操作指示端末である端末３Ａの情報を受信する（Ｓ３１）。これらの情報によりどの端末がどの端末を制御しているかを端末３Ｃが知ることができる。
【００５２】
次いで、ディスプレイ２８の画面の表示部２８４に操作対象の端末３Ｂの静止画像２８４０と、次に撮影する撮影範囲の選択枠２８４２と、現在の表示範囲である現在枠２８４１とを表示する（Ｓ３２）。次に、端末３Ｃから撮影範囲の選択枠２８４２への移動範囲の制限をしたい場合には（Ｓ３４：ＹＥＳ）、図１７に示すように、ディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上に見たい場所を指示するためのポインタ２８４５を表示する（Ｓ３５）。ポインタ２８４５の表示の指示は、図２に示す端末３のマウス２７及びキーボード２９の所定の操作により行われる。
【００５３】
次いで、会議サーバ４と通信して、ポインタ２８４５の位置を確定する信号を会議サーバ４から受信する（Ｓ３６）。その後、ポインタ２８４５の中心のディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上の座標（Ｘ，Ｙ）を操作制限情報として会議サーバ４へ送信する（Ｓ３７）。その後、処理を終了する。また、端末３Ｃから撮影範囲の選択枠２８４２の移動範囲の制限をしない場合には（Ｓ３４：ＮＯ）、処理を終了する。
【００５４】
一方、会議サーバ４では、撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の中心の静止画像２８４０上の座標（Ｘ，Ｙ））を端末３Ｃから受信した場合には（Ｓ２４：ＹＥＳ）、受信した座標（Ｘ，Ｙ）を含む範囲でのみ撮影範囲の選択枠２８４２の操作を操作端末である端末３Ａに許可する（Ｓ２５）。そして、操作端末である端末３Ａから撮影範囲の確定信号を受信した場合には（Ｓ２６：ＹＥＳ）、操作対象端末（被操作端末）である端末Ｂに撮影範囲の選択枠２８４２の中心の座標（Ｘ，Ｙ）と選択枠２８４２の拡大率をカメラ制御信号（撮影制御情報）として作成して送信する（Ｓ２７）。その後、処理を終了する。尚、Ｓ２４の判断処理において、一定時間以内に操作制限信号を受信しない場合には（Ｓ２４：ＮＯ）、Ｓ２６に移行する。
【００５５】
次に、図１５に示すフローチャートを参照して、被操作端末である端末３Ｂで行われるカメラ３４の調整について説明する。端末３Ｂでは、カメラ３４の制御信号を受信するまで待機し（Ｓ４１：ＮＯ）、カメラ３４の制御信号を受信すると（Ｓ４１：ＹＥＳ）、端末３ＢのＣＰＵ２０は、受信した制御信号に基づいて電動雲台３７によるカメラ３４の方向及びズームレンズ３８の画角の調整をする（Ｓ４２）。その後、処理を終了する。
【００５６】
以上説明したように、上記の実施の形態では、端末３Ａが端末３Ｂのカメラ３４の次に撮影する撮影範囲の選択枠２８４２の操作をしている場合でも、端末３Ａ以外の端末Ｃから見たい位置をポインタ２８４５で指定することにより、その位置が必ず入った範囲の撮影を行うことができる。
【００５７】
次に、図１８及び図１９を参照して、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合の処理について説明する。図１８は、端末３のディスプレイ２８に表示される画像の図である。また、図１９は、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信した場合の会議サーバ４の処理のフローチャートである。この例では、端末３Ａが端末３Ｂのカメラ３４の制御をしており、端末３Ｃが撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１））を送信し、端末３Ａ、端末３Ｂ及び端末３Ｃ以外の端末３が操作制限情報（ポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を送信するものとする（図１８参照）。
【００５８】
会議サーバ４では、図１８のフローチャートに示すように、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合に（図１９：Ｓ６０：ＹＥＳ）、受信した複数の操作制限情報（ポインタ）の重心の座標で画角中心の座標を決める設定になっている場合には（Ｓ６１：ＹＥＳ）、撮影範囲の確定信号を受信すると（Ｓ６２：ＹＥＳ）、端末３毎に重み付けの設定がなされている場合には（Ｓ６３：ＹＥＳ）、複数の操作制限情報（ポインタ）の各座標に重みを付けて重心を算出する（Ｓ６６）。この重みは、ＨＤＤ５１の重み付け記憶エリア５１７に予め記憶されている（図４参照）。例えば、端末３Ｃから座標（Ｘ１，Ｙ１）及び他の端末３から座標（Ｘ２，Ｙ２）を受信した場合に、端末３Ｃの重みが「３」で、他の端末３の重みが「２」とＨＤＤ５１の重み付け記憶エリア５１７に記憶されている場合には、操作制限情報（ポインタ）の座標としては、座標（Ｘ＝（３Ｘ１＋２Ｘ２）／５、Ｙ＝（３Ｙ１＋２Ｙ２）／５）を採用する（Ｓ６３）。その後、算出した座標（Ｘ＝（３Ｘ１＋２Ｘ２）／５、Ｙ＝（３Ｙ１＋２Ｙ２）／５）を撮影範囲の選択枠２８４２の中心の座標とする（Ｓ６５）。
【００５９】
また、端末３毎に重み付けの設定がなされていない場合には（Ｓ６３：ＮＯ）、単純に複数の操作制限情報（ポインタ）の各座標から重心を算出する（Ｓ６４）。例えば、座標（Ｘ１，Ｙ１）及び座標（Ｘ２，Ｙ２）を受信した場合には、操作制限情報（ポインタ）の座標としては、座標（Ｘ＝（Ｘ１＋Ｘ２）／２、Ｙ＝（Ｙ１＋Ｙ２）／２）を採用する（Ｓ６４）。その後、算出した座標（Ｘ＝（Ｘ１＋Ｘ２）／２、Ｙ＝（Ｙ１＋Ｙ２）／２）を撮影範囲の選択枠２８４２の中心の座標とする（Ｓ６５）。その後、処理を終了する。尚、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合に（Ｓ６０：ＹＥＳ）、受信した複数の操作制限情報（ポインタ）の重心の座標で画角を決める設定になっていない場合には（Ｓ６１：ＮＯ）、処理を終了する。また、Ｓ６０の判断処理では、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信するまで待機する（Ｓ６０：ＮＯ）。さらに、Ｓ６２の判断処理では、撮影範囲の確定信号を受信するまで待機する（Ｓ６２：ＮＯ）。
【００６０】
次に、図２０に示すフローチャートを参照して、被操作端末と操作指示端末とが同じグループに属する場合のみに被操作端末のカメラ３４の操作を許可する方法について説明する。図２０は、会議サーバ４において、被操作端末と操作指示端末とが同じグループに属する場合のみに被操作端末のカメラ３４の操作を許可する処理のフローチャートである。ここで、同じグループに属する場合には、同じグループコードを持つ設定となっている。尚、グループコードとは、テレビ会議を行う所定の組織単位（会社毎ごとや、部署毎）に定められている所定のコードであり、一例としては、Ａ社：Ａ００１，Ｂ社：Ｂ００１、Ｃ社：Ｃ００１等である。
【００６１】
会議サーバ４で、被操作指示端末と操作指示端末の情報（グループコードを含む）を受信した場合に（Ｓ５１：ＹＥＳ）、各端末３のディスプレイ２８の表示部２８４に被操作端末の静止画像２８４０と撮影範囲の選択枠２８４２と現在の表示範囲である現在枠２８４１を表示する（Ｓ５２）。ここで、操作指示端末と被操作指示端末が同じグループである場合（同じブループコードを持つ場合）（Ｓ５３：ＹＥＳ）、被操作指示端末に選択枠２８４２の操作を許可する（Ｓ５４）、操作指示端末と被操作指示端末が同じグループでない場合（同じブループコードを持たない場合）（Ｓ５３：ＮＯ）には、処理を終了する。また、Ｓ５１の判断処理では、被操作指示端末と操作指示端末の情報（グループコードを含む）を受信するまで待機する（Ｓ５１：ＮＯ）。
【００６２】
次に、図２１を参照して、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５やポインタ２８４６の静止画像２８４０上の座標（Ｘ，Ｙ））を受信した場合の第二の処理について説明する。図２１は、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信した場合の会議サーバ４の第二の処理のフローチャートである。この例では、端末３Ａが端末３Ｂのカメラ３４の制御をしており、端末３Ｃが撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１））を送信し、端末３Ａ乃至端末３Ｃ以外の端末３が操作制限情報（ポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を送信するものとする（図１８参照）。
【００６３】
会議サーバ４において、図１８に示すように、複数の端末から撮影範囲の選択枠２８４２の操作制限情報（ポインタ２８４５の静止画像２８４０上の座標（Ｘ１，Ｙ１）及びポインタ２８４６の静止画像２８４０上の座標（Ｘ２，Ｙ２））を受信した場合には（図２１：Ｓ７０：ＹＥＳ）、撮影範囲の選択枠２８４２を最大まで拡大する（Ｓ７１）。次に、この拡大した選択枠２８４２に全ての操作制限情報の座標（座標（Ｘ１，Ｙ１）、座標（Ｘ２，Ｙ２））が入った場合には（Ｓ７２：ＹＥＳ）、処理をそのまま終了する。この拡大した選択枠２８４２に全ての操作制限情報の座標（座標（Ｘ１，Ｙ１）、座標（Ｘ２，Ｙ２））が入らなかった場合には（Ｓ７２：ＮＯ）、何れかの操作制限情報の座標（（Ｘ１，Ｙ１）又は座標（Ｘ２，Ｙ２））を含む範囲で、撮影範囲の選択枠２８４２の操作を許可する（Ｓ７３）。この場合は、選択枠２８４２の操作をしている端末３Ａが選択枠２８４２の操作により、何れかの操作制限情報の座標を外すことができるようになっている。但し、全部の操作制限情報の座標を外すことはできず、最低１つは操作制限情報の座標が残る（Ｓ７３）。このときに、手動による選択枠２８４２の移動でなく、先に受信した操作制限情報の座標を優先するようにしても良いし、後に受信した操作制限情報の座標を優先するようにしても良い。また、端末毎に優先順位を決めておき、その優先順位の高い端末を優先するようにしても良い。何れの操作制限情報を優先するかは、予めルールとしてプログラム中で決めておけばよい。
【００６４】
次いで、撮影範囲の確定信号を操作端末から受信した場合に（Ｓ７４：ＹＥＳ）、一部の端末の制御を無視したことを全部の端末に通知する（Ｓ７５）。その後、処理を終了する。また、Ｓ７０の判断処理では、複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信するまで待機する（Ｓ７０：ＮＯ）。また、Ｓ７４の判断処理では、撮影範囲の確定信号を操作端末から受信するまで待機する（Ｓ７４：ＮＯ）。
【００６５】
次に、図２２に示すフローチャートを参照して、テレビ会議システム１の主制御について説明する。図２２は、会議サーバ４のＣＰＵ４０による主制御の処理を示すフローチャートである。
【００６６】
図２２に示すように、まず、端末３からユーザ情報を受信したか否かが判断される（Ｓ１）。ユーザ情報は、端末３において、会議に参加する参加者が、識別カード（図示外）をカードリーダ３３に読み込ませることで、端末３の通信装置２５からネットワーク２を介して会議サーバ４に向けて送信される。このとき、ユーザ情報と共に、そのユーザ情報を送信した端末３の端末ＩＤも共に送信される。なお、ユーザ情報を受信しない間は（Ｓ１：ＮＯ）、Ｓ１に戻って、引き続きユーザ情報の受信が監視される。
【００６７】
次いで、ユーザ情報が受信されると（Ｓ１：ＹＥＳ）、ログイン処理が実行される（Ｓ２）。この処理では、まず、各地点の端末３から受信したユーザ情報に基づき、その参加者が、予め登録されているユーザであるか否かの認証が行われる。即ち、ユーザ情報テーブル５１１１（図５参照）に登録されているか否かが判断される。登録されているユーザであれば、そのユーザＩＤと、ユーザ情報を送信した端末ＩＤが、ＨＤＤ５１のログインテーブル５１２１（図６参照）に記憶される。なお、図示しないが、登録されていないユーザであれば認証されないので、そのまま処理は終了する。
【００６８】
次に、会議受付処理が実行される（Ｓ３）。この処理では、まず、ログインしたユーザが参加可能な会議が、会議テーブル５１３１（図７参照）から検索される。会議は、その会議主催者が開催を決定する。例えば、会議サーバ４に登録された会議主催者が、端末３から会議開催の要求を会議サーバ４に向けて送信する。すると、会議サーバ４で予め登録された会議の開催が決定される。
【００６９】
そして、参加受付テーブル５１４１（図８参照）に登録された該当する会議ＩＤに対して、ユーザＩＤが記憶される。例えば、ユーザＩＤ＝０００１である「兄弟太郎」さんが、会議ＩＤ＝０００１の会議にログインした場合、参加受付テーブル５１４１には、会議ＩＤ＝００１に対して、ユーザＩＤ＝Ａ０００１が記憶される。そして、会議ＩＤ＝００１の会議に対して、さらに、「兄弟次郎」さん、「販売太郎」さんがログインした場合は、参加受付テーブル５１４１の会議ＩＤ＝０００１に対して、ユーザＩＤ＝Ａ０００１に加え、Ａ０００２、Ｂ０００１がそれぞれ随時記憶される。
【００７０】
次に、そのユーザが参加する会議において、ログインテーブル５１２１に基づき、ログインした端末が２以上あるか否が判断される（Ｓ４）。会議は、ログインする端末３が少なくとも２つなければ開催できない。よって、同じ会議について、ログインする端末３が１つの場合（Ｓ４：ＮＯ）、Ｓ１に戻って、他の端末のログインを待つために、ユーザ情報を受信したか否かが引き続き監視される。
【００７１】
そして、例えば、ログインテーブル５１２１（図６参照）に、ユーザＩＤ＝Ａ０００１、Ｂ０００１が記憶された場合、これらは互いに別の端末であって、会議テーブル５１３１を参照すると、何れも会議ＩＤ＝００１の参加メンバーである。この場合、会議を開催できるので、ユーザＩＤ＝Ａ０００１、Ｂ０００１が登録された端末３の端末ＩＤ「０００１」、「０００２」に対して、会議開始命令がそれぞれ送信され、それらの端末３が設置された地点間を接続し、会議が開始される（Ｓ５）。
【００７２】
続いて、開催されている会議に途中参加者がいるか否かが判断される（Ｓ６）。ここでは、他の端末３から同一会議にログインしたユーザがいるか否かが判断される。途中参加者がいない場合（Ｓ６：ＮＯ）、会議主催者の端末３から会議終了要求信号を受信したか否かが判断される（Ｓ８）。途中参加者がいた場合（Ｓ６：ＹＥＳ）、参加受付テーブル５１４１に、途中参加者のユーザＩＤがその会議ＩＤに対して記憶される（Ｓ７）。そして、会議終了要求信号を受信しない間は（Ｓ８：ＮＯ）、引き続き会議を実行すると共に、途中参加者の監視が行われる（Ｓ６）。また、会議主催者の端末３から会議終了要求があった場合（Ｓ８：ＹＥＳ）、会議を終了させるために、その会議に参加している各参加者の端末３に向けて、会議終了通知が送信される（Ｓ９）。
【００７３】
最後に、まとめとして、図２３に示すフローチャートを参照して、一つの端末３から見た場合の上記の撮影範囲制御処理の流れを説明する。図２３は、一つの端末３から見た場合の撮影範囲制御処理の流れのフローチャートである。この撮影範囲制御処理が開始されると、図１６に示すように端末３のディスプレイ２８の表示部２８４に操作対象の端末の合成画像としての静止画像２８４０を表示する（Ｓ８１）、次いで、表示部２８４に画角の選択枠２８４２と現在枠２８４１とを表示する（Ｓ８２）。次いで、自端末が、画角の選択枠２８４２の操作を指示している場合には（Ｓ８３：ＹＥＳ）、画角の選択枠２８４２の操作が可能となる（Ｓ８４）。次いで、他の端末がディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上に見たい場所を指示するためのポインタ２８４５を作成した場合には（Ｓ８５：ＹＥＳ）、ポインタ２８４５を含んだ範囲でのみ画角の選択枠２８４２の操作が可能となる（Ｓ８６）。次いで、画角を確定する（Ｓ８７）。他の端末がポインタ２８４５を作成してない場合には（Ｓ８５：ＮＯ）、画角を確定する（Ｓ８７）。次いで、新しい座標を会議サーバ４に通知し、制御対象の端末３のカメラ３４の制御信号が会議サーバ４から制御対象の端末３に送られる（Ｓ８８）。その後、処理を終了する。
【００７４】
また、自端末が、画角の選択枠２８４２の操作を指示していない場合に（Ｓ８３：ＮＯ）、操作を全て他の端末に任せる場合は（Ｓ８９：ＹＥＳ）、処理を終了する。また、自端末が、画角の選択枠２８４２の操作を指示していない場合に（Ｓ８３：ＮＯ）、操作を全て他の端末に任せない場合は（Ｓ８９：ＮＯ）、映しておきたいポイントにポインタ２８４５を作成する（Ｓ９０）。その後、ポインタ２８４５の座標を操作制限情報として会議サーバ４に送信する（Ｓ９１）。その後、処理を終了する。
【００７５】
本発明は、上記の実施の形態に限られず、各種の変形が可能である。例えば、上記の実施の形態では撮影範囲制御装置として会議サーバ４を用いたが、会議サーバ４の機能を何れかの端末３に持たせて、会議サーバ４を用いないようにしても良い。この場合には、ネットワーク２を介して複数の端末３を相互に接続し、何れかの端末３が撮影範囲制御装置として機能する。
【００７６】
なお、以上の説明において、図１に示す会議サーバ４が本発明の「撮影範囲制御装置」に相当し、端末３及び端末３Ａ〜３Ｃが本発明の「遠隔会議装置」に相当する。図２に示すカメラ３４が本発明の「撮影手段」に相当し、電動雲台３７及びズームレンズ３８が本発明の「切替手段」に相当する。また、ＣＰＵ２０及びカメラ制御部３６が、本発明の「撮影制御手段」に相当する。また、図１２に示すＳ１１の処理を実行するＣＰＵ２０が本発明の「画像合成手段」に相当する。また、図１３に示すＳ２２の処理を実行するＣＰＵ４０が本発明の「現在枠情報作成手段」、「選択枠情報作成手段」に相当する。また、図１３に示すＳ２１の処理を実行するＣＰＵ４０及び図２に示す通信装置２５が本発明の「操作情報受信手段」に相当する。また、図１３に示すＳ２４の処理を実行するＣＰＵ４０及び図２に示す通信装置２５が本発明の「指定座標情報受信手段」に相当する。また、図１３に示すＳ２５の処理を実行するＣＰＵ４０が本発明の「選択枠制御手段」に相当する。また、図１３に示すＳ２７の処理を実行するＣＰＵ４０が本発明の「撮影制御情報作成手段」に相当する。また、図２に示す通信装置２５が、本発明の「送信手段」に相当する。また、図１９に示すＳ６６の処理を実行するＣＰＵ４０が本発明の「重み付与手段」に相当する。図２０に示すＳ５３の処理を実行するＣＰＵ４０が本発明の「通信装置２５が、本発明の「送信手段」に相当する。また、図１９に示すＳ６６の処理を実行するＣＰＵ４０が本発明の「グループ情報受信手段」に相当する。また、ポインタ２８４５やポインタ２８４６の中心のディスプレイ２８の画面の表示部２８４に表示されている静止画像２８４０上の座標（Ｘ，Ｙ）の情報（操作制限情報）が本発明の「指定座標情報」に相当する。
【図面の簡単な説明】
【００７７】
【図１】テレビ会議システム１の構成を示すブロック図である。
【図２】端末３の電気的構成を示すブロック図である。
【図３】会議サーバ４の電気的構成を示すブロック図である。
【図４】ＨＤＤ５１の各記憶エリアを示す概念図である。
【図５】ユーザ情報テーブル５１１１の概念図である。
【図６】ログインテーブル５１２１の概念図である。
【図７】会議テーブル５１３１の概念図である。
【図８】参加受付テーブル５１４１の概念図である。
【図９】カメラ操作参加情報テーブル５１５１の概念図である。
【図１０】端末３のＲＡＭ２２の記憶エリアの概念図である。
【図１１】Ａ地点の端末３Ａのディスプレイ２８に表示された表示部２８１〜２８４を示す図である。
【図１２】端末３の主制御のフローチャートである。
【図１３】会議サーバ４で行われる処理のフローチャートである。
【図１４】撮影範囲の操作を指示しない非操作指示の端末３で行われる制御のフローチャートである。
【図１５】他の端末３から撮影範囲の操作を指示を受ける端末３でのカメラ３４の調整のフローチャートである。
【図１６】端末３のディスプレイ２８に表示される画像の図である。
【図１７】端末３のディスプレイ２８に表示される画像の図である。
【図１８】端末３のディスプレイ２８に表示される画像の図である。
【図１９】複数の端末から撮影範囲の選択枠２８４２の操作制限情報を受信した場合の会議サーバ４の処理のフローチャートである。
【図２０】会議サーバ４において、被操作端末と操作指示端末とが同じグループに属する場合のみに被操作端末のカメラ３４の操作を許可する処理のフローチャートである。
【図２１】端末３のディスプレイ２８に表示される画像の図である。
【図２２】会議サーバ４のＣＰＵ４０による主制御の処理を示すフローチャートである。
【図２３】一つの端末３から見た場合の撮影範囲制御処理の流れのフローチャートである。
【符号の説明】
【００７８】
１ テレビ会議システム
２ ネットワーク
３ 端末
４ 会議サーバ
２０ ＣＰＵ
２１ ＲＯＭ
２２ ＲＡＭ
２８ ディスプレイ
３４ カメラ
３６ カメラ制御部
３７ 電動雲台
３８ ズームレンズ
４０ ＣＰＵ
４１ ＲＯＭ
４２ ＲＡＭ
５１ ＨＤＤ
２２１ 自端末撮影情報記憶エリア
２８１ 表示部
２８２ 表示部
２８３ 表示部
２８４ 表示部
５１７ 重み付け記憶エリア
２８４０ 静止画像
２８４１ 現在枠
２８４２ 選択枠
２８４５ ポインタ
２８４６ ポインタ
【特許請求の範囲】
【請求項１】
遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御装置であって、
前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御手段と、
前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成手段と、
操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成手段と、
前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成手段と、
前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信手段と、
次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信手段と、
前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信手段が受信した指定座標情報を含む範囲で前記選択枠情報を作成するように前記選択枠情報作成手段を制御する選択枠制御手段と、
前記選択枠制御手段の制御により前記選択枠情報作成手段が作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成手段と、
当該撮影制御情報作成手段が作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信手段と
を備えたことを特徴とする撮影範囲制御装置。
【請求項２】
前記指定座標情報受信手段が前記指定座標情報を複数受信した場合には、前記撮影制御情報作成手段は、その複数の座標の重心を次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする請求項１に記載の撮影範囲制御装置。
【請求項３】
前記複数の指定座標情報に重みを付与する重み付与手段を設け、
前記撮影制御情報作成手段は、前記重み付与手段が付与した重みに基づいて、複数の座標の重心を決定して、次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする請求項２に記載の撮影範囲制御装置。
【請求項４】
前記遠隔会議の参加時に、前記遠隔会議装置から同じグループに属することを示すグループ情報を受信するグループ情報受信手段と、
前記グループ情報受信手段が前記グループ情報を受信した遠隔会議装置に対してのみ前記選択枠情報を送信する選択枠情報送信手段と
を備えたことを特徴とする請求項１乃至３の何れかに記載の撮影範囲制御装置。
【請求項５】
前記指定座標情報を複数受信した場合に、当該複数の指定座標情報が画角に入らない場合に、前記選択枠情報を操作している遠隔会議装置からの操作情報により前記選択枠情報が操作されて、画角に入れる指定座標情報を選択可能であることを特徴とする請求項１乃至４の何れかに記載の撮影範囲制御装置。
【請求項６】
前記撮影範囲制御装置は、各遠隔会議装置を接続するサーバから構成されることを特徴とする請求項１乃至５の何れかに記載の撮影範囲制御装置。
【請求項７】
前記撮影範囲制御装置は、各遠隔会議装置の何れかで構成されることを特徴とする請求項１乃至５の何れかに記載の撮影範囲制御装置。
【請求項８】
遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御方法であって、
前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御ステップと、
前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成ステップと、
操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成ステップと、
前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成ステップと、
前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信ステップと、
次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信ステップと、
前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信ステップで受信した指定座標情報を含む範囲で前記選択枠情報を作成するように制御する選択枠制御ステップと、
前記選択枠制御ステップの制御により作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成ステップと、
当該撮影制御情報作成ステップが作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信ステップと
を備えたことを特徴とする撮影範囲制御方法。
【請求項９】
コンピュータに請求項８に記載の撮影範囲制御方法の各ステップを実行させることを特徴とするコンピュータプログラム。
【請求項１】
遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御装置であって、
前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御手段と、
前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成手段と、
操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成手段と、
前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成手段と、
前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信手段と、
次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信手段と、
前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信手段が受信した指定座標情報を含む範囲で前記選択枠情報を作成するように前記選択枠情報作成手段を制御する選択枠制御手段と、
前記選択枠制御手段の制御により前記選択枠情報作成手段が作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成手段と、
当該撮影制御情報作成手段が作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信手段と
を備えたことを特徴とする撮影範囲制御装置。
【請求項２】
前記指定座標情報受信手段が前記指定座標情報を複数受信した場合には、前記撮影制御情報作成手段は、その複数の座標の重心を次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする請求項１に記載の撮影範囲制御装置。
【請求項３】
前記複数の指定座標情報に重みを付与する重み付与手段を設け、
前記撮影制御情報作成手段は、前記重み付与手段が付与した重みに基づいて、複数の座標の重心を決定して、次に撮影する画角の中心にするように前記撮影制御情報を作成することを特徴とする請求項２に記載の撮影範囲制御装置。
【請求項４】
前記遠隔会議の参加時に、前記遠隔会議装置から同じグループに属することを示すグループ情報を受信するグループ情報受信手段と、
前記グループ情報受信手段が前記グループ情報を受信した遠隔会議装置に対してのみ前記選択枠情報を送信する選択枠情報送信手段と
を備えたことを特徴とする請求項１乃至３の何れかに記載の撮影範囲制御装置。
【請求項５】
前記指定座標情報を複数受信した場合に、当該複数の指定座標情報が画角に入らない場合に、前記選択枠情報を操作している遠隔会議装置からの操作情報により前記選択枠情報が操作されて、画角に入れる指定座標情報を選択可能であることを特徴とする請求項１乃至４の何れかに記載の撮影範囲制御装置。
【請求項６】
前記撮影範囲制御装置は、各遠隔会議装置を接続するサーバから構成されることを特徴とする請求項１乃至５の何れかに記載の撮影範囲制御装置。
【請求項７】
前記撮影範囲制御装置は、各遠隔会議装置の何れかで構成されることを特徴とする請求項１乃至５の何れかに記載の撮影範囲制御装置。
【請求項８】
遠隔会議に参加する会議参加者に見せる画像を撮影する撮影手段と、前記撮影手段の撮影範囲を示す撮影範囲情報に基づいて前記撮影手段の撮影範囲を切り替える切替手段とを備える遠隔会議装置を複数の地点に設置して、各遠隔会議装置が、自身が撮影した画像を、ネットワークを介して、他の遠隔会議装置に送信するとともに、他の遠隔会議装置から送信されてきた画像を表示することによって実施される遠隔会議において、各遠隔会議装置の前記撮影手段の撮影範囲を制御する撮影範囲制御方法であって、
前記撮影手段の撮影可能な全範囲の画像を撮影するように前記撮影手段を制御する撮影制御ステップと、
前記撮影手段が撮影した撮影可能な全範囲の画像を合成して、一枚の静止画像を作成する画像合成ステップと、
操作対象となる遠隔会議装置の前記撮影手段の撮影可能範囲の前記静止画像の中で、前記撮影手段の現在の撮影範囲の画角の現在枠情報を作成する現在枠情報作成ステップと、
前記撮影可能範囲の前記静止画像の中の次に撮影される画角の情報である選択枠情報を作成する選択枠情報作成ステップと、
前記操作対象となる遠隔会議装置自身又は他の遠隔会議装置から前記選択枠情報を操作する操作情報を受信する操作情報受信ステップと、
次に撮影される前記撮影手段の撮影範囲の操作をしている遠隔会議装置以外の他の遠隔会議装置から、前記静止画像の中で次に撮影したい箇所の座標情報である指定座標情報を受信する指定座標情報受信ステップと、
前記操作情報受信手段が受信した操作情報に基づいて前記選択枠情報作成手段が選択枠情報を作成する場合に、前記指定座標情報受信ステップで受信した指定座標情報を含む範囲で前記選択枠情報を作成するように制御する選択枠制御ステップと、
前記選択枠制御ステップの制御により作成した前記選択枠情報の示す画角となるように前記撮影手段を制御する撮影制御情報を作成する撮影制御情報作成ステップと、
当該撮影制御情報作成ステップが作成した撮影制御情報を操作対象となっている遠隔会議装置に送信する送信ステップと
を備えたことを特徴とする撮影範囲制御方法。
【請求項９】
コンピュータに請求項８に記載の撮影範囲制御方法の各ステップを実行させることを特徴とするコンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【公開番号】特開２０１０−８７８５８（Ｐ２０１０−８７８５８Ａ）
【公開日】平成２２年４月１５日（２０１０．４．１５）
【国際特許分類】
【出願番号】特願２００８−２５４９７２（Ｐ２００８−２５４９７２）
【出願日】平成２０年９月３０日（２００８．９．３０）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
【公開日】平成２２年４月１５日（２０１０．４．１５）
【国際特許分類】
【出願日】平成２０年９月３０日（２００８．９．３０）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
[ Back to top ]