会議システム、イベント管理サーバ、および、プログラム
【課題】会議を実施する際に円滑なコミュニケーションを実現すること。
【解決手段】拠点に設置されたビデオ会議装置１２と電子情報ボード１１とを備え、他の拠点に設置された電子情報ボード２１と接続された会議システムであって、ビデオ会議装置１２は、拠点の会議出席者を撮像するカメラ２０３を備え、電子情報ボード１１は、拠点の会議出席者を撮像するカメラ１０３と、カメラ２０３により撮像された映像を受信する映像入力部１０６と、受信した映像、またはカメラ１０３により撮像された映像のいずれかを選択する選択部５０４と、選択された映像を電子情報ボード２１に送信する通信部１０８と、電子情報ボード１１で発生したイベントを検知する検知部５０３と、を備え、選択部５０４は、電子情報ボード１１で発生したイベントが検知された場合に、カメラ１０３により撮像した映像を選択する。
【解決手段】拠点に設置されたビデオ会議装置１２と電子情報ボード１１とを備え、他の拠点に設置された電子情報ボード２１と接続された会議システムであって、ビデオ会議装置１２は、拠点の会議出席者を撮像するカメラ２０３を備え、電子情報ボード１１は、拠点の会議出席者を撮像するカメラ１０３と、カメラ２０３により撮像された映像を受信する映像入力部１０６と、受信した映像、またはカメラ１０３により撮像された映像のいずれかを選択する選択部５０４と、選択された映像を電子情報ボード２１に送信する通信部１０８と、電子情報ボード１１で発生したイベントを検知する検知部５０３と、を備え、選択部５０４は、電子情報ボード１１で発生したイベントが検知された場合に、カメラ１０３により撮像した映像を選択する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ネットワークを介して会議を実施する会議システム、イベント管理サーバ、および、プログラムに関する。
【背景技術】
【０００２】
従来、カメラ、マイク、およびスピーカを備えたビデオ会議装置によって、遠隔地と映像および音声を共有して会議を実施する会議システムが知られている。このようなビデオ会議装置は、カメラ、マイク、およびスピーカが一体となっているため、持ち運びが可能であるという特徴がある。また、この会議システムでは、ビデオ会議装置をデスクに置くことができるため、会議出席者の近傍や会議出席者をはっきりと映すことができる。
【０００３】
一方、液晶やプラズマなどのフラットパネルやプロジェクタを用いた４０インチ〜６０インチ程度のサイズの大型のディスプレイにタッチパネルを搭載した、いわゆる「電子情報ボード」が知られている。そして、近年の電子情報ボードは、ほとんどが遠隔会議機能を搭載している。例えば、プラズマ電子情報ボードを使って映像や音声だけでなく、手書き文字もリアルタイムに共有できるものなどがある。
【０００４】
また、例えば、会議の発話者のいる各拠点の映像を共有して会議を実施する目的で、会議出席者の発話の間を検出すると、モニタへの表示を他拠点の映像に自動的に切り替える電子会議システムが開示されている（例えば、特許文献１参照）。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、電子情報ボードを利用した会議では、会議出席者が電子情報ボードから離れているため、電子情報ボードによって撮像された映像では、会議出席者の顔の判別が難しかったり、誰が発言しているのかわからないという問題があった。一方、ビデオ会議装置を利用した会議では、会議出席者の顔をはっきりと映すことができるが、電子情報ボードの操作者はデスクの反対側にいることが多いため、映すことができないという問題があった。また、上述した特許文献１の電子会議システムを利用した場合でも、会議出席者と電子情報ボードの操作者の両方をはっきりと映すことはできない。
【０００６】
本発明は、上記に鑑みてなされたものであって、会議出席者をはっきり映すことができるとともに、操作者が会議装置を操作している場合には該操作者を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できる会議システム、イベント管理サーバ、および、プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明は、第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置とネットワークを介して接続された会議システムであって、前記第１会議装置は、前記第１拠点の会議出席者を撮像する第１撮像手段を備え、前記第２会議装置は、前記第１拠点の会議出席者を撮像する第２撮像手段と、前記第１撮像手段により撮像された映像を受信する映像入力手段と、前記映像入力手段により受信した映像、または前記第２撮像手段により撮像された映像のいずれかを選択する選択手段と、選択された映像を前記外部会議装置に送信する送信手段と、前記第２会議装置で発生したイベントを検知する検知手段と、を備え、前記選択手段は、前記第２会議装置で発生したイベントが検知された場合に、前記第２撮像手段により撮像した映像を選択することを特徴とする。
【０００８】
また、本発明は、第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置およびイベント管理サーバとネットワークを介して接続された会議システムであって、前記第１会議装置は、前記第１拠点の会議出席者を撮像する第１撮像手段を備え、前記第２会議装置は、前記第１拠点の会議出席者を撮像する第２撮像手段と、前記第１撮像手段により撮像された映像を受信する映像入力手段と、前記第１会議装置および前記第２会議装置において発生したイベントを検知する検知手段と、いずれかの前記会議装置において前記イベントが検知された場合、前記イベントの内容と、前記イベントが発生した前記会議装置を示すイベント発生装置情報と、を含むイベント情報を、前記イベント管理サーバに送信する第１送信手段と、を備え、前記イベント管理サーバは、前記イベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、前記第２会議装置から、前記イベント情報を受信する第１受信手段と、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する第２送信手段と、を備え、前記第２会議装置は、前記イベント管理サーバから、前記決定装置情報を受信する第２受信手段と、前記決定装置情報が示す前記会議装置によって撮像された映像を選択する選択手段と、をさらに備え、前記第１送信手段は、選択された映像を前記外部会議装置に送信することを特徴とする。
【０００９】
また、本発明は、第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続されたイベント管理サーバにおいて、前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、を備えることを特徴とする。
【００１０】
また、本発明は、第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続され、前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段を備えるイベント管理サーバを、前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、として機能させるためのプログラムである。
【発明の効果】
【００１１】
本発明によれば、会議出席者をはっきり映すことができるとともに、操作者が会議装置を操作している場合は該操作者を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できるという効果を奏する。
【図面の簡単な説明】
【００１２】
【図１】図１は、実施の形態１にかかる会議システムの全体構成の説明図である。
【図２】図２は、会議システムの構成を示すブロック図である。
【図３】図３は、会議システムにおいて実施される会議の流れを示すフローチャートである。
【図４】図４は、電子情報ボードのディスプレイに表示される映像の一例を示す図である。
【図５】図５は、実施の形態２にかかる会議システムの全体構成の説明図である。
【図６】図６は、会議システムの構成を示すブロック図である。
【図７】図７は、イベント情報の一例を示す説明図である。
【図８】図８は、イベント条件情報の一例を示す図である。
【図９】図９は、ジェスチャーと動作との対応の一例を示す図である。
【図１０】図１０は、装置情報の一例を示す図である。
【図１１】図１１は、会議システムにおいて実施される会議の流れを示すフローチャートである。
【図１２】図１２は、実施の形態１、２の電子情報ボードのハードウェア構成を示す図である。
【図１３】図１３は、実施の形態１、２のビデオ会議装置のハードウェア構成を示す図である。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照して、会議システム、イベント管理サーバ、および、プログラムの実施の形態を詳細に説明する。
【００１４】
（実施の形態１）
図１は、実施の形態１にかかる会議システムの全体構成の説明図である。図１では、拠点Ａと拠点Ｂとの間で会議を実施する場合を示している。拠点Ａには、電子情報ボード１１とビデオ会議装置１２が設置されており、ビデオ会議装置１２の周りには会議出席者Ｐ２、Ｐ３がおり、電子情報ボード１１の近傍には、電子情報ボード１１の操作者Ｐ１がいる。また、拠点Ｂには、電子情報ボード２１とビデオ会議装置２２が設置されており、同様に、ビデオ会議装置２２の周りには会議出席者Ｐ５、Ｐ６がおり、電子情報ボード２１の近傍には、電子情報ボード２１の操作者Ｐ４がいる。なお、操作者も会議出席者に含まれる。また、電子情報ボードもビデオ会議装置も会議装置の一つとする。また、本実施の形態では、会議を２つの拠点で実施する場合を説明するが、３つ以上の拠点で会議を実施してもよい。
【００１５】
それぞれの拠点において、電子情報ボードとビデオ会議装置とは、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ケーブルやＨＤＭＩ（Ｈｉｇｈ‐Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ケーブルなどの有線ケーブルで接続され、相互に通信を行うことができる。また、ＬＡＮ経由で通信を行うように構成してもよい。そして、電子情報ボード１１と電子情報ボード２１（外部会議装置）とは、電話回線、無線ネットワーク、インターネットなどのネットワーク８０を介して接続されている。
【００１６】
図２は、会議システムの構成を示すブロック図である。以下では、拠点Ａに設置された会議システムとして、電子情報ボード１１およびビデオ会議装置１２について説明するが、拠点Ｂやその他の拠点に設置された電子情報ボードおよびビデオ会議装置についても同様である。
【００１７】
まず、電子情報ボード１１について説明する。電子情報ボード１１は、ネットワーク８０経由で他の拠点（拠点Ｂ）と映像および音声を共有しながら会議を実施する。また、上述したように、電子情報ボード１１は、ビデオ会議装置１２と有線ケーブルで接続されており、ビデオ会議装置１２から映像データおよび音声データを受信して映像を表示し、音声を再生することができる。また、電子情報ボード１１からビデオ会議装置１２に音声データを送信して音声を再生させることもできる。このように、電子情報ボード１１は、ビデオ会議装置１２と相互に連携することにより、どちらかの映像および音声を拠点Ａの映像および音声として、他の拠点と共有するものである。
【００１８】
電子情報ボード１１は、タッチパネルディスプレイ１０１と、スピーカ１０２と、カメラ１０３と、マイク１０４と、制御部１０５と、映像入力部１０６と、音声入出力部１０７と、通信部１０８と、記憶部１０９とを主に備えている。
【００１９】
タッチパネルディスプレイ１０１は、ディスプレイ上に電子情報（映像データ）を表示する。また、タッチパネルディスプレイ１０１は、電子ホワイトボード機能を備えており、操作者からのディスプレイに対する指や付属の電子ペンでの操作を受け付け、その指や電子ペンの動きを検知することでディスプレイ上に文字を手書きすることができる。
【００２０】
スピーカ１０２は、拠点Ａにおいて集音された音声や、他の拠点から受信した音声を再生するものである。カメラ１０３は、拠点Ａの会議出席者、特に、電子情報ボード１１を操作する操作者Ｐ１を撮像するものである。マイク１０４は、拠点Ａの会議出席者、特に、電子情報ボード１１を操作する操作者Ｐ１の音声を集音するものである。
【００２１】
制御部１０５は、電子情報ボード１１の全体を制御するものであり、入力制御部５０１と、出力制御部５０２と、検知部５０３と、選択部５０４と、送受信部５０５とを主に備えている。
【００２２】
入力制御部５０１は、会議出席者を撮像するカメラ１０３を制御するものである。すなわち、入力制御部５０１は、カメラ１０３により撮像された映像をキャプチャする。また、入力制御部５０１は、会議出席者の音声を集音するマイク１０４を制御するものであり、マイク１０４により集音された音声をキャプチャする。
【００２３】
出力制御部５０２は、タッチパネルディスプレイ１０１およびスピーカ１０２を制御するものである。すなわち、出力制御部５０２は、カメラ１０３やカメラ２０３（後述）により撮像された映像や通信部１０８により受信した拠点Ｂの映像をタッチパネルディスプレイ１０１に表示する。また、出力制御部５０２は、マイク１０４やマイク２０４（後述）により集音された音声や受信した拠点Ｂの音声をスピーカ１０２で再生する。
【００２４】
検知部５０３は、電子情報ボード１１において発生したイベントを検知するものである。具体的には、検知部５０３は、電子情報ボード１１のタッチパネルディスプレイ１０１に対する操作を受け付けた場合、操作を受け付けたことにより発生した操作イベントを検知する。また、検知部５０３は、マイク１０４により集音された音声が予め定めた所定の音量以上であった場合に、音声が所定の音量以上であったことによって発生した音量イベントを検知する。また、検知部５０３は、カメラ１０３によって撮像された映像に所定の特徴、例えば会議出席者が所定の動きをした場合に、該動きによって発生した映像イベントを検知する。また、検知部５０３は、ビデオ会議装置１２において発生したイベントを検知する。この場合は、例えば、ビデオ会議装置１２においてイベントが発生した場合、その旨を示す検知情報を受信することで、検知部５０３がビデオ会議装置１２において発生したイベントを検知する。なお、以下の本実施の形態では、検知部５０３により操作イベントを検知した場合について説明する。
【００２５】
選択部５０４は、検知部５０３により電子情報ボード１１におけるイベント、例えば操作イベントが検知された場合、操作イベントが発生した装置である電子情報ボード１１によって撮像された映像および集音された音声を、拠点Ａの映像および音声として選択する。また、選択部５０４は、検知部５０３により電子情報ボード１１においてイベントが検知されていない場合、ビデオ会議装置１２によって撮像された映像および集音された音声を、拠点Ａの映像および音声として選択する。なお、イベントが検知されていない場合に、ビデオ会議装置１２の映像および音声を拠点Ａの映像および音声とすることは、予め設定しておく。
【００２６】
送受信部５０５は、拠点Ｂなどの他の拠点との会議を開始する際に、ビデオ会議装置１２に会議出席者を撮像した映像データおよび会議出席者の音声を集音した音声データを、電子情報ボード１１に送信する旨の出力指示を、ビデオ会議装置１２に送信する。
【００２７】
映像入力部１０６は、ビデオ会議装置１２（電子情報ボード１１以外の会議装置）により撮像された映像データを受信するものである。
【００２８】
音声入出力部１０７は、ビデオ会議装置１２（電子情報ボード１１以外の会議装置）により集音された音声データを受信するものである。また、音声入出力部１０７は、電子情報ボード２１から受信した拠点Ｂの音声データをビデオ会議装置１２のスピーカ２０２（後述）で再生させるため、受信した拠点Ｂの音声データをビデオ会議装置１２に送信する。
【００２９】
通信部１０８は、拠点Ｂとの間で制御信号や映像データおよび音声データを送受信する。具体的には、通信部１０８は、選択部５０４により選択された映像（映像データ）および音声（音声データ）を、拠点Ａの映像および音声として、電子情報ボード２１に送信する。すなわち、本実施の形態では、通信部１０８は、映像入力部１０６により受信した映像および音声入出力部１０７により受信した音声、または電子情報ボード１１のカメラ１０３により撮像された映像およびマイク１０４により集音された音声のいずれかを、拠点Ａの映像および音声として電子情報ボード２１に送信する。また、通信部１０８は、会議の実施を開始する場合に、電子情報ボード２１に会議を開催する旨を示す会議開催通知を送信する。
【００３０】
記憶部１０９は、撮像された映像データや集音された音声データ、受信した映像データや音声データなどを必要に応じて記憶するＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やメモリ等の記憶媒体である。
【００３１】
次に、ビデオ会議装置１２について説明する。ビデオ会議装置１２は、スピーカ、カメラ、およびマイクを備えた持ち運びが可能な一体型の会議装置である。そして、ビデオ会議装置１２は、電子情報ボード１１と有線ケーブルで接続され、電子情報ボード１１経由で他の拠点（拠点Ｂ）と映像および音声を共有しながら会議を実施する。また、ビデオ会議装置１２は、電子情報ボード１１から音声データを受信して、音声を再生することができる。ここでは、ネットワーク８０に接続された電子情報ボード１１を介してビデオ会議装置１２の映像および音声を送信する構成としているが、ビデオ会議装置１２をネットワーク８０に接続し、ネットワーク８０経由で電子情報ボード１１や他の拠点に映像および音声を送信する構成にしてもよい。
【００３２】
ビデオ会議装置１２は、スピーカ２０２と、カメラ２０３と、マイク２０４と、制御部２０５と、映像出力部２０６と、音声入出力部２０７と、記憶部２０９とを主に備えている。
【００３３】
スピーカ２０２は、拠点Ａにおいて集音された音声や、他の拠点から受信した音声を再生するものである。カメラ２０３は、拠点Ａの会議出席者、特に、ビデオ会議装置１２の周りにいる会議出席者Ｐ２、Ｐ３を撮像するものである。マイク２０４は、拠点Ａの会議出席者、特に、ビデオ会議装置１２の周りにいる会議出席者Ｐ２、Ｐ３の音声を集音するものである。
【００３４】
制御部２０５は、ビデオ会議装置１２の全体を制御するものであり、入力制御部５５１と、出力制御部５５２と、送受信部５５３とを主に備えている。
【００３５】
入力制御部５５１は、会議出席者を撮像するカメラ２０３を制御するものであり、電子情報ボード１１から出力指示を受信した場合にカメラ２０３により撮像を開始し、カメラ２０３により撮像された映像をキャプチャする。また、入力制御部５５１は、会議出席者の音声を集音するマイク２０４を制御するものであり、電子情報ボード１１から出力指示を受信した場合にマイク２０４により音声の集音を開始し、マイク２０４により集音された音声をキャプチャする。
【００３６】
出力制御部５５２は、スピーカ２０２を制御するものであり、マイク１０４やマイク２０４により集音された音声や受信した拠点Ｂの音声をスピーカ２０２で再生する。
【００３７】
送受信部５５３は、拠点Ｂなどの他の拠点との会議を開始する際に、会議出席者を撮像し、会議出席者の音声を集音した、映像および音声を、電子情報ボード１１に送信する旨の出力指示を、電子情報ボード１１から受信する。
【００３８】
映像出力部２０６は、カメラ２０３により撮像された映像を、電子情報ボード１１に送信するものである。
【００３９】
音声入出力部２０７は、マイク２０４により集音された音声を電子情報ボード１１に送信したり、受信した拠点Ｂの音声やマイク１０４により集音された音声を電子情報ボード１１から受信するものである。
【００４０】
記憶部２０９は、撮像された映像データや集音された音声データ、受信した映像データや音声データなどを必要に応じて記憶するＨＤＤやメモリ等の記憶媒体である。
【００４１】
このような電子情報ボード１１およびビデオ会議装置１２を備えた会議システムにおいて会議を開催する場合の流れの概要について説明する。まず、電子情報ボード１１を操作して、会議を実施する相手の拠点（拠点Ｂ）の電子情報ボード２１を呼び出し、映像および音声の共有を開始する。例えば、電子情報ボード１１を操作し、電子情報ボード２１のＩＰアドレスを入力して、通信部１０８により電子情報ボード２１に会議開催する旨を示す会議開催通知を送信する。
【００４２】
そして、電子情報ボード１１では、カメラ１０３およびマイク１０４により映像および音声のキャプチャを開始するとともに、送受信部５０５によりビデオ会議装置１２に映像および音声の出力指示を送信する。送受信部５５３により出力指示を受信したビデオ会議装置１２は、カメラ２０３およびマイク２０４により映像および音声をキャプチャし、電子情報ボード１１に送信する。
【００４３】
ビデオ会議装置１２から映像および音声を受信した電子情報ボード１１では、選択部５０４により電子情報ボード１１の映像および音声とビデオ会議装置１２の映像および音声のうちいずれかの映像および音声を、拠点Ａの映像・音声として選択する。そして、通信部１０８は、選択された映像および音声を電子情報ボード２１に送信する。
【００４４】
拠点Ａの映像および音声を受信した電子情報ボード２１は映像を電子情報ボード２１のディスプレイに表示し、音声を電子情報ボード２１のスピーカかビデオ会議装置２２のスピーカにより再生する。同様に、拠点Ｂの映像および音声を拠点Ａで表示および再生することで、会議を実施する。
【００４５】
次に、電子情報ボードとビデオ会議装置とを備えた会議システムにおいて実施される会議の流れを詳細に説明する。図３は、会議システムにおいて実施される会議の流れを示すフローチャートである。図３では、例として、電子情報ボード１１が会議を開催し、電子情報ボード２１に映像データおよび音声データを送信する場合である。
【００４６】
まず、会議を開催する場合、通信部１０８は、電子情報ボード２１に会議開催通知を送信する（ステップＳ１０）。会議の開催方法は、既存の方法を用いる。例えば、ＳＩＰ（Ｓｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌ）やＸＭＰＰ（ｅＸｔｅｎｓｉｂｌｅ Ｍｅｓｓａｇｉｎｇ ａｎｄ Ｐｒｅｓｅｎｃｅ Ｐｒｏｔｏｃｏｌ）を用いて、会議を実施する。
【００４７】
会議が開始されると、入力制御部５０１は、カメラ１０３およびマイク１０４により、映像および音声のキャプチャを開始する（ステップＳ１１）。また、送受信部５０５は、ビデオ会議装置１２に映像および音声の出力指示を送信する（ステップＳ１２）。送受信部５５３により電子情報ボード１１から映像および音声の出力指示を受信したビデオ会議装置１２は、入力制御部５５１がカメラ２０３およびマイク２０４により映像および音声のキャプチャを開始し、送受信部５５３が映像データおよび音声データを電子情報ボード１１に送信する。
【００４８】
送受信部５０５は、ビデオ会議装置１２から映像データおよび音声データを受信すると（ステップＳ１３）、選択部５０４は、ビデオ会議装置１２から受信した映像および音声を拠点Ａの映像および音声とし、通信部１０８は、ビデオ会議装置１２から受信した映像データおよび音声データを、他の拠点である拠点Ｂの電子情報ボード２１に送信する（ステップＳ１４）。そして、電子情報ボード２１は、映像データおよび音声データを受信すると、拠点Ｂの会議システムで映像を表示し、音声を再生する。
【００４９】
ここで、拠点Ａの会議出席者である操作者Ｐ１が電子情報ボード１１を操作すると、操作イベントが発生し、検知部５０３は、電子情報ボード１１の操作イベントを検知する。選択部５０４は、電子情報ボード１１の操作イベントが検知されたか否かを判断する（ステップＳ１５）。操作イベントが検知されていない場合（ステップＳ１５：Ｎｏ）、ステップＳ１３に戻って処理を繰り返す。
【００５０】
一方、操作イベントが検知された場合（ステップＳ１５：Ｙｅｓ）、選択部５０４は、電子情報ボード１１の映像および音声を、拠点Ａの映像および音声として選択する（ステップＳ１６）。通信部１０８は、選択された映像および音声、すなわち電子情報ボード１１で撮像され集音された映像データおよび音声データを、他の拠点である拠点Ｂの電子情報ボード２１に送信する（ステップＳ１７）。
【００５１】
次に、選択部５０４は、電子情報ボード１１の操作イベントが検知されたか否かを判断する（ステップＳ１８）。操作イベントが検知された場合（ステップＳ１８：Ｙｅｓ）、ステップＳ１７に戻って処理を繰り返す。すなわち、電子情報ボード１１の操作イベントの発生が継続する間は、電子情報ボード１１の映像および音声を拠点Ｂの電子情報ボード２１に送信する。
【００５２】
一方、操作イベントが検知されていない場合（ステップＳ１８：Ｎｏ）、選択部５０４は、操作イベントが検知されていない状態で所定時間が経過したか否かを判断する（ステップＳ１９）。所定時間が経過していない場合（ステップＳ１９：Ｎｏ）、ステップＳ１７に戻って処理を繰り返す。
【００５３】
一方、所定時間が経過した場合（ステップＳ１９：Ｙｅｓ）、選択部５０４は、ビデオ会議装置１２の映像および音声を、拠点Ａの映像および音声として選択し（ステップＳ２０）、ステップＳ１３に戻って処理を繰り返す。
【００５４】
ここでは、電子情報ボード１１において操作イベントが発生しない場合、ビデオ会議装置１２の映像および音声を優先して拠点Ｂに送信しているが、逆に電子情報ボード１１の映像および音声を優先して拠点Ｂに送信し、ビデオ会議装置１２内でなんらかのイベントが発生した場合にビデオ会議装置１２の映像および音声を拠点Ｂに送信する構成にしてもよい。例えば、ビデオ会議装置１２でのイベントとして、操作イベントだけでなく、会議出席者の音声の音量が所定の音量以上であった場合に発生させるよう構成すれば、会議中の発言者にフォーカスすることができる。
【００５５】
次に、各拠点における電子情報ボードのディスプレイに表示される映像について説明する。図４は、電子情報ボードのディスプレイに表示される映像の一例を示す図である。
【００５６】
図４に示すように、拠点Ａの操作者Ｐ１が電子情報ボード１１を操作すると、電子情報ボード１１で撮像された映像が拠点Ａの映像として選択され、拠点Ｂの電子情報ボード２１に表示される。このとき、相手の拠点（拠点Ｂ）に表示されている映像を確認するために、拠点Ａの映像を電子情報ボード１１に表示してもよい。
【００５７】
また、拠点Ｂでは電子情報ボード２１が操作されていないため、ビデオ会議装置２２で撮像された映像が拠点Ｂの映像として選択される。従って、この場合は、電子情報ボード１１に表示される映像には、電子情報ボード２１の近傍にいる操作者Ｐ４（会議出席者）は映っていない。
【００５８】
このように、本実施の形態の会議システムは、拠点Ａと拠点Ｂとの間で会議を実施する際に、電子情報ボード１１により撮像された映像および集音された音声、またはビデオ会議装置１２により撮像された映像および集音された音声のいずれかを、拠点Ａの映像および音声として選択し、相手先の拠点Ｂに送信することができる。従って、通常は、ビデオ会議装置１２の映像および音声を拠点Ｂに送信していても、電子情報ボード１１において操作イベント等のイベントが発生した場合には、電子情報ボード１１の映像および音声を拠点Ｂに送信する。このため、ビデオ会議装置１２の近傍にいる会議出席者Ｐ２、Ｐ３をはっきり映すことができるとともに、操作者Ｐ１が電子情報ボード１１を操作している場合には操作者Ｐ１を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できる。
【００５９】
また、電子情報ボード１１において操作を受け付けた場合にイベントの発生を検知し、電子情報ボード１１の映像および音声を拠点Ａの映像および音声とすることで、電子情報ボード１１の操作者に映像や音声をフォーカスすることができる。また、電子情報ボード１１またはビデオ会議装置１２が集音した音声の音量が所定の音量以上だった場合にイベントの発生を検知し、その音声を集音したいずれかの装置（会議装置）の映像および音声を拠点Ａの映像および音声とすることで、会議での発言者に映像や音声をフォーカスすることができる。また、電子情報ボード１１またはビデオ会議装置１２により撮像された映像に所定の特徴、例えば会議出席者が所定の動きをした場合にイベントの発生を検知し、その映像を撮像したいずれかの装置（会議装置）の映像および音声を拠点Ａの映像および音声とすることで、会議での発表者などの動きの多い人に映像や音声をフォーカスすることができる。
【００６０】
また、本実施の形態のビデオ会議装置１２（２２）は、カメラ、マイク、およびスピーカを備えた一体型の装置であるため、容易に持ち運びが可能であるとともに、複数のビデオ会議装置を省スペースで設置することができる。
【００６１】
（実施の形態２）
実施の形態１の会議システムでは、拠点内に電子情報ボードとビデオ会議装置を備え、電子情報ボードにおいて拠点の映像および音声を選択し、他の拠点に送信する構成となっていた。これに対し、本実施の形態の会議システムでは、拠点内に電子情報ボードとビデオ会議装置を備え、さらに、該電子情報ボードとネットワークで接続されたイベント管理サーバおよび映像・音声配信サーバを備えた構成となっている。イベント管理サーバは、拠点の映像および音声を決定し、映像・音声配信サーバは、映像および音声を他の拠点に配信するものである。
【００６２】
図５は、実施の形態２にかかる会議システムの全体構成の説明図である。図５では、拠点Ｃ、拠点Ｄ、および拠点Ｅの間で会議を実施する場合を示している。拠点Ｃには、電子情報ボード３１とビデオ会議装置（テレビ会議装置）３２が設置されており、ビデオ会議装置３２の周りには会議出席者Ｐ２、Ｐ３がおり、電子情報ボード３１の近傍には、電子情報ボード３１の操作者Ｐ１がいる。また、拠点Ｄには、電子情報ボード４１とビデオ会議装置４２が設置されており、同様に、ビデオ会議装置４２の周りには会議出席者Ｐ５、Ｐ６がおり、電子情報ボード４１の近傍には、電子情報ボード４１の操作者Ｐ４がいる。また、拠点Ｅには、電子情報ボード５１とビデオ会議装置５２が設置されており、同様に、ビデオ会議装置５２の周りには会議出席者Ｐ８、Ｐ９がおり、電子情報ボード５１の近傍には、電子情報ボード５１の操作者Ｐ７がいる。なお、操作者も会議出席者に含まれる。また、電子情報ボードもビデオ会議装置も会議装置の一つとする。また、本実施の形態では、会議を３つの拠点で実施する場合を説明するが、２つの拠点もしくは４つ以上の拠点で会議を実施してもよい。
【００６３】
それぞれの拠点において、電子情報ボードとビデオ会議装置とは、実施の形態１と同様に有線ケーブルで接続され、相互に通信を行うことができる。また、ＬＡＮ経由で通信を行うように構成してもよい。そして、各拠点の電子情報ボード３１、４１、５１と、イベント管理サーバ６０と、映像・音声配信サーバ７０とは、ネットワーク８０を介して接続されている。
【００６４】
イベント管理サーバ６０は、どの会議装置（電子情報ボードまたはビデオ会議装置）の映像および音声を、拠点の映像および音声とするかを決定するサーバである。また、映像・音声配信サーバ７０は、多拠点（拠点Ｄ、Ｅ）に映像および音声を配信するサーバである。ここで、多拠点間で会議を実施する場合に、電子情報ボードとビデオ会議装置はいずれか一方の映像データおよび音声データを他の全ての拠点に配信する必要がある。しかし、電子情報ボードかビデオ会議装置が全ての拠点に映像データおよび音声データを配信する構成にすると端末の負荷が大きくなってしまうため、実施の形態２では映像・音声配信サーバ７０を利用している。
【００６５】
図６は、会議システムの構成を示すブロック図である。以下では、拠点Ｃに設置された電子情報ボード３１およびビデオ会議装置３２について説明するが、拠点Ｄ、Ｅやその他の拠点に設置された電子情報ボードおよびビデオ会議装置についても同様である。なお、ビデオ会議装置の機能および構成は、実施の形態１と同様である。
【００６６】
まず、電子情報ボード３１について説明する。電子情報ボード３１は、ネットワーク８０経由で他の拠点（拠点Ｄ、Ｅ）と映像および音声を共有しながら会議を実施する。また、上述したように、電子情報ボード３１は、ビデオ会議装置３２と有線ケーブルで接続されており、ビデオ会議装置３２から映像データおよび音声データを受信して映像を表示し、音声を再生することができる。また、電子情報ボード３１からビデオ会議装置３２に音声データを送信して音声を再生させることもできる。このように、電子情報ボード３１は、ビデオ会議装置３２と相互に連携することにより、どちらかの映像および音声を拠点Ｃの映像および音声として、他の拠点と共有するものである。
【００６７】
電子情報ボード３１は、タッチパネルディスプレイ１０１と、スピーカ１０２と、カメラ１０３と、マイク１０４と、制御部３０５と、映像入力部１０６と、音声入出力部１０７と、通信部３０８と、記憶部１０９とを主に備えている。ここで、タッチパネルディスプレイ１０１と、スピーカ１０２と、カメラ１０３と、マイク１０４と、映像入力部１０６と、音声入出力部１０７と、記憶部１０９の構成および機能は実施の形態１と同様である。
【００６８】
通信部３０８は、イベント管理サーバ６０や映像・音声配信サーバ７０、各拠点との間で制御信号や映像データおよび音声データを送受信する。具体的には、通信部３０８は、いずれかの会議装置（電子情報ボード３１またはビデオ会議装置３２）においてイベントが検知された場合、イベントの内容およびイベントが発生した会議装置を示すイベント発生装置情報を含むイベント情報を、イベント管理サーバ６０に送信する。
【００６９】
ここで、通信部３０８が送信するイベント情報の詳細について説明する。図７は、イベント情報の一例を示す説明図である。図７に示すように、イベント情報は、イベントのＩＤ（＜ｅｖｅｎｔ ｉｄ＞）、イベントの名前（＜ｎａｍｅ＞）、イベントの発生時間（＜ｔｉｍｅ＞）、イベントの内容等を示すイベントに関連する各種パラメータ（＜ｐａｒａｍｓ＞）、イベントが発生した会議装置を示すイベント発生装置情報（＜ｄｅｖｉｃｅ＞）等が記述されている。図７の例では、電子情報ボード３１において“ｍｏｕｓｅ‐ｃｌｉｃｋ”という操作イベントが発生したことがわかる。
【００７０】
また、通信部３０８は、イベント管理サーバ６０から、拠点の映像として決定された映像を撮像し、かつ拠点の音声として決定された音声を集音した会議装置を示す決定装置情報を受信する。
【００７１】
また、通信部３０８は、映像入力部１０６により受信した映像および音声入出力部１０７により受信した音声、または電子情報ボード３１のカメラ１０３により撮像された映像およびマイク１０４により集音された音声のいずれかを、決定装置情報に基づいて、拠点Ａの映像および音声として映像・音声配信サーバ７０に送信する。また、通信部３０８は、会議の実施を開始する場合に、電子情報ボード４１、５１に会議開催する旨を示す会議開催通知を送信する。
【００７２】
制御部３０５は、電子情報ボード３１の全体を制御するものであり、入力制御部５０１と、出力制御部５０２と、検知部５０３と、選択部５１４と、送受信部５０５とを主に備えている。ここで、入力制御部５０１と、出力制御部５０２と、検知部５０３と、送受信部５０５の構成および機能は実施の形態１と同様である。
【００７３】
選択部５１４は、イベント管理サーバ６０から受信した決定装置情報に基づいて、拠点の映像および音声とする映像および音声を選択する。すなわち、選択部５１４は、決定装置情報を参照して、拠点の映像および音声とする会議装置が変更されたか否かを判断し、変更されていない場合は、それまでと同様の会議装置の映像および音声を拠点の映像および音声として選択する。一方、変更されていた場合は、選択部５１４は、決定装置情報が示す会議装置の映像および音声を拠点の映像および音声として選択する。例えば、選択部５１４は、イベントが発生した会議装置を示す決定装置情報を受信した場合、該イベントが発生した会議装置によって撮像された映像および集音された音声を、拠点の映像および音声として選択する。
【００７４】
次に、イベント管理サーバ６０について説明する。イベント管理サーバ６０は、イベント処理部６１と、通信部６２と、記憶部６５とから主に構成されている。
【００７５】
通信部６２は、電子情報ボード３１またはビデオ会議装置３２において発生したイベントの内容、および当該イベントが発生した会議装置を示すイベント発生装置情報を含むイベント情報を受信する。また、通信部６２は、イベント処理部６１により拠点の映像として決定された映像を撮像し、かつ拠点の音声として決定された音声を集音した会議装置を示す決定装置情報を、拠点Ｃの電子情報ボード３１や他の拠点の電子情報ボード４１、５１に送信する。
【００７６】
記憶部６５は、拠点の映像および音声を決定するに必要な情報を備えたデータベースを保持している。まず、記憶部６５は、イベントに固有のイベント識別情報と、イベントの内容の条件を示すイベント条件と、会議装置において発生したイベントの優先順位とを対応付けたイベント条件情報を記憶している。これは、イベント管理サーバ６０がどの会議装置の映像および音声を拠点の映像および音声とするか決定するための情報である。
【００７７】
図８は、イベント条件情報の一例を示す図である。図８に示すように、イベント条件情報には、イベント識別情報としてのイベント名と、イベント条件（イベント内容の条件）と、イベントの優先順位とが対応付けられている。
【００７８】
図８では、拠点の映像および音声として決定される場合のイベント条件情報を記述している。すなわち、“ｍｏｕｓｅ‐ｃｌｉｃｋ”、“ｍｏｕｓｅ‐ｍｏｖｅ”、“ｍｏｕｓｅ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｕｐ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”といった基本的なイベントに加えて、“ｓｏｕｎｄ”、“ｖｉｄｅｏ”といった応用イベントも規定している。これは、“ｍｏｕｓｅ‐ｃｌｉｃｋ”、“ｍｏｕｓｅ‐ｍｏｖｅ”、“ｍｏｕｓｅ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｕｐ” 、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”といった基本的なイベントが電子情報ボード３１において発生した場合に、これらのイベントを発生させた電子情報ボード３１の映像および音声を、拠点の映像および音声として決定するものである。
【００７９】
また、“ｓｏｕｎｄ”とは、マイク１０４により集音された音声の音量が予め定めた所定の音量以上であった場合（イベント条件の「音量大」）に、イベントの発生として検知するように電子情報ボード３１を構成する。そして、該イベントを発生させた電子情報ボード３１の映像および音声を、拠点の映像および音声として決定する。
【００８０】
また、“ｖｉｄｅｏ”とは、カメラ１０３により撮像された映像に所定の特徴、例えば会議出席者が検出され、その会議出席者に所定の動きがあった場合（イベント条件の「人検出・動きあり」）に、イベントの発生として検知するように電子情報ボード３１を構成する。そして、該イベントを発生させた電子情報ボード３１の映像および音声を、拠点の映像および音声として決定する。なお、これらは、既存の音声認識技術、人物認識技術を用いて実現することができる。
【００８１】
このように、電子情報ボード３１に単純なイベント（基本的なイベント）だけでなく、複雑なイベントの発生を検知できるようにしておくことにより、適切なタイミングで電子情報ボード３１の映像および音声を選択して送信することが可能となる。なお、ここに記載していないイベントの発生が検知された場合には、電子情報ボード３１の映像および音声が拠点の映像および音声になることはない。
【００８２】
また、これらイベントがほぼ同時に発生する可能性があるので、図８に示すように、イベントにはあらかじめ優先順位を設定しておく。ここでは、“ｍｏｕｓｅ‐ｃｌｉｃｋ”が一番優先されるイベントとなっている。
【００８３】
また、電子情報ボード３１では、上記基本的なイベント（基本イベント）の他に、例えば電子情報ボード３１に搭載されるアプリケーションの動作に応じた固有のイベントを生成する。例えば、電子情報ボード３１にはホワイトボード等の専用アプリケーションが搭載されているが、このホワイトボードで新規ページの作成や、ページの切り替えを行うことができる。ここで、新規ページの作成は、ユーザーによる話題の転換が行われることが強く予想される。このため、これらのイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８４】
また一方、電子情報ボード３１には専用の電子ペンを使って書き込みを行うことができるが、この電子ペンにはボタンが備えられている。電子ペンのボタンを押すと、電子情報ボード３１はボタンの押下を検知し、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”イベントにマッピングする。ここで、電子情報ボード３１内のアプリケーションは“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”イベントを検知すると、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”イベントを検知するまで、電子ペンのモードを書き込みモードから消しゴムモードに切り替える。消しゴムモードに切り替えたということは、ユーザーにより書き込みの修正が行われることが強く予想される。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８５】
さらに、上記基本イベントを組み合わせて固有のイベントを生成することもできる。例えば、“ｍｏｕｓｅ‐ｍｏｖｅ”イベントからマウスカーソルの動きを検知して、ジェスチャーを認識する。ジェスチャーには、“Ｚｏｏｍ”、“Ｐａｎ”、“Ｒｏｔａｔｅ”、“Ｓｗｉｐｅ”などの種類がある。電子情報ボード３１内のアプリケーションは、これらのジェスチャーそれぞれに対応した動作を行う。
【００８６】
図９は、ジェスチャーと動作との対応の一例を示す図である。図９では、“Ｚｏｏｍ”、“Ｐａｎ”、“Ｓｗｉｐｅ”に対して、それぞれ“画面拡大”、“画面スクロール”、“ページ切替”が対応づけられる例が示されている。なお、記号“−”は、“Ｒｏｔａｔｅ”に対して動作が割り当てられないことを表している。
【００８７】
例えば、“Ｓｗｉｐｅ”が認識されると、電子情報ボード３１内のアプリケーションはページの切替等を行う。ページの切替は、ユーザーによる話題の転換が行われることが強く予想される。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８８】
また、電子情報ボード３１には、例えばノートＰＣを接続し、その画面を表示することができる。ノートＰＣを接続されると、ユーザーがプレゼンテーションを開始することが強く予想される。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８９】
また、電子情報ボード３１に赤字で手書きを開始したときにイベントを発生させ、これを検知することで画面を切り替えることもできる。赤字はユーザーが強調したい場合に入力されることが多い。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００９０】
このように、電子情報ボード３１は様々な固有イベントを生成するため、これらを用いることで効果的な画面切り替えを実現する。なお、どの基本イベントや応用イベントにより画面の切替を行うか、および、どのタイミングで画面の切替を行うかは、例えばイベント管理サーバ６０が決定する。
【００９１】
また、記憶部６５は、複数の会議装置（電子情報ボードおよびビデオ会議装置）に固有の装置識別情報と、撮像された映像および集音された音声が拠点の映像および音声として決定される会議装置の優先順位とが対応付けられた装置情報を記憶している。図１０は、装置情報の一例を示す図である。図１０に示すように、装置情報は、装置識別情報としての装置名（「電子情報ボード３１」「ビデオ会議装置３２」）、タイプ（「Ｉｎｔｅｒａｃｔｉｖｅ ｗｈｉｔｅｂｏａｒｄ」「ｔｅｌｅｃｏｎｆｅｒｅｎｃｉｎｇ ｄｅｖｉｃｅ」）、ＩＰアドレス（「１９２．１６８．１１．１１」「１９２．１６８．１１．１２」）、ポート番号（「１１０００」「１１００１」）と、いずれの拠点に設置されているかを示す拠点（「拠点Ｃ」「拠点Ｄ」）と、拠点の映像および音声としての採用の有無（○または×）と、各拠点内の会議装置の優先順位とが対応付けられている。
【００９２】
イベント管理サーバ６０は、会議装置のイベント情報を受信した場合に、この装置情報を参照して、当該会議装置が現在拠点の映像および音声として採用されているか否かを判断する。また、イベント管理サーバ６０は、イベント情報の受信後、予め定めた所定時間が経過しても新規のイベント情報が当該会議装置から送信されなかった場合に、この装置情報を参照して、他の会議装置の映像および音声を拠点の映像および音声として決定するかどうかを判断する。例えば、拠点Ｃでは電子情報ボード３１の映像および音声を拠点Ｃの映像および音声として他の拠点（拠点Ｄ、Ｅ）に配信中であるが、イベント管理サーバ６０は、電子情報ボード３１からのイベント情報の受信後、所定時間が経過した場合、電子情報ボード３１より優先順位の高いビデオ会議装置３２の映像および音声を拠点Ｃの映像および音声として決定し、ビデオ会議装置３２の映像および音声を送信するように指示を出す。
【００９３】
イベント処理部６１は、どの会議装置の映像および音声を拠点の映像および音声とするかを、記憶部６５に記憶されたイベント条件情報および装置情報を参照して決定するものである。具体的には、電子情報ボード３１から受信したイベント情報におけるイベントの内容が、記憶部６５に記憶されているイベント条件を満たす場合、イベント情報におけるイベント発生装置情報が示す会議装置によって撮像された映像および集音された音声を、拠点Ｃの映像および音声として決定する。
【００９４】
また、イベント処理部６１は、イベント情報の受信後に予め定めた所定時間が経過しても新規のイベント情報を受信しなかった場合、記憶部６５に記憶されている装置情報における会議装置の優先順位の高い会議装置によって撮像された映像および音声を、拠点Ｃの映像および音声として決定する。また、イベント処理部６１は、複数のイベント情報をほぼ同時に受信した場合（同時または連続して受信した場合）、記憶部６５に記憶されたイベント条件情報におけるイベントの優先順位の高いイベントが発生した会議装置によって撮像された映像および音声を、拠点Ｃの映像および音声として決定する。
【００９５】
また、イベント処理部６１は、受信したイベント情報により、拠点の映像および音声を決定した場合、拠点の映像として決定した映像を撮像し、かつ拠点の音声として決定した音声を集音した会議装置を示す決定装置情報を、通信部６２を介して拠点Ｃの電子情報ボード３１や他の拠点の電子情報ボード４１、５１に送信させる。
【００９６】
また、このようにイベント管理サーバ６０がイベントを一括して管理および処理することで、他の拠点（映像および音声の送信先の拠点）の会議装置にイベントが発生したことによる動作を変更させるよう構成することができる。つまり、例えば、電子情報ボード３１において操作イベントが発生した場合に、電子情報ボード３１の映像および音声が他の拠点に配信されるが、それを受信した他の拠点の電子情報ボードは映像をハイライトして会議出席者に電子情報ボード３１が操作されていることを知らせることができる。
【００９７】
次に、映像・音声配信サーバ７０について説明する。映像・音声配信サーバ７０は、通信部７１と、映像配信部７２と、音声配信部７３と、記憶部７５とから主に構成されている。
【００９８】
通信部７１は、各拠点の電子情報ボード３１、４１、５１から映像および音声を受信するものである。
【００９９】
記憶部７５は、装置情報を記憶するものである。映像・音声配信サーバ７０は映像および音声を受信したときに他の拠点の会議装置（電子情報ボード）に該映像および音声を配信するためにこの情報を利用する。装置情報の詳細は、イベント管理サーバ６０に記憶されている装置情報と同様である（図１０参照）。
【０１００】
映像配信部７２は、通信部７１により受信した映像を、記憶部７５に記憶された装置情報を参照して、他の全ての拠点（映像を受信した電子情報ボードが設置された拠点以外の拠点）の電子情報ボードに配信するものである。音声配信部７３は、通信部７１により受信した音声を、記憶部７５に記憶された装置情報を参照して、他の全ての拠点（音声を受信した電子情報ボードが設置された拠点以外の拠点）の電子情報ボードに配信するものである。例えば、通信部７１により電子情報ボード３１から映像および音声を受信した場合には、拠点Ｄと拠点Ｅの電子情報ボード（電子情報ボード４１、電子情報ボード５１）に映像および音声を配信する。
【０１０１】
なお、映像配信部７２および音声配信部７３は、受信した映像や音声をそのまま配信してもよいし、回線のスペックや状態に応じて圧縮・暗号化して配信してもよい。また、ここでは映像および音声の配信を１つの映像・音声配信サーバ７０で実現しているが、別々のサーバでそれぞれ実現してもよい。また、装置情報は、イベント管理サーバ６０のものを参照する構成としてもよい。
【０１０２】
次に、電子情報ボードとビデオ会議装置とイベント管理サーバと映像・音声配信サーバとを備えた会議システムにおいて実施される会議の流れを詳細に説明する。図１１は、会議システムにおいて実施される会議の流れを示すフローチャートである。図１１では、例として、拠点Ｃの電子情報ボード３１から拠点Ｄの電子情報ボード４１および拠点Ｅの電子情報ボード５１に映像データおよび音声データを送信する場合である。
【０１０３】
拠点Ｃの会議装置においてイベントの発生が検知された場合、電子情報ボード３１の通信部３０８は、イベント情報をイベント管理サーバ６０に送信する（ステップＳ３０）。イベント管理サーバ６０の通信部６２は、イベント情報を受信する（ステップＳ３１）。
【０１０４】
そして、イベント処理部６１は、イベント条件情報および装置情報を参照して、電子情報ボード３１またはビデオ会議装置３２のいずれかの映像および音声から、拠点Ｃの映像および音声を決定する（ステップＳ３２）。そして、通信部６２は、イベント処理部６１により拠点Ｃの映像および音声が決定された場合、決定された映像および音声を撮像および集音した会議装置を示す決定装置情報を電子情報ボード３１に送信する（ステップＳ３３）。
【０１０５】
電子情報ボード３１の通信部３０８は、イベント管理サーバ６０から決定装置情報を受信する（ステップＳ３４）。選択部５１４は、決定装置情報を参照して、拠点の映像および音声とする会議装置が変更されたか否かを判断し（ステップＳ３５）、変更されていない場合（ステップＳ３５：Ｎｏ）は、拠点の映像および音声の選択を変更せず、ステップＳ３７の処理に進む。一方、変更されている場合（ステップＳ３５：Ｙｅｓ）、選択部５１４は、決定装置情報が示す会議装置の映像および音声を拠点の映像および音声として選択する（ステップＳ３６）。そして、通信部３０８は、選択された映像および音声を映像・音声配信サーバ７０に送信する（ステップＳ３７）。
【０１０６】
イベント管理サーバ６０の処理に戻って、ステップＳ３３で決定装置情報を送信した後、イベント処理部６１は、決定装置情報を参照して、拠点の映像および音声とする会議装置が変更されたか否かを判断し（ステップＳ３８）、変更されていない場合（ステップＳ３８：Ｎｏ）は、ステップＳ４０の処理に進む。一方、変更されている場合（ステップＳ３８：Ｙｅｓ）、通信部６２は、他の拠点の電子情報ボードに決定装置情報を送信する（ステップＳ３９）。
【０１０７】
そして、イベント処理部６１は、イベント経過時間を監視し（ステップＳ４０）、新規のイベント情報を受信したか否かを判断する（ステップＳ４１）。これは、例えば電子情報ボード３１が操作されなくなりイベント情報が送信されなくなった場合に映像および音声の配信をビデオ会議装置３２に戻すためである。新規のイベント情報を受信した場合（ステップ４１：Ｙｅｓ）、イベント経過時間の監視を終了し（ステップＳ４２）、処理を終了する。すなわち、ステップＳ３１からの処理を繰り返す。
【０１０８】
一方、新規のイベント情報を受信していない場合（ステップ４１：Ｎｏ）、ステップＳ３１におけるイベント情報の受信後、予め定めた所定時間が経過したか否かを判断し（ステップＳ４３）、所定時間が経過していない場合（ステップＳ４３：Ｎｏ）、ステップＳ４０に戻って処理を繰り返す。
【０１０９】
一方、所定時間が経過した場合（ステップＳ４３：Ｙｅｓ）、装置情報における会議装置の優先順位の高い会議装置によって撮像された映像および音声を、拠点Ｃの映像および音声として決定し、決定装置情報を電子情報ボード３１に送信し（ステップＳ４４）、ステップＳ３４の処理を行う。
【０１１０】
映像・音声配信サーバ７０において、ステップＳ３７において電子情報ボード３１から映像および音声が送信された場合、通信部７１は、映像および音声を受信する（ステップＳ４５）。そして、映像配信部７２および音声配信部７３は、受信した映像および音声それぞれを他の拠点の電子情報ボード４１、５１に送信する（ステップＳ４６）。
【０１１１】
他の拠点の電子情報ボード４１、５１は、ステップＳ３９においてイベント管理サーバ６０から決定装置情報が送信された場合、決定装置情報を受信する（ステップＳ４７）。そして、通信部が映像および音声を受信し（ステップＳ４８）、出力制御部が映像をディスプレイに表示し、その表示の際に映像のフレームをハイライトし（ステップＳ４９）、音声をスピーカから再生する（ステップＳ５０）。なお、音声は電子情報ボードとビデオ会議装置のどちらで再生する構成としてもよい。
【０１１２】
本実施の形態では、映像・音声配信サーバ７０に送信する映像および音声は電子情報ボード３１が、電子情報ボード３１とビデオ会議装置３２どちらか一方の映像データおよび音声データを選択し、映像・音声配信サーバ７０に送信するよう構成されているが、逆にビデオ会議装置３２が送信するように構成してもよい。
【０１１３】
また、本実施の形態では電子情報ボード３１が電子情報ボード３１とビデオ会議装置３２の両方のイベント情報をイベント管理サーバ６０に送信する構成となっている。しかし、ビデオ会議装置３２もネットワーク８０に接続してそれぞれの会議装置がイベント情報をイベント管理サーバ６０に送信するように構成してもよい。また、ビデオ会議装置３２もネットワーク８０に接続し、イベント管理サーバ６０から決定装置情報を受けたいずれかの会議装置が映像および音声を送信するよう構成してもよい。
【０１１４】
このように、本実施の形態の会議システムは、拠点Ｃと拠点Ｄと拠点Ｅとの間で会議を実施する際に、会議装置においてイベントが発生した場合、電子情報ボード３１からイベント管理サーバ６０にイベント情報を送信する。そして、イベント管理サーバ６０において、電子情報ボード３１により撮像された映像および集音された音声、またはビデオ会議装置３２により撮像された映像および集音された音声のいずれかを、拠点Ｃの映像および音声として決定し、その決定に従い、電子情報ボード３１は拠点Ｃの映像および音声を選択し、映像・音声配信サーバ７０を介して拠点Ｄおよび拠点Ｅに送信する。従って、通常は、ビデオ会議装置３２の映像および音声を拠点Ｄおよび拠点Ｅに送信していても、電子情報ボード３１において操作イベント等のイベントが発生した場合には、電子情報ボード３１の映像および音声を拠点Ｄおよび拠点Ｅに送信することができる。このため、ビデオ会議装置３２の近傍にいる会議出席者Ｐ２、Ｐ３をはっきり映すことができるとともに、操作者Ｐ１が電子情報ボード３１を操作している場合には操作者Ｐ１を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できる。
【０１１５】
また、電子情報ボード３１において操作を受け付けた場合にイベントの発生を検知し、電子情報ボード３１の映像および音声を拠点Ｃの映像および音声とすることで、電子情報ボード３１の操作者に映像や音声をフォーカスすることができる。また、電子情報ボード３１またはビデオ会議装置３２が集音した音声の音量が所定の音量以上だった場合にイベントの発生を検知し、その音声を集音したいずれかの装置（会議装置）の映像および音声を拠点Ｃの映像および音声とすることで、会議での発言者に映像や音声をフォーカスすることができる。また、電子情報ボード３１またはビデオ会議装置３２により撮像された映像に所定の特徴、例えば会議出席者が所定の動きをした場合にイベントの発生を検知し、その映像を撮像したいずれかの装置（会議装置）の映像および音声を拠点Ｃの映像および音声とすることで、会議での発表者などの動きの多い人に映像や音声をフォーカスすることができる。
【０１１６】
また、イベント管理サーバ６０を備えたことで、イベントの管理を一元化でき、他の拠点の会議装置にイベントの発生を通知できる。また、イベント管理サーバ６０では、撮像された映像および集音された音声が拠点の映像および音声として決定される会議装置の優先順位が記憶されており、該優先順位に従って拠点の映像および音声を決定できるため、会議装置においてイベントが発生していない場合に優先順位が高い会議装置の映像および音声を拠点の映像および音声とすることができる。また、イベント管理サーバ６０では、会議装置において発生したイベントの優先順位が記憶されており、該優先順位に従って拠点の映像および音声を決定できるため、イベントがほぼ同時に発生しても拠点の映像および音声の決定を容易にできるとともに、映像および音声が頻繁に切り替わらないようにできる。
【０１１７】
次に、電子情報ボードのハードウェア構成について説明する。図１２は、実施の形態１、２の電子情報ボードのハードウェア構成を示す図である。図１２に示すように、電子情報ボードは、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１と、ハードディスク２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３と、ＶＧＡインターフェース（ＶＧＡ Ｉ／Ｆ）４と、ＵＳＢインターフェース（ＵＳＢ Ｉ／Ｆ）５とを備えている。
【０１１８】
ＣＰＵ１は、装置自体を制御するための各種のプログラムを実行する制御手段である。ハードディスク２は、上記の各種プログラムや書き込みデータを格納する記憶装置である。ＲＡＭ３は、ハードディスク２に格納される各種プログラムや書き込みデータが、ＣＰＵ１による処理のために展開されるものである。ＶＧＡ Ｉ／Ｆ４は、タッチパネルディスプレイ１０１におけるディスプレイ１０１１を接続するインターフェースである。ＵＳＢ Ｉ／Ｆ５は、タッチパネル１０１３を接続するためのインターフェースである。
【０１１９】
また、撮像素子Ｉ／Ｆ７は、カメラ１０３と接続し、カメラ１０３が撮像した画像を取得するためのインターフェースである。音声入出力Ｉ／Ｆ８は、マイク１０４、スピーカ１０２と接続し、マイク１０４による音声入力や、スピーカ１０２を介した音声出力を行うインターフェースである。また、タッチパネルコントローラ１０１２は、タッチパネル１０１３を制御している。電子情報ボードは、さらに、ネットワークＩ／Ｆ６を備え、他の拠点の電子情報ボードと接続されている。
【０１２０】
次に、ビデオ会議装置のハードウェア構成を説明する。図１３は、実施の形態１、２のビデオ会議装置のハードウェア構成を示す図である。図１３に示すように、ビデオ会議装置は、ＣＰＵ１０１０、ＲＯＭ１０２０、ＲＡＭ１０３０、記憶部１０５０、メディアドライブ１０７０、操作部１０８０、ネットワークＩ／Ｆ１１１０、撮像素子Ｉ／Ｆ１１２０、および音声入出力Ｉ／Ｆ１１３０を備え、各部がバス１１００により互いに接続される構成である。
【０１２１】
ＣＰＵ１０１０は、ＲＯＭ１０２０や記憶部１０５０に記憶されたプログラム１０４０をＲＡＭ１０３０に展開して順次実行することで、ビデオ会議装置の動作を中央制御する。記憶部１０５０は、ＨＤＤやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などであり、読み出し／書き込み可能にデータを記憶する。具体的には、記憶部１０５０は、ＣＰＵ１０１０が実行するためのプログラム１０４０や各種設定情報を記憶する。アップデートの際には、この記憶部１０５０に記憶されるプログラム１０４０や各種設定情報が更新される。
【０１２２】
メディアドライブ１０７０は、光ディスクなどのメディア１０６０の読み出し／書き込みを行うドライブ装置である。操作部１０８０は、キーボード、各種操作キー等であり、ユーザの操作入力を受け付ける。ネットワークＩ／Ｆ１１１０は、ネットワークと接続してデータ通信を行うインターフェースである。
【０１２３】
撮像素子Ｉ／Ｆ１１２０は、カメラ２０３と接続し、カメラ２０３が撮像した画像を取得するためのインターフェースである。音声入出力Ｉ／Ｆ１１３０は、マイク２０４、スピーカ２０２と接続し、マイク２０４による音声入力や、スピーカ２０２を介した音声出力を行うインターフェースである。
【０１２４】
本実施の形態の電子情報ボードで実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【０１２５】
また、本実施の形態の電子情報ボードで実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施の形態の電子情報ボードで実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。
【０１２６】
また、本実施の形態のプログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。本実施の形態の電子情報ボードで実行されるプログラムは、上述した各部を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記記憶媒体から通信プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、上記各部が主記憶装置上に生成されるようになっている。
【符号の説明】
【０１２７】
１１、２１、３１、４１、５１ 電子情報ボード
１２、２２、３２、４２、５２ ビデオ会議装置
６０ イベント管理サーバ
６１ イベント処理部
６２ 通信部
６５ 記憶部
７０ 映像・音声配信サーバ
７１ 通信部
７２ 映像配信部
７３ 音声配信部
７５ 記憶部
８０ ネットワーク
１０１ タッチパネルディスプレイ
１０２ スピーカ
１０３ カメラ
１０４ マイク
１０５、３０５ 制御部
１０６ 映像入力部
１０７ 音声入出力部
１０８、３０８ 通信部
１０９ 記憶部
２０２ スピーカ
２０３ カメラ
２０４ マイク
２０５ 制御部
２０６ 映像出力部
２０７ 音声入出力部
２０９ 記憶部
５０１ 入力制御部
５０２ 出力制御部
５０３ 検知部
５０４、５１４ 選択部
５０５ 送受信部
５５１ 入力制御部
５５２ 出力制御部
５５３ 送受信部
【先行技術文献】
【特許文献】
【０１２８】
【特許文献１】特開２００６−３０４００９号公報
【技術分野】
【０００１】
本発明は、ネットワークを介して会議を実施する会議システム、イベント管理サーバ、および、プログラムに関する。
【背景技術】
【０００２】
従来、カメラ、マイク、およびスピーカを備えたビデオ会議装置によって、遠隔地と映像および音声を共有して会議を実施する会議システムが知られている。このようなビデオ会議装置は、カメラ、マイク、およびスピーカが一体となっているため、持ち運びが可能であるという特徴がある。また、この会議システムでは、ビデオ会議装置をデスクに置くことができるため、会議出席者の近傍や会議出席者をはっきりと映すことができる。
【０００３】
一方、液晶やプラズマなどのフラットパネルやプロジェクタを用いた４０インチ〜６０インチ程度のサイズの大型のディスプレイにタッチパネルを搭載した、いわゆる「電子情報ボード」が知られている。そして、近年の電子情報ボードは、ほとんどが遠隔会議機能を搭載している。例えば、プラズマ電子情報ボードを使って映像や音声だけでなく、手書き文字もリアルタイムに共有できるものなどがある。
【０００４】
また、例えば、会議の発話者のいる各拠点の映像を共有して会議を実施する目的で、会議出席者の発話の間を検出すると、モニタへの表示を他拠点の映像に自動的に切り替える電子会議システムが開示されている（例えば、特許文献１参照）。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、電子情報ボードを利用した会議では、会議出席者が電子情報ボードから離れているため、電子情報ボードによって撮像された映像では、会議出席者の顔の判別が難しかったり、誰が発言しているのかわからないという問題があった。一方、ビデオ会議装置を利用した会議では、会議出席者の顔をはっきりと映すことができるが、電子情報ボードの操作者はデスクの反対側にいることが多いため、映すことができないという問題があった。また、上述した特許文献１の電子会議システムを利用した場合でも、会議出席者と電子情報ボードの操作者の両方をはっきりと映すことはできない。
【０００６】
本発明は、上記に鑑みてなされたものであって、会議出席者をはっきり映すことができるとともに、操作者が会議装置を操作している場合には該操作者を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できる会議システム、イベント管理サーバ、および、プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明は、第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置とネットワークを介して接続された会議システムであって、前記第１会議装置は、前記第１拠点の会議出席者を撮像する第１撮像手段を備え、前記第２会議装置は、前記第１拠点の会議出席者を撮像する第２撮像手段と、前記第１撮像手段により撮像された映像を受信する映像入力手段と、前記映像入力手段により受信した映像、または前記第２撮像手段により撮像された映像のいずれかを選択する選択手段と、選択された映像を前記外部会議装置に送信する送信手段と、前記第２会議装置で発生したイベントを検知する検知手段と、を備え、前記選択手段は、前記第２会議装置で発生したイベントが検知された場合に、前記第２撮像手段により撮像した映像を選択することを特徴とする。
【０００８】
また、本発明は、第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置およびイベント管理サーバとネットワークを介して接続された会議システムであって、前記第１会議装置は、前記第１拠点の会議出席者を撮像する第１撮像手段を備え、前記第２会議装置は、前記第１拠点の会議出席者を撮像する第２撮像手段と、前記第１撮像手段により撮像された映像を受信する映像入力手段と、前記第１会議装置および前記第２会議装置において発生したイベントを検知する検知手段と、いずれかの前記会議装置において前記イベントが検知された場合、前記イベントの内容と、前記イベントが発生した前記会議装置を示すイベント発生装置情報と、を含むイベント情報を、前記イベント管理サーバに送信する第１送信手段と、を備え、前記イベント管理サーバは、前記イベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、前記第２会議装置から、前記イベント情報を受信する第１受信手段と、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する第２送信手段と、を備え、前記第２会議装置は、前記イベント管理サーバから、前記決定装置情報を受信する第２受信手段と、前記決定装置情報が示す前記会議装置によって撮像された映像を選択する選択手段と、をさらに備え、前記第１送信手段は、選択された映像を前記外部会議装置に送信することを特徴とする。
【０００９】
また、本発明は、第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続されたイベント管理サーバにおいて、前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、を備えることを特徴とする。
【００１０】
また、本発明は、第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続され、前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段を備えるイベント管理サーバを、前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、として機能させるためのプログラムである。
【発明の効果】
【００１１】
本発明によれば、会議出席者をはっきり映すことができるとともに、操作者が会議装置を操作している場合は該操作者を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できるという効果を奏する。
【図面の簡単な説明】
【００１２】
【図１】図１は、実施の形態１にかかる会議システムの全体構成の説明図である。
【図２】図２は、会議システムの構成を示すブロック図である。
【図３】図３は、会議システムにおいて実施される会議の流れを示すフローチャートである。
【図４】図４は、電子情報ボードのディスプレイに表示される映像の一例を示す図である。
【図５】図５は、実施の形態２にかかる会議システムの全体構成の説明図である。
【図６】図６は、会議システムの構成を示すブロック図である。
【図７】図７は、イベント情報の一例を示す説明図である。
【図８】図８は、イベント条件情報の一例を示す図である。
【図９】図９は、ジェスチャーと動作との対応の一例を示す図である。
【図１０】図１０は、装置情報の一例を示す図である。
【図１１】図１１は、会議システムにおいて実施される会議の流れを示すフローチャートである。
【図１２】図１２は、実施の形態１、２の電子情報ボードのハードウェア構成を示す図である。
【図１３】図１３は、実施の形態１、２のビデオ会議装置のハードウェア構成を示す図である。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照して、会議システム、イベント管理サーバ、および、プログラムの実施の形態を詳細に説明する。
【００１４】
（実施の形態１）
図１は、実施の形態１にかかる会議システムの全体構成の説明図である。図１では、拠点Ａと拠点Ｂとの間で会議を実施する場合を示している。拠点Ａには、電子情報ボード１１とビデオ会議装置１２が設置されており、ビデオ会議装置１２の周りには会議出席者Ｐ２、Ｐ３がおり、電子情報ボード１１の近傍には、電子情報ボード１１の操作者Ｐ１がいる。また、拠点Ｂには、電子情報ボード２１とビデオ会議装置２２が設置されており、同様に、ビデオ会議装置２２の周りには会議出席者Ｐ５、Ｐ６がおり、電子情報ボード２１の近傍には、電子情報ボード２１の操作者Ｐ４がいる。なお、操作者も会議出席者に含まれる。また、電子情報ボードもビデオ会議装置も会議装置の一つとする。また、本実施の形態では、会議を２つの拠点で実施する場合を説明するが、３つ以上の拠点で会議を実施してもよい。
【００１５】
それぞれの拠点において、電子情報ボードとビデオ会議装置とは、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ケーブルやＨＤＭＩ（Ｈｉｇｈ‐Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ケーブルなどの有線ケーブルで接続され、相互に通信を行うことができる。また、ＬＡＮ経由で通信を行うように構成してもよい。そして、電子情報ボード１１と電子情報ボード２１（外部会議装置）とは、電話回線、無線ネットワーク、インターネットなどのネットワーク８０を介して接続されている。
【００１６】
図２は、会議システムの構成を示すブロック図である。以下では、拠点Ａに設置された会議システムとして、電子情報ボード１１およびビデオ会議装置１２について説明するが、拠点Ｂやその他の拠点に設置された電子情報ボードおよびビデオ会議装置についても同様である。
【００１７】
まず、電子情報ボード１１について説明する。電子情報ボード１１は、ネットワーク８０経由で他の拠点（拠点Ｂ）と映像および音声を共有しながら会議を実施する。また、上述したように、電子情報ボード１１は、ビデオ会議装置１２と有線ケーブルで接続されており、ビデオ会議装置１２から映像データおよび音声データを受信して映像を表示し、音声を再生することができる。また、電子情報ボード１１からビデオ会議装置１２に音声データを送信して音声を再生させることもできる。このように、電子情報ボード１１は、ビデオ会議装置１２と相互に連携することにより、どちらかの映像および音声を拠点Ａの映像および音声として、他の拠点と共有するものである。
【００１８】
電子情報ボード１１は、タッチパネルディスプレイ１０１と、スピーカ１０２と、カメラ１０３と、マイク１０４と、制御部１０５と、映像入力部１０６と、音声入出力部１０７と、通信部１０８と、記憶部１０９とを主に備えている。
【００１９】
タッチパネルディスプレイ１０１は、ディスプレイ上に電子情報（映像データ）を表示する。また、タッチパネルディスプレイ１０１は、電子ホワイトボード機能を備えており、操作者からのディスプレイに対する指や付属の電子ペンでの操作を受け付け、その指や電子ペンの動きを検知することでディスプレイ上に文字を手書きすることができる。
【００２０】
スピーカ１０２は、拠点Ａにおいて集音された音声や、他の拠点から受信した音声を再生するものである。カメラ１０３は、拠点Ａの会議出席者、特に、電子情報ボード１１を操作する操作者Ｐ１を撮像するものである。マイク１０４は、拠点Ａの会議出席者、特に、電子情報ボード１１を操作する操作者Ｐ１の音声を集音するものである。
【００２１】
制御部１０５は、電子情報ボード１１の全体を制御するものであり、入力制御部５０１と、出力制御部５０２と、検知部５０３と、選択部５０４と、送受信部５０５とを主に備えている。
【００２２】
入力制御部５０１は、会議出席者を撮像するカメラ１０３を制御するものである。すなわち、入力制御部５０１は、カメラ１０３により撮像された映像をキャプチャする。また、入力制御部５０１は、会議出席者の音声を集音するマイク１０４を制御するものであり、マイク１０４により集音された音声をキャプチャする。
【００２３】
出力制御部５０２は、タッチパネルディスプレイ１０１およびスピーカ１０２を制御するものである。すなわち、出力制御部５０２は、カメラ１０３やカメラ２０３（後述）により撮像された映像や通信部１０８により受信した拠点Ｂの映像をタッチパネルディスプレイ１０１に表示する。また、出力制御部５０２は、マイク１０４やマイク２０４（後述）により集音された音声や受信した拠点Ｂの音声をスピーカ１０２で再生する。
【００２４】
検知部５０３は、電子情報ボード１１において発生したイベントを検知するものである。具体的には、検知部５０３は、電子情報ボード１１のタッチパネルディスプレイ１０１に対する操作を受け付けた場合、操作を受け付けたことにより発生した操作イベントを検知する。また、検知部５０３は、マイク１０４により集音された音声が予め定めた所定の音量以上であった場合に、音声が所定の音量以上であったことによって発生した音量イベントを検知する。また、検知部５０３は、カメラ１０３によって撮像された映像に所定の特徴、例えば会議出席者が所定の動きをした場合に、該動きによって発生した映像イベントを検知する。また、検知部５０３は、ビデオ会議装置１２において発生したイベントを検知する。この場合は、例えば、ビデオ会議装置１２においてイベントが発生した場合、その旨を示す検知情報を受信することで、検知部５０３がビデオ会議装置１２において発生したイベントを検知する。なお、以下の本実施の形態では、検知部５０３により操作イベントを検知した場合について説明する。
【００２５】
選択部５０４は、検知部５０３により電子情報ボード１１におけるイベント、例えば操作イベントが検知された場合、操作イベントが発生した装置である電子情報ボード１１によって撮像された映像および集音された音声を、拠点Ａの映像および音声として選択する。また、選択部５０４は、検知部５０３により電子情報ボード１１においてイベントが検知されていない場合、ビデオ会議装置１２によって撮像された映像および集音された音声を、拠点Ａの映像および音声として選択する。なお、イベントが検知されていない場合に、ビデオ会議装置１２の映像および音声を拠点Ａの映像および音声とすることは、予め設定しておく。
【００２６】
送受信部５０５は、拠点Ｂなどの他の拠点との会議を開始する際に、ビデオ会議装置１２に会議出席者を撮像した映像データおよび会議出席者の音声を集音した音声データを、電子情報ボード１１に送信する旨の出力指示を、ビデオ会議装置１２に送信する。
【００２７】
映像入力部１０６は、ビデオ会議装置１２（電子情報ボード１１以外の会議装置）により撮像された映像データを受信するものである。
【００２８】
音声入出力部１０７は、ビデオ会議装置１２（電子情報ボード１１以外の会議装置）により集音された音声データを受信するものである。また、音声入出力部１０７は、電子情報ボード２１から受信した拠点Ｂの音声データをビデオ会議装置１２のスピーカ２０２（後述）で再生させるため、受信した拠点Ｂの音声データをビデオ会議装置１２に送信する。
【００２９】
通信部１０８は、拠点Ｂとの間で制御信号や映像データおよび音声データを送受信する。具体的には、通信部１０８は、選択部５０４により選択された映像（映像データ）および音声（音声データ）を、拠点Ａの映像および音声として、電子情報ボード２１に送信する。すなわち、本実施の形態では、通信部１０８は、映像入力部１０６により受信した映像および音声入出力部１０７により受信した音声、または電子情報ボード１１のカメラ１０３により撮像された映像およびマイク１０４により集音された音声のいずれかを、拠点Ａの映像および音声として電子情報ボード２１に送信する。また、通信部１０８は、会議の実施を開始する場合に、電子情報ボード２１に会議を開催する旨を示す会議開催通知を送信する。
【００３０】
記憶部１０９は、撮像された映像データや集音された音声データ、受信した映像データや音声データなどを必要に応じて記憶するＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やメモリ等の記憶媒体である。
【００３１】
次に、ビデオ会議装置１２について説明する。ビデオ会議装置１２は、スピーカ、カメラ、およびマイクを備えた持ち運びが可能な一体型の会議装置である。そして、ビデオ会議装置１２は、電子情報ボード１１と有線ケーブルで接続され、電子情報ボード１１経由で他の拠点（拠点Ｂ）と映像および音声を共有しながら会議を実施する。また、ビデオ会議装置１２は、電子情報ボード１１から音声データを受信して、音声を再生することができる。ここでは、ネットワーク８０に接続された電子情報ボード１１を介してビデオ会議装置１２の映像および音声を送信する構成としているが、ビデオ会議装置１２をネットワーク８０に接続し、ネットワーク８０経由で電子情報ボード１１や他の拠点に映像および音声を送信する構成にしてもよい。
【００３２】
ビデオ会議装置１２は、スピーカ２０２と、カメラ２０３と、マイク２０４と、制御部２０５と、映像出力部２０６と、音声入出力部２０７と、記憶部２０９とを主に備えている。
【００３３】
スピーカ２０２は、拠点Ａにおいて集音された音声や、他の拠点から受信した音声を再生するものである。カメラ２０３は、拠点Ａの会議出席者、特に、ビデオ会議装置１２の周りにいる会議出席者Ｐ２、Ｐ３を撮像するものである。マイク２０４は、拠点Ａの会議出席者、特に、ビデオ会議装置１２の周りにいる会議出席者Ｐ２、Ｐ３の音声を集音するものである。
【００３４】
制御部２０５は、ビデオ会議装置１２の全体を制御するものであり、入力制御部５５１と、出力制御部５５２と、送受信部５５３とを主に備えている。
【００３５】
入力制御部５５１は、会議出席者を撮像するカメラ２０３を制御するものであり、電子情報ボード１１から出力指示を受信した場合にカメラ２０３により撮像を開始し、カメラ２０３により撮像された映像をキャプチャする。また、入力制御部５５１は、会議出席者の音声を集音するマイク２０４を制御するものであり、電子情報ボード１１から出力指示を受信した場合にマイク２０４により音声の集音を開始し、マイク２０４により集音された音声をキャプチャする。
【００３６】
出力制御部５５２は、スピーカ２０２を制御するものであり、マイク１０４やマイク２０４により集音された音声や受信した拠点Ｂの音声をスピーカ２０２で再生する。
【００３７】
送受信部５５３は、拠点Ｂなどの他の拠点との会議を開始する際に、会議出席者を撮像し、会議出席者の音声を集音した、映像および音声を、電子情報ボード１１に送信する旨の出力指示を、電子情報ボード１１から受信する。
【００３８】
映像出力部２０６は、カメラ２０３により撮像された映像を、電子情報ボード１１に送信するものである。
【００３９】
音声入出力部２０７は、マイク２０４により集音された音声を電子情報ボード１１に送信したり、受信した拠点Ｂの音声やマイク１０４により集音された音声を電子情報ボード１１から受信するものである。
【００４０】
記憶部２０９は、撮像された映像データや集音された音声データ、受信した映像データや音声データなどを必要に応じて記憶するＨＤＤやメモリ等の記憶媒体である。
【００４１】
このような電子情報ボード１１およびビデオ会議装置１２を備えた会議システムにおいて会議を開催する場合の流れの概要について説明する。まず、電子情報ボード１１を操作して、会議を実施する相手の拠点（拠点Ｂ）の電子情報ボード２１を呼び出し、映像および音声の共有を開始する。例えば、電子情報ボード１１を操作し、電子情報ボード２１のＩＰアドレスを入力して、通信部１０８により電子情報ボード２１に会議開催する旨を示す会議開催通知を送信する。
【００４２】
そして、電子情報ボード１１では、カメラ１０３およびマイク１０４により映像および音声のキャプチャを開始するとともに、送受信部５０５によりビデオ会議装置１２に映像および音声の出力指示を送信する。送受信部５５３により出力指示を受信したビデオ会議装置１２は、カメラ２０３およびマイク２０４により映像および音声をキャプチャし、電子情報ボード１１に送信する。
【００４３】
ビデオ会議装置１２から映像および音声を受信した電子情報ボード１１では、選択部５０４により電子情報ボード１１の映像および音声とビデオ会議装置１２の映像および音声のうちいずれかの映像および音声を、拠点Ａの映像・音声として選択する。そして、通信部１０８は、選択された映像および音声を電子情報ボード２１に送信する。
【００４４】
拠点Ａの映像および音声を受信した電子情報ボード２１は映像を電子情報ボード２１のディスプレイに表示し、音声を電子情報ボード２１のスピーカかビデオ会議装置２２のスピーカにより再生する。同様に、拠点Ｂの映像および音声を拠点Ａで表示および再生することで、会議を実施する。
【００４５】
次に、電子情報ボードとビデオ会議装置とを備えた会議システムにおいて実施される会議の流れを詳細に説明する。図３は、会議システムにおいて実施される会議の流れを示すフローチャートである。図３では、例として、電子情報ボード１１が会議を開催し、電子情報ボード２１に映像データおよび音声データを送信する場合である。
【００４６】
まず、会議を開催する場合、通信部１０８は、電子情報ボード２１に会議開催通知を送信する（ステップＳ１０）。会議の開催方法は、既存の方法を用いる。例えば、ＳＩＰ（Ｓｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌ）やＸＭＰＰ（ｅＸｔｅｎｓｉｂｌｅ Ｍｅｓｓａｇｉｎｇ ａｎｄ Ｐｒｅｓｅｎｃｅ Ｐｒｏｔｏｃｏｌ）を用いて、会議を実施する。
【００４７】
会議が開始されると、入力制御部５０１は、カメラ１０３およびマイク１０４により、映像および音声のキャプチャを開始する（ステップＳ１１）。また、送受信部５０５は、ビデオ会議装置１２に映像および音声の出力指示を送信する（ステップＳ１２）。送受信部５５３により電子情報ボード１１から映像および音声の出力指示を受信したビデオ会議装置１２は、入力制御部５５１がカメラ２０３およびマイク２０４により映像および音声のキャプチャを開始し、送受信部５５３が映像データおよび音声データを電子情報ボード１１に送信する。
【００４８】
送受信部５０５は、ビデオ会議装置１２から映像データおよび音声データを受信すると（ステップＳ１３）、選択部５０４は、ビデオ会議装置１２から受信した映像および音声を拠点Ａの映像および音声とし、通信部１０８は、ビデオ会議装置１２から受信した映像データおよび音声データを、他の拠点である拠点Ｂの電子情報ボード２１に送信する（ステップＳ１４）。そして、電子情報ボード２１は、映像データおよび音声データを受信すると、拠点Ｂの会議システムで映像を表示し、音声を再生する。
【００４９】
ここで、拠点Ａの会議出席者である操作者Ｐ１が電子情報ボード１１を操作すると、操作イベントが発生し、検知部５０３は、電子情報ボード１１の操作イベントを検知する。選択部５０４は、電子情報ボード１１の操作イベントが検知されたか否かを判断する（ステップＳ１５）。操作イベントが検知されていない場合（ステップＳ１５：Ｎｏ）、ステップＳ１３に戻って処理を繰り返す。
【００５０】
一方、操作イベントが検知された場合（ステップＳ１５：Ｙｅｓ）、選択部５０４は、電子情報ボード１１の映像および音声を、拠点Ａの映像および音声として選択する（ステップＳ１６）。通信部１０８は、選択された映像および音声、すなわち電子情報ボード１１で撮像され集音された映像データおよび音声データを、他の拠点である拠点Ｂの電子情報ボード２１に送信する（ステップＳ１７）。
【００５１】
次に、選択部５０４は、電子情報ボード１１の操作イベントが検知されたか否かを判断する（ステップＳ１８）。操作イベントが検知された場合（ステップＳ１８：Ｙｅｓ）、ステップＳ１７に戻って処理を繰り返す。すなわち、電子情報ボード１１の操作イベントの発生が継続する間は、電子情報ボード１１の映像および音声を拠点Ｂの電子情報ボード２１に送信する。
【００５２】
一方、操作イベントが検知されていない場合（ステップＳ１８：Ｎｏ）、選択部５０４は、操作イベントが検知されていない状態で所定時間が経過したか否かを判断する（ステップＳ１９）。所定時間が経過していない場合（ステップＳ１９：Ｎｏ）、ステップＳ１７に戻って処理を繰り返す。
【００５３】
一方、所定時間が経過した場合（ステップＳ１９：Ｙｅｓ）、選択部５０４は、ビデオ会議装置１２の映像および音声を、拠点Ａの映像および音声として選択し（ステップＳ２０）、ステップＳ１３に戻って処理を繰り返す。
【００５４】
ここでは、電子情報ボード１１において操作イベントが発生しない場合、ビデオ会議装置１２の映像および音声を優先して拠点Ｂに送信しているが、逆に電子情報ボード１１の映像および音声を優先して拠点Ｂに送信し、ビデオ会議装置１２内でなんらかのイベントが発生した場合にビデオ会議装置１２の映像および音声を拠点Ｂに送信する構成にしてもよい。例えば、ビデオ会議装置１２でのイベントとして、操作イベントだけでなく、会議出席者の音声の音量が所定の音量以上であった場合に発生させるよう構成すれば、会議中の発言者にフォーカスすることができる。
【００５５】
次に、各拠点における電子情報ボードのディスプレイに表示される映像について説明する。図４は、電子情報ボードのディスプレイに表示される映像の一例を示す図である。
【００５６】
図４に示すように、拠点Ａの操作者Ｐ１が電子情報ボード１１を操作すると、電子情報ボード１１で撮像された映像が拠点Ａの映像として選択され、拠点Ｂの電子情報ボード２１に表示される。このとき、相手の拠点（拠点Ｂ）に表示されている映像を確認するために、拠点Ａの映像を電子情報ボード１１に表示してもよい。
【００５７】
また、拠点Ｂでは電子情報ボード２１が操作されていないため、ビデオ会議装置２２で撮像された映像が拠点Ｂの映像として選択される。従って、この場合は、電子情報ボード１１に表示される映像には、電子情報ボード２１の近傍にいる操作者Ｐ４（会議出席者）は映っていない。
【００５８】
このように、本実施の形態の会議システムは、拠点Ａと拠点Ｂとの間で会議を実施する際に、電子情報ボード１１により撮像された映像および集音された音声、またはビデオ会議装置１２により撮像された映像および集音された音声のいずれかを、拠点Ａの映像および音声として選択し、相手先の拠点Ｂに送信することができる。従って、通常は、ビデオ会議装置１２の映像および音声を拠点Ｂに送信していても、電子情報ボード１１において操作イベント等のイベントが発生した場合には、電子情報ボード１１の映像および音声を拠点Ｂに送信する。このため、ビデオ会議装置１２の近傍にいる会議出席者Ｐ２、Ｐ３をはっきり映すことができるとともに、操作者Ｐ１が電子情報ボード１１を操作している場合には操作者Ｐ１を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できる。
【００５９】
また、電子情報ボード１１において操作を受け付けた場合にイベントの発生を検知し、電子情報ボード１１の映像および音声を拠点Ａの映像および音声とすることで、電子情報ボード１１の操作者に映像や音声をフォーカスすることができる。また、電子情報ボード１１またはビデオ会議装置１２が集音した音声の音量が所定の音量以上だった場合にイベントの発生を検知し、その音声を集音したいずれかの装置（会議装置）の映像および音声を拠点Ａの映像および音声とすることで、会議での発言者に映像や音声をフォーカスすることができる。また、電子情報ボード１１またはビデオ会議装置１２により撮像された映像に所定の特徴、例えば会議出席者が所定の動きをした場合にイベントの発生を検知し、その映像を撮像したいずれかの装置（会議装置）の映像および音声を拠点Ａの映像および音声とすることで、会議での発表者などの動きの多い人に映像や音声をフォーカスすることができる。
【００６０】
また、本実施の形態のビデオ会議装置１２（２２）は、カメラ、マイク、およびスピーカを備えた一体型の装置であるため、容易に持ち運びが可能であるとともに、複数のビデオ会議装置を省スペースで設置することができる。
【００６１】
（実施の形態２）
実施の形態１の会議システムでは、拠点内に電子情報ボードとビデオ会議装置を備え、電子情報ボードにおいて拠点の映像および音声を選択し、他の拠点に送信する構成となっていた。これに対し、本実施の形態の会議システムでは、拠点内に電子情報ボードとビデオ会議装置を備え、さらに、該電子情報ボードとネットワークで接続されたイベント管理サーバおよび映像・音声配信サーバを備えた構成となっている。イベント管理サーバは、拠点の映像および音声を決定し、映像・音声配信サーバは、映像および音声を他の拠点に配信するものである。
【００６２】
図５は、実施の形態２にかかる会議システムの全体構成の説明図である。図５では、拠点Ｃ、拠点Ｄ、および拠点Ｅの間で会議を実施する場合を示している。拠点Ｃには、電子情報ボード３１とビデオ会議装置（テレビ会議装置）３２が設置されており、ビデオ会議装置３２の周りには会議出席者Ｐ２、Ｐ３がおり、電子情報ボード３１の近傍には、電子情報ボード３１の操作者Ｐ１がいる。また、拠点Ｄには、電子情報ボード４１とビデオ会議装置４２が設置されており、同様に、ビデオ会議装置４２の周りには会議出席者Ｐ５、Ｐ６がおり、電子情報ボード４１の近傍には、電子情報ボード４１の操作者Ｐ４がいる。また、拠点Ｅには、電子情報ボード５１とビデオ会議装置５２が設置されており、同様に、ビデオ会議装置５２の周りには会議出席者Ｐ８、Ｐ９がおり、電子情報ボード５１の近傍には、電子情報ボード５１の操作者Ｐ７がいる。なお、操作者も会議出席者に含まれる。また、電子情報ボードもビデオ会議装置も会議装置の一つとする。また、本実施の形態では、会議を３つの拠点で実施する場合を説明するが、２つの拠点もしくは４つ以上の拠点で会議を実施してもよい。
【００６３】
それぞれの拠点において、電子情報ボードとビデオ会議装置とは、実施の形態１と同様に有線ケーブルで接続され、相互に通信を行うことができる。また、ＬＡＮ経由で通信を行うように構成してもよい。そして、各拠点の電子情報ボード３１、４１、５１と、イベント管理サーバ６０と、映像・音声配信サーバ７０とは、ネットワーク８０を介して接続されている。
【００６４】
イベント管理サーバ６０は、どの会議装置（電子情報ボードまたはビデオ会議装置）の映像および音声を、拠点の映像および音声とするかを決定するサーバである。また、映像・音声配信サーバ７０は、多拠点（拠点Ｄ、Ｅ）に映像および音声を配信するサーバである。ここで、多拠点間で会議を実施する場合に、電子情報ボードとビデオ会議装置はいずれか一方の映像データおよび音声データを他の全ての拠点に配信する必要がある。しかし、電子情報ボードかビデオ会議装置が全ての拠点に映像データおよび音声データを配信する構成にすると端末の負荷が大きくなってしまうため、実施の形態２では映像・音声配信サーバ７０を利用している。
【００６５】
図６は、会議システムの構成を示すブロック図である。以下では、拠点Ｃに設置された電子情報ボード３１およびビデオ会議装置３２について説明するが、拠点Ｄ、Ｅやその他の拠点に設置された電子情報ボードおよびビデオ会議装置についても同様である。なお、ビデオ会議装置の機能および構成は、実施の形態１と同様である。
【００６６】
まず、電子情報ボード３１について説明する。電子情報ボード３１は、ネットワーク８０経由で他の拠点（拠点Ｄ、Ｅ）と映像および音声を共有しながら会議を実施する。また、上述したように、電子情報ボード３１は、ビデオ会議装置３２と有線ケーブルで接続されており、ビデオ会議装置３２から映像データおよび音声データを受信して映像を表示し、音声を再生することができる。また、電子情報ボード３１からビデオ会議装置３２に音声データを送信して音声を再生させることもできる。このように、電子情報ボード３１は、ビデオ会議装置３２と相互に連携することにより、どちらかの映像および音声を拠点Ｃの映像および音声として、他の拠点と共有するものである。
【００６７】
電子情報ボード３１は、タッチパネルディスプレイ１０１と、スピーカ１０２と、カメラ１０３と、マイク１０４と、制御部３０５と、映像入力部１０６と、音声入出力部１０７と、通信部３０８と、記憶部１０９とを主に備えている。ここで、タッチパネルディスプレイ１０１と、スピーカ１０２と、カメラ１０３と、マイク１０４と、映像入力部１０６と、音声入出力部１０７と、記憶部１０９の構成および機能は実施の形態１と同様である。
【００６８】
通信部３０８は、イベント管理サーバ６０や映像・音声配信サーバ７０、各拠点との間で制御信号や映像データおよび音声データを送受信する。具体的には、通信部３０８は、いずれかの会議装置（電子情報ボード３１またはビデオ会議装置３２）においてイベントが検知された場合、イベントの内容およびイベントが発生した会議装置を示すイベント発生装置情報を含むイベント情報を、イベント管理サーバ６０に送信する。
【００６９】
ここで、通信部３０８が送信するイベント情報の詳細について説明する。図７は、イベント情報の一例を示す説明図である。図７に示すように、イベント情報は、イベントのＩＤ（＜ｅｖｅｎｔ ｉｄ＞）、イベントの名前（＜ｎａｍｅ＞）、イベントの発生時間（＜ｔｉｍｅ＞）、イベントの内容等を示すイベントに関連する各種パラメータ（＜ｐａｒａｍｓ＞）、イベントが発生した会議装置を示すイベント発生装置情報（＜ｄｅｖｉｃｅ＞）等が記述されている。図７の例では、電子情報ボード３１において“ｍｏｕｓｅ‐ｃｌｉｃｋ”という操作イベントが発生したことがわかる。
【００７０】
また、通信部３０８は、イベント管理サーバ６０から、拠点の映像として決定された映像を撮像し、かつ拠点の音声として決定された音声を集音した会議装置を示す決定装置情報を受信する。
【００７１】
また、通信部３０８は、映像入力部１０６により受信した映像および音声入出力部１０７により受信した音声、または電子情報ボード３１のカメラ１０３により撮像された映像およびマイク１０４により集音された音声のいずれかを、決定装置情報に基づいて、拠点Ａの映像および音声として映像・音声配信サーバ７０に送信する。また、通信部３０８は、会議の実施を開始する場合に、電子情報ボード４１、５１に会議開催する旨を示す会議開催通知を送信する。
【００７２】
制御部３０５は、電子情報ボード３１の全体を制御するものであり、入力制御部５０１と、出力制御部５０２と、検知部５０３と、選択部５１４と、送受信部５０５とを主に備えている。ここで、入力制御部５０１と、出力制御部５０２と、検知部５０３と、送受信部５０５の構成および機能は実施の形態１と同様である。
【００７３】
選択部５１４は、イベント管理サーバ６０から受信した決定装置情報に基づいて、拠点の映像および音声とする映像および音声を選択する。すなわち、選択部５１４は、決定装置情報を参照して、拠点の映像および音声とする会議装置が変更されたか否かを判断し、変更されていない場合は、それまでと同様の会議装置の映像および音声を拠点の映像および音声として選択する。一方、変更されていた場合は、選択部５１４は、決定装置情報が示す会議装置の映像および音声を拠点の映像および音声として選択する。例えば、選択部５１４は、イベントが発生した会議装置を示す決定装置情報を受信した場合、該イベントが発生した会議装置によって撮像された映像および集音された音声を、拠点の映像および音声として選択する。
【００７４】
次に、イベント管理サーバ６０について説明する。イベント管理サーバ６０は、イベント処理部６１と、通信部６２と、記憶部６５とから主に構成されている。
【００７５】
通信部６２は、電子情報ボード３１またはビデオ会議装置３２において発生したイベントの内容、および当該イベントが発生した会議装置を示すイベント発生装置情報を含むイベント情報を受信する。また、通信部６２は、イベント処理部６１により拠点の映像として決定された映像を撮像し、かつ拠点の音声として決定された音声を集音した会議装置を示す決定装置情報を、拠点Ｃの電子情報ボード３１や他の拠点の電子情報ボード４１、５１に送信する。
【００７６】
記憶部６５は、拠点の映像および音声を決定するに必要な情報を備えたデータベースを保持している。まず、記憶部６５は、イベントに固有のイベント識別情報と、イベントの内容の条件を示すイベント条件と、会議装置において発生したイベントの優先順位とを対応付けたイベント条件情報を記憶している。これは、イベント管理サーバ６０がどの会議装置の映像および音声を拠点の映像および音声とするか決定するための情報である。
【００７７】
図８は、イベント条件情報の一例を示す図である。図８に示すように、イベント条件情報には、イベント識別情報としてのイベント名と、イベント条件（イベント内容の条件）と、イベントの優先順位とが対応付けられている。
【００７８】
図８では、拠点の映像および音声として決定される場合のイベント条件情報を記述している。すなわち、“ｍｏｕｓｅ‐ｃｌｉｃｋ”、“ｍｏｕｓｅ‐ｍｏｖｅ”、“ｍｏｕｓｅ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｕｐ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”といった基本的なイベントに加えて、“ｓｏｕｎｄ”、“ｖｉｄｅｏ”といった応用イベントも規定している。これは、“ｍｏｕｓｅ‐ｃｌｉｃｋ”、“ｍｏｕｓｅ‐ｍｏｖｅ”、“ｍｏｕｓｅ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｕｐ” 、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”といった基本的なイベントが電子情報ボード３１において発生した場合に、これらのイベントを発生させた電子情報ボード３１の映像および音声を、拠点の映像および音声として決定するものである。
【００７９】
また、“ｓｏｕｎｄ”とは、マイク１０４により集音された音声の音量が予め定めた所定の音量以上であった場合（イベント条件の「音量大」）に、イベントの発生として検知するように電子情報ボード３１を構成する。そして、該イベントを発生させた電子情報ボード３１の映像および音声を、拠点の映像および音声として決定する。
【００８０】
また、“ｖｉｄｅｏ”とは、カメラ１０３により撮像された映像に所定の特徴、例えば会議出席者が検出され、その会議出席者に所定の動きがあった場合（イベント条件の「人検出・動きあり」）に、イベントの発生として検知するように電子情報ボード３１を構成する。そして、該イベントを発生させた電子情報ボード３１の映像および音声を、拠点の映像および音声として決定する。なお、これらは、既存の音声認識技術、人物認識技術を用いて実現することができる。
【００８１】
このように、電子情報ボード３１に単純なイベント（基本的なイベント）だけでなく、複雑なイベントの発生を検知できるようにしておくことにより、適切なタイミングで電子情報ボード３１の映像および音声を選択して送信することが可能となる。なお、ここに記載していないイベントの発生が検知された場合には、電子情報ボード３１の映像および音声が拠点の映像および音声になることはない。
【００８２】
また、これらイベントがほぼ同時に発生する可能性があるので、図８に示すように、イベントにはあらかじめ優先順位を設定しておく。ここでは、“ｍｏｕｓｅ‐ｃｌｉｃｋ”が一番優先されるイベントとなっている。
【００８３】
また、電子情報ボード３１では、上記基本的なイベント（基本イベント）の他に、例えば電子情報ボード３１に搭載されるアプリケーションの動作に応じた固有のイベントを生成する。例えば、電子情報ボード３１にはホワイトボード等の専用アプリケーションが搭載されているが、このホワイトボードで新規ページの作成や、ページの切り替えを行うことができる。ここで、新規ページの作成は、ユーザーによる話題の転換が行われることが強く予想される。このため、これらのイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８４】
また一方、電子情報ボード３１には専用の電子ペンを使って書き込みを行うことができるが、この電子ペンにはボタンが備えられている。電子ペンのボタンを押すと、電子情報ボード３１はボタンの押下を検知し、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”イベントにマッピングする。ここで、電子情報ボード３１内のアプリケーションは“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｄｏｗｎ”イベントを検知すると、“ｍｏｕｓｅ‐ｒｉｇｈｔ‐ｂｕｔｔｏｎ‐ｕｐ”イベントを検知するまで、電子ペンのモードを書き込みモードから消しゴムモードに切り替える。消しゴムモードに切り替えたということは、ユーザーにより書き込みの修正が行われることが強く予想される。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８５】
さらに、上記基本イベントを組み合わせて固有のイベントを生成することもできる。例えば、“ｍｏｕｓｅ‐ｍｏｖｅ”イベントからマウスカーソルの動きを検知して、ジェスチャーを認識する。ジェスチャーには、“Ｚｏｏｍ”、“Ｐａｎ”、“Ｒｏｔａｔｅ”、“Ｓｗｉｐｅ”などの種類がある。電子情報ボード３１内のアプリケーションは、これらのジェスチャーそれぞれに対応した動作を行う。
【００８６】
図９は、ジェスチャーと動作との対応の一例を示す図である。図９では、“Ｚｏｏｍ”、“Ｐａｎ”、“Ｓｗｉｐｅ”に対して、それぞれ“画面拡大”、“画面スクロール”、“ページ切替”が対応づけられる例が示されている。なお、記号“−”は、“Ｒｏｔａｔｅ”に対して動作が割り当てられないことを表している。
【００８７】
例えば、“Ｓｗｉｐｅ”が認識されると、電子情報ボード３１内のアプリケーションはページの切替等を行う。ページの切替は、ユーザーによる話題の転換が行われることが強く予想される。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８８】
また、電子情報ボード３１には、例えばノートＰＣを接続し、その画面を表示することができる。ノートＰＣを接続されると、ユーザーがプレゼンテーションを開始することが強く予想される。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００８９】
また、電子情報ボード３１に赤字で手書きを開始したときにイベントを発生させ、これを検知することで画面を切り替えることもできる。赤字はユーザーが強調したい場合に入力されることが多い。このため、このイベントを検知して画面を切り替えることで、遠隔ユーザーに対して視覚的な注意を促すことができる。
【００９０】
このように、電子情報ボード３１は様々な固有イベントを生成するため、これらを用いることで効果的な画面切り替えを実現する。なお、どの基本イベントや応用イベントにより画面の切替を行うか、および、どのタイミングで画面の切替を行うかは、例えばイベント管理サーバ６０が決定する。
【００９１】
また、記憶部６５は、複数の会議装置（電子情報ボードおよびビデオ会議装置）に固有の装置識別情報と、撮像された映像および集音された音声が拠点の映像および音声として決定される会議装置の優先順位とが対応付けられた装置情報を記憶している。図１０は、装置情報の一例を示す図である。図１０に示すように、装置情報は、装置識別情報としての装置名（「電子情報ボード３１」「ビデオ会議装置３２」）、タイプ（「Ｉｎｔｅｒａｃｔｉｖｅ ｗｈｉｔｅｂｏａｒｄ」「ｔｅｌｅｃｏｎｆｅｒｅｎｃｉｎｇ ｄｅｖｉｃｅ」）、ＩＰアドレス（「１９２．１６８．１１．１１」「１９２．１６８．１１．１２」）、ポート番号（「１１０００」「１１００１」）と、いずれの拠点に設置されているかを示す拠点（「拠点Ｃ」「拠点Ｄ」）と、拠点の映像および音声としての採用の有無（○または×）と、各拠点内の会議装置の優先順位とが対応付けられている。
【００９２】
イベント管理サーバ６０は、会議装置のイベント情報を受信した場合に、この装置情報を参照して、当該会議装置が現在拠点の映像および音声として採用されているか否かを判断する。また、イベント管理サーバ６０は、イベント情報の受信後、予め定めた所定時間が経過しても新規のイベント情報が当該会議装置から送信されなかった場合に、この装置情報を参照して、他の会議装置の映像および音声を拠点の映像および音声として決定するかどうかを判断する。例えば、拠点Ｃでは電子情報ボード３１の映像および音声を拠点Ｃの映像および音声として他の拠点（拠点Ｄ、Ｅ）に配信中であるが、イベント管理サーバ６０は、電子情報ボード３１からのイベント情報の受信後、所定時間が経過した場合、電子情報ボード３１より優先順位の高いビデオ会議装置３２の映像および音声を拠点Ｃの映像および音声として決定し、ビデオ会議装置３２の映像および音声を送信するように指示を出す。
【００９３】
イベント処理部６１は、どの会議装置の映像および音声を拠点の映像および音声とするかを、記憶部６５に記憶されたイベント条件情報および装置情報を参照して決定するものである。具体的には、電子情報ボード３１から受信したイベント情報におけるイベントの内容が、記憶部６５に記憶されているイベント条件を満たす場合、イベント情報におけるイベント発生装置情報が示す会議装置によって撮像された映像および集音された音声を、拠点Ｃの映像および音声として決定する。
【００９４】
また、イベント処理部６１は、イベント情報の受信後に予め定めた所定時間が経過しても新規のイベント情報を受信しなかった場合、記憶部６５に記憶されている装置情報における会議装置の優先順位の高い会議装置によって撮像された映像および音声を、拠点Ｃの映像および音声として決定する。また、イベント処理部６１は、複数のイベント情報をほぼ同時に受信した場合（同時または連続して受信した場合）、記憶部６５に記憶されたイベント条件情報におけるイベントの優先順位の高いイベントが発生した会議装置によって撮像された映像および音声を、拠点Ｃの映像および音声として決定する。
【００９５】
また、イベント処理部６１は、受信したイベント情報により、拠点の映像および音声を決定した場合、拠点の映像として決定した映像を撮像し、かつ拠点の音声として決定した音声を集音した会議装置を示す決定装置情報を、通信部６２を介して拠点Ｃの電子情報ボード３１や他の拠点の電子情報ボード４１、５１に送信させる。
【００９６】
また、このようにイベント管理サーバ６０がイベントを一括して管理および処理することで、他の拠点（映像および音声の送信先の拠点）の会議装置にイベントが発生したことによる動作を変更させるよう構成することができる。つまり、例えば、電子情報ボード３１において操作イベントが発生した場合に、電子情報ボード３１の映像および音声が他の拠点に配信されるが、それを受信した他の拠点の電子情報ボードは映像をハイライトして会議出席者に電子情報ボード３１が操作されていることを知らせることができる。
【００９７】
次に、映像・音声配信サーバ７０について説明する。映像・音声配信サーバ７０は、通信部７１と、映像配信部７２と、音声配信部７３と、記憶部７５とから主に構成されている。
【００９８】
通信部７１は、各拠点の電子情報ボード３１、４１、５１から映像および音声を受信するものである。
【００９９】
記憶部７５は、装置情報を記憶するものである。映像・音声配信サーバ７０は映像および音声を受信したときに他の拠点の会議装置（電子情報ボード）に該映像および音声を配信するためにこの情報を利用する。装置情報の詳細は、イベント管理サーバ６０に記憶されている装置情報と同様である（図１０参照）。
【０１００】
映像配信部７２は、通信部７１により受信した映像を、記憶部７５に記憶された装置情報を参照して、他の全ての拠点（映像を受信した電子情報ボードが設置された拠点以外の拠点）の電子情報ボードに配信するものである。音声配信部７３は、通信部７１により受信した音声を、記憶部７５に記憶された装置情報を参照して、他の全ての拠点（音声を受信した電子情報ボードが設置された拠点以外の拠点）の電子情報ボードに配信するものである。例えば、通信部７１により電子情報ボード３１から映像および音声を受信した場合には、拠点Ｄと拠点Ｅの電子情報ボード（電子情報ボード４１、電子情報ボード５１）に映像および音声を配信する。
【０１０１】
なお、映像配信部７２および音声配信部７３は、受信した映像や音声をそのまま配信してもよいし、回線のスペックや状態に応じて圧縮・暗号化して配信してもよい。また、ここでは映像および音声の配信を１つの映像・音声配信サーバ７０で実現しているが、別々のサーバでそれぞれ実現してもよい。また、装置情報は、イベント管理サーバ６０のものを参照する構成としてもよい。
【０１０２】
次に、電子情報ボードとビデオ会議装置とイベント管理サーバと映像・音声配信サーバとを備えた会議システムにおいて実施される会議の流れを詳細に説明する。図１１は、会議システムにおいて実施される会議の流れを示すフローチャートである。図１１では、例として、拠点Ｃの電子情報ボード３１から拠点Ｄの電子情報ボード４１および拠点Ｅの電子情報ボード５１に映像データおよび音声データを送信する場合である。
【０１０３】
拠点Ｃの会議装置においてイベントの発生が検知された場合、電子情報ボード３１の通信部３０８は、イベント情報をイベント管理サーバ６０に送信する（ステップＳ３０）。イベント管理サーバ６０の通信部６２は、イベント情報を受信する（ステップＳ３１）。
【０１０４】
そして、イベント処理部６１は、イベント条件情報および装置情報を参照して、電子情報ボード３１またはビデオ会議装置３２のいずれかの映像および音声から、拠点Ｃの映像および音声を決定する（ステップＳ３２）。そして、通信部６２は、イベント処理部６１により拠点Ｃの映像および音声が決定された場合、決定された映像および音声を撮像および集音した会議装置を示す決定装置情報を電子情報ボード３１に送信する（ステップＳ３３）。
【０１０５】
電子情報ボード３１の通信部３０８は、イベント管理サーバ６０から決定装置情報を受信する（ステップＳ３４）。選択部５１４は、決定装置情報を参照して、拠点の映像および音声とする会議装置が変更されたか否かを判断し（ステップＳ３５）、変更されていない場合（ステップＳ３５：Ｎｏ）は、拠点の映像および音声の選択を変更せず、ステップＳ３７の処理に進む。一方、変更されている場合（ステップＳ３５：Ｙｅｓ）、選択部５１４は、決定装置情報が示す会議装置の映像および音声を拠点の映像および音声として選択する（ステップＳ３６）。そして、通信部３０８は、選択された映像および音声を映像・音声配信サーバ７０に送信する（ステップＳ３７）。
【０１０６】
イベント管理サーバ６０の処理に戻って、ステップＳ３３で決定装置情報を送信した後、イベント処理部６１は、決定装置情報を参照して、拠点の映像および音声とする会議装置が変更されたか否かを判断し（ステップＳ３８）、変更されていない場合（ステップＳ３８：Ｎｏ）は、ステップＳ４０の処理に進む。一方、変更されている場合（ステップＳ３８：Ｙｅｓ）、通信部６２は、他の拠点の電子情報ボードに決定装置情報を送信する（ステップＳ３９）。
【０１０７】
そして、イベント処理部６１は、イベント経過時間を監視し（ステップＳ４０）、新規のイベント情報を受信したか否かを判断する（ステップＳ４１）。これは、例えば電子情報ボード３１が操作されなくなりイベント情報が送信されなくなった場合に映像および音声の配信をビデオ会議装置３２に戻すためである。新規のイベント情報を受信した場合（ステップ４１：Ｙｅｓ）、イベント経過時間の監視を終了し（ステップＳ４２）、処理を終了する。すなわち、ステップＳ３１からの処理を繰り返す。
【０１０８】
一方、新規のイベント情報を受信していない場合（ステップ４１：Ｎｏ）、ステップＳ３１におけるイベント情報の受信後、予め定めた所定時間が経過したか否かを判断し（ステップＳ４３）、所定時間が経過していない場合（ステップＳ４３：Ｎｏ）、ステップＳ４０に戻って処理を繰り返す。
【０１０９】
一方、所定時間が経過した場合（ステップＳ４３：Ｙｅｓ）、装置情報における会議装置の優先順位の高い会議装置によって撮像された映像および音声を、拠点Ｃの映像および音声として決定し、決定装置情報を電子情報ボード３１に送信し（ステップＳ４４）、ステップＳ３４の処理を行う。
【０１１０】
映像・音声配信サーバ７０において、ステップＳ３７において電子情報ボード３１から映像および音声が送信された場合、通信部７１は、映像および音声を受信する（ステップＳ４５）。そして、映像配信部７２および音声配信部７３は、受信した映像および音声それぞれを他の拠点の電子情報ボード４１、５１に送信する（ステップＳ４６）。
【０１１１】
他の拠点の電子情報ボード４１、５１は、ステップＳ３９においてイベント管理サーバ６０から決定装置情報が送信された場合、決定装置情報を受信する（ステップＳ４７）。そして、通信部が映像および音声を受信し（ステップＳ４８）、出力制御部が映像をディスプレイに表示し、その表示の際に映像のフレームをハイライトし（ステップＳ４９）、音声をスピーカから再生する（ステップＳ５０）。なお、音声は電子情報ボードとビデオ会議装置のどちらで再生する構成としてもよい。
【０１１２】
本実施の形態では、映像・音声配信サーバ７０に送信する映像および音声は電子情報ボード３１が、電子情報ボード３１とビデオ会議装置３２どちらか一方の映像データおよび音声データを選択し、映像・音声配信サーバ７０に送信するよう構成されているが、逆にビデオ会議装置３２が送信するように構成してもよい。
【０１１３】
また、本実施の形態では電子情報ボード３１が電子情報ボード３１とビデオ会議装置３２の両方のイベント情報をイベント管理サーバ６０に送信する構成となっている。しかし、ビデオ会議装置３２もネットワーク８０に接続してそれぞれの会議装置がイベント情報をイベント管理サーバ６０に送信するように構成してもよい。また、ビデオ会議装置３２もネットワーク８０に接続し、イベント管理サーバ６０から決定装置情報を受けたいずれかの会議装置が映像および音声を送信するよう構成してもよい。
【０１１４】
このように、本実施の形態の会議システムは、拠点Ｃと拠点Ｄと拠点Ｅとの間で会議を実施する際に、会議装置においてイベントが発生した場合、電子情報ボード３１からイベント管理サーバ６０にイベント情報を送信する。そして、イベント管理サーバ６０において、電子情報ボード３１により撮像された映像および集音された音声、またはビデオ会議装置３２により撮像された映像および集音された音声のいずれかを、拠点Ｃの映像および音声として決定し、その決定に従い、電子情報ボード３１は拠点Ｃの映像および音声を選択し、映像・音声配信サーバ７０を介して拠点Ｄおよび拠点Ｅに送信する。従って、通常は、ビデオ会議装置３２の映像および音声を拠点Ｄおよび拠点Ｅに送信していても、電子情報ボード３１において操作イベント等のイベントが発生した場合には、電子情報ボード３１の映像および音声を拠点Ｄおよび拠点Ｅに送信することができる。このため、ビデオ会議装置３２の近傍にいる会議出席者Ｐ２、Ｐ３をはっきり映すことができるとともに、操作者Ｐ１が電子情報ボード３１を操作している場合には操作者Ｐ１を映すことができ、会議を実施する際に円滑なコミュニケーションを実現できる。
【０１１５】
また、電子情報ボード３１において操作を受け付けた場合にイベントの発生を検知し、電子情報ボード３１の映像および音声を拠点Ｃの映像および音声とすることで、電子情報ボード３１の操作者に映像や音声をフォーカスすることができる。また、電子情報ボード３１またはビデオ会議装置３２が集音した音声の音量が所定の音量以上だった場合にイベントの発生を検知し、その音声を集音したいずれかの装置（会議装置）の映像および音声を拠点Ｃの映像および音声とすることで、会議での発言者に映像や音声をフォーカスすることができる。また、電子情報ボード３１またはビデオ会議装置３２により撮像された映像に所定の特徴、例えば会議出席者が所定の動きをした場合にイベントの発生を検知し、その映像を撮像したいずれかの装置（会議装置）の映像および音声を拠点Ｃの映像および音声とすることで、会議での発表者などの動きの多い人に映像や音声をフォーカスすることができる。
【０１１６】
また、イベント管理サーバ６０を備えたことで、イベントの管理を一元化でき、他の拠点の会議装置にイベントの発生を通知できる。また、イベント管理サーバ６０では、撮像された映像および集音された音声が拠点の映像および音声として決定される会議装置の優先順位が記憶されており、該優先順位に従って拠点の映像および音声を決定できるため、会議装置においてイベントが発生していない場合に優先順位が高い会議装置の映像および音声を拠点の映像および音声とすることができる。また、イベント管理サーバ６０では、会議装置において発生したイベントの優先順位が記憶されており、該優先順位に従って拠点の映像および音声を決定できるため、イベントがほぼ同時に発生しても拠点の映像および音声の決定を容易にできるとともに、映像および音声が頻繁に切り替わらないようにできる。
【０１１７】
次に、電子情報ボードのハードウェア構成について説明する。図１２は、実施の形態１、２の電子情報ボードのハードウェア構成を示す図である。図１２に示すように、電子情報ボードは、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１と、ハードディスク２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３と、ＶＧＡインターフェース（ＶＧＡ Ｉ／Ｆ）４と、ＵＳＢインターフェース（ＵＳＢ Ｉ／Ｆ）５とを備えている。
【０１１８】
ＣＰＵ１は、装置自体を制御するための各種のプログラムを実行する制御手段である。ハードディスク２は、上記の各種プログラムや書き込みデータを格納する記憶装置である。ＲＡＭ３は、ハードディスク２に格納される各種プログラムや書き込みデータが、ＣＰＵ１による処理のために展開されるものである。ＶＧＡ Ｉ／Ｆ４は、タッチパネルディスプレイ１０１におけるディスプレイ１０１１を接続するインターフェースである。ＵＳＢ Ｉ／Ｆ５は、タッチパネル１０１３を接続するためのインターフェースである。
【０１１９】
また、撮像素子Ｉ／Ｆ７は、カメラ１０３と接続し、カメラ１０３が撮像した画像を取得するためのインターフェースである。音声入出力Ｉ／Ｆ８は、マイク１０４、スピーカ１０２と接続し、マイク１０４による音声入力や、スピーカ１０２を介した音声出力を行うインターフェースである。また、タッチパネルコントローラ１０１２は、タッチパネル１０１３を制御している。電子情報ボードは、さらに、ネットワークＩ／Ｆ６を備え、他の拠点の電子情報ボードと接続されている。
【０１２０】
次に、ビデオ会議装置のハードウェア構成を説明する。図１３は、実施の形態１、２のビデオ会議装置のハードウェア構成を示す図である。図１３に示すように、ビデオ会議装置は、ＣＰＵ１０１０、ＲＯＭ１０２０、ＲＡＭ１０３０、記憶部１０５０、メディアドライブ１０７０、操作部１０８０、ネットワークＩ／Ｆ１１１０、撮像素子Ｉ／Ｆ１１２０、および音声入出力Ｉ／Ｆ１１３０を備え、各部がバス１１００により互いに接続される構成である。
【０１２１】
ＣＰＵ１０１０は、ＲＯＭ１０２０や記憶部１０５０に記憶されたプログラム１０４０をＲＡＭ１０３０に展開して順次実行することで、ビデオ会議装置の動作を中央制御する。記憶部１０５０は、ＨＤＤやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などであり、読み出し／書き込み可能にデータを記憶する。具体的には、記憶部１０５０は、ＣＰＵ１０１０が実行するためのプログラム１０４０や各種設定情報を記憶する。アップデートの際には、この記憶部１０５０に記憶されるプログラム１０４０や各種設定情報が更新される。
【０１２２】
メディアドライブ１０７０は、光ディスクなどのメディア１０６０の読み出し／書き込みを行うドライブ装置である。操作部１０８０は、キーボード、各種操作キー等であり、ユーザの操作入力を受け付ける。ネットワークＩ／Ｆ１１１０は、ネットワークと接続してデータ通信を行うインターフェースである。
【０１２３】
撮像素子Ｉ／Ｆ１１２０は、カメラ２０３と接続し、カメラ２０３が撮像した画像を取得するためのインターフェースである。音声入出力Ｉ／Ｆ１１３０は、マイク２０４、スピーカ２０２と接続し、マイク２０４による音声入力や、スピーカ２０２を介した音声出力を行うインターフェースである。
【０１２４】
本実施の形態の電子情報ボードで実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【０１２５】
また、本実施の形態の電子情報ボードで実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施の形態の電子情報ボードで実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。
【０１２６】
また、本実施の形態のプログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。本実施の形態の電子情報ボードで実行されるプログラムは、上述した各部を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記記憶媒体から通信プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、上記各部が主記憶装置上に生成されるようになっている。
【符号の説明】
【０１２７】
１１、２１、３１、４１、５１ 電子情報ボード
１２、２２、３２、４２、５２ ビデオ会議装置
６０ イベント管理サーバ
６１ イベント処理部
６２ 通信部
６５ 記憶部
７０ 映像・音声配信サーバ
７１ 通信部
７２ 映像配信部
７３ 音声配信部
７５ 記憶部
８０ ネットワーク
１０１ タッチパネルディスプレイ
１０２ スピーカ
１０３ カメラ
１０４ マイク
１０５、３０５ 制御部
１０６ 映像入力部
１０７ 音声入出力部
１０８、３０８ 通信部
１０９ 記憶部
２０２ スピーカ
２０３ カメラ
２０４ マイク
２０５ 制御部
２０６ 映像出力部
２０７ 音声入出力部
２０９ 記憶部
５０１ 入力制御部
５０２ 出力制御部
５０３ 検知部
５０４、５１４ 選択部
５０５ 送受信部
５５１ 入力制御部
５５２ 出力制御部
５５３ 送受信部
【先行技術文献】
【特許文献】
【０１２８】
【特許文献１】特開２００６−３０４００９号公報
【特許請求の範囲】
【請求項１】
第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置とネットワークを介して接続された会議システムであって、
前記第１会議装置は、
前記第１拠点の会議出席者を撮像する第１撮像手段を備え、
前記第２会議装置は、
前記第１拠点の会議出席者を撮像する第２撮像手段と、
前記第１撮像手段により撮像された映像を受信する映像入力手段と、
前記映像入力手段により受信した映像、または前記第２撮像手段により撮像された映像のいずれかを選択する選択手段と、
選択された映像を前記外部会議装置に送信する送信手段と、
前記第２会議装置で発生したイベントを検知する検知手段と、を備え、
前記選択手段は、前記第２会議装置で発生したイベントが検知された場合に、前記第２撮像手段により撮像した映像を選択することを特徴とする会議システム。
【請求項２】
前記第１会議装置は、
前記第１拠点の会議出席者の音声を集音する第１集音手段をさらに備え、
前記第２会議装置は、
前記第１拠点の会議出席者の音声を集音する第２集音手段と、
前記第１集音手段により集音された音声を受信する音声入力手段と、をさらに備え、
前記選択手段は、前記映像入力手段により受信した映像および前記音声入力手段により受信した音声、または前記第２撮像手段により撮像された映像および前記第２集音手段により集音された音声のいずれかを選択し、
前記送信手段は、選択された映像および音声を前記外部会議装置に送信し、
前記選択手段は、前記第２会議装置で発生したイベントが検知された場合に、前記第２撮像手段により撮像された映像および前記第２集音手段により集音された音声を選択することを特徴とする請求項１に記載の会議システム。
【請求項３】
前記イベントは、前記第２会議装置に対する操作を受け付けた場合に発生することを特徴とする請求項２に記載の会議システム。
【請求項４】
前記イベントは、前記第２集音手段により集音された音声が所定の音量以上であった場合に発生することを特徴とする請求項２に記載の会議システム。
【請求項５】
前記イベントは、前記第２会議装置で実行されるアプリケーションの動作に応じて発生することを特徴とする請求項２に記載の会議システム。
【請求項６】
前記第１会議装置は、前記第１撮像手段としてのカメラ、前記第１集音手段としてのマイク、および音声を出力するスピーカとを備えた一体型のビデオ会議装置を含むことを特徴とする請求項１〜５のいずれか一つに記載の会議システム。
【請求項７】
前記第２会議装置は、前記第２撮像手段としてのカメラ、前記第２集音手段としてのマイク、および音声を出力するスピーカと、映像を表示するディスプレイを備え、前記ディスプレイに対する操作を受け付ける電子情報ボードを含むことを特徴とする請求項１〜６のいずれか一つに記載の会議システム。
【請求項８】
第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置およびイベント管理サーバとネットワークを介して接続された会議システムであって、
前記第１会議装置は、
前記第１拠点の会議出席者を撮像する第１撮像手段を備え、
前記第２会議装置は、
前記第１拠点の会議出席者を撮像する第２撮像手段と、
前記第１撮像手段により撮像された映像を受信する映像入力手段と、
前記第１会議装置および前記第２会議装置において発生したイベントを検知する検知手段と、
いずれかの前記会議装置において前記イベントが検知された場合、前記イベントの内容と、前記イベントが発生した前記会議装置を示すイベント発生装置情報と、を含むイベント情報を、前記イベント管理サーバに送信する第１送信手段と、を備え、
前記イベント管理サーバは、
前記イベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、
前記第２会議装置から、前記イベント情報を受信する第１受信手段と、
受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、
決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する第２送信手段と、を備え、
前記第２会議装置は、
前記イベント管理サーバから、前記決定装置情報を受信する第２受信手段と、
前記決定装置情報が示す前記会議装置によって撮像された映像を選択する選択手段と、をさらに備え、
前記第１送信手段は、選択された映像を前記外部会議装置に送信することを特徴とする会議システム。
【請求項９】
前記第１会議装置は、
前記第１拠点の会議出席者の音声を集音する第１集音手段をさらに備え、
前記第２会議装置は、
前記第１拠点の会議出席者の音声を集音する第２集音手段と、
前記第１集音手段により集音された音声を受信する音声入力手段と、をさらに備え、
前記イベント処理手段は、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像および集音された音声を、前記第１拠点の映像および音声として決定し、
前記第２送信手段は、決定された映像を撮像し、かつ決定された音声を集音した前記会議装置を示す前記決定装置情報を、前記第２会議装置に送信し、
前記選択手段は、前記決定装置情報が示す前記会議装置によって撮像された映像および集音された音声を選択し、
前記第１送信手段は、選択された映像および音声を前記外部会議装置に送信することを特徴とする請求項８に記載の会議システム。
【請求項１０】
前記記憶手段は、さらに、前記複数の会議装置に固有の装置識別情報と、撮像された映像および集音された音声が前記第１拠点の映像および音声として決定される前記会議装置の優先順位とが対応付けられた装置情報を記憶し、
前記イベント処理手段は、前記イベント情報の受信後に所定時間が経過した場合、前記装置情報における前記会議装置の優先順位の高い前記会議装置によって撮像された映像および音声を、前記第１拠点の映像および音声として決定することを特徴とする請求項９に記載の会議システム。
【請求項１１】
前記イベント条件情報は、さらに、撮像された映像および集音された音声が前記第１拠点の映像および音声として決定される前記会議装置において発生した前記イベントの優先順位が対応付けられ、
前記イベント処理手段は、複数の前記イベント情報を同時または連続して受信した場合、前記イベント条件情報における前記イベントの優先順位の高い前記イベントが発生した前記会議装置によって撮像された映像および音声を、前記第１拠点の映像および音声として決定することを特徴とする請求項９または１０に記載の会議システム。
【請求項１２】
前記イベントは、前記第１撮像手段または前記第２撮像手段により撮像された映像に所定の特徴がある場合に発生することを特徴とする請求項８〜１１のいずれか一つに記載の会議システム。
【請求項１３】
第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続されたイベント管理サーバにおいて、
前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、
前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、
受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、
決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、
を備えることを特徴とするイベント管理サーバ。
【請求項１４】
第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続され、前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段を備えるイベント管理サーバを、
前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、
受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、
決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、
として機能させるためのプログラム。
【請求項１】
第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置とネットワークを介して接続された会議システムであって、
前記第１会議装置は、
前記第１拠点の会議出席者を撮像する第１撮像手段を備え、
前記第２会議装置は、
前記第１拠点の会議出席者を撮像する第２撮像手段と、
前記第１撮像手段により撮像された映像を受信する映像入力手段と、
前記映像入力手段により受信した映像、または前記第２撮像手段により撮像された映像のいずれかを選択する選択手段と、
選択された映像を前記外部会議装置に送信する送信手段と、
前記第２会議装置で発生したイベントを検知する検知手段と、を備え、
前記選択手段は、前記第２会議装置で発生したイベントが検知された場合に、前記第２撮像手段により撮像した映像を選択することを特徴とする会議システム。
【請求項２】
前記第１会議装置は、
前記第１拠点の会議出席者の音声を集音する第１集音手段をさらに備え、
前記第２会議装置は、
前記第１拠点の会議出席者の音声を集音する第２集音手段と、
前記第１集音手段により集音された音声を受信する音声入力手段と、をさらに備え、
前記選択手段は、前記映像入力手段により受信した映像および前記音声入力手段により受信した音声、または前記第２撮像手段により撮像された映像および前記第２集音手段により集音された音声のいずれかを選択し、
前記送信手段は、選択された映像および音声を前記外部会議装置に送信し、
前記選択手段は、前記第２会議装置で発生したイベントが検知された場合に、前記第２撮像手段により撮像された映像および前記第２集音手段により集音された音声を選択することを特徴とする請求項１に記載の会議システム。
【請求項３】
前記イベントは、前記第２会議装置に対する操作を受け付けた場合に発生することを特徴とする請求項２に記載の会議システム。
【請求項４】
前記イベントは、前記第２集音手段により集音された音声が所定の音量以上であった場合に発生することを特徴とする請求項２に記載の会議システム。
【請求項５】
前記イベントは、前記第２会議装置で実行されるアプリケーションの動作に応じて発生することを特徴とする請求項２に記載の会議システム。
【請求項６】
前記第１会議装置は、前記第１撮像手段としてのカメラ、前記第１集音手段としてのマイク、および音声を出力するスピーカとを備えた一体型のビデオ会議装置を含むことを特徴とする請求項１〜５のいずれか一つに記載の会議システム。
【請求項７】
前記第２会議装置は、前記第２撮像手段としてのカメラ、前記第２集音手段としてのマイク、および音声を出力するスピーカと、映像を表示するディスプレイを備え、前記ディスプレイに対する操作を受け付ける電子情報ボードを含むことを特徴とする請求項１〜６のいずれか一つに記載の会議システム。
【請求項８】
第１拠点に設置された第１会議装置と第２会議装置とを備え、前記第１拠点と異なる拠点に設置された外部会議装置およびイベント管理サーバとネットワークを介して接続された会議システムであって、
前記第１会議装置は、
前記第１拠点の会議出席者を撮像する第１撮像手段を備え、
前記第２会議装置は、
前記第１拠点の会議出席者を撮像する第２撮像手段と、
前記第１撮像手段により撮像された映像を受信する映像入力手段と、
前記第１会議装置および前記第２会議装置において発生したイベントを検知する検知手段と、
いずれかの前記会議装置において前記イベントが検知された場合、前記イベントの内容と、前記イベントが発生した前記会議装置を示すイベント発生装置情報と、を含むイベント情報を、前記イベント管理サーバに送信する第１送信手段と、を備え、
前記イベント管理サーバは、
前記イベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、
前記第２会議装置から、前記イベント情報を受信する第１受信手段と、
受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、
決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する第２送信手段と、を備え、
前記第２会議装置は、
前記イベント管理サーバから、前記決定装置情報を受信する第２受信手段と、
前記決定装置情報が示す前記会議装置によって撮像された映像を選択する選択手段と、をさらに備え、
前記第１送信手段は、選択された映像を前記外部会議装置に送信することを特徴とする会議システム。
【請求項９】
前記第１会議装置は、
前記第１拠点の会議出席者の音声を集音する第１集音手段をさらに備え、
前記第２会議装置は、
前記第１拠点の会議出席者の音声を集音する第２集音手段と、
前記第１集音手段により集音された音声を受信する音声入力手段と、をさらに備え、
前記イベント処理手段は、受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像および集音された音声を、前記第１拠点の映像および音声として決定し、
前記第２送信手段は、決定された映像を撮像し、かつ決定された音声を集音した前記会議装置を示す前記決定装置情報を、前記第２会議装置に送信し、
前記選択手段は、前記決定装置情報が示す前記会議装置によって撮像された映像および集音された音声を選択し、
前記第１送信手段は、選択された映像および音声を前記外部会議装置に送信することを特徴とする請求項８に記載の会議システム。
【請求項１０】
前記記憶手段は、さらに、前記複数の会議装置に固有の装置識別情報と、撮像された映像および集音された音声が前記第１拠点の映像および音声として決定される前記会議装置の優先順位とが対応付けられた装置情報を記憶し、
前記イベント処理手段は、前記イベント情報の受信後に所定時間が経過した場合、前記装置情報における前記会議装置の優先順位の高い前記会議装置によって撮像された映像および音声を、前記第１拠点の映像および音声として決定することを特徴とする請求項９に記載の会議システム。
【請求項１１】
前記イベント条件情報は、さらに、撮像された映像および集音された音声が前記第１拠点の映像および音声として決定される前記会議装置において発生した前記イベントの優先順位が対応付けられ、
前記イベント処理手段は、複数の前記イベント情報を同時または連続して受信した場合、前記イベント条件情報における前記イベントの優先順位の高い前記イベントが発生した前記会議装置によって撮像された映像および音声を、前記第１拠点の映像および音声として決定することを特徴とする請求項９または１０に記載の会議システム。
【請求項１２】
前記イベントは、前記第１撮像手段または前記第２撮像手段により撮像された映像に所定の特徴がある場合に発生することを特徴とする請求項８〜１１のいずれか一つに記載の会議システム。
【請求項１３】
第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続されたイベント管理サーバにおいて、
前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段と、
前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、
受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、
決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、
を備えることを特徴とするイベント管理サーバ。
【請求項１４】
第１拠点に設置される第１会議装置と第２会議装置とのうち、前記第２会議装置とネットワークを介して接続され、前記第１会議装置および前記第２会議装置において発生するイベントに固有のイベント識別情報と、前記イベントの内容の条件を示すイベント条件とを対応付けたイベント条件情報を記憶する記憶手段を備えるイベント管理サーバを、
前記第２会議装置から、前記イベントの内容および前記イベントが発生した前記会議装置を示すイベント発生装置情報を含むイベント情報を受信する受信手段と、
受信した前記イベント情報における前記イベントの内容が前記イベント条件を満たす場合、前記イベント情報における前記イベント発生装置情報が示す前記会議装置によって撮像された映像を、前記第１拠点の映像として決定するイベント処理手段と、
決定された映像を撮像した前記会議装置を示す決定装置情報を、前記第２会議装置に送信する送信手段と、
として機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１３−７８１０５（Ｐ２０１３−７８１０５Ａ）
【公開日】平成２５年４月２５日（２０１３．４．２５）
【国際特許分類】
【出願番号】特願２０１２−１４２０１２（Ｐ２０１２−１４２０１２）
【出願日】平成２４年６月２５日（２０１２．６．２５）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＨＤＭＩ
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
【公開日】平成２５年４月２５日（２０１３．４．２５）
【国際特許分類】
【出願日】平成２４年６月２５日（２０１２．６．２５）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＨＤＭＩ
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
[ Back to top ]