会議支援システムとそのサーバ装置及びプログラム
【課題】閲覧者が意見集約のプロセスを正確にかつ効率良く把握できるようにする。
【解決手段】撮像記録されたボード映像データを閲覧者のユーザ端末ＰＣ１〜ＰＣｎに表示する際に、上記ボード映像データから検出されたボード１上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定し、この推定されたカードを含む注目範囲を示すフォーカス表示パターンＭ２１を上記ボード映像データに重ね合わせて表示するようにし、さらにフォーカス表示パターンＭ２１により示される注目範囲に含まれるカード画像をカード画像データベース１３ａから読み出してフォーカス表示エリアＭ３に拡大表示するようにすると共に、フォーカス表示パターンＭ２１により示される注目範囲に相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を展開表示エリアＭ４に展開表示するようにしたものである。
【解決手段】撮像記録されたボード映像データを閲覧者のユーザ端末ＰＣ１〜ＰＣｎに表示する際に、上記ボード映像データから検出されたボード１上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定し、この推定されたカードを含む注目範囲を示すフォーカス表示パターンＭ２１を上記ボード映像データに重ね合わせて表示するようにし、さらにフォーカス表示パターンＭ２１により示される注目範囲に含まれるカード画像をカード画像データベース１３ａから読み出してフォーカス表示エリアＭ３に拡大表示するようにすると共に、フォーカス表示パターンＭ２１により示される注目範囲に相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を展開表示エリアＭ４に展開表示するようにしたものである。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、会議内容の電子化および電子化された会議情報を閲覧するための会議情報管理システム、およびサーバ装置に関する。
【背景技術】
【０００２】
会議やワークショップの場において利用される意見集約法の１つとして、ＫＪ法が知られている。ＫＪ法は、ブレーンストーミング等で出されたアイディアや意見、又は各種調査の現場から収集された雑多な情報を１つずつ小さなカード（紙切れ）に書き込み、それらのカードの中から内容の近いもの同士を集めてグループ化してゆく作業の中で、テーマの解決に役立つヒントやひらめきを生み出していこうとするものである。
【０００３】
ＫＪ法の基本的な手順を以下に示す。はじめに、参加者は発想したアイディアや収集した情報などのデータを１つずつ１枚の小さなカードに書き込んでいく。次に、作成したカード群を机などに並べて、カードに書かれたデータが同類の内容であるカード同士を集めグループを作成する。また、作成した各グループには、その内容を要約した表札をつける。カードのグループ編成は、まず、小グループを作り、次に小グループを同士で中グループを、さらに中グループ同士で大グループを作成していく。このようにＫＪ法を使用すると、カードのグループ編成を繰り返しながら様々な意見を集約して、テーマ解決に役立つヒントを導き出すことが可能である（例えば、非特許文献１および非特許文献２参照。）。
【０００４】
ところで、最近上記ＫＪ法を使用した会議やワークショップにおいて、意見集約のプロセスを記録しておき、この記録された情報を必要に応じて再利用する試みがなされている。プロセスの記録手法としては、例えばビデオカメラを使用してカードのグループ化作業の過程を記録するものが使用される。このようにすると、例えば記録された意見集約のプロセスを時間的及び空間的に異なる場所（バーチャルな場）で閲覧可能にすることで、会議に参加できなかった人が会議の流れと内容を把握することができる。
【０００５】
【非特許文献１】独立行政法人 雇用・能力開発機構 生涯職業能力開発促進センター、“KJ法”、［online］、「Ability Garden (生涯職業能力開発促進センター・ホームページ)」、［平成１６年8月3日検索］、インターネット＜ＵＲＬ：http://nokai.ab-garden.ehdo.go.jp/giho/43.html＞
【０００６】
【非特許文献２】川喜田二郎著、「ＫＪ法−渾沌をして語らしめる」、中央公論社、１９８６年、ｐ．１２１−１６９
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところが、従来のシステムでは、記録された意見集約のプロセスをバーチャルな場で会議に参加できなかった人が閲覧する場合、記録されたプロセスを単に閲覧者の表示装置に表示させるものとなっている。このため、閲覧者にとっては会議の流れやポイントを把握し難く、情報伝達効率が悪いという問題があった。
【０００８】
この発明は上記事情に着目したもので、その目的とするところは、閲覧者が意見集約のプロセスを正確にかつ効率良く把握することを可能にした会議支援システムとそのサーバ装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するためにこの発明に係わる会議支援システムとそのサーバ装置及びプログラムは、撮像記録された会議画像を閲覧者の表示装置に表示する際に、上記会議画像から検出されたボード上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定する。そして、この推定されたカードを含む注目範囲を示すフォーカス表示パターンを上記会議画像に重ね合わせて表示させるようにしたものである。これにより、自動的に話題の中心になっている部分を追跡して表示されるため、閲覧者は会議における話題の中心を正確にかつ効率良く把握することが可能になる。
【００１０】
またこの発明は次のような各種構成を備えることも特徴とする。
第１の構成は、入力操作情報に応じて、フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを可変に設定するようにする。このように構成すると、例えば閲覧者またはシステムオペレータは、話題の中心が他にもあると判断した場合にフォーカス表示パターンにより示される注目範囲を任意に変化させることができる。
【００１１】
第２の構成は、フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、表示装置の第２の表示領域に拡大表示させるようにしたものである。これにより、全体画像の一覧性を確保しつつ、閲覧者は全体画像のうち注目範囲に含まれるカードの記載内容をより一層明瞭に視認することが可能となる。
【００１２】
第３の構成は、フォーカス表示パターンにより示される注目範囲に相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を表示装置の第３の表示領域に展開表示させるようにしている。このようにすると、閲覧者は注目範囲内の重ね合わされた複数のカードの記載内容をそれぞれ視認することが可能となる。よって、意見集約プロセスにおいて作成されたグループがどのような内容のカードの組み合わせで構成されているかを明瞭に把握することができる。
【００１３】
第４の構成は、表示装置に表示されている会議画像の会議期間全体における時間位置を検出し、検出された時間位置を表す会議経過表示情報を生成して表示させるように構成する。これにより、閲覧者は現在再生中の画像が会議全体の中でどの時間位置にあるものかを確認することができる。
【発明の効果】
【００１４】
要するにこの発明では、撮像記録された会議画像を閲覧者の表示装置に表示する際に、上記会議画像から検出されたボード上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定し、この推定されたカードを含む注目範囲を示すフォーカス表示パターンを上記会議画像に重ね合わせて表示させるようにしている。
【００１５】
したがってこの発明によれば、閲覧者が意見集約のプロセスを正確にかつ効率良く把握することを可能にした会議支援システムとそのサーバ装置及びプログラムを提供することができる。
【発明を実施するための最良の形態】
【００１６】
図１は、この発明に係わる会議支援システムの一実施形態を示す概略構成図である。このシステムは、サーバ装置ＳＶ、ボード撮像装置ＶＩ、カード撮像装置ＣＡ、通信ネットワークＮＷ、及びユーザ端末ＰＣ１〜ＰＣｎを備える。サーバ装置ＳＶは、会議情報管理装置としての機能を備えたもので、上記ボード撮像装置ＶＩにより撮像された映像データをケーブルを介して取り込む機能と、上記カード撮像装置ＣＡにより撮像された画像データをケーブルを介して取り込む機能とを備える。
【００１７】
ユーザ端末ＰＣ１〜ＰＣｎはパーソナル・コンピュータにより構成され、表示装置とキーボードやマウスなどの入力装置を備えている。これらのユーザ端末ＰＣ１〜ＰＣｎは、会議の閲覧者たるユーザがバーチャルな場で会議の模様を閲覧するための使用する。
【００１８】
通信ネットワークＮＷは、システムが例えば事業所内又はオフィス内に構築される場合であればＬＡＮ（Local Area Network）により構成される。一方、システムが複数の事業所やオフィスに跨って構成される場合には、インターネットに代表されるコンピュータ・ネットワークと、このコンピュータ・ネットワークとユーザ端末ＰＣ１〜ＰＣｎとの間を接続するための加入者網とから構成される。
【００１９】
図２は、図１に示すシステムにおける会議情報の記録の様子を示す図である。同図において、ボード１は、机上または壁などに備えられ、このボード１上においてＫＪ法等による意見集約のプロセスが実行される。このプロセスは、例えば意見を記入したカード２１〜２ｉをボード１上に配置し、これらのカード２１〜２ｉを参加者がボード１上で移動させて、記入された意見の近いもの同士でグループを作成することにより行われる。ボード１は、市販のホワイトボードや模造紙等でも良いし、会場の壁や机をそのまま利用しても構わない。
【００２０】
カード２１〜２ｉは、図３に示すように意見記入エリア２１Ａと、カード識別エリアとを備える。意見記入エリア２１Ａは、会議参加者がペンなどを用いて意見を記載する領域である。カード識別エリアには２次元バーコード２１Ｂが表示される。２次元バーコード２１Ｂは、カードごとに固有の個別識別情報（以下、カードＩＤと呼称する）を含み、カードに予め記載される。なお、２次元バーコード２１Ｂに代えて、図４に示すカード２１′〜２ｉ′ように１次元バーコード２１Ｂ′を使用することも可能である。また、カード２１〜２ｉは、ペンなどの筆記具を用いて意見が記入できるものであれば形状及び材質には制限はなく、例えば市販されている粘着剤付きの付箋紙などが利用できる。
【００２１】
ボード撮像装置ＶＩは例えば動画の撮像が可能なビデオカメラからなり、意見集約が行われるボード１全体を時間経過にしたがって撮像する。そして、この撮像により得られるボード映像データとディジタル音声データを、例えばＤＶケーブルなどのケーブルを介して接続されるサーバ装置ＳＶへ入力する。
【００２２】
カード撮像装置ＣＡは例えばディジタルスチルカメラにより構成され、カード２１〜２ｉの意見記入エリア２１Ａ及びカード識別エリアを一枚ずつ撮像する。そして、この撮像により得られたカード画像データを、例えばＵＳＢケーブルなどのケーブルを介して接続されるサーバ装置ＳＶへ入力する。
【００２３】
なお、上記ボード撮像装置ＶＩ及びカード撮像装置ＣＡが撮像されたボード映像データ及びカード画像データを記録媒体に記録する機能を備えている場合には、上記撮像により得られたボード映像データとディジタル音声データ、及びカード画像データを一旦上記記録媒体に記録し、この記録媒体をサーバ装置ＳＶのドライブにセットすることで、上記各データをサーバ装置ＳＶに取り込むようにしてもよい。
【００２４】
ところで、サーバ装置ＳＶは次のように構成される。図５は、その機能構成を示すブロック図である。
サーバ装置ＳＶは、マイクロプロセッサなどの中央処理ユニット（ＣＰＵ：Central Processing Unit）１１を備える。このＣＰＵ１１には、バス１２を介してデータメモリ１３およびプログラムメモリ１４が接続され、さらにビデオ入力インタフェース（ビデオ入力Ｉ／Ｆ）１５、カメラ入力インタフェース（カメラ入力Ｉ／Ｆ）１６、及び通信インタフェース（通信Ｉ／Ｆ）１７が接続されている。
【００２５】
ビデオ入力Ｉ／Ｆ１５は、ＣＰＵ１１制御の下、ボード撮像装置ＶＩからケーブルを介して送信されるボード映像データの受信処理を行う。カメラ入力Ｉ／Ｆ１６は、ＣＰＵ１１制御の下、カメラ撮像装置ＣＡからケーブルを介して送信されるカード画像データの受信処理を行う。通信Ｉ／Ｆ１７は、ＣＰＵ１１の制御の下、通信ネットワークＮＷを介してユーザ端末ＰＣ１〜ＰＣｎとの間で通信を行う。
【００２６】
データメモリ１３は、記憶媒体として例えばＲＡＭ又はハードディスクを使用したもので、データメモリ１３には、カード画像データベース１３ａ、カード位置データベース１３ｂ、映像・音声データベース１３ｃ、及び閲覧者データベース１３ｄが設けられる。
【００２７】
カード画像データベース１３ａには、上記カメラ入力Ｉ／Ｆ１６を介してカード撮像装置ＣＡから読み込まれたカード画像データが、予めカードに記載された２次元バーコード２１Ｂにより表されるカードＩＤに対応付けて記憶される。図６はその記憶結果の一例を示すもので、この例では各カード２１〜２ｉのカード画像２０１〜２０ｉを、カードＩＤ（Ｃ１〜Ｃｎ）に対応付けて記憶した場合を示している。
【００２８】
カード位置データベース１３ｂには、ボード１上のカード２１〜２ｉの状態変化、すなわち貼付、移動及び剥除などが行われた際のカードの位置情報が記憶される。この位置情報は、撮影時刻ごとに発行された時刻ＩＤ（Ｔ１〜Ｔｊ）と、その時刻、動作対象のカードＩＤ、カード位置、及びカードの重なりの有無を表す重なりフラグにより構成される。図７にその記憶結果の一例を示す。
【００２９】
映像・音声データベース１３ｃには、ボード撮像装置ＶＩからビデオ入力Ｉ／Ｆ１５を介して取り込まれたボード映像１０ｘが記憶される。
閲覧者データベース１３ｄには、閲覧者がユーザ端末ＰＣ１〜ＰＣｎを用いて入力した閲覧者情報が格納される。閲覧者情報は、閲覧者登録の際に発行される閲覧者ＩＤとパスワード、閲覧日時および閲覧の進捗状況とから構成される。図８にその記憶結果の一例を示す。
【００３０】
プログラムメモリ１４には、この発明に係わる制御プログラムとして、会議情報保存用プログラム群と、会議情報閲覧用プログラム群が格納される。会議情報保存用プログラム群は、カードＩＤ認識プログラム１４１ａ、カード画像登録プログラム１４１ｂ、カード位置検出プログラム１４１ｃ及びカード位置登録プログラム１４１ｄにより構成される。また、会議情報閲覧用プログラム群は、フォーカス表示プログラム１４２ａ、重なり展開プログラム１４２ｂ、再生制御プログラム１４２ｃ、１４２ｄ閲覧者登録プログラム、及び閲覧者管理プログラム１４２ｅにより構成される。
【００３１】
カードＩＤ認識プログラム１４１ａは、撮像されたカード画像２０１〜２０ｉ及びボード映像１０ｘの各フレームから、カードに記載された２次元バーコード情報２１Ｂを解読し、カードＩＤを認識する。
カード画像登録プログラム１４１ｂは、カード撮像装置ＣＡからカメラ入力Ｉ／Ｆ１６を介して取り込んだカード画像２０１〜２０ｉを、上記カードＩＤ認識プログラム１４１ａにより認識されたカードＩＤに対応付けてカード画像データベース１３ａに記憶させる。
【００３２】
カード位置検出プログラム１４１ｃは、ボード撮像装置ＶＩからビデオ入力Ｉ／Ｆ１５を介して取り込んだボード映像１０ｘのフレームごとに、当該フレームに含まれるカード画像２０１〜２０ｉのバーコードを認識する。そして、この認識されたバーコードの位置をもとにボード映像１０ｘ上におけるカード画像２０１〜２０ｉの位置を検出する。
【００３３】
カード位置登録プログラム１４１ｄは、ボード映像１０ｘのフレームごとに、上記カード位置検出プログラム１４１ｃにより検出されたカード画像２０１〜２０ｉの位置を、１つ前のフレームにおいて検出されたカード画像２０１〜２０ｉの位置と比較する。そして、位置変化が検出されたカード画像２０１〜２０ｉについてその変化履歴情報を生成してカード位置データベース１３ｂに記憶する。変化履歴情報は、当該カード画像のフレーム撮影時刻（タイムスタンプ）ごとに発行された時刻ＩＤと、上記カードＩＤと、検出された位置情報と、重なりフラグとから構成される。
【００３４】
フォーカス表示プログラム１４２ａは、カード位置データベース１３ｂに記憶された各カードの変化履歴情報をもとに、会議において話題の中心になっているカードを推定する。そして、推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを、ボード映像に重ね合わせてボード画像表示エリアに表示させる。
【００３５】
またフォーカス表示プログラム１４２ａは、ユーザ端末ＰＣ１〜ＰＣｎにおいて閲覧者によりフォーカス表示パターンの表示位置を変更するための操作が行われた場合に、この操作に応じて上記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも１つを変更する。
【００３６】
さらにフォーカス表示プログラム１４２ａは、上記フォーカス表示パターンにより示される注目範囲で囲まれた部分に含まれるカードの画像をカード画像データベース１３ａから読み出す。そして、読み出したカードの画像をカード位置データベース１３ｂに記憶された位置情報に基づいて上記ボード表示エリアとは別のフォーカス表示エリアに拡大表示する。また、このフォーカス表示エリアには拡大／縮小ボタンを表示し、閲覧者がこの拡大／縮小ボタンを操作した場合に、上記部分画像の表示サイズを変更する機能も有する。
【００３７】
重なり展開プログラム１４２ｂは、上記フォーカス表示パターンにより示される注目範囲内において、相互に重なり合う複数のカードが含まれているか否かを判定する。そして、相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を上記カード画像データベース１３ａから選択的に読み出して、展開表示エリアにそれぞれ表示する。
【００３８】
再生制御プログラム１４２ｃは、ユーザ端末ＰＣ１〜ＰＣｎから通信ネットワークＮＷを介して送信される再生制御コマンドに応じて閲覧画面を作成して配信する。再生制御コマンドには、再生、停止、送り及び戻しを指定するコマンドも含まれる。また、会議時間をある時間単位で複数のチャプタに分割し、これらのチャプタごとに再生制御を行うチャプタ再生機能も備える。
【００３９】
閲覧者登録プログラム１４２ｄは、サーバ装置ＳＶに記憶されている会議情報の閲覧者を管理するための閲覧者登録制御機能を有する。サーバ装置ＳＶは、ユーザ端末ＰＣ１〜ＰＣｎから送信された閲覧者登録要求を通信ＮＷを介して受信すると、閲覧者ＩＤ及びパスワードを発行して、要求元のユーザ端末ＰＣ１〜ＰＣｎに送信する。また、発行された閲覧者ＩＤ及びパスワードをデータメモリ１３に設けられた閲覧者データベース１３ｄに格納する。
【００４０】
閲覧者管理プログラム１４２ｅは、閲覧者の認証、及び会議情報の閲覧の進捗管理などを行う。閲覧者の認証は、ユーザ端末ＰＣ１〜ＰＣｎから上記閲覧者登録プログラム１４２ｄにより発行された閲覧者ＩＤ及びパスワードを送信して行う。サーバ装置ＳＶは、受信した閲覧者ＩＤ及びパスワードを閲覧者データベース１３ｄに格納された閲覧者ＩＤ及びパスワードと照合し、両者が合致すれば会議情報の閲覧を開始する。また、閲覧の進捗管理は、閲覧者ごとに閲覧日時と閲覧進捗を閲覧者データベース１３ｄに記憶して行われる。閲覧者がユーザ端末ＰＣ１〜ＰＣｎから会議情報を閲覧すると、閲覧日時および進捗が自動的に記憶される。閲覧されていない場合は、閲覧日時および進捗にそれぞれ“ＮＵＬＬ”が格納される。
【００４１】
次に、以上のように構成された会議支援システムにおけるサーバ装置ＳＶの動作を説明する。
（１）会議情報の保存
（１Ａ）カード画像登録処理
会議の管理者は、例えば会議の開始に先立ち、カード撮像装置ＣＡを使用して意見が記載されたカード２１〜２ｉをそれぞれ撮像する。この撮像により得られたカード画像データ２０１〜２０ｉはケーブルを介してサーバ装置ＳＶに送られる。
【００４２】
サーバ装置ＳＶは、上記カード画像データ２０１〜２０ｉが送られると、次のようにカード画像登録処理を実行する。図６はその処理手順と処理内容を示すフローチャートである。
すなわち、先ずステップＳ９ａにおいて、カード画像２０１〜２０ｉをカメラ入力Ｉ／Ｆ１６を介して取り込み、データメモリ１３内の受信バッファに保存する。次にステップＳ９ｂによりカードＩＤ認識プログラム１４ａを実行し、上記カード画像２０１〜２０ｉに含まれる２次元バーコードを解読することによりカードＩＤを認識する。そして、ステップＳ９ｃにより、上記認識されたカードＩＤに対応付けて、上記カード画像２０１〜２０ｉをカード画像データベース１３ａに格納する。この結果、カード画像データベース１３ａには、例えば図６に示すようにカードＩＤ（Ｃ１〜Ｃｎ）に対応付けて各カード２１〜２ｉのカード画像データ２０１〜２０ｉがもれなく記憶される。
【００４３】
（１Ｂ）映像・音声データ記憶処理
さて、会議が開始されると、その模様が会議の開始から終了まで、ボード撮像装置ＶＩにより連続的に撮像される。このときの撮像範囲は、ボード１を中心にその周辺に存在する会議参加者が含まれるように設定される。上記撮像により得られたボード映像１０ｘ及び音声データは、ケーブルを介してサーバ装置ＳＶに送られる。そして、このボード映像１０ｘ及び音声データは、サーバ装置ＳＶにおいてビデオ入力Ｉ／Ｆ１５により受信されたのち、データメモリ１３に転送されてその映像・音声データベース１３ｃに蓄積される。
【００４４】
（１Ｃ）カード位置データベース作成処理
サーバ装置ＳＶは、上記ボード映像１０ｘの蓄積期間中、或いは蓄積終了後に、次のようにカード位置データベース作成処理を実行する。図１０はその処理手順と処理内容を示すフローチャートである。
すなわち、ステップＳ１０ａにおいて映像・音声データベース１３ｃからボード映像１０ｘをフレーム単位で読み出し、この読み出されたフレームごとにステップＳ１０ｂからステップＳ１０ｌまでの処理を繰り返し行う。
【００４５】
まずステップＳ１０ｃにより、ボード映像１０ｘのあるフレームに対しカードＩＤ認識プログラム１４ａを実行することにより、当該フレームに含まれるすべてのカードの２次元バーコードを解読してカードＩＤを認識する。そして、ステップＳ１０ｄにより、上記認識されたすべての２次元バーコードに対してカード位置検出プログラム１４１ｂを実行し、上記フレームに含まれるカード画像の位置をすべて検出する。
【００４６】
位置の検出は、例えば図１１に示すように行われる。すなわち、ボード映像１０ｘにおけるボード１に基点を設定し、基点から２次元バーコードまでのＸ方向のピクセル数およびＹ方向のピクセル数を算出する。算出したＸ方向のピクセル数およびＹ方向のピクセル数をカード２０１の位置情報として採用する。ここでは、２次元座標を利用して位置情報の算出を行ったが、２次元に限らず３次元座標系を利用することも可能であり、カード位置が検出できる手法であれば如何なる手法を採用しても構わない。
【００４７】
次にサーバ装置ＳＶは、ステップＳ１０ｅからステップＳ１０ｋにおいて、当該フレームおよび１つ前のフレームに含まれるカード画像２０１〜２０ｉについて位置の比較を行う。はじめにステップＳ１０ｆにおいてカード位置の変化の判定を行う。ここで、カードの位置変化とは、新規カードの追加、移動及び消滅とする。カード２１〜２ｉの追加、移動が検出された場合、続いてステップＳ１０ｈに移行し、１つ前のフレームにおいて同じ場所に既にカードが存在していたか否かを判定する。つまり、複数のカードの重なりが発生したか否かを判定する。なお、この判定では、バーコードが読み取れない程に完全に重なりあった場合と、既存カードの一部に新たなカードが重なった場合の両方が検出される。
【００４８】
上記判定の結果、複数のカードの重なりが検出された場合には、ステップＳ１０ｉにより重なりフラグをＯＮに設定する。そして、ステップＳ１０ｊにおいて、例えば図７の時刻ＩＤ（Ｔ３）のように、当該フレームの撮影時刻（タイムスタンプ）、そのカードＩＤとカード位置、および重なりフラグをＯＮにしてカード位置データベース１３ｂに記憶する。
【００４９】
これに対し、ステップＳ１０ｈの判定において重なりが検出されない場合には、ステップＳ１０ｊに移行する。そして、ステップＳ１０ｊにおいて、例えば図７の時刻ＩＤ（Ｔ１，Ｔ２）のように、当該フレームの撮影時刻、そのカードＩＤとカード位置、および重なりフラグを“ＮＵＬＬ”にしてカード位置データベース１３ｂに記憶する。
【００５０】
一方、ステップＳ１０ｆの判定においてカード２１〜２ｉの消滅が検出された場合には、ステップＳ１０ｇに移行し、ある一定時間が経過しても当該カードが検出されないかどうかを判定する。この判定は、例えば会議の参加者やカードを移動する手が２次元バーコードを一時的に隠してしまった場合を、カードの消滅として誤判定しないようにするために行われる。上記ステップＳ１０ｇにおいて、当該カードが検出されない状態がある一定時間続くと、ステップＳ１０ｊに移行して、例えば図７の時刻ＩＤ（Ｔ４）のように、当該フレームの撮影時刻、そのカードＩＤ、およびカード位置を“ＮＵＬＬ”に設定してカード位置データベース１３ｂに記憶する。
【００５１】
以後、ボード映像１０ｘのすべてのフレームについて以上述べた処理が繰り返し実行され、この結果会議の開始時点から終了時点までのカード状態の変化履歴を表す情報が記憶される。図７にその記憶結果の一例を示す。
（２）会議情報の配信
次に、上記作成されたカード画像データベース１３ａ、カード位置データベース１３ｂを利用して、会議情報閲覧画面を作成し、この作成した会議情報を通信ネットワークＮＷを介してユーザ端末ＰＣ１〜ＰＣｎに配信し表示させる動作について説明する。
【００５２】
（２Ａ）会議情報閲覧画面の構成
図１２は、ユーザ端末ＰＣ１〜ＰＣｎに表示される会議閲覧画面の一例を示す図である。この会議閲覧画面は、全体表示エリアＭ１、ボード表示エリアＭ２、フォーカス表示エリアＭ３、展開表示エリアＭ４、再生制御ボタンＭ５、時間経過表示部Ｍ６、チャプタ再生制御ボタンＭ７、及びチャプタ進捗表示部Ｍ８を備える。
【００５３】
全体表示エリアＭ１には、ボード撮像装置ＶＩで撮像された会議場全体の映像データが表示される。ボード表示エリアＭ２には、上記会議場全体の映像データのうちのボード１上を撮像したボード映像データが表示される。また、このボード映像データには、注目範囲を示すフォーカス表示パターンＭ２１が重ねられて表示される。このフォーカス表示パターンＭ２１は、マウスでポインタＭ２２を操作することにより任意に移動可能である。フォーカス表示エリアＭ３には、フォーカス表示パターンＭ２１に囲まれた注目範囲内の部分に含まれるカード画像２０１〜２０ｉがカード位置データベース１３ｂに記憶された位置情報に基づいて表示される。またこのフォーカス表示エリアＭ３には、当該フォーカス表示エリアＭ３に表示される画像の表示サイズを拡大／縮小するためのボタン３１，３２が表示される。
【００５４】
展開表示エリアＭ４には、例えばカード画像２０１〜２０３のように重なっているカードの内容を示すカード画像が展開されて表示される。再生制御ボタンＭ５は、再生、停止、送り、戻しを行うボタンを備え、会議情報の時間的な再生制御を行い、再生の進捗は時間経過表示部Ｍ６に表示される。また、チャプタ再生制御ボタンＭ７は、会議時間中の再生において希望するチャプタを指定するために使用される。再生中のチャプタは、チャプタ進捗表示部Ｍ８に表示される。
【００５５】
（２Ｂ）会議閲覧情報画面の作成
以上のように構成された会議閲覧情報画面の作成手順について説明する。図１３はその処理手順と処理内容を示したフローチャートである。
ユーザ端末ＰＣ１〜ＰＣｎが通信ネットワークＮＷを介してサーバ装置ＳＶに接続された状態で、ユーザ端末ＰＣ１から会議情報の再生要求コマンドが送信されたとする。そうするとサーバ装置ＳＶのＣＰＵ１１は、ステップＳ１３ａからステップＳ１３ｆまでの処理をある単位時間で時刻が変化するごとに繰り返し行う。
【００５６】
まず、ステップＳ１３ｂにおいて時刻変化を検知すると、ステップＳ１３ｃにおいてサーバ装置ＳＶのＣＰＵ１１は、データメモリ１３の映像・音声データベース１３ｃから全体映像データを読み出し、全体表示エリアＭ１の表示内容をこの読み出された全体映像データに更新する。またそれと共に、映像・音声データベース１３ｃからボード映像データを読み出し、ボード表示エリアＭ２の表示内容をこの読み出されたボード映像データに更新する。そして、会議記録全体における検知した時刻の時間位置および該当するチャプタを検出し、検出された時間位置およびチャプタに基づいて、時間経過表示部Ｍ６およびチャプタ進捗表示部Ｍ８をそれぞれ更新する。
【００５７】
次にサーバ装置ＳＶのＣＰＵ１１は、ステップＳ１３ｄに移行し、カード位置データベース１３ｂにアクセスし、該時刻のカード位置情報が記憶されているかを検索する。該時刻がカード位置データベース１３ｂに存在しない場合はステップＳ１３ｂに移行し、次の時刻変化を待つ。一方、該時刻が存在する場合はステップＳ１３ｅに移行し、ここで以下のようにフォーカス表示パターンＭ２１の表示位置の更新処理と、それに伴うフォーカス表示エリアＭ３における注目する部分に含まれるカード画像の更新処理を実行し、さらに展開表示エリアＭ４におけるカード画像の更新処理を実行する。図１４は、その更新処理手順および処理内容を示すフローチャートである。
【００５８】
すなわち、まずステップＳ１４ａにおいてカード位置データベース１３ｂにアクセスし、該時刻におけるカードの位置情報を読み出す。そして、ステップ１４ｂにおいて、上記読み出されたカード位置情報をもとに、フォーカス表示パターンＭ２１の表示位置を移動する必要があるか否かを判定する。そして、移動する必要があると判定された場合には、ステップ１４ｃにより上記フォーカス表示パターンＭ２１の表示位置を新たな位置に移動させる。
【００５９】
例えば、位置が一定時間内に一定回数以上変化したカードが見つかった場合には、当該カードを会議の話題の中心にあるカードと見なし、このカードを中心とする所定範囲にフォーカス表示パターンＭ２１の表示位置を設定する。また、注目カードの位置が変化した場合には、当該カードの移動先を中心とする位置にフォーカス表示パターンＭ２１を移動させる。さらに、注目カードの位置が一定時間以上移動しないか、或いは消滅した場合には、注目カードを過去の一定時間内に移動した履歴のある他のカードに変更し、このカードを中心とする所定範囲にフォーカス表示パターンＭ２１の表示位置を移動させる。
【００６０】
続いてサーバ装置ＳＶのＣＰＵ１１は、ステップ１４ｄにおいて、上記フォーカス表示パターンＭ２１により囲まれた注目範囲内に含まれる各カードの画像データをカード画像データベース１３ａから選択的に読み出し、フォーカス表示エリアＭ３に表示させる。このとき、各カード画像の表示位置は、カード位置データベース１３ｂに記憶された該当するカード位置情報に従う。かくして、フォーカス表示エリアＭ３には、上記フォーカス表示パターンＭ２１の移動に追従した上で、当該フォーカス表示パターンＭ２１により囲まれた注目範囲に含まれる各カードの画像データが明瞭に拡大表示される。
【００６１】
次にサーバ装置ＳＶのＣＰＵ１１は、ステップＳ１４ｅにおいて、上記フォーカス表示パターンＭ２１により囲まれた注目範囲に含まれる各カード画像の中に、互いに重なり合うものがあるか否かを判定する。この判定は、カード位置データベース１３ｂに記憶されている重なりフラグにより行われる。すなわち、該当するカードの重なりフラグが“ＯＮ”であれば重なり有りと判定し、“ＮＵＬＬ”であれば重なり無しと判定する。
【００６２】
そして、重なり有りと判定した場合にはステップＳ１４ｆに移行し、カード画像データベース１３ａから重なり合っている各カードの画像データを読み出し、この読み出されたカード画像データを、ステップＳ１４ｇにより図１２に示すように展開表示エリアＭ４に並べて表示する。したがって、フォーカス表示エリアＭ３に表示された各カード画像の中に互いに重なり合うものが存在する場合でも、これらのカード画像に記載された意見の内容をもれなく閲覧者に提示することができる。なお、重なりフラグが“ＮＵＬＬ”の場合には、展開表示エリアＭ４へのカード画像データの表示は行われない。
【００６３】
（２Ｃ）閲覧操作
最後にユーザ端末ＰＣ１〜ＰＣｎにおいて、通信ネットワークＮＷを介して上記作成された会議情報を閲覧する動作について説明する。閲覧者は、予め閲覧者登録を行っているものとする。
まず、ユーザ端末ＰＣ１〜ＰＣｎは、通信ネットワークＮＷを介してサーバ装置ＳＶに対して閲覧者ＩＤ及びパスワードと共に閲覧要求コマンドを送信する。サーバ装置ＳＶは通信Ｉ／Ｆ１７により、上記送信された閲覧要求を受信し、閲覧者管理プログラム１４２ｅを実行する。この閲覧者管理プログラム１４２ｅに従いサーバ装置ＳＶのＣＰＵ１１は、先ず閲覧者データベース１３ｄにアクセスし、要求元の閲覧者ＩＤ及びパスワードにより閲覧者認証を行う。この認証が完了すると、サーバ装置ＳＶから要求元のユーザ端末ＰＣ１〜ＰＣｎに対し、上記のように作成された会議閲覧情報画面の表示データが通信ネットワークＮＷを介して配信され、ユーザ端末ＰＣ１〜ＰＣｎの表示装置に表示される。図１２は、ユーザ端末ＰＣ１〜ＰＣｎの表示部に表示された会議閲覧情報画面の一例である。
【００６４】
また、ユーザ端末ＰＣ１〜ＰＣｎにおいて、閲覧者がフォーカス表示パターンＭ２１を移動させるためにキーボードやマウスなどの入力装置を操作したとする。そうすると、上記入力操作情報がユーザ端末ＰＣ１〜ＰＣｎからサーバ装置ＳＶに送られ、この入力操作情報に応じてサーバ装置ＳＶは会議閲覧情報画面におけるフォーカス表示パターンＭ２１の位置を変化させる。このようにすると、サーバ装置ＳＶにより自動的に設定された注目範囲が、本来注目すべき範囲と異なっていても、注目範囲を閲覧者が任意に変更することができる。
【００６５】
また、ユーザ端末ＰＣ１〜ＰＣｎにおいて、閲覧者がチャプタ再生制御ボタンＭ７を操作して再生を希望するチャプタを指定した場合や、再生制御ボタンＭ５を操作して再生、停止、送り、戻しを指定すると、その旨の操作情報がユーザ端末ＰＣ１〜ＰＣｎからサーバ装置ＳＶへ送られる。サーバ装置ＳＶは、上記操作情報に応じて再生対象のチャプタを選択し、かつその会議映像データ及びボード映像データを再生、停止、送り、戻し制御する。したがって、閲覧者は会議期間中の必要な時間帯のみ、その映像データを選択的に再生して視聴することができる。
【００６６】
またこのときサーバ装置ＳＶは、上記閲覧者によるチャプタの選択履歴や、映像データの再生、停止、送り、戻し制御の履歴を、閲覧者ＩＤに対応付けて閲覧者データベース１３ｄに記憶する。このため、サーバ装置ＳＶでは、閲覧者ごとに会議内容の閲覧の進捗状況を管理することができ、上記管理されている履歴情報をもとにシステム運用者は各閲覧者の会議内容に対する理解度を把握することが可能となる。
【００６７】
以上述べたようにこの実施形態では、撮像記録されたボード映像データを閲覧者のユーザ端末ＰＣ１〜ＰＣｎに表示する際に、上記ボード映像データから検出されたボード１上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定し、この推定されたカードを含む注目範囲を示すフォーカス表示パターンＭ２１を上記ボード映像データに重ね合わせて表示するようにしている。したがって、閲覧者は会議のポイントを正確にかつ効率良く把握することが可能になる。
【００６８】
また、フォーカス表示パターンＭ２１により示される注目範囲に含まれるカード画像を、カード画像データベース１３ａから読み出してフォーカス表示エリアＭ３に拡大表示するようにしている。このため、閲覧者はボード映像データ中の注目範囲に含まれるカードに記載された意見の内容を明瞭に視認することが可能となる。これにより、全体画像の一覧性を確保しつつ、かつ注目範囲のカード画像に対しては高い視認性を保持することができる。
【００６９】
さらに、フォーカス表示パターンＭ２１により示される注目範囲に相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を展開表示エリアＭ４に展開表示するようにしている。このため、閲覧者は注目範囲内において重なった複数のカードの記載内容をもれなく確認することが可能となる。
【００７０】
さらに、ユーザ端末ＰＣ１〜ＰＣｎにおいて、閲覧者がキーボードやマウスの操作や、チャプタ再生制御ボタンＭ７の操作、再生制御ボタンＭ５の操作を行うことにより、フォーカス表示パターンＭ２１の表示位置を可変設定したり、チャプタの選択再生、映像データの再生、停止、送り、戻しを遠隔制御するようにしている。このようにすることで、閲覧者は自身が要求する最適な形態で会議情報の閲覧を行うことができる。
【００７１】
さらに、その際、閲覧者によるチャプタの選択履歴や、映像データの再生、停止、送り、戻し制御の履歴を、閲覧者ＩＤに対応付けて閲覧者データベース１３ｄに記憶するようにしている。このため、サーバ装置ＳＶでは、先に述べたように閲覧者ごとに会議内容の閲覧の進捗状況を管理することができ、上記管理されている履歴情報をもとにシステム運用者は各閲覧者の会議内容に対する理解度を把握することが可能となる。
【００７２】
なお、この発明は上記実施形態に限定されるものではない。例えば、サーバ装置ＳＶを会議情報の保存用のサーバ装置と配信用のサーバ装置とに分離して構成することも可能である。この場合、データメモリ１３には、保存用のサーバ装置と配信用のサーバ装置のどちらもアクセス可能に構成する。
【００７３】
また、前記実施形態では、サーバ装置ＳＶにおいて、ボード撮影装置ＶＩからの入力によりリアルタイムにカード位置データベース１３ｂの作成を行うようにしているが、データメモリ１３に保存された映像・音声データ１３ｄを読み出してカード位置データベース１３ｂを作成するようにしても良い。また、カード２１〜２ｉの撮像は会議終了後でも構わない。このようにすると、会議中にカード２１〜２ｉの撮像が行われないため、参加者は会議での議論に集中することが可能である。
【００７４】
さらに、閲覧者データベース１３ｄを利用して、会議情報の閲覧を中断した場合に、途中から再生することが可能である。また、閲覧が完了していない閲覧者にメールなどを送信して閲覧を促すことが可能である。
さらに、データメモリ１３に記憶されるカード画像データベース１３ａ、カード位置データベース１３ｂ、閲覧者データベース１３ｄの構成や記憶する項目、プログラムメモリ１４に格納される各プログラムの処理手順、処理内容についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
【００７５】
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００７６】
【図１】この発明に関わる会議情報管理システムの一実施形態を実現するシステムの概略構成図。
【図２】図１に示すシステムにおける会議情報の記録の様子を示す図。
【図３】図２に示すカードの構成を示す図。
【図４】図２に示すカードの第２の構成例を示す図。
【図５】図１に示すシステムにおける会議情報管理装置としてのサーバ装置の機能構成を示すブロック図。
【図６】図５に示すサーバ装置に設けられるカード画像データベースの構成を示す図。
【図７】図５に示すサーバ装置に設けられるカード位置データベースの構成を示す図。
【図８】図５に示すサーバ装置に設けられるカード閲覧者データベースの構成を示す図。
【図９】図５に示すサーバ装置によるカード画像登録の処理手順とその内容を示すフローチャート。
【図１０】図５に示すサーバ装置によるカード位置登録の処理手順とその内容を示すフローチャート。
【図１１】図５のカード位置検出プログラムおけるカード位置検出方法の一例を示す図。
【図１２】図１に示すシステムで使用されるユーザ端末に表示される会議閲覧情報画面の一例を示す図。
【図１３】図５に示すサーバ装置による会議閲覧情報画面データの作成手順とその処理内容を示すフローチャート。
【図１４】図５に示すサーバ装置による会議閲覧情報画面データ作成におけるフォーカス表示部および重なり展開部の更新手順とその処理内容を示すフローチャート。
【符号の説明】
【００７７】
ＳＶ…サーバ装置、ＶＩ…ボード撮像装置、ＣＡ…カード撮像装置、通信ネットワーク…ＮＷ、ＰＣ１〜ＰＣｎ…ユーザ端末、１…ボード、２１〜２ｉ、２１′〜２ｉ′…カード、２１Ａ，２１Ａ′…意見記入エリア、２１Ｂ，２１Ｂ′…バーコード、１１…ＣＰＵ、１２…バス、１３…データメモリ、１３ａ…カード画像データベース、１３ｂ…カード位置データベース、１３ｃ…映像・音声データベース、１３ｄ…閲覧者データベース、１４…プログラムメモリ、１４１ａ…カードＩＤ認識プログラム、１４１ｂ…カード画像登録プログラム、１４１ｃ…カード位置検出プログラム、１４１ｄ…カード位置登録プログラム、１４２ａ…フォーカス表示プログラム、１４２ｂ…重なり展開プログラム、１４２ｃ…再生制御プログラム、１４２ｄ…閲覧者登録プログラム、１４２ｅ…閲覧者管理プログラム、１５…ビデオ入力Ｉ／Ｆ、１６…カメラ入力Ｉ／Ｆ、１７…通信Ｉ／Ｆ、１０ｘ…ボード映像、２０１〜２０ｉ…カード画像、Ｍ１…全体表示エリア、Ｍ２…ボード表示エリア、Ｍ２１…フォーカス表示パターン、Ｍ２２…ポインタ、Ｍ３…フォーカス表示エリア、Ｍ４…展開表示エリア、Ｍ５…再生制御ボタン、Ｍ６…時間経過表示部、Ｍ７…チャプタ再生制御ボタン、Ｍ８…チャプタ進捗表示部。
【技術分野】
【０００１】
この発明は、会議内容の電子化および電子化された会議情報を閲覧するための会議情報管理システム、およびサーバ装置に関する。
【背景技術】
【０００２】
会議やワークショップの場において利用される意見集約法の１つとして、ＫＪ法が知られている。ＫＪ法は、ブレーンストーミング等で出されたアイディアや意見、又は各種調査の現場から収集された雑多な情報を１つずつ小さなカード（紙切れ）に書き込み、それらのカードの中から内容の近いもの同士を集めてグループ化してゆく作業の中で、テーマの解決に役立つヒントやひらめきを生み出していこうとするものである。
【０００３】
ＫＪ法の基本的な手順を以下に示す。はじめに、参加者は発想したアイディアや収集した情報などのデータを１つずつ１枚の小さなカードに書き込んでいく。次に、作成したカード群を机などに並べて、カードに書かれたデータが同類の内容であるカード同士を集めグループを作成する。また、作成した各グループには、その内容を要約した表札をつける。カードのグループ編成は、まず、小グループを作り、次に小グループを同士で中グループを、さらに中グループ同士で大グループを作成していく。このようにＫＪ法を使用すると、カードのグループ編成を繰り返しながら様々な意見を集約して、テーマ解決に役立つヒントを導き出すことが可能である（例えば、非特許文献１および非特許文献２参照。）。
【０００４】
ところで、最近上記ＫＪ法を使用した会議やワークショップにおいて、意見集約のプロセスを記録しておき、この記録された情報を必要に応じて再利用する試みがなされている。プロセスの記録手法としては、例えばビデオカメラを使用してカードのグループ化作業の過程を記録するものが使用される。このようにすると、例えば記録された意見集約のプロセスを時間的及び空間的に異なる場所（バーチャルな場）で閲覧可能にすることで、会議に参加できなかった人が会議の流れと内容を把握することができる。
【０００５】
【非特許文献１】独立行政法人 雇用・能力開発機構 生涯職業能力開発促進センター、“KJ法”、［online］、「Ability Garden (生涯職業能力開発促進センター・ホームページ)」、［平成１６年8月3日検索］、インターネット＜ＵＲＬ：http://nokai.ab-garden.ehdo.go.jp/giho/43.html＞
【０００６】
【非特許文献２】川喜田二郎著、「ＫＪ法−渾沌をして語らしめる」、中央公論社、１９８６年、ｐ．１２１−１６９
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところが、従来のシステムでは、記録された意見集約のプロセスをバーチャルな場で会議に参加できなかった人が閲覧する場合、記録されたプロセスを単に閲覧者の表示装置に表示させるものとなっている。このため、閲覧者にとっては会議の流れやポイントを把握し難く、情報伝達効率が悪いという問題があった。
【０００８】
この発明は上記事情に着目したもので、その目的とするところは、閲覧者が意見集約のプロセスを正確にかつ効率良く把握することを可能にした会議支援システムとそのサーバ装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するためにこの発明に係わる会議支援システムとそのサーバ装置及びプログラムは、撮像記録された会議画像を閲覧者の表示装置に表示する際に、上記会議画像から検出されたボード上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定する。そして、この推定されたカードを含む注目範囲を示すフォーカス表示パターンを上記会議画像に重ね合わせて表示させるようにしたものである。これにより、自動的に話題の中心になっている部分を追跡して表示されるため、閲覧者は会議における話題の中心を正確にかつ効率良く把握することが可能になる。
【００１０】
またこの発明は次のような各種構成を備えることも特徴とする。
第１の構成は、入力操作情報に応じて、フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを可変に設定するようにする。このように構成すると、例えば閲覧者またはシステムオペレータは、話題の中心が他にもあると判断した場合にフォーカス表示パターンにより示される注目範囲を任意に変化させることができる。
【００１１】
第２の構成は、フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、表示装置の第２の表示領域に拡大表示させるようにしたものである。これにより、全体画像の一覧性を確保しつつ、閲覧者は全体画像のうち注目範囲に含まれるカードの記載内容をより一層明瞭に視認することが可能となる。
【００１２】
第３の構成は、フォーカス表示パターンにより示される注目範囲に相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を表示装置の第３の表示領域に展開表示させるようにしている。このようにすると、閲覧者は注目範囲内の重ね合わされた複数のカードの記載内容をそれぞれ視認することが可能となる。よって、意見集約プロセスにおいて作成されたグループがどのような内容のカードの組み合わせで構成されているかを明瞭に把握することができる。
【００１３】
第４の構成は、表示装置に表示されている会議画像の会議期間全体における時間位置を検出し、検出された時間位置を表す会議経過表示情報を生成して表示させるように構成する。これにより、閲覧者は現在再生中の画像が会議全体の中でどの時間位置にあるものかを確認することができる。
【発明の効果】
【００１４】
要するにこの発明では、撮像記録された会議画像を閲覧者の表示装置に表示する際に、上記会議画像から検出されたボード上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定し、この推定されたカードを含む注目範囲を示すフォーカス表示パターンを上記会議画像に重ね合わせて表示させるようにしている。
【００１５】
したがってこの発明によれば、閲覧者が意見集約のプロセスを正確にかつ効率良く把握することを可能にした会議支援システムとそのサーバ装置及びプログラムを提供することができる。
【発明を実施するための最良の形態】
【００１６】
図１は、この発明に係わる会議支援システムの一実施形態を示す概略構成図である。このシステムは、サーバ装置ＳＶ、ボード撮像装置ＶＩ、カード撮像装置ＣＡ、通信ネットワークＮＷ、及びユーザ端末ＰＣ１〜ＰＣｎを備える。サーバ装置ＳＶは、会議情報管理装置としての機能を備えたもので、上記ボード撮像装置ＶＩにより撮像された映像データをケーブルを介して取り込む機能と、上記カード撮像装置ＣＡにより撮像された画像データをケーブルを介して取り込む機能とを備える。
【００１７】
ユーザ端末ＰＣ１〜ＰＣｎはパーソナル・コンピュータにより構成され、表示装置とキーボードやマウスなどの入力装置を備えている。これらのユーザ端末ＰＣ１〜ＰＣｎは、会議の閲覧者たるユーザがバーチャルな場で会議の模様を閲覧するための使用する。
【００１８】
通信ネットワークＮＷは、システムが例えば事業所内又はオフィス内に構築される場合であればＬＡＮ（Local Area Network）により構成される。一方、システムが複数の事業所やオフィスに跨って構成される場合には、インターネットに代表されるコンピュータ・ネットワークと、このコンピュータ・ネットワークとユーザ端末ＰＣ１〜ＰＣｎとの間を接続するための加入者網とから構成される。
【００１９】
図２は、図１に示すシステムにおける会議情報の記録の様子を示す図である。同図において、ボード１は、机上または壁などに備えられ、このボード１上においてＫＪ法等による意見集約のプロセスが実行される。このプロセスは、例えば意見を記入したカード２１〜２ｉをボード１上に配置し、これらのカード２１〜２ｉを参加者がボード１上で移動させて、記入された意見の近いもの同士でグループを作成することにより行われる。ボード１は、市販のホワイトボードや模造紙等でも良いし、会場の壁や机をそのまま利用しても構わない。
【００２０】
カード２１〜２ｉは、図３に示すように意見記入エリア２１Ａと、カード識別エリアとを備える。意見記入エリア２１Ａは、会議参加者がペンなどを用いて意見を記載する領域である。カード識別エリアには２次元バーコード２１Ｂが表示される。２次元バーコード２１Ｂは、カードごとに固有の個別識別情報（以下、カードＩＤと呼称する）を含み、カードに予め記載される。なお、２次元バーコード２１Ｂに代えて、図４に示すカード２１′〜２ｉ′ように１次元バーコード２１Ｂ′を使用することも可能である。また、カード２１〜２ｉは、ペンなどの筆記具を用いて意見が記入できるものであれば形状及び材質には制限はなく、例えば市販されている粘着剤付きの付箋紙などが利用できる。
【００２１】
ボード撮像装置ＶＩは例えば動画の撮像が可能なビデオカメラからなり、意見集約が行われるボード１全体を時間経過にしたがって撮像する。そして、この撮像により得られるボード映像データとディジタル音声データを、例えばＤＶケーブルなどのケーブルを介して接続されるサーバ装置ＳＶへ入力する。
【００２２】
カード撮像装置ＣＡは例えばディジタルスチルカメラにより構成され、カード２１〜２ｉの意見記入エリア２１Ａ及びカード識別エリアを一枚ずつ撮像する。そして、この撮像により得られたカード画像データを、例えばＵＳＢケーブルなどのケーブルを介して接続されるサーバ装置ＳＶへ入力する。
【００２３】
なお、上記ボード撮像装置ＶＩ及びカード撮像装置ＣＡが撮像されたボード映像データ及びカード画像データを記録媒体に記録する機能を備えている場合には、上記撮像により得られたボード映像データとディジタル音声データ、及びカード画像データを一旦上記記録媒体に記録し、この記録媒体をサーバ装置ＳＶのドライブにセットすることで、上記各データをサーバ装置ＳＶに取り込むようにしてもよい。
【００２４】
ところで、サーバ装置ＳＶは次のように構成される。図５は、その機能構成を示すブロック図である。
サーバ装置ＳＶは、マイクロプロセッサなどの中央処理ユニット（ＣＰＵ：Central Processing Unit）１１を備える。このＣＰＵ１１には、バス１２を介してデータメモリ１３およびプログラムメモリ１４が接続され、さらにビデオ入力インタフェース（ビデオ入力Ｉ／Ｆ）１５、カメラ入力インタフェース（カメラ入力Ｉ／Ｆ）１６、及び通信インタフェース（通信Ｉ／Ｆ）１７が接続されている。
【００２５】
ビデオ入力Ｉ／Ｆ１５は、ＣＰＵ１１制御の下、ボード撮像装置ＶＩからケーブルを介して送信されるボード映像データの受信処理を行う。カメラ入力Ｉ／Ｆ１６は、ＣＰＵ１１制御の下、カメラ撮像装置ＣＡからケーブルを介して送信されるカード画像データの受信処理を行う。通信Ｉ／Ｆ１７は、ＣＰＵ１１の制御の下、通信ネットワークＮＷを介してユーザ端末ＰＣ１〜ＰＣｎとの間で通信を行う。
【００２６】
データメモリ１３は、記憶媒体として例えばＲＡＭ又はハードディスクを使用したもので、データメモリ１３には、カード画像データベース１３ａ、カード位置データベース１３ｂ、映像・音声データベース１３ｃ、及び閲覧者データベース１３ｄが設けられる。
【００２７】
カード画像データベース１３ａには、上記カメラ入力Ｉ／Ｆ１６を介してカード撮像装置ＣＡから読み込まれたカード画像データが、予めカードに記載された２次元バーコード２１Ｂにより表されるカードＩＤに対応付けて記憶される。図６はその記憶結果の一例を示すもので、この例では各カード２１〜２ｉのカード画像２０１〜２０ｉを、カードＩＤ（Ｃ１〜Ｃｎ）に対応付けて記憶した場合を示している。
【００２８】
カード位置データベース１３ｂには、ボード１上のカード２１〜２ｉの状態変化、すなわち貼付、移動及び剥除などが行われた際のカードの位置情報が記憶される。この位置情報は、撮影時刻ごとに発行された時刻ＩＤ（Ｔ１〜Ｔｊ）と、その時刻、動作対象のカードＩＤ、カード位置、及びカードの重なりの有無を表す重なりフラグにより構成される。図７にその記憶結果の一例を示す。
【００２９】
映像・音声データベース１３ｃには、ボード撮像装置ＶＩからビデオ入力Ｉ／Ｆ１５を介して取り込まれたボード映像１０ｘが記憶される。
閲覧者データベース１３ｄには、閲覧者がユーザ端末ＰＣ１〜ＰＣｎを用いて入力した閲覧者情報が格納される。閲覧者情報は、閲覧者登録の際に発行される閲覧者ＩＤとパスワード、閲覧日時および閲覧の進捗状況とから構成される。図８にその記憶結果の一例を示す。
【００３０】
プログラムメモリ１４には、この発明に係わる制御プログラムとして、会議情報保存用プログラム群と、会議情報閲覧用プログラム群が格納される。会議情報保存用プログラム群は、カードＩＤ認識プログラム１４１ａ、カード画像登録プログラム１４１ｂ、カード位置検出プログラム１４１ｃ及びカード位置登録プログラム１４１ｄにより構成される。また、会議情報閲覧用プログラム群は、フォーカス表示プログラム１４２ａ、重なり展開プログラム１４２ｂ、再生制御プログラム１４２ｃ、１４２ｄ閲覧者登録プログラム、及び閲覧者管理プログラム１４２ｅにより構成される。
【００３１】
カードＩＤ認識プログラム１４１ａは、撮像されたカード画像２０１〜２０ｉ及びボード映像１０ｘの各フレームから、カードに記載された２次元バーコード情報２１Ｂを解読し、カードＩＤを認識する。
カード画像登録プログラム１４１ｂは、カード撮像装置ＣＡからカメラ入力Ｉ／Ｆ１６を介して取り込んだカード画像２０１〜２０ｉを、上記カードＩＤ認識プログラム１４１ａにより認識されたカードＩＤに対応付けてカード画像データベース１３ａに記憶させる。
【００３２】
カード位置検出プログラム１４１ｃは、ボード撮像装置ＶＩからビデオ入力Ｉ／Ｆ１５を介して取り込んだボード映像１０ｘのフレームごとに、当該フレームに含まれるカード画像２０１〜２０ｉのバーコードを認識する。そして、この認識されたバーコードの位置をもとにボード映像１０ｘ上におけるカード画像２０１〜２０ｉの位置を検出する。
【００３３】
カード位置登録プログラム１４１ｄは、ボード映像１０ｘのフレームごとに、上記カード位置検出プログラム１４１ｃにより検出されたカード画像２０１〜２０ｉの位置を、１つ前のフレームにおいて検出されたカード画像２０１〜２０ｉの位置と比較する。そして、位置変化が検出されたカード画像２０１〜２０ｉについてその変化履歴情報を生成してカード位置データベース１３ｂに記憶する。変化履歴情報は、当該カード画像のフレーム撮影時刻（タイムスタンプ）ごとに発行された時刻ＩＤと、上記カードＩＤと、検出された位置情報と、重なりフラグとから構成される。
【００３４】
フォーカス表示プログラム１４２ａは、カード位置データベース１３ｂに記憶された各カードの変化履歴情報をもとに、会議において話題の中心になっているカードを推定する。そして、推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを、ボード映像に重ね合わせてボード画像表示エリアに表示させる。
【００３５】
またフォーカス表示プログラム１４２ａは、ユーザ端末ＰＣ１〜ＰＣｎにおいて閲覧者によりフォーカス表示パターンの表示位置を変更するための操作が行われた場合に、この操作に応じて上記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも１つを変更する。
【００３６】
さらにフォーカス表示プログラム１４２ａは、上記フォーカス表示パターンにより示される注目範囲で囲まれた部分に含まれるカードの画像をカード画像データベース１３ａから読み出す。そして、読み出したカードの画像をカード位置データベース１３ｂに記憶された位置情報に基づいて上記ボード表示エリアとは別のフォーカス表示エリアに拡大表示する。また、このフォーカス表示エリアには拡大／縮小ボタンを表示し、閲覧者がこの拡大／縮小ボタンを操作した場合に、上記部分画像の表示サイズを変更する機能も有する。
【００３７】
重なり展開プログラム１４２ｂは、上記フォーカス表示パターンにより示される注目範囲内において、相互に重なり合う複数のカードが含まれているか否かを判定する。そして、相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を上記カード画像データベース１３ａから選択的に読み出して、展開表示エリアにそれぞれ表示する。
【００３８】
再生制御プログラム１４２ｃは、ユーザ端末ＰＣ１〜ＰＣｎから通信ネットワークＮＷを介して送信される再生制御コマンドに応じて閲覧画面を作成して配信する。再生制御コマンドには、再生、停止、送り及び戻しを指定するコマンドも含まれる。また、会議時間をある時間単位で複数のチャプタに分割し、これらのチャプタごとに再生制御を行うチャプタ再生機能も備える。
【００３９】
閲覧者登録プログラム１４２ｄは、サーバ装置ＳＶに記憶されている会議情報の閲覧者を管理するための閲覧者登録制御機能を有する。サーバ装置ＳＶは、ユーザ端末ＰＣ１〜ＰＣｎから送信された閲覧者登録要求を通信ＮＷを介して受信すると、閲覧者ＩＤ及びパスワードを発行して、要求元のユーザ端末ＰＣ１〜ＰＣｎに送信する。また、発行された閲覧者ＩＤ及びパスワードをデータメモリ１３に設けられた閲覧者データベース１３ｄに格納する。
【００４０】
閲覧者管理プログラム１４２ｅは、閲覧者の認証、及び会議情報の閲覧の進捗管理などを行う。閲覧者の認証は、ユーザ端末ＰＣ１〜ＰＣｎから上記閲覧者登録プログラム１４２ｄにより発行された閲覧者ＩＤ及びパスワードを送信して行う。サーバ装置ＳＶは、受信した閲覧者ＩＤ及びパスワードを閲覧者データベース１３ｄに格納された閲覧者ＩＤ及びパスワードと照合し、両者が合致すれば会議情報の閲覧を開始する。また、閲覧の進捗管理は、閲覧者ごとに閲覧日時と閲覧進捗を閲覧者データベース１３ｄに記憶して行われる。閲覧者がユーザ端末ＰＣ１〜ＰＣｎから会議情報を閲覧すると、閲覧日時および進捗が自動的に記憶される。閲覧されていない場合は、閲覧日時および進捗にそれぞれ“ＮＵＬＬ”が格納される。
【００４１】
次に、以上のように構成された会議支援システムにおけるサーバ装置ＳＶの動作を説明する。
（１）会議情報の保存
（１Ａ）カード画像登録処理
会議の管理者は、例えば会議の開始に先立ち、カード撮像装置ＣＡを使用して意見が記載されたカード２１〜２ｉをそれぞれ撮像する。この撮像により得られたカード画像データ２０１〜２０ｉはケーブルを介してサーバ装置ＳＶに送られる。
【００４２】
サーバ装置ＳＶは、上記カード画像データ２０１〜２０ｉが送られると、次のようにカード画像登録処理を実行する。図６はその処理手順と処理内容を示すフローチャートである。
すなわち、先ずステップＳ９ａにおいて、カード画像２０１〜２０ｉをカメラ入力Ｉ／Ｆ１６を介して取り込み、データメモリ１３内の受信バッファに保存する。次にステップＳ９ｂによりカードＩＤ認識プログラム１４ａを実行し、上記カード画像２０１〜２０ｉに含まれる２次元バーコードを解読することによりカードＩＤを認識する。そして、ステップＳ９ｃにより、上記認識されたカードＩＤに対応付けて、上記カード画像２０１〜２０ｉをカード画像データベース１３ａに格納する。この結果、カード画像データベース１３ａには、例えば図６に示すようにカードＩＤ（Ｃ１〜Ｃｎ）に対応付けて各カード２１〜２ｉのカード画像データ２０１〜２０ｉがもれなく記憶される。
【００４３】
（１Ｂ）映像・音声データ記憶処理
さて、会議が開始されると、その模様が会議の開始から終了まで、ボード撮像装置ＶＩにより連続的に撮像される。このときの撮像範囲は、ボード１を中心にその周辺に存在する会議参加者が含まれるように設定される。上記撮像により得られたボード映像１０ｘ及び音声データは、ケーブルを介してサーバ装置ＳＶに送られる。そして、このボード映像１０ｘ及び音声データは、サーバ装置ＳＶにおいてビデオ入力Ｉ／Ｆ１５により受信されたのち、データメモリ１３に転送されてその映像・音声データベース１３ｃに蓄積される。
【００４４】
（１Ｃ）カード位置データベース作成処理
サーバ装置ＳＶは、上記ボード映像１０ｘの蓄積期間中、或いは蓄積終了後に、次のようにカード位置データベース作成処理を実行する。図１０はその処理手順と処理内容を示すフローチャートである。
すなわち、ステップＳ１０ａにおいて映像・音声データベース１３ｃからボード映像１０ｘをフレーム単位で読み出し、この読み出されたフレームごとにステップＳ１０ｂからステップＳ１０ｌまでの処理を繰り返し行う。
【００４５】
まずステップＳ１０ｃにより、ボード映像１０ｘのあるフレームに対しカードＩＤ認識プログラム１４ａを実行することにより、当該フレームに含まれるすべてのカードの２次元バーコードを解読してカードＩＤを認識する。そして、ステップＳ１０ｄにより、上記認識されたすべての２次元バーコードに対してカード位置検出プログラム１４１ｂを実行し、上記フレームに含まれるカード画像の位置をすべて検出する。
【００４６】
位置の検出は、例えば図１１に示すように行われる。すなわち、ボード映像１０ｘにおけるボード１に基点を設定し、基点から２次元バーコードまでのＸ方向のピクセル数およびＹ方向のピクセル数を算出する。算出したＸ方向のピクセル数およびＹ方向のピクセル数をカード２０１の位置情報として採用する。ここでは、２次元座標を利用して位置情報の算出を行ったが、２次元に限らず３次元座標系を利用することも可能であり、カード位置が検出できる手法であれば如何なる手法を採用しても構わない。
【００４７】
次にサーバ装置ＳＶは、ステップＳ１０ｅからステップＳ１０ｋにおいて、当該フレームおよび１つ前のフレームに含まれるカード画像２０１〜２０ｉについて位置の比較を行う。はじめにステップＳ１０ｆにおいてカード位置の変化の判定を行う。ここで、カードの位置変化とは、新規カードの追加、移動及び消滅とする。カード２１〜２ｉの追加、移動が検出された場合、続いてステップＳ１０ｈに移行し、１つ前のフレームにおいて同じ場所に既にカードが存在していたか否かを判定する。つまり、複数のカードの重なりが発生したか否かを判定する。なお、この判定では、バーコードが読み取れない程に完全に重なりあった場合と、既存カードの一部に新たなカードが重なった場合の両方が検出される。
【００４８】
上記判定の結果、複数のカードの重なりが検出された場合には、ステップＳ１０ｉにより重なりフラグをＯＮに設定する。そして、ステップＳ１０ｊにおいて、例えば図７の時刻ＩＤ（Ｔ３）のように、当該フレームの撮影時刻（タイムスタンプ）、そのカードＩＤとカード位置、および重なりフラグをＯＮにしてカード位置データベース１３ｂに記憶する。
【００４９】
これに対し、ステップＳ１０ｈの判定において重なりが検出されない場合には、ステップＳ１０ｊに移行する。そして、ステップＳ１０ｊにおいて、例えば図７の時刻ＩＤ（Ｔ１，Ｔ２）のように、当該フレームの撮影時刻、そのカードＩＤとカード位置、および重なりフラグを“ＮＵＬＬ”にしてカード位置データベース１３ｂに記憶する。
【００５０】
一方、ステップＳ１０ｆの判定においてカード２１〜２ｉの消滅が検出された場合には、ステップＳ１０ｇに移行し、ある一定時間が経過しても当該カードが検出されないかどうかを判定する。この判定は、例えば会議の参加者やカードを移動する手が２次元バーコードを一時的に隠してしまった場合を、カードの消滅として誤判定しないようにするために行われる。上記ステップＳ１０ｇにおいて、当該カードが検出されない状態がある一定時間続くと、ステップＳ１０ｊに移行して、例えば図７の時刻ＩＤ（Ｔ４）のように、当該フレームの撮影時刻、そのカードＩＤ、およびカード位置を“ＮＵＬＬ”に設定してカード位置データベース１３ｂに記憶する。
【００５１】
以後、ボード映像１０ｘのすべてのフレームについて以上述べた処理が繰り返し実行され、この結果会議の開始時点から終了時点までのカード状態の変化履歴を表す情報が記憶される。図７にその記憶結果の一例を示す。
（２）会議情報の配信
次に、上記作成されたカード画像データベース１３ａ、カード位置データベース１３ｂを利用して、会議情報閲覧画面を作成し、この作成した会議情報を通信ネットワークＮＷを介してユーザ端末ＰＣ１〜ＰＣｎに配信し表示させる動作について説明する。
【００５２】
（２Ａ）会議情報閲覧画面の構成
図１２は、ユーザ端末ＰＣ１〜ＰＣｎに表示される会議閲覧画面の一例を示す図である。この会議閲覧画面は、全体表示エリアＭ１、ボード表示エリアＭ２、フォーカス表示エリアＭ３、展開表示エリアＭ４、再生制御ボタンＭ５、時間経過表示部Ｍ６、チャプタ再生制御ボタンＭ７、及びチャプタ進捗表示部Ｍ８を備える。
【００５３】
全体表示エリアＭ１には、ボード撮像装置ＶＩで撮像された会議場全体の映像データが表示される。ボード表示エリアＭ２には、上記会議場全体の映像データのうちのボード１上を撮像したボード映像データが表示される。また、このボード映像データには、注目範囲を示すフォーカス表示パターンＭ２１が重ねられて表示される。このフォーカス表示パターンＭ２１は、マウスでポインタＭ２２を操作することにより任意に移動可能である。フォーカス表示エリアＭ３には、フォーカス表示パターンＭ２１に囲まれた注目範囲内の部分に含まれるカード画像２０１〜２０ｉがカード位置データベース１３ｂに記憶された位置情報に基づいて表示される。またこのフォーカス表示エリアＭ３には、当該フォーカス表示エリアＭ３に表示される画像の表示サイズを拡大／縮小するためのボタン３１，３２が表示される。
【００５４】
展開表示エリアＭ４には、例えばカード画像２０１〜２０３のように重なっているカードの内容を示すカード画像が展開されて表示される。再生制御ボタンＭ５は、再生、停止、送り、戻しを行うボタンを備え、会議情報の時間的な再生制御を行い、再生の進捗は時間経過表示部Ｍ６に表示される。また、チャプタ再生制御ボタンＭ７は、会議時間中の再生において希望するチャプタを指定するために使用される。再生中のチャプタは、チャプタ進捗表示部Ｍ８に表示される。
【００５５】
（２Ｂ）会議閲覧情報画面の作成
以上のように構成された会議閲覧情報画面の作成手順について説明する。図１３はその処理手順と処理内容を示したフローチャートである。
ユーザ端末ＰＣ１〜ＰＣｎが通信ネットワークＮＷを介してサーバ装置ＳＶに接続された状態で、ユーザ端末ＰＣ１から会議情報の再生要求コマンドが送信されたとする。そうするとサーバ装置ＳＶのＣＰＵ１１は、ステップＳ１３ａからステップＳ１３ｆまでの処理をある単位時間で時刻が変化するごとに繰り返し行う。
【００５６】
まず、ステップＳ１３ｂにおいて時刻変化を検知すると、ステップＳ１３ｃにおいてサーバ装置ＳＶのＣＰＵ１１は、データメモリ１３の映像・音声データベース１３ｃから全体映像データを読み出し、全体表示エリアＭ１の表示内容をこの読み出された全体映像データに更新する。またそれと共に、映像・音声データベース１３ｃからボード映像データを読み出し、ボード表示エリアＭ２の表示内容をこの読み出されたボード映像データに更新する。そして、会議記録全体における検知した時刻の時間位置および該当するチャプタを検出し、検出された時間位置およびチャプタに基づいて、時間経過表示部Ｍ６およびチャプタ進捗表示部Ｍ８をそれぞれ更新する。
【００５７】
次にサーバ装置ＳＶのＣＰＵ１１は、ステップＳ１３ｄに移行し、カード位置データベース１３ｂにアクセスし、該時刻のカード位置情報が記憶されているかを検索する。該時刻がカード位置データベース１３ｂに存在しない場合はステップＳ１３ｂに移行し、次の時刻変化を待つ。一方、該時刻が存在する場合はステップＳ１３ｅに移行し、ここで以下のようにフォーカス表示パターンＭ２１の表示位置の更新処理と、それに伴うフォーカス表示エリアＭ３における注目する部分に含まれるカード画像の更新処理を実行し、さらに展開表示エリアＭ４におけるカード画像の更新処理を実行する。図１４は、その更新処理手順および処理内容を示すフローチャートである。
【００５８】
すなわち、まずステップＳ１４ａにおいてカード位置データベース１３ｂにアクセスし、該時刻におけるカードの位置情報を読み出す。そして、ステップ１４ｂにおいて、上記読み出されたカード位置情報をもとに、フォーカス表示パターンＭ２１の表示位置を移動する必要があるか否かを判定する。そして、移動する必要があると判定された場合には、ステップ１４ｃにより上記フォーカス表示パターンＭ２１の表示位置を新たな位置に移動させる。
【００５９】
例えば、位置が一定時間内に一定回数以上変化したカードが見つかった場合には、当該カードを会議の話題の中心にあるカードと見なし、このカードを中心とする所定範囲にフォーカス表示パターンＭ２１の表示位置を設定する。また、注目カードの位置が変化した場合には、当該カードの移動先を中心とする位置にフォーカス表示パターンＭ２１を移動させる。さらに、注目カードの位置が一定時間以上移動しないか、或いは消滅した場合には、注目カードを過去の一定時間内に移動した履歴のある他のカードに変更し、このカードを中心とする所定範囲にフォーカス表示パターンＭ２１の表示位置を移動させる。
【００６０】
続いてサーバ装置ＳＶのＣＰＵ１１は、ステップ１４ｄにおいて、上記フォーカス表示パターンＭ２１により囲まれた注目範囲内に含まれる各カードの画像データをカード画像データベース１３ａから選択的に読み出し、フォーカス表示エリアＭ３に表示させる。このとき、各カード画像の表示位置は、カード位置データベース１３ｂに記憶された該当するカード位置情報に従う。かくして、フォーカス表示エリアＭ３には、上記フォーカス表示パターンＭ２１の移動に追従した上で、当該フォーカス表示パターンＭ２１により囲まれた注目範囲に含まれる各カードの画像データが明瞭に拡大表示される。
【００６１】
次にサーバ装置ＳＶのＣＰＵ１１は、ステップＳ１４ｅにおいて、上記フォーカス表示パターンＭ２１により囲まれた注目範囲に含まれる各カード画像の中に、互いに重なり合うものがあるか否かを判定する。この判定は、カード位置データベース１３ｂに記憶されている重なりフラグにより行われる。すなわち、該当するカードの重なりフラグが“ＯＮ”であれば重なり有りと判定し、“ＮＵＬＬ”であれば重なり無しと判定する。
【００６２】
そして、重なり有りと判定した場合にはステップＳ１４ｆに移行し、カード画像データベース１３ａから重なり合っている各カードの画像データを読み出し、この読み出されたカード画像データを、ステップＳ１４ｇにより図１２に示すように展開表示エリアＭ４に並べて表示する。したがって、フォーカス表示エリアＭ３に表示された各カード画像の中に互いに重なり合うものが存在する場合でも、これらのカード画像に記載された意見の内容をもれなく閲覧者に提示することができる。なお、重なりフラグが“ＮＵＬＬ”の場合には、展開表示エリアＭ４へのカード画像データの表示は行われない。
【００６３】
（２Ｃ）閲覧操作
最後にユーザ端末ＰＣ１〜ＰＣｎにおいて、通信ネットワークＮＷを介して上記作成された会議情報を閲覧する動作について説明する。閲覧者は、予め閲覧者登録を行っているものとする。
まず、ユーザ端末ＰＣ１〜ＰＣｎは、通信ネットワークＮＷを介してサーバ装置ＳＶに対して閲覧者ＩＤ及びパスワードと共に閲覧要求コマンドを送信する。サーバ装置ＳＶは通信Ｉ／Ｆ１７により、上記送信された閲覧要求を受信し、閲覧者管理プログラム１４２ｅを実行する。この閲覧者管理プログラム１４２ｅに従いサーバ装置ＳＶのＣＰＵ１１は、先ず閲覧者データベース１３ｄにアクセスし、要求元の閲覧者ＩＤ及びパスワードにより閲覧者認証を行う。この認証が完了すると、サーバ装置ＳＶから要求元のユーザ端末ＰＣ１〜ＰＣｎに対し、上記のように作成された会議閲覧情報画面の表示データが通信ネットワークＮＷを介して配信され、ユーザ端末ＰＣ１〜ＰＣｎの表示装置に表示される。図１２は、ユーザ端末ＰＣ１〜ＰＣｎの表示部に表示された会議閲覧情報画面の一例である。
【００６４】
また、ユーザ端末ＰＣ１〜ＰＣｎにおいて、閲覧者がフォーカス表示パターンＭ２１を移動させるためにキーボードやマウスなどの入力装置を操作したとする。そうすると、上記入力操作情報がユーザ端末ＰＣ１〜ＰＣｎからサーバ装置ＳＶに送られ、この入力操作情報に応じてサーバ装置ＳＶは会議閲覧情報画面におけるフォーカス表示パターンＭ２１の位置を変化させる。このようにすると、サーバ装置ＳＶにより自動的に設定された注目範囲が、本来注目すべき範囲と異なっていても、注目範囲を閲覧者が任意に変更することができる。
【００６５】
また、ユーザ端末ＰＣ１〜ＰＣｎにおいて、閲覧者がチャプタ再生制御ボタンＭ７を操作して再生を希望するチャプタを指定した場合や、再生制御ボタンＭ５を操作して再生、停止、送り、戻しを指定すると、その旨の操作情報がユーザ端末ＰＣ１〜ＰＣｎからサーバ装置ＳＶへ送られる。サーバ装置ＳＶは、上記操作情報に応じて再生対象のチャプタを選択し、かつその会議映像データ及びボード映像データを再生、停止、送り、戻し制御する。したがって、閲覧者は会議期間中の必要な時間帯のみ、その映像データを選択的に再生して視聴することができる。
【００６６】
またこのときサーバ装置ＳＶは、上記閲覧者によるチャプタの選択履歴や、映像データの再生、停止、送り、戻し制御の履歴を、閲覧者ＩＤに対応付けて閲覧者データベース１３ｄに記憶する。このため、サーバ装置ＳＶでは、閲覧者ごとに会議内容の閲覧の進捗状況を管理することができ、上記管理されている履歴情報をもとにシステム運用者は各閲覧者の会議内容に対する理解度を把握することが可能となる。
【００６７】
以上述べたようにこの実施形態では、撮像記録されたボード映像データを閲覧者のユーザ端末ＰＣ１〜ＰＣｎに表示する際に、上記ボード映像データから検出されたボード１上におけるカードの状態変化を表す情報をもとに会議において話題の中心になっているカードを推定し、この推定されたカードを含む注目範囲を示すフォーカス表示パターンＭ２１を上記ボード映像データに重ね合わせて表示するようにしている。したがって、閲覧者は会議のポイントを正確にかつ効率良く把握することが可能になる。
【００６８】
また、フォーカス表示パターンＭ２１により示される注目範囲に含まれるカード画像を、カード画像データベース１３ａから読み出してフォーカス表示エリアＭ３に拡大表示するようにしている。このため、閲覧者はボード映像データ中の注目範囲に含まれるカードに記載された意見の内容を明瞭に視認することが可能となる。これにより、全体画像の一覧性を確保しつつ、かつ注目範囲のカード画像に対しては高い視認性を保持することができる。
【００６９】
さらに、フォーカス表示パターンＭ２１により示される注目範囲に相互に重なり合う複数のカードが含まれている場合に、この重なり合う複数のカードの画像を展開表示エリアＭ４に展開表示するようにしている。このため、閲覧者は注目範囲内において重なった複数のカードの記載内容をもれなく確認することが可能となる。
【００７０】
さらに、ユーザ端末ＰＣ１〜ＰＣｎにおいて、閲覧者がキーボードやマウスの操作や、チャプタ再生制御ボタンＭ７の操作、再生制御ボタンＭ５の操作を行うことにより、フォーカス表示パターンＭ２１の表示位置を可変設定したり、チャプタの選択再生、映像データの再生、停止、送り、戻しを遠隔制御するようにしている。このようにすることで、閲覧者は自身が要求する最適な形態で会議情報の閲覧を行うことができる。
【００７１】
さらに、その際、閲覧者によるチャプタの選択履歴や、映像データの再生、停止、送り、戻し制御の履歴を、閲覧者ＩＤに対応付けて閲覧者データベース１３ｄに記憶するようにしている。このため、サーバ装置ＳＶでは、先に述べたように閲覧者ごとに会議内容の閲覧の進捗状況を管理することができ、上記管理されている履歴情報をもとにシステム運用者は各閲覧者の会議内容に対する理解度を把握することが可能となる。
【００７２】
なお、この発明は上記実施形態に限定されるものではない。例えば、サーバ装置ＳＶを会議情報の保存用のサーバ装置と配信用のサーバ装置とに分離して構成することも可能である。この場合、データメモリ１３には、保存用のサーバ装置と配信用のサーバ装置のどちらもアクセス可能に構成する。
【００７３】
また、前記実施形態では、サーバ装置ＳＶにおいて、ボード撮影装置ＶＩからの入力によりリアルタイムにカード位置データベース１３ｂの作成を行うようにしているが、データメモリ１３に保存された映像・音声データ１３ｄを読み出してカード位置データベース１３ｂを作成するようにしても良い。また、カード２１〜２ｉの撮像は会議終了後でも構わない。このようにすると、会議中にカード２１〜２ｉの撮像が行われないため、参加者は会議での議論に集中することが可能である。
【００７４】
さらに、閲覧者データベース１３ｄを利用して、会議情報の閲覧を中断した場合に、途中から再生することが可能である。また、閲覧が完了していない閲覧者にメールなどを送信して閲覧を促すことが可能である。
さらに、データメモリ１３に記憶されるカード画像データベース１３ａ、カード位置データベース１３ｂ、閲覧者データベース１３ｄの構成や記憶する項目、プログラムメモリ１４に格納される各プログラムの処理手順、処理内容についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
【００７５】
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００７６】
【図１】この発明に関わる会議情報管理システムの一実施形態を実現するシステムの概略構成図。
【図２】図１に示すシステムにおける会議情報の記録の様子を示す図。
【図３】図２に示すカードの構成を示す図。
【図４】図２に示すカードの第２の構成例を示す図。
【図５】図１に示すシステムにおける会議情報管理装置としてのサーバ装置の機能構成を示すブロック図。
【図６】図５に示すサーバ装置に設けられるカード画像データベースの構成を示す図。
【図７】図５に示すサーバ装置に設けられるカード位置データベースの構成を示す図。
【図８】図５に示すサーバ装置に設けられるカード閲覧者データベースの構成を示す図。
【図９】図５に示すサーバ装置によるカード画像登録の処理手順とその内容を示すフローチャート。
【図１０】図５に示すサーバ装置によるカード位置登録の処理手順とその内容を示すフローチャート。
【図１１】図５のカード位置検出プログラムおけるカード位置検出方法の一例を示す図。
【図１２】図１に示すシステムで使用されるユーザ端末に表示される会議閲覧情報画面の一例を示す図。
【図１３】図５に示すサーバ装置による会議閲覧情報画面データの作成手順とその処理内容を示すフローチャート。
【図１４】図５に示すサーバ装置による会議閲覧情報画面データ作成におけるフォーカス表示部および重なり展開部の更新手順とその処理内容を示すフローチャート。
【符号の説明】
【００７７】
ＳＶ…サーバ装置、ＶＩ…ボード撮像装置、ＣＡ…カード撮像装置、通信ネットワーク…ＮＷ、ＰＣ１〜ＰＣｎ…ユーザ端末、１…ボード、２１〜２ｉ、２１′〜２ｉ′…カード、２１Ａ，２１Ａ′…意見記入エリア、２１Ｂ，２１Ｂ′…バーコード、１１…ＣＰＵ、１２…バス、１３…データメモリ、１３ａ…カード画像データベース、１３ｂ…カード位置データベース、１３ｃ…映像・音声データベース、１３ｄ…閲覧者データベース、１４…プログラムメモリ、１４１ａ…カードＩＤ認識プログラム、１４１ｂ…カード画像登録プログラム、１４１ｃ…カード位置検出プログラム、１４１ｄ…カード位置登録プログラム、１４２ａ…フォーカス表示プログラム、１４２ｂ…重なり展開プログラム、１４２ｃ…再生制御プログラム、１４２ｄ…閲覧者登録プログラム、１４２ｅ…閲覧者管理プログラム、１５…ビデオ入力Ｉ／Ｆ、１６…カメラ入力Ｉ／Ｆ、１７…通信Ｉ／Ｆ、１０ｘ…ボード映像、２０１〜２０ｉ…カード画像、Ｍ１…全体表示エリア、Ｍ２…ボード表示エリア、Ｍ２１…フォーカス表示パターン、Ｍ２２…ポインタ、Ｍ３…フォーカス表示エリア、Ｍ４…展開表示エリア、Ｍ５…再生制御ボタン、Ｍ６…時間経過表示部、Ｍ７…チャプタ再生制御ボタン、Ｍ８…チャプタ進捗表示部。
【特許請求の範囲】
【請求項１】
それぞれ意見が記載された複数のカードをボード上で移動させて意見の内容が類似するもの同士でグループ化する作業を繰り返すことで意見集約を行う手法を採用した会議を支援する会議支援システムであって、
会議期間中に、前記ボード上における複数のカードの移動を時系列的に撮像する第１の撮像装置と、
画像を表示可能な表示装置と、
前記第１の撮像装置及び表示装置のうち少なくとも表示装置に対し通信回線を介して接続可能なサーバ装置と
を具備し、
前記サーバ装置は、
前記第１の撮像装置により撮像された会議画像を取り込んで第１の記憶手段に蓄積する手段と、
前記第１の記憶手段に蓄積された会議画像をもとに前記ボード上におけるカードの状態変化を検出し、この検出された状態変化を表す変化履歴情報を第２の記憶手段に記憶する手段と、
前記第１の記憶手段に蓄積された会議画像を読み出して、前記表示装置の第１の表示領域に表示させる手段と、
前記第２の記憶手段に記憶された変化履歴情報をもとに、会議において話題の中心になっているカードを推定する手段と、
前記推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを前記会議画像に重ね合わせて前記第１の表示領域に表示させる手段と
を備えることを特徴とする会議支援システム。
【請求項２】
前記サーバ装置は、
会議閲覧者による入力操作を受け付け、この入力操作に応じて前記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを変化させる手段を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項３】
前記サーバ装置は、
前記会議画像のうち、前記フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、前記表示装置の第２の表示領域に拡大表示させる手段を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項４】
前記複数のカードの意見が記載された面をそれぞれ撮像する第２の撮像装置を、さらに具備し、
かつ前記サーバ装置は、
前記第２の撮像装置により撮像された複数のカードの画像を取り込んで第３の記憶手段に記憶する手段と、
前記フォーカス表示パターンにより示される注目範囲に、相互に重なり合う複数のカードが含まれているか否かを判定する手段と、
前記相互に重なり合う複数のカードが含まれていると判定された場合に、この重なり合う複数のカードの画像を前記第３の記憶手段から選択的に読み出して前記表示装置の第３の表示領域に展開表示させる手段と
を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項５】
前記表示装置に表示されている会議画像の会議期間全体における時間位置を検出する手段と、
前記検出された時間位置を表す会議経過表示情報を生成し、この生成された会議経過表示情報を前記表示装置に表示させる手段と
を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項６】
それぞれ意見が記載された複数のカードをボード上で移動させて意見の内容が類似するもの同士でグループ化する作業を繰り返すことで意見集約を行う手法を採用した会議を支援するシステムで使用されるサーバ装置であって、
会議期間中に前記ボード上における複数のカードの移動を時系列的に撮像して得られた会議画像を取り込んで第１の記憶手段に蓄積する手段と、
前記第１の記憶手段に蓄積された会議画像をもとに前記ボード上におけるカードの状態変化を検出し、この検出された状態変化を表す変化履歴情報を第２の記憶手段に記憶する手段と、
前記第１の記憶手段に蓄積された会議画像を読み出し、この読み出された会議画像を表示装置の第１の表示領域に表示させるべく前記表示装置へ出力する手段と、
前記第２の記憶手段に記憶された変化履歴情報をもとに、会議において話題の中心になっているカードを推定する手段と、
前記推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを、前記会議画像に重ね合わせて前記第１の表示領域に表示させるべく前記表示装置へ出力する手段と
を具備することを特徴とするサーバ装置。
【請求項７】
会議閲覧者による入力操作を受け付け、この入力操作に応じて前記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを変化させる手段を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項８】
前記会議画像のうち、前記フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、前記表示装置の第２の表示領域に拡大表示させるべく前記表示装置へ出力する手段を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項９】
前記複数のカードの意見が記載された面をそれぞれ撮像して得られたカード画像を取り込んで第３の記憶手段に記憶する手段と、
前記フォーカス表示パターンにより示される注目範囲に、相互に重なり合う複数のカードが含まれているか否かを判定する手段と、
前記相互に重なり合う複数のカードが含まれていると判定された場合に、この重なり合う複数のカードの画像を前記第３の記憶手段から選択的に読み出し、この読み出されたカード画像を前記表示装置の第３の表示領域に展開表示させるべく前記表示装置へ出力する手段と
を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項１０】
前記表示装置に表示されている会議画像の会議期間全体における時間位置を検出する手段と、
前記検出された時間位置を表す会議経過表示情報を生成し、この生成された会議経過表示情報を表示させるべく前記表示装置へ出力する手段と
を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項１１】
それぞれ意見が記載された複数のカードをボード上で移動させて意見の内容が類似するもの同士でグループ化する作業を繰り返すことで意見集約を行う手法を採用した会議を支援するシステムのサーバコンピュータで使用されるプログラムであって、
会議期間中に前記ボード上における複数のカードの移動を時系列的に撮像して得られた会議画像を取り込んで第１の記憶手段に蓄積する処理と、
前記第１の記憶手段に蓄積された会議画像をもとに前記ボード上におけるカードの状態変化を検出し、この検出された状態変化を表す変化履歴情報を第２の記憶手段に記憶する処理と、
前記第１の記憶手段に蓄積された会議画像を読み出し、この読み出された会議画像を、表示装置の第１の表示領域に表示させるべく前記表示装置へ出力する処理と、
前記第２の記憶手段に記憶された変化履歴情報をもとに、会議において話題の中心になっているカードを推定する処理と、
前記推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを、前記会議画像に重ね合わせて前記第１の表示領域に表示させるべく前記表示装置へ出力する処理と
を、前記サーバコンピュータに実行させるプログラム。
【請求項１２】
会議閲覧者による入力操作を受け付ける処理と、
前記入力操作に応じて、前記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを変化させる処理と
を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１３】
前記会議画像のうち、前記フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、前記表示装置の第２の表示領域に拡大表示させるべく前記表示装置へ出力する処理を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１４】
前記複数のカードの意見が記載された面をそれぞれ撮像して得られたカード画像を取り込んで第３の記憶手段に記憶する処理と、
前記フォーカス表示パターンにより示される注目範囲に、相互に重なり合う複数のカードが含まれているか否かを判定する処理と、
前記相互に重なり合う複数のカードが含まれていると判定された場合に、この重なり合う複数のカードの画像を前記第３の記憶手段から選択的に読み出し、この読み出されたカード画像を前記表示装置の第３の表示領域に展開表示させるべく前記表示装置へ出力する処理と
を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１５】
前記表示装置に表示されている会議画像の会議期間全体における時間位置を検出する処理と、
この検出された時間位置を表す会議経過表示情報を生成し、この生成された会議経過表示情報を表示させるべく前記表示装置へ出力する処理と
を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１】
それぞれ意見が記載された複数のカードをボード上で移動させて意見の内容が類似するもの同士でグループ化する作業を繰り返すことで意見集約を行う手法を採用した会議を支援する会議支援システムであって、
会議期間中に、前記ボード上における複数のカードの移動を時系列的に撮像する第１の撮像装置と、
画像を表示可能な表示装置と、
前記第１の撮像装置及び表示装置のうち少なくとも表示装置に対し通信回線を介して接続可能なサーバ装置と
を具備し、
前記サーバ装置は、
前記第１の撮像装置により撮像された会議画像を取り込んで第１の記憶手段に蓄積する手段と、
前記第１の記憶手段に蓄積された会議画像をもとに前記ボード上におけるカードの状態変化を検出し、この検出された状態変化を表す変化履歴情報を第２の記憶手段に記憶する手段と、
前記第１の記憶手段に蓄積された会議画像を読み出して、前記表示装置の第１の表示領域に表示させる手段と、
前記第２の記憶手段に記憶された変化履歴情報をもとに、会議において話題の中心になっているカードを推定する手段と、
前記推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを前記会議画像に重ね合わせて前記第１の表示領域に表示させる手段と
を備えることを特徴とする会議支援システム。
【請求項２】
前記サーバ装置は、
会議閲覧者による入力操作を受け付け、この入力操作に応じて前記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを変化させる手段を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項３】
前記サーバ装置は、
前記会議画像のうち、前記フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、前記表示装置の第２の表示領域に拡大表示させる手段を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項４】
前記複数のカードの意見が記載された面をそれぞれ撮像する第２の撮像装置を、さらに具備し、
かつ前記サーバ装置は、
前記第２の撮像装置により撮像された複数のカードの画像を取り込んで第３の記憶手段に記憶する手段と、
前記フォーカス表示パターンにより示される注目範囲に、相互に重なり合う複数のカードが含まれているか否かを判定する手段と、
前記相互に重なり合う複数のカードが含まれていると判定された場合に、この重なり合う複数のカードの画像を前記第３の記憶手段から選択的に読み出して前記表示装置の第３の表示領域に展開表示させる手段と
を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項５】
前記表示装置に表示されている会議画像の会議期間全体における時間位置を検出する手段と、
前記検出された時間位置を表す会議経過表示情報を生成し、この生成された会議経過表示情報を前記表示装置に表示させる手段と
を、さらに備えることを特徴とする請求項１記載の会議支援システム。
【請求項６】
それぞれ意見が記載された複数のカードをボード上で移動させて意見の内容が類似するもの同士でグループ化する作業を繰り返すことで意見集約を行う手法を採用した会議を支援するシステムで使用されるサーバ装置であって、
会議期間中に前記ボード上における複数のカードの移動を時系列的に撮像して得られた会議画像を取り込んで第１の記憶手段に蓄積する手段と、
前記第１の記憶手段に蓄積された会議画像をもとに前記ボード上におけるカードの状態変化を検出し、この検出された状態変化を表す変化履歴情報を第２の記憶手段に記憶する手段と、
前記第１の記憶手段に蓄積された会議画像を読み出し、この読み出された会議画像を表示装置の第１の表示領域に表示させるべく前記表示装置へ出力する手段と、
前記第２の記憶手段に記憶された変化履歴情報をもとに、会議において話題の中心になっているカードを推定する手段と、
前記推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを、前記会議画像に重ね合わせて前記第１の表示領域に表示させるべく前記表示装置へ出力する手段と
を具備することを特徴とするサーバ装置。
【請求項７】
会議閲覧者による入力操作を受け付け、この入力操作に応じて前記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを変化させる手段を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項８】
前記会議画像のうち、前記フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、前記表示装置の第２の表示領域に拡大表示させるべく前記表示装置へ出力する手段を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項９】
前記複数のカードの意見が記載された面をそれぞれ撮像して得られたカード画像を取り込んで第３の記憶手段に記憶する手段と、
前記フォーカス表示パターンにより示される注目範囲に、相互に重なり合う複数のカードが含まれているか否かを判定する手段と、
前記相互に重なり合う複数のカードが含まれていると判定された場合に、この重なり合う複数のカードの画像を前記第３の記憶手段から選択的に読み出し、この読み出されたカード画像を前記表示装置の第３の表示領域に展開表示させるべく前記表示装置へ出力する手段と
を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項１０】
前記表示装置に表示されている会議画像の会議期間全体における時間位置を検出する手段と、
前記検出された時間位置を表す会議経過表示情報を生成し、この生成された会議経過表示情報を表示させるべく前記表示装置へ出力する手段と
を、さらに具備することを特徴とする請求項６記載のサーバ装置。
【請求項１１】
それぞれ意見が記載された複数のカードをボード上で移動させて意見の内容が類似するもの同士でグループ化する作業を繰り返すことで意見集約を行う手法を採用した会議を支援するシステムのサーバコンピュータで使用されるプログラムであって、
会議期間中に前記ボード上における複数のカードの移動を時系列的に撮像して得られた会議画像を取り込んで第１の記憶手段に蓄積する処理と、
前記第１の記憶手段に蓄積された会議画像をもとに前記ボード上におけるカードの状態変化を検出し、この検出された状態変化を表す変化履歴情報を第２の記憶手段に記憶する処理と、
前記第１の記憶手段に蓄積された会議画像を読み出し、この読み出された会議画像を、表示装置の第１の表示領域に表示させるべく前記表示装置へ出力する処理と、
前記第２の記憶手段に記憶された変化履歴情報をもとに、会議において話題の中心になっているカードを推定する処理と、
前記推定されたカードを含む注目範囲を示すフォーカス表示パターンを生成し、この生成されたフォーカス表示パターンを、前記会議画像に重ね合わせて前記第１の表示領域に表示させるべく前記表示装置へ出力する処理と
を、前記サーバコンピュータに実行させるプログラム。
【請求項１２】
会議閲覧者による入力操作を受け付ける処理と、
前記入力操作に応じて、前記フォーカス表示パターンの表示位置、形状及びサイズの少なくとも一つを変化させる処理と
を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１３】
前記会議画像のうち、前記フォーカス表示パターンにより示される注目範囲に含まれるカードの画像を、前記表示装置の第２の表示領域に拡大表示させるべく前記表示装置へ出力する処理を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１４】
前記複数のカードの意見が記載された面をそれぞれ撮像して得られたカード画像を取り込んで第３の記憶手段に記憶する処理と、
前記フォーカス表示パターンにより示される注目範囲に、相互に重なり合う複数のカードが含まれているか否かを判定する処理と、
前記相互に重なり合う複数のカードが含まれていると判定された場合に、この重なり合う複数のカードの画像を前記第３の記憶手段から選択的に読み出し、この読み出されたカード画像を前記表示装置の第３の表示領域に展開表示させるべく前記表示装置へ出力する処理と
を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【請求項１５】
前記表示装置に表示されている会議画像の会議期間全体における時間位置を検出する処理と、
この検出された時間位置を表す会議経過表示情報を生成し、この生成された会議経過表示情報を表示させるべく前記表示装置へ出力する処理と
を、さらに前記サーバコンピュータに実行させる請求項１１記載のプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２００６−６５４９８（Ｐ２００６−６５４９８Ａ）
【公開日】平成１８年３月９日（２００６．３．９）
【国際特許分類】
【出願番号】特願２００４−２４５５０１（Ｐ２００４−２４５５０１）
【出願日】平成１６年８月２５日（２００４．８．２５）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
【公開日】平成１８年３月９日（２００６．３．９）
【国際特許分類】
【出願日】平成１６年８月２５日（２００４．８．２５）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
[ Back to top ]