会議録表示装置及び方法
【課題】閲覧者が必要とする情報を推定することによって、効率的に会議状況を閲覧できる会議録表示装置を提供する。
【解決手段】会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得部１０１と；会議状況情報から話題リスト中の話題を検出する第１の検出部１０２と；会議状況情報から得点表中のアクションを検出する第２の検出部１０３と；第２の検出部により検出されたアクションに関連付けられた得点に基づいて、第１の検出部により検出された話題毎に各出席者の関与度を算出する算出部１０４と；会議状況情報を話題単位で閲覧可能であって、かつ各出席者について関与度が一定値以上の話題を強調表示可能な会議録を作成する作成部１０５と；会議録を表示する表示部１０６と；を有する。
【解決手段】会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得部１０１と；会議状況情報から話題リスト中の話題を検出する第１の検出部１０２と；会議状況情報から得点表中のアクションを検出する第２の検出部１０３と；第２の検出部により検出されたアクションに関連付けられた得点に基づいて、第１の検出部により検出された話題毎に各出席者の関与度を算出する算出部１０４と；会議状況情報を話題単位で閲覧可能であって、かつ各出席者について関与度が一定値以上の話題を強調表示可能な会議録を作成する作成部１０５と；会議録を表示する表示部１０６と；を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、マルチメディア会議録を表示する装置及び方法に関する。
【背景技術】
【０００２】
通常、会議を行う場合、議論の内容を後に参照できるよう会議録を作成する。しかしながら、手書きの会議録では概要のみを記載するのが普通であり、議論の細部を参照することは不可能である。一方、会議状況をビデオカメラ等で取得すれば、議論の細部を参照することが可能となるものの、閲覧者が実際に必要とする情報は会議内容の一部であることが多く、このような状況映像等の全体から必要とする情報を探し出すのは煩雑である。そこで、会議状況を容易に参照するための様々な会議録表示装置が提案されている。
【０００３】
従来、会議録を表示する装置は、基本情報として会議自体の日時、場所、及び出席者等を登録し、会議中の資料、会話音声、及び状況映像等をこれら基本情報に関連付けて蓄積し、表示するものが知られている。
【０００４】
具体的には、会議中の会話音声、状況映像等の情報からキーワードを抽出し、検索用ファイルを作成し、この検索用ファイルを参照して会議録を効率的に作成できるマルチメディア会議録作成支援装置がある（例えば、特許文献１参照）。
【０００５】
また、会議中の資料の識別情報と提示時間区間及び複数の出席者の発言の発言時間区間と当該発言時間区間に提示した資料の識別情報を夫々関連付けて記憶し、提示する発言構造情報提示装置がある（例えば、特許文献２参照）。
【０００６】
更に、出席者の識別方法として、出席予定表に登録された出席者情報から出席予定者の情報を取得し、当該出席予定者を出席者として扱う方法が知られている。また、座席毎に着座する人物を予め割り当てておき、着座の有無をセンサで感知することにより出席者を把握する方式や、発話音声から発話者を識別することにより出席者を類推する方式等が知られている。
【特許文献１】特開平７−１８２３６５号公報
【特許文献２】特開平１１−２７２６７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
特許文献１及び２記載の発明によれば、会議状況を部分的に閲覧可能な会議録を作成できるので、閲覧者は予め必要とする情報の見当がついていれば効率的に会議状況を閲覧できるが、換言すれば、従来の会議録表示装置では閲覧者が必要とする情報を予め把握していなければ効率的な閲覧ができない。
【０００８】
従って、本発明の一態様は、閲覧者が必要とする情報を推定することによって、効率的に会議状況を閲覧できる会議録表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一態様に係る会議録表示装置は、会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得部と；前記会議状況情報、前記話題をリスト化した話題リスト、及び、複数のアクションと、当該アクションの話題に対する関わりの強弱に基づいて定められた得点とを関連付けて記載された得点表を蓄積する第１の蓄積部と；前記会議状況情報から前記話題リスト中の話題を検出する第１の検出部と；前記会議状況情報から前記得点表中のアクションを検出する第２の検出部と；前記第２の検出部により検出されたアクションに関連付けられた得点に基づいて、前記第１の検出部により検出された話題毎に各出席者の関与度を算出する算出部と；前記関与度を蓄積する第２の蓄積部と；前記会議状況情報を話題単位で閲覧可能であって、かつ各出席者について前記関与度が一定値以上の話題を強調表示可能な会議録を作成する作成部と；前記会議録を表示する表示部と；を具備する。
【発明の効果】
【００１０】
本発明の一態様によれば、閲覧者は必要とする情報を効率的に閲覧できる。
【発明を実施するための最良の形態】
【００１１】
（第１の実施形態）
図１に示すように、本発明の第１の実施形態に係る会議録表示装置は、会議状況取得部１０１、話題検出部１０２、アクション検出部１０３、話題関与度算出部１０４、会議録作成部１０５、会議録表示部１０６、会議情報蓄積部１１１、及び話題関与度リスト蓄積部１１２を含む。
【００１２】
会議状況取得部１０１は、会議状況をデータ化して取得する。会議状況は、会議中の音声、映像、提示資料、及び出席者の位置情報等、会議の再生のため必要な情報である。即ち、会議状況取得部１０１はセンサ群に相当し、例えば会議中の音声を取得する録音装置、会議中の映像を撮影するカメラ装置、提示資料を記録するパーソナルコンピュータ（ＰＣ）及びソフトウエア、及びホワイトボードの前面に出て話している人物を識別する位置情報検出装置等を含む。
【００１３】
会議情報蓄積部１１１は、例えばサーバのハードディスクであり、予め登録された基本情報及び上記会議状況を含む会議情報を蓄積する。基本情報とは、会議の日時、場所、出席者、会議名、話題リスト、及び得点表等の会議を行うにあたって予め定める情報である。話題リストは会議で議論される話題をリスト化したものであり、得点表は特定のアクションを得点に関連付けて記載した表である。会議情報は、会議録作成部１０５が会議録を作成するため必要な情報であり、予め登録した基本情報、及び会議状況取得部１０１が取得した会議状況を含む。尚、会議状況は構成要素に応じた様々なデータ形式で蓄積される。また、会議状況の構成要素は、各構成要素が発生した時間等のメタ情報を会議状況取得部１０１によって付加され、データ化されている。
【００１４】
話題検出部１０２は、会議状況から現在議論されている話題を検出する。具体的には、例えば出席者、傍聴者、または書記等が手動で話題を登録してもよいし、基本情報中の話題リスト等の候補から話題を選択してもよい。即ち、例えば、議事進行係が操作するＰＣ中の議事選択ソフトウエアによって話題検出部１０２を構成できるが、望ましくは、スクリーンに提示されている資料や会話状況等に基づいて自動的に話題リストから話題を検出する構成を採る。
【００１５】
アクション検出部１０３は、会議状況から各出席者のアクションを検出する。アクションは、話題関与度算出部１０４で話題関与度を算出する際に使用する得点に関連付けられて、得点表に予め定められた行動である。アクション検出部１０３は、例えば会議状況に含まれる位置情報から在席情報を検出するソフトウエア、及び会議状況に含まれる音声から発話状況を検出するソフトウエア等によって構成される。
【００１６】
話題関与度算出部１０４は、話題と当該話題の議論中に行われたアクションから各出席者の当該話題に関する話題関与度を算出する。話題関与度は、各人が各話題にどの程度関与しているかを示す評価値に相当し、この値の大小から各人に対する各話題の重要度が推定できる。また、逆に、各話題に対する各人の貢献度も推定できる。話題関与度は前述した各アクションに対応する得点を用いて算出される。従って、各アクションに対応する得点は議論に対する関わりの強弱に基づいて定められ、例えば発話行為であれば、長く説明を行えば比較的高い得点、相槌程度であれば比較的低い得点が夫々割り当てられる。
【００１７】
話題関与度リスト蓄積部１１２は、例えばサーバのハードディスクであり、話題関与度リストを蓄積する。即ち、話題関与度算出部１０４で算出された話題関与度は、例えば話題を行、出席者を列とするリストとして保存され、また、話題関与度リスト蓄積部１１２には過去に行われた会議における話題関与度リストも蓄積されているものとする。
【００１８】
会議録作成部１０５は、会議情報及び話題関与度リストに基づいて会議録を作成する。即ち、会議情報蓄積部１１１に蓄積されている会議状況データを話題単位で閲覧可能で、かつ、各人毎に重要な話題を強調表示した会議録を作成する。
【００１９】
会議録表示部１０６は、会議録を表示する。即ち、会議録作成部１０５が作成した会議録を、例えばＰＣのディスプレイに表示し、話題単位で分割された会議状況を、例えばディスプレイ及びスピーカを用いて閲覧者の求めに応じて再生する。
【００２０】
以下、本実施形態に係る会議録表示装置の動作を図３に示すフローチャートに沿って具体的に説明する。
尚、本発明の一態様が対象とする会議は、基本的に、複数の人間が会議室でテーブルを囲み、リアルタイムにコミュニケーションを行う一般的な会議を想定している。しかしながら、本発明の一態様は、ＴＶ（テレビジョン）会議システム、ＰＣを用いたチャットやＷｅｂ（ウェブ）会議、及び電話による会話といった複数の人間が離れた場所からコミュニケーションを行うといった場合にも広く適用可能である。また、前提として会議情報蓄積部１１１は、基本情報を予め記録しているものとする。
【００２１】
まず、会議状況取得部１０１は、会議状況を取得し、会議情報蓄積部に蓄積する（ステップＳ１）。ここで、会議状況取得部１０１は、図２に示すように、マイク、カメラ、タブレットＰＣ、ＲＦＩＤ（無線自動識別）タグ及びＲＦＩＤリーダで構成されているとし、会議状況として音声、映像、提示資料、位置情報、及び在室状況を取得するものとする。
【００２２】
会議状況としての音声はＰＣに接続されたマイクによって取得される。ここで、会議室に１つだけマイクを用意する構成でも音声は取得可能であるが、出席者の数以上のマイクを用意する構成が望ましい。また、音声の取得はＩＣ（集積回路）レコーダによっても可能であるから、マイクに代えてＩＣレコーダを用いてもよい。取得された音声はＰＣ上で開始時刻及びマイクＩＤ（識別情報）などのメタ情報を付加され、例えばｍｐ３（MPEG-1 audio layer-3）形式のデータとして、ミキサなどを経由して会議情報蓄積部１１１としてのサーバＰＣに蓄積される。
【００２３】
会議状況としての映像は、ＰＣに接続されたカメラによって取得される。その他、映像の取得が可能なデジタルビデオカメラ等の各種カメラを用いてもよい。ここで、カメラは図２に示すような、出席者全員が着座している様子、提示資料等を投影するスクリーン、及びホワイトボードを撮影可能な角度に１つ、及び図示しないが、各座席における出席者の着座状態やテーブル上での手の動きを上部から撮影できる角度に１つの合計２つ設置するものとする。取得された映像はＰＣ上で開始時刻及びカメラＩＤなどのメタ情報を付加され、例えばａｖｉ(audio video interleave)形式のデータとして会議情報蓄積部１１１としてのサーバＰＣに蓄積される。
【００２４】
会議状況としての提示資料は、タブレットＰＣによって取得される。尚、ここで提示資料は、ＰＣによって処理可能であり、ディスプレイに表示、またはプロジェクタによってスクリーンに投影するものとする。この前提の下で、表示画面及びデータ内容はＰＣによって取得可能であるから、ソフトウエア処理によって提示資料のファイル名、ファイルデータ、及び表示箇所等（プレゼンテーションファイルであればページ番号、表計算ファイルであればセル番号等に相当）を取得できる。即ち、「ファイルを開く」、「表示ページの切り替え」、または「アクティブウインドウの切り替え」といったイベントを検出した際に、検出時刻、提示中のファイル名、ファイルデータ、及び表示箇所等を取得するようなソフトウエア処理を行う。取得された提示資料の提示時刻、ファイルデータ、ファイルパス、及び表示箇所は、会議情報蓄積部１１１としてのサーバＰＣに蓄積される。その他、画面のスクリーンショットを定期的に記録してＰＣやスクリーンに提示された資料を連続画面として取得することも可能である。
【００２５】
会議状況としての位置情報は、ＲＦＩＤタグ及びＲＦＩＤリーダによって取得される。具体的には、ＲＦＩＤリーダは、ＲＦＩＤタグを一定距離以内に検知すると、タグに無線でアクセスし、タグに予め割り当てられたＩＤを読み取る。即ち、出席者には予め所定のＩＤを割り当てたタグを所持することを課しておき、リーダをスクリーン及びホワイトボードの後部を含む複数位置に設置することにより、「スクリーン前に、いつ、誰がいたか」、「ホワイトボード前に、いつ、誰がいたか」等の位置情報を取得できる。その他、マイクが取得した音声に誰の声がどの程度のボリュームで入っているかを分析して、位置情報を取得してもよい。会議情報蓄積部１１１としてのサーバＰＣは、取得された位置情報として、検出時刻、位置ＩＤ、及び人物ＩＤを蓄積する。また、会議状況としての在室状況も、同様にして取得及び蓄積する。
【００２６】
次に、話題検出部１０２は、蓄積された会議状況から話題リストを用いて話題を検出する（ステップＳ２）。ここで、話題リストは図４に示すような、テキストデータの項目群を大項目、中項目、及び小項目からなる階層構造に構成したものである。この話題リストを用いて話題を検出する手法について２例説明する。
【００２７】
第１の手法では、司会進行者があらかじめ、会議情報蓄積部１１１に蓄積されている話題リストから会議の議題とすべき項目を用意しておくものとする。会議の際にはこの用意しておいた話題リストをアジェンダとして用いて議事を進行し、議事進行時に随時議論中の話題を選択し、この選択された話題が、現在の話題として検出される。また、この方式を用いると、議事進行時に話題を選択することにより、その話題にあらかじめ関連づけられた資料を得ることもできる。
【００２８】
第２の手法では、話題検出部１０２は、会議情報蓄積部１１１に蓄積された提示資料、及び音声から議論中の話題を推定する。即ち、提示資料中の文字列データに対して形態素解析して、各話題の網羅度を算出する。例えば、形態素解析の結果、ある提示資料中に小項目３−２−５の名詞が頻繁に出現すれば、この資料を提示していた時間に議論されていた話題は小項目３−２−５である可能性が高いと推定できる。尚、前述したように話題リストは階層構造で構成されているため、小項目３−２−５が話題となる場合は、当該話題を包含する中項目３−２、及び大項目３についても議論されているものとする。また、音声から話題を検出するには、例えば音声認識ソフトウエアにより音声データを文字列データに変換し、この文字列データに対して同様に形態素解析して、各話題の網羅度を算出する。
【００２９】
その他、提示資料中の図面などのオブジェクトの利用状況を監視し、以前提示されたオブジェクトと類似するオブジェクトが用いられている資料は同じ話題に関する資料であると推定することにより話題を検出する、あるいは音声認識の結果から出現頻度の高い単語を話題として検出するといった手法も考えられる。
【００３０】
次に、アクション検出部１０３は、得点表に記載されたアクションを検出する（ステップＳ３）。ここで、得点表として図５に示す得点表を用いるものとし、アクション検出部１０３が検出するアクションは位置情報、在室状況、発話状況、書き込み動作、及び指し示し動作とする。また、ステップＳ３はステップＳ２と並行して処理可能である。
【００３１】
アクションとしての在室状況及び位置情報については、会議情報蓄積部１１１に蓄積された在室状況及び位置情報を利用する。
【００３２】
アクションとしての発話状況については、会議情報蓄積部１１１に蓄積された音声を分析することにより検出する。ここで、出席者は、各人のＩＤを割り当てたマイクを使用しているものとする。この前提の下、マイクが一定時間以上、一定の音量以上の発話を取得すれば、このマイクのＩＤから発話者を特定できる。また、一定の音量以上の発話の開始時刻と終了時刻の差分を算出することにより、発話継続時間を導出できる。その他、声紋認証技術を用いて発話者を特定してもよい。以上のようにして、発話状況として、発話者、発話開始時刻、発話継続時間、及び発話音量などを検出できる。このうち、発話継続時間は、当該発話行為の重要度を評価するのに有用であり、例えば図５に示す得点表では発話継続時間の長短に応じて得点を増減させている。更に、発話継続時間は発話行為自体の特定においても重要な要素である。即ち、例えば発話継続時間が長ければ当該発話行為は「説明」であると推定でき、逆に発話継続時間が短ければ当該発話行為は「相槌」であると推定できる。また、出席者Ａが「説明」と推定される発話を行った後、出席者Ｂがある程度の長さの発話を行い、更に出席者Ａが「説明」と推定される発話を行ったとすれば、出席者Ｂの発話行為は「質問」であると推定できる。
【００３３】
アクションとしての書き込み動作については、会議情報蓄積部１１１に蓄積された位置情報及び映像を分析することにより検出する。ここでは、様々な書き込み形式を想定し、複数の検出手法について説明する。
【００３４】
最初に、ホワイトボードへの書き込み動作を検出する手法ついて説明する。位置情報は「ホワイトボード前に、いつ、誰がいたか」といった情報を含んでいるため、このような位置情報を分析することによって、書き込み人物及び時刻は推定できる。また、映像からホワイトボードの書き込み状況を定期的に取得し、差分を算出することによって、書き込み量を推定する。このようにして、書き込み動作のパラメータとして、書き込み人物、時刻、及び量を検出する。また、映像からホワイトボードペンの座標を画像分析し、この座標の軌跡から書き込み動作を検出することも考えられる。尚、この手法は、メインスクリーンとしてホワイトボードを使用し、プロジェクタを経由して資料を投影する場合や、専用のペンを用いる電子ホワイトボードシステムを使用する場合にも適用できる。
【００３５】
次に、ＰＣからプロジェクタを経由して、スクリーンに資料を投影する場合におけるＰＣ上の書き込み動作を検出する手法について説明する。ここでは、タブレットＰＣに付属のペンを用いてディスプレイをなぞることによる書き込み動作を想定している。このような書き込み動作は、通常、タブレットＰＣに付属のソフトウエアで検出可能であり、これによって書き込み時刻及び量は特定できる。また、書き込み時刻を用いて当該時刻の発話者を参照することで、書き込み人物も推定できる。このようにして、書き込み動作のパラメータとして、書き込み人物、時刻、及び量を検出する。
【００３６】
その他、各人のＰＣのキーボード入力を分析して、電子的なメモ記入として書き込み動作を検出する手法、及び映像を分析して各人の手帳への記入を書き込み動作として検出する手法が考えられる。
【００３７】
アクションとしての指し示し動作については、会議情報蓄積部１１１に蓄積された映像及び提示資料を分析することにより検出する。ここでは、提示資料をＰＣからプロジェクタを経由して、スクリーンに投影する場合に用いる手法について２例説明する。
【００３８】
まず、第１の手法として、マウスポインタによる指し示し動作の検出について説明する。この手法では、アクション検出部１０３として、マウスポインタの移動を検出するＰＣ上のソフトウエアを使用する。具体的には、マウスポインタの移動をバックグラウンドプロセスにより監視し、例えば「左右の往復運動とみなせる移動」を検出すれば、指し示し対象として「往復運動を検出した箇所の直上部のオブジェクト」を検出し、「一定の範囲内で楕円形に近い繰り返し移動」を検出すれば、指し示し対象として「繰り返し移動を検出した範囲内のオブジェクト」を検出する。また、指し示し対象を検出した時刻を指し示し時刻として検出し、例えば指し示し動作を検出した時刻における発話者を前述の発話状況検出の手法で特定して、指し示し人物として推定する。このようにして、指し示し動作のパラメータとして指し示し人物、時刻、資料、及び対象を検出する。
【００３９】
次に、第２の手法として、差し棒及びレーザポインタ等による指し示し動作の検出について説明する。この手法では、差し棒の先端位置及びレーザポインタの照射位置を、画面中の相対座標として分析する。この座標の軌跡から、前述したマウスポインタによる指し示し動作検出の手法と同様に指し示し対象及び時刻を検出する。また、指し示し資料は指し示し動作を検出した時刻における提示資料について会議情報蓄積部１１１を参照すれば推定できる。更に、指し示し人物については前述したように、発話者を分析することによって推定してもよいし、映像から例えば顔画像認識を行って推定してもよい。このようにして、指し示し動作のパラメータとして、指し示し人物、時刻、資料及び対象を検出する。
【００４０】
尚、アクション検出部１０３の検出するアクションは上記したものに限らない。例えば、話題関与度の算出に有用なアクションとして、うなずき行為が考えられる。うなずき行為は、例えば会議情報蓄積部１１１が蓄積した映像から出席者の顔角度の変化を分析することで検出できる。
【００４１】
次に、話題関与度算出部１０４は、話題検出部１０２が検出した話題、及びアクション検出部１０３が検出したアクションから各話題に対する各人の関与度を算出し、話題関与度リスト蓄積部１１２に蓄積する（ステップＳ４）。即ち、話題と人物を固定して、当該話題中に当該人物から検出されたアクションに対応する得点を得点表から取得し、当該得点に基づいて話題関与度を算出する。例えば以下に示す式のように、得点を総和し、１００点満点の話題関与度を算出する手法があるが、話題関与度を算出する手法は以下に示す式に限らない
【数１】
【００４２】
ここで、relation(person, topic)は人物personの話題topicに関する関与度（１００点満点）を、得点point(p, t, action | p=person, t=topic)は人物person=p、話題topic=tの条件を満たすアクションactionに対応する得点として得点表に記載された得点を夫々示すものとする。
【００４３】
このように算出された話題関与度は、例えば図６に示すような話題関与度リストとして話題関与度リスト蓄積部１１２に蓄積される。
【００４４】
最後に、会議録作成部１０５は会議録を作成し、会議録表示部１０６を介して表示する（ステップＳ６）。ここで、会議録作成部１０５は図７に示すような会議録を作成するものとし、この会議録では、話題を選択すると当該話題に関連する会議状況のデータが図８に示すように表示されるものとする。即ち、会議録作成部１０５は、会議情報蓄積部１１１から取得した会議状況のデータを話題リストに基づいて分割し、話題毎に閲覧できるようなリンクを作成する。また、会議録作成部１０５は、話題関与度リストに基づいて各人別に重要な話題を強調表示したリストも併せて作成し、これらを組合せて会議録とする。会議録表示部１０６は、会議録作成部１０５が作成した会議録を閲覧者の求めに応じて表示する。
【００４５】
ここで、強調表示の例について説明する。まず、話題関与度に関して例えば２つの閾値（第１の閾値＜第２の閾値）を設けておき、話題関与度が第１の閾値未満であれば重要度を「低」、第１の閾値以上であって、第２の閾値未満であれば重要度を「中」、第２の閾値以上であれば「高」とランク付けるものとする。この前提の下、ある会議で、出席者１の話題「特許提案について」に関する関与度が「高」ランクであれば、会議録において話題「特許提案について」は「出席者１が主説明者である話題」として強調表示される。また、出席者２の話題「特許提案について」に関する関与度が「中」ランクであれば、会議録において、話題「特許提案について」は「出席者２が議論参加者である話題」として強調表示される。一方、出席者２の話題「進捗報告」に関する関与度が「低」ランクであれば、話題「進捗報告」は出席者２にとってあまり重要でない話題として強調表示されない。
【００４６】
また、話題関与度リスト蓄積部１１２は、過去に行われた会議における話題関与度リストも蓄積しているため、これも利用する。即ち、同じ話題について複数回の会議に渡って議論する場合に、ある会議において不在であっても過去の関与度から重要度を判断し、強調表示することができる。例えば、前述のように話題関与度を「高」、「中」及び「低」にランク付けするなら、ある会議の話題「開発項目１について」の議論に出席者４が不在であったが、直近の会議における当該話題に関する関与度が「高」ランクであれば、話題「開発項目１について」は出席者４の「確認必須箇所」として強調表示される。また、ある会議の話題「開発項目３について」の議論に出席者４が不在であったが、直近の会議における当該話題に関する関与度が「中」ランクであれば、話題「開発項目３について」は出席者４の「要注意箇所」として強調表示される。一方、ある会議の話題「特許提案について」の議論に出席者３が不在であって、直近の会議における当該話題に関する関与度も「低」ランクであれば、話題「特許提案について」は出席者３にとってあまり重要でない話題として強調表示せず、不在であったことを示す程度に留める。
【００４７】
以上説明したように、本実施形態によれば閲覧者が必要とする情報を効率的に閲覧可能な会議録表示装置を提供できる。
【００４８】
（第２の実施形態）
図９に示すように、本発明の第２の実施形態に係る会議録表示装置は、図１に示す第１の実施形態に係る会議録表示装置に新たに管理情報蓄積部２１３を追加したものである。その他、図１に示す会議録表示装置と同一部分については説明を省略する。
【００４９】
管理情報蓄積部２１３は、会議録の閲覧を管理するための管理情報を蓄積する。この管理情報には、例えばログイン名、パスワード、及びメールアドレスなどの各人を識別するための情報が含まれる。
【００５０】
また、本実施形態において会議録表示部１０６は、管理情報蓄積部２１３に蓄積された管理情報と、例えば閲覧者から入力されたログイン名、及びパスワードといった情報を照合するなどして、閲覧者を特定する。会議録表示部１０６は、このようにして特定された閲覧者に応じて会議録の表示を変更する。即ち、例えば図７に示した会議録を出席者４が閲覧する場合であれば、図１０に示すように「出席者４」という表示を「あなた」に変えたり、閲覧者以外の出席者については強調表示しないようにしたりすることで、閲覧者にとって必要な情報が明確になり、より簡便な参照ができる。
【００５１】
以上説明したように、本実施形態によれば閲覧者が必要とする情報を効率的に閲覧可能な会議録表示装置を提供できる。
【００５２】
（第３の実施形態）
図１１に示すように、本発明の第３の実施形態に係る会議録表示装置は、図９に示す会議録表示装置に新たに通知部３０７を追加したものである。その他、図９に示す会議録表示装置と同一部分についての説明は省略する。
【００５３】
通知部３０７は、各人が不在であって、かつ、関わりの強い話題（強調表示する話題）が検出されると、該当者に会議録の閲覧を促すよう通知する。通知部３０７は、例えば管理情報蓄積部２１３に蓄積された管理情報を参照して、通知する人物のメールアドレスを取得し、当該メールアドレスに会議録の閲覧を促す電子メールを送信する。
【００５４】
また、この通知を受けた人物は、会議録表示部１０６を介して会議録を閲覧することになるが、その際の表示は図７に示したような画一的な表示であってもよいし、図１０に示したような閲覧者毎に異なる表示であってもよい。
【００５５】
以上説明したように、本実施形態によれば、閲覧者は、特に自己の不在時に議論された重要な情報を効率的に閲覧可能な会議録表示装置を提供できる。
【図面の簡単な説明】
【００５６】
【図１】本発明の第１の実施形態に係る会議録表示装置を示すブロック図。
【図２】図１に示す会議録表示装置の実装例を示す図。
【図３】図１に示す会議録表示装置の処理の流れを示すフローチャート。
【図４】図１に示す会議録表示装置の話題検出部で用いる話題リストの例を示す図。
【図５】図１に示す会議録表示装置のアクション検出部で用いる得点表の例を示す図。
【図６】図１に示す会議録表示装置の話題関与度リスト蓄積部が蓄積する話題関与度リストの例を示す図。
【図７】図１に示す会議録表示装置の会議録表示部で表示される会議録の表示例を示す図。
【図８】図７に示す会議録による会議状況の再生の様子の例を示す図。
【図９】本発明の第２の実施形態に係る会議録表示装置を示すブロック図。
【図１０】図７に示す会議録の別の表示例を示す図。
【図１１】本発明の第３の実施形態に係る会議録表示装置を示すブロック図。
【符号の説明】
【００５７】
１０１・・・会議状況取得部
１０２・・・話題検出部
１０３・・・アクション検出部
１０４・・・話題関与度算出部
１０５・・・会議録作成部
１０６・・・会議録表示部
１１１・・・会議情報蓄積部
１１２・・・話題関与度リスト蓄積部
２１３・・・管理情報蓄積部
３０７・・・通知部
【技術分野】
【０００１】
本発明は、マルチメディア会議録を表示する装置及び方法に関する。
【背景技術】
【０００２】
通常、会議を行う場合、議論の内容を後に参照できるよう会議録を作成する。しかしながら、手書きの会議録では概要のみを記載するのが普通であり、議論の細部を参照することは不可能である。一方、会議状況をビデオカメラ等で取得すれば、議論の細部を参照することが可能となるものの、閲覧者が実際に必要とする情報は会議内容の一部であることが多く、このような状況映像等の全体から必要とする情報を探し出すのは煩雑である。そこで、会議状況を容易に参照するための様々な会議録表示装置が提案されている。
【０００３】
従来、会議録を表示する装置は、基本情報として会議自体の日時、場所、及び出席者等を登録し、会議中の資料、会話音声、及び状況映像等をこれら基本情報に関連付けて蓄積し、表示するものが知られている。
【０００４】
具体的には、会議中の会話音声、状況映像等の情報からキーワードを抽出し、検索用ファイルを作成し、この検索用ファイルを参照して会議録を効率的に作成できるマルチメディア会議録作成支援装置がある（例えば、特許文献１参照）。
【０００５】
また、会議中の資料の識別情報と提示時間区間及び複数の出席者の発言の発言時間区間と当該発言時間区間に提示した資料の識別情報を夫々関連付けて記憶し、提示する発言構造情報提示装置がある（例えば、特許文献２参照）。
【０００６】
更に、出席者の識別方法として、出席予定表に登録された出席者情報から出席予定者の情報を取得し、当該出席予定者を出席者として扱う方法が知られている。また、座席毎に着座する人物を予め割り当てておき、着座の有無をセンサで感知することにより出席者を把握する方式や、発話音声から発話者を識別することにより出席者を類推する方式等が知られている。
【特許文献１】特開平７−１８２３６５号公報
【特許文献２】特開平１１−２７２６７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
特許文献１及び２記載の発明によれば、会議状況を部分的に閲覧可能な会議録を作成できるので、閲覧者は予め必要とする情報の見当がついていれば効率的に会議状況を閲覧できるが、換言すれば、従来の会議録表示装置では閲覧者が必要とする情報を予め把握していなければ効率的な閲覧ができない。
【０００８】
従って、本発明の一態様は、閲覧者が必要とする情報を推定することによって、効率的に会議状況を閲覧できる会議録表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一態様に係る会議録表示装置は、会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得部と；前記会議状況情報、前記話題をリスト化した話題リスト、及び、複数のアクションと、当該アクションの話題に対する関わりの強弱に基づいて定められた得点とを関連付けて記載された得点表を蓄積する第１の蓄積部と；前記会議状況情報から前記話題リスト中の話題を検出する第１の検出部と；前記会議状況情報から前記得点表中のアクションを検出する第２の検出部と；前記第２の検出部により検出されたアクションに関連付けられた得点に基づいて、前記第１の検出部により検出された話題毎に各出席者の関与度を算出する算出部と；前記関与度を蓄積する第２の蓄積部と；前記会議状況情報を話題単位で閲覧可能であって、かつ各出席者について前記関与度が一定値以上の話題を強調表示可能な会議録を作成する作成部と；前記会議録を表示する表示部と；を具備する。
【発明の効果】
【００１０】
本発明の一態様によれば、閲覧者は必要とする情報を効率的に閲覧できる。
【発明を実施するための最良の形態】
【００１１】
（第１の実施形態）
図１に示すように、本発明の第１の実施形態に係る会議録表示装置は、会議状況取得部１０１、話題検出部１０２、アクション検出部１０３、話題関与度算出部１０４、会議録作成部１０５、会議録表示部１０６、会議情報蓄積部１１１、及び話題関与度リスト蓄積部１１２を含む。
【００１２】
会議状況取得部１０１は、会議状況をデータ化して取得する。会議状況は、会議中の音声、映像、提示資料、及び出席者の位置情報等、会議の再生のため必要な情報である。即ち、会議状況取得部１０１はセンサ群に相当し、例えば会議中の音声を取得する録音装置、会議中の映像を撮影するカメラ装置、提示資料を記録するパーソナルコンピュータ（ＰＣ）及びソフトウエア、及びホワイトボードの前面に出て話している人物を識別する位置情報検出装置等を含む。
【００１３】
会議情報蓄積部１１１は、例えばサーバのハードディスクであり、予め登録された基本情報及び上記会議状況を含む会議情報を蓄積する。基本情報とは、会議の日時、場所、出席者、会議名、話題リスト、及び得点表等の会議を行うにあたって予め定める情報である。話題リストは会議で議論される話題をリスト化したものであり、得点表は特定のアクションを得点に関連付けて記載した表である。会議情報は、会議録作成部１０５が会議録を作成するため必要な情報であり、予め登録した基本情報、及び会議状況取得部１０１が取得した会議状況を含む。尚、会議状況は構成要素に応じた様々なデータ形式で蓄積される。また、会議状況の構成要素は、各構成要素が発生した時間等のメタ情報を会議状況取得部１０１によって付加され、データ化されている。
【００１４】
話題検出部１０２は、会議状況から現在議論されている話題を検出する。具体的には、例えば出席者、傍聴者、または書記等が手動で話題を登録してもよいし、基本情報中の話題リスト等の候補から話題を選択してもよい。即ち、例えば、議事進行係が操作するＰＣ中の議事選択ソフトウエアによって話題検出部１０２を構成できるが、望ましくは、スクリーンに提示されている資料や会話状況等に基づいて自動的に話題リストから話題を検出する構成を採る。
【００１５】
アクション検出部１０３は、会議状況から各出席者のアクションを検出する。アクションは、話題関与度算出部１０４で話題関与度を算出する際に使用する得点に関連付けられて、得点表に予め定められた行動である。アクション検出部１０３は、例えば会議状況に含まれる位置情報から在席情報を検出するソフトウエア、及び会議状況に含まれる音声から発話状況を検出するソフトウエア等によって構成される。
【００１６】
話題関与度算出部１０４は、話題と当該話題の議論中に行われたアクションから各出席者の当該話題に関する話題関与度を算出する。話題関与度は、各人が各話題にどの程度関与しているかを示す評価値に相当し、この値の大小から各人に対する各話題の重要度が推定できる。また、逆に、各話題に対する各人の貢献度も推定できる。話題関与度は前述した各アクションに対応する得点を用いて算出される。従って、各アクションに対応する得点は議論に対する関わりの強弱に基づいて定められ、例えば発話行為であれば、長く説明を行えば比較的高い得点、相槌程度であれば比較的低い得点が夫々割り当てられる。
【００１７】
話題関与度リスト蓄積部１１２は、例えばサーバのハードディスクであり、話題関与度リストを蓄積する。即ち、話題関与度算出部１０４で算出された話題関与度は、例えば話題を行、出席者を列とするリストとして保存され、また、話題関与度リスト蓄積部１１２には過去に行われた会議における話題関与度リストも蓄積されているものとする。
【００１８】
会議録作成部１０５は、会議情報及び話題関与度リストに基づいて会議録を作成する。即ち、会議情報蓄積部１１１に蓄積されている会議状況データを話題単位で閲覧可能で、かつ、各人毎に重要な話題を強調表示した会議録を作成する。
【００１９】
会議録表示部１０６は、会議録を表示する。即ち、会議録作成部１０５が作成した会議録を、例えばＰＣのディスプレイに表示し、話題単位で分割された会議状況を、例えばディスプレイ及びスピーカを用いて閲覧者の求めに応じて再生する。
【００２０】
以下、本実施形態に係る会議録表示装置の動作を図３に示すフローチャートに沿って具体的に説明する。
尚、本発明の一態様が対象とする会議は、基本的に、複数の人間が会議室でテーブルを囲み、リアルタイムにコミュニケーションを行う一般的な会議を想定している。しかしながら、本発明の一態様は、ＴＶ（テレビジョン）会議システム、ＰＣを用いたチャットやＷｅｂ（ウェブ）会議、及び電話による会話といった複数の人間が離れた場所からコミュニケーションを行うといった場合にも広く適用可能である。また、前提として会議情報蓄積部１１１は、基本情報を予め記録しているものとする。
【００２１】
まず、会議状況取得部１０１は、会議状況を取得し、会議情報蓄積部に蓄積する（ステップＳ１）。ここで、会議状況取得部１０１は、図２に示すように、マイク、カメラ、タブレットＰＣ、ＲＦＩＤ（無線自動識別）タグ及びＲＦＩＤリーダで構成されているとし、会議状況として音声、映像、提示資料、位置情報、及び在室状況を取得するものとする。
【００２２】
会議状況としての音声はＰＣに接続されたマイクによって取得される。ここで、会議室に１つだけマイクを用意する構成でも音声は取得可能であるが、出席者の数以上のマイクを用意する構成が望ましい。また、音声の取得はＩＣ（集積回路）レコーダによっても可能であるから、マイクに代えてＩＣレコーダを用いてもよい。取得された音声はＰＣ上で開始時刻及びマイクＩＤ（識別情報）などのメタ情報を付加され、例えばｍｐ３（MPEG-1 audio layer-3）形式のデータとして、ミキサなどを経由して会議情報蓄積部１１１としてのサーバＰＣに蓄積される。
【００２３】
会議状況としての映像は、ＰＣに接続されたカメラによって取得される。その他、映像の取得が可能なデジタルビデオカメラ等の各種カメラを用いてもよい。ここで、カメラは図２に示すような、出席者全員が着座している様子、提示資料等を投影するスクリーン、及びホワイトボードを撮影可能な角度に１つ、及び図示しないが、各座席における出席者の着座状態やテーブル上での手の動きを上部から撮影できる角度に１つの合計２つ設置するものとする。取得された映像はＰＣ上で開始時刻及びカメラＩＤなどのメタ情報を付加され、例えばａｖｉ(audio video interleave)形式のデータとして会議情報蓄積部１１１としてのサーバＰＣに蓄積される。
【００２４】
会議状況としての提示資料は、タブレットＰＣによって取得される。尚、ここで提示資料は、ＰＣによって処理可能であり、ディスプレイに表示、またはプロジェクタによってスクリーンに投影するものとする。この前提の下で、表示画面及びデータ内容はＰＣによって取得可能であるから、ソフトウエア処理によって提示資料のファイル名、ファイルデータ、及び表示箇所等（プレゼンテーションファイルであればページ番号、表計算ファイルであればセル番号等に相当）を取得できる。即ち、「ファイルを開く」、「表示ページの切り替え」、または「アクティブウインドウの切り替え」といったイベントを検出した際に、検出時刻、提示中のファイル名、ファイルデータ、及び表示箇所等を取得するようなソフトウエア処理を行う。取得された提示資料の提示時刻、ファイルデータ、ファイルパス、及び表示箇所は、会議情報蓄積部１１１としてのサーバＰＣに蓄積される。その他、画面のスクリーンショットを定期的に記録してＰＣやスクリーンに提示された資料を連続画面として取得することも可能である。
【００２５】
会議状況としての位置情報は、ＲＦＩＤタグ及びＲＦＩＤリーダによって取得される。具体的には、ＲＦＩＤリーダは、ＲＦＩＤタグを一定距離以内に検知すると、タグに無線でアクセスし、タグに予め割り当てられたＩＤを読み取る。即ち、出席者には予め所定のＩＤを割り当てたタグを所持することを課しておき、リーダをスクリーン及びホワイトボードの後部を含む複数位置に設置することにより、「スクリーン前に、いつ、誰がいたか」、「ホワイトボード前に、いつ、誰がいたか」等の位置情報を取得できる。その他、マイクが取得した音声に誰の声がどの程度のボリュームで入っているかを分析して、位置情報を取得してもよい。会議情報蓄積部１１１としてのサーバＰＣは、取得された位置情報として、検出時刻、位置ＩＤ、及び人物ＩＤを蓄積する。また、会議状況としての在室状況も、同様にして取得及び蓄積する。
【００２６】
次に、話題検出部１０２は、蓄積された会議状況から話題リストを用いて話題を検出する（ステップＳ２）。ここで、話題リストは図４に示すような、テキストデータの項目群を大項目、中項目、及び小項目からなる階層構造に構成したものである。この話題リストを用いて話題を検出する手法について２例説明する。
【００２７】
第１の手法では、司会進行者があらかじめ、会議情報蓄積部１１１に蓄積されている話題リストから会議の議題とすべき項目を用意しておくものとする。会議の際にはこの用意しておいた話題リストをアジェンダとして用いて議事を進行し、議事進行時に随時議論中の話題を選択し、この選択された話題が、現在の話題として検出される。また、この方式を用いると、議事進行時に話題を選択することにより、その話題にあらかじめ関連づけられた資料を得ることもできる。
【００２８】
第２の手法では、話題検出部１０２は、会議情報蓄積部１１１に蓄積された提示資料、及び音声から議論中の話題を推定する。即ち、提示資料中の文字列データに対して形態素解析して、各話題の網羅度を算出する。例えば、形態素解析の結果、ある提示資料中に小項目３−２−５の名詞が頻繁に出現すれば、この資料を提示していた時間に議論されていた話題は小項目３−２−５である可能性が高いと推定できる。尚、前述したように話題リストは階層構造で構成されているため、小項目３−２−５が話題となる場合は、当該話題を包含する中項目３−２、及び大項目３についても議論されているものとする。また、音声から話題を検出するには、例えば音声認識ソフトウエアにより音声データを文字列データに変換し、この文字列データに対して同様に形態素解析して、各話題の網羅度を算出する。
【００２９】
その他、提示資料中の図面などのオブジェクトの利用状況を監視し、以前提示されたオブジェクトと類似するオブジェクトが用いられている資料は同じ話題に関する資料であると推定することにより話題を検出する、あるいは音声認識の結果から出現頻度の高い単語を話題として検出するといった手法も考えられる。
【００３０】
次に、アクション検出部１０３は、得点表に記載されたアクションを検出する（ステップＳ３）。ここで、得点表として図５に示す得点表を用いるものとし、アクション検出部１０３が検出するアクションは位置情報、在室状況、発話状況、書き込み動作、及び指し示し動作とする。また、ステップＳ３はステップＳ２と並行して処理可能である。
【００３１】
アクションとしての在室状況及び位置情報については、会議情報蓄積部１１１に蓄積された在室状況及び位置情報を利用する。
【００３２】
アクションとしての発話状況については、会議情報蓄積部１１１に蓄積された音声を分析することにより検出する。ここで、出席者は、各人のＩＤを割り当てたマイクを使用しているものとする。この前提の下、マイクが一定時間以上、一定の音量以上の発話を取得すれば、このマイクのＩＤから発話者を特定できる。また、一定の音量以上の発話の開始時刻と終了時刻の差分を算出することにより、発話継続時間を導出できる。その他、声紋認証技術を用いて発話者を特定してもよい。以上のようにして、発話状況として、発話者、発話開始時刻、発話継続時間、及び発話音量などを検出できる。このうち、発話継続時間は、当該発話行為の重要度を評価するのに有用であり、例えば図５に示す得点表では発話継続時間の長短に応じて得点を増減させている。更に、発話継続時間は発話行為自体の特定においても重要な要素である。即ち、例えば発話継続時間が長ければ当該発話行為は「説明」であると推定でき、逆に発話継続時間が短ければ当該発話行為は「相槌」であると推定できる。また、出席者Ａが「説明」と推定される発話を行った後、出席者Ｂがある程度の長さの発話を行い、更に出席者Ａが「説明」と推定される発話を行ったとすれば、出席者Ｂの発話行為は「質問」であると推定できる。
【００３３】
アクションとしての書き込み動作については、会議情報蓄積部１１１に蓄積された位置情報及び映像を分析することにより検出する。ここでは、様々な書き込み形式を想定し、複数の検出手法について説明する。
【００３４】
最初に、ホワイトボードへの書き込み動作を検出する手法ついて説明する。位置情報は「ホワイトボード前に、いつ、誰がいたか」といった情報を含んでいるため、このような位置情報を分析することによって、書き込み人物及び時刻は推定できる。また、映像からホワイトボードの書き込み状況を定期的に取得し、差分を算出することによって、書き込み量を推定する。このようにして、書き込み動作のパラメータとして、書き込み人物、時刻、及び量を検出する。また、映像からホワイトボードペンの座標を画像分析し、この座標の軌跡から書き込み動作を検出することも考えられる。尚、この手法は、メインスクリーンとしてホワイトボードを使用し、プロジェクタを経由して資料を投影する場合や、専用のペンを用いる電子ホワイトボードシステムを使用する場合にも適用できる。
【００３５】
次に、ＰＣからプロジェクタを経由して、スクリーンに資料を投影する場合におけるＰＣ上の書き込み動作を検出する手法について説明する。ここでは、タブレットＰＣに付属のペンを用いてディスプレイをなぞることによる書き込み動作を想定している。このような書き込み動作は、通常、タブレットＰＣに付属のソフトウエアで検出可能であり、これによって書き込み時刻及び量は特定できる。また、書き込み時刻を用いて当該時刻の発話者を参照することで、書き込み人物も推定できる。このようにして、書き込み動作のパラメータとして、書き込み人物、時刻、及び量を検出する。
【００３６】
その他、各人のＰＣのキーボード入力を分析して、電子的なメモ記入として書き込み動作を検出する手法、及び映像を分析して各人の手帳への記入を書き込み動作として検出する手法が考えられる。
【００３７】
アクションとしての指し示し動作については、会議情報蓄積部１１１に蓄積された映像及び提示資料を分析することにより検出する。ここでは、提示資料をＰＣからプロジェクタを経由して、スクリーンに投影する場合に用いる手法について２例説明する。
【００３８】
まず、第１の手法として、マウスポインタによる指し示し動作の検出について説明する。この手法では、アクション検出部１０３として、マウスポインタの移動を検出するＰＣ上のソフトウエアを使用する。具体的には、マウスポインタの移動をバックグラウンドプロセスにより監視し、例えば「左右の往復運動とみなせる移動」を検出すれば、指し示し対象として「往復運動を検出した箇所の直上部のオブジェクト」を検出し、「一定の範囲内で楕円形に近い繰り返し移動」を検出すれば、指し示し対象として「繰り返し移動を検出した範囲内のオブジェクト」を検出する。また、指し示し対象を検出した時刻を指し示し時刻として検出し、例えば指し示し動作を検出した時刻における発話者を前述の発話状況検出の手法で特定して、指し示し人物として推定する。このようにして、指し示し動作のパラメータとして指し示し人物、時刻、資料、及び対象を検出する。
【００３９】
次に、第２の手法として、差し棒及びレーザポインタ等による指し示し動作の検出について説明する。この手法では、差し棒の先端位置及びレーザポインタの照射位置を、画面中の相対座標として分析する。この座標の軌跡から、前述したマウスポインタによる指し示し動作検出の手法と同様に指し示し対象及び時刻を検出する。また、指し示し資料は指し示し動作を検出した時刻における提示資料について会議情報蓄積部１１１を参照すれば推定できる。更に、指し示し人物については前述したように、発話者を分析することによって推定してもよいし、映像から例えば顔画像認識を行って推定してもよい。このようにして、指し示し動作のパラメータとして、指し示し人物、時刻、資料及び対象を検出する。
【００４０】
尚、アクション検出部１０３の検出するアクションは上記したものに限らない。例えば、話題関与度の算出に有用なアクションとして、うなずき行為が考えられる。うなずき行為は、例えば会議情報蓄積部１１１が蓄積した映像から出席者の顔角度の変化を分析することで検出できる。
【００４１】
次に、話題関与度算出部１０４は、話題検出部１０２が検出した話題、及びアクション検出部１０３が検出したアクションから各話題に対する各人の関与度を算出し、話題関与度リスト蓄積部１１２に蓄積する（ステップＳ４）。即ち、話題と人物を固定して、当該話題中に当該人物から検出されたアクションに対応する得点を得点表から取得し、当該得点に基づいて話題関与度を算出する。例えば以下に示す式のように、得点を総和し、１００点満点の話題関与度を算出する手法があるが、話題関与度を算出する手法は以下に示す式に限らない
【数１】
【００４２】
ここで、relation(person, topic)は人物personの話題topicに関する関与度（１００点満点）を、得点point(p, t, action | p=person, t=topic)は人物person=p、話題topic=tの条件を満たすアクションactionに対応する得点として得点表に記載された得点を夫々示すものとする。
【００４３】
このように算出された話題関与度は、例えば図６に示すような話題関与度リストとして話題関与度リスト蓄積部１１２に蓄積される。
【００４４】
最後に、会議録作成部１０５は会議録を作成し、会議録表示部１０６を介して表示する（ステップＳ６）。ここで、会議録作成部１０５は図７に示すような会議録を作成するものとし、この会議録では、話題を選択すると当該話題に関連する会議状況のデータが図８に示すように表示されるものとする。即ち、会議録作成部１０５は、会議情報蓄積部１１１から取得した会議状況のデータを話題リストに基づいて分割し、話題毎に閲覧できるようなリンクを作成する。また、会議録作成部１０５は、話題関与度リストに基づいて各人別に重要な話題を強調表示したリストも併せて作成し、これらを組合せて会議録とする。会議録表示部１０６は、会議録作成部１０５が作成した会議録を閲覧者の求めに応じて表示する。
【００４５】
ここで、強調表示の例について説明する。まず、話題関与度に関して例えば２つの閾値（第１の閾値＜第２の閾値）を設けておき、話題関与度が第１の閾値未満であれば重要度を「低」、第１の閾値以上であって、第２の閾値未満であれば重要度を「中」、第２の閾値以上であれば「高」とランク付けるものとする。この前提の下、ある会議で、出席者１の話題「特許提案について」に関する関与度が「高」ランクであれば、会議録において話題「特許提案について」は「出席者１が主説明者である話題」として強調表示される。また、出席者２の話題「特許提案について」に関する関与度が「中」ランクであれば、会議録において、話題「特許提案について」は「出席者２が議論参加者である話題」として強調表示される。一方、出席者２の話題「進捗報告」に関する関与度が「低」ランクであれば、話題「進捗報告」は出席者２にとってあまり重要でない話題として強調表示されない。
【００４６】
また、話題関与度リスト蓄積部１１２は、過去に行われた会議における話題関与度リストも蓄積しているため、これも利用する。即ち、同じ話題について複数回の会議に渡って議論する場合に、ある会議において不在であっても過去の関与度から重要度を判断し、強調表示することができる。例えば、前述のように話題関与度を「高」、「中」及び「低」にランク付けするなら、ある会議の話題「開発項目１について」の議論に出席者４が不在であったが、直近の会議における当該話題に関する関与度が「高」ランクであれば、話題「開発項目１について」は出席者４の「確認必須箇所」として強調表示される。また、ある会議の話題「開発項目３について」の議論に出席者４が不在であったが、直近の会議における当該話題に関する関与度が「中」ランクであれば、話題「開発項目３について」は出席者４の「要注意箇所」として強調表示される。一方、ある会議の話題「特許提案について」の議論に出席者３が不在であって、直近の会議における当該話題に関する関与度も「低」ランクであれば、話題「特許提案について」は出席者３にとってあまり重要でない話題として強調表示せず、不在であったことを示す程度に留める。
【００４７】
以上説明したように、本実施形態によれば閲覧者が必要とする情報を効率的に閲覧可能な会議録表示装置を提供できる。
【００４８】
（第２の実施形態）
図９に示すように、本発明の第２の実施形態に係る会議録表示装置は、図１に示す第１の実施形態に係る会議録表示装置に新たに管理情報蓄積部２１３を追加したものである。その他、図１に示す会議録表示装置と同一部分については説明を省略する。
【００４９】
管理情報蓄積部２１３は、会議録の閲覧を管理するための管理情報を蓄積する。この管理情報には、例えばログイン名、パスワード、及びメールアドレスなどの各人を識別するための情報が含まれる。
【００５０】
また、本実施形態において会議録表示部１０６は、管理情報蓄積部２１３に蓄積された管理情報と、例えば閲覧者から入力されたログイン名、及びパスワードといった情報を照合するなどして、閲覧者を特定する。会議録表示部１０６は、このようにして特定された閲覧者に応じて会議録の表示を変更する。即ち、例えば図７に示した会議録を出席者４が閲覧する場合であれば、図１０に示すように「出席者４」という表示を「あなた」に変えたり、閲覧者以外の出席者については強調表示しないようにしたりすることで、閲覧者にとって必要な情報が明確になり、より簡便な参照ができる。
【００５１】
以上説明したように、本実施形態によれば閲覧者が必要とする情報を効率的に閲覧可能な会議録表示装置を提供できる。
【００５２】
（第３の実施形態）
図１１に示すように、本発明の第３の実施形態に係る会議録表示装置は、図９に示す会議録表示装置に新たに通知部３０７を追加したものである。その他、図９に示す会議録表示装置と同一部分についての説明は省略する。
【００５３】
通知部３０７は、各人が不在であって、かつ、関わりの強い話題（強調表示する話題）が検出されると、該当者に会議録の閲覧を促すよう通知する。通知部３０７は、例えば管理情報蓄積部２１３に蓄積された管理情報を参照して、通知する人物のメールアドレスを取得し、当該メールアドレスに会議録の閲覧を促す電子メールを送信する。
【００５４】
また、この通知を受けた人物は、会議録表示部１０６を介して会議録を閲覧することになるが、その際の表示は図７に示したような画一的な表示であってもよいし、図１０に示したような閲覧者毎に異なる表示であってもよい。
【００５５】
以上説明したように、本実施形態によれば、閲覧者は、特に自己の不在時に議論された重要な情報を効率的に閲覧可能な会議録表示装置を提供できる。
【図面の簡単な説明】
【００５６】
【図１】本発明の第１の実施形態に係る会議録表示装置を示すブロック図。
【図２】図１に示す会議録表示装置の実装例を示す図。
【図３】図１に示す会議録表示装置の処理の流れを示すフローチャート。
【図４】図１に示す会議録表示装置の話題検出部で用いる話題リストの例を示す図。
【図５】図１に示す会議録表示装置のアクション検出部で用いる得点表の例を示す図。
【図６】図１に示す会議録表示装置の話題関与度リスト蓄積部が蓄積する話題関与度リストの例を示す図。
【図７】図１に示す会議録表示装置の会議録表示部で表示される会議録の表示例を示す図。
【図８】図７に示す会議録による会議状況の再生の様子の例を示す図。
【図９】本発明の第２の実施形態に係る会議録表示装置を示すブロック図。
【図１０】図７に示す会議録の別の表示例を示す図。
【図１１】本発明の第３の実施形態に係る会議録表示装置を示すブロック図。
【符号の説明】
【００５７】
１０１・・・会議状況取得部
１０２・・・話題検出部
１０３・・・アクション検出部
１０４・・・話題関与度算出部
１０５・・・会議録作成部
１０６・・・会議録表示部
１１１・・・会議情報蓄積部
１１２・・・話題関与度リスト蓄積部
２１３・・・管理情報蓄積部
３０７・・・通知部
【特許請求の範囲】
【請求項１】
会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得部と、
前記会議状況情報、前記話題をリスト化した話題リスト、及び、複数のアクションと、当該アクションの話題に対する関わりの強弱に基づいて定められた得点とを関連付けて記載された得点表を蓄積する第１の蓄積部と、
前記会議状況情報から前記話題リスト中の話題を検出する第１の検出部と、
前記会議状況情報から前記得点表中のアクションを検出する第２の検出部と、
前記第２の検出部により検出されたアクションに関連付けられた得点に基づいて、前記第１の検出部により検出された話題毎に各出席者の関与度を算出する算出部と、
前記関与度を蓄積する第２の蓄積部と、
前記会議状況情報を話題単位で閲覧可能であって、かつ各出席者について前記関与度が一定値以上の話題を強調表示可能な会議録を作成する作成部と、
前記会議録を表示する表示部と
を具備することを特徴とする会議録表示装置。
【請求項２】
前記算出部は、前記話題及び出席者毎に前記検出されたアクションに関連付けられた得点を総和した値を前記関与度として算出することを特徴とする請求項１記載の会議録表示装置。
【請求項３】
前記アクションが発話行為の場合に、前記得点は当該発話行為が長くなると高い値となることを特徴とする請求項２記載の会議録表示装置。
【請求項４】
前記会議状況情報は、出席者となり得る各人の在室状況を示す情報を更に含み、
前記作成部は、前記在室状況を示す情報に基づいて前記各人が不在であった不在時話題を検出すると、前記第２の蓄積部に蓄積された過去の当該不在時話題に関する関与度を参照し、当該関与度が一定値以上であれば、当該不在時話題を強調表示可能な会議録を更に作成することを特徴とする請求項１記載の会議録表示装置。
【請求項５】
前記会議録の閲覧を管理する管理情報を蓄積する第３の蓄積部を更に具備し、
前記表示部は、前記管理情報に基づいて閲覧者を特定し、当該閲覧者によって異なる形式で前記会議録を表示することを特徴とする請求項４記載の会議録表示装置。
【請求項６】
前記会議録の閲覧を管理する管理情報を蓄積する第３の蓄積部を更に具備し、
前記作成部が、前記不在時話題を強調表示可能な会議録を作成する場合に、前記管理情報から該当者の通知先を取得し、当該通知先に閲覧を促す旨を通知する通知部を更に具備することを特徴とする請求項４記載の会議録表示装置。
【請求項７】
前記作成部が、前記不在時話題を強調表示可能な会議録を作成する場合に、前記管理情報から該当者の通知先を取得し、当該通知先に閲覧を促す旨を通知する通知部を更に具備することを特徴とする請求項５記載の会議録表示装置。
【請求項８】
会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得ステップと、
前記会議状況情報、前記話題をリスト化した話題リスト、及び、複数のアクションと、当該アクションの話題に対する関わりの強弱に基づいて定められた得点とを関連付けて記載された得点表を蓄積する第１の蓄積ステップと、
前記会議状況情報から前記話題リスト中の話題を検出する第１の検出ステップと、
前記会議状況情報から前記得点表中のアクションを検出する第２の検出ステップと、
前記第２の検出ステップにより検出されたアクションに関連付けられた得点に基づいて、前記第１の検出ステップにより検出された話題毎に各出席者の関与度を算出する算出ステップと、
前記関与度を蓄積する第２の蓄積ステップと、
前記会議状況情報を話題単位で閲覧可能であって、かつ各出席者について前記関与度が一定値以上の話題を強調表示可能な会議録を作成する作成ステップと、
前記会議録を表示する表示ステップと
を含む会議録表示方法。
【請求項１】
会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得部と、
前記会議状況情報、前記話題をリスト化した話題リスト、及び、複数のアクションと、当該アクションの話題に対する関わりの強弱に基づいて定められた得点とを関連付けて記載された得点表を蓄積する第１の蓄積部と、
前記会議状況情報から前記話題リスト中の話題を検出する第１の検出部と、
前記会議状況情報から前記得点表中のアクションを検出する第２の検出部と、
前記第２の検出部により検出されたアクションに関連付けられた得点に基づいて、前記第１の検出部により検出された話題毎に各出席者の関与度を算出する算出部と、
前記関与度を蓄積する第２の蓄積部と、
前記会議状況情報を話題単位で閲覧可能であって、かつ各出席者について前記関与度が一定値以上の話題を強調表示可能な会議録を作成する作成部と、
前記会議録を表示する表示部と
を具備することを特徴とする会議録表示装置。
【請求項２】
前記算出部は、前記話題及び出席者毎に前記検出されたアクションに関連付けられた得点を総和した値を前記関与度として算出することを特徴とする請求項１記載の会議録表示装置。
【請求項３】
前記アクションが発話行為の場合に、前記得点は当該発話行為が長くなると高い値となることを特徴とする請求項２記載の会議録表示装置。
【請求項４】
前記会議状況情報は、出席者となり得る各人の在室状況を示す情報を更に含み、
前記作成部は、前記在室状況を示す情報に基づいて前記各人が不在であった不在時話題を検出すると、前記第２の蓄積部に蓄積された過去の当該不在時話題に関する関与度を参照し、当該関与度が一定値以上であれば、当該不在時話題を強調表示可能な会議録を更に作成することを特徴とする請求項１記載の会議録表示装置。
【請求項５】
前記会議録の閲覧を管理する管理情報を蓄積する第３の蓄積部を更に具備し、
前記表示部は、前記管理情報に基づいて閲覧者を特定し、当該閲覧者によって異なる形式で前記会議録を表示することを特徴とする請求項４記載の会議録表示装置。
【請求項６】
前記会議録の閲覧を管理する管理情報を蓄積する第３の蓄積部を更に具備し、
前記作成部が、前記不在時話題を強調表示可能な会議録を作成する場合に、前記管理情報から該当者の通知先を取得し、当該通知先に閲覧を促す旨を通知する通知部を更に具備することを特徴とする請求項４記載の会議録表示装置。
【請求項７】
前記作成部が、前記不在時話題を強調表示可能な会議録を作成する場合に、前記管理情報から該当者の通知先を取得し、当該通知先に閲覧を促す旨を通知する通知部を更に具備することを特徴とする請求項５記載の会議録表示装置。
【請求項８】
会議における話題及び各出席者のアクションを含む会議状況情報を取得する取得ステップと、
前記会議状況情報、前記話題をリスト化した話題リスト、及び、複数のアクションと、当該アクションの話題に対する関わりの強弱に基づいて定められた得点とを関連付けて記載された得点表を蓄積する第１の蓄積ステップと、
前記会議状況情報から前記話題リスト中の話題を検出する第１の検出ステップと、
前記会議状況情報から前記得点表中のアクションを検出する第２の検出ステップと、
前記第２の検出ステップにより検出されたアクションに関連付けられた得点に基づいて、前記第１の検出ステップにより検出された話題毎に各出席者の関与度を算出する算出ステップと、
前記関与度を蓄積する第２の蓄積ステップと、
前記会議状況情報を話題単位で閲覧可能であって、かつ各出席者について前記関与度が一定値以上の話題を強調表示可能な会議録を作成する作成ステップと、
前記会議録を表示する表示ステップと
を含む会議録表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２００８−２１９１４２（Ｐ２００８−２１９１４２Ａ）
【公開日】平成２０年９月１８日（２００８．９．１８）
【国際特許分類】
【出願番号】特願２００７−５０１１７（Ｐ２００７−５０１１７）
【出願日】平成１９年２月２８日（２００７．２．２８）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２０年９月１８日（２００８．９．１８）
【国際特許分類】
【出願日】平成１９年２月２８日（２００７．２．２８）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]