発言管理システム、発言管理方法及び発言管理プログラム
【課題】会議等における発言についての記録を作成するとともに、円滑な議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムを提供する。
【解決手段】会議支援サーバ２０の制御部２１は、音声を取得し、音声認識処理を実行する。そして、発言管理情報記憶部２５に、認識結果を記録する。次に、制御部２１は、発言管理情報記憶部２５を用いて、キーワード抽出処理を実行する。キーワードに基づいて実行される会議進行管理処理において、議事進行があったと判定した場合、制御部２１は、議事項目の消込処理を実行する。また、キーワードに基づいて実行される説明表示管理処理においては、制御部２１は、参考情報を検索し、クライアント端末１０において表示候補を出力する。
【解決手段】会議支援サーバ２０の制御部２１は、音声を取得し、音声認識処理を実行する。そして、発言管理情報記憶部２５に、認識結果を記録する。次に、制御部２１は、発言管理情報記憶部２５を用いて、キーワード抽出処理を実行する。キーワードに基づいて実行される会議進行管理処理において、議事進行があったと判定した場合、制御部２１は、議事項目の消込処理を実行する。また、キーワードに基づいて実行される説明表示管理処理においては、制御部２１は、参考情報を検索し、クライアント端末１０において表示候補を出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、会議等における発言についての記録を作成するとともに、議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムに関する。
【背景技術】
【０００２】
会議を行なった場合、会議終了後に議事録を作成することがある。このような議事録作成の効率化を図るために、議事録作成システムが検討されている。例えば、各発言内容について、発言者を特定しながら議事録を作成するための技術が検討されている（例えば、特許文献１を参照。）。この文献に記載された技術では、マイクで収集された録音内容に基づき、音声認識部は、会議出席者の音声を認識する。そして、認識した音声から議事録データを作成する。話者特定部は、声紋認証により、各発言内容の発言者を特定する。作成した議事録データにおける発言内容と特定された発言者とが対応付けられた議事録データを表示する。
【０００３】
また、記録された会議映像において、重要個所のみを抽出して視聴できるようにするための技術が検討されている（例えば、特許文献２を参照。）。この文献に記載された技術では、会議映像において、会議における重要部分を検出するインデックス検出手段を備える。そして、インデックス情報に基づいて議事録ファイルを作成する。
【０００４】
また、マイクロフォンに入力された音声に含まれるキーワードを認識し、このキーワードに基づいて各種操作を行なうための技術も検討されている（例えば、特許文献３を参照。）。この文献に記載された技術では、音声認識部において、キーワードスポッティング手法により入力音声の認識処理を実行する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−２３３０７５号公報（第１頁、図１）
【特許文献２】特開２００５−３４１０１５号公報（第１頁、図１）
【特許文献３】特開平８−３３９１９８号公報（第１頁、図１）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１に記載された技術においては、表示された発言内容に基づいて内容を確認することができる。しかしながら、発言内容の中には、専門用語が含まれる場合もあり、会議参加者の知識レベルによっては、発言内容が的確に理解されていない可能性もある。
【０００７】
また、会議の進行状況に言っては、会議参加者に関連資料を提示したい場合もある。このように、関連資料を提示する場合、会議の司会者や説明者の手間をかけていたのでは、会議に集中することができないことがある。
【０００８】
また、会議においては、会議次第において、議事の順番が予め決められていることが多い。この場合、参加者が現在の議事状況を把握できると便利である。
本発明は、上記問題点を解決するためになされたものであり、発言についての記録を作成するとともに、円滑な議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムを提供することにある。
【課題を解決するための手段】
【０００９】
上記問題点を解決するために、請求項１に記載の発明は、キーワードに対して関連情報を記録したキーワード記憶手段と、音声認識された発言内容を記録する発言記憶手段と、音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムであって、前記制御手段が、前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段と、前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段と、前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段とを備えたことを要旨とする。
【００１０】
請求項２に記載の発明は、請求項１に記載の発言管理システムにおいて、前記キーワード記憶手段には、前記関連情報として、キーワードについての説明文が記録されていることを要旨とする。
【００１１】
請求項３に記載の発明は、請求項１又は２に記載の発言管理システムにおいて、利用者の属性情報を記録した利用者管理手段を更に備え、各キーワードに対して、利用者の属性情報が更に記録されており、前記制御手段が、前記利用者管理手段から、各表示装置の利用者の属性情報を取得し、前記属性情報に対応するキーワードを前記キーワード記憶手段から抽出し、抽出したキーワードを用いて前記キーワードスポッティング処理を行なうことを要旨とする。
【００１２】
請求項４に記載の発明は、請求項１〜３のいずれか一つに記載の発言管理システムにおいて、前記表示装置に関連情報を出力したキーワードについて、前記キーワード記憶手段に出力済み情報を記録し、前記キーワードスポッティング処理においては、出力済み情報が記録されていないキーワードを用いることを要旨とする。
【００１３】
請求項５に記載の発明は、請求項１〜４のいずれか一つに記載の発言管理システムにおいて、前記制御手段が、前記表示装置に関連情報を出力したキーワードについて、発言文言が含まれていた発言回数をカウントし、前記発言回数に応じて、前記キーワードの関連情報の表示方法を変更する手段を更に備えたことを要旨とする。
【００１４】
請求項６に記載の発明は、請求項１〜５のいずれか一つに記載の発言管理システムにおいて、前記キーワード記憶手段には、議事項目の進行を特定するためのキーワードが記録されており、前記制御手段が、発言文言とキーワードとの一致を検知した場合には、前記表示装置に出力された前記議事項目を消し込む手段を更に備えたことを要旨とする。
【００１５】
請求項７に記載の発明は、請求項１〜６のいずれか一つに記載の発言管理システムにおいて、前記制御手段が、前記発言記憶手段に記録された発言内容を用いて要約を作成し、前記表示装置に提供する手段を更に備えたことを要旨とする。
【００１６】
請求項８に記載の発明は、請求項７に記載の発言管理システムにおいて、前記制御手段が、前記表示装置において指定された発言内容範囲の要約を作成することを要旨とする。
請求項９に記載の発明は、請求項７に記載の発言管理システムにおいて、前記制御手段が、発言内容において前記キーワードスポッティング処理により抽出された発言文言の位置を特定し、この発言文言の位置を用いて要約対象範囲を特定し、この要約対象範囲の発言内容を要約することを要旨とする。
【００１７】
請求項１０に記載の発明は、キーワードに対して関連情報を記録したキーワード記憶手段と、音声認識された発言内容を記録する発言記憶手段と、音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムを用いた発言管理方法であって、前記制御手段が、前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する段階と、前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう段階と、前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する段階とを実行することを要旨とする。
【００１８】
請求項１１に記載の発明は、キーワードに対して関連情報を記録したキーワード記憶手段と、音声認識された発言内容を記録する発言記憶手段と、音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システム発言管理プログラムであって、前記制御手段を、前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段、前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段、前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段として機能させることを要旨とする。
【００１９】
（作用）
請求項１、１０又は１１に記載の発明によれば、制御手段が、音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して発言記憶手段に記録する。次に、発言内容に含まれる発言文言と、キーワード記憶手段に記憶されたキーワードとを比較する。そして、発言文言とキーワードとが一致した場合には、キーワードに関連付けられた関連情報を表示装置に出力する。これにより、利用者に対して、発言に関連する関連情報を提供することができる。
【００２０】
請求項２に記載の発明によれば、キーワード記憶手段には、関連情報として、キーワードについての説明文が記録されている。これにより、利用者は、発言についての説明情報を取得することができる。
【００２１】
請求項３に記載の発明によれば、利用者管理手段から、各表示装置の利用者の属性情報を取得する。そして、属性情報に対応するキーワードをキーワード記憶手段から抽出し、抽出したキーワードを用いてキーワードスポッティング処理を行なう。これにより、利用者の属性に応じた関連情報を提供することができる。
【００２２】
請求項４に記載の発明によれば、表示装置に関連情報を出力したキーワードについて、キーワード記憶手段に出力済み情報を記録し、キーワードスポッティング処理においては、出力済み情報が記録されていないキーワードを用いる。これにより、既に提供済みの情報については、重複した提供を抑制することができる。
【００２３】
請求項５に記載の発明によれば、表示装置に関連情報を出力したキーワードについて、発言文言が含まれていた発言回数をカウントし、発言回数に応じて、キーワードの関連情報の表示方法を変更する。これにより、キーワードの重み付けを行ない、この重み付けに応じた表示を行なうことができる。
【００２４】
請求項６に記載の発明によれば、キーワード記憶手段には、議事項目の進行を特定するためのキーワードが記録されている。そして、制御手段が、発言文言とキーワードとの一致を検知した場合には、表示装置に出力された議事項目を消し込む。これにより、利用者に対して、議事の進行状況を提供することができる。
【００２５】
請求項７に記載の発明によれば、発言記憶手段に記録された発言内容を用いて要約を作成する。これにより、利用者に対して、要約を提供することができる。
請求項８に記載の発明によれば、表示装置において指定された発言内容範囲の要約を作成する。これにより、所定範囲の発言についての要約を提供することができる。
【００２６】
請求項９に記載の発明によれば、発言内容においてキーワードスポッティング処理により抽出された発言文言の位置を特定する。そして、この発言文言の位置を用いて要約対象範囲を特定し、この要約対象範囲の発言内容を要約する。これにより、キーワードによって特定された範囲の要約を作成することができる。
【発明の効果】
【００２７】
本発明によれば、発言についての記録を作成するとともに、円滑な議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムを提供することができる。
【図面の簡単な説明】
【００２８】
【図１】本発明の実施形態の発言管理システムの説明図。
【図２】本実施形態の各データ記憶部に記録されたデータの説明図であって、（ａ）はキーワード記憶部、（ｂ）は参考情報記憶部、（ｃ）は会議管理情報記憶部、（ｄ）は発言管理情報記憶部の説明図。
【図３】本実施形態の処理手順の説明図。
【図４】本実施形態の処理手順の説明図。
【図５】本実施形態のクライアント端末における表示画面の説明図。
【図６】他の実施形態の処理手順の説明図。
【図７】他の実施形態の処理手順の説明図。
【図８】他の実施形態の処理手順の説明図。
【図９】他の実施形態の処理手順の説明図。
【発明を実施するための形態】
【００２９】
以下、本発明を具体化した発言管理システムの一実施形態を図１〜図５に従って説明する。本実施形態では、複数の拠点に設置されたクライアント端末を接続して、テレビ会議を行なう場合を説明する。本実施形態では、図１に示すように、ネットワークを介して相互に接続されたクライアント端末１０、会議支援サーバ２０を用いる。
【００３０】
クライアント端末１０は、テレビ会議の参加者（利用者）が利用するコンピュータ端末である。このクライアント端末１０は、制御部、キーボードやポイントデバイス等の入力部、ディスプレイ等の出力部（表示装置）、マイク（音声入力装置）、スピーカ、カメラ等を備えている。
【００３１】
クライアント端末１０は、カメラによって撮影された映像データと、マイクにより集音された音声データとからなる映像・音声データを、ネットワークを介して、会議支援サーバ２０に送信する。クライアント端末１０は、映像・音声データを送信する場合には、自身の端末コードに関するデータを含める。
【００３２】
また、クライアント端末１０は、会議支援サーバ２０から、他拠点の映像・音声データを取得した場合、スピーカから音声を出力したり、ディスプレイに画像を表示したりする。
【００３３】
クライアント端末１０のディスプレイには、図５に示すテレビ会議画面５００が出力される。このテレビ会議画面５００は、参加者表示領域５１０、会議次第表示欄５２０、発言履歴表示欄５３０、説明表示欄５４０から構成されている。この参加者表示領域５１０には、他拠点のクライアント端末１０から取得した画像データが出力される。会議次第表示欄５２０には、この会議の議事項目が列挙された会議次第が出力される。発言履歴表示欄５３０には、会議参加者の発言を音声認識したテキストが表示される。説明表示欄５４０には、発言に関連する参考情報の出力を指示するための選択アイコンが表示される。
【００３４】
会議支援サーバ２０は、各拠点に設置されたクライアント端末１０によるテレビ会議を支援するコンピュータシステムである。
会議支援サーバ２０は、制御部２１、キーワード記憶部２２、参考情報記憶部２３、会議管理情報記憶部２４、発言管理情報記憶部２５、映像・音声記憶部２６を備えている。本実施形態では、キーワード記憶部２２、参考情報記憶部２３がキーワード記憶手段として機能し、発言管理情報記憶部２５が発言記憶手段として機能する。そして、制御部２１は、制御手段（ＣＰＵ、ＲＡＭ、ＲＯＭ等）を備え、後述する処理（会議中継段階、音声認識段階、発言記録段階、画面制御段階、キーワード抽出段階、進行管理段階、説明表示段階、要約作成段階等の各処理等）を行なう。そのための発言管理プログラム（聴講者用）を実行することにより、制御部２１は、図１に示すように、会議中継手段２１１、音声認識手段２１２、発言記録手段２１３、画面制御手段２１４、キーワード抽出手段２１５、進行管理手段２１６、説明表示手段２１７、要約作成手段２１８として機能する。
【００３５】
会議中継手段２１１は、クライアント端末１０から取得した映像・音声データを、他の拠点に設置されたクライアント端末１０に転送する処理を実行する。また、会議中継手段２１１は、映像・音声データに含まれる音声データを、音声認識手段２１２に供給する。
【００３６】
音声認識手段２１２は、クライアント端末１０から取得した音声データに基づいて音声認識処理によりテキストに変換した音声認識テキストを生成する処理を実行する。
発言記録手段２１３は、音声認識テキストを翻訳して翻訳テキストを生成する処理を実行する。更に、発言記録手段２１３は、端末コードに基づいて発言者を特定した参加者コードを関連づけて、音声認識テキスト、翻訳テキストを発言管理情報記憶部２５に記録する処理を実行する。
【００３７】
画面制御手段２１４は、各クライアント端末１０のディスプレイに表示されたテレビ会議画面５００の表示を制御する処理を実行する。具体的には、テレビ会議画面５００の会議次第表示欄５２０に、テレビ会議の議事項目を列挙した会議次第を出力する。また、発言履歴表示欄５３０に、会議参加者の発言を音声認識したテキストを表示する。更に、説明表示欄５４０に、発言に関連する参考情報を選択させるための選択アイコンを表示する。そして、画面制御手段２１４は、発言履歴表示欄５３０、説明表示欄５４０に表示する情報がオーバーフローした場合には、古い情報から順次、表示を削除する。
【００３８】
キーワード抽出手段２１５は、発言管理情報記憶部２５に記録されたテキスト（発言文言）と、キーワード記憶部２２に記録されたキーワードをマッチングする処理（キーワードスポッティング処理）を実行する。
【００３９】
進行管理手段２１６は、キーワードスポッティング処理により抽出されたキーワードに基づいて、会議の進行状態を管理する処理を実行する。
説明表示手段２１７は、キーワードスポッティング処理により抽出されたキーワードに基づいて、参考情報の出力を管理する処理を実行する。
要約作成手段２１８は、発言管理情報記憶部２５に記録された議事録レコードに基づいて、公知の要約作成技術を用いて要約を生成する処理を実行する。
【００４０】
キーワード記憶部２２には、図２（ａ）に示すように、キーワードスポッティング処理を行なうためのキーワード管理レコード２２０が記録されている。このキーワード管理レコード２２０は、キーワードが登録された場合に記録される。キーワード管理レコード２２０には、キーワード、対応に関するデータが記録されている。
【００４１】
キーワードデータ領域には、キーワードスポッティング処理の対象となる言葉に関するデータが記録されている。
対応データ領域には、該当キーワードを検知した場合の対応に関するデータが記録されている。本実施形態では、キーワードスポッティング処理を会議進行管理、説明表示又は要約作成のために用いる。このため、対応データ領域には、会議進行管理、説明表示又は要約作成を特定するフラグが記録されている。
【００４２】
参考情報記憶部２３には、図２（ｂ）に示すように、クライアント端末１０に出力する参考情報についての参考情報管理レコード２３０が記録されている。この参考情報管理レコード２３０は、キーワードに対応する参考情報が登録された場合に記録される。参考情報管理レコード２３０には、キーワード、参考資料、表示状況に関するデータが記録されている。
【００４３】
キーワードデータ領域には、説明情報の出力対象である用語に関するデータが記録されている。
参考情報データ領域には、このキーワードに対応した関連情報が記録されている。本実施形態では、会議の中で用いられる専門用語の解説（説明文）やプレゼンテーション資料、内部資料が記録される。
【００４４】
表示状況データ領域には、この参考情報の表示状況を特定するためのフラグが記録される。クライアント端末１０において、選択アイコンを表示した場合に、出力済み情報として表示済フラグを記録する。
【００４５】
会議管理情報記憶部２４には、図２（ｃ）に示すように、会議を運営するための会議管理情報が記録されている。本実施形態では、会議概要レコード２４１、会議次第管理レコード２４２及び参加者管理レコード２４３が記録されている。この参加者管理レコード２４３が記録された会議管理情報記憶部２４が利用者管理手段として機能する。会議概要レコード２４１〜参加者管理レコード２４３は、会議の開催が決定されて、会議管理情報が登録された場合に記録されている。
【００４６】
会議概要レコード２４１には、会議コード、会議日時、タイトルに関するデータが記録されている。
会議コードデータ領域には、各会議を特定するための識別子に関するデータが記録されている。この会議コードにより、会議概要レコード２４１は、会議次第管理レコード２４２及び参加者管理レコード２４３に関連付けられている。
【００４７】
会議日時データ領域には、テレビ会議が行なわれる年月日及び時刻に関するデータが記録されている。
タイトルデータ領域には、テレビ会議の表題や目的に関するデータが記録されている。
【００４８】
会議次第管理レコード２４２には、議事順番、議事項目、キーワード、終了判定に関するデータが記録されている。
議事順番データ領域には、テレビ会議において討論予定の議事の順番を特定するためのデータが記録されている。
【００４９】
議事項目データ領域には、この議事の題目議題に関するデータが記録されている。複数の議題について討論を予定している場合には、すべての議題が記録されている。
キーワードデータ領域には、この議題の討論において用いるキーワードに関するデータが記録されている。
終了判定データ領域には、この議題についての討論の終了を判定するためのフラグが記録される。討論が終了した議事については、終了フラグが記録される。
【００５０】
参加者管理レコード２４３には、参加者コード、役割コード、端末コード、言語に関するデータが記録されている。
参加者コードデータ領域には、このテレビ会議の参加者を特定するための識別子に関するデータが記録されている。
【００５１】
役割コードデータ領域には、この参加者のテレビ会議における役割を特定するための識別子に関するデータが記録されている。本実施形態では、司会者の参加者管理レコード２４３には、司会者フラグが記録されている。
【００５２】
端末コードデータ領域には、この参加者が利用するクライアント端末１０を特定するための識別子が記録されている。例えば、端末コードとしてＩＰアドレスを利用することができる。
言語データ領域には、参加者が用いる言語を特定するための識別子が記録されている。
【００５３】
発言管理情報記憶部２５には、図２（ｄ）に示すように、テレビ会議における参加者の発言に関する情報が記録される。本実施形態では、音声ファイル、発言履歴レコード２５１及び要約管理レコード２５２が記録される。発言履歴レコード２５１は、後述する音声認識処理を実行した場合に記録される。要約管理レコード２５２は、後述する要約作成処理を実行した場合に記録される。
【００５４】
発言履歴レコード２５１には、時刻、発言者コード、発言内容に関するデータが記録される。
時刻データ流域には、発言を記録した年月日及び時刻に関するデータが記録される。
発言者コードデータ領域には、発言者を特定するための識別子（参加者コード）に関するデータが記録される。
発言内容データ領域には、音声認識処理により音声データを変換した音声認識テキスト、及びこの音声認識テキストを翻訳した翻訳テキストが記録される。
【００５５】
要約管理レコード２５２には、時刻、要約に関するデータが記録される。
時刻データ流域には、要約作成処理が行なわれた時刻に関するデータが記録される。
要約データ流域には、要約作成処理により生成された要約内容に関するデータが記録される。
【００５６】
映像・音声記憶部２６には、各クライアント端末１０から取得した映像・音声データが記録される。この映像・音声データには、映像・音声データを送信したクライアント端末１０の端末コードや、映像・音声データの取得時刻が関連付けられて記録される。この取得時刻と、発言履歴レコード２５１に記録された時刻とを用いることにより、映像・音声データと発言履歴レコード２５１の発言内容とを関連付けることができる。
【００５７】
次に、この発言管理システムにおける動作を、図３〜図５を用いて説明する。ここでは、発言登録処理（図３）、キーワードスポッティング処理（図３）、要約作成処理（図４）の順番に行なう。
（発言登録処理）
まず、発言登録処理を、図３を用いて説明する。この処理は、テレビ会議中に行なわれる。
【００５８】
ここでは、会議支援サーバ２０の制御部２１は、音声の取得処理を実行する（ステップＳ１−１）。具体的には、制御部２１の会議中継手段２１１は、各クライアント端末１０から、映像・音声データを取得する。この映像・音声データには、データを送信したクライアント端末１０の端末コードに関するデータが含まれる。会議中継手段２１１は、取得した映像・音声データを、映像・音声データを送信したクライアント端末１０の端末コードや、映像・音声データの取得時刻に関連付けて、映像・音声記憶部２６に記録する。そして、会議中継手段２１１は、他の拠点に設置されたクライアント端末１０に転送する。更に、会議中継手段２１１は、映像・音声データに含まれる音声データを音声認識手段２１２に供給する。
【００５９】
次に、会議支援サーバ２０の制御部２１は、音声認識処理を実行する（ステップＳ１−２）。具体的には、制御部２１の音声認識手段２１２は、取得した音声データの音声認識処理により、音声テキストを生成する。そして、音声認識手段２１２は、音声テキストを発言記録手段２１３に提供する。
【００６０】
次に、会議支援サーバ２０の制御部２１は、発言の記録処理を実行する（ステップＳ１−３）。具体的には、制御部２１の発言記録手段２１３は、会議管理情報記憶部２４において、映像・音声データを送信したクライアント端末１０の端末コードが記録された参加者管理レコード２４３を抽出する。そして、発言記録手段２１３は、参加者管理レコード２４３に記録されている参加者コードを特定する。更に、発言記録手段２１３は、参加者管理レコード２４３を用いて各クライアント端末１０を利用している参加者の言語を特定する。次に、発言記録手段２１３は、特定した言語に応じて、音声認識手段２１２から取得した音声テキストを翻訳した翻訳テキストを生成する。そして、発言記録手段２１３は、システムタイマから現在時刻及び端末コード、発言内容（音声テキスト及び翻訳テキスト）を記録した発言履歴レコード２５１を生成し、発言管理情報記憶部２５に記録する。更に、発言記録手段２１３は、発言内容を画面制御手段２１４に供給する。
【００６１】
次に、会議支援サーバ２０の制御部２１は、発言履歴の出力処理を実行する（ステップＳ１−４）。具体的には、制御部２１の画面制御手段２１４は、各クライアント端末１０に対して、音声テキスト及び翻訳テキストを各クライアント端末１０に送信する。この場合、テレビ会議画面５００の発言履歴表示欄５３０に発言内容を出力する。ここで、発言履歴表示欄５３０がオーバーフローする場合には、最も古い発言内容から順番に削除していく。
【００６２】
（キーワードスポッティング処理）
次に、キーワードスポッティング処理を、図３を用いて説明する。この処理は、テレビ会議中に行なわれる。本実施形態では、キーワードスポッティング処理において、会議進行管理処理、説明表示管理処理、要約作成処理を実行する。
【００６３】
まず、会議支援サーバ２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−１）。具体的には、制御部２１のキーワード抽出手段２１５は、発言管理情報記憶部２５に新たに記録された発言履歴レコード２５１を取得する。次に、キーワード抽出手段２１５は、発言履歴レコード２５１において、キーワード記憶部２２に記録されているキーワードが含まれているかどうかを判定する。キーワードが含まれていない場合は、この発言履歴レコード２５１についてのキーワードスポッティング処理を終了する。
【００６４】
一方、キーワードが含まれている場合には、キーワード抽出手段２１５は、キーワード管理レコード２２０に記録されている対応を特定する。ここでは、議事項目の進行を特定するためのキーワード「終了」や「終わり」に関連付けて、対応データ領域に「会議進行管理」が記録されている場合を想定する。この場合、キーワード抽出手段２１５は、進行管理手段２１６に処理を引き継ぐ。
【００６５】
〔会議進行管理処理〕
まず、会議進行管理処理について説明する。
会議支援サーバ２０の制御部２１は、発言者の特定処理を実行する（ステップＳ２−２）。具体的には、制御部２１の進行管理手段２１６は、キーワードスポッティング処理によって抽出された発言履歴レコード２５１に記録されている発言者コードを取得する。
【００６６】
次に、会議支援サーバ２０の制御部２１は、司会者かどうかについての判定処理を実行する（ステップＳ２−３）。具体的には、制御部２１の進行管理手段２１６は、会議管理情報記憶部２４から、この発言者コードが参加者コードデータ領域に記録されている参加者管理レコード２４３を取得する。ここで、参加者管理レコード２４３の役割コードデータ領域に司会者フラグが記録されている場合には司会者と判定する。
【００６７】
司会者でないと判定した場合（ステップＳ２−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、会議進行管理処理を終了する。
一方、司会者と判定した場合（ステップＳ２−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、会議次第の検索処理を実行する（ステップＳ２−４）。具体的には、制御部２１の進行管理手段２１６は、終了フラグが記録されていない会議次第管理レコード２４２であって、議事順番が最も早いレコードを特定することにより、現在の議事項目を特定する。
【００６８】
次に、会議支援サーバ２０の制御部２１は、議事進行があったかどうかについての判定処理を実行する（ステップＳ２−５）。具体的には、制御部２１の進行管理手段２１６は、特定した会議次第管理レコード２４２に記録されているキーワードが、キーワードスポッティング処理の対象となった発言履歴レコード２５１に含まれているかどうかを確認する。キーワードが含まれている場合には、議事進行があったと判定する。
【００６９】
キーワードが含まれておらず、議事進行がなかったと判定した場合（ステップＳ２−５において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、会議進行管理処理を終了する。
【００７０】
一方、キーワードが含まれており、議事進行があったと判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、議事項目の消込処理を実行する（ステップＳ２−６）。具体的には、制御部２１の進行管理手段２１６は、この会議次第管理レコード２４２の終了判定データ領域に、終了フラグを記録する。更に、進行管理手段２１６は、画面制御手段２１４に、終了した議事項目を通知する。この場合、画面制御手段２１４は、各クライアント端末１０において、テレビ会議画面５００の会議次第表示欄５２０に表示された会議次第において、通知された議事項目をグレイアウトする。
【００７１】
〔説明表示管理処理〕
次に、説明表示管理処理を説明する。この処理は、キーワード抽出処理（ステップＳ２−１）において、専門用語や資料名のキーワードに関連付けて、対応データ領域に「説明表示」が記録されている場合に行なわれる。この場合、キーワード抽出手段２１５は、説明表示手段２１７に処理を引き継ぐ。
【００７２】
ここでは、会議支援サーバ２０の制御部２１は、参考情報の検索処理を実行する（ステップＳ２−７）。具体的には、制御部２１の説明表示手段２１７は、参考情報記憶部２３において、キーワードスポッティング処理の対象となったキーワードが記録された参考情報管理レコード２３０を特定する。
【００７３】
次に、会議支援サーバ２０の制御部２１は、表示状況の検索処理を実行する（ステップＳ２−８）。具体的には、制御部２１の説明表示手段２１７は、特定した参考情報管理レコード２３０の表示状況データ領域に表示済フラグが記録されているかどうかを確認する。
【００７４】
次に、会議支援サーバ２０の制御部２１は、既表示かどうかについての判定処理を実行する（ステップＳ２−９）。具体的には、制御部２１の説明表示手段２１７は、参考情報管理レコード２３０の表示状況データ領域に表示済フラグが記録されている場合には、既表示と判定する。
【００７５】
既表示と判定した場合（ステップＳ２−９において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、説明表示管理処理を終了する。
一方、表示済フラグが記録されておらず、既表示でないと判定した場合（ステップＳ２−９において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、表示候補の出力処理を実行する（ステップＳ２−１０）。具体的には、制御部２１の説明表示手段２１７は、画面制御手段２１４に、キーワードスポッティング処理により抽出されたキーワードを通知する。この場合、画面制御手段２１４は、各クライアント端末１０において、テレビ会議画面５００の説明表示欄５４０に、キーワードに関連する参考情報を出力させるための選択アイコンを表示する。この選択アイコンは、参考情報記憶部２３に記録された参考資料にリンクされている。この場合、画面制御手段２１４は、参考情報管理レコード２３０の表示状況データ領域に表示済フラグを記録する。
【００７６】
次に、会議支援サーバ２０の制御部２１は、参考情報の出力処理を実行する（ステップＳ２−１１）。具体的には、制御部２１の説明表示手段２１７は、クライアント端末１０において選択アイコンの押下を検知した場合、クライアント端末１０のディスプレイに、選択アイコンに対応するキーワードの参考情報を出力する。
【００７７】
〔要約作成処理〕
次に、要約作成処理を、図４を用いて説明する。
ここでは、まず、会議支援サーバ２０の制御部２１は、要約指示の取得処理を実行する（ステップＳ３−１）。この処理は、キーワード抽出処理（ステップＳ２−１）において、「要約」というキーワードに関連付けて、対応データ領域に「要約作成」が記録されている場合に行なわれる。この場合、キーワード抽出手段２１５は、要約作成手段２１８に処理を引き継ぐ。
【００７８】
次に、会議支援サーバ２０の制御部２１は、先行要約の検索処理を実行する（ステップＳ３−２）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５において、要約管理レコード２５２を検索する。
【００７９】
次に、会議支援サーバ２０の制御部２１は、先行要約の登録があるかどうかについての判定処理を実行する（ステップＳ３−３）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５に要約管理レコード２５２が記録されている場合には、先行要約の登録があると判定する。
【００８０】
要約管理レコード２５２が記録されておらず、先行要約の登録がないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、最初からの要約の生成処理を実行する（ステップＳ３−４）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５から、テレビ会議開始からの発言履歴レコード２５１を抽出する。そして、要約作成手段２１８は、抽出した発言履歴レコード２５１の発言内容を集約して、要約を作成する。
【００８１】
一方、要約管理レコード２５２が記録されており、先行要約の登録があると判定した場合（ステップＳ３−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、先行要約以降の要約の生成処理を実行する（ステップＳ３−５）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５に記録されている要約管理レコード２５２の中で最も遅い時刻（直近要約作成時刻）を特定する。そして、要約作成手段２１８は、発言管理情報記憶部２５から、この直近要約作成時刻以降の時刻が記録されている発言履歴レコード２５１を抽出する。そして、要約作成手段２１８は、抽出した発言履歴レコード２５１の発言内容を集約して、要約を作成する。
【００８２】
次に、会議支援サーバ２０の制御部２１は、要約の出力処理を実行する（ステップＳ３−６）。具体的には、制御部２１の要約作成手段２１８は、作成した要約を画面制御手段２１４に供給する。画面制御手段２１４は、各クライアント端末１０に対して、要約を各クライアント端末１０に送信する。この場合、テレビ会議画面５００の発言履歴表示欄５３０に要約を出力する。
【００８３】
以上、本実施形態によれば、以下に示す効果を得ることができる。
（１）上記実施形態では、会議支援サーバ２０の制御部２１は、音声の取得処理（ステップＳ１−１）、音声認識処理（ステップＳ１−２）、発言の記録処理（ステップＳ１−３）を実行する。これにより、会議等における発言についての記録を残すことができる。この記録を利用することにより、効率的に議事録を作成することができる。
【００８４】
ここで、発言記録手段２１３は、特定した言語に応じて、音声認識手段２１２から取得した音声テキストを翻訳した翻訳テキストを生成する。これにより、外国語で会議が行なわれている場合にも、会議参加者自身の言語によって発言内容を把握することができる。
【００８５】
（２）上記実施形態では、会議支援サーバ２０の制御部２１は、発言履歴の出力処理を実行する（ステップＳ１−４）。この場合、クライアント端末１０のディスプレイに、発言履歴表示欄５３０を含むテレビ会議画面５００を出力する。これにより、参加者の各発言を確認することができる。
【００８６】
（３）上記実施形態では、会議支援サーバ２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−１）。ここで、キーワードに関連付けて「会議進行管理」が記録されている場合、会議進行管理処理を実行する。そして、キーワードが含まれており、議事進行があったと判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、議事項目の消込処理を実行する（ステップＳ２−６）。これにより、参加者は、クライアント端末１０において議事進行状況を把握することができる。
【００８７】
（４）上記実施形態では、会議支援サーバ２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−１）。ここで、キーワードに関連付けて「説明表示」が記録されている場合、説明表示管理処理において、制御部２１は、参考情報の検索処理（ステップＳ２−７）、表示状況の検索処理（ステップＳ２−８）を実行する。そして、既表示でないと判定した場合（ステップＳ２−９において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、表示候補の出力処理（ステップＳ２−１０）、参考情報の出力処理（ステップＳ２−１１）を実行する。これにより、参加者は、クライアント端末１０において、参考情報を効率的に入手することができる。
【００８８】
（５）上記実施形態では、キーワードに関連付けて「要約作成」が記録されている場合、要約作成処理を実行する。ここで、先行要約の登録が登録されていないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、最初からの要約の生成処理を実行する（ステップＳ３−４）。一方、先行要約の登録が登録されていると判定した場合（ステップＳ３−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、先行要約以降の要約の生成処理を実行する（ステップＳ３−５）。そして、会議支援サーバ２０の制御部２１は、要約の出力処理を実行する（ステップＳ３−６）。これにより、クライアント端末１０において、会議における討論内容の要約を把握することができる。
【００８９】
なお、上記実施形態は、以下の態様に変更してもよい。
・ 上記実施形態では、キーワードスポッティング処理において、説明表示管理処理を実行する。抽出したキーワードに対する対応方法はこれらに限定されるものではない。例えば、重要発言を特定するキーワードをキーワード記憶部２２に記録してもよい。この場合、説明表示手段２１７に、重要発言が含まれる発言履歴レコード２５１を検索する所定の時間範囲に関するデータを保持している。この処理を、図６を用いて説明する。
【００９０】
まず、会議支援サーバ２０の制御部２１は、ステップＳ２−１と同様に、キーワード抽出処理を実行する（ステップＳ４−１）。ここでは、キーワード抽出手段２１５が、「重要」というキーワードを検知して説明表示手段２１７に処理を引き継ぐ場合を想定する。
【００９１】
ここで、会議支援サーバ２０の制御部２１は、重要発言の抽出処理を実行する（ステップＳ４−２）。具体的には、制御部２１の説明表示手段２１７は、この「重要」というキーワードが含まれている発言履歴レコード２５１を抽出する。更に、説明表示手段２１７は、この発言履歴レコード２５１に対して所定時間範囲内の発言履歴レコード２５１を抽出する。そして、説明表示手段２１７は、この発言履歴レコード２５１に記録された発言内容を重要発言として参考資料データ領域に記録した参考情報管理レコード２３０を生成し、参考情報記憶部２３に登録する。
【００９２】
次に、会議支援サーバ２０の制御部２１は、表示候補の出力処理を実行する（ステップＳ４−３）。具体的には、制御部２１の説明表示手段２１７は、画面制御手段２１４に、重要発言があったことを通知する。この場合、画面制御手段２１４は、各クライアント端末１０において、テレビ会議画面５００の説明表示欄５４０に、重要発言表示アイコンを表示する。この重要発言表示アイコンは、参考情報記憶部２３に記録された参考資料（重要発言）にリンクされている。
【００９３】
次に、会議支援サーバ２０の制御部２１は、重要発言の出力処理を実行する（ステップＳ４−４）。具体的には、説明表示手段２１７は、クライアント端末１０において重要発言表示アイコンの選択を検知した場合、クライアント端末１０のディスプレイに、参考情報記憶部２３に記録された重要発言を出力する。
これにより、クライアント端末１０において、効率的に重要発言を確認することができる。
【００９４】
・ 上記実施形態では、要約作成処理において、先行要約の登録がないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、最初からの要約の生成処理を実行する（ステップＳ３−４）。一方、先行要約の登録があると判定した場合（ステップＳ３−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、先行要約以降の要約の生成処理を実行する（ステップＳ３−５）。要約の作成方法は、これに限定されるものではない。例えば、キーワードスポッティング処理により抽出された発言文言の位置を特定して要約するようにしてもよい。具体的には、会議の区切り（議事の終了）を検知して、議事毎に要約対象範囲を特定して要約を作成する。この場合、議事項目の消込処理（ステップＳ２−６）を実行した時刻を、この議事順番の会議次第管理レコード２４２に終了時刻として記録するとともに、次の議事順番の会議次第管理レコード２４２に開始時刻として記録する。この処理を、図７を用いて説明する。
【００９５】
まず、会議支援サーバ２０の制御部２１は、会議の区切りの検出処理を実行する（ステップＳ５−１）。具体的には、制御部２１の要約作成手段２１８は、進行管理手段２１６において議事進行を検知する。
【００９６】
次に、会議支援サーバ２０の制御部２１は、区切り範囲の要約の生成処理を実行する（ステップＳ５−２）。具体的には、制御部２１の要約作成手段２１８は、会議の区切りにおいて終了した議事項目の会議次第管理レコード２４２に記録された開始時刻、終了時刻を取得する。そして、要約作成手段２１８は、発言管理情報記憶部２５から、この開始時刻〜終了時刻が記録されている発言履歴レコード２５１を抽出する。そして、要約作成手段２１８は、抽出した発言履歴レコード２５１の発言内容を集約して要約を作成する。
【００９７】
次に、会議支援サーバ２０の制御部２１は、ステップＳ３−６と同様に、要約の出力処理を実行する（ステップＳ５−３）。
これにより、各議事が終了した段階で、クライアント端末１０において、この議事についての要約を確認することができる。
【００９８】
・ 上記実施形態では、説明表示欄５４０に、発言に関連する参考情報の出力を指示するための選択アイコンを表示する。そして、説明表示欄５４０に表示する情報がオーバーフローする場合には、古い情報から順次、表示を削除する。説明表示欄５４０における表示制御はこれに限定されるものではない。例えば、キーワードの重要度に応じて、表示方法を変更してもよい。この場合には、参考情報記憶部２３の参考情報管理レコード２３０の表示状況データ領域に発言回数を記録する。更に、説明表示手段２１７に、重要度に応じて表示時間を決めるための時間決定テーブルを保持させておく。この処理を、図８を用いて説明する。
【００９９】
まず、会議支援サーバ２０の制御部２１は、ステップＳ２−１と同様に、キーワード抽出処理を実行する（ステップＳ６−１）。
次に、会議支援サーバ２０の制御部２１は、ステップＳ２−７と同様に、参考情報の検索処理（ステップＳ６−２）を実行する。
【０１００】
次に、会議支援サーバ２０の制御部２１は、表示状況の更新処理を実行する。（ステップＳ６−３）。具体的には、制御部２１の説明表示手段２１７は、参考情報管理レコード２３０の表示状況データ領域に記録された発言回数を更新する。
【０１０１】
次に、会議支援サーバ２０の制御部２１は、重要度の評価処理を実行する。（ステップＳ６−４）。具体的には、制御部２１の説明表示手段２１７は、説明表示欄５４０に表示されているすべての選択アイコンに対応する参考情報管理レコード２３０を取得し、表示状況データ領域に記録された発言回数を特定する。そして、説明表示手段２１７は、発言回数の多さに応じて重要度を評価する。
【０１０２】
次に、会議支援サーバ２０の制御部２１は、重要度に応じて並び替え処理を実行する（ステップＳ６−５）。具体的には、制御部２１の説明表示手段２１７は、選択アイコンの優先順位を決定する。
【０１０３】
次に、会議支援サーバ２０の制御部２１は、ステップＳ２−１０、Ｓ２−１１と同様に、表示候補の出力処理（ステップＳ６−６）、参考情報の出力処理（ステップＳ６−７）を実行する。
【０１０４】
重要なキーワードは何度も発言されることが多い。従って、この発言回数に応じて、重要度を評価し、この重要度に応じて表示を変更することができる。これにより、優先順位を並べ替えることにより、選択アイコンが表示されている表示時間を制御することができる。
【０１０５】
・ 上記実施形態では、参考情報記憶部２３には、クライアント端末１０に出力する説明情報についての参考情報管理レコード２３０が記録されている。そして、会議支援サーバ２０の制御部２１は、表示候補の出力処理（ステップＳ２−１０）、参考情報の出力処理（ステップＳ２−１１）を実行する。この場合、参考情報記憶部２３に記録されているすべての参考情報についてキーワードスポッティング処理を行なう。これに代えて、参加者の属性情報（例えば、スキルレベル）に応じて、キーワードスポッティング処理において用いるキーワードを変更するようにしてもよい。この場合には、参加者管理レコード２４３に参加者属性情報（スキルレベル）を記録しておく。更に、キーワード管理レコード２２０には、この参考情報を提供する対象者についての提供対象者属性情報（スキルレベル）を記録しておく。そして、制御部２１のキーワード抽出手段２１５は、会議管理情報記憶部２４に記録された参加者管理レコード２４３から、スキルレベルを取得する。そして、最も低いスキルレベルに基づいて最低レベルを決定する。そして、最低レベル以上の提供対象者属性情報が記録されたキーワード管理レコード２２０を用いて、キーワードスポッティング処理を行なう。これにより、参加者のスキルレベルに応じて不必要な情報の提供を抑制することができる。
【０１０６】
・ 上記実施形態では、すべてのクライアント端末１０に同じ表示候補が出力される。これに代えて、参加者の属性情報（例えば、スキルレベル）に応じて、表示候補を変更するようにしてもよい。この場合には、参加者管理レコード２４３には参加者属性情報（スキルレベル）を記録しておく。更に、参考情報管理レコード２３０には、この参考情報を提供する対象者についての提供対象者属性情報（スキルレベル）を記録しておく。そして、説明表示手段２１７は、キーワードスポッティング処理により特定されたキーワードの参考情報管理レコード２３０に記録されているスキルレベルを取得する。このスキルレベルに一致する参加者管理レコード２４３の参加者が利用しているクライアント端末１０を特定し、特定したクライアント端末１０のみに表示候補を出力する。これにより、例えばスキルレベルが低い参加者に対して参照情報を提供するとともに、スキルレベルが高い参加者には不必要な情報の提供を抑制することができる。従って、参加者属性に応じて的確な参考情報を提供することができる。
【０１０７】
・ 上記実施形態では、参考情報記憶部２３には、クライアント端末１０に出力する参考情報についての参考情報管理レコード２３０が記録されている。この参考情報管理レコード２３０には、キーワード、参考資料、表示状況に関するデータが記録されている。参考情報記憶部２３を用いて、会議支援サーバ２０の制御部２１は、表示状況の検索処理を実行する（ステップＳ２−８）。これに代えて、表示状況をキーワード記憶部２２のキーワード管理レコード２２０に記録するようにしてもよい。この場合には、表示済フラグが記録されているキーワードについては、キーワードスポッティング処理の対象外とする。これにより、少ないキーワードを対象として効率的にキーワードスポッティング処理を行なうことができる。
【０１０８】
・ 上記実施形態では、会議支援サーバ２０の制御部２１は、発言の記録処理を実行する（ステップＳ１−３）。ここで、発言者の感情を記録するようにしてもよい。この場合には、制御部２１に感情評価手段を設ける。この感情評価手段は、呼吸の荒さ、抑揚、声の淀み、ため息の評価結果から構成された感情パターンに対応させて、感情指数を記録した感情評価テーブルを保持している。更に、会議支援サーバ２０に、参加者コードに対応して、過去の発言における感情評価結果の統計値を記録した発話パターン記憶部を設ける。また、発言履歴レコード２５１には、感情指数を記録するためのデータ領域を更に設ける。この処理を、図９を用いて説明する。
【０１０９】
まず、会議支援サーバ２０の制御部２１は、ステップＳ１−１と同様に、音声の取得処理を実行する（ステップＳ７−１）。
次に、会議支援サーバ２０の制御部２１は、発話状態の評価処理を実行する（ステップＳ７−２）。本実施形態では、制御部２１の感情評価手段は、呼吸の荒さの評価、抑揚の評価、声の淀みの評価、ため息の評価を行なう。
【０１１０】
呼吸の荒さの評価においては、感情評価手段は、マイクで集音した呼吸音を取得する。そして、この参加者の呼吸の荒さ統計値と比較する。発話パターン記憶部に記録された統計値よりも呼吸音が大きく、息使いが荒いと判定した場合には、感情の高ぶりを示す評価結果を取得する。
【０１１１】
抑揚の評価においては、感情評価手段は、声の大きさの変化分布（変化の大きさ）を算出する。そして、この参加者の抑揚統計値と比較する。統計値よりも抑揚が大きい場合には、感情の高ぶりを示す評価結果を取得する。
【０１１２】
声の淀みの評価においては、感情評価手段は、発声の明瞭度を算出する。そして、この参加者の明瞭度統計値と比較する。発話パターン記憶部に記録された統計値よりも明瞭度が低く、淀みがあると判定した場合には、気分の落ち込みを示す評価結果を取得する。
【０１１３】
ため息の評価においては、感情評価手段は、ため息パターンと一致する呼吸音を特定する。そして、感情評価手段は、ため息パターンと一致する呼吸音の回数をカウントし、単位時間あたりの回数（ため息頻度）を算出する。この参加者のため息頻度の統計値と比較する。発話パターン記憶部に記録された統計値よりも、ため息頻度が高い場合には、気分の落ち込みを示す評価結果を取得する。
【０１１４】
次に、会議支援サーバ２０の制御部２１は、感情の評価処理を実行する（ステップＳ７−３）。具体的には、制御部２１の感情評価手段は、呼吸の荒さ、抑揚、声の淀み、ため息の評価結果の感情パターンに対応する感情指数を感情評価テーブルから取得する。
【０１１５】
次に、会議支援サーバ２０の制御部２１は、発言内容に関連付けて感情指数の記録処理を実行する（ステップＳ７−４）。具体的には、制御部２１の感情評価手段は、算出した感情指数を、この参加者の発言についての発言履歴レコード２５１に記録する。
【０１１６】
これにより、テキスト化された発言履歴において、その時の発言状況を把握することができる。
【符号の説明】
【０１１７】
１０…クライアント端末、２０…会議支援サーバ、２１…制御部、２１１…会議中継手段、２１２…音声認識手段、２１３…発言記録手段、２１４…画面制御手段、２１５…キーワード抽出手段、２１６…進行管理手段、２１７…説明表示手段、２１８…要約作成手段、２２…キーワード記憶部、２３…参考情報記憶部、２４…会議管理情報記憶部、２５…発言管理情報記憶部。
【技術分野】
【０００１】
本発明は、会議等における発言についての記録を作成するとともに、議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムに関する。
【背景技術】
【０００２】
会議を行なった場合、会議終了後に議事録を作成することがある。このような議事録作成の効率化を図るために、議事録作成システムが検討されている。例えば、各発言内容について、発言者を特定しながら議事録を作成するための技術が検討されている（例えば、特許文献１を参照。）。この文献に記載された技術では、マイクで収集された録音内容に基づき、音声認識部は、会議出席者の音声を認識する。そして、認識した音声から議事録データを作成する。話者特定部は、声紋認証により、各発言内容の発言者を特定する。作成した議事録データにおける発言内容と特定された発言者とが対応付けられた議事録データを表示する。
【０００３】
また、記録された会議映像において、重要個所のみを抽出して視聴できるようにするための技術が検討されている（例えば、特許文献２を参照。）。この文献に記載された技術では、会議映像において、会議における重要部分を検出するインデックス検出手段を備える。そして、インデックス情報に基づいて議事録ファイルを作成する。
【０００４】
また、マイクロフォンに入力された音声に含まれるキーワードを認識し、このキーワードに基づいて各種操作を行なうための技術も検討されている（例えば、特許文献３を参照。）。この文献に記載された技術では、音声認識部において、キーワードスポッティング手法により入力音声の認識処理を実行する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−２３３０７５号公報（第１頁、図１）
【特許文献２】特開２００５−３４１０１５号公報（第１頁、図１）
【特許文献３】特開平８−３３９１９８号公報（第１頁、図１）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１に記載された技術においては、表示された発言内容に基づいて内容を確認することができる。しかしながら、発言内容の中には、専門用語が含まれる場合もあり、会議参加者の知識レベルによっては、発言内容が的確に理解されていない可能性もある。
【０００７】
また、会議の進行状況に言っては、会議参加者に関連資料を提示したい場合もある。このように、関連資料を提示する場合、会議の司会者や説明者の手間をかけていたのでは、会議に集中することができないことがある。
【０００８】
また、会議においては、会議次第において、議事の順番が予め決められていることが多い。この場合、参加者が現在の議事状況を把握できると便利である。
本発明は、上記問題点を解決するためになされたものであり、発言についての記録を作成するとともに、円滑な議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムを提供することにある。
【課題を解決するための手段】
【０００９】
上記問題点を解決するために、請求項１に記載の発明は、キーワードに対して関連情報を記録したキーワード記憶手段と、音声認識された発言内容を記録する発言記憶手段と、音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムであって、前記制御手段が、前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段と、前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段と、前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段とを備えたことを要旨とする。
【００１０】
請求項２に記載の発明は、請求項１に記載の発言管理システムにおいて、前記キーワード記憶手段には、前記関連情報として、キーワードについての説明文が記録されていることを要旨とする。
【００１１】
請求項３に記載の発明は、請求項１又は２に記載の発言管理システムにおいて、利用者の属性情報を記録した利用者管理手段を更に備え、各キーワードに対して、利用者の属性情報が更に記録されており、前記制御手段が、前記利用者管理手段から、各表示装置の利用者の属性情報を取得し、前記属性情報に対応するキーワードを前記キーワード記憶手段から抽出し、抽出したキーワードを用いて前記キーワードスポッティング処理を行なうことを要旨とする。
【００１２】
請求項４に記載の発明は、請求項１〜３のいずれか一つに記載の発言管理システムにおいて、前記表示装置に関連情報を出力したキーワードについて、前記キーワード記憶手段に出力済み情報を記録し、前記キーワードスポッティング処理においては、出力済み情報が記録されていないキーワードを用いることを要旨とする。
【００１３】
請求項５に記載の発明は、請求項１〜４のいずれか一つに記載の発言管理システムにおいて、前記制御手段が、前記表示装置に関連情報を出力したキーワードについて、発言文言が含まれていた発言回数をカウントし、前記発言回数に応じて、前記キーワードの関連情報の表示方法を変更する手段を更に備えたことを要旨とする。
【００１４】
請求項６に記載の発明は、請求項１〜５のいずれか一つに記載の発言管理システムにおいて、前記キーワード記憶手段には、議事項目の進行を特定するためのキーワードが記録されており、前記制御手段が、発言文言とキーワードとの一致を検知した場合には、前記表示装置に出力された前記議事項目を消し込む手段を更に備えたことを要旨とする。
【００１５】
請求項７に記載の発明は、請求項１〜６のいずれか一つに記載の発言管理システムにおいて、前記制御手段が、前記発言記憶手段に記録された発言内容を用いて要約を作成し、前記表示装置に提供する手段を更に備えたことを要旨とする。
【００１６】
請求項８に記載の発明は、請求項７に記載の発言管理システムにおいて、前記制御手段が、前記表示装置において指定された発言内容範囲の要約を作成することを要旨とする。
請求項９に記載の発明は、請求項７に記載の発言管理システムにおいて、前記制御手段が、発言内容において前記キーワードスポッティング処理により抽出された発言文言の位置を特定し、この発言文言の位置を用いて要約対象範囲を特定し、この要約対象範囲の発言内容を要約することを要旨とする。
【００１７】
請求項１０に記載の発明は、キーワードに対して関連情報を記録したキーワード記憶手段と、音声認識された発言内容を記録する発言記憶手段と、音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムを用いた発言管理方法であって、前記制御手段が、前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する段階と、前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう段階と、前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する段階とを実行することを要旨とする。
【００１８】
請求項１１に記載の発明は、キーワードに対して関連情報を記録したキーワード記憶手段と、音声認識された発言内容を記録する発言記憶手段と、音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システム発言管理プログラムであって、前記制御手段を、前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段、前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段、前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段として機能させることを要旨とする。
【００１９】
（作用）
請求項１、１０又は１１に記載の発明によれば、制御手段が、音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して発言記憶手段に記録する。次に、発言内容に含まれる発言文言と、キーワード記憶手段に記憶されたキーワードとを比較する。そして、発言文言とキーワードとが一致した場合には、キーワードに関連付けられた関連情報を表示装置に出力する。これにより、利用者に対して、発言に関連する関連情報を提供することができる。
【００２０】
請求項２に記載の発明によれば、キーワード記憶手段には、関連情報として、キーワードについての説明文が記録されている。これにより、利用者は、発言についての説明情報を取得することができる。
【００２１】
請求項３に記載の発明によれば、利用者管理手段から、各表示装置の利用者の属性情報を取得する。そして、属性情報に対応するキーワードをキーワード記憶手段から抽出し、抽出したキーワードを用いてキーワードスポッティング処理を行なう。これにより、利用者の属性に応じた関連情報を提供することができる。
【００２２】
請求項４に記載の発明によれば、表示装置に関連情報を出力したキーワードについて、キーワード記憶手段に出力済み情報を記録し、キーワードスポッティング処理においては、出力済み情報が記録されていないキーワードを用いる。これにより、既に提供済みの情報については、重複した提供を抑制することができる。
【００２３】
請求項５に記載の発明によれば、表示装置に関連情報を出力したキーワードについて、発言文言が含まれていた発言回数をカウントし、発言回数に応じて、キーワードの関連情報の表示方法を変更する。これにより、キーワードの重み付けを行ない、この重み付けに応じた表示を行なうことができる。
【００２４】
請求項６に記載の発明によれば、キーワード記憶手段には、議事項目の進行を特定するためのキーワードが記録されている。そして、制御手段が、発言文言とキーワードとの一致を検知した場合には、表示装置に出力された議事項目を消し込む。これにより、利用者に対して、議事の進行状況を提供することができる。
【００２５】
請求項７に記載の発明によれば、発言記憶手段に記録された発言内容を用いて要約を作成する。これにより、利用者に対して、要約を提供することができる。
請求項８に記載の発明によれば、表示装置において指定された発言内容範囲の要約を作成する。これにより、所定範囲の発言についての要約を提供することができる。
【００２６】
請求項９に記載の発明によれば、発言内容においてキーワードスポッティング処理により抽出された発言文言の位置を特定する。そして、この発言文言の位置を用いて要約対象範囲を特定し、この要約対象範囲の発言内容を要約する。これにより、キーワードによって特定された範囲の要約を作成することができる。
【発明の効果】
【００２７】
本発明によれば、発言についての記録を作成するとともに、円滑な議事進行を支援するための発言管理システム、発言管理方法及び発言管理プログラムを提供することができる。
【図面の簡単な説明】
【００２８】
【図１】本発明の実施形態の発言管理システムの説明図。
【図２】本実施形態の各データ記憶部に記録されたデータの説明図であって、（ａ）はキーワード記憶部、（ｂ）は参考情報記憶部、（ｃ）は会議管理情報記憶部、（ｄ）は発言管理情報記憶部の説明図。
【図３】本実施形態の処理手順の説明図。
【図４】本実施形態の処理手順の説明図。
【図５】本実施形態のクライアント端末における表示画面の説明図。
【図６】他の実施形態の処理手順の説明図。
【図７】他の実施形態の処理手順の説明図。
【図８】他の実施形態の処理手順の説明図。
【図９】他の実施形態の処理手順の説明図。
【発明を実施するための形態】
【００２９】
以下、本発明を具体化した発言管理システムの一実施形態を図１〜図５に従って説明する。本実施形態では、複数の拠点に設置されたクライアント端末を接続して、テレビ会議を行なう場合を説明する。本実施形態では、図１に示すように、ネットワークを介して相互に接続されたクライアント端末１０、会議支援サーバ２０を用いる。
【００３０】
クライアント端末１０は、テレビ会議の参加者（利用者）が利用するコンピュータ端末である。このクライアント端末１０は、制御部、キーボードやポイントデバイス等の入力部、ディスプレイ等の出力部（表示装置）、マイク（音声入力装置）、スピーカ、カメラ等を備えている。
【００３１】
クライアント端末１０は、カメラによって撮影された映像データと、マイクにより集音された音声データとからなる映像・音声データを、ネットワークを介して、会議支援サーバ２０に送信する。クライアント端末１０は、映像・音声データを送信する場合には、自身の端末コードに関するデータを含める。
【００３２】
また、クライアント端末１０は、会議支援サーバ２０から、他拠点の映像・音声データを取得した場合、スピーカから音声を出力したり、ディスプレイに画像を表示したりする。
【００３３】
クライアント端末１０のディスプレイには、図５に示すテレビ会議画面５００が出力される。このテレビ会議画面５００は、参加者表示領域５１０、会議次第表示欄５２０、発言履歴表示欄５３０、説明表示欄５４０から構成されている。この参加者表示領域５１０には、他拠点のクライアント端末１０から取得した画像データが出力される。会議次第表示欄５２０には、この会議の議事項目が列挙された会議次第が出力される。発言履歴表示欄５３０には、会議参加者の発言を音声認識したテキストが表示される。説明表示欄５４０には、発言に関連する参考情報の出力を指示するための選択アイコンが表示される。
【００３４】
会議支援サーバ２０は、各拠点に設置されたクライアント端末１０によるテレビ会議を支援するコンピュータシステムである。
会議支援サーバ２０は、制御部２１、キーワード記憶部２２、参考情報記憶部２３、会議管理情報記憶部２４、発言管理情報記憶部２５、映像・音声記憶部２６を備えている。本実施形態では、キーワード記憶部２２、参考情報記憶部２３がキーワード記憶手段として機能し、発言管理情報記憶部２５が発言記憶手段として機能する。そして、制御部２１は、制御手段（ＣＰＵ、ＲＡＭ、ＲＯＭ等）を備え、後述する処理（会議中継段階、音声認識段階、発言記録段階、画面制御段階、キーワード抽出段階、進行管理段階、説明表示段階、要約作成段階等の各処理等）を行なう。そのための発言管理プログラム（聴講者用）を実行することにより、制御部２１は、図１に示すように、会議中継手段２１１、音声認識手段２１２、発言記録手段２１３、画面制御手段２１４、キーワード抽出手段２１５、進行管理手段２１６、説明表示手段２１７、要約作成手段２１８として機能する。
【００３５】
会議中継手段２１１は、クライアント端末１０から取得した映像・音声データを、他の拠点に設置されたクライアント端末１０に転送する処理を実行する。また、会議中継手段２１１は、映像・音声データに含まれる音声データを、音声認識手段２１２に供給する。
【００３６】
音声認識手段２１２は、クライアント端末１０から取得した音声データに基づいて音声認識処理によりテキストに変換した音声認識テキストを生成する処理を実行する。
発言記録手段２１３は、音声認識テキストを翻訳して翻訳テキストを生成する処理を実行する。更に、発言記録手段２１３は、端末コードに基づいて発言者を特定した参加者コードを関連づけて、音声認識テキスト、翻訳テキストを発言管理情報記憶部２５に記録する処理を実行する。
【００３７】
画面制御手段２１４は、各クライアント端末１０のディスプレイに表示されたテレビ会議画面５００の表示を制御する処理を実行する。具体的には、テレビ会議画面５００の会議次第表示欄５２０に、テレビ会議の議事項目を列挙した会議次第を出力する。また、発言履歴表示欄５３０に、会議参加者の発言を音声認識したテキストを表示する。更に、説明表示欄５４０に、発言に関連する参考情報を選択させるための選択アイコンを表示する。そして、画面制御手段２１４は、発言履歴表示欄５３０、説明表示欄５４０に表示する情報がオーバーフローした場合には、古い情報から順次、表示を削除する。
【００３８】
キーワード抽出手段２１５は、発言管理情報記憶部２５に記録されたテキスト（発言文言）と、キーワード記憶部２２に記録されたキーワードをマッチングする処理（キーワードスポッティング処理）を実行する。
【００３９】
進行管理手段２１６は、キーワードスポッティング処理により抽出されたキーワードに基づいて、会議の進行状態を管理する処理を実行する。
説明表示手段２１７は、キーワードスポッティング処理により抽出されたキーワードに基づいて、参考情報の出力を管理する処理を実行する。
要約作成手段２１８は、発言管理情報記憶部２５に記録された議事録レコードに基づいて、公知の要約作成技術を用いて要約を生成する処理を実行する。
【００４０】
キーワード記憶部２２には、図２（ａ）に示すように、キーワードスポッティング処理を行なうためのキーワード管理レコード２２０が記録されている。このキーワード管理レコード２２０は、キーワードが登録された場合に記録される。キーワード管理レコード２２０には、キーワード、対応に関するデータが記録されている。
【００４１】
キーワードデータ領域には、キーワードスポッティング処理の対象となる言葉に関するデータが記録されている。
対応データ領域には、該当キーワードを検知した場合の対応に関するデータが記録されている。本実施形態では、キーワードスポッティング処理を会議進行管理、説明表示又は要約作成のために用いる。このため、対応データ領域には、会議進行管理、説明表示又は要約作成を特定するフラグが記録されている。
【００４２】
参考情報記憶部２３には、図２（ｂ）に示すように、クライアント端末１０に出力する参考情報についての参考情報管理レコード２３０が記録されている。この参考情報管理レコード２３０は、キーワードに対応する参考情報が登録された場合に記録される。参考情報管理レコード２３０には、キーワード、参考資料、表示状況に関するデータが記録されている。
【００４３】
キーワードデータ領域には、説明情報の出力対象である用語に関するデータが記録されている。
参考情報データ領域には、このキーワードに対応した関連情報が記録されている。本実施形態では、会議の中で用いられる専門用語の解説（説明文）やプレゼンテーション資料、内部資料が記録される。
【００４４】
表示状況データ領域には、この参考情報の表示状況を特定するためのフラグが記録される。クライアント端末１０において、選択アイコンを表示した場合に、出力済み情報として表示済フラグを記録する。
【００４５】
会議管理情報記憶部２４には、図２（ｃ）に示すように、会議を運営するための会議管理情報が記録されている。本実施形態では、会議概要レコード２４１、会議次第管理レコード２４２及び参加者管理レコード２４３が記録されている。この参加者管理レコード２４３が記録された会議管理情報記憶部２４が利用者管理手段として機能する。会議概要レコード２４１〜参加者管理レコード２４３は、会議の開催が決定されて、会議管理情報が登録された場合に記録されている。
【００４６】
会議概要レコード２４１には、会議コード、会議日時、タイトルに関するデータが記録されている。
会議コードデータ領域には、各会議を特定するための識別子に関するデータが記録されている。この会議コードにより、会議概要レコード２４１は、会議次第管理レコード２４２及び参加者管理レコード２４３に関連付けられている。
【００４７】
会議日時データ領域には、テレビ会議が行なわれる年月日及び時刻に関するデータが記録されている。
タイトルデータ領域には、テレビ会議の表題や目的に関するデータが記録されている。
【００４８】
会議次第管理レコード２４２には、議事順番、議事項目、キーワード、終了判定に関するデータが記録されている。
議事順番データ領域には、テレビ会議において討論予定の議事の順番を特定するためのデータが記録されている。
【００４９】
議事項目データ領域には、この議事の題目議題に関するデータが記録されている。複数の議題について討論を予定している場合には、すべての議題が記録されている。
キーワードデータ領域には、この議題の討論において用いるキーワードに関するデータが記録されている。
終了判定データ領域には、この議題についての討論の終了を判定するためのフラグが記録される。討論が終了した議事については、終了フラグが記録される。
【００５０】
参加者管理レコード２４３には、参加者コード、役割コード、端末コード、言語に関するデータが記録されている。
参加者コードデータ領域には、このテレビ会議の参加者を特定するための識別子に関するデータが記録されている。
【００５１】
役割コードデータ領域には、この参加者のテレビ会議における役割を特定するための識別子に関するデータが記録されている。本実施形態では、司会者の参加者管理レコード２４３には、司会者フラグが記録されている。
【００５２】
端末コードデータ領域には、この参加者が利用するクライアント端末１０を特定するための識別子が記録されている。例えば、端末コードとしてＩＰアドレスを利用することができる。
言語データ領域には、参加者が用いる言語を特定するための識別子が記録されている。
【００５３】
発言管理情報記憶部２５には、図２（ｄ）に示すように、テレビ会議における参加者の発言に関する情報が記録される。本実施形態では、音声ファイル、発言履歴レコード２５１及び要約管理レコード２５２が記録される。発言履歴レコード２５１は、後述する音声認識処理を実行した場合に記録される。要約管理レコード２５２は、後述する要約作成処理を実行した場合に記録される。
【００５４】
発言履歴レコード２５１には、時刻、発言者コード、発言内容に関するデータが記録される。
時刻データ流域には、発言を記録した年月日及び時刻に関するデータが記録される。
発言者コードデータ領域には、発言者を特定するための識別子（参加者コード）に関するデータが記録される。
発言内容データ領域には、音声認識処理により音声データを変換した音声認識テキスト、及びこの音声認識テキストを翻訳した翻訳テキストが記録される。
【００５５】
要約管理レコード２５２には、時刻、要約に関するデータが記録される。
時刻データ流域には、要約作成処理が行なわれた時刻に関するデータが記録される。
要約データ流域には、要約作成処理により生成された要約内容に関するデータが記録される。
【００５６】
映像・音声記憶部２６には、各クライアント端末１０から取得した映像・音声データが記録される。この映像・音声データには、映像・音声データを送信したクライアント端末１０の端末コードや、映像・音声データの取得時刻が関連付けられて記録される。この取得時刻と、発言履歴レコード２５１に記録された時刻とを用いることにより、映像・音声データと発言履歴レコード２５１の発言内容とを関連付けることができる。
【００５７】
次に、この発言管理システムにおける動作を、図３〜図５を用いて説明する。ここでは、発言登録処理（図３）、キーワードスポッティング処理（図３）、要約作成処理（図４）の順番に行なう。
（発言登録処理）
まず、発言登録処理を、図３を用いて説明する。この処理は、テレビ会議中に行なわれる。
【００５８】
ここでは、会議支援サーバ２０の制御部２１は、音声の取得処理を実行する（ステップＳ１−１）。具体的には、制御部２１の会議中継手段２１１は、各クライアント端末１０から、映像・音声データを取得する。この映像・音声データには、データを送信したクライアント端末１０の端末コードに関するデータが含まれる。会議中継手段２１１は、取得した映像・音声データを、映像・音声データを送信したクライアント端末１０の端末コードや、映像・音声データの取得時刻に関連付けて、映像・音声記憶部２６に記録する。そして、会議中継手段２１１は、他の拠点に設置されたクライアント端末１０に転送する。更に、会議中継手段２１１は、映像・音声データに含まれる音声データを音声認識手段２１２に供給する。
【００５９】
次に、会議支援サーバ２０の制御部２１は、音声認識処理を実行する（ステップＳ１−２）。具体的には、制御部２１の音声認識手段２１２は、取得した音声データの音声認識処理により、音声テキストを生成する。そして、音声認識手段２１２は、音声テキストを発言記録手段２１３に提供する。
【００６０】
次に、会議支援サーバ２０の制御部２１は、発言の記録処理を実行する（ステップＳ１−３）。具体的には、制御部２１の発言記録手段２１３は、会議管理情報記憶部２４において、映像・音声データを送信したクライアント端末１０の端末コードが記録された参加者管理レコード２４３を抽出する。そして、発言記録手段２１３は、参加者管理レコード２４３に記録されている参加者コードを特定する。更に、発言記録手段２１３は、参加者管理レコード２４３を用いて各クライアント端末１０を利用している参加者の言語を特定する。次に、発言記録手段２１３は、特定した言語に応じて、音声認識手段２１２から取得した音声テキストを翻訳した翻訳テキストを生成する。そして、発言記録手段２１３は、システムタイマから現在時刻及び端末コード、発言内容（音声テキスト及び翻訳テキスト）を記録した発言履歴レコード２５１を生成し、発言管理情報記憶部２５に記録する。更に、発言記録手段２１３は、発言内容を画面制御手段２１４に供給する。
【００６１】
次に、会議支援サーバ２０の制御部２１は、発言履歴の出力処理を実行する（ステップＳ１−４）。具体的には、制御部２１の画面制御手段２１４は、各クライアント端末１０に対して、音声テキスト及び翻訳テキストを各クライアント端末１０に送信する。この場合、テレビ会議画面５００の発言履歴表示欄５３０に発言内容を出力する。ここで、発言履歴表示欄５３０がオーバーフローする場合には、最も古い発言内容から順番に削除していく。
【００６２】
（キーワードスポッティング処理）
次に、キーワードスポッティング処理を、図３を用いて説明する。この処理は、テレビ会議中に行なわれる。本実施形態では、キーワードスポッティング処理において、会議進行管理処理、説明表示管理処理、要約作成処理を実行する。
【００６３】
まず、会議支援サーバ２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−１）。具体的には、制御部２１のキーワード抽出手段２１５は、発言管理情報記憶部２５に新たに記録された発言履歴レコード２５１を取得する。次に、キーワード抽出手段２１５は、発言履歴レコード２５１において、キーワード記憶部２２に記録されているキーワードが含まれているかどうかを判定する。キーワードが含まれていない場合は、この発言履歴レコード２５１についてのキーワードスポッティング処理を終了する。
【００６４】
一方、キーワードが含まれている場合には、キーワード抽出手段２１５は、キーワード管理レコード２２０に記録されている対応を特定する。ここでは、議事項目の進行を特定するためのキーワード「終了」や「終わり」に関連付けて、対応データ領域に「会議進行管理」が記録されている場合を想定する。この場合、キーワード抽出手段２１５は、進行管理手段２１６に処理を引き継ぐ。
【００６５】
〔会議進行管理処理〕
まず、会議進行管理処理について説明する。
会議支援サーバ２０の制御部２１は、発言者の特定処理を実行する（ステップＳ２−２）。具体的には、制御部２１の進行管理手段２１６は、キーワードスポッティング処理によって抽出された発言履歴レコード２５１に記録されている発言者コードを取得する。
【００６６】
次に、会議支援サーバ２０の制御部２１は、司会者かどうかについての判定処理を実行する（ステップＳ２−３）。具体的には、制御部２１の進行管理手段２１６は、会議管理情報記憶部２４から、この発言者コードが参加者コードデータ領域に記録されている参加者管理レコード２４３を取得する。ここで、参加者管理レコード２４３の役割コードデータ領域に司会者フラグが記録されている場合には司会者と判定する。
【００６７】
司会者でないと判定した場合（ステップＳ２−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、会議進行管理処理を終了する。
一方、司会者と判定した場合（ステップＳ２−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、会議次第の検索処理を実行する（ステップＳ２−４）。具体的には、制御部２１の進行管理手段２１６は、終了フラグが記録されていない会議次第管理レコード２４２であって、議事順番が最も早いレコードを特定することにより、現在の議事項目を特定する。
【００６８】
次に、会議支援サーバ２０の制御部２１は、議事進行があったかどうかについての判定処理を実行する（ステップＳ２−５）。具体的には、制御部２１の進行管理手段２１６は、特定した会議次第管理レコード２４２に記録されているキーワードが、キーワードスポッティング処理の対象となった発言履歴レコード２５１に含まれているかどうかを確認する。キーワードが含まれている場合には、議事進行があったと判定する。
【００６９】
キーワードが含まれておらず、議事進行がなかったと判定した場合（ステップＳ２−５において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、会議進行管理処理を終了する。
【００７０】
一方、キーワードが含まれており、議事進行があったと判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、議事項目の消込処理を実行する（ステップＳ２−６）。具体的には、制御部２１の進行管理手段２１６は、この会議次第管理レコード２４２の終了判定データ領域に、終了フラグを記録する。更に、進行管理手段２１６は、画面制御手段２１４に、終了した議事項目を通知する。この場合、画面制御手段２１４は、各クライアント端末１０において、テレビ会議画面５００の会議次第表示欄５２０に表示された会議次第において、通知された議事項目をグレイアウトする。
【００７１】
〔説明表示管理処理〕
次に、説明表示管理処理を説明する。この処理は、キーワード抽出処理（ステップＳ２−１）において、専門用語や資料名のキーワードに関連付けて、対応データ領域に「説明表示」が記録されている場合に行なわれる。この場合、キーワード抽出手段２１５は、説明表示手段２１７に処理を引き継ぐ。
【００７２】
ここでは、会議支援サーバ２０の制御部２１は、参考情報の検索処理を実行する（ステップＳ２−７）。具体的には、制御部２１の説明表示手段２１７は、参考情報記憶部２３において、キーワードスポッティング処理の対象となったキーワードが記録された参考情報管理レコード２３０を特定する。
【００７３】
次に、会議支援サーバ２０の制御部２１は、表示状況の検索処理を実行する（ステップＳ２−８）。具体的には、制御部２１の説明表示手段２１７は、特定した参考情報管理レコード２３０の表示状況データ領域に表示済フラグが記録されているかどうかを確認する。
【００７４】
次に、会議支援サーバ２０の制御部２１は、既表示かどうかについての判定処理を実行する（ステップＳ２−９）。具体的には、制御部２１の説明表示手段２１７は、参考情報管理レコード２３０の表示状況データ領域に表示済フラグが記録されている場合には、既表示と判定する。
【００７５】
既表示と判定した場合（ステップＳ２−９において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、説明表示管理処理を終了する。
一方、表示済フラグが記録されておらず、既表示でないと判定した場合（ステップＳ２−９において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、表示候補の出力処理を実行する（ステップＳ２−１０）。具体的には、制御部２１の説明表示手段２１７は、画面制御手段２１４に、キーワードスポッティング処理により抽出されたキーワードを通知する。この場合、画面制御手段２１４は、各クライアント端末１０において、テレビ会議画面５００の説明表示欄５４０に、キーワードに関連する参考情報を出力させるための選択アイコンを表示する。この選択アイコンは、参考情報記憶部２３に記録された参考資料にリンクされている。この場合、画面制御手段２１４は、参考情報管理レコード２３０の表示状況データ領域に表示済フラグを記録する。
【００７６】
次に、会議支援サーバ２０の制御部２１は、参考情報の出力処理を実行する（ステップＳ２−１１）。具体的には、制御部２１の説明表示手段２１７は、クライアント端末１０において選択アイコンの押下を検知した場合、クライアント端末１０のディスプレイに、選択アイコンに対応するキーワードの参考情報を出力する。
【００７７】
〔要約作成処理〕
次に、要約作成処理を、図４を用いて説明する。
ここでは、まず、会議支援サーバ２０の制御部２１は、要約指示の取得処理を実行する（ステップＳ３−１）。この処理は、キーワード抽出処理（ステップＳ２−１）において、「要約」というキーワードに関連付けて、対応データ領域に「要約作成」が記録されている場合に行なわれる。この場合、キーワード抽出手段２１５は、要約作成手段２１８に処理を引き継ぐ。
【００７８】
次に、会議支援サーバ２０の制御部２１は、先行要約の検索処理を実行する（ステップＳ３−２）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５において、要約管理レコード２５２を検索する。
【００７９】
次に、会議支援サーバ２０の制御部２１は、先行要約の登録があるかどうかについての判定処理を実行する（ステップＳ３−３）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５に要約管理レコード２５２が記録されている場合には、先行要約の登録があると判定する。
【００８０】
要約管理レコード２５２が記録されておらず、先行要約の登録がないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、最初からの要約の生成処理を実行する（ステップＳ３−４）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５から、テレビ会議開始からの発言履歴レコード２５１を抽出する。そして、要約作成手段２１８は、抽出した発言履歴レコード２５１の発言内容を集約して、要約を作成する。
【００８１】
一方、要約管理レコード２５２が記録されており、先行要約の登録があると判定した場合（ステップＳ３−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、先行要約以降の要約の生成処理を実行する（ステップＳ３−５）。具体的には、制御部２１の要約作成手段２１８は、発言管理情報記憶部２５に記録されている要約管理レコード２５２の中で最も遅い時刻（直近要約作成時刻）を特定する。そして、要約作成手段２１８は、発言管理情報記憶部２５から、この直近要約作成時刻以降の時刻が記録されている発言履歴レコード２５１を抽出する。そして、要約作成手段２１８は、抽出した発言履歴レコード２５１の発言内容を集約して、要約を作成する。
【００８２】
次に、会議支援サーバ２０の制御部２１は、要約の出力処理を実行する（ステップＳ３−６）。具体的には、制御部２１の要約作成手段２１８は、作成した要約を画面制御手段２１４に供給する。画面制御手段２１４は、各クライアント端末１０に対して、要約を各クライアント端末１０に送信する。この場合、テレビ会議画面５００の発言履歴表示欄５３０に要約を出力する。
【００８３】
以上、本実施形態によれば、以下に示す効果を得ることができる。
（１）上記実施形態では、会議支援サーバ２０の制御部２１は、音声の取得処理（ステップＳ１−１）、音声認識処理（ステップＳ１−２）、発言の記録処理（ステップＳ１−３）を実行する。これにより、会議等における発言についての記録を残すことができる。この記録を利用することにより、効率的に議事録を作成することができる。
【００８４】
ここで、発言記録手段２１３は、特定した言語に応じて、音声認識手段２１２から取得した音声テキストを翻訳した翻訳テキストを生成する。これにより、外国語で会議が行なわれている場合にも、会議参加者自身の言語によって発言内容を把握することができる。
【００８５】
（２）上記実施形態では、会議支援サーバ２０の制御部２１は、発言履歴の出力処理を実行する（ステップＳ１−４）。この場合、クライアント端末１０のディスプレイに、発言履歴表示欄５３０を含むテレビ会議画面５００を出力する。これにより、参加者の各発言を確認することができる。
【００８６】
（３）上記実施形態では、会議支援サーバ２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−１）。ここで、キーワードに関連付けて「会議進行管理」が記録されている場合、会議進行管理処理を実行する。そして、キーワードが含まれており、議事進行があったと判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、議事項目の消込処理を実行する（ステップＳ２−６）。これにより、参加者は、クライアント端末１０において議事進行状況を把握することができる。
【００８７】
（４）上記実施形態では、会議支援サーバ２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−１）。ここで、キーワードに関連付けて「説明表示」が記録されている場合、説明表示管理処理において、制御部２１は、参考情報の検索処理（ステップＳ２−７）、表示状況の検索処理（ステップＳ２−８）を実行する。そして、既表示でないと判定した場合（ステップＳ２−９において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、表示候補の出力処理（ステップＳ２−１０）、参考情報の出力処理（ステップＳ２−１１）を実行する。これにより、参加者は、クライアント端末１０において、参考情報を効率的に入手することができる。
【００８８】
（５）上記実施形態では、キーワードに関連付けて「要約作成」が記録されている場合、要約作成処理を実行する。ここで、先行要約の登録が登録されていないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、最初からの要約の生成処理を実行する（ステップＳ３−４）。一方、先行要約の登録が登録されていると判定した場合（ステップＳ３−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、先行要約以降の要約の生成処理を実行する（ステップＳ３−５）。そして、会議支援サーバ２０の制御部２１は、要約の出力処理を実行する（ステップＳ３−６）。これにより、クライアント端末１０において、会議における討論内容の要約を把握することができる。
【００８９】
なお、上記実施形態は、以下の態様に変更してもよい。
・ 上記実施形態では、キーワードスポッティング処理において、説明表示管理処理を実行する。抽出したキーワードに対する対応方法はこれらに限定されるものではない。例えば、重要発言を特定するキーワードをキーワード記憶部２２に記録してもよい。この場合、説明表示手段２１７に、重要発言が含まれる発言履歴レコード２５１を検索する所定の時間範囲に関するデータを保持している。この処理を、図６を用いて説明する。
【００９０】
まず、会議支援サーバ２０の制御部２１は、ステップＳ２−１と同様に、キーワード抽出処理を実行する（ステップＳ４−１）。ここでは、キーワード抽出手段２１５が、「重要」というキーワードを検知して説明表示手段２１７に処理を引き継ぐ場合を想定する。
【００９１】
ここで、会議支援サーバ２０の制御部２１は、重要発言の抽出処理を実行する（ステップＳ４−２）。具体的には、制御部２１の説明表示手段２１７は、この「重要」というキーワードが含まれている発言履歴レコード２５１を抽出する。更に、説明表示手段２１７は、この発言履歴レコード２５１に対して所定時間範囲内の発言履歴レコード２５１を抽出する。そして、説明表示手段２１７は、この発言履歴レコード２５１に記録された発言内容を重要発言として参考資料データ領域に記録した参考情報管理レコード２３０を生成し、参考情報記憶部２３に登録する。
【００９２】
次に、会議支援サーバ２０の制御部２１は、表示候補の出力処理を実行する（ステップＳ４−３）。具体的には、制御部２１の説明表示手段２１７は、画面制御手段２１４に、重要発言があったことを通知する。この場合、画面制御手段２１４は、各クライアント端末１０において、テレビ会議画面５００の説明表示欄５４０に、重要発言表示アイコンを表示する。この重要発言表示アイコンは、参考情報記憶部２３に記録された参考資料（重要発言）にリンクされている。
【００９３】
次に、会議支援サーバ２０の制御部２１は、重要発言の出力処理を実行する（ステップＳ４−４）。具体的には、説明表示手段２１７は、クライアント端末１０において重要発言表示アイコンの選択を検知した場合、クライアント端末１０のディスプレイに、参考情報記憶部２３に記録された重要発言を出力する。
これにより、クライアント端末１０において、効率的に重要発言を確認することができる。
【００９４】
・ 上記実施形態では、要約作成処理において、先行要約の登録がないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）、会議支援サーバ２０の制御部２１は、最初からの要約の生成処理を実行する（ステップＳ３−４）。一方、先行要約の登録があると判定した場合（ステップＳ３−３において「ＹＥＳ」の場合）、会議支援サーバ２０の制御部２１は、先行要約以降の要約の生成処理を実行する（ステップＳ３−５）。要約の作成方法は、これに限定されるものではない。例えば、キーワードスポッティング処理により抽出された発言文言の位置を特定して要約するようにしてもよい。具体的には、会議の区切り（議事の終了）を検知して、議事毎に要約対象範囲を特定して要約を作成する。この場合、議事項目の消込処理（ステップＳ２−６）を実行した時刻を、この議事順番の会議次第管理レコード２４２に終了時刻として記録するとともに、次の議事順番の会議次第管理レコード２４２に開始時刻として記録する。この処理を、図７を用いて説明する。
【００９５】
まず、会議支援サーバ２０の制御部２１は、会議の区切りの検出処理を実行する（ステップＳ５−１）。具体的には、制御部２１の要約作成手段２１８は、進行管理手段２１６において議事進行を検知する。
【００９６】
次に、会議支援サーバ２０の制御部２１は、区切り範囲の要約の生成処理を実行する（ステップＳ５−２）。具体的には、制御部２１の要約作成手段２１８は、会議の区切りにおいて終了した議事項目の会議次第管理レコード２４２に記録された開始時刻、終了時刻を取得する。そして、要約作成手段２１８は、発言管理情報記憶部２５から、この開始時刻〜終了時刻が記録されている発言履歴レコード２５１を抽出する。そして、要約作成手段２１８は、抽出した発言履歴レコード２５１の発言内容を集約して要約を作成する。
【００９７】
次に、会議支援サーバ２０の制御部２１は、ステップＳ３−６と同様に、要約の出力処理を実行する（ステップＳ５−３）。
これにより、各議事が終了した段階で、クライアント端末１０において、この議事についての要約を確認することができる。
【００９８】
・ 上記実施形態では、説明表示欄５４０に、発言に関連する参考情報の出力を指示するための選択アイコンを表示する。そして、説明表示欄５４０に表示する情報がオーバーフローする場合には、古い情報から順次、表示を削除する。説明表示欄５４０における表示制御はこれに限定されるものではない。例えば、キーワードの重要度に応じて、表示方法を変更してもよい。この場合には、参考情報記憶部２３の参考情報管理レコード２３０の表示状況データ領域に発言回数を記録する。更に、説明表示手段２１７に、重要度に応じて表示時間を決めるための時間決定テーブルを保持させておく。この処理を、図８を用いて説明する。
【００９９】
まず、会議支援サーバ２０の制御部２１は、ステップＳ２−１と同様に、キーワード抽出処理を実行する（ステップＳ６−１）。
次に、会議支援サーバ２０の制御部２１は、ステップＳ２−７と同様に、参考情報の検索処理（ステップＳ６−２）を実行する。
【０１００】
次に、会議支援サーバ２０の制御部２１は、表示状況の更新処理を実行する。（ステップＳ６−３）。具体的には、制御部２１の説明表示手段２１７は、参考情報管理レコード２３０の表示状況データ領域に記録された発言回数を更新する。
【０１０１】
次に、会議支援サーバ２０の制御部２１は、重要度の評価処理を実行する。（ステップＳ６−４）。具体的には、制御部２１の説明表示手段２１７は、説明表示欄５４０に表示されているすべての選択アイコンに対応する参考情報管理レコード２３０を取得し、表示状況データ領域に記録された発言回数を特定する。そして、説明表示手段２１７は、発言回数の多さに応じて重要度を評価する。
【０１０２】
次に、会議支援サーバ２０の制御部２１は、重要度に応じて並び替え処理を実行する（ステップＳ６−５）。具体的には、制御部２１の説明表示手段２１７は、選択アイコンの優先順位を決定する。
【０１０３】
次に、会議支援サーバ２０の制御部２１は、ステップＳ２−１０、Ｓ２−１１と同様に、表示候補の出力処理（ステップＳ６−６）、参考情報の出力処理（ステップＳ６−７）を実行する。
【０１０４】
重要なキーワードは何度も発言されることが多い。従って、この発言回数に応じて、重要度を評価し、この重要度に応じて表示を変更することができる。これにより、優先順位を並べ替えることにより、選択アイコンが表示されている表示時間を制御することができる。
【０１０５】
・ 上記実施形態では、参考情報記憶部２３には、クライアント端末１０に出力する説明情報についての参考情報管理レコード２３０が記録されている。そして、会議支援サーバ２０の制御部２１は、表示候補の出力処理（ステップＳ２−１０）、参考情報の出力処理（ステップＳ２−１１）を実行する。この場合、参考情報記憶部２３に記録されているすべての参考情報についてキーワードスポッティング処理を行なう。これに代えて、参加者の属性情報（例えば、スキルレベル）に応じて、キーワードスポッティング処理において用いるキーワードを変更するようにしてもよい。この場合には、参加者管理レコード２４３に参加者属性情報（スキルレベル）を記録しておく。更に、キーワード管理レコード２２０には、この参考情報を提供する対象者についての提供対象者属性情報（スキルレベル）を記録しておく。そして、制御部２１のキーワード抽出手段２１５は、会議管理情報記憶部２４に記録された参加者管理レコード２４３から、スキルレベルを取得する。そして、最も低いスキルレベルに基づいて最低レベルを決定する。そして、最低レベル以上の提供対象者属性情報が記録されたキーワード管理レコード２２０を用いて、キーワードスポッティング処理を行なう。これにより、参加者のスキルレベルに応じて不必要な情報の提供を抑制することができる。
【０１０６】
・ 上記実施形態では、すべてのクライアント端末１０に同じ表示候補が出力される。これに代えて、参加者の属性情報（例えば、スキルレベル）に応じて、表示候補を変更するようにしてもよい。この場合には、参加者管理レコード２４３には参加者属性情報（スキルレベル）を記録しておく。更に、参考情報管理レコード２３０には、この参考情報を提供する対象者についての提供対象者属性情報（スキルレベル）を記録しておく。そして、説明表示手段２１７は、キーワードスポッティング処理により特定されたキーワードの参考情報管理レコード２３０に記録されているスキルレベルを取得する。このスキルレベルに一致する参加者管理レコード２４３の参加者が利用しているクライアント端末１０を特定し、特定したクライアント端末１０のみに表示候補を出力する。これにより、例えばスキルレベルが低い参加者に対して参照情報を提供するとともに、スキルレベルが高い参加者には不必要な情報の提供を抑制することができる。従って、参加者属性に応じて的確な参考情報を提供することができる。
【０１０７】
・ 上記実施形態では、参考情報記憶部２３には、クライアント端末１０に出力する参考情報についての参考情報管理レコード２３０が記録されている。この参考情報管理レコード２３０には、キーワード、参考資料、表示状況に関するデータが記録されている。参考情報記憶部２３を用いて、会議支援サーバ２０の制御部２１は、表示状況の検索処理を実行する（ステップＳ２−８）。これに代えて、表示状況をキーワード記憶部２２のキーワード管理レコード２２０に記録するようにしてもよい。この場合には、表示済フラグが記録されているキーワードについては、キーワードスポッティング処理の対象外とする。これにより、少ないキーワードを対象として効率的にキーワードスポッティング処理を行なうことができる。
【０１０８】
・ 上記実施形態では、会議支援サーバ２０の制御部２１は、発言の記録処理を実行する（ステップＳ１−３）。ここで、発言者の感情を記録するようにしてもよい。この場合には、制御部２１に感情評価手段を設ける。この感情評価手段は、呼吸の荒さ、抑揚、声の淀み、ため息の評価結果から構成された感情パターンに対応させて、感情指数を記録した感情評価テーブルを保持している。更に、会議支援サーバ２０に、参加者コードに対応して、過去の発言における感情評価結果の統計値を記録した発話パターン記憶部を設ける。また、発言履歴レコード２５１には、感情指数を記録するためのデータ領域を更に設ける。この処理を、図９を用いて説明する。
【０１０９】
まず、会議支援サーバ２０の制御部２１は、ステップＳ１−１と同様に、音声の取得処理を実行する（ステップＳ７−１）。
次に、会議支援サーバ２０の制御部２１は、発話状態の評価処理を実行する（ステップＳ７−２）。本実施形態では、制御部２１の感情評価手段は、呼吸の荒さの評価、抑揚の評価、声の淀みの評価、ため息の評価を行なう。
【０１１０】
呼吸の荒さの評価においては、感情評価手段は、マイクで集音した呼吸音を取得する。そして、この参加者の呼吸の荒さ統計値と比較する。発話パターン記憶部に記録された統計値よりも呼吸音が大きく、息使いが荒いと判定した場合には、感情の高ぶりを示す評価結果を取得する。
【０１１１】
抑揚の評価においては、感情評価手段は、声の大きさの変化分布（変化の大きさ）を算出する。そして、この参加者の抑揚統計値と比較する。統計値よりも抑揚が大きい場合には、感情の高ぶりを示す評価結果を取得する。
【０１１２】
声の淀みの評価においては、感情評価手段は、発声の明瞭度を算出する。そして、この参加者の明瞭度統計値と比較する。発話パターン記憶部に記録された統計値よりも明瞭度が低く、淀みがあると判定した場合には、気分の落ち込みを示す評価結果を取得する。
【０１１３】
ため息の評価においては、感情評価手段は、ため息パターンと一致する呼吸音を特定する。そして、感情評価手段は、ため息パターンと一致する呼吸音の回数をカウントし、単位時間あたりの回数（ため息頻度）を算出する。この参加者のため息頻度の統計値と比較する。発話パターン記憶部に記録された統計値よりも、ため息頻度が高い場合には、気分の落ち込みを示す評価結果を取得する。
【０１１４】
次に、会議支援サーバ２０の制御部２１は、感情の評価処理を実行する（ステップＳ７−３）。具体的には、制御部２１の感情評価手段は、呼吸の荒さ、抑揚、声の淀み、ため息の評価結果の感情パターンに対応する感情指数を感情評価テーブルから取得する。
【０１１５】
次に、会議支援サーバ２０の制御部２１は、発言内容に関連付けて感情指数の記録処理を実行する（ステップＳ７−４）。具体的には、制御部２１の感情評価手段は、算出した感情指数を、この参加者の発言についての発言履歴レコード２５１に記録する。
【０１１６】
これにより、テキスト化された発言履歴において、その時の発言状況を把握することができる。
【符号の説明】
【０１１７】
１０…クライアント端末、２０…会議支援サーバ、２１…制御部、２１１…会議中継手段、２１２…音声認識手段、２１３…発言記録手段、２１４…画面制御手段、２１５…キーワード抽出手段、２１６…進行管理手段、２１７…説明表示手段、２１８…要約作成手段、２２…キーワード記憶部、２３…参考情報記憶部、２４…会議管理情報記憶部、２５…発言管理情報記憶部。
【特許請求の範囲】
【請求項１】
キーワードに対して関連情報を記録したキーワード記憶手段と、
音声認識された発言内容を記録する発言記憶手段と、
音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムであって、
前記制御手段が、
前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段と、
前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段と、
前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段と
を備えたことを特徴とする発言管理システム。
【請求項２】
前記キーワード記憶手段には、前記関連情報として、キーワードについての説明文が記録されていることを特徴とする請求項１に記載の発言管理システム。
【請求項３】
利用者の属性情報を記録した利用者管理手段を更に備え、
各キーワードに対して、利用者の属性情報が更に記録されており、
前記制御手段が、
前記利用者管理手段から、各表示装置の利用者の属性情報を取得し、
前記属性情報に対応するキーワードを前記キーワード記憶手段から抽出し、抽出したキーワードを用いて前記キーワードスポッティング処理を行なうことを特徴とする請求項１又は２に記載の発言管理システム。
【請求項４】
前記表示装置に関連情報を出力したキーワードについて、前記キーワード記憶手段に出力済み情報を記録し、
前記キーワードスポッティング処理においては、出力済み情報が記録されていないキーワードを用いることを特徴とする請求項１〜３のいずれか一つに記載の発言管理システム。
【請求項５】
前記制御手段が、
前記表示装置に関連情報を出力したキーワードについて、発言文言が含まれていた発言回数をカウントし、
前記発言回数に応じて、前記キーワードの関連情報の表示方法を変更する手段を更に備えたことを特徴とする請求項１〜４のいずれか一つに記載の発言管理システム。
【請求項６】
前記キーワード記憶手段には、議事項目の進行を特定するためのキーワードが記録されており、
前記制御手段が、発言文言とキーワードとの一致を検知した場合には、前記表示装置に出力された前記議事項目を消し込む手段を更に備えたことを特徴とする請求項１〜５のいずれか一つに記載の発言管理システム。
【請求項７】
前記制御手段が、前記発言記憶手段に記録された発言内容を用いて要約を作成し、前記表示装置に提供する手段を更に備えたことを特徴とする請求項１〜６のいずれか一つに記載の発言管理システム。
【請求項８】
前記制御手段が、前記表示装置において指定された発言内容範囲の要約を作成することを特徴とする請求項７に記載の発言管理システム。
【請求項９】
前記制御手段が、発言内容において前記キーワードスポッティング処理により抽出された発言文言の位置を特定し、
この発言文言の位置を用いて要約対象範囲を特定し、
この要約対象範囲の発言内容を要約することを特徴とする請求項７に記載の発言管理システム。
【請求項１０】
キーワードに対して関連情報を記録したキーワード記憶手段と、
音声認識された発言内容を記録する発言記憶手段と、
音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムを用いた発言管理方法であって、
前記制御手段が、
前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する段階と、
前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう段階と、
前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する段階と
を実行することを特徴とする発言管理方法。
【請求項１１】
キーワードに対して関連情報を記録したキーワード記憶手段と、
音声認識された発言内容を記録する発言記憶手段と、
音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システム発言管理プログラムであって、
前記制御手段を、
前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段、
前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段、
前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段
として機能させることを特徴とする発言管理プログラム。
【請求項１】
キーワードに対して関連情報を記録したキーワード記憶手段と、
音声認識された発言内容を記録する発言記憶手段と、
音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムであって、
前記制御手段が、
前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段と、
前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段と、
前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段と
を備えたことを特徴とする発言管理システム。
【請求項２】
前記キーワード記憶手段には、前記関連情報として、キーワードについての説明文が記録されていることを特徴とする請求項１に記載の発言管理システム。
【請求項３】
利用者の属性情報を記録した利用者管理手段を更に備え、
各キーワードに対して、利用者の属性情報が更に記録されており、
前記制御手段が、
前記利用者管理手段から、各表示装置の利用者の属性情報を取得し、
前記属性情報に対応するキーワードを前記キーワード記憶手段から抽出し、抽出したキーワードを用いて前記キーワードスポッティング処理を行なうことを特徴とする請求項１又は２に記載の発言管理システム。
【請求項４】
前記表示装置に関連情報を出力したキーワードについて、前記キーワード記憶手段に出力済み情報を記録し、
前記キーワードスポッティング処理においては、出力済み情報が記録されていないキーワードを用いることを特徴とする請求項１〜３のいずれか一つに記載の発言管理システム。
【請求項５】
前記制御手段が、
前記表示装置に関連情報を出力したキーワードについて、発言文言が含まれていた発言回数をカウントし、
前記発言回数に応じて、前記キーワードの関連情報の表示方法を変更する手段を更に備えたことを特徴とする請求項１〜４のいずれか一つに記載の発言管理システム。
【請求項６】
前記キーワード記憶手段には、議事項目の進行を特定するためのキーワードが記録されており、
前記制御手段が、発言文言とキーワードとの一致を検知した場合には、前記表示装置に出力された前記議事項目を消し込む手段を更に備えたことを特徴とする請求項１〜５のいずれか一つに記載の発言管理システム。
【請求項７】
前記制御手段が、前記発言記憶手段に記録された発言内容を用いて要約を作成し、前記表示装置に提供する手段を更に備えたことを特徴とする請求項１〜６のいずれか一つに記載の発言管理システム。
【請求項８】
前記制御手段が、前記表示装置において指定された発言内容範囲の要約を作成することを特徴とする請求項７に記載の発言管理システム。
【請求項９】
前記制御手段が、発言内容において前記キーワードスポッティング処理により抽出された発言文言の位置を特定し、
この発言文言の位置を用いて要約対象範囲を特定し、
この要約対象範囲の発言内容を要約することを特徴とする請求項７に記載の発言管理システム。
【請求項１０】
キーワードに対して関連情報を記録したキーワード記憶手段と、
音声認識された発言内容を記録する発言記憶手段と、
音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システムを用いた発言管理方法であって、
前記制御手段が、
前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する段階と、
前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう段階と、
前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する段階と
を実行することを特徴とする発言管理方法。
【請求項１１】
キーワードに対して関連情報を記録したキーワード記憶手段と、
音声認識された発言内容を記録する発言記憶手段と、
音声入力装置と表示装置とに接続された制御手段とを備えた発言管理システム発言管理プログラムであって、
前記制御手段を、
前記音声入力装置において発言者の音声を取得し、音声認識した発言内容を作成して前記発言記憶手段に記録する手段、
前記発言内容に含まれる発言文言と、前記キーワード記憶手段に記憶されたキーワードとを比較するキーワードスポッティング処理を行なう手段、
前記発言文言とキーワードとが一致した場合には、前記キーワードに関連付けられた関連情報を前記表示装置に出力する手段
として機能させることを特徴とする発言管理プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−２０８６３０（Ｐ２０１２−２０８６３０Ａ）
【公開日】平成２４年１０月２５日（２０１２．１０．２５）
【国際特許分類】
【出願番号】特願２０１１−７２６３４（Ｐ２０１１−７２６３４）
【出願日】平成２３年３月２９日（２０１１．３．２９）
【出願人】（５９２１３１９０６）みずほ情報総研株式会社 (187)
【Ｆターム（参考）】
【公開日】平成２４年１０月２５日（２０１２．１０．２５）
【国際特許分類】
【出願日】平成２３年３月２９日（２０１１．３．２９）
【出願人】（５９２１３１９０６）みずほ情報総研株式会社 (187)
【Ｆターム（参考）】
[ Back to top ]