議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラム
【課題】会議の重要な部分を抽出して議事録を作成することができる議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムを提供する。
【解決手段】議事録作成支援装置（サーバー１００）は、会議の参加者同士の会話が成立している状態を検知するための検知手段（会話集中度算出部８４０）と、前記会議の参加者が発する音声を記録するための記録手段（データ保存部９２０）と、前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段（抽出部８５０）と、前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段とを備える。
【解決手段】議事録作成支援装置（サーバー１００）は、会議の参加者同士の会話が成立している状態を検知するための検知手段（会話集中度算出部８４０）と、前記会議の参加者が発する音声を記録するための記録手段（データ保存部９２０）と、前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段（抽出部８５０）と、前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムに関し、特に、重要な発言が抽出できる議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムに関する。
【背景技術】
【０００２】
従来から、議事録の作成について、種々の技術が開示されている。
たとえば、特許文献１（特開２００７−２１５０５３号公報）には、会議中に議事録を作成する技術が開示されている。特許文献１に記載の技術によれば、議事録作成開始と共に、それを重要な発言の開始時刻と設定し、会議終了時間をもって重要な発言の終了とする。
【０００３】
また、非特許文献１（"VoiceGraphy−製品概要"、[online]、日本電気株式会社、[平成２３年９月２１日検索］、インターネット<http://www.nec.co.jp/soft/VoiceGraphy/outline.html>）では、音声認識でテキスト化して議事録が生成される。
【０００４】
また、非特許文献２（"ディスカッションマイニングプロジェクト"、[online]、名古屋大学大学院情報科学研究科メディア科学専攻、[平成２３年９月２１日検索］、インターネット<http://www.nagao.nuie.nagoya-u.ac.jp/projects/discussion.xml>）では、複数のカメラ、マイク、および、ブラウザベースのツールを用いて、実世界の活動（たとえば、会議）の様子が収録される。発表者は、専用のツールを用いて、自分が発表に用いるスライドやスライドを切替えるタイミングなどを伝達することで、自動的に、これらの情報が議事録に記録される。また、発言内容は、書記が専用ツールを用いることによって記録される。具体的には、参加者が発言する際には、議論札と呼ばれる札型のデバイスを用いることで、発言者のＩＤと発言タイプ（質問、回答、コメント）が書記に伝達され、書記の議事録作成が支援されるとともに、議論の構造化が補助される。このようなシステムでは、使用したスライド、Ｗｅｂ資料のＵＲＬ（Uniform Resource Locator）などの情報も自動的に議事録に取り込まれ、半自動的に、議論自体が、構造化された議事録を生成する仕組みになっている。
【０００５】
なお、イベントなどにおける参加者間の会話を記録する技術としては、非特許文献３（"ビジネス顕微鏡（登録商標）とは"、[online]、株式会社日立製作所、[平成２３年９月２１日検索］、インターネット<http://www.hitachi-hitec.com/jyouhou/business-microscope/solution/microscope.html>）において、ビジネス顕微鏡という技術が開示されている。当該技術では、ＩＤカード型のセンシング装置が利用される。当該装置は、マイクを備え、対面センサを内蔵している。このマイクは、当該装置を装着したユーザーの声や環境音を捉える。また、対面センサは、対面した人が装着するＩＤカード型のセンシング装置と通信することにより、対面した人を特定する。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−２１５０５３号公報
【非特許文献】
【０００７】
【非特許文献１】"VoiceGraphy−製品概要"、[online]、日本電気株式会社、[平成２３年９月２１日検索］、インターネット<http://www.nec.co.jp/soft/VoiceGraphy/outline.html>
【非特許文献２】"ディスカッションマイニングプロジェクト"、[online]、名古屋大学大学院情報科学研究科メディア科学専攻、[平成２３年９月２１日検索］、インターネット<http://www.nagao.nuie.nagoya-u.ac.jp/projects/discussion.xml>
【非特許文献３】"ビジネス顕微鏡（登録商標）とは"、[online]、株式会社日立製作所、[平成２３年９月２１日検索］、インターネット<http://www.hitachi-hitec.com/jyouhou/business-microscope/solution/microscope.html>
【発明の概要】
【発明が解決しようとする課題】
【０００８】
近年、ライフログという、ある程度コマ切りになった音声データ、その場（会議等の場）で作成した文書、ホワイトボードの画像など、多様で雑多な情報をすべて保存し、活用するような仕組みが提案されている。このようなライフログを利用して、人の行動パターンを抽出し、それをマーケティングにつなげるシステムの利用も種々検討されている。
【０００９】
会議等のイベントの議事録の作成としては、上記のようなライフログから、当該イベントにとって重要な部分が抽出されることが有益であると考えられる。議事録作成担当者が、イベント全体を観察し、または、イベント全体が記録されたもののみが残された場合にその記録物から、手作業で、議事録を作成するのは手間と時間を要するからである。
【００１０】
しかしながら、特許文献１に記載の技術によれば、重要な発言の出現のタイミングが会議開始時刻に対応して設定されるが、このような方法では重要な発言を記録できない場合も考えられる。さらに、会議中に議事録を作成することを前提としており、あとから作成することができない。したがって、会議後に議事録の作成が必要となった場合に、対応できない。
【００１１】
また、非特許文献１に記載の技術によれば、イベント中の発言の一覧表を得ることはできるが、重要な部分の抽出という点が考慮されていない。
【００１２】
また、非特許文献２に記載の技術によれば、イベント中に生じた議論を構造化して解析することはできるが、発言者による札型のデバイスの操作を要し、参加者にとって煩雑となる。また、発言者がデバイスの操作を忘れて発言を行なった場合には、議事録作成の対応ができなくなる。さらに、議事録の作成対象が日常の業務における会話といった参加者が特別な意識を持たない場面での適用も難しいと考えられる。
【００１３】
また、非特許文献３に記載の技術によれば、ユーザー間の相関図が作成されたりするものの、イベントの重要な部分の抽出という点については検討がなされていない。
【００１４】
本発明は係る実情に鑑み考え出されたものであり、その目的は、会議の重要な部分を抽出して議事録を作成することができる議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムを提供することである。
【課題を解決するための手段】
【００１５】
本発明に従った議事録作成支援装置は、会議の参加者同士の会話が成立している状態を検知するための検知手段と、会議の参加者が発する音声を記録するための記録手段と、検知手段による会話の成立状態の検知結果に基づいて、記録手段に記録された音声から特定の音声を抽出するための抽出手段と、特定の音声を用いて会議の議事録を作成するための議事録作成手段とを備える。
【００１６】
好ましくは、抽出手段は、会議の参加者のそれぞれについて、検知手段によって会話が成立したと判断された時間を積算して合計会話時間を算出し、各参加者についての合計会話時間に基づいて、会議における主発言者を特定し、記録手段が記録した音声から、主発言者が含まれる会話の音声を、特定の音声として抽出する。
【００１７】
好ましくは、抽出手段は、すべての参加者についての合計会話時間に対する各参加者の合計会話時間の比を算出することによって、各参加者の会話集中度を算出し、各参加者の会話集中度に基づいて、最も会話集中度の高い参加者を主発言者として決定し、記録手段が記録した音声から、主発言者が含まれる会話の音声を、特定の音声として抽出する。
【００１８】
好ましくは、記録手段は、各参加者が発した音声と当該参加者に発せられた音声とを区別して、音声を記録する。
【００１９】
好ましくは、議事録作成手段は、特定の音声に対するリンクを生成し、当該リンクを提示する。
【００２０】
好ましくは、抽出手段は、音声の発話の時間帯に基づく優先度に基づいて、記録手段に記録された音声から特定の音声を抽出する。
【００２１】
好ましくは、抽出手段は、記録手段に記録された音声を発した参加者に対して設定された優先度に基づいて、記録手段に記録された音声から特定の音声を抽出する。
【００２２】
好ましくは、記録手段は、音声を、当該音声を発する者の生体情報とともに記録する。
好ましくは、検知手段は、各参加者によって装着される光学的検出手段によって検出される情報を取得し、当該光学的検出手段から取得される情報に基づいて、会議の参加者同士の会話が成立している状態を検知する。
【００２３】
好ましくは、検知手段は、各参加者の位置情報を検出するための位置検出手段によって検出される当該参加者の位置情報を取得し、当該位置検出手段から取得される情報に基づいて、会議の参加者同士の会話が成立している状態を検知する。
【００２４】
本発明に従った議事録作成支援システムは、会議の参加者が装着する検出手段と、検出手段と通信可能な議事録作成支援装置とを備えた、議事録作成支援システムであって、議事録作成支援装置は、各検出手段から取得する検出結果に基づいて、会議の参加者同士の会話が成立している状態を検知するための検知手段と、会議の参加者が発する音声を記録するための記録手段と、検知手段による会話の成立状態の検知結果に基づいて、記録手段に記録された音声から特定の音声を抽出するための抽出手段と、特定の音声を用いて会議の議事録を作成するための議事録作成手段とを含む。
【００２５】
本発明に従った議事録作成用プログラムは、コンピュータ読取可能なプログラムであって、コンピュータを、会議の参加者同士の会話が成立している状態を検知するための検知手段、会議の参加者が発する音声を記録するための記録手段、検知手段による会話の成立状態の検知結果に基づいて、記録手段に記録された音声から特定の音声を抽出するための抽出手段、および、特定の音声を用いて会議の議事録を作成するための議事録作成手段として機能させる。
【発明の効果】
【００２６】
会話が記録され、また、会話の成立状態が検知され、そして、成立が検知された結果に基づいて、記録された音声から特定の音声が抽出されて、議事録が作成される。
【００２７】
これにより、会話が成立し、さらに、当該会話がどのように成立したかに応じて、議事録の作成に利用される音声が抽出される。
【００２８】
これにより、会議において重要と考えられる音声を抽出して、議事録を作成することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の一実施の形態である議事録作成支援システムの概略構成を示す図である。
【図２】議事録作成支援システムの機能構成の一例を模式的に示す図である。
【図３】会話収集デバイスの外観の一例を示す図である。
【図４】会話収集デバイスのハードウェア構成の一例を模式的に示す図である。
【図５】サーバーのハードウェア構成の一例を模式的に示す図である。
【図６】会議の風景の一例を模式的に示す図である。
【図７】本発明の一実施の形態において生成される会話状態の一例を模式的に示す図である。
【図８】本発明の一実施の形態において生成される各参加者の会話時間の一例を模式的に示す図である。
【図９】会話集中度の算出方法を説明するための図である。
【図１０】図９に示された各者の発言のうち、抽出部によって抽出される発言に対応する音声データの内容を模式的に示す図である。
【図１１】本発明の一実施の形態の議事録作成システムにおいて実行される議事録作成処理のフローチャートである。
【図１２】会議ごとに予め登録されるタグ情報の一例を示す図である。
【図１３】サーバーの表示デバイスに表示される画面の一例を示す図である。
【図１４】議事録ファイルの表示例を示す図である。
【図１５】各音声データにリンクする情報を表示するための画面の一例を示す図である。
【図１６】会話収集デバイスの変形例の外観を示す図である。
【図１７】図１６の会話収集デバイスのハードウェア構成の一例を模式的に示す図である。
【図１８】会話収集デバイスの他の変形例のハードウェア構成の一例を模式的に示す図である。
【図１９】図１５のリンクの表示画面の変形例を示す図である。
【図２０】会話収集デバイスのさらに他の変形例のハードウェア構成の一例を模式的に示す図である。
【発明を実施するための形態】
【００３０】
以下、本発明に係る議事録作成支援システムについて、図面を参照して説明する。なお、各図において、同様の作用および機能を奏する構成要素については、同じ符号を付し、その説明は繰返さない。
【００３１】
［議事録作成システムの概略構成］
図１は、本発明の一実施の形態である議事録作成支援システムの概略構成を示す図である。
【００３２】
図１を参照して、議事録作成支援システムは、各ユーザー（会議の参加者）が装着し、検出手段として機能する会話収集デバイス２００Ａ〜２００Ｄと、会話収集デバイス２００Ａ〜２００Ｄのそれぞれと通信し、議事録作成支援装置として機能するサーバー１００とを含む。
【００３３】
本明細書では、会話収集デバイス２００Ａ〜２００Ｄを総称して「会話収集デバイス２００」と呼ぶ場合もある。会話収集デバイスの数は、参加者と同数あっても良いし、それ以下であっても良い。つまり、会議の参加者全員が会話収集デバイスを装着していても良いし、一部の参加者のみが会話収集デバイスを装着していても良い。
【００３４】
また、会話収集デバイスは、会議の参加者間で会話が成立している状態を検知するための情報を取得したり、参加者が発する音声（会話）を取得するための装置である。したがって、議事録作成支援システムでは、複数の参加者についてのこれらの情報を取得できる装置が備えられれば、参加者全員の情報を取得するためであっても、参加者と同数備えられる必要はなく、単数である場合も有り得る。
【００３５】
図２は、議事録作成支援システムの機能構成の一例を模式的に示す図である。
議事録作成支援システムは、ライフログ生成システム９００と議事録作成システム８００とから主に構成される。ライフログ生成システム９００は、１以上の会話収集デバイス２００と、タグ生成部９１０と、データ保存部９２０とを含み、会議中に当該会議の参加者のデータを取得して保存する機能を有する。タグ生成部９１０は、会議についてのタグ情報を生成する。
【００３６】
会話収集デバイス２００を介して取得された参加者のデータは、タグ生成部９１０において生成されたタグ情報とともに、データ保存部９２０に保存される。より具体的には、会話収集デバイス２００は、各参加者の音声等の参加者自身の情報を取得する部分と、各参加者が誰と会話しているのかを特定するための情報を取得する部分とを有する。これらの情報は、会議終了後に検索が可能なように、会議に付されるタグ情報とともに、保存される。タグ生成部９１０は、タグ情報として、日時や図示しないスケジューラからの会議情報などを、タグ情報として付与する。ライフログ生成システム９００では、このようにしてリアルタイムに生成された情報が、データ保存部９２０に保存される。
【００３７】
議事録作成システム８００は、検索部８１０と、入力部８２０と、特定発言者特定部８３０と、会話集中度算出部８４０と、抽出部８５０と、優先度設定部８６０と、リンク生成部８７０と、議事録作成部８８０とを含む。本実施の形態では、会話集中度算出部８４０は検知手段として機能し、特定発言者特定部８３０と会話集中度算出部８４０と抽出部８５０とは抽出手段として機能する。
【００３８】
検索部８１０は、議事録作成の対象となる会議のタグ情報をデータ保存部９２０から検索する。入力部８２０は、議事録作成の指示等の情報の入力を受付ける。なお、入力部８２０は、議事録作成の指示を、ネットワークを介して、外部の装置から、受付ける場合も有り得る。なお、入力部８２０は、タグ情報を生成するための情報の入力を受付ける場合も有り得る。
【００３９】
会話集中度算出部８４０は、会議の各参加者について、後述する会話集中度を算出する。特定発言者特定部８３０は、会議の参加者から、会話集中度等に基づいて、議事録の作成に発言を利用する参加者を特定する。抽出部８５０は、特定発言者特定部８３０が特定した参加者が関与する会話をデータ保存部９２０から抽出する。優先度設定部８６０は、会議の参加者に対して、議事録の作成に関しての優先度を設定する。リンク生成部８７０は、議事録ファイルのトップページから議事録を構成する音声データ等の各種のデータへのリンク情報を生成する。議事録作成部８８０は、上記したようなトップページとリンク情報とを関連付ける等により、議事録ファイルを作成する。
【００４０】
［会話収集デバイスの構成］
図３は、会話収集デバイス２００の外観の一例を示す図である。
【００４１】
図３を参照して、会話収集デバイス２００は、会議参加者が首からかけるＩＤカードタイプの形態を有している。会話収集デバイス２００は、マイク２０１と赤外線送受信部２０２とを含む。マイク２０１は、装着者が発する音声を取得することができる。
【００４２】
会話収集デバイス２００の内部には、メモリー（後述する記憶部２６０）を含む。当該メモリーには、装着者を区別することができるように、各会話収集デバイス２００を特定するための個別ＩＤが保存されている。議事録作成支援システムでは、当該個別ＩＤと、たとえば図示しない社内人事ＤＢとを連携させることにより、各会話収集デバイス２００のマイク２０１で検出された音声データが、誰の音声データであるかを区別することができる。
【００４３】
赤外線送受信部２０２は、上記メモリーに保存されている個別ＩＤをコード化して、赤外線で送信している。また、赤外線送受信部２０２は、他の会話収集デバイス２００の赤外線送受信部２０２が送信した個別ＩＤを受信できる。
【００４４】
議事録作成支援システムでは、会話収集デバイス２００において他の個別ＩＤが受信されたことにより、当該会話収集デバイス２００を装着している参加者が、個別ＩＤを受信された会話収集デバイス２００を装着している参加者と対面していることが検知される。
【００４５】
図４は、会話収集デバイス２００のハードウェア構成の一例を模式的に示す図である。
図４を参照して、会話収集デバイス２００は、当該端末の動作を全体的に制御する演算装置によって構成されるＣＰＵ（Central Processing Unit）２５１と、ＲＡＭ（Random Access Memory）２５２と、ＲＯＭ（Read Only Memory）２５３と、通信装置２５４と、記憶部２６０とを含む。
【００４６】
ＲＡＭ２５２は、ＣＰＵ２５１がプログラムを実行する際のワークエリアとして機能する。通信装置２５４は、たとえばＬＡＮ（Local Area Network）カード、ＬＡＮアダプタ等のネットワーク通信機器からなる。なお、会議中等にデータをサーバー１００に送信する場合は、無線ＬＡＮカードや、Ｂｌｕｅｔｏｏｔｈ（登録商標）チップセット等の非接触での通信機能を有することが望ましい。会話収集デバイス２００は、通信装置２５４を介して、サーバー１００へ接続される。
【００４７】
記憶部２６０は、ＣＰＵ２５１が実行するプログラムを記憶するプログラム記憶部２６１と、種々のデータを記憶するデータ記憶部２６２とを含む。なお、記憶部２６０は、会話収集デバイス２００の本体から着脱可能な記録媒体によって構成されても良い。記憶媒体としては、ＣＤ−ＲＯＭ（Compact Disc - Read Only Memory）、ＤＶＤ−ＲＯＭ（Digital Versatile Disk - Read Only Memory）、ＵＳＢ（Universal Serial Bus）メモリ、メモリカード、ＦＤ（Flexible Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic Optical Disc）、ＭＤ（Mini Disc）、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）などの、不揮発的にプログラムを格納する媒体が挙げられる。
【００４８】
［サーバーの構成］
図５は、サーバー１００のハードウェア構成の一例を模式的に示す図である。
【００４９】
図５を参照して、サーバー１００は、当該サーバー１００の動作を全体的に制御する演算装置によって構成されるＣＰＵ１５１と、ＲＡＭ１５２と、ＲＯＭ１５３と、通信装置１５４と、表示ドライバー１５５と、表示デバイス１５６と、入力部１５７と、記憶部１６０とを含む。
【００５０】
通信装置１５４は、たとえばＬＡＮカード、ＬＡＮアダプタ等のネットワーク通信機器からなる。なお、会議中等にデータを会話収集デバイス２００から受信する場合は、無線ＬＡＮカードや、Ｂｌｕｅｔｏｏｔｈ（登録商標）チップセット等の非接触での通信機能を有することが望ましい。サーバー１００は、通信装置１５４を介して、会話収集デバイス２００と通信する。
【００５１】
表示デバイス１５６は、液晶表示デバイスなどから構成される。表示ドライバー１５５は、ＣＰＵ１５１が適切なプログラムを実行することによって生成した情報に基づいて、表示デバイス１５６において表示させるための画像情報を生成する。表示ドライバー１５５は、図５に示されたようにハードウェアとして設けられていてもよいし、ＣＰＵ１５１が適切なプログラムを実行することによって、ソフトウェアとして設けられてもよい。
【００５２】
入力部１５７は、たとえば、タッチセンサ、キーボード、マウスなどの入力装置によって実現される。
【００５３】
記憶部１６０は、ＣＰＵ１５１が実行するプログラムを記憶するプログラム記憶部１６１と、サーバー１００が本実施の形態において説明される機能を実現するために必要とされる種々のデータを記憶するデータ記憶部１６２とを含む。
【００５４】
議事録作成支援システムにおいて、図２に破線で囲んで示したライフログ生成システム９００のタグ生成部９１０、データ保存部９２０、および議事録作成システム８００の各構成要素は、たとえばサーバー１００によって実現される。タグ生成部９１０、検索部８１０、特定発言者特定部８３０、会話集中度算出部８４０、抽出部８５０、優先度設定部８６０、リンク生成部８７０、および、議事録作成部８８０は、たとえばＣＰＵ１５１が適切なプログラムを実行することによって、実現される。データ保存部９２０は、たとえば記憶部２６０によって実現される。入力部８２０は、たとえば入力部１５７や通信装置１５４によって、実現される。
【００５５】
［会話成立の検出］
次に、議事録作成支援システムにおいて、参加者同士の会話の成立がどのように検出されるかについて、説明する。
【００５６】
図６は、会議の風景の一例を模式的に示す図である。
図６を参照して、会議には、参加者３００Ａ〜３００Ｆの６人が参加している。なお、図６は、長机の周りに座る６人の参加者３００Ａ〜３００Ｆを上方から見た図に相当する。そして、参加者３００Ａ〜３００Ｆは、各自会話収集デバイス２００（会話収集デバイス２００Ａ〜２００Ｆ）を装着している。なお、図６では、理解を容易にするため、会話収集デバイス２００Ａ〜２００Ｆが参加者３００Ａ〜３００Ｆに対して大きめに記載されている。
【００５７】
会話収集デバイス２００の赤外線送受信部２０２は、指向性が高い。そして、各会話収集デバイス２００の赤外線送受信部２０２は、他の会話収集デバイス２００の赤外線送受信部２０２と対向する状態となって初めて当該他の会話収集デバイス２００の赤外線送受信部２０２と通信可能になる。
【００５８】
図６では、参加者３００Ａと参加者３００Ｄが対向することにより、会話収集デバイス２００Ａと会話収集デバイス２００Ｄが対向し、これにより、赤外線送受信部２０２Ａと赤外線送受信部２０２Ｄが矢印Ｒ１で示されるような経路に沿って通信可能になる。会話収集デバイス２００Ａは、赤外線送受信部２０２Ａが赤外線送受信部２０２Ｄの個別ＩＤを受信したことを、受信した時刻情報とともにデータ保存部９２０へ送信する。また、会話収集デバイス２００Ｄは、赤外線送受信部２０２Ｄが赤外線送受信部２０２Ａの個別ＩＤを受信したことを、受信した時刻情報とともにデータ保存部９２０へ送信する。
【００５９】
会話集中度算出部８４０は、同じ時刻に、互いに相手の個別ＩＤを受信した会話収集デバイス２００の組が存在するか否かを判断する。そして、そのような組が存在すると判断すると、当該の組の双方に対応する参加者の間で、会話が成立していると判断する。つまり、たとえば、上記の検出例によれば、会話集中度算出部８４０は、会話収集デバイス２００Ａに対応する参加者と会話収集デバイス２００Ｄに対応する参加者との間で、会話が成立していると判断する。
【００６０】
会話集中度算出部８４０は、上記のように、いつ、どの参加者の間で、会話が成立しているかを検出できる。これにより、会話集中度算出部８４０は、会議における、参加者の会話状態の時間変化を表す情報を生成できる。図７は、生成される会話状態の一例を模式的に示す図である。
【００６１】
図７の会話状態では、ＳＴ１〜ＳＴ１０の会話（発話）部分が示されている。
図７に示された会議では、Ａさん、Ｂさん、Ｃさん、Ｄさんの４人の参加者が示されている。ＳＴ１は、Ａさんと、Ｂさん、Ｃさん、および、Ｄさんのそれぞれとの間で短時間ずつ会話が成立した状態を示す。
【００６２】
ＳＴ２は、ＡさんとＢさんの間で会話が成立し、かつ、ＢさんからＡさんに話しかけている状態を示す。会話が成立した参加者の間で、どちらからどちらに話しかけているかは、両者のいずれのマイク２０１で音声が取得されたかによって判断される。つまり、図７では、ＳＴ２の期間中、Ｂさんの装着する会話収集デバイス２００のマイク２０１において音声が検出されたことを示している。
【００６３】
なお、会話集中度算出部８４０は、マイク２０１によって取得された音声データに対して、所定の音量のフィルタを用いて、取得された音声から環境音を分離して、会話収集デバイス２００を装着した者が声を出したか否かを判断することが好ましい。さらに、会話集中度算出部８４０は、各会話収集デバイス２００を装着した者の音声データをサンプルとして取得し、当該者の声と同定できる音声データが検出された期間のみ、当該者が発言した期間と判断しても良い。
【００６４】
ＳＴ３は、ＡさんとＢさんの間で会話が成立し、かつ、ＡさんからＢさんに話しかけている状態を示す。ＳＴ４とＳＴ５は、ＣさんとＤさんの間で会話が成立し、かつ、ＣさんからＤさんへの発言とＤさんからＣさんへの発言が交互に頻繁に行なわれた状態を示す。ＳＴ６とＳＴ７は、ＢさんとＤさんの間で会話が成立し、かつ、ＢさんからＤさんへの発言とＤさんからＢさんへの発言とが交互に頻繁に行なわれた状態を示す。ＳＴ８は、ＡさんとＣさんの間で会話が成立し、かつ、ＣさんからＡさんに話しかけている状態を示す。ＳＴ９は、ＡさんとＣさんの間で会話が成立し、かつ、ＡさんからＣさんに話しかけている状態を示す。ＳＴ１０は、ＡさんとＢさんの間で会話が成立し、かつ、ＢさんからＡさんに話しかけている状態を示す。
【００６５】
会話集中度算出部８４０は、各会話収集デバイス２００で取得され、データ保存部９２０に保存された情報に基づいて、図７に示されたような会話状態とともに、図８に示されるような、各参加者の会話時間を算出することができる。
【００６６】
図８は、生成される各参加者の会話時間の一例を模式的に示す図である。
図８では、Ａさん、Ｂさん、Ｃさん、Ｄさんのそれぞれについて、誰から誰に、どのぐらいの長さ、発言をしたかが示されている。図８において示された例は、図７に示された会議とは別の会議における会話時間が示されているものとする。そして、図８では、ある会議についての、各参加者の、各相手に対する発言の時間の和が示されている。つまり、たとえば、ＡさんからＢさんへの当該会議中の発言時間の合計時間は、３分である。また、ＢさんからＡさんへの当該会議中の発言時間の合計時間は、２分である。本明細書では、会話時間とは、参加者間で会話が成立した時間を意味する。つまり、２者間で言えば、発言を行なった時間と発言を受けた時間の和とする。たとえば図８の例では、ＡさんとＢさんの間での会話時間は５分である。このうち、Ａさんについては、（Ｂさんに対して）発言を行なった時間は３分である。また、（Ｂさんから）発言を受けた時間は２分である。
【００６７】
また、本明細書では、一方の参加者から他方の参加者へ発言が行なわれた時間を、一方の参加者の発話時間と呼ぶ場合がある。さらに、一方の参加者から他方の参加者へ発言が行なわれた時間を、他方の参加者の着話時間と呼ぶ場合がある。
【００６８】
本実施の形態では、会話集中度算出部８４０は、ある会議の各参加者について、会話の相手、発言をした時間、および、発言を受けた時間が特定されることにより、図９に示されるようなマトリクスを作成し、これに基づいて、当該会議における各参加者の会話集中度を算出することができる。図９は、会話集中度の算出方法を説明するための図である。
【００６９】
図９には、会議の参加者として、「田中」「伊藤」「井上」「石田」「佐藤」「小林」の６人が挙げられている。そして、図９における上部の表には、各参加者の発話時間と着話時間が分単位で示されている。縦方向に、各参加者の、各参加者に対する発話時間が示されている。たとえば、井上さんについては、田中さんに対する発話時間は３分であり、伊藤さんに対する発話時間は０分であり、井上さん自身に対する発話時間は０分であり、石田さんに対する発話時間は１分であり、佐藤さんに対する発話時間は０分であり、小林さんに対する発話時間は０分である。
【００７０】
会話集中度算出部８４０は、全参加者の発話時間の合計を算出する。図９の例では、２７分である。
【００７１】
また、会話集中度算出部８４０は、全参加者の発話時間の合計を算出する。図９の例では、田中さんについては９分であり、伊藤さんについては３分であり、井上さんについては４分であり、石田さんについては７分であり、佐藤さんについては３分であり、小林さんについては１分である。
【００７２】
また、会話集中度算出部８４０は、各参加者の着話時間の合計を算出する。図９の例では、田中さんについては１０分であり、伊藤さんについては３分であり、井上さんについては４分であり、石田さんについては５分であり、佐藤さんについては３分であり、小林さんについては２分である。
【００７３】
また、会話集中度算出部８４０は、各参加者の発話集中度を算出する。発話集中度とは、全参加者の発話時間の合計に対する各参加者の発話時間の割合である。図９の例では、田中さんについては０．３３であり、伊藤さんについては０．１１であり、井上さんについては０．１５であり、石田さんについては０．２６であり、佐藤さんについては０．１１であり、小林さんについては０．０４である。
【００７４】
また、会話集中度算出部８４０は、各参加者の着話集中度を算出する。着話集中度とは、全参加者の発話時間の合計に対する各参加者の着話時間の割合である。図９の例では、田中さんについては０．３７であり、伊藤さんについては０．１１であり、井上さんについては０．１５であり、石田さんについては０．１９であり、佐藤さんについては０．１１であり、小林さんについては０．０７である。
【００７５】
また、会話集中度算出部８４０は、各参加者の会話集中度を算出する。会話集中度とは、発話集中度と着話集中度の和である。図９の例では、田中さんについては０．７である。田中さんであれば、発話時間の総和は９分、着話時間の総和は１０分である。また、会議全体の発話時間の合計は２７分である。したがって、田中さんの会話集中度は、「（９＋１０）／２７」に従って、約０．７と算出される。また、伊藤さんについては０．２２であり、井上さんについては０．３であり、石田さんについては０．４５であり、佐藤さんについては０．２２であり、小林さんについては０．１１である。
【００７６】
［音声データの抽出］
本実施の形態では、特定発言者特定部８３０は、各参加者の会話集中度に基づいて、当該会議における特定発言者を特定する。特定発言者とは、当該会議における中心的な参加者と考えられる。図９の例では、会話集中度が最も高い田中さんが、特定発言者として特定される。
【００７７】
そして、本実施の形態では、抽出部８５０は、データ保存部９２０に保存された会話の音声データから、特定発言者がした発言の音声データおよび特定発言者が受けた発言の音声データを、当該会議における重要な発言として抽出する。図９の例では、田中さんが各参加者に対してした発言と田中さんが受けた発言の音声データが抽出される。図１０は、図９に示された各者の発言のうち、抽出部８５０によって抽出される発言に対応する音声データの内容を模式的に示す図である。
【００７８】
なお、図９に示された会議では、実際に重要であった発言は、太枠で囲われた、石田さんから田中さんに対する発言（合計３分間）と、佐藤さんから田中さんに対する発言（合計２分間）と、田中さんから石田さんに対する発言（合計３分間）であったとする。図１０に示された結果によれば、図９において重要であると示された発言は、すべて、抽出されている。
【００７９】
［議事録作成処理］
図１１は、議事録作成システムにおいて実行される議事録作成処理のフローチャートである。議事録作成処理は、たとえばサーバー１００にインストールされた議事録作成アプリケーションとして実現される。
【００８０】
議事録作成処理では、まずステップＳＡ１０において、入力部８２０が、ユーザーによる議事録を作成する会議に関する情報の入力を受付ける。具体的には、会議名、会議の日時、会議の開催場所、会議の参加者等の必要なプロパティーが、ユーザーによって入力される。
【００８１】
なお、サーバー１００には、たとえば図１２に示されるように、予め、タグ情報として、会議に関する情報（日時、場所、参加者、等）が登録される。そして、ステップＳＡ１０では、入力部８２０は、登録された会議に関する情報の中から会議を指定する情報の入力を受付けて、ステップＳＡ２０へ処理を進める。
【００８２】
図１２は、会議ごとに予め登録されるタグ情報の一例を示す図である。
図１２を参照して、データ保存部９２０には、各会議の情報として、会議ＩＤ、開始日時、終了日時、場所、参加者（参加者ＩＤ）、目的、および、会議形態が登録されている。会議ＩＤは、会議を識別するための情報であり、会議ごとに固有の値が設定される。開始日時は、会議の開始の時刻を特定する情報である。終了日時は、会議の終了の時刻を特定する情報である。また、場所、参加者、および、目的は、それぞれ、会議の場所、参加者、および、目的を特定する情報である。特に、参加者については、たとえば参加者ＩＤで特定される。なお、本実施の形態では、各参加者ＩＤは、各参加者が装着する会話収集デバイス２００の個別ＩＤに関連付けられている。
【００８３】
会議形態としては、「自己想定」と「システム評価」の２種類の情報が格納される。「自己想定」は、たとえば管理者等によって入力される情報であり、「システム評価」は、たとえば、図７を参照して説明したような会話状態等に基づいて判定される評価内容である。たとえば、会話状態が、ある特定の参加者の会話集中度が高く、他の参加者の会話集中度がある程度低い値である場合には、「質疑応答型」と判定される。また、たとえば、ある特定の参加者の会話集中度が特に高く、残りの参加者の会話集中度がほぼ０に近い値である場合には、「通知通達型」と判定される。また、たとえば、参加者の会話集中度がまんべんなく同じような値である場合には、「対話型」等の判定がなされる。
【００８４】
ステップＳＡ２０では、会話集中度算出部８４０は、データ保存部９２０から、ステップＳＡ１０で指定された会議のライフログ（音声データ）を検索して、ステップＳＡ３０へ処理を進める。
【００８５】
たとえば、会議が指定されると、図１２に示されているように、当該会議に対応する開始日時、終了日時、および、参加者ＩＤが特定される。たとえば、図１２においてＣ１で示された会議（会議ＩＤが「ＰＯＥ−０００３」）が指定されると、当該会議に対応する開始日時（２０１１年８月２７日１０時００分）、終了日時（２０１１年８月２７日１１時１０分）、参加者ＩＤ（１０２０１，１０８５０，１０４３０，および，８４３１）が特定される。
【００８６】
会話集中度算出部８４０は、特定されたこれらの情報に基づいて、開始日時から終了日時までの、参加者ＩＤが行なった発言または受けた発言のすべての音声データを、データ保存部９２０に登録されている音声データから検索する。
【００８７】
以下、より具体的に説明する。図１３は、サーバー１００の表示デバイス１５６に表示される画面の一例を示す図である。会議を指定する情報が入力されると、検索部８１０は、図１３の画面５００に示すように、当該指定された会議のタグ情報を表示する。そして、ユーザー（たとえば、議事録作成担当者）は、タグ情報を確認し、当該会議についての議事録の作成を進めることを希望する場合には、さらに、画面５００内のリンク作成ボタン５０１を操作する。当該操作に応じて、検索部８１０は、上記したように、当該会議のタグ情報によって特定される音声データを、検索する。
【００８８】
つまり、ステップＳＡ２０の処理によれば、会議の出席者について記録されたすべての音声データが、検索結果となる。
【００８９】
なお、タグ情報における会議の場所に基づいて、当該会議の場所から接続される無線ＬＡＮが特定されても良い。そして、このように特定されたＬＡＮにおいて、開始日時から終了日時まで取得（当該ＬＡＮのサーバーに登録）された音声データが、ステップＳＡ２０の検索結果とされる場合も有り得る。
【００９０】
次に、ステップＳＡ３０では、会話集中度算出部８４０は、ステップＳＡ２０で検索結果として得られた音声データを利用して、当該会議について、図７や図８を参照して説明したような会話状態（参加者間の有向グラフ）を作成して、ステップＳＡ４０へ処理を進める。
【００９１】
ステップＳＡ４０では、会話集中度算出部８４０は、図９を参照して説明したように、各参加者の会話集中度を算出して、ステップＳＡ５０へ処理を進める。
【００９２】
ステップＳＡ５０では、特定発言者特定部８３０は、ステップＳＡ４０で算出した各参加者の会話集中度に基づいて、特定発言者を特定して、ステップＳＡ６０へ処理を進める。
【００９３】
ステップＳＡ６０では、抽出部８５０は、ステップＳＡ２０の検索結果から、特定発言者が行なった発言と特定発言者に対する発言に対応する音声データを抽出して、ステップＳＡ７０へ処理を進める。
【００９４】
ステップＳＡ７０では、リンク生成部８７０が、ステップＳＡ６０で抽出した音声データのそれぞれにリンクするためのリンクデータを生成し、さらに、議事録作成部８８０が、図１３の画面５００のような議事録の作成対象となっている会議についての画面データに、作成されたリンクデータを追加することにより、議事録ファイルを作成して、議事録作成処理を終了する。
【００９５】
図１４は、議事録ファイルの表示例を示す図である。
図１４を参照して、議事録ファイルは、画面５１０のような表示画面のデータを含む。画面５１０では、対象となる会議の日時、場所、参加者、および、データリンクを含む。画面５１０は、図１３の画面５００に、データリンクが追加された画面である。日時、場所、参加者は、図１２に示されたようなタグ情報から取得される。
【００９６】
画面５１０では、会話が成立した参加者の組別のリンクが表示されている。なお、リンクは、下線を付されて表示されている。また、画面５１０のデータリンクにおける参加者の組の表示の順序は、たとえば会話時間の長い順序とすることができる。つまり、画面５１０は、田中さんと石田さんの組の会話が、会話時間（石田さんとの会話についての、田中さんの発話時間と着話時間の和）の最も長い組である場合を示している。
【００９７】
なお、データ保存部９２０では、音声データは、会話が一区切りされるごとに、異なるファイルとして登録されている。具体的には、会話収集デバイス２００のＣＰＵ２５１（図４参照）は、マイク２０１から入力される音声について、所定時間以上の無音期間（または、特定のレベル未満の音声期間）が出現するごとに、異なるファイルで、音声データを生成する。そして、画面５１０にデータリンクとして表示された各参加者の組のうち、ある組を指定すると、当該組の会話の音声データのそれぞれにリンクする情報が表示される。図１５は、各音声データにリンクする情報を表示するための画面の一例を示す図である。
【００９８】
図１５を参照して、画面５２０では、田中さんと石田さんの会話の各音声データへのリンクが、当該音声データが取得された時刻を含むように表示されている。サーバー１００では、各リンクが選択されると、当該リンクに対応した時刻に記録された音声データが、再生される。なお、ここでいう時刻は、たとえば、音声の取得が開始された時刻である。なお、画面５２０では、音声データが取得された時刻の順ではなく、たとえば各音声データの再生時間が長い順等、対応する音声データの性質等が所定の条件に従ってソートされて、表示されている。
【００９９】
図１４に戻って、画面５１０では、「そのほかの発言」という文字によって示されるリンクを含む。このリンクは、当該会議において、会話時間の長い順から特定の順序以下の組の発言の音声データに対応する。このようなリンクが選択されると、たとえば、表示デバイス１５６には、「そのほかの発言」に分類された参加者の組の会話の各音声データへのリンクが表示される。そして、そこに表示された各リンクが選択されると、サーバー１００では、当該リンクに対応した音声データが再生される。
【０１００】
以上説明した議事録作成処理によれば、図６〜図９等を参照して説明したように、会議における会話の成立に関する状態を検知し、当該検知の結果に基づいて、記録された音声データから音声データを抽出し、議事録の作成に利用される。
【０１０１】
これにより、会議で取得された音声すべてではなく、会議において重要と考えられる音声が抽出されて、議事録の作成に利用される。
【０１０２】
［変形例等］
（変形例１）
以上説明した本実施の形態において、「会議」とは、議事録の作成対象を言うのであって、特別に集合することを予定されたイベントに限られるものではない。たとえば、オフィスにおいて、当該オフィスにいると想定される人を特定する情報が参加者ＩＤとして特定され、また、オフィスにいる各ユーザーが図３等を参照して説明された会話収集デバイス２００を装着し、そして、当該オフィスにおける日常会話が記録された場合にも、本実施の形態によって開示された技術的思想は適用され得る。
【０１０３】
（変形例２）
会話収集デバイス２００によって検出手段の一例が構成される。なお、会話収集デバイスは、図３等を参照して説明されたような形態のものに限定されない。図１６は、会話収集デバイスの変形例の外観を示す図である。また、図１７は、図１６の会話収集デバイスのハードウェア構成の一例を模式的に示す図である。
【０１０４】
図１６および図１７を参照して、会話収集デバイス２１０は、図４を参照して説明した構成に対して、マイク２０１と赤外線送受信部２０２の代わりに、マイク２１１とカメラ２１２を含む。
【０１０５】
会話収集デバイス２１０では、カメラ２１２は、会話収集デバイス２１０を装着している会議の参加者の視線の先に存在するものを撮影する。したがって、会話集中度算出部８４０は、カメラ２１２が撮影する画像を既知の顔判別アルゴリズムに従って解析することにより、当該会話収集デバイス２１０を装着している参加者が誰を見ているのかを特定することができる。
【０１０６】
さらに、会話集中度算出部８４０は、上記顔判別アルゴリズムと合わせて、上記画像を解析することによって、会話収集デバイス２１０を装着している参加者が頷いているか否かを判別することができる。当該判別結果をさらに用いることにより、既知のうなずき理論（岡山県立大学情報システム工学科、渡辺富夫教授の「身体的引き込み技術ｉＲＴ」等）に基づいて、会話収集デバイス２１０を装着している参加者が頷いているときに見ている相手を会話の相手と特定するなど、参加者の会話の相手を、より高い精度で、特定することができる。
【０１０７】
また、会話収集デバイス２１０では、カメラ２１２がテレビ画面に映った相手を撮影することができる。したがって、会話収集デバイス２１０において収集される情報は、遠隔地とのテレビ会議においても、会話相手の特定に利用することができる。
【０１０８】
（変形例３）
図１８は、会話収集デバイス２００の他の変形例のハードウェア構成の一例を模式的に示す図である。
【０１０９】
本変形例では、会話収集デバイス２００は、図４に示された構成に加えて、生体情報検出部２０３を備える。生体情報検出部２０３は、会話収集デバイス２００を装着したユーザーの心拍数、熱、および／または、皮膚の導電性などの生体情報（バイタルデータ）を検出するためのセンサーである。会話収集デバイス２００を装着する参加者は、さらに、当該センサーを、当該センサーが取得するべきデータを取得できる態様で、装着する。
【０１１０】
そして、本変形例では、データ保存部９２０には、音声データとともに、当該音声データを発した参加者および／または当該音声データの発言を受けた参加者の生体情報も記録される。
【０１１１】
このように記録された生体情報は、当該音声データに対応する発言がどのような感情で発せられたか、あるいは、会話相手にどのぐらいのインパクトを与えたかなど、会話の内容や重要度の特定をサポートする情報となり得る。特に、心拍間隔時系列データのパターンから、プレゼンテーションや質疑の区間を識別する研究（「脈拍数を用いた平常／非平常（眠気，緊張）推定方法」ＮＴＴ）もある。したがって、上記したような生体情報が記録されることにより、会話状態の検知の精度を向上させることができる。
【０１１２】
さらに、上記のように記録された生体情報は、会話状態の検知だけでなく、会話の重要度の特定にも利用できる。たとえば、音声データが取得されたときの発言者の心拍数が、当該発言者の定常時の心拍数に対して特定の割合以上上昇している場合には、緊張した状態での発言と考えられる。そのことが分かるように、当該音声データのリンクが表示されても良い。図１９は、図１５のリンクの表示画面の変形例を示す図である。図１９に示された画面５３０では、１０時５０分の発言のリンクと１０時４４分の発言のリンクが、ハートマークを付されて、表示されている。当該ハートマークは、発言した参加者が、上記したような緊張状態で対応する発言を行なったことを示す。
【０１１３】
緊張状態での発言は、重要な内容である可能性が比較的高いと言える。議事録ファイルを再生するユーザーは、このようなハートマークの表示に従って、重要な内容である可能性が比較的高い音声ファイルを優先して再生させることにより、会議の内容を、より早期に把握することが可能となる。
【０１１４】
（変形例４）
図２０は、会話収集デバイス２００のさらに他の変形例のハードウェア構成の一例を模式的に示す図である。図２０の会話収集デバイス２２０は、図４を参照して説明した会話収集デバイス２００に対して、赤外線送受信部２０２の代わりに、電子コンパス２０４とＧＰＳ（Global Positioning System）コントローラー２０５を含む。
【０１１５】
電子コンパス２０４は、磁気センサーを含み、会話収集デバイス２２０の向きを検出する。ＧＰＳコントローラー２０５は、ＧＰＳ信号または基地局からの位置信号を受信することにより、会話収集デバイス２２０の位置情報を取得する。
【０１１６】
本変形例では、データ保存部９２０において、（赤外線送受信部２０２によって取得される個別ＩＤの代わりに）会話収集デバイス２２０の位置情報と向き情報が登録される。これにより、議事録作成支援システムでは、データ保存部９２０において、各参加者（会話収集デバイス２２０を装着しているユーザー）の位置情報と向き情報が取得される。これにより、各ユーザーの位置と向きを特定できる。これにより、近傍（所定の距離範囲内）に位置し、かつ、向かい合っているユーザーの組を特定できる。そして、会話集中度算出部８４０は、当該組において、一方のユーザーの装着する会話収集デバイス２２０のマイク２０１において音声が検出されたことを条件として、当該組のユーザーの間で会話が成立していると特定することができる。
【０１１７】
（変形例５）
以上説明した本実施の形態において、参加者ごとに重みの値が設定されることによる重み付けがなされ、特定発言者特定部８３０は、当該重み付けをさらに利用して、特定発言者を特定することができる。
【０１１８】
重み付けによって付される重みの値としては、たとえば、職場における人事情報が利用される。つまり、管理職の人間は、職場における多くの決定権を有するため、会議において影響力の大きい発言をすることが多い。たとえば、部長の職にある参加者は、他の参加者と比較して２倍の重み値を有するとする。特定発言者特定部８３０は、各参加者の会話集中度と各参加者に付された重み値との積を算出し、当該算出結果が最も大きい値となった参加者を特定発言者と決定することができる。
【０１１９】
また、会議の議題等に応じて、会議ごとに、各参加者に付される重みの値が変更される場合も有り得る。
【０１２０】
（変形例６）
会話集中度算出部８４０が特定発言者の特定の際に利用される重みの値は、発言が生じた時間帯に応じて設定される場合も有り得る。たとえば２時間の会議では、後半１時間における発言は、前半１時間における発言よりも、会議の場が成熟している等の理由によって重要度が高い場合がある。そこで、図９を参照して説明したような着話時間や発話時間の算出の際に、たとえば、後半１時間における発言についての着話時間および発話時間の長さは１．５倍されて、会話集中度の算出に利用されても良い。なお、この場合、前半１時間における発言についての着話時間および発話時間の長さは、実際の時間のままとされる。
【０１２１】
これにより、発言が生じた時間帯に応じて、音声データに重みを付けて、特定発言者の特定を行なうことができる。また、発言が生じた時間帯に応じて、発言をした参加者に、当該参加者の音声が議事録に利用される際の優先度を付することができる。
【０１２２】
（その他の変形例等）
ブレインストーミングのような、意見交換型会議は、議事録を作成されることは少なく、その場で出たアイデアがその場でまとめられる場合が多い。したがって、その場で利用されたホワイトボード上の画像や、会議中に付加情報（ポストイット）を付された時点の情報を参照することが主と考えられる。
【０１２３】
ただし、意見交換型会議においても、ファシリテーターが皆無ということはなく、特定発言者（主発言者）を見出すことはできる。最終的に、意見交換型会議においてもまとめがファシリテーターによってなされるケースがある。したがって、主発言者の発言とその主発言者に向けてなされた音声をリンクさせることは、意見交換型会議においても役立つと考えられる。
【０１２４】
なお、本明細書において説明された議事録作成支援システムは、会議中であっても、会議後であっても、議事録ファイルを作成できる。会議中であれば、それまでの会話からリンクが生成され、順次会話が進むことでリンクが更新されていく。
【０１２５】
本明細書において説明された議事録作成支援システムは、会話集中度から、議事録の作成にとって重要な情報（音声データ）を取り出し、リンクを作成する。
【０１２６】
これにより、議事録ファイルを参照するユーザーは、会議において記録されたすべての情報（音声データ）をたぐることなく、議事録の元データを参照することができる。
【０１２７】
なお、議事録作成支援システムにおいて取得される会話集中度は、次の用途にも活用できる。
【０１２８】
・各自の会話集中度の比較をして、参加者間で議論ができているかどうかのチェック
・会話中集度から重要な発言を取り出して、セキュリティ（読取属性の変更や暗号化）をかける
・会議前に設定したファシリテーターのスキルチェック（自分で話しているだけか、議論を活性化させているか）
・主発言者と関わりのない発言は、記録として不必要なので削除、あるいは難読化（暗号化やデータ分割など）を施すことよる、データの圧縮、議論と関係のないおしゃべりなどの削除、および／または、プライバシーの保護
今回開示された各実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。また、実施の形態および各変形例において説明された発明は、可能な限り、単独でも、組合わせても、実施することが意図される。
【符号の説明】
【０１２９】
１００ サーバー、２００，２００Ａ〜２００Ｆ 会話収集デバイス、２０１，２１１ マイク、２０２ 赤外線送受信部、２０３ 生体情報検出部、２０４ 電子コンパス、２０５ ＧＰＳコントローラー、２１２ カメラ、８００ 議事録作成システム、９００ ライフログ生成システム。
【技術分野】
【０００１】
本発明は、議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムに関し、特に、重要な発言が抽出できる議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムに関する。
【背景技術】
【０００２】
従来から、議事録の作成について、種々の技術が開示されている。
たとえば、特許文献１（特開２００７−２１５０５３号公報）には、会議中に議事録を作成する技術が開示されている。特許文献１に記載の技術によれば、議事録作成開始と共に、それを重要な発言の開始時刻と設定し、会議終了時間をもって重要な発言の終了とする。
【０００３】
また、非特許文献１（"VoiceGraphy−製品概要"、[online]、日本電気株式会社、[平成２３年９月２１日検索］、インターネット<http://www.nec.co.jp/soft/VoiceGraphy/outline.html>）では、音声認識でテキスト化して議事録が生成される。
【０００４】
また、非特許文献２（"ディスカッションマイニングプロジェクト"、[online]、名古屋大学大学院情報科学研究科メディア科学専攻、[平成２３年９月２１日検索］、インターネット<http://www.nagao.nuie.nagoya-u.ac.jp/projects/discussion.xml>）では、複数のカメラ、マイク、および、ブラウザベースのツールを用いて、実世界の活動（たとえば、会議）の様子が収録される。発表者は、専用のツールを用いて、自分が発表に用いるスライドやスライドを切替えるタイミングなどを伝達することで、自動的に、これらの情報が議事録に記録される。また、発言内容は、書記が専用ツールを用いることによって記録される。具体的には、参加者が発言する際には、議論札と呼ばれる札型のデバイスを用いることで、発言者のＩＤと発言タイプ（質問、回答、コメント）が書記に伝達され、書記の議事録作成が支援されるとともに、議論の構造化が補助される。このようなシステムでは、使用したスライド、Ｗｅｂ資料のＵＲＬ（Uniform Resource Locator）などの情報も自動的に議事録に取り込まれ、半自動的に、議論自体が、構造化された議事録を生成する仕組みになっている。
【０００５】
なお、イベントなどにおける参加者間の会話を記録する技術としては、非特許文献３（"ビジネス顕微鏡（登録商標）とは"、[online]、株式会社日立製作所、[平成２３年９月２１日検索］、インターネット<http://www.hitachi-hitec.com/jyouhou/business-microscope/solution/microscope.html>）において、ビジネス顕微鏡という技術が開示されている。当該技術では、ＩＤカード型のセンシング装置が利用される。当該装置は、マイクを備え、対面センサを内蔵している。このマイクは、当該装置を装着したユーザーの声や環境音を捉える。また、対面センサは、対面した人が装着するＩＤカード型のセンシング装置と通信することにより、対面した人を特定する。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−２１５０５３号公報
【非特許文献】
【０００７】
【非特許文献１】"VoiceGraphy−製品概要"、[online]、日本電気株式会社、[平成２３年９月２１日検索］、インターネット<http://www.nec.co.jp/soft/VoiceGraphy/outline.html>
【非特許文献２】"ディスカッションマイニングプロジェクト"、[online]、名古屋大学大学院情報科学研究科メディア科学専攻、[平成２３年９月２１日検索］、インターネット<http://www.nagao.nuie.nagoya-u.ac.jp/projects/discussion.xml>
【非特許文献３】"ビジネス顕微鏡（登録商標）とは"、[online]、株式会社日立製作所、[平成２３年９月２１日検索］、インターネット<http://www.hitachi-hitec.com/jyouhou/business-microscope/solution/microscope.html>
【発明の概要】
【発明が解決しようとする課題】
【０００８】
近年、ライフログという、ある程度コマ切りになった音声データ、その場（会議等の場）で作成した文書、ホワイトボードの画像など、多様で雑多な情報をすべて保存し、活用するような仕組みが提案されている。このようなライフログを利用して、人の行動パターンを抽出し、それをマーケティングにつなげるシステムの利用も種々検討されている。
【０００９】
会議等のイベントの議事録の作成としては、上記のようなライフログから、当該イベントにとって重要な部分が抽出されることが有益であると考えられる。議事録作成担当者が、イベント全体を観察し、または、イベント全体が記録されたもののみが残された場合にその記録物から、手作業で、議事録を作成するのは手間と時間を要するからである。
【００１０】
しかしながら、特許文献１に記載の技術によれば、重要な発言の出現のタイミングが会議開始時刻に対応して設定されるが、このような方法では重要な発言を記録できない場合も考えられる。さらに、会議中に議事録を作成することを前提としており、あとから作成することができない。したがって、会議後に議事録の作成が必要となった場合に、対応できない。
【００１１】
また、非特許文献１に記載の技術によれば、イベント中の発言の一覧表を得ることはできるが、重要な部分の抽出という点が考慮されていない。
【００１２】
また、非特許文献２に記載の技術によれば、イベント中に生じた議論を構造化して解析することはできるが、発言者による札型のデバイスの操作を要し、参加者にとって煩雑となる。また、発言者がデバイスの操作を忘れて発言を行なった場合には、議事録作成の対応ができなくなる。さらに、議事録の作成対象が日常の業務における会話といった参加者が特別な意識を持たない場面での適用も難しいと考えられる。
【００１３】
また、非特許文献３に記載の技術によれば、ユーザー間の相関図が作成されたりするものの、イベントの重要な部分の抽出という点については検討がなされていない。
【００１４】
本発明は係る実情に鑑み考え出されたものであり、その目的は、会議の重要な部分を抽出して議事録を作成することができる議事録作成支援装置、議事録作成支援システム、および、議事録作成用プログラムを提供することである。
【課題を解決するための手段】
【００１５】
本発明に従った議事録作成支援装置は、会議の参加者同士の会話が成立している状態を検知するための検知手段と、会議の参加者が発する音声を記録するための記録手段と、検知手段による会話の成立状態の検知結果に基づいて、記録手段に記録された音声から特定の音声を抽出するための抽出手段と、特定の音声を用いて会議の議事録を作成するための議事録作成手段とを備える。
【００１６】
好ましくは、抽出手段は、会議の参加者のそれぞれについて、検知手段によって会話が成立したと判断された時間を積算して合計会話時間を算出し、各参加者についての合計会話時間に基づいて、会議における主発言者を特定し、記録手段が記録した音声から、主発言者が含まれる会話の音声を、特定の音声として抽出する。
【００１７】
好ましくは、抽出手段は、すべての参加者についての合計会話時間に対する各参加者の合計会話時間の比を算出することによって、各参加者の会話集中度を算出し、各参加者の会話集中度に基づいて、最も会話集中度の高い参加者を主発言者として決定し、記録手段が記録した音声から、主発言者が含まれる会話の音声を、特定の音声として抽出する。
【００１８】
好ましくは、記録手段は、各参加者が発した音声と当該参加者に発せられた音声とを区別して、音声を記録する。
【００１９】
好ましくは、議事録作成手段は、特定の音声に対するリンクを生成し、当該リンクを提示する。
【００２０】
好ましくは、抽出手段は、音声の発話の時間帯に基づく優先度に基づいて、記録手段に記録された音声から特定の音声を抽出する。
【００２１】
好ましくは、抽出手段は、記録手段に記録された音声を発した参加者に対して設定された優先度に基づいて、記録手段に記録された音声から特定の音声を抽出する。
【００２２】
好ましくは、記録手段は、音声を、当該音声を発する者の生体情報とともに記録する。
好ましくは、検知手段は、各参加者によって装着される光学的検出手段によって検出される情報を取得し、当該光学的検出手段から取得される情報に基づいて、会議の参加者同士の会話が成立している状態を検知する。
【００２３】
好ましくは、検知手段は、各参加者の位置情報を検出するための位置検出手段によって検出される当該参加者の位置情報を取得し、当該位置検出手段から取得される情報に基づいて、会議の参加者同士の会話が成立している状態を検知する。
【００２４】
本発明に従った議事録作成支援システムは、会議の参加者が装着する検出手段と、検出手段と通信可能な議事録作成支援装置とを備えた、議事録作成支援システムであって、議事録作成支援装置は、各検出手段から取得する検出結果に基づいて、会議の参加者同士の会話が成立している状態を検知するための検知手段と、会議の参加者が発する音声を記録するための記録手段と、検知手段による会話の成立状態の検知結果に基づいて、記録手段に記録された音声から特定の音声を抽出するための抽出手段と、特定の音声を用いて会議の議事録を作成するための議事録作成手段とを含む。
【００２５】
本発明に従った議事録作成用プログラムは、コンピュータ読取可能なプログラムであって、コンピュータを、会議の参加者同士の会話が成立している状態を検知するための検知手段、会議の参加者が発する音声を記録するための記録手段、検知手段による会話の成立状態の検知結果に基づいて、記録手段に記録された音声から特定の音声を抽出するための抽出手段、および、特定の音声を用いて会議の議事録を作成するための議事録作成手段として機能させる。
【発明の効果】
【００２６】
会話が記録され、また、会話の成立状態が検知され、そして、成立が検知された結果に基づいて、記録された音声から特定の音声が抽出されて、議事録が作成される。
【００２７】
これにより、会話が成立し、さらに、当該会話がどのように成立したかに応じて、議事録の作成に利用される音声が抽出される。
【００２８】
これにより、会議において重要と考えられる音声を抽出して、議事録を作成することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の一実施の形態である議事録作成支援システムの概略構成を示す図である。
【図２】議事録作成支援システムの機能構成の一例を模式的に示す図である。
【図３】会話収集デバイスの外観の一例を示す図である。
【図４】会話収集デバイスのハードウェア構成の一例を模式的に示す図である。
【図５】サーバーのハードウェア構成の一例を模式的に示す図である。
【図６】会議の風景の一例を模式的に示す図である。
【図７】本発明の一実施の形態において生成される会話状態の一例を模式的に示す図である。
【図８】本発明の一実施の形態において生成される各参加者の会話時間の一例を模式的に示す図である。
【図９】会話集中度の算出方法を説明するための図である。
【図１０】図９に示された各者の発言のうち、抽出部によって抽出される発言に対応する音声データの内容を模式的に示す図である。
【図１１】本発明の一実施の形態の議事録作成システムにおいて実行される議事録作成処理のフローチャートである。
【図１２】会議ごとに予め登録されるタグ情報の一例を示す図である。
【図１３】サーバーの表示デバイスに表示される画面の一例を示す図である。
【図１４】議事録ファイルの表示例を示す図である。
【図１５】各音声データにリンクする情報を表示するための画面の一例を示す図である。
【図１６】会話収集デバイスの変形例の外観を示す図である。
【図１７】図１６の会話収集デバイスのハードウェア構成の一例を模式的に示す図である。
【図１８】会話収集デバイスの他の変形例のハードウェア構成の一例を模式的に示す図である。
【図１９】図１５のリンクの表示画面の変形例を示す図である。
【図２０】会話収集デバイスのさらに他の変形例のハードウェア構成の一例を模式的に示す図である。
【発明を実施するための形態】
【００３０】
以下、本発明に係る議事録作成支援システムについて、図面を参照して説明する。なお、各図において、同様の作用および機能を奏する構成要素については、同じ符号を付し、その説明は繰返さない。
【００３１】
［議事録作成システムの概略構成］
図１は、本発明の一実施の形態である議事録作成支援システムの概略構成を示す図である。
【００３２】
図１を参照して、議事録作成支援システムは、各ユーザー（会議の参加者）が装着し、検出手段として機能する会話収集デバイス２００Ａ〜２００Ｄと、会話収集デバイス２００Ａ〜２００Ｄのそれぞれと通信し、議事録作成支援装置として機能するサーバー１００とを含む。
【００３３】
本明細書では、会話収集デバイス２００Ａ〜２００Ｄを総称して「会話収集デバイス２００」と呼ぶ場合もある。会話収集デバイスの数は、参加者と同数あっても良いし、それ以下であっても良い。つまり、会議の参加者全員が会話収集デバイスを装着していても良いし、一部の参加者のみが会話収集デバイスを装着していても良い。
【００３４】
また、会話収集デバイスは、会議の参加者間で会話が成立している状態を検知するための情報を取得したり、参加者が発する音声（会話）を取得するための装置である。したがって、議事録作成支援システムでは、複数の参加者についてのこれらの情報を取得できる装置が備えられれば、参加者全員の情報を取得するためであっても、参加者と同数備えられる必要はなく、単数である場合も有り得る。
【００３５】
図２は、議事録作成支援システムの機能構成の一例を模式的に示す図である。
議事録作成支援システムは、ライフログ生成システム９００と議事録作成システム８００とから主に構成される。ライフログ生成システム９００は、１以上の会話収集デバイス２００と、タグ生成部９１０と、データ保存部９２０とを含み、会議中に当該会議の参加者のデータを取得して保存する機能を有する。タグ生成部９１０は、会議についてのタグ情報を生成する。
【００３６】
会話収集デバイス２００を介して取得された参加者のデータは、タグ生成部９１０において生成されたタグ情報とともに、データ保存部９２０に保存される。より具体的には、会話収集デバイス２００は、各参加者の音声等の参加者自身の情報を取得する部分と、各参加者が誰と会話しているのかを特定するための情報を取得する部分とを有する。これらの情報は、会議終了後に検索が可能なように、会議に付されるタグ情報とともに、保存される。タグ生成部９１０は、タグ情報として、日時や図示しないスケジューラからの会議情報などを、タグ情報として付与する。ライフログ生成システム９００では、このようにしてリアルタイムに生成された情報が、データ保存部９２０に保存される。
【００３７】
議事録作成システム８００は、検索部８１０と、入力部８２０と、特定発言者特定部８３０と、会話集中度算出部８４０と、抽出部８５０と、優先度設定部８６０と、リンク生成部８７０と、議事録作成部８８０とを含む。本実施の形態では、会話集中度算出部８４０は検知手段として機能し、特定発言者特定部８３０と会話集中度算出部８４０と抽出部８５０とは抽出手段として機能する。
【００３８】
検索部８１０は、議事録作成の対象となる会議のタグ情報をデータ保存部９２０から検索する。入力部８２０は、議事録作成の指示等の情報の入力を受付ける。なお、入力部８２０は、議事録作成の指示を、ネットワークを介して、外部の装置から、受付ける場合も有り得る。なお、入力部８２０は、タグ情報を生成するための情報の入力を受付ける場合も有り得る。
【００３９】
会話集中度算出部８４０は、会議の各参加者について、後述する会話集中度を算出する。特定発言者特定部８３０は、会議の参加者から、会話集中度等に基づいて、議事録の作成に発言を利用する参加者を特定する。抽出部８５０は、特定発言者特定部８３０が特定した参加者が関与する会話をデータ保存部９２０から抽出する。優先度設定部８６０は、会議の参加者に対して、議事録の作成に関しての優先度を設定する。リンク生成部８７０は、議事録ファイルのトップページから議事録を構成する音声データ等の各種のデータへのリンク情報を生成する。議事録作成部８８０は、上記したようなトップページとリンク情報とを関連付ける等により、議事録ファイルを作成する。
【００４０】
［会話収集デバイスの構成］
図３は、会話収集デバイス２００の外観の一例を示す図である。
【００４１】
図３を参照して、会話収集デバイス２００は、会議参加者が首からかけるＩＤカードタイプの形態を有している。会話収集デバイス２００は、マイク２０１と赤外線送受信部２０２とを含む。マイク２０１は、装着者が発する音声を取得することができる。
【００４２】
会話収集デバイス２００の内部には、メモリー（後述する記憶部２６０）を含む。当該メモリーには、装着者を区別することができるように、各会話収集デバイス２００を特定するための個別ＩＤが保存されている。議事録作成支援システムでは、当該個別ＩＤと、たとえば図示しない社内人事ＤＢとを連携させることにより、各会話収集デバイス２００のマイク２０１で検出された音声データが、誰の音声データであるかを区別することができる。
【００４３】
赤外線送受信部２０２は、上記メモリーに保存されている個別ＩＤをコード化して、赤外線で送信している。また、赤外線送受信部２０２は、他の会話収集デバイス２００の赤外線送受信部２０２が送信した個別ＩＤを受信できる。
【００４４】
議事録作成支援システムでは、会話収集デバイス２００において他の個別ＩＤが受信されたことにより、当該会話収集デバイス２００を装着している参加者が、個別ＩＤを受信された会話収集デバイス２００を装着している参加者と対面していることが検知される。
【００４５】
図４は、会話収集デバイス２００のハードウェア構成の一例を模式的に示す図である。
図４を参照して、会話収集デバイス２００は、当該端末の動作を全体的に制御する演算装置によって構成されるＣＰＵ（Central Processing Unit）２５１と、ＲＡＭ（Random Access Memory）２５２と、ＲＯＭ（Read Only Memory）２５３と、通信装置２５４と、記憶部２６０とを含む。
【００４６】
ＲＡＭ２５２は、ＣＰＵ２５１がプログラムを実行する際のワークエリアとして機能する。通信装置２５４は、たとえばＬＡＮ（Local Area Network）カード、ＬＡＮアダプタ等のネットワーク通信機器からなる。なお、会議中等にデータをサーバー１００に送信する場合は、無線ＬＡＮカードや、Ｂｌｕｅｔｏｏｔｈ（登録商標）チップセット等の非接触での通信機能を有することが望ましい。会話収集デバイス２００は、通信装置２５４を介して、サーバー１００へ接続される。
【００４７】
記憶部２６０は、ＣＰＵ２５１が実行するプログラムを記憶するプログラム記憶部２６１と、種々のデータを記憶するデータ記憶部２６２とを含む。なお、記憶部２６０は、会話収集デバイス２００の本体から着脱可能な記録媒体によって構成されても良い。記憶媒体としては、ＣＤ−ＲＯＭ（Compact Disc - Read Only Memory）、ＤＶＤ−ＲＯＭ（Digital Versatile Disk - Read Only Memory）、ＵＳＢ（Universal Serial Bus）メモリ、メモリカード、ＦＤ（Flexible Disk）、ハードディスク、磁気テープ、カセットテープ、ＭＯ（Magnetic Optical Disc）、ＭＤ（Mini Disc）、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）などの、不揮発的にプログラムを格納する媒体が挙げられる。
【００４８】
［サーバーの構成］
図５は、サーバー１００のハードウェア構成の一例を模式的に示す図である。
【００４９】
図５を参照して、サーバー１００は、当該サーバー１００の動作を全体的に制御する演算装置によって構成されるＣＰＵ１５１と、ＲＡＭ１５２と、ＲＯＭ１５３と、通信装置１５４と、表示ドライバー１５５と、表示デバイス１５６と、入力部１５７と、記憶部１６０とを含む。
【００５０】
通信装置１５４は、たとえばＬＡＮカード、ＬＡＮアダプタ等のネットワーク通信機器からなる。なお、会議中等にデータを会話収集デバイス２００から受信する場合は、無線ＬＡＮカードや、Ｂｌｕｅｔｏｏｔｈ（登録商標）チップセット等の非接触での通信機能を有することが望ましい。サーバー１００は、通信装置１５４を介して、会話収集デバイス２００と通信する。
【００５１】
表示デバイス１５６は、液晶表示デバイスなどから構成される。表示ドライバー１５５は、ＣＰＵ１５１が適切なプログラムを実行することによって生成した情報に基づいて、表示デバイス１５６において表示させるための画像情報を生成する。表示ドライバー１５５は、図５に示されたようにハードウェアとして設けられていてもよいし、ＣＰＵ１５１が適切なプログラムを実行することによって、ソフトウェアとして設けられてもよい。
【００５２】
入力部１５７は、たとえば、タッチセンサ、キーボード、マウスなどの入力装置によって実現される。
【００５３】
記憶部１６０は、ＣＰＵ１５１が実行するプログラムを記憶するプログラム記憶部１６１と、サーバー１００が本実施の形態において説明される機能を実現するために必要とされる種々のデータを記憶するデータ記憶部１６２とを含む。
【００５４】
議事録作成支援システムにおいて、図２に破線で囲んで示したライフログ生成システム９００のタグ生成部９１０、データ保存部９２０、および議事録作成システム８００の各構成要素は、たとえばサーバー１００によって実現される。タグ生成部９１０、検索部８１０、特定発言者特定部８３０、会話集中度算出部８４０、抽出部８５０、優先度設定部８６０、リンク生成部８７０、および、議事録作成部８８０は、たとえばＣＰＵ１５１が適切なプログラムを実行することによって、実現される。データ保存部９２０は、たとえば記憶部２６０によって実現される。入力部８２０は、たとえば入力部１５７や通信装置１５４によって、実現される。
【００５５】
［会話成立の検出］
次に、議事録作成支援システムにおいて、参加者同士の会話の成立がどのように検出されるかについて、説明する。
【００５６】
図６は、会議の風景の一例を模式的に示す図である。
図６を参照して、会議には、参加者３００Ａ〜３００Ｆの６人が参加している。なお、図６は、長机の周りに座る６人の参加者３００Ａ〜３００Ｆを上方から見た図に相当する。そして、参加者３００Ａ〜３００Ｆは、各自会話収集デバイス２００（会話収集デバイス２００Ａ〜２００Ｆ）を装着している。なお、図６では、理解を容易にするため、会話収集デバイス２００Ａ〜２００Ｆが参加者３００Ａ〜３００Ｆに対して大きめに記載されている。
【００５７】
会話収集デバイス２００の赤外線送受信部２０２は、指向性が高い。そして、各会話収集デバイス２００の赤外線送受信部２０２は、他の会話収集デバイス２００の赤外線送受信部２０２と対向する状態となって初めて当該他の会話収集デバイス２００の赤外線送受信部２０２と通信可能になる。
【００５８】
図６では、参加者３００Ａと参加者３００Ｄが対向することにより、会話収集デバイス２００Ａと会話収集デバイス２００Ｄが対向し、これにより、赤外線送受信部２０２Ａと赤外線送受信部２０２Ｄが矢印Ｒ１で示されるような経路に沿って通信可能になる。会話収集デバイス２００Ａは、赤外線送受信部２０２Ａが赤外線送受信部２０２Ｄの個別ＩＤを受信したことを、受信した時刻情報とともにデータ保存部９２０へ送信する。また、会話収集デバイス２００Ｄは、赤外線送受信部２０２Ｄが赤外線送受信部２０２Ａの個別ＩＤを受信したことを、受信した時刻情報とともにデータ保存部９２０へ送信する。
【００５９】
会話集中度算出部８４０は、同じ時刻に、互いに相手の個別ＩＤを受信した会話収集デバイス２００の組が存在するか否かを判断する。そして、そのような組が存在すると判断すると、当該の組の双方に対応する参加者の間で、会話が成立していると判断する。つまり、たとえば、上記の検出例によれば、会話集中度算出部８４０は、会話収集デバイス２００Ａに対応する参加者と会話収集デバイス２００Ｄに対応する参加者との間で、会話が成立していると判断する。
【００６０】
会話集中度算出部８４０は、上記のように、いつ、どの参加者の間で、会話が成立しているかを検出できる。これにより、会話集中度算出部８４０は、会議における、参加者の会話状態の時間変化を表す情報を生成できる。図７は、生成される会話状態の一例を模式的に示す図である。
【００６１】
図７の会話状態では、ＳＴ１〜ＳＴ１０の会話（発話）部分が示されている。
図７に示された会議では、Ａさん、Ｂさん、Ｃさん、Ｄさんの４人の参加者が示されている。ＳＴ１は、Ａさんと、Ｂさん、Ｃさん、および、Ｄさんのそれぞれとの間で短時間ずつ会話が成立した状態を示す。
【００６２】
ＳＴ２は、ＡさんとＢさんの間で会話が成立し、かつ、ＢさんからＡさんに話しかけている状態を示す。会話が成立した参加者の間で、どちらからどちらに話しかけているかは、両者のいずれのマイク２０１で音声が取得されたかによって判断される。つまり、図７では、ＳＴ２の期間中、Ｂさんの装着する会話収集デバイス２００のマイク２０１において音声が検出されたことを示している。
【００６３】
なお、会話集中度算出部８４０は、マイク２０１によって取得された音声データに対して、所定の音量のフィルタを用いて、取得された音声から環境音を分離して、会話収集デバイス２００を装着した者が声を出したか否かを判断することが好ましい。さらに、会話集中度算出部８４０は、各会話収集デバイス２００を装着した者の音声データをサンプルとして取得し、当該者の声と同定できる音声データが検出された期間のみ、当該者が発言した期間と判断しても良い。
【００６４】
ＳＴ３は、ＡさんとＢさんの間で会話が成立し、かつ、ＡさんからＢさんに話しかけている状態を示す。ＳＴ４とＳＴ５は、ＣさんとＤさんの間で会話が成立し、かつ、ＣさんからＤさんへの発言とＤさんからＣさんへの発言が交互に頻繁に行なわれた状態を示す。ＳＴ６とＳＴ７は、ＢさんとＤさんの間で会話が成立し、かつ、ＢさんからＤさんへの発言とＤさんからＢさんへの発言とが交互に頻繁に行なわれた状態を示す。ＳＴ８は、ＡさんとＣさんの間で会話が成立し、かつ、ＣさんからＡさんに話しかけている状態を示す。ＳＴ９は、ＡさんとＣさんの間で会話が成立し、かつ、ＡさんからＣさんに話しかけている状態を示す。ＳＴ１０は、ＡさんとＢさんの間で会話が成立し、かつ、ＢさんからＡさんに話しかけている状態を示す。
【００６５】
会話集中度算出部８４０は、各会話収集デバイス２００で取得され、データ保存部９２０に保存された情報に基づいて、図７に示されたような会話状態とともに、図８に示されるような、各参加者の会話時間を算出することができる。
【００６６】
図８は、生成される各参加者の会話時間の一例を模式的に示す図である。
図８では、Ａさん、Ｂさん、Ｃさん、Ｄさんのそれぞれについて、誰から誰に、どのぐらいの長さ、発言をしたかが示されている。図８において示された例は、図７に示された会議とは別の会議における会話時間が示されているものとする。そして、図８では、ある会議についての、各参加者の、各相手に対する発言の時間の和が示されている。つまり、たとえば、ＡさんからＢさんへの当該会議中の発言時間の合計時間は、３分である。また、ＢさんからＡさんへの当該会議中の発言時間の合計時間は、２分である。本明細書では、会話時間とは、参加者間で会話が成立した時間を意味する。つまり、２者間で言えば、発言を行なった時間と発言を受けた時間の和とする。たとえば図８の例では、ＡさんとＢさんの間での会話時間は５分である。このうち、Ａさんについては、（Ｂさんに対して）発言を行なった時間は３分である。また、（Ｂさんから）発言を受けた時間は２分である。
【００６７】
また、本明細書では、一方の参加者から他方の参加者へ発言が行なわれた時間を、一方の参加者の発話時間と呼ぶ場合がある。さらに、一方の参加者から他方の参加者へ発言が行なわれた時間を、他方の参加者の着話時間と呼ぶ場合がある。
【００６８】
本実施の形態では、会話集中度算出部８４０は、ある会議の各参加者について、会話の相手、発言をした時間、および、発言を受けた時間が特定されることにより、図９に示されるようなマトリクスを作成し、これに基づいて、当該会議における各参加者の会話集中度を算出することができる。図９は、会話集中度の算出方法を説明するための図である。
【００６９】
図９には、会議の参加者として、「田中」「伊藤」「井上」「石田」「佐藤」「小林」の６人が挙げられている。そして、図９における上部の表には、各参加者の発話時間と着話時間が分単位で示されている。縦方向に、各参加者の、各参加者に対する発話時間が示されている。たとえば、井上さんについては、田中さんに対する発話時間は３分であり、伊藤さんに対する発話時間は０分であり、井上さん自身に対する発話時間は０分であり、石田さんに対する発話時間は１分であり、佐藤さんに対する発話時間は０分であり、小林さんに対する発話時間は０分である。
【００７０】
会話集中度算出部８４０は、全参加者の発話時間の合計を算出する。図９の例では、２７分である。
【００７１】
また、会話集中度算出部８４０は、全参加者の発話時間の合計を算出する。図９の例では、田中さんについては９分であり、伊藤さんについては３分であり、井上さんについては４分であり、石田さんについては７分であり、佐藤さんについては３分であり、小林さんについては１分である。
【００７２】
また、会話集中度算出部８４０は、各参加者の着話時間の合計を算出する。図９の例では、田中さんについては１０分であり、伊藤さんについては３分であり、井上さんについては４分であり、石田さんについては５分であり、佐藤さんについては３分であり、小林さんについては２分である。
【００７３】
また、会話集中度算出部８４０は、各参加者の発話集中度を算出する。発話集中度とは、全参加者の発話時間の合計に対する各参加者の発話時間の割合である。図９の例では、田中さんについては０．３３であり、伊藤さんについては０．１１であり、井上さんについては０．１５であり、石田さんについては０．２６であり、佐藤さんについては０．１１であり、小林さんについては０．０４である。
【００７４】
また、会話集中度算出部８４０は、各参加者の着話集中度を算出する。着話集中度とは、全参加者の発話時間の合計に対する各参加者の着話時間の割合である。図９の例では、田中さんについては０．３７であり、伊藤さんについては０．１１であり、井上さんについては０．１５であり、石田さんについては０．１９であり、佐藤さんについては０．１１であり、小林さんについては０．０７である。
【００７５】
また、会話集中度算出部８４０は、各参加者の会話集中度を算出する。会話集中度とは、発話集中度と着話集中度の和である。図９の例では、田中さんについては０．７である。田中さんであれば、発話時間の総和は９分、着話時間の総和は１０分である。また、会議全体の発話時間の合計は２７分である。したがって、田中さんの会話集中度は、「（９＋１０）／２７」に従って、約０．７と算出される。また、伊藤さんについては０．２２であり、井上さんについては０．３であり、石田さんについては０．４５であり、佐藤さんについては０．２２であり、小林さんについては０．１１である。
【００７６】
［音声データの抽出］
本実施の形態では、特定発言者特定部８３０は、各参加者の会話集中度に基づいて、当該会議における特定発言者を特定する。特定発言者とは、当該会議における中心的な参加者と考えられる。図９の例では、会話集中度が最も高い田中さんが、特定発言者として特定される。
【００７７】
そして、本実施の形態では、抽出部８５０は、データ保存部９２０に保存された会話の音声データから、特定発言者がした発言の音声データおよび特定発言者が受けた発言の音声データを、当該会議における重要な発言として抽出する。図９の例では、田中さんが各参加者に対してした発言と田中さんが受けた発言の音声データが抽出される。図１０は、図９に示された各者の発言のうち、抽出部８５０によって抽出される発言に対応する音声データの内容を模式的に示す図である。
【００７８】
なお、図９に示された会議では、実際に重要であった発言は、太枠で囲われた、石田さんから田中さんに対する発言（合計３分間）と、佐藤さんから田中さんに対する発言（合計２分間）と、田中さんから石田さんに対する発言（合計３分間）であったとする。図１０に示された結果によれば、図９において重要であると示された発言は、すべて、抽出されている。
【００７９】
［議事録作成処理］
図１１は、議事録作成システムにおいて実行される議事録作成処理のフローチャートである。議事録作成処理は、たとえばサーバー１００にインストールされた議事録作成アプリケーションとして実現される。
【００８０】
議事録作成処理では、まずステップＳＡ１０において、入力部８２０が、ユーザーによる議事録を作成する会議に関する情報の入力を受付ける。具体的には、会議名、会議の日時、会議の開催場所、会議の参加者等の必要なプロパティーが、ユーザーによって入力される。
【００８１】
なお、サーバー１００には、たとえば図１２に示されるように、予め、タグ情報として、会議に関する情報（日時、場所、参加者、等）が登録される。そして、ステップＳＡ１０では、入力部８２０は、登録された会議に関する情報の中から会議を指定する情報の入力を受付けて、ステップＳＡ２０へ処理を進める。
【００８２】
図１２は、会議ごとに予め登録されるタグ情報の一例を示す図である。
図１２を参照して、データ保存部９２０には、各会議の情報として、会議ＩＤ、開始日時、終了日時、場所、参加者（参加者ＩＤ）、目的、および、会議形態が登録されている。会議ＩＤは、会議を識別するための情報であり、会議ごとに固有の値が設定される。開始日時は、会議の開始の時刻を特定する情報である。終了日時は、会議の終了の時刻を特定する情報である。また、場所、参加者、および、目的は、それぞれ、会議の場所、参加者、および、目的を特定する情報である。特に、参加者については、たとえば参加者ＩＤで特定される。なお、本実施の形態では、各参加者ＩＤは、各参加者が装着する会話収集デバイス２００の個別ＩＤに関連付けられている。
【００８３】
会議形態としては、「自己想定」と「システム評価」の２種類の情報が格納される。「自己想定」は、たとえば管理者等によって入力される情報であり、「システム評価」は、たとえば、図７を参照して説明したような会話状態等に基づいて判定される評価内容である。たとえば、会話状態が、ある特定の参加者の会話集中度が高く、他の参加者の会話集中度がある程度低い値である場合には、「質疑応答型」と判定される。また、たとえば、ある特定の参加者の会話集中度が特に高く、残りの参加者の会話集中度がほぼ０に近い値である場合には、「通知通達型」と判定される。また、たとえば、参加者の会話集中度がまんべんなく同じような値である場合には、「対話型」等の判定がなされる。
【００８４】
ステップＳＡ２０では、会話集中度算出部８４０は、データ保存部９２０から、ステップＳＡ１０で指定された会議のライフログ（音声データ）を検索して、ステップＳＡ３０へ処理を進める。
【００８５】
たとえば、会議が指定されると、図１２に示されているように、当該会議に対応する開始日時、終了日時、および、参加者ＩＤが特定される。たとえば、図１２においてＣ１で示された会議（会議ＩＤが「ＰＯＥ−０００３」）が指定されると、当該会議に対応する開始日時（２０１１年８月２７日１０時００分）、終了日時（２０１１年８月２７日１１時１０分）、参加者ＩＤ（１０２０１，１０８５０，１０４３０，および，８４３１）が特定される。
【００８６】
会話集中度算出部８４０は、特定されたこれらの情報に基づいて、開始日時から終了日時までの、参加者ＩＤが行なった発言または受けた発言のすべての音声データを、データ保存部９２０に登録されている音声データから検索する。
【００８７】
以下、より具体的に説明する。図１３は、サーバー１００の表示デバイス１５６に表示される画面の一例を示す図である。会議を指定する情報が入力されると、検索部８１０は、図１３の画面５００に示すように、当該指定された会議のタグ情報を表示する。そして、ユーザー（たとえば、議事録作成担当者）は、タグ情報を確認し、当該会議についての議事録の作成を進めることを希望する場合には、さらに、画面５００内のリンク作成ボタン５０１を操作する。当該操作に応じて、検索部８１０は、上記したように、当該会議のタグ情報によって特定される音声データを、検索する。
【００８８】
つまり、ステップＳＡ２０の処理によれば、会議の出席者について記録されたすべての音声データが、検索結果となる。
【００８９】
なお、タグ情報における会議の場所に基づいて、当該会議の場所から接続される無線ＬＡＮが特定されても良い。そして、このように特定されたＬＡＮにおいて、開始日時から終了日時まで取得（当該ＬＡＮのサーバーに登録）された音声データが、ステップＳＡ２０の検索結果とされる場合も有り得る。
【００９０】
次に、ステップＳＡ３０では、会話集中度算出部８４０は、ステップＳＡ２０で検索結果として得られた音声データを利用して、当該会議について、図７や図８を参照して説明したような会話状態（参加者間の有向グラフ）を作成して、ステップＳＡ４０へ処理を進める。
【００９１】
ステップＳＡ４０では、会話集中度算出部８４０は、図９を参照して説明したように、各参加者の会話集中度を算出して、ステップＳＡ５０へ処理を進める。
【００９２】
ステップＳＡ５０では、特定発言者特定部８３０は、ステップＳＡ４０で算出した各参加者の会話集中度に基づいて、特定発言者を特定して、ステップＳＡ６０へ処理を進める。
【００９３】
ステップＳＡ６０では、抽出部８５０は、ステップＳＡ２０の検索結果から、特定発言者が行なった発言と特定発言者に対する発言に対応する音声データを抽出して、ステップＳＡ７０へ処理を進める。
【００９４】
ステップＳＡ７０では、リンク生成部８７０が、ステップＳＡ６０で抽出した音声データのそれぞれにリンクするためのリンクデータを生成し、さらに、議事録作成部８８０が、図１３の画面５００のような議事録の作成対象となっている会議についての画面データに、作成されたリンクデータを追加することにより、議事録ファイルを作成して、議事録作成処理を終了する。
【００９５】
図１４は、議事録ファイルの表示例を示す図である。
図１４を参照して、議事録ファイルは、画面５１０のような表示画面のデータを含む。画面５１０では、対象となる会議の日時、場所、参加者、および、データリンクを含む。画面５１０は、図１３の画面５００に、データリンクが追加された画面である。日時、場所、参加者は、図１２に示されたようなタグ情報から取得される。
【００９６】
画面５１０では、会話が成立した参加者の組別のリンクが表示されている。なお、リンクは、下線を付されて表示されている。また、画面５１０のデータリンクにおける参加者の組の表示の順序は、たとえば会話時間の長い順序とすることができる。つまり、画面５１０は、田中さんと石田さんの組の会話が、会話時間（石田さんとの会話についての、田中さんの発話時間と着話時間の和）の最も長い組である場合を示している。
【００９７】
なお、データ保存部９２０では、音声データは、会話が一区切りされるごとに、異なるファイルとして登録されている。具体的には、会話収集デバイス２００のＣＰＵ２５１（図４参照）は、マイク２０１から入力される音声について、所定時間以上の無音期間（または、特定のレベル未満の音声期間）が出現するごとに、異なるファイルで、音声データを生成する。そして、画面５１０にデータリンクとして表示された各参加者の組のうち、ある組を指定すると、当該組の会話の音声データのそれぞれにリンクする情報が表示される。図１５は、各音声データにリンクする情報を表示するための画面の一例を示す図である。
【００９８】
図１５を参照して、画面５２０では、田中さんと石田さんの会話の各音声データへのリンクが、当該音声データが取得された時刻を含むように表示されている。サーバー１００では、各リンクが選択されると、当該リンクに対応した時刻に記録された音声データが、再生される。なお、ここでいう時刻は、たとえば、音声の取得が開始された時刻である。なお、画面５２０では、音声データが取得された時刻の順ではなく、たとえば各音声データの再生時間が長い順等、対応する音声データの性質等が所定の条件に従ってソートされて、表示されている。
【００９９】
図１４に戻って、画面５１０では、「そのほかの発言」という文字によって示されるリンクを含む。このリンクは、当該会議において、会話時間の長い順から特定の順序以下の組の発言の音声データに対応する。このようなリンクが選択されると、たとえば、表示デバイス１５６には、「そのほかの発言」に分類された参加者の組の会話の各音声データへのリンクが表示される。そして、そこに表示された各リンクが選択されると、サーバー１００では、当該リンクに対応した音声データが再生される。
【０１００】
以上説明した議事録作成処理によれば、図６〜図９等を参照して説明したように、会議における会話の成立に関する状態を検知し、当該検知の結果に基づいて、記録された音声データから音声データを抽出し、議事録の作成に利用される。
【０１０１】
これにより、会議で取得された音声すべてではなく、会議において重要と考えられる音声が抽出されて、議事録の作成に利用される。
【０１０２】
［変形例等］
（変形例１）
以上説明した本実施の形態において、「会議」とは、議事録の作成対象を言うのであって、特別に集合することを予定されたイベントに限られるものではない。たとえば、オフィスにおいて、当該オフィスにいると想定される人を特定する情報が参加者ＩＤとして特定され、また、オフィスにいる各ユーザーが図３等を参照して説明された会話収集デバイス２００を装着し、そして、当該オフィスにおける日常会話が記録された場合にも、本実施の形態によって開示された技術的思想は適用され得る。
【０１０３】
（変形例２）
会話収集デバイス２００によって検出手段の一例が構成される。なお、会話収集デバイスは、図３等を参照して説明されたような形態のものに限定されない。図１６は、会話収集デバイスの変形例の外観を示す図である。また、図１７は、図１６の会話収集デバイスのハードウェア構成の一例を模式的に示す図である。
【０１０４】
図１６および図１７を参照して、会話収集デバイス２１０は、図４を参照して説明した構成に対して、マイク２０１と赤外線送受信部２０２の代わりに、マイク２１１とカメラ２１２を含む。
【０１０５】
会話収集デバイス２１０では、カメラ２１２は、会話収集デバイス２１０を装着している会議の参加者の視線の先に存在するものを撮影する。したがって、会話集中度算出部８４０は、カメラ２１２が撮影する画像を既知の顔判別アルゴリズムに従って解析することにより、当該会話収集デバイス２１０を装着している参加者が誰を見ているのかを特定することができる。
【０１０６】
さらに、会話集中度算出部８４０は、上記顔判別アルゴリズムと合わせて、上記画像を解析することによって、会話収集デバイス２１０を装着している参加者が頷いているか否かを判別することができる。当該判別結果をさらに用いることにより、既知のうなずき理論（岡山県立大学情報システム工学科、渡辺富夫教授の「身体的引き込み技術ｉＲＴ」等）に基づいて、会話収集デバイス２１０を装着している参加者が頷いているときに見ている相手を会話の相手と特定するなど、参加者の会話の相手を、より高い精度で、特定することができる。
【０１０７】
また、会話収集デバイス２１０では、カメラ２１２がテレビ画面に映った相手を撮影することができる。したがって、会話収集デバイス２１０において収集される情報は、遠隔地とのテレビ会議においても、会話相手の特定に利用することができる。
【０１０８】
（変形例３）
図１８は、会話収集デバイス２００の他の変形例のハードウェア構成の一例を模式的に示す図である。
【０１０９】
本変形例では、会話収集デバイス２００は、図４に示された構成に加えて、生体情報検出部２０３を備える。生体情報検出部２０３は、会話収集デバイス２００を装着したユーザーの心拍数、熱、および／または、皮膚の導電性などの生体情報（バイタルデータ）を検出するためのセンサーである。会話収集デバイス２００を装着する参加者は、さらに、当該センサーを、当該センサーが取得するべきデータを取得できる態様で、装着する。
【０１１０】
そして、本変形例では、データ保存部９２０には、音声データとともに、当該音声データを発した参加者および／または当該音声データの発言を受けた参加者の生体情報も記録される。
【０１１１】
このように記録された生体情報は、当該音声データに対応する発言がどのような感情で発せられたか、あるいは、会話相手にどのぐらいのインパクトを与えたかなど、会話の内容や重要度の特定をサポートする情報となり得る。特に、心拍間隔時系列データのパターンから、プレゼンテーションや質疑の区間を識別する研究（「脈拍数を用いた平常／非平常（眠気，緊張）推定方法」ＮＴＴ）もある。したがって、上記したような生体情報が記録されることにより、会話状態の検知の精度を向上させることができる。
【０１１２】
さらに、上記のように記録された生体情報は、会話状態の検知だけでなく、会話の重要度の特定にも利用できる。たとえば、音声データが取得されたときの発言者の心拍数が、当該発言者の定常時の心拍数に対して特定の割合以上上昇している場合には、緊張した状態での発言と考えられる。そのことが分かるように、当該音声データのリンクが表示されても良い。図１９は、図１５のリンクの表示画面の変形例を示す図である。図１９に示された画面５３０では、１０時５０分の発言のリンクと１０時４４分の発言のリンクが、ハートマークを付されて、表示されている。当該ハートマークは、発言した参加者が、上記したような緊張状態で対応する発言を行なったことを示す。
【０１１３】
緊張状態での発言は、重要な内容である可能性が比較的高いと言える。議事録ファイルを再生するユーザーは、このようなハートマークの表示に従って、重要な内容である可能性が比較的高い音声ファイルを優先して再生させることにより、会議の内容を、より早期に把握することが可能となる。
【０１１４】
（変形例４）
図２０は、会話収集デバイス２００のさらに他の変形例のハードウェア構成の一例を模式的に示す図である。図２０の会話収集デバイス２２０は、図４を参照して説明した会話収集デバイス２００に対して、赤外線送受信部２０２の代わりに、電子コンパス２０４とＧＰＳ（Global Positioning System）コントローラー２０５を含む。
【０１１５】
電子コンパス２０４は、磁気センサーを含み、会話収集デバイス２２０の向きを検出する。ＧＰＳコントローラー２０５は、ＧＰＳ信号または基地局からの位置信号を受信することにより、会話収集デバイス２２０の位置情報を取得する。
【０１１６】
本変形例では、データ保存部９２０において、（赤外線送受信部２０２によって取得される個別ＩＤの代わりに）会話収集デバイス２２０の位置情報と向き情報が登録される。これにより、議事録作成支援システムでは、データ保存部９２０において、各参加者（会話収集デバイス２２０を装着しているユーザー）の位置情報と向き情報が取得される。これにより、各ユーザーの位置と向きを特定できる。これにより、近傍（所定の距離範囲内）に位置し、かつ、向かい合っているユーザーの組を特定できる。そして、会話集中度算出部８４０は、当該組において、一方のユーザーの装着する会話収集デバイス２２０のマイク２０１において音声が検出されたことを条件として、当該組のユーザーの間で会話が成立していると特定することができる。
【０１１７】
（変形例５）
以上説明した本実施の形態において、参加者ごとに重みの値が設定されることによる重み付けがなされ、特定発言者特定部８３０は、当該重み付けをさらに利用して、特定発言者を特定することができる。
【０１１８】
重み付けによって付される重みの値としては、たとえば、職場における人事情報が利用される。つまり、管理職の人間は、職場における多くの決定権を有するため、会議において影響力の大きい発言をすることが多い。たとえば、部長の職にある参加者は、他の参加者と比較して２倍の重み値を有するとする。特定発言者特定部８３０は、各参加者の会話集中度と各参加者に付された重み値との積を算出し、当該算出結果が最も大きい値となった参加者を特定発言者と決定することができる。
【０１１９】
また、会議の議題等に応じて、会議ごとに、各参加者に付される重みの値が変更される場合も有り得る。
【０１２０】
（変形例６）
会話集中度算出部８４０が特定発言者の特定の際に利用される重みの値は、発言が生じた時間帯に応じて設定される場合も有り得る。たとえば２時間の会議では、後半１時間における発言は、前半１時間における発言よりも、会議の場が成熟している等の理由によって重要度が高い場合がある。そこで、図９を参照して説明したような着話時間や発話時間の算出の際に、たとえば、後半１時間における発言についての着話時間および発話時間の長さは１．５倍されて、会話集中度の算出に利用されても良い。なお、この場合、前半１時間における発言についての着話時間および発話時間の長さは、実際の時間のままとされる。
【０１２１】
これにより、発言が生じた時間帯に応じて、音声データに重みを付けて、特定発言者の特定を行なうことができる。また、発言が生じた時間帯に応じて、発言をした参加者に、当該参加者の音声が議事録に利用される際の優先度を付することができる。
【０１２２】
（その他の変形例等）
ブレインストーミングのような、意見交換型会議は、議事録を作成されることは少なく、その場で出たアイデアがその場でまとめられる場合が多い。したがって、その場で利用されたホワイトボード上の画像や、会議中に付加情報（ポストイット）を付された時点の情報を参照することが主と考えられる。
【０１２３】
ただし、意見交換型会議においても、ファシリテーターが皆無ということはなく、特定発言者（主発言者）を見出すことはできる。最終的に、意見交換型会議においてもまとめがファシリテーターによってなされるケースがある。したがって、主発言者の発言とその主発言者に向けてなされた音声をリンクさせることは、意見交換型会議においても役立つと考えられる。
【０１２４】
なお、本明細書において説明された議事録作成支援システムは、会議中であっても、会議後であっても、議事録ファイルを作成できる。会議中であれば、それまでの会話からリンクが生成され、順次会話が進むことでリンクが更新されていく。
【０１２５】
本明細書において説明された議事録作成支援システムは、会話集中度から、議事録の作成にとって重要な情報（音声データ）を取り出し、リンクを作成する。
【０１２６】
これにより、議事録ファイルを参照するユーザーは、会議において記録されたすべての情報（音声データ）をたぐることなく、議事録の元データを参照することができる。
【０１２７】
なお、議事録作成支援システムにおいて取得される会話集中度は、次の用途にも活用できる。
【０１２８】
・各自の会話集中度の比較をして、参加者間で議論ができているかどうかのチェック
・会話中集度から重要な発言を取り出して、セキュリティ（読取属性の変更や暗号化）をかける
・会議前に設定したファシリテーターのスキルチェック（自分で話しているだけか、議論を活性化させているか）
・主発言者と関わりのない発言は、記録として不必要なので削除、あるいは難読化（暗号化やデータ分割など）を施すことよる、データの圧縮、議論と関係のないおしゃべりなどの削除、および／または、プライバシーの保護
今回開示された各実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。また、実施の形態および各変形例において説明された発明は、可能な限り、単独でも、組合わせても、実施することが意図される。
【符号の説明】
【０１２９】
１００ サーバー、２００，２００Ａ〜２００Ｆ 会話収集デバイス、２０１，２１１ マイク、２０２ 赤外線送受信部、２０３ 生体情報検出部、２０４ 電子コンパス、２０５ ＧＰＳコントローラー、２１２ カメラ、８００ 議事録作成システム、９００ ライフログ生成システム。
【特許請求の範囲】
【請求項１】
会議の参加者同士の会話が成立している状態を検知するための検知手段と、
前記会議の参加者が発する音声を記録するための記録手段と、
前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段と、
前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段とを備える、議事録作成支援装置。
【請求項２】
前記抽出手段は、
前記会議の参加者のそれぞれについて、前記検知手段によって会話が成立したと判断された時間を積算して合計会話時間を算出し、
各参加者についての合計会話時間に基づいて、前記会議における主発言者を特定し、
前記記録手段が記録した音声から、前記主発言者が含まれる会話の音声を、前記特定の音声として抽出する、請求項１に記載の議事録作成支援装置。
【請求項３】
前記抽出手段は、
すべての参加者についての前記合計会話時間に対する各参加者の前記合計会話時間の比を算出することによって、各参加者の会話集中度を算出し、
各参加者の前記会話集中度に基づいて、最も前記会話集中度の高い参加者を主発言者として決定し、
前記記録手段が記録した音声から、前記主発言者が含まれる会話の音声を、前記特定の音声として抽出する、請求項２に記載の議事録作成支援装置。
【請求項４】
前記記録手段は、各参加者が発した音声と当該参加者に発せられた音声とを区別して、音声を記録する、請求項１〜請求項３のいずれかに記載の議事録作成支援装置。
【請求項５】
前記議事録作成手段は、前記特定の音声に対するリンクを生成し、当該リンクを提示する、請求項１〜請求項４のいずれかに記載の議事録作成支援装置。
【請求項６】
前記抽出手段は、音声の発話の時間帯に基づく優先度に基づいて、前記記録手段に記録された音声から前記特定の音声を抽出する、請求項１〜請求項５のいずれかに記載の議事録作成支援装置。
【請求項７】
前記抽出手段は、前記記録手段に記録された音声を発した参加者に対して設定された優先度に基づいて、前記記録手段に記録された音声から前記特定の音声を抽出する、請求項１〜請求項６のいずれかに記載の議事録作成支援装置。
【請求項８】
前記記録手段は、前記音声を、当該音声を発する者の生体情報とともに記録する、請求項１〜請求項７のいずれかに記載の議事録作成支援装置。
【請求項９】
前記検知手段は、各参加者によって装着される光学的検出手段によって検出される情報を取得し、当該光学的検出手段から取得される情報に基づいて、前記会議の参加者同士の会話が成立している状態を検知する、請求項１〜請求項８のいずれかに記載の議事録作成支援装置。
【請求項１０】
前記検知手段は、
各参加者の位置情報を検出するための位置検出手段によって検出される当該参加者の位置情報を取得し、当該位置検出手段から取得される情報に基づいて、前記会議の参加者同士の会話が成立している状態を検知する、請求項１〜請求項９のいずれかに記載の議事録作成支援装置。
【請求項１１】
会議の参加者が装着する検出手段と、前記検出手段と通信可能な議事録作成支援装置とを備えた、議事録作成支援システムであって、
前記議事録作成支援装置は、
各前記検出手段から取得する検出結果に基づいて、会議の参加者同士の会話が成立している状態を検知するための検知手段と、
前記会議の参加者が発する音声を記録するための記録手段と、
前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段と、
前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段とを含む、議事録作成支援システム。
【請求項１２】
コンピュータ読取可能なプログラムであって、前記コンピュータを、
会議の参加者同士の会話が成立している状態を検知するための検知手段、
前記会議の参加者が発する音声を記録するための記録手段、
前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段、および、
前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段として機能させるための、議事録作成用プログラム。
【請求項１】
会議の参加者同士の会話が成立している状態を検知するための検知手段と、
前記会議の参加者が発する音声を記録するための記録手段と、
前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段と、
前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段とを備える、議事録作成支援装置。
【請求項２】
前記抽出手段は、
前記会議の参加者のそれぞれについて、前記検知手段によって会話が成立したと判断された時間を積算して合計会話時間を算出し、
各参加者についての合計会話時間に基づいて、前記会議における主発言者を特定し、
前記記録手段が記録した音声から、前記主発言者が含まれる会話の音声を、前記特定の音声として抽出する、請求項１に記載の議事録作成支援装置。
【請求項３】
前記抽出手段は、
すべての参加者についての前記合計会話時間に対する各参加者の前記合計会話時間の比を算出することによって、各参加者の会話集中度を算出し、
各参加者の前記会話集中度に基づいて、最も前記会話集中度の高い参加者を主発言者として決定し、
前記記録手段が記録した音声から、前記主発言者が含まれる会話の音声を、前記特定の音声として抽出する、請求項２に記載の議事録作成支援装置。
【請求項４】
前記記録手段は、各参加者が発した音声と当該参加者に発せられた音声とを区別して、音声を記録する、請求項１〜請求項３のいずれかに記載の議事録作成支援装置。
【請求項５】
前記議事録作成手段は、前記特定の音声に対するリンクを生成し、当該リンクを提示する、請求項１〜請求項４のいずれかに記載の議事録作成支援装置。
【請求項６】
前記抽出手段は、音声の発話の時間帯に基づく優先度に基づいて、前記記録手段に記録された音声から前記特定の音声を抽出する、請求項１〜請求項５のいずれかに記載の議事録作成支援装置。
【請求項７】
前記抽出手段は、前記記録手段に記録された音声を発した参加者に対して設定された優先度に基づいて、前記記録手段に記録された音声から前記特定の音声を抽出する、請求項１〜請求項６のいずれかに記載の議事録作成支援装置。
【請求項８】
前記記録手段は、前記音声を、当該音声を発する者の生体情報とともに記録する、請求項１〜請求項７のいずれかに記載の議事録作成支援装置。
【請求項９】
前記検知手段は、各参加者によって装着される光学的検出手段によって検出される情報を取得し、当該光学的検出手段から取得される情報に基づいて、前記会議の参加者同士の会話が成立している状態を検知する、請求項１〜請求項８のいずれかに記載の議事録作成支援装置。
【請求項１０】
前記検知手段は、
各参加者の位置情報を検出するための位置検出手段によって検出される当該参加者の位置情報を取得し、当該位置検出手段から取得される情報に基づいて、前記会議の参加者同士の会話が成立している状態を検知する、請求項１〜請求項９のいずれかに記載の議事録作成支援装置。
【請求項１１】
会議の参加者が装着する検出手段と、前記検出手段と通信可能な議事録作成支援装置とを備えた、議事録作成支援システムであって、
前記議事録作成支援装置は、
各前記検出手段から取得する検出結果に基づいて、会議の参加者同士の会話が成立している状態を検知するための検知手段と、
前記会議の参加者が発する音声を記録するための記録手段と、
前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段と、
前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段とを含む、議事録作成支援システム。
【請求項１２】
コンピュータ読取可能なプログラムであって、前記コンピュータを、
会議の参加者同士の会話が成立している状態を検知するための検知手段、
前記会議の参加者が発する音声を記録するための記録手段、
前記検知手段による会話の成立状態の検知結果に基づいて、前記記録手段に記録された音声から特定の音声を抽出するための抽出手段、および、
前記特定の音声を用いて前記会議の議事録を作成するための議事録作成手段として機能させるための、議事録作成用プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２０１３−１０５３７４（Ｐ２０１３−１０５３７４Ａ）
【公開日】平成２５年５月３０日（２０１３．５．３０）
【国際特許分類】
【出願番号】特願２０１１−２４９６８０（Ｐ２０１１−２４９６８０）
【出願日】平成２３年１１月１５日（２０１１．１１．１５）
【出願人】（０００００１２７０）コニカミノルタホールディングス株式会社 (4,463)
【Ｆターム（参考）】
【公開日】平成２５年５月３０日（２０１３．５．３０）
【国際特許分類】
【出願日】平成２３年１１月１５日（２０１１．１１．１５）
【出願人】（０００００１２７０）コニカミノルタホールディングス株式会社 (4,463)
【Ｆターム（参考）】
[ Back to top ]