会議データの統合管理方法および装置
【課題】会議参加者のそれぞれの発言やその文書化データの管理を容易にし、会議データの利便性を向上させることが可能な統合管理方法および装置を提供する。
【解決手段】会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納部（２０７、２０８）と、音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御部（２０１、２１２、２１３）と、を有する。
【解決手段】会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納部（２０７、２０８）と、音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御部（２０１、２１２、２１３）と、を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は会議情報や会議での参加者の発言などを含む会議データの管理方法および装置に関する。
【背景技術】
【０００２】
一般に、会議の議事録を作成するには参加者一人一人の発言をテキストデータに変換する必要があり非常に大きな労力を要する。この労力を軽減するために、種々の支援システムが提案されている。たとえば、特許文献１には、発言者毎に音声を収集してテキストデータに変換し、それらを時系列に格納することで議事録を作成する会議サポートシステムが開示されている。この会議サポートシステムでは、各参加者のテキストデータをタイムスタンプに従って時系列に配列し、発言が時間的に重なった場合にはタイムスタンプの早い順に並べられる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−１１２９３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した会議サポートシステムは議事録の作成を支援するシステムであり、参加者のそれぞれの発言やそれらをテキスト化したデータを効率的かつ容易に管理することができない。このために会議データを有効に活用することが難しかった。
【０００５】
本発明は上記課題に鑑みてなされたものであり、その目的は、会議参加者のそれぞれの発言やその文書化データの管理を容易にし、会議データの利便性を向上させることが可能な統合管理方法および装置を提供することにある。
【課題を解決するための手段】
【０００６】
本発明による会議データ統合管理装置は、操作部および画像表示部を有し、会議データを統合的に管理する装置であって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、を有することを特徴とする。
【０００７】
本発明に係る会議データの統合管理方法は、操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、ことを特徴とする。
【０００８】
本発明に係る会議データの統合管理システムは、操作部および画像表示部を有し会議データを統合的に管理するシステムであって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、前記録音装置に接続された会議データ統合管理装置と、を有し、前記会議データ統合管理装置は、前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、を有する、ことを特徴とする。
【発明の効果】
【０００９】
本発明によれば、会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認や音声／文書化データの有効利用など会議データの利便性を向上させることができる。
【図面の簡単な説明】
【００１０】
【図１】図１は本発明の第１実施形態に係る会議データ統合管理システムにおける録音再生装置のブロック図である。
【図２】図２（Ａ）は音声データの録音判定条件を説明するための模式的波形図であり、図２（Ｂ）は音声ファイル名の構成を示す図である。
【図３】図３（Ａ）〜（Ｃ）は録音再生装置の音声データ録音動作を説明するための音声データ記録部の模式的構成図である。
【図４】図４は、図１における会議データ統合管理装置の構成を示すブロック図である。
【図５】図５は、本発明の一実施例による会議データ統合管理システムにおける会議データ画面の一例を示す図である。
【図６】図６は、本実施例による会議データ統合管理システムにおける音声データ画面の一例を示す図である。
【図７】図７（Ａ）は本実施例による会議データ統合管理システムにおける会議データ検索画面の一例を示す図、図７（Ｂ）および図７（Ｃ）はその検索結果の一例をそれぞれ示す図である。
【図８】図８は、本発明の他の実施例による会議データ統合管理システムにおける音声テキスト表示画面の一例を示す図である。
【発明を実施するための形態】
【００１１】
本発明によれば、複数の発言者のそれぞれの音声を個別のチャネルに録音することで、同時に複数の参加者が発言した場合でも時系列を維持しつつ各発言者の音声を個別に処理し管理することができる。これにより会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認やデータの有効利用が可能となる。さらに、発言が時間的に重なった場合でも、各参加者の発言やテキストデータを音声チャネルごとに表示することで、議事録データから実際の会議での発言の重なり等の会議状況を知ることが可能となる。以下、本発明の実施形態および実施例について図面を参照しながら詳細に説明する。
【００１２】
１．一実施形態
１．１）システム
図１において、本発明の一実施形態による会議データ統合管理システムは、複数の音声入力装置Ｍ１−Ｍｎ、録音再生装置１０および会議データ統合管理装置２０からなり、会議データ統合管理装置２０が公衆網３０を通して議事録文書作成サービスを提供するサーバ４０へ接続可能である。
【００１３】
会議の参加者Ｐ１−Ｐｎはそれぞれ音声入力装置Ｍ１−Ｍｎに対応づけられており、各音声入力装置Ｍｉ（ｉ＝１，２，..., or ｎ）は、対応する参加者Ｐｉの発言を集音し、音声信号ＳＳｉを送信する機能を有するマイクロフォンまたはその代替機能を持った装置であり、対応する参加者Ｐｉの音声信号を録音再生装置１０へ送信する。音声入力装置Ｍ１−Ｍｎは録音再生装置１０と有線または無線通信により接続されている。また録音再生装置１０は会議データ統合管理装置２０と有線または無線通信により接続されている。
【００１４】
録音再生装置１０は、後述する録音機能の他に、再生機能、通信機能などを有する。通信部１０１は、音声入力装置Ｍ１−Ｍｎからそれぞれ音声信号ＳＳ１−ＳＳｎを有線あるいは無線で受信し、受信した音声信号ＳＳｉを音声データ記録制御部１０２へ出力する。音声データ記録制御部１０２は、受信した音声信号ＳＳｉが有効であれば、音声入力装置Ｍｉの識別番号と受信時間情報とを用いて音声データＳｉを生成し、音声データ記録部１０３に記録する。音声データＳｉの生成方法については後述する（図２）。
【００１５】
音声データ記録部１０３は、音声入力装置ごとに音声データを録音する複数の音声チャネルＣＨ１−ＣＨｎを備える。音声データ記録制御部１０２の制御に従って、各音声入力装置Ｍｉから入力した音声データＳｉは当該音声入力装置の識別番号Ｍｉに対応する音声チャネルＣＨｉに録音される。録音された音声データは通信部０４を通して会議データ統合管理装置２０へ送信することができる。録音再生装置１０の録音／再生および送信動作は制御部１０５により制御される。後述するように、会議データ統合管理装置２０上で動作する音声・議事録データ管理プログラムに従って、音声データを入出力する機能も備えている。
【００１６】
また、図示されていないが、録音再生装置１０には、ユーザインタフェースとして、録音スイッチ、再生スイッチ、会議データ指定ボタン、音声チャネル指定ボタン、音声データ指定ボタンが設けられている。録音スイッチはＯＮ／ＯＦＦ切替え可能でありき、ＯＮにするとすべての音声チャネルを録音待機状態に、ＯＦＦにするとすべての音声チャネルを録音停止状態に切り替える。再生スイッチはＯＮ／ＯＦＦ切替え可能であり、ＯＮにすると音声データを再生する。この時、会議データ指定ボタン、音声チャネル指定ボタン、音声データ指定ボタンで音声データを指定していると、指定されている音声データを再生する。音声データを指定していない場合は直前に録音した会議の音声データを再生する。会議データ指定ボタンは録音した任意の会議データに含まれるすべての音声データを指定する機能を備えている。音声チャネル指定ボタンは録音した会議データの任意の音声チャネルに含まれるすべての音声データを指定する機能を備えている。音声データ指定ボタンは任意の音声データを指定する機能を備えている。
【００１７】
会議データ統合管理装置２０は、パーソナルコンピュータ上で会議データ統合管理プログラムを実行することにより実現することができる。後述するように、会議データ統合管理装置２０は、録音再生装置１０との間で音声データを入出力する機能を有し、録音再生装置１０から入力された音声データは内部のデータベースに保存される。さらに、会議データ統合管理装置２０は、会議データを作成、編集する機能、データベース上にある音声データから所望の条件に該当する音声データを抽出して関連付ける機能、会議全体の音声データを再生する機能、指定した音声チャネルを再生する機能、各音声データを再生する機能、会議データの項目毎に任意の単語で検索する機能を備え、さらに議事録文書作成サービス４０を利用し会議データまたは音声データを文書データに変換するためのインタフェースを備えている。
【００１８】
議事録文書作成サービス４０は、ネットワークを介して入力された会議データまたは音声データを文書に変換するネットワーク上で提供されるサービスである。会議データ統合管理装置２０は、議事録文書作成サービス４０へ会議データまたは音声データの文書化要求を送信することで文書化されたテキストデータを取得することができる。なお、ネットワーク上の議事録文書作成サービス４０ではなく、ユーザ側で音声−テキスト変換機能を有するプログラムを用意することも可能である。
【００１９】
１．２）録音動作
図２（Ａ）に示すように、音声データ記録制御部１０２は、受信した音声信号ＳＳｉが有効音量（しきい値）以上であるか否かを判定し、有効音量以上であれば参加者が発言したと判断して録音し、有効音量に達しない場合には発言がないあるいは無音時と判断して録音しない。ここでは、音声データＳＳｉ（１）、ＳＳｉ（３）が有効音量に達しているため録音され、それらの間にある音声データＳＳｉ（２）は有効音量に達していないため録音されない。音声データ記録制御部１０２は、録音される音声データＳｉにファイル名を付けられて音声データ記録部１０３に記録する。
【００２０】
図２（Ｂ）にファイル名の一例を示す。ファイル名は音声入力装置Ｍ１−Ｍｎの識別番号と録音日時情報（年月日時分秒）とを埋め込んだ名称を用いる。ファイル名から音声入力装置を特定でき、時間情報から参加者の発言順を特定できる。
【００２１】
上述したようにファイル化された音声データＳｉは、図３（Ａ）−図３（Ｃ）に示すように、音声データ記録制御部１０２により音声データ記録部１０３の対応する音声チャネルＣＨｉに記録される。すなわち、図３（Ａ）に示すように、参加者Ｐ１の発言により音声入力装置Ｍ１から音声信号ＳＳ１を入力すると、音声データ記録制御部１０２は、音声信号ＳＳ１からファイル化された音声データＳ１を生成し、音声データ記録部１０３の対応する音声チャネルＣＨ１に記録する。同様に、図３（Ｂ）、図３（Ｃ）に示すように、参加者Ｐ２〜Ｐｎの発言により音声入力装置Ｍ２〜Ｍｎから音声信号ＳＳ２〜ＳＳｎをそれぞれ入力すると、音声データ記録制御部１０２は、音声信号ＳＳ２〜ＳＳｎからそれぞれファイル化された音声データＳ２〜Ｓｎを生成し、音声データ記録部１０３の対応する音声チャネルＣＨ２〜ＣＨｎにそれぞれ記録する。ここでは、参加者と音声入力装置とが一対一に対応しているので、音声入力装置の識別番号と音声チャネルも一対一に対応しているが、これに限定されるものではない。１つの音声入力装置に複数の参加者の発言が集音されても、それらを声紋パターンを用いて識別できれば、各参加者の発言を異なる音声チャネルに記録することもできる。
【００２２】
１．３）会議データの統合管理
図４において、会議データ統合管理装置２０はコンピュータに実現されたものであり、通常のコンピュータと同様に、プロセッサ２０１、通信部２０２および２０３、キーボードおよびポインティングデバイスあるいはタッチパネル等の操作部２０４、モニタを含む画像表示部２０５およびスピーカ等を含む音声出力部２０６を備えている。ここでは、通信部２０２が録音再生装置１０との接続を、通信部２０３が公衆網３０との接続を、それぞれ提供する。
【００２３】
さらに会議データ統合管理装置２０はデータベース２０７を備え、データベース２０７には、会議毎に、チャネル別音声データ２０８、チャネル別議事録文書データ２０９、参照資料データ２１０および会議識別データが互いに関連付けられ検索可能に格納されている。
【００２４】
チャネル別音声データ２０８は、録音再生装置１０の音声データ記録部１０３から順次受信したチャネル別の音声データをチャネル別に蓄積したデータであり、上述したように音声入力装置の識別番号と録音日時情報を含むファイル形式で格納される。チャネル別議事録文書データ２０９は、ユーザの指示に従って議事録文書作成サービス４０を利用して得られた音声データの文書化データ（議事録文書）である。参照資料データ２１０は、会議で使用したメモや図面などのデータである。会議識別データとしては、会議の名称、開催日時、開催場所、参加者などがある。
【００２５】
また、会議データ統合管理装置２０はプログラム記憶部２１１を備え、プログラム記憶部２１１には会議データ統合管理プログラム２１２およびユーザインタフェースプログラム２１３が格納されている。プロセッサ２０１は、会議データ統合管理プログラム２１２およびユーザインタフェースプログラム２１３を実行することで、ユーザインタフェースとして次に説明する表示画面を画像表示部２０５に提供し、ユーザが操作部２０４を操作することで統合的な管理を容易に実現できる。
【００２６】
ａ）会議データ画面
図５に示す会議データ画面３０１は、会議データを作成、編集あるいは表示するための画面であり、ユーザインタフェースプログラム２１３に含まれる。会議データ画面３０１では、会議データを構成する会議名称、開催日時(開始日時、終了日時)、開催場所、参加者、音声データ、議事録文書、参考資料が項目として表示される。各項目はユーザが任意に編集することが出来る。会議データが作成された後に、会議データ画面３０１から音声データを選択すれば後述する音声データ画面４０１を、議事録文書を選択すれば文書化された議事録を、それぞれ表示することができる。
【００２７】
図５に示す会議データ画面３０１において、たとえばポインティングデバイスやタッチパネルを通して「会議名称」や「開催場所」を選択すると、ユーザが操作部２０４を通してそれらのデータを任意に書き込むことができる。「開催日時」を選択すれば、ユーザが日時情報を入力できるが、会議名称および開催場所のデータから録音再生装置１０により自動登録されたファイル名の日時情報を自動で読み出すこともできる。「参加者」を選択すれば、会議データに関連付けられた音声データの音声入力装置識別番号が仮の名称として登録されるが、これも手動で入力可能である。
【００２８】
「音声データ」を選択すると、プロセッサ２０１は「開催日時」で特定される音声データをデータベース２０７のチャネル別音声データ２０８から自動で抽出し、会議識別データと関連付ける。「議事録文書」を選択すると、プロセッサ２０１は通信部２０３を通して議事録文書作成サービス４０へ文書化要求を送信し、それによって作成された文書データを登録する。具体的には、ある会議の特定参加者あるいは全参加者をユーザが指定し、その音声データの文書化要求を議事録文書作成サービス４０へ送信すると、議事録文書作成サービス４０から文書化されたデータが返ってくる。この文書化データをチャネル別議事録文書データ２０９としてデータベース２０７に格納する。したがって、会議が特定されれば、その会議の全参加者の音声データあるいは発言の文書化データを検索して表示させることが可能となる。次に、音声データが指定された場合の音声データ画面について説明する。
【００２９】
ｂ）音声データ画面
図６に示す音声データ画面４０１はチャネルごとに音声データを再生出力するための画面であり、ユーザインタフェースプログラム２１３に含まれる。音声データ画面４０１は音声データ表示部４０２、再生ボタン４０３、出力ボタン４０４で構成される。
【００３０】
音声データ表示部４０２には、データベース２０７のチャネル別音声データ２０８から対応する音声データを読み出すことで、会議データに関連付けられた音声データが音声チャネル毎に時系列で表示される。図６では、音声チャネルＣＨ１（すなわち音声入力装置Ｍ１により集音された参加者Ｐ１の発言）として音声データファイルM1_20000101_12_34_56とM1_20000101_12_35_01とが時間軸上に表示され、音声チャネルＣＨ２（すなわち音声入力装置Ｍ２により集音された参加者Ｐ２の発言）として音声データファイルM2_20000101_12_34_58が、音声チャネルＣＨｎ（すなわち音声入力装置Ｍｎにより集音された参加者Ｐｎの発言）として音声データファイルMn_20000101_12_35_00とMn_20000101_12_35_03とが、共通の時間軸上にそれぞれ表示されている。したがって、各参加者の発言がどのタイミングでなされたかを容易に知ることができる。ここでは、参加者Ｐ１の最初の発言が終わらないうちに参加者Ｐ２が発言を開始したこと、また参加者Ｐ１の発言が終わらないうちに参加者Ｐｎが２度目の発言を開始したこと、を一目で読み取ることができる。特許文献１に開示された通常の議事録では、特別なコメントを付加しない限り、このような会議の様子を読み取ることは不可能である。
【００３１】
再生ボタン４０３を選択すると、画面に表示されている音声データを再生する。この時、音声チャネルまたは音声データを指定していると、指定されている音声データを再生する。指定していない場合は会議データに含まれるすべての音声チャネルの音声データを再生する。出力ボタン４０４を選択すると、画面に表示されている音声データをミキシングして１つの音声ファイルとして出力する。任意の音声チャネルまたは音声データを指定すると、指定した音声データのみをミキシングした音声ファイルを出力する。なお、音声チャネルおよび音声データの指定はユーザがＧＵＩ上で指定することで実現される。
【００３２】
ｃ）会議データ検索画面
図７（Ａ）に示す会議データ検索画面５０１は会議データを検索するための機能であり、会議データを構成する会議名称、開催日時(開始日時、終了日時)、開催場所、参加者、音声データ、議事録文書および参考資料を指定する項目入力部と検索ボタン５０２とで構成される。各項目に対してユーザが任意のキーワードを指定すると、プロセッサ２０１はデータベース２０７から該当する会議データを抽出し、その検索結果を表示する。キーワードに該当する会議データがあれば図７(Ｂ)で示すように該当件数と会議データを表示する検索結果画面を、キーワードに該当する会議データがなければ、図７(Ｃ)で示すように「該当件数０件」の表示画面を表示する。
【００３３】
１．４）効果
上述したように、本実施形態によれば、複数の発言者のそれぞれの音声を個別のチャネルに録音することで、同時に複数の参加者が発言した場合でも時系列を維持しつつ各発言者の音声を個別に処理し管理することができる。これにより会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認やデータの有効利用が可能となる。より具体的には、次の効果を奏する。
【００３４】
第一の効果は、録音した音声データを聴取する際に発言内容が明瞭になることにある。その理由は、音声データを参加者毎に個別の音声チャネルに録音することで、複数の参加者が同時に発言した場合でも音声が多重して録音されることを回避できるためである。
【００３５】
第二の効果は、音声データを元に議事録文書の作成作業が容易になることにある。その理由は、第一の効果であげた発言内容が明瞭になることに加え、全参加者の発言が時系列順に管理され、実際の会議と同じ順番で音声データを再生することが出来るためである。また、会議データ統合管理プログラム２１２から直接議事録作成サービス４０を利用できるためである。
【００３６】
第三の効果は、音声データの管理が容易になることにある。その理由は、会議毎に会議データが作成され、音声データを会議データに関連付けて管理することで、ユーザは直接音声データの関連付け管理することが不要となるためである。
【００３７】
第四の効果は、議事録文書の管理が容易になることにある。その理由は、会議データに「会議名称」、「開催日時」、「開催場所」、「参加者」、「音声データ」、「議事録文書」、「参考資料」を関連付け、統合的に管理することで、ユーザは音声データや議事録文書など個々のデータを管理することが不要となるためである。また、必要なデータを会議データに集約して管理することで、検索も容易に出来るためである。
【００３８】
さらに、音声データおよび／またはテキストデータを会議データに関連付けることで、音声データが、どの参加者の発言であるかを示す識別情報と時間情報とを付加したファイルとして生成されるので、各音声データが会議において誰がどの時間に発言したものであるかを明確に特定することができる。また、各音声データとテキストデータとを対応付けるとともに議事録データにも関連付けて記憶するので、作成された議事録データに対応する音声データを簡単に再生することができ、議事録の品質および信頼性を向上させることができる。
【００３９】
２．他の実施例
上述した図６の音声データ画面４０１では、チャネルごとに音声データを再生出力するための画面であったが、音声データの代わりに時系列の音声テキストデータを表示することもできる。
【００４０】
図８に示す音声データ画面６０１は、チャネルごとに音声テキストデータを表示するための画面であり、音声テキストデータ表示部６０２、再生ボタン６０３、出力ボタン６０４で構成される。
【００４１】
音声テキストデータ表示部６０２には、データベース２０７のチャネル別議事録文書データ２０９から対応するテキストデータを読み出すことで、会議データに関連付けられた音声テキストデータが音声チャネル毎に時系列で表示される。図８では、音声チャネルＣＨ１（すなわち音声入力装置Ｍ１により集音された参加者Ｐ１の発言）として音声データファイルM1_20000101_12_34_56とM1_20000101_12_35_01とにそれぞれ対応するテキストデータが時間軸上に表示され、音声チャネルＣＨ２（すなわち音声入力装置Ｍ２により集音された参加者Ｐ２の発言）として音声データファイルM2_20000101_12_34_58に対応するテキストデータが、音声チャネルＣＨｎ（すなわち音声入力装置Ｍｎにより集音された参加者Ｐｎの発言）として音声データファイルMn_20000101_12_35_00とMn_20000101_12_35_03とにそれぞれ対応するテキストデータが、共通の時間軸上にそれぞれ表示されている。したがって、各参加者の発言の内容とそれがどのタイミングでなされたかを容易に知ることができる。ここでは、参加者Ｐ１の最初の発言が終わらないうちに参加者Ｐ２が発言を開始したこと、また参加者Ｐ１の発言が終わらないうちに参加者Ｐｎが２度目の発言を開始したこと、をそれらの内容と共に一目で読み取ることができる。上述した図６の音声データ画面４０１を図８に示す音声テキストデータ画面６０１に切り替えることも可能である。
【００４２】
再生ボタン６０３を選択すると、画面に表示されている音声データを再生する。この時、音声チャネルまたは音声データを指定していると、指定されている音声データを再生する。指定していない場合は会議データに含まれるすべての音声チャネルの音声データを再生する。出力ボタン６０４を選択すると、画面に表示されている音声データをミキシングして１つの音声ファイルとして出力する。任意の音声チャネルまたは音声データを指定すると、指定した音声データのみをミキシングした音声ファイルを出力する。なお、音声チャネルおよび音声データの指定はユーザがＧＵＩ上で指定することで実現される。
【００４３】
このように、ある特定の参加者の発言に着目することができるので、特定の音声入力装置に対応する音声データを時系列的に再生する形態や、会議において発言された全参加者の音声を会議にいる場合と同じように時系列的に再生する形態や、個々の発言に着目して再生する形態をユーザが自由に選択することができる。また、このような形態において、テキストデータを表示して確認することができるので、文書化の音声認識の精度に疑いがあっても、元の音声データを参照することで会議の議事録の品質および信頼性を向上させることができる。
【００４４】
また、議事録データと音声データとが関連付けて記憶されているので、後から議事録を参照する人に対しても、テキスト情報だけでは、よく分からない議論の推移や流れ等があっても生の録音音声データを実際に聞いて、自分の判断でその疑問点を解消できる可能性が高まり、利用しやすい会議データ管理を提供できる。
【００４５】
３．付記
上述した実施形態の一部あるいは全部は、以下の付記のようにも記載されうるが、これらに限定されるものではない。
【００４６】
（付記１）
操作部および画像表示部を有し、会議データを統合的に管理する装置であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有することを特徴とする会議データ統合管理装置。
【００４７】
（付記２）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記１に記載の会議データ統合管理装置。
【００４８】
（付記３）
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記１または２に記載の会議データ統合管理装置。
【００４９】
（付記４）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記３に記載の会議データ統合管理装置。
【００５０】
（付記５）
操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、
制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、
ことを特徴とする会議データ統合管理方法。
【００５１】
（付記６）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記５に記載の会議データ統合管理方法。
【００５２】
（付記７）
前記装置が前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記５または６に記載の会議データ統合管理方法。
【００５３】
（付記８）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記７に記載の会議データ統合管理方法。
【００５４】
（付記９）
操作部および画像表示部を有し会議データを統合的に管理するシステムであって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、
前記録音装置に接続された会議データ統合管理装置と、
を有し、前記会議データ統合管理装置は、
前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有する、ことを特徴とする会議データ統合管理システム。
【００５５】
（付記１０）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記９に記載の会議データ統合管理システム。
【００５６】
（付記１１）
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記９または１０に記載の会議データ統合管理システム。
【００５７】
（付記１２）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記１１に記載の会議データ統合管理システム。
【００５８】
（付記１３）
前記複数機能に前記文書データ変換機能が選択可能に含まれ、前記文書データ変換機能が選択実行されると、公衆網上の文書変換サービスを利用して前記音声データに対応した文書データを取得することを特徴とする付記１１または１２に記載の会議データ統合管理システム。
【００５９】
（付記１４）
付記９−１３のいずれか１項に記載の会議データ統合管理システムにおける前記録音装置であって、
前記参加者ごとの音声を入力する複数の音声入力手段と、
前記参加者ごとに対応づけられた音声チャネルを有する音声データ記録手段と、
前記音声入力手段により入力された音声信号から参加者の発言に対応する音声データを生成し、前記音声データを各参加者に対応する音声チャネルに記録する音声データ記録制御手段と、
を有することを特徴とする録音装置。
【産業上の利用可能性】
【００６０】
本発明は、議事録を公文書として公開する必要がある会議の議事録文書作成や、企業、学校、自治体、委員会の様な日常的に会議を行う団体の会議議事録文書の作成および管理に適用できる。また、クラブ、サークル、講演会等の会議や活動記録の作成および管理する用途にも適用可能である。
【符号の説明】
【００６１】
Ｐ１〜Ｐｎ 参加者
Ｍ１〜Ｍｎ 音声入力装置
１０ 録音再生装置
２０ 会議データ統合管理装置
３０ 公衆網
４０ 議事録文書作成サービス
１０１ 通信部
１０２ 音声データ記録制御部
１０３ 音声データ記録部
１０４ 通信部
１０５ 制御部
１０６ 再生部
２０１ プロセッサ
２０２ 通信部
２０３ 通信部
２０４ 操作部
２０５ 画像表示部
２０６ 音声出力部
２０７ データベース
２０８ チャネル別音声データ
２０９ チャネル別議事録文書データ
２１０ 参考資料データ
２１１ プログラム記憶部
２１２ 会議データ統合管理プログラム
２１３ ユーザインタフェースプログラム２１３
【技術分野】
【０００１】
本発明は会議情報や会議での参加者の発言などを含む会議データの管理方法および装置に関する。
【背景技術】
【０００２】
一般に、会議の議事録を作成するには参加者一人一人の発言をテキストデータに変換する必要があり非常に大きな労力を要する。この労力を軽減するために、種々の支援システムが提案されている。たとえば、特許文献１には、発言者毎に音声を収集してテキストデータに変換し、それらを時系列に格納することで議事録を作成する会議サポートシステムが開示されている。この会議サポートシステムでは、各参加者のテキストデータをタイムスタンプに従って時系列に配列し、発言が時間的に重なった場合にはタイムスタンプの早い順に並べられる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−１１２９３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した会議サポートシステムは議事録の作成を支援するシステムであり、参加者のそれぞれの発言やそれらをテキスト化したデータを効率的かつ容易に管理することができない。このために会議データを有効に活用することが難しかった。
【０００５】
本発明は上記課題に鑑みてなされたものであり、その目的は、会議参加者のそれぞれの発言やその文書化データの管理を容易にし、会議データの利便性を向上させることが可能な統合管理方法および装置を提供することにある。
【課題を解決するための手段】
【０００６】
本発明による会議データ統合管理装置は、操作部および画像表示部を有し、会議データを統合的に管理する装置であって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、を有することを特徴とする。
【０００７】
本発明に係る会議データの統合管理方法は、操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、ことを特徴とする。
【０００８】
本発明に係る会議データの統合管理システムは、操作部および画像表示部を有し会議データを統合的に管理するシステムであって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、前記録音装置に接続された会議データ統合管理装置と、を有し、前記会議データ統合管理装置は、前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、を有する、ことを特徴とする。
【発明の効果】
【０００９】
本発明によれば、会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認や音声／文書化データの有効利用など会議データの利便性を向上させることができる。
【図面の簡単な説明】
【００１０】
【図１】図１は本発明の第１実施形態に係る会議データ統合管理システムにおける録音再生装置のブロック図である。
【図２】図２（Ａ）は音声データの録音判定条件を説明するための模式的波形図であり、図２（Ｂ）は音声ファイル名の構成を示す図である。
【図３】図３（Ａ）〜（Ｃ）は録音再生装置の音声データ録音動作を説明するための音声データ記録部の模式的構成図である。
【図４】図４は、図１における会議データ統合管理装置の構成を示すブロック図である。
【図５】図５は、本発明の一実施例による会議データ統合管理システムにおける会議データ画面の一例を示す図である。
【図６】図６は、本実施例による会議データ統合管理システムにおける音声データ画面の一例を示す図である。
【図７】図７（Ａ）は本実施例による会議データ統合管理システムにおける会議データ検索画面の一例を示す図、図７（Ｂ）および図７（Ｃ）はその検索結果の一例をそれぞれ示す図である。
【図８】図８は、本発明の他の実施例による会議データ統合管理システムにおける音声テキスト表示画面の一例を示す図である。
【発明を実施するための形態】
【００１１】
本発明によれば、複数の発言者のそれぞれの音声を個別のチャネルに録音することで、同時に複数の参加者が発言した場合でも時系列を維持しつつ各発言者の音声を個別に処理し管理することができる。これにより会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認やデータの有効利用が可能となる。さらに、発言が時間的に重なった場合でも、各参加者の発言やテキストデータを音声チャネルごとに表示することで、議事録データから実際の会議での発言の重なり等の会議状況を知ることが可能となる。以下、本発明の実施形態および実施例について図面を参照しながら詳細に説明する。
【００１２】
１．一実施形態
１．１）システム
図１において、本発明の一実施形態による会議データ統合管理システムは、複数の音声入力装置Ｍ１−Ｍｎ、録音再生装置１０および会議データ統合管理装置２０からなり、会議データ統合管理装置２０が公衆網３０を通して議事録文書作成サービスを提供するサーバ４０へ接続可能である。
【００１３】
会議の参加者Ｐ１−Ｐｎはそれぞれ音声入力装置Ｍ１−Ｍｎに対応づけられており、各音声入力装置Ｍｉ（ｉ＝１，２，..., or ｎ）は、対応する参加者Ｐｉの発言を集音し、音声信号ＳＳｉを送信する機能を有するマイクロフォンまたはその代替機能を持った装置であり、対応する参加者Ｐｉの音声信号を録音再生装置１０へ送信する。音声入力装置Ｍ１−Ｍｎは録音再生装置１０と有線または無線通信により接続されている。また録音再生装置１０は会議データ統合管理装置２０と有線または無線通信により接続されている。
【００１４】
録音再生装置１０は、後述する録音機能の他に、再生機能、通信機能などを有する。通信部１０１は、音声入力装置Ｍ１−Ｍｎからそれぞれ音声信号ＳＳ１−ＳＳｎを有線あるいは無線で受信し、受信した音声信号ＳＳｉを音声データ記録制御部１０２へ出力する。音声データ記録制御部１０２は、受信した音声信号ＳＳｉが有効であれば、音声入力装置Ｍｉの識別番号と受信時間情報とを用いて音声データＳｉを生成し、音声データ記録部１０３に記録する。音声データＳｉの生成方法については後述する（図２）。
【００１５】
音声データ記録部１０３は、音声入力装置ごとに音声データを録音する複数の音声チャネルＣＨ１−ＣＨｎを備える。音声データ記録制御部１０２の制御に従って、各音声入力装置Ｍｉから入力した音声データＳｉは当該音声入力装置の識別番号Ｍｉに対応する音声チャネルＣＨｉに録音される。録音された音声データは通信部０４を通して会議データ統合管理装置２０へ送信することができる。録音再生装置１０の録音／再生および送信動作は制御部１０５により制御される。後述するように、会議データ統合管理装置２０上で動作する音声・議事録データ管理プログラムに従って、音声データを入出力する機能も備えている。
【００１６】
また、図示されていないが、録音再生装置１０には、ユーザインタフェースとして、録音スイッチ、再生スイッチ、会議データ指定ボタン、音声チャネル指定ボタン、音声データ指定ボタンが設けられている。録音スイッチはＯＮ／ＯＦＦ切替え可能でありき、ＯＮにするとすべての音声チャネルを録音待機状態に、ＯＦＦにするとすべての音声チャネルを録音停止状態に切り替える。再生スイッチはＯＮ／ＯＦＦ切替え可能であり、ＯＮにすると音声データを再生する。この時、会議データ指定ボタン、音声チャネル指定ボタン、音声データ指定ボタンで音声データを指定していると、指定されている音声データを再生する。音声データを指定していない場合は直前に録音した会議の音声データを再生する。会議データ指定ボタンは録音した任意の会議データに含まれるすべての音声データを指定する機能を備えている。音声チャネル指定ボタンは録音した会議データの任意の音声チャネルに含まれるすべての音声データを指定する機能を備えている。音声データ指定ボタンは任意の音声データを指定する機能を備えている。
【００１７】
会議データ統合管理装置２０は、パーソナルコンピュータ上で会議データ統合管理プログラムを実行することにより実現することができる。後述するように、会議データ統合管理装置２０は、録音再生装置１０との間で音声データを入出力する機能を有し、録音再生装置１０から入力された音声データは内部のデータベースに保存される。さらに、会議データ統合管理装置２０は、会議データを作成、編集する機能、データベース上にある音声データから所望の条件に該当する音声データを抽出して関連付ける機能、会議全体の音声データを再生する機能、指定した音声チャネルを再生する機能、各音声データを再生する機能、会議データの項目毎に任意の単語で検索する機能を備え、さらに議事録文書作成サービス４０を利用し会議データまたは音声データを文書データに変換するためのインタフェースを備えている。
【００１８】
議事録文書作成サービス４０は、ネットワークを介して入力された会議データまたは音声データを文書に変換するネットワーク上で提供されるサービスである。会議データ統合管理装置２０は、議事録文書作成サービス４０へ会議データまたは音声データの文書化要求を送信することで文書化されたテキストデータを取得することができる。なお、ネットワーク上の議事録文書作成サービス４０ではなく、ユーザ側で音声−テキスト変換機能を有するプログラムを用意することも可能である。
【００１９】
１．２）録音動作
図２（Ａ）に示すように、音声データ記録制御部１０２は、受信した音声信号ＳＳｉが有効音量（しきい値）以上であるか否かを判定し、有効音量以上であれば参加者が発言したと判断して録音し、有効音量に達しない場合には発言がないあるいは無音時と判断して録音しない。ここでは、音声データＳＳｉ（１）、ＳＳｉ（３）が有効音量に達しているため録音され、それらの間にある音声データＳＳｉ（２）は有効音量に達していないため録音されない。音声データ記録制御部１０２は、録音される音声データＳｉにファイル名を付けられて音声データ記録部１０３に記録する。
【００２０】
図２（Ｂ）にファイル名の一例を示す。ファイル名は音声入力装置Ｍ１−Ｍｎの識別番号と録音日時情報（年月日時分秒）とを埋め込んだ名称を用いる。ファイル名から音声入力装置を特定でき、時間情報から参加者の発言順を特定できる。
【００２１】
上述したようにファイル化された音声データＳｉは、図３（Ａ）−図３（Ｃ）に示すように、音声データ記録制御部１０２により音声データ記録部１０３の対応する音声チャネルＣＨｉに記録される。すなわち、図３（Ａ）に示すように、参加者Ｐ１の発言により音声入力装置Ｍ１から音声信号ＳＳ１を入力すると、音声データ記録制御部１０２は、音声信号ＳＳ１からファイル化された音声データＳ１を生成し、音声データ記録部１０３の対応する音声チャネルＣＨ１に記録する。同様に、図３（Ｂ）、図３（Ｃ）に示すように、参加者Ｐ２〜Ｐｎの発言により音声入力装置Ｍ２〜Ｍｎから音声信号ＳＳ２〜ＳＳｎをそれぞれ入力すると、音声データ記録制御部１０２は、音声信号ＳＳ２〜ＳＳｎからそれぞれファイル化された音声データＳ２〜Ｓｎを生成し、音声データ記録部１０３の対応する音声チャネルＣＨ２〜ＣＨｎにそれぞれ記録する。ここでは、参加者と音声入力装置とが一対一に対応しているので、音声入力装置の識別番号と音声チャネルも一対一に対応しているが、これに限定されるものではない。１つの音声入力装置に複数の参加者の発言が集音されても、それらを声紋パターンを用いて識別できれば、各参加者の発言を異なる音声チャネルに記録することもできる。
【００２２】
１．３）会議データの統合管理
図４において、会議データ統合管理装置２０はコンピュータに実現されたものであり、通常のコンピュータと同様に、プロセッサ２０１、通信部２０２および２０３、キーボードおよびポインティングデバイスあるいはタッチパネル等の操作部２０４、モニタを含む画像表示部２０５およびスピーカ等を含む音声出力部２０６を備えている。ここでは、通信部２０２が録音再生装置１０との接続を、通信部２０３が公衆網３０との接続を、それぞれ提供する。
【００２３】
さらに会議データ統合管理装置２０はデータベース２０７を備え、データベース２０７には、会議毎に、チャネル別音声データ２０８、チャネル別議事録文書データ２０９、参照資料データ２１０および会議識別データが互いに関連付けられ検索可能に格納されている。
【００２４】
チャネル別音声データ２０８は、録音再生装置１０の音声データ記録部１０３から順次受信したチャネル別の音声データをチャネル別に蓄積したデータであり、上述したように音声入力装置の識別番号と録音日時情報を含むファイル形式で格納される。チャネル別議事録文書データ２０９は、ユーザの指示に従って議事録文書作成サービス４０を利用して得られた音声データの文書化データ（議事録文書）である。参照資料データ２１０は、会議で使用したメモや図面などのデータである。会議識別データとしては、会議の名称、開催日時、開催場所、参加者などがある。
【００２５】
また、会議データ統合管理装置２０はプログラム記憶部２１１を備え、プログラム記憶部２１１には会議データ統合管理プログラム２１２およびユーザインタフェースプログラム２１３が格納されている。プロセッサ２０１は、会議データ統合管理プログラム２１２およびユーザインタフェースプログラム２１３を実行することで、ユーザインタフェースとして次に説明する表示画面を画像表示部２０５に提供し、ユーザが操作部２０４を操作することで統合的な管理を容易に実現できる。
【００２６】
ａ）会議データ画面
図５に示す会議データ画面３０１は、会議データを作成、編集あるいは表示するための画面であり、ユーザインタフェースプログラム２１３に含まれる。会議データ画面３０１では、会議データを構成する会議名称、開催日時(開始日時、終了日時)、開催場所、参加者、音声データ、議事録文書、参考資料が項目として表示される。各項目はユーザが任意に編集することが出来る。会議データが作成された後に、会議データ画面３０１から音声データを選択すれば後述する音声データ画面４０１を、議事録文書を選択すれば文書化された議事録を、それぞれ表示することができる。
【００２７】
図５に示す会議データ画面３０１において、たとえばポインティングデバイスやタッチパネルを通して「会議名称」や「開催場所」を選択すると、ユーザが操作部２０４を通してそれらのデータを任意に書き込むことができる。「開催日時」を選択すれば、ユーザが日時情報を入力できるが、会議名称および開催場所のデータから録音再生装置１０により自動登録されたファイル名の日時情報を自動で読み出すこともできる。「参加者」を選択すれば、会議データに関連付けられた音声データの音声入力装置識別番号が仮の名称として登録されるが、これも手動で入力可能である。
【００２８】
「音声データ」を選択すると、プロセッサ２０１は「開催日時」で特定される音声データをデータベース２０７のチャネル別音声データ２０８から自動で抽出し、会議識別データと関連付ける。「議事録文書」を選択すると、プロセッサ２０１は通信部２０３を通して議事録文書作成サービス４０へ文書化要求を送信し、それによって作成された文書データを登録する。具体的には、ある会議の特定参加者あるいは全参加者をユーザが指定し、その音声データの文書化要求を議事録文書作成サービス４０へ送信すると、議事録文書作成サービス４０から文書化されたデータが返ってくる。この文書化データをチャネル別議事録文書データ２０９としてデータベース２０７に格納する。したがって、会議が特定されれば、その会議の全参加者の音声データあるいは発言の文書化データを検索して表示させることが可能となる。次に、音声データが指定された場合の音声データ画面について説明する。
【００２９】
ｂ）音声データ画面
図６に示す音声データ画面４０１はチャネルごとに音声データを再生出力するための画面であり、ユーザインタフェースプログラム２１３に含まれる。音声データ画面４０１は音声データ表示部４０２、再生ボタン４０３、出力ボタン４０４で構成される。
【００３０】
音声データ表示部４０２には、データベース２０７のチャネル別音声データ２０８から対応する音声データを読み出すことで、会議データに関連付けられた音声データが音声チャネル毎に時系列で表示される。図６では、音声チャネルＣＨ１（すなわち音声入力装置Ｍ１により集音された参加者Ｐ１の発言）として音声データファイルM1_20000101_12_34_56とM1_20000101_12_35_01とが時間軸上に表示され、音声チャネルＣＨ２（すなわち音声入力装置Ｍ２により集音された参加者Ｐ２の発言）として音声データファイルM2_20000101_12_34_58が、音声チャネルＣＨｎ（すなわち音声入力装置Ｍｎにより集音された参加者Ｐｎの発言）として音声データファイルMn_20000101_12_35_00とMn_20000101_12_35_03とが、共通の時間軸上にそれぞれ表示されている。したがって、各参加者の発言がどのタイミングでなされたかを容易に知ることができる。ここでは、参加者Ｐ１の最初の発言が終わらないうちに参加者Ｐ２が発言を開始したこと、また参加者Ｐ１の発言が終わらないうちに参加者Ｐｎが２度目の発言を開始したこと、を一目で読み取ることができる。特許文献１に開示された通常の議事録では、特別なコメントを付加しない限り、このような会議の様子を読み取ることは不可能である。
【００３１】
再生ボタン４０３を選択すると、画面に表示されている音声データを再生する。この時、音声チャネルまたは音声データを指定していると、指定されている音声データを再生する。指定していない場合は会議データに含まれるすべての音声チャネルの音声データを再生する。出力ボタン４０４を選択すると、画面に表示されている音声データをミキシングして１つの音声ファイルとして出力する。任意の音声チャネルまたは音声データを指定すると、指定した音声データのみをミキシングした音声ファイルを出力する。なお、音声チャネルおよび音声データの指定はユーザがＧＵＩ上で指定することで実現される。
【００３２】
ｃ）会議データ検索画面
図７（Ａ）に示す会議データ検索画面５０１は会議データを検索するための機能であり、会議データを構成する会議名称、開催日時(開始日時、終了日時)、開催場所、参加者、音声データ、議事録文書および参考資料を指定する項目入力部と検索ボタン５０２とで構成される。各項目に対してユーザが任意のキーワードを指定すると、プロセッサ２０１はデータベース２０７から該当する会議データを抽出し、その検索結果を表示する。キーワードに該当する会議データがあれば図７(Ｂ)で示すように該当件数と会議データを表示する検索結果画面を、キーワードに該当する会議データがなければ、図７(Ｃ)で示すように「該当件数０件」の表示画面を表示する。
【００３３】
１．４）効果
上述したように、本実施形態によれば、複数の発言者のそれぞれの音声を個別のチャネルに録音することで、同時に複数の参加者が発言した場合でも時系列を維持しつつ各発言者の音声を個別に処理し管理することができる。これにより会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認やデータの有効利用が可能となる。より具体的には、次の効果を奏する。
【００３４】
第一の効果は、録音した音声データを聴取する際に発言内容が明瞭になることにある。その理由は、音声データを参加者毎に個別の音声チャネルに録音することで、複数の参加者が同時に発言した場合でも音声が多重して録音されることを回避できるためである。
【００３５】
第二の効果は、音声データを元に議事録文書の作成作業が容易になることにある。その理由は、第一の効果であげた発言内容が明瞭になることに加え、全参加者の発言が時系列順に管理され、実際の会議と同じ順番で音声データを再生することが出来るためである。また、会議データ統合管理プログラム２１２から直接議事録作成サービス４０を利用できるためである。
【００３６】
第三の効果は、音声データの管理が容易になることにある。その理由は、会議毎に会議データが作成され、音声データを会議データに関連付けて管理することで、ユーザは直接音声データの関連付け管理することが不要となるためである。
【００３７】
第四の効果は、議事録文書の管理が容易になることにある。その理由は、会議データに「会議名称」、「開催日時」、「開催場所」、「参加者」、「音声データ」、「議事録文書」、「参考資料」を関連付け、統合的に管理することで、ユーザは音声データや議事録文書など個々のデータを管理することが不要となるためである。また、必要なデータを会議データに集約して管理することで、検索も容易に出来るためである。
【００３８】
さらに、音声データおよび／またはテキストデータを会議データに関連付けることで、音声データが、どの参加者の発言であるかを示す識別情報と時間情報とを付加したファイルとして生成されるので、各音声データが会議において誰がどの時間に発言したものであるかを明確に特定することができる。また、各音声データとテキストデータとを対応付けるとともに議事録データにも関連付けて記憶するので、作成された議事録データに対応する音声データを簡単に再生することができ、議事録の品質および信頼性を向上させることができる。
【００３９】
２．他の実施例
上述した図６の音声データ画面４０１では、チャネルごとに音声データを再生出力するための画面であったが、音声データの代わりに時系列の音声テキストデータを表示することもできる。
【００４０】
図８に示す音声データ画面６０１は、チャネルごとに音声テキストデータを表示するための画面であり、音声テキストデータ表示部６０２、再生ボタン６０３、出力ボタン６０４で構成される。
【００４１】
音声テキストデータ表示部６０２には、データベース２０７のチャネル別議事録文書データ２０９から対応するテキストデータを読み出すことで、会議データに関連付けられた音声テキストデータが音声チャネル毎に時系列で表示される。図８では、音声チャネルＣＨ１（すなわち音声入力装置Ｍ１により集音された参加者Ｐ１の発言）として音声データファイルM1_20000101_12_34_56とM1_20000101_12_35_01とにそれぞれ対応するテキストデータが時間軸上に表示され、音声チャネルＣＨ２（すなわち音声入力装置Ｍ２により集音された参加者Ｐ２の発言）として音声データファイルM2_20000101_12_34_58に対応するテキストデータが、音声チャネルＣＨｎ（すなわち音声入力装置Ｍｎにより集音された参加者Ｐｎの発言）として音声データファイルMn_20000101_12_35_00とMn_20000101_12_35_03とにそれぞれ対応するテキストデータが、共通の時間軸上にそれぞれ表示されている。したがって、各参加者の発言の内容とそれがどのタイミングでなされたかを容易に知ることができる。ここでは、参加者Ｐ１の最初の発言が終わらないうちに参加者Ｐ２が発言を開始したこと、また参加者Ｐ１の発言が終わらないうちに参加者Ｐｎが２度目の発言を開始したこと、をそれらの内容と共に一目で読み取ることができる。上述した図６の音声データ画面４０１を図８に示す音声テキストデータ画面６０１に切り替えることも可能である。
【００４２】
再生ボタン６０３を選択すると、画面に表示されている音声データを再生する。この時、音声チャネルまたは音声データを指定していると、指定されている音声データを再生する。指定していない場合は会議データに含まれるすべての音声チャネルの音声データを再生する。出力ボタン６０４を選択すると、画面に表示されている音声データをミキシングして１つの音声ファイルとして出力する。任意の音声チャネルまたは音声データを指定すると、指定した音声データのみをミキシングした音声ファイルを出力する。なお、音声チャネルおよび音声データの指定はユーザがＧＵＩ上で指定することで実現される。
【００４３】
このように、ある特定の参加者の発言に着目することができるので、特定の音声入力装置に対応する音声データを時系列的に再生する形態や、会議において発言された全参加者の音声を会議にいる場合と同じように時系列的に再生する形態や、個々の発言に着目して再生する形態をユーザが自由に選択することができる。また、このような形態において、テキストデータを表示して確認することができるので、文書化の音声認識の精度に疑いがあっても、元の音声データを参照することで会議の議事録の品質および信頼性を向上させることができる。
【００４４】
また、議事録データと音声データとが関連付けて記憶されているので、後から議事録を参照する人に対しても、テキスト情報だけでは、よく分からない議論の推移や流れ等があっても生の録音音声データを実際に聞いて、自分の判断でその疑問点を解消できる可能性が高まり、利用しやすい会議データ管理を提供できる。
【００４５】
３．付記
上述した実施形態の一部あるいは全部は、以下の付記のようにも記載されうるが、これらに限定されるものではない。
【００４６】
（付記１）
操作部および画像表示部を有し、会議データを統合的に管理する装置であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有することを特徴とする会議データ統合管理装置。
【００４７】
（付記２）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記１に記載の会議データ統合管理装置。
【００４８】
（付記３）
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記１または２に記載の会議データ統合管理装置。
【００４９】
（付記４）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記３に記載の会議データ統合管理装置。
【００５０】
（付記５）
操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、
制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、
ことを特徴とする会議データ統合管理方法。
【００５１】
（付記６）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記５に記載の会議データ統合管理方法。
【００５２】
（付記７）
前記装置が前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記５または６に記載の会議データ統合管理方法。
【００５３】
（付記８）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記７に記載の会議データ統合管理方法。
【００５４】
（付記９）
操作部および画像表示部を有し会議データを統合的に管理するシステムであって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、
前記録音装置に接続された会議データ統合管理装置と、
を有し、前記会議データ統合管理装置は、
前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有する、ことを特徴とする会議データ統合管理システム。
【００５５】
（付記１０）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記９に記載の会議データ統合管理システム。
【００５６】
（付記１１）
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記９または１０に記載の会議データ統合管理システム。
【００５７】
（付記１２）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記１１に記載の会議データ統合管理システム。
【００５８】
（付記１３）
前記複数機能に前記文書データ変換機能が選択可能に含まれ、前記文書データ変換機能が選択実行されると、公衆網上の文書変換サービスを利用して前記音声データに対応した文書データを取得することを特徴とする付記１１または１２に記載の会議データ統合管理システム。
【００５９】
（付記１４）
付記９−１３のいずれか１項に記載の会議データ統合管理システムにおける前記録音装置であって、
前記参加者ごとの音声を入力する複数の音声入力手段と、
前記参加者ごとに対応づけられた音声チャネルを有する音声データ記録手段と、
前記音声入力手段により入力された音声信号から参加者の発言に対応する音声データを生成し、前記音声データを各参加者に対応する音声チャネルに記録する音声データ記録制御手段と、
を有することを特徴とする録音装置。
【産業上の利用可能性】
【００６０】
本発明は、議事録を公文書として公開する必要がある会議の議事録文書作成や、企業、学校、自治体、委員会の様な日常的に会議を行う団体の会議議事録文書の作成および管理に適用できる。また、クラブ、サークル、講演会等の会議や活動記録の作成および管理する用途にも適用可能である。
【符号の説明】
【００６１】
Ｐ１〜Ｐｎ 参加者
Ｍ１〜Ｍｎ 音声入力装置
１０ 録音再生装置
２０ 会議データ統合管理装置
３０ 公衆網
４０ 議事録文書作成サービス
１０１ 通信部
１０２ 音声データ記録制御部
１０３ 音声データ記録部
１０４ 通信部
１０５ 制御部
１０６ 再生部
２０１ プロセッサ
２０２ 通信部
２０３ 通信部
２０４ 操作部
２０５ 画像表示部
２０６ 音声出力部
２０７ データベース
２０８ チャネル別音声データ
２０９ チャネル別議事録文書データ
２１０ 参考資料データ
２１１ プログラム記憶部
２１２ 会議データ統合管理プログラム
２１３ ユーザインタフェースプログラム２１３
【特許請求の範囲】
【請求項１】
操作部および画像表示部を有し、会議データを統合的に管理する装置であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有することを特徴とする会議データ統合管理装置。
【請求項２】
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする請求項１に記載の会議データ統合管理装置。
【請求項３】
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする請求項１または２に記載の会議データ統合管理装置。
【請求項４】
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする請求項３に記載の会議データ統合管理装置。
【請求項５】
操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、
制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、
ことを特徴とする会議データ統合管理方法。
【請求項６】
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする請求項５に記載の会議データ統合管理方法。
【請求項７】
前記装置が前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする請求項５または６に記載の会議データ統合管理方法。
【請求項８】
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする請求項７に記載の会議データ統合管理方法。
【請求項９】
操作部および画像表示部を有し会議データを統合的に管理するシステムであって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、
前記録音装置に接続された会議データ統合管理装置と、
を有し、前記会議データ統合管理装置は、
前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有する、ことを特徴とする会議データ統合管理システム。
【請求項１０】
請求項９に記載の会議データ統合管理システムにおける前記録音装置であって、
前記参加者ごとの音声を入力する複数の音声入力手段と、
前記参加者ごとに対応づけられた音声チャネルを有する音声データ記録手段と、
前記音声入力手段により入力された音声信号から参加者の発言に対応する音声データを生成し、前記音声データを各参加者に対応する音声チャネルに記録する音声データ記録制御手段と、
を有することを特徴とする録音装置。
【請求項１】
操作部および画像表示部を有し、会議データを統合的に管理する装置であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有することを特徴とする会議データ統合管理装置。
【請求項２】
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする請求項１に記載の会議データ統合管理装置。
【請求項３】
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする請求項１または２に記載の会議データ統合管理装置。
【請求項４】
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする請求項３に記載の会議データ統合管理装置。
【請求項５】
操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、
制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、
ことを特徴とする会議データ統合管理方法。
【請求項６】
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする請求項５に記載の会議データ統合管理方法。
【請求項７】
前記装置が前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする請求項５または６に記載の会議データ統合管理方法。
【請求項８】
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする請求項７に記載の会議データ統合管理方法。
【請求項９】
操作部および画像表示部を有し会議データを統合的に管理するシステムであって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、
前記録音装置に接続された会議データ統合管理装置と、
を有し、前記会議データ統合管理装置は、
前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有する、ことを特徴とする会議データ統合管理システム。
【請求項１０】
請求項９に記載の会議データ統合管理システムにおける前記録音装置であって、
前記参加者ごとの音声を入力する複数の音声入力手段と、
前記参加者ごとに対応づけられた音声チャネルを有する音声データ記録手段と、
前記音声入力手段により入力された音声信号から参加者の発言に対応する音声データを生成し、前記音声データを各参加者に対応する音声チャネルに記録する音声データ記録制御手段と、
を有することを特徴とする録音装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１３−７３３２３（Ｐ２０１３−７３３２３Ａ）
【公開日】平成２５年４月２２日（２０１３．４．２２）
【国際特許分類】
【出願番号】特願２０１１−２１０５２３（Ｐ２０１１−２１０５２３）
【出願日】平成２３年９月２７日（２０１１．９．２７）
【出願人】（０００２３２２５４）日本電気通信システム株式会社 (586)
【Ｆターム（参考）】
【公開日】平成２５年４月２２日（２０１３．４．２２）
【国際特許分類】
【出願日】平成２３年９月２７日（２０１１．９．２７）
【出願人】（０００２３２２５４）日本電気通信システム株式会社 (586)
【Ｆターム（参考）】
[ Back to top ]