情報処理装置及びプログラム
【課題】複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる情報処理装置を提供する。
【解決手段】時系列に順次提示されるべき複数の文書情報と、この文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得し、文書情報のうち一つを注目情報として、当該注目情報に含まれる文字列のうち、検索の対象となる文字列を少なくとも一つ、選択的に抽出し、動的情報に含まれる音声において、上記抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を特定する部分情報を選択して出力する。
【解決手段】時系列に順次提示されるべき複数の文書情報と、この文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得し、文書情報のうち一つを注目情報として、当該注目情報に含まれる文字列のうち、検索の対象となる文字列を少なくとも一つ、選択的に抽出し、動的情報に含まれる音声において、上記抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を特定する部分情報を選択して出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及びプログラムに関する。
【背景技術】
【０００２】
それぞれが時系列提示される複数系列の情報を、互いに同期させて出力することが広く行われている。例えば資料を提示しつつ、その資料に関する説明映像を音声とともに提供するシステムがある（特許文献１）。こうしたシステムでは、資料や映像・音声といった複数の系列の情報を、互いに同期させる必要がある。特許文献１では、資料を提示する講師などの側で、手動にて資料の切り替え信号を送出している。
【特許文献１】特開２０００−１１５７３６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
いわゆるオンデマンドでの情報提供などを視野に含めると、複数系列の情報を記録する際に同期させることが必要である。
【０００４】
本発明は上記実情に鑑みて為されたもので、複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる情報処理装置及びプログラムを提供することを、その目的の一つとする。
【課題を解決するための手段】
【０００５】
本発明の一態様は、情報処理装置であって、時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得する手段と、前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する文字列抽出手段と、前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する部分選択手段と、を含むことを特徴としている。
【０００６】
また、ここで前記部分選択手段によって選択される部分が、前記動的情報において出現する時点の分布の特性に基づいて、前記選択された部分の一部をさらに選抜する選抜手段、をさらに含んでもよい。
【０００７】
さらに、前記文字列抽出手段は、検索の対象となる文字列のうち、前記複数の文書情報に共通して含まれる文字列以外の文字列を選択して抽出することとしてもよい。
【０００８】
また、本発明の別の態様は、プログラムであって、コンピュータに、時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する音声を含んだ動的情報とを取得する手順と、前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する手順と、前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する手順と、を実行させることを特徴としている。
【発明の効果】
【０００９】
請求項１記載の発明によれば、時系列に提示される複数の文書情報と、これに関連して、時系列に変化する、音声を含んだ動的情報とを含む複数系列の情報を予め同期させることができる。
【００１０】
また請求項２記載の発明によれば、複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる。
【００１１】
請求項３記載の発明によると、複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる。
【００１２】
また請求項４記載の発明によると、時系列に提示される複数の文書情報と、これに関連して、時系列に変化する、音声を含んだ動的情報とを含む複数系列の情報を予め同期させることができる。
【発明を実施するための最良の形態】
【００１３】
本発明の一実施の形態について図面を参照しながら説明する。本発明の一実施の形態に係る情報処理装置は、図１に示すように、制御部１１、記憶部１２、操作部１３、表示部１４、ストレージ部１５、及び通信部１６を含んで構成される。
【００１４】
制御部１１は、ＣＰＵなどのプログラム制御デバイスであり、記憶部１２に格納されているプログラムに従って動作する。この制御部１１は、時系列に提示されるべき複数の文書情報と、この文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得し、これら文書情報を、動的情報に同期して提示させるための情報を生成する。この制御部１１の具体的な処理の内容については後に述べる。
【００１５】
記憶部１２は、コンピュータ可読な記録媒体の例としてのＲＡＭ（Random Access Memory）や、ＲＯＭ（Read Only Memory）等を含む。この記憶部１２は、制御部１１によって実行されるプログラムを保持する。このプログラムは、ＣＤ−ＲＯＭ（compact disc ROM）やＤＶＤ−ＲＯＭ（Digital Versatile Disc ROM）といった光学的、ないしは磁気的、その他の方法で情報を記録する、コンピュータ可読な記録媒体に格納されて提供されてもよい。また、この記憶部１２は、制御部１１のワークメモリとしても動作する。
【００１６】
操作部１３は、例えばキーボードやマウスなどであり、利用者の操作を受け入れて、当該受け入れた操作の内容を表す情報を、制御部１１に出力する。表示部１４は、液晶表示装置などのディスプレイであり、制御部１１から入力される指示に従って情報を表示出力する。
【００１７】
ストレージ部１５は、ハードディスクなどの記録媒体を含んで構成される。本実施の形態では、制御部１１における処理の対象となる文書情報や動的情報が、このストレージ部１５に保持される。
【００１８】
通信部１６は、例えばネットワークインタフェースであり、制御部１１から入力される指示に従って、指示された宛先へ情報を送信する。また、この通信部１６は、ネットワークを介して受信される情報を制御部１１に出力する。
【００１９】
次に本発明の一実施の形態の制御部１１の動作について説明する。この制御部１１のプログラム実行により、ソフトウエア的に実現される本発明の一実施の形態の情報処理装置は、機能的には、図２に示すように、文書情報取得部２１と、動的情報取得部２２と、文字列抽出部２３と、音声検索部２４と、部分選択部２５と、選抜部２６と、を含んで構成される。ここでの説明では、本発明の一実施の形態の情報処理装置は、動的情報は、音声情報と、一連の静止画の情報とを含む動画情報であるとし、文書情報の各々は、この動画情報が再生されている間、それぞれに定められた再生時間帯において提供される。つまり、ここではスライド情報としての複数の文書情報が、講義などを記録した動画情報に同期して提示される場合を例としている。
【００２０】
文書情報取得部２１は、処理の対象となる文書情報をストレージ部１５から読み出す。本実施の形態では、処理の対象となる動画情報に同期させる一連の文書情報を注目文書情報として次々、選択して取得する。動的情報取得部２２は、処理の対象となる動画情報をストレージ部１５から読み出す。
【００２１】
文字列抽出部２３は、選択的に読み出された注目文書情報に含まれる文字列を抽出する。この文字列抽出部２３では、注目文書情報に含まれる文字列のうち、検索の対象となる文字列を所定単位（以下、部分文字列と呼ぶ）に分割する。例えば広く知られている形態素解析エンジンを用いて、形態素（単語として言語的に意味のある最小単位）に分割することとすればよい。そして文字列抽出部２３は、ここで分割により得た少なくとも一つの部分文字列を出力する。
【００２２】
音声検索部２４は、文字列抽出部２３が出力する部分文字列の各々について、音声合成処理を行い、各部分文字列に対応した音素情報（発音時の音声信号を表す情報）を生成する。そして、各部分文字列に対応した音素情報を、動画情報の音声情報から検索し、それぞれの出現位置を特定する情報を出力する。
【００２３】
例えば、「遠隔会議」という単語がある場合、文字列抽出部２３では形態素解析により「遠隔」、「会議」の各単語が抽出される。そして音声検索部２４では、これらの単語を発音したときの音声信号を表す音素情報が生成され、この音素情報に一致する音声信号の出現位置を、動画情報から検索する。これにより、動的情報のうちで、各単語が発音されている時点を特定する。
【００２４】
部分選択部２５は、音声検索部２４の出力する情報に基づいて、動画情報のうちで、部分文字列が発音されている時点を表す情報の一覧を生成する。この一覧は、概念的には図３に示すように、動画情報等の動的情報において各単語が発話されている位置を列挙したものである。
【００２５】
部分選択部２５は、さらに、一覧に含まれる時点の情報を昇順（または降順）Ｔ1，Ｔ2…に並べ替える。部分選択部２５は、その先頭から順に次の処理を行う。すなわち、図４に示すように、まず、ｉ＝１とリセットし、またグループ識別子Ｇを「０」に初期化しておく（初期化処理：Ｓ１）、そして、Ｔi（つまりＴ1）にグループ識別子Ｇ（つまり「０」）を関連づけて記憶部１２に、グループテーブルとして格納する。
【００２６】
部分選択部２５は、一覧にｉ＋１番目の値Ｔi+1があるか（一覧がＴiまででないか）を調べる（Ｓ２）。ここでＴi+1があれば、Ｔi+1と、Ｔiとの差の絶対値｜Ｔi+1−Ｔi｜（昇順に並べられていれば、絶対値を演算しなくてもよく、また降順に並べられている場合は、Ｔi−Ｔi+1を演算して、絶対値の演算を行わなくてもよい）を演算する（Ｓ３）。
【００２７】
部分選択部２５は、この差が予め定めたしきい値よりも小さいか否かを調べ（Ｓ４）、小さい場合は、Ｔi+1にグループ識別子Ｇを関連づけて、グループテーブルに格納する（Ｓ５）。そして部分選択部２５は、ｉを「１」だけインクリメントして（Ｓ６）、処理Ｓ２に戻って処理を続ける。
【００２８】
また、部分選択部２５は、処理Ｓ３で演算した値がしきい値よりも小さくない場合は、グループ識別子Ｇを「１」だけインクリメントして（Ｓ７）、処理Ｓ５に移行して、Ｔi+1にインクリメント後のグループ識別子Ｇを関連づけて、グループテーブルに格納し、処理を続ける。
【００２９】
さらに部分選択部２５は、処理Ｓ２において、Ｔi+1がなければ、グループテーブルを参照し、共通するグループ識別子に関連づけられている値Ｔiのうち最小の値Ｔminと、最大の値Ｔmaxとを見出す（Ｓ８）。部分選択部２５は、そして最小値Ｔminと最大値Ｔmaxとをグループ識別子ごとに関連づけて、グループ情報として記憶する（Ｓ９）。
【００３０】
この処理により、部分選択部２５は、予め定めたしきい値よりも短い間隔で、連続的に文書情報中の文字列に対応する音声が検出されている時間帯を見出す。これにより、概念的には図５に示すように、動画情報等の動的情報において、注目文書情報に含まれる各単語の分布の特性として、注目文書情報に含まれる各単語が連続的に発話されている時間帯が見出される。
【００３１】
スライドを参照させながら行われる講義の場合、あるスライド中の文字列が集中して現れる箇所は、当該スライドに関係する内容が説明されている期間と考えられ、その期間は、動的情報のうちで１カ所であるのが一般的である。しかしながら、スライド中の文言のうち、一般的な語や講義のテーマに相当する語は、動的情報のうちで繰り返し孤立して出現する。そこで選抜部２６は、記憶部１２に格納されたグループ情報のうち、Ｔmax−Ｔminが最大となっているグループ識別子を選択する。そして、選抜部２６は、このグループ識別子に関連づけられているＴmin及びＴmaxを注目文書情報を特定する情報に関連づけて、記憶部１２に、同期情報として格納する（図５）。
【００３２】
すなわち、制御部１１によって実行されるプログラムは、図６にフローチャートとして示すように、処理の対象となった動的情報（ここでは動画情報）をストレージ部１５から読み出す（Ｓ１１）とともに、この動画情報に同期させる複数の文書情報をストレージ部１５から読み出す（Ｓ１２）。そして、この文書情報のうち未だ注目文書情報として選択されていない文書情報の一つを注目文書情報として選択し（Ｓ１３）、注目文書情報に含まれる文字列から複数の部分文字列を抽出する（Ｓ１４）。
【００３３】
そして、制御部１１は、処理Ｓ１４で抽出された各部分文字列に対応した音素情報を、動画情報の音声情報から検索し、それぞれの出現位置を特定する（Ｓ１５）。そして制御部１１は、予め定めたしきい値よりも短い間隔で、連続的に注目文書情報中の文字列に対応する音声が検出されている時間帯を見出し（Ｓ１６）、そのうちから、予め定めた条件（上述のように最も長い時間帯との条件など）を満足する時間帯を表す情報を、注目文書情報を特定する情報に関連づけて、同期情報として蓄積する（Ｓ１７）。
【００３４】
制御部１１は、さらに、処理の対象となった文書情報のうち、未だ注目文書情報として選択されていない文書情報があるか否かを判断し（Ｓ１８）、未だ注目文書情報として選択されていない文書情報があれば、処理Ｓ１３に戻って処理を続ける。
【００３５】
また、処理Ｓ１８において、未だ注目文書情報として選択されていない文書情報がなければ、処理を終了する。
【００３６】
また、ここまでの説明では、各注目文書情報に含まれる単語のすべてを利用する例について述べたが、単語の一部を選択的に利用してもよい。例えば、文字列抽出部２３は、形態素解析により得られた単語のすべてではなく、予め定められた単語を除いて出力してもよい。具体的な例として、助詞や助動詞に相当する単語や、一般的な文書において広く現れる単語（「ある」、「である」など）を除いて出力することとしてもよい。
【００３７】
さらに、制御部１１は、指定された動的情報に同期して再生されるべき複数の文書情報のうち、注目文書情報に固有に現れる単語が発話されている時点を検索するようにしてもよい。この場合、制御部１１によって実行されるプログラムは、図７にフローチャートとして示すように、処理の対象となった動的情報（ここでは動画情報）をストレージ部１５から読み出すとともに（Ｓ２１）、この動画情報に同期させる複数の文書情報をストレージ部１５から読み出し（Ｓ２２）、この文書情報のうち未だ注目文書情報として選択されていない文書情報の一つを注目文書情報として選択し（Ｓ２３）、注目文書情報に含まれる文字列から複数の部分文字列を抽出して（Ｓ２４）、注目文書情報を特定する情報に関連づけて、抽出文字列データベースとして記憶する（Ｓ２５）。
【００３８】
制御部１１は、処理の対象となった文書情報のうち、未だ注目文書情報として選択されていない文書情報があるか否かを判断し（Ｓ２６）、未だ注目文書情報として選択されていない文書情報があれば、処理Ｓ２３に戻って処理を続ける。
【００３９】
また、処理Ｓ２５において、未だ注目文書情報として選択されていない文書情報がなければ、抽出文字列データベースを参照し、互いに異なる文書情報を特定する情報に関連づけられて、重複して２度以上現れる単語を削除する（Ｓ２７）。
【００４０】
これにより、例えば処理Ｓ２２で読み出された複数の文書情報において、そのひとつから、「遠隔」、「会議」、「ファイルフォーマット」、「流れ」との単語が抽出され、また別の文書情報において、「会議」、「承認」、「方法」との単語が抽出されたときには、複数の互いに異なる文書情報に関連して、「会議」の単語が抽出されているので、この「会議」の単語を抽出された単語群から除去する。これにより、各注目文書情報に含まれ、検索の対象となる文字列のうち、処理対象となった文書情報の少なくとも一部、複数の文書情報に共通して含まれる文字列（ここでは単語）以外の文字列を選択して抽出する。
【００４１】
そして制御部１１は、抽出文字列データベースに格納されている文書情報を特定する特定情報の一つ（未だ注目特定情報として選択されていないもの）を、注目特定情報として選択する（Ｓ２８）。そして、注目特定情報に関連づけられている各単語に対応した音素情報を生成し、当該生成した音素情報を動画情報の音声情報から検索し、それぞれの出現位置を特定する（Ｓ２９）。そして制御部１１は、予め定めたしきい値よりも短い間隔で、連続的に注目文書情報中の文字列に対応する音声が検出されている時間帯を見出し（Ｓ３０）、そのうちから、予め定めた条件（上述のように最も長い時間帯との条件など）を満足する時間帯を表す情報を、注目特定情報（対応する文書情報を特定する情報）に関連づけて、同期情報として蓄積する（Ｓ３１）。
【００４２】
制御部１１は、抽出文字列データベースに含まれる特定情報のうち、未だ注目特定情報として選択されていない特定情報があるか否かを判断し（Ｓ３２）、未だ注目文書情報として選択されていない特定情報があれば、処理Ｓ２８に戻って処理を続ける。
【００４３】
また、処理Ｓ３２において、未だ注目文書情報として選択されていない文書情報がなければ、処理を終了する。
【００４４】
制御部１１は、これらの処理によって生成した同期情報を、表示出力するなどして利用者に提示する。利用者は、この同期情報を参照しながら、各文書情報の提示時間範囲を定めることとなる。
【００４５】
なお、制御部１１はさらに、生成した同期情報において、動的情報の再生時間に従い、ｋ番目に提示されるべき文書情報と、ｋ＋１番目に提示されるべき文書情報とのそれぞれに対応づけて同期情報に含められている、時間範囲を画定する情報（Ｔmin及びＴmax）を参照し、ｋ番目の文書情報に関連するＴmax（以下、Ｔmax（ｋ）と表記する）と、ｋ＋１番目の文書情報に関連するＴmin（以下、Ｔmin（ｋ＋１）と表記する）とが、
（１）Ｔmax（ｋ）＞Ｔmin（ｋ＋１）である場合、つまり、期間が重複する場合には、Ｔmax（ｋ）を、Ｔmin（ｋ＋１）に設定して、同期情報を変更して調整を行ってもよい。また逆に、Ｔmin（ｋ＋１）をＴmax（ｋ）に設定して、同期情報を変更して調整を行ってもよい。また、これらのうち、どちらの調整方法を採用するかを、所定の条件によって定め、定めた調整方法によって調整を行ってもよい。ここで所定の条件は、例えば、ｋ番目のＴmin（以下Ｔmin（ｋ）と表記する）を用いて、Ｔmax（ｋ）−Ｔmin（ｋ）と、Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）とを比較し、より大きい値となっている側を調整対象とするとの条件でよい。具体的な例として、Ｔmax（ｋ）−Ｔmin（ｋ）＜Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）であれば、ｋ＋１番目を調整対象として、Ｔmin（ｋ＋１）をＴmax（ｋ）に設定して、同期情報を変更することとしてもよい。
【００４６】
また、
（２）Ｔmax（ｋ）＞Ｔmin（ｋ＋１）である場合、つまり、隣接する２つの期間の間に空隙が生じている場合も、Ｔmax（ｋ）を、Ｔmin（ｋ＋１）に設定して、同期情報を変更して調整を行ってもよい。また逆に、Ｔmin（ｋ＋１）をＴmax（ｋ）に設定して、同期情報を変更して調整を行ってもよい。また、これらのうち、どちらの調整方法を採用するかを、所定の条件によって定め、定めた調整方法によって調整を行ってもよい。この所定条件は、例えば、ｋ番目のＴmin（以下Ｔmin（ｋ）と表記する）を用いて、Ｔmax（ｋ）−Ｔmin（ｋ）と、Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）とを比較し、より小さい値となっている側を調整対象とするとの条件でよい。具体的な例として、Ｔmax（ｋ）−Ｔmin（ｋ）＜Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）であれば、ｋ番目を調整対象として、Ｔmax（ｋ）をＴmin（ｋ＋１）に設定して、同期情報を変更することとしてもよい。
【００４７】
さらに最後に提示されるべき文書情報のＴmaxが、動的情報の再生終了時刻Ｔendよりも、時間的に先行する場合（Ｔmax＜Ｔend）は、制御部１１は、Ｔmax＝Ｔendとして同期情報を変更してもよい。
【００４８】
本実施の形態の情報処理装置は、その一例の動作としては、図８に示すように、処理の対象となった動的情報に同期させて提示されるべき文書情報の一つを注目文書情報として選択し、当該注目文書情報に含まれる単語を抽出する（Ｓ４１）。次に、この抽出した単語が発話されている箇所（時刻）を動的情報から検索する（Ｓ４２）。そして、例えば１分以内の間隔で連続的に発話されている箇所を特定し、当該特定した時間帯と注目文書情報（例えば「スライド第１ページ」等の情報）を特定する情報とを関連づけて記録する（Ｓ４３）。他の文書情報についても同様の処理を行った後、利用者にこの記録を提示する。利用者は、提示された記録を参照して、必要に応じて調整等の作業を行い、ストレージ部１５等に同期情報として格納することになる。
【００４９】
また、制御部１１は、ネットワーク等の通信手段を介して接続されたクライアント装置に対して、広く知られたストリーミング技術を用いて動的情報を配信しつつ、その配信開始時点から、上記記録された時間帯において、当該時間帯の情報に関連づけられた情報で特定される文書情報を併せて配信し、クライアント装置側で表示させるよう制御する処理を行ってもよい。
【００５０】
また、本実施の形態の情報処理装置は、その別の動作例としては、図９に示すように、処理の対象となった動的情報に同期させて提示されるべき文書情報を順次注目文書情報として選択しつつ、各注目文書情報に含まれる単語を抽出する（Ｓ５１）。次に、その一つを再度注目文書情報として選択し、注目文書情報から抽出された単語のうち、注目文書情報以外の文書情報から抽出された単語と共通している単語を除去する（Ｓ５２）。そしてこうして得られた、注目文書情報に固有の文字列（ユニークテキスト）が発話されている箇所（時刻）を動的情報から検索する（Ｓ５３）。さらに例えば１分以内の間隔で連続的に発話されている箇所を特定し、当該特定した時間帯と注目文書情報（例えば「スライド第１ページ」等の情報）を特定する情報とを関連づけて記録する（Ｓ５４）。他の文書情報についても同様の処理を行った後、利用者にこの記録を提示する。利用者は、提示された記録を参照して、必要に応じて調整等の作業を行い、ストレージ部１５等に同期情報として格納することになる。
【００５１】
なお、動的情報を、再生時間の経過に従って複数の区間に区切り、各区間において、各注目文章情報から抽出した単語の含まれる総数を算出しておき、この総数が予め定めたしきい値を超えている区間を動的情報から選択的に抽出することで、動的情報の要約情報を生成してもよい。
【図面の簡単な説明】
【００５２】
【図１】本発明の一実施の形態に係る情報処理装置の例を表す構成ブロック図である。
【図２】本発明の一実施の形態に係る情報処理装置の例を表す機能ブロック図である。
【図３】本発明の一実施の形態に係る情報処理装置の動作例の概念図である。
【図４】本発明の一実施の形態に係る情報処理装置の動作例を表すフローチャート図である。
【図５】本発明の一実施の形態に係る情報処理装置が生成する情報の例を表す説明図である。
【図６】本発明の一実施の形態に係る情報処理装置の動作の一例を表すフローチャート図である。
【図７】本発明の一実施の形態に係る情報処理装置の動作の別の例を表すフローチャート図である。
【図８】本発明の一実施の形態に係る情報処理装置の動作の流れの例を表す流れ図である。
【図９】本発明の一実施の形態に係る情報処理装置の動作の流れの別の例を表す流れ図である。
【符号の説明】
【００５３】
１１ 制御部、１２ 記憶部、１３ 操作部、１４ 表示部、１５ ストレージ部、１６ 通信部、２１ 文書情報取得部、２２ 動的情報取得部、２３ 文字列抽出部、２４ 音声検索部、２５ 部分選択部、２６ 選抜部。
【技術分野】
【０００１】
本発明は、情報処理装置及びプログラムに関する。
【背景技術】
【０００２】
それぞれが時系列提示される複数系列の情報を、互いに同期させて出力することが広く行われている。例えば資料を提示しつつ、その資料に関する説明映像を音声とともに提供するシステムがある（特許文献１）。こうしたシステムでは、資料や映像・音声といった複数の系列の情報を、互いに同期させる必要がある。特許文献１では、資料を提示する講師などの側で、手動にて資料の切り替え信号を送出している。
【特許文献１】特開２０００−１１５７３６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
いわゆるオンデマンドでの情報提供などを視野に含めると、複数系列の情報を記録する際に同期させることが必要である。
【０００４】
本発明は上記実情に鑑みて為されたもので、複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる情報処理装置及びプログラムを提供することを、その目的の一つとする。
【課題を解決するための手段】
【０００５】
本発明の一態様は、情報処理装置であって、時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得する手段と、前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する文字列抽出手段と、前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する部分選択手段と、を含むことを特徴としている。
【０００６】
また、ここで前記部分選択手段によって選択される部分が、前記動的情報において出現する時点の分布の特性に基づいて、前記選択された部分の一部をさらに選抜する選抜手段、をさらに含んでもよい。
【０００７】
さらに、前記文字列抽出手段は、検索の対象となる文字列のうち、前記複数の文書情報に共通して含まれる文字列以外の文字列を選択して抽出することとしてもよい。
【０００８】
また、本発明の別の態様は、プログラムであって、コンピュータに、時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する音声を含んだ動的情報とを取得する手順と、前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する手順と、前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する手順と、を実行させることを特徴としている。
【発明の効果】
【０００９】
請求項１記載の発明によれば、時系列に提示される複数の文書情報と、これに関連して、時系列に変化する、音声を含んだ動的情報とを含む複数系列の情報を予め同期させることができる。
【００１０】
また請求項２記載の発明によれば、複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる。
【００１１】
請求項３記載の発明によると、複数系列の情報を予め同期させた状態で記録させる際の利便性を向上できる。
【００１２】
また請求項４記載の発明によると、時系列に提示される複数の文書情報と、これに関連して、時系列に変化する、音声を含んだ動的情報とを含む複数系列の情報を予め同期させることができる。
【発明を実施するための最良の形態】
【００１３】
本発明の一実施の形態について図面を参照しながら説明する。本発明の一実施の形態に係る情報処理装置は、図１に示すように、制御部１１、記憶部１２、操作部１３、表示部１４、ストレージ部１５、及び通信部１６を含んで構成される。
【００１４】
制御部１１は、ＣＰＵなどのプログラム制御デバイスであり、記憶部１２に格納されているプログラムに従って動作する。この制御部１１は、時系列に提示されるべき複数の文書情報と、この文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得し、これら文書情報を、動的情報に同期して提示させるための情報を生成する。この制御部１１の具体的な処理の内容については後に述べる。
【００１５】
記憶部１２は、コンピュータ可読な記録媒体の例としてのＲＡＭ（Random Access Memory）や、ＲＯＭ（Read Only Memory）等を含む。この記憶部１２は、制御部１１によって実行されるプログラムを保持する。このプログラムは、ＣＤ−ＲＯＭ（compact disc ROM）やＤＶＤ−ＲＯＭ（Digital Versatile Disc ROM）といった光学的、ないしは磁気的、その他の方法で情報を記録する、コンピュータ可読な記録媒体に格納されて提供されてもよい。また、この記憶部１２は、制御部１１のワークメモリとしても動作する。
【００１６】
操作部１３は、例えばキーボードやマウスなどであり、利用者の操作を受け入れて、当該受け入れた操作の内容を表す情報を、制御部１１に出力する。表示部１４は、液晶表示装置などのディスプレイであり、制御部１１から入力される指示に従って情報を表示出力する。
【００１７】
ストレージ部１５は、ハードディスクなどの記録媒体を含んで構成される。本実施の形態では、制御部１１における処理の対象となる文書情報や動的情報が、このストレージ部１５に保持される。
【００１８】
通信部１６は、例えばネットワークインタフェースであり、制御部１１から入力される指示に従って、指示された宛先へ情報を送信する。また、この通信部１６は、ネットワークを介して受信される情報を制御部１１に出力する。
【００１９】
次に本発明の一実施の形態の制御部１１の動作について説明する。この制御部１１のプログラム実行により、ソフトウエア的に実現される本発明の一実施の形態の情報処理装置は、機能的には、図２に示すように、文書情報取得部２１と、動的情報取得部２２と、文字列抽出部２３と、音声検索部２４と、部分選択部２５と、選抜部２６と、を含んで構成される。ここでの説明では、本発明の一実施の形態の情報処理装置は、動的情報は、音声情報と、一連の静止画の情報とを含む動画情報であるとし、文書情報の各々は、この動画情報が再生されている間、それぞれに定められた再生時間帯において提供される。つまり、ここではスライド情報としての複数の文書情報が、講義などを記録した動画情報に同期して提示される場合を例としている。
【００２０】
文書情報取得部２１は、処理の対象となる文書情報をストレージ部１５から読み出す。本実施の形態では、処理の対象となる動画情報に同期させる一連の文書情報を注目文書情報として次々、選択して取得する。動的情報取得部２２は、処理の対象となる動画情報をストレージ部１５から読み出す。
【００２１】
文字列抽出部２３は、選択的に読み出された注目文書情報に含まれる文字列を抽出する。この文字列抽出部２３では、注目文書情報に含まれる文字列のうち、検索の対象となる文字列を所定単位（以下、部分文字列と呼ぶ）に分割する。例えば広く知られている形態素解析エンジンを用いて、形態素（単語として言語的に意味のある最小単位）に分割することとすればよい。そして文字列抽出部２３は、ここで分割により得た少なくとも一つの部分文字列を出力する。
【００２２】
音声検索部２４は、文字列抽出部２３が出力する部分文字列の各々について、音声合成処理を行い、各部分文字列に対応した音素情報（発音時の音声信号を表す情報）を生成する。そして、各部分文字列に対応した音素情報を、動画情報の音声情報から検索し、それぞれの出現位置を特定する情報を出力する。
【００２３】
例えば、「遠隔会議」という単語がある場合、文字列抽出部２３では形態素解析により「遠隔」、「会議」の各単語が抽出される。そして音声検索部２４では、これらの単語を発音したときの音声信号を表す音素情報が生成され、この音素情報に一致する音声信号の出現位置を、動画情報から検索する。これにより、動的情報のうちで、各単語が発音されている時点を特定する。
【００２４】
部分選択部２５は、音声検索部２４の出力する情報に基づいて、動画情報のうちで、部分文字列が発音されている時点を表す情報の一覧を生成する。この一覧は、概念的には図３に示すように、動画情報等の動的情報において各単語が発話されている位置を列挙したものである。
【００２５】
部分選択部２５は、さらに、一覧に含まれる時点の情報を昇順（または降順）Ｔ1，Ｔ2…に並べ替える。部分選択部２５は、その先頭から順に次の処理を行う。すなわち、図４に示すように、まず、ｉ＝１とリセットし、またグループ識別子Ｇを「０」に初期化しておく（初期化処理：Ｓ１）、そして、Ｔi（つまりＴ1）にグループ識別子Ｇ（つまり「０」）を関連づけて記憶部１２に、グループテーブルとして格納する。
【００２６】
部分選択部２５は、一覧にｉ＋１番目の値Ｔi+1があるか（一覧がＴiまででないか）を調べる（Ｓ２）。ここでＴi+1があれば、Ｔi+1と、Ｔiとの差の絶対値｜Ｔi+1−Ｔi｜（昇順に並べられていれば、絶対値を演算しなくてもよく、また降順に並べられている場合は、Ｔi−Ｔi+1を演算して、絶対値の演算を行わなくてもよい）を演算する（Ｓ３）。
【００２７】
部分選択部２５は、この差が予め定めたしきい値よりも小さいか否かを調べ（Ｓ４）、小さい場合は、Ｔi+1にグループ識別子Ｇを関連づけて、グループテーブルに格納する（Ｓ５）。そして部分選択部２５は、ｉを「１」だけインクリメントして（Ｓ６）、処理Ｓ２に戻って処理を続ける。
【００２８】
また、部分選択部２５は、処理Ｓ３で演算した値がしきい値よりも小さくない場合は、グループ識別子Ｇを「１」だけインクリメントして（Ｓ７）、処理Ｓ５に移行して、Ｔi+1にインクリメント後のグループ識別子Ｇを関連づけて、グループテーブルに格納し、処理を続ける。
【００２９】
さらに部分選択部２５は、処理Ｓ２において、Ｔi+1がなければ、グループテーブルを参照し、共通するグループ識別子に関連づけられている値Ｔiのうち最小の値Ｔminと、最大の値Ｔmaxとを見出す（Ｓ８）。部分選択部２５は、そして最小値Ｔminと最大値Ｔmaxとをグループ識別子ごとに関連づけて、グループ情報として記憶する（Ｓ９）。
【００３０】
この処理により、部分選択部２５は、予め定めたしきい値よりも短い間隔で、連続的に文書情報中の文字列に対応する音声が検出されている時間帯を見出す。これにより、概念的には図５に示すように、動画情報等の動的情報において、注目文書情報に含まれる各単語の分布の特性として、注目文書情報に含まれる各単語が連続的に発話されている時間帯が見出される。
【００３１】
スライドを参照させながら行われる講義の場合、あるスライド中の文字列が集中して現れる箇所は、当該スライドに関係する内容が説明されている期間と考えられ、その期間は、動的情報のうちで１カ所であるのが一般的である。しかしながら、スライド中の文言のうち、一般的な語や講義のテーマに相当する語は、動的情報のうちで繰り返し孤立して出現する。そこで選抜部２６は、記憶部１２に格納されたグループ情報のうち、Ｔmax−Ｔminが最大となっているグループ識別子を選択する。そして、選抜部２６は、このグループ識別子に関連づけられているＴmin及びＴmaxを注目文書情報を特定する情報に関連づけて、記憶部１２に、同期情報として格納する（図５）。
【００３２】
すなわち、制御部１１によって実行されるプログラムは、図６にフローチャートとして示すように、処理の対象となった動的情報（ここでは動画情報）をストレージ部１５から読み出す（Ｓ１１）とともに、この動画情報に同期させる複数の文書情報をストレージ部１５から読み出す（Ｓ１２）。そして、この文書情報のうち未だ注目文書情報として選択されていない文書情報の一つを注目文書情報として選択し（Ｓ１３）、注目文書情報に含まれる文字列から複数の部分文字列を抽出する（Ｓ１４）。
【００３３】
そして、制御部１１は、処理Ｓ１４で抽出された各部分文字列に対応した音素情報を、動画情報の音声情報から検索し、それぞれの出現位置を特定する（Ｓ１５）。そして制御部１１は、予め定めたしきい値よりも短い間隔で、連続的に注目文書情報中の文字列に対応する音声が検出されている時間帯を見出し（Ｓ１６）、そのうちから、予め定めた条件（上述のように最も長い時間帯との条件など）を満足する時間帯を表す情報を、注目文書情報を特定する情報に関連づけて、同期情報として蓄積する（Ｓ１７）。
【００３４】
制御部１１は、さらに、処理の対象となった文書情報のうち、未だ注目文書情報として選択されていない文書情報があるか否かを判断し（Ｓ１８）、未だ注目文書情報として選択されていない文書情報があれば、処理Ｓ１３に戻って処理を続ける。
【００３５】
また、処理Ｓ１８において、未だ注目文書情報として選択されていない文書情報がなければ、処理を終了する。
【００３６】
また、ここまでの説明では、各注目文書情報に含まれる単語のすべてを利用する例について述べたが、単語の一部を選択的に利用してもよい。例えば、文字列抽出部２３は、形態素解析により得られた単語のすべてではなく、予め定められた単語を除いて出力してもよい。具体的な例として、助詞や助動詞に相当する単語や、一般的な文書において広く現れる単語（「ある」、「である」など）を除いて出力することとしてもよい。
【００３７】
さらに、制御部１１は、指定された動的情報に同期して再生されるべき複数の文書情報のうち、注目文書情報に固有に現れる単語が発話されている時点を検索するようにしてもよい。この場合、制御部１１によって実行されるプログラムは、図７にフローチャートとして示すように、処理の対象となった動的情報（ここでは動画情報）をストレージ部１５から読み出すとともに（Ｓ２１）、この動画情報に同期させる複数の文書情報をストレージ部１５から読み出し（Ｓ２２）、この文書情報のうち未だ注目文書情報として選択されていない文書情報の一つを注目文書情報として選択し（Ｓ２３）、注目文書情報に含まれる文字列から複数の部分文字列を抽出して（Ｓ２４）、注目文書情報を特定する情報に関連づけて、抽出文字列データベースとして記憶する（Ｓ２５）。
【００３８】
制御部１１は、処理の対象となった文書情報のうち、未だ注目文書情報として選択されていない文書情報があるか否かを判断し（Ｓ２６）、未だ注目文書情報として選択されていない文書情報があれば、処理Ｓ２３に戻って処理を続ける。
【００３９】
また、処理Ｓ２５において、未だ注目文書情報として選択されていない文書情報がなければ、抽出文字列データベースを参照し、互いに異なる文書情報を特定する情報に関連づけられて、重複して２度以上現れる単語を削除する（Ｓ２７）。
【００４０】
これにより、例えば処理Ｓ２２で読み出された複数の文書情報において、そのひとつから、「遠隔」、「会議」、「ファイルフォーマット」、「流れ」との単語が抽出され、また別の文書情報において、「会議」、「承認」、「方法」との単語が抽出されたときには、複数の互いに異なる文書情報に関連して、「会議」の単語が抽出されているので、この「会議」の単語を抽出された単語群から除去する。これにより、各注目文書情報に含まれ、検索の対象となる文字列のうち、処理対象となった文書情報の少なくとも一部、複数の文書情報に共通して含まれる文字列（ここでは単語）以外の文字列を選択して抽出する。
【００４１】
そして制御部１１は、抽出文字列データベースに格納されている文書情報を特定する特定情報の一つ（未だ注目特定情報として選択されていないもの）を、注目特定情報として選択する（Ｓ２８）。そして、注目特定情報に関連づけられている各単語に対応した音素情報を生成し、当該生成した音素情報を動画情報の音声情報から検索し、それぞれの出現位置を特定する（Ｓ２９）。そして制御部１１は、予め定めたしきい値よりも短い間隔で、連続的に注目文書情報中の文字列に対応する音声が検出されている時間帯を見出し（Ｓ３０）、そのうちから、予め定めた条件（上述のように最も長い時間帯との条件など）を満足する時間帯を表す情報を、注目特定情報（対応する文書情報を特定する情報）に関連づけて、同期情報として蓄積する（Ｓ３１）。
【００４２】
制御部１１は、抽出文字列データベースに含まれる特定情報のうち、未だ注目特定情報として選択されていない特定情報があるか否かを判断し（Ｓ３２）、未だ注目文書情報として選択されていない特定情報があれば、処理Ｓ２８に戻って処理を続ける。
【００４３】
また、処理Ｓ３２において、未だ注目文書情報として選択されていない文書情報がなければ、処理を終了する。
【００４４】
制御部１１は、これらの処理によって生成した同期情報を、表示出力するなどして利用者に提示する。利用者は、この同期情報を参照しながら、各文書情報の提示時間範囲を定めることとなる。
【００４５】
なお、制御部１１はさらに、生成した同期情報において、動的情報の再生時間に従い、ｋ番目に提示されるべき文書情報と、ｋ＋１番目に提示されるべき文書情報とのそれぞれに対応づけて同期情報に含められている、時間範囲を画定する情報（Ｔmin及びＴmax）を参照し、ｋ番目の文書情報に関連するＴmax（以下、Ｔmax（ｋ）と表記する）と、ｋ＋１番目の文書情報に関連するＴmin（以下、Ｔmin（ｋ＋１）と表記する）とが、
（１）Ｔmax（ｋ）＞Ｔmin（ｋ＋１）である場合、つまり、期間が重複する場合には、Ｔmax（ｋ）を、Ｔmin（ｋ＋１）に設定して、同期情報を変更して調整を行ってもよい。また逆に、Ｔmin（ｋ＋１）をＴmax（ｋ）に設定して、同期情報を変更して調整を行ってもよい。また、これらのうち、どちらの調整方法を採用するかを、所定の条件によって定め、定めた調整方法によって調整を行ってもよい。ここで所定の条件は、例えば、ｋ番目のＴmin（以下Ｔmin（ｋ）と表記する）を用いて、Ｔmax（ｋ）−Ｔmin（ｋ）と、Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）とを比較し、より大きい値となっている側を調整対象とするとの条件でよい。具体的な例として、Ｔmax（ｋ）−Ｔmin（ｋ）＜Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）であれば、ｋ＋１番目を調整対象として、Ｔmin（ｋ＋１）をＴmax（ｋ）に設定して、同期情報を変更することとしてもよい。
【００４６】
また、
（２）Ｔmax（ｋ）＞Ｔmin（ｋ＋１）である場合、つまり、隣接する２つの期間の間に空隙が生じている場合も、Ｔmax（ｋ）を、Ｔmin（ｋ＋１）に設定して、同期情報を変更して調整を行ってもよい。また逆に、Ｔmin（ｋ＋１）をＴmax（ｋ）に設定して、同期情報を変更して調整を行ってもよい。また、これらのうち、どちらの調整方法を採用するかを、所定の条件によって定め、定めた調整方法によって調整を行ってもよい。この所定条件は、例えば、ｋ番目のＴmin（以下Ｔmin（ｋ）と表記する）を用いて、Ｔmax（ｋ）−Ｔmin（ｋ）と、Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）とを比較し、より小さい値となっている側を調整対象とするとの条件でよい。具体的な例として、Ｔmax（ｋ）−Ｔmin（ｋ）＜Ｔmax（ｋ＋１）−Ｔmin（ｋ＋１）であれば、ｋ番目を調整対象として、Ｔmax（ｋ）をＴmin（ｋ＋１）に設定して、同期情報を変更することとしてもよい。
【００４７】
さらに最後に提示されるべき文書情報のＴmaxが、動的情報の再生終了時刻Ｔendよりも、時間的に先行する場合（Ｔmax＜Ｔend）は、制御部１１は、Ｔmax＝Ｔendとして同期情報を変更してもよい。
【００４８】
本実施の形態の情報処理装置は、その一例の動作としては、図８に示すように、処理の対象となった動的情報に同期させて提示されるべき文書情報の一つを注目文書情報として選択し、当該注目文書情報に含まれる単語を抽出する（Ｓ４１）。次に、この抽出した単語が発話されている箇所（時刻）を動的情報から検索する（Ｓ４２）。そして、例えば１分以内の間隔で連続的に発話されている箇所を特定し、当該特定した時間帯と注目文書情報（例えば「スライド第１ページ」等の情報）を特定する情報とを関連づけて記録する（Ｓ４３）。他の文書情報についても同様の処理を行った後、利用者にこの記録を提示する。利用者は、提示された記録を参照して、必要に応じて調整等の作業を行い、ストレージ部１５等に同期情報として格納することになる。
【００４９】
また、制御部１１は、ネットワーク等の通信手段を介して接続されたクライアント装置に対して、広く知られたストリーミング技術を用いて動的情報を配信しつつ、その配信開始時点から、上記記録された時間帯において、当該時間帯の情報に関連づけられた情報で特定される文書情報を併せて配信し、クライアント装置側で表示させるよう制御する処理を行ってもよい。
【００５０】
また、本実施の形態の情報処理装置は、その別の動作例としては、図９に示すように、処理の対象となった動的情報に同期させて提示されるべき文書情報を順次注目文書情報として選択しつつ、各注目文書情報に含まれる単語を抽出する（Ｓ５１）。次に、その一つを再度注目文書情報として選択し、注目文書情報から抽出された単語のうち、注目文書情報以外の文書情報から抽出された単語と共通している単語を除去する（Ｓ５２）。そしてこうして得られた、注目文書情報に固有の文字列（ユニークテキスト）が発話されている箇所（時刻）を動的情報から検索する（Ｓ５３）。さらに例えば１分以内の間隔で連続的に発話されている箇所を特定し、当該特定した時間帯と注目文書情報（例えば「スライド第１ページ」等の情報）を特定する情報とを関連づけて記録する（Ｓ５４）。他の文書情報についても同様の処理を行った後、利用者にこの記録を提示する。利用者は、提示された記録を参照して、必要に応じて調整等の作業を行い、ストレージ部１５等に同期情報として格納することになる。
【００５１】
なお、動的情報を、再生時間の経過に従って複数の区間に区切り、各区間において、各注目文章情報から抽出した単語の含まれる総数を算出しておき、この総数が予め定めたしきい値を超えている区間を動的情報から選択的に抽出することで、動的情報の要約情報を生成してもよい。
【図面の簡単な説明】
【００５２】
【図１】本発明の一実施の形態に係る情報処理装置の例を表す構成ブロック図である。
【図２】本発明の一実施の形態に係る情報処理装置の例を表す機能ブロック図である。
【図３】本発明の一実施の形態に係る情報処理装置の動作例の概念図である。
【図４】本発明の一実施の形態に係る情報処理装置の動作例を表すフローチャート図である。
【図５】本発明の一実施の形態に係る情報処理装置が生成する情報の例を表す説明図である。
【図６】本発明の一実施の形態に係る情報処理装置の動作の一例を表すフローチャート図である。
【図７】本発明の一実施の形態に係る情報処理装置の動作の別の例を表すフローチャート図である。
【図８】本発明の一実施の形態に係る情報処理装置の動作の流れの例を表す流れ図である。
【図９】本発明の一実施の形態に係る情報処理装置の動作の流れの別の例を表す流れ図である。
【符号の説明】
【００５３】
１１ 制御部、１２ 記憶部、１３ 操作部、１４ 表示部、１５ ストレージ部、１６ 通信部、２１ 文書情報取得部、２２ 動的情報取得部、２３ 文字列抽出部、２４ 音声検索部、２５ 部分選択部、２６ 選抜部。
【特許請求の範囲】
【請求項１】
時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得する手段と、
前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する文字列抽出手段と、
前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する部分選択手段と、
を含むことを特徴とする情報処理装置。
【請求項２】
前記部分選択手段によって選択される部分が、前記動的情報において出現する時点の分布の特性に基づいて、前記選択された部分の一部をさらに選抜する選抜手段、
をさらに含むことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記文字列抽出手段は、検索の対象となる文字列のうち、前記複数の文書情報に共通して含まれる文字列以外の文字列を選択して抽出することを特徴とする請求項１または２に記載の情報処理装置。
【請求項４】
コンピュータに、
時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する音声を含んだ動的情報とを取得する手順と、
前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する手順と、
前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する手順と、
を実行させることを特徴とするプログラム。
【請求項１】
時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する、音声を含んだ動的情報とを取得する手段と、
前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する文字列抽出手段と、
前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する部分選択手段と、
を含むことを特徴とする情報処理装置。
【請求項２】
前記部分選択手段によって選択される部分が、前記動的情報において出現する時点の分布の特性に基づいて、前記選択された部分の一部をさらに選抜する選抜手段、
をさらに含むことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記文字列抽出手段は、検索の対象となる文字列のうち、前記複数の文書情報に共通して含まれる文字列以外の文字列を選択して抽出することを特徴とする請求項１または２に記載の情報処理装置。
【請求項４】
コンピュータに、
時系列に提示される複数の文書情報と、前記文書情報と関係して、時系列に変化する音声を含んだ動的情報とを取得する手順と、
前記複数の文書情報に含まれる文字列のうち、検索の対象となる文字列を、選択的に抽出する手順と、
前記動的情報に含まれる音声において、前記文字列抽出手段で抽出された、検索の対象となる少なくとも一つの文字列を発話している部分を選択する手順と、
を実行させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２００８−５９３４３（Ｐ２００８−５９３４３Ａ）
【公開日】平成２０年３月１３日（２００８．３．１３）
【国際特許分類】
【出願番号】特願２００６−２３６３８７（Ｐ２００６−２３６３８７）
【出願日】平成１８年８月３１日（２００６．８．３１）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２０年３月１３日（２００８．３．１３）
【国際特許分類】
【出願日】平成１８年８月３１日（２００６．８．３１）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]