情報を提示する装置と方法及びその提示情報を作成する装置と方法
【課題】健聴者及び聴覚障害者の双方が情報内容を簡単かつ迅速にしかも正確に把握できるようにする。
【解決手段】入力制御部１０２により文章データを受信した場合に、当該文章データをキーワード抽出部１０３により形態素解析してキーワードを抽出し、この抽出したキーワードをもとに箇条書きテキスト記憶部１１０から対応する箇条書きテキストデータを取得すると共に、断片手話データ記憶部１２０から対応する断片手話映像データを取得する。そして、上記取得した箇条書きテキストデータ及び断片手話映像データを、提示テンプレート記憶部１３０から取得した提示テンプレートのレイアウトに従い合成して提示情報コンテンツを作成し、この提示情報コンテンツを出力制御部１０５により表示装置１０６に表示させる。
【解決手段】入力制御部１０２により文章データを受信した場合に、当該文章データをキーワード抽出部１０３により形態素解析してキーワードを抽出し、この抽出したキーワードをもとに箇条書きテキスト記憶部１１０から対応する箇条書きテキストデータを取得すると共に、断片手話データ記憶部１２０から対応する断片手話映像データを取得する。そして、上記取得した箇条書きテキストデータ及び断片手話映像データを、提示テンプレート記憶部１３０から取得した提示テンプレートのレイアウトに従い合成して提示情報コンテンツを作成し、この提示情報コンテンツを出力制御部１０５により表示装置１０６に表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えば緊急情報を視覚的に提示するための装置と方法、及びその提示情報を作成するための装置と方法に関する。
【背景技術】
【０００２】
例えば、大規模地震等の災害発生時や交通機関の障害発生時において、災害又は障害の状況及び避難方法等の緊急情報を、公共空間でユーザに迅速かつ正確に知らせることは、被害を最小限に抑える上で重要な社会的課題となっている。公共空間での緊急情報の報知手段としては音声アナウンスを用いたものが一般的である。しかし、音声アナウンスを用いた報知手段では、難聴者や聾者等の聴覚障害者に対して情報を知らせることができず、また周辺雑音が大きい環境下においては健聴者であっても情報を聞き取りにくく有効性が低い。
【０００３】
そこで、従来では視覚表示装置を用いた情報報知手段が多く用いられている。この視覚による情報提示手段としては、例えば電光掲示板にテロップを流すものや、グラフィックディスプレイ上にテキスト文書を表示するものが一般的である。また、聴覚障害者向けの情報提示手段として、音声処理と自然言語処理を利用することで入力音声に対する字幕を制作して表示する技術（例えば、非特許文献１を参照）や、３次元コンピュータグラフィックス技術を利用することによりリアルタイムに手話アニメーションを合成して表示する技術（例えば、非特許文献２を参照）が知られている。
【０００４】
【非特許文献１】「聴覚障害者向け字幕付きテレビ番組の自動制作システム」 電子情報通信学会論文誌 Ｄ−ＩＩ Vol.J84-D-II No.6 pp.888-897 ２００１年６月
【０００５】
【非特許文献２】「リアルタイム手話アニメーションの合成方法」 電子情報通信学会論文誌 Ｄ−ＩＩ Vol.J79-D-II No.2 pp.182-190 １９９６年２月
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところが、前記従来の情報提示手段では、入力音声に応じて字幕が長文になり易く、情報内容を把握するには表示された文章を最初から最後まで読み取らなければならないため、情報内容の把握に時間がかかる。特に、９歳前に聴覚を失って手話を母語とする聴覚障害者にとっては、例えばテロップ表示される長文の文章を迅速に読み下して内容を理解することが容易ではなかった。
【０００７】
一方、手話により直接表現することが可能な語句の数は一般に少ない。このため、リアルタイムに手話アニメーションを合成して表示する手段では、緊急情報の内容を正確に伝えることが難しい。また、手話を未習得の健聴者では理解することができないと云う課題があった。
【０００８】
この発明は上記事情に着目してなされたもので、その目的とするところは、健聴者及び聴覚障害者の双方が情報内容を簡単かつ迅速にしかも正確に把握できるようにした情報提示装置と方法と、及びその提示情報を作成する装置と方法を提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するためにこの発明に係わる情報提示装置と方法は、次のような手段又は過程を備えたものである。すなわち、先ず入力インタフェースにより文章データを受け取って、当該文章データを解析処理することにより当該文書データに含まれるキーワードを抽出する。次に、予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する箇条書きテキストデータを検索すると共に、上記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表現する断片手話データを記憶した第２の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する断片手話データを検索する。そして、この検索された箇条書きテキストデータと断片手話データを相互に対応付けて合成処理して情報提示コンテンツを生成し、この生成された情報提示コンテンツを視覚的に提示するべく出力するようにしたものである。
【００１０】
すなわち、入力された文章データから抽出されたキーワードに対応する箇条書きテキストデータと、当該キーワードの内容を断片的な手話映像により表現する断片手話データとが記憶装置からそれぞれ読み出される。そして、これらが相互に対応付けられた状態で合成され、この合成処理により作成された情報提示コンテンツがユーザに対し視覚的に提示される。
したがって、聴覚障害者は断片手話映像とそれに対応付けられて提示される箇条書きテキストとにより、提示情報の内容を簡単かつ迅速にしかも要点を正確に把握することが可能となる。また、断片手話映像と共に箇条書きテキストが提示されるため、健聴者も提示情報の内容を簡単かつ迅速に把握することができる。
【００１１】
一方、この発明に係わる提示情報作成装置及び方法は、次のような手段又は過程を備えたものである。すなわち、先ず入力インタフェースにより文章データを受け取って、当該文章データを解析処理することにより当該文書データに含まれるキーワードを抽出する。次に、予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する箇条書きテキストデータを検索すると共に、上記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表現する断片手話データを記憶した第２の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する断片手話データを検索する。そして、この検索された箇条書きテキストデータと断片手話データを相互に対応付けて合成処理して情報提示コンテンツを生成する。
したがって、特に聴覚障害者が簡単かつ迅速に情報内容を把握することが可能で、しかも健聴者にとっても情報内容を把握することが可能な提示情報コンテンツを生成することができる。
【発明の効果】
【００１２】
要するにこの発明によれば、健聴者及び聴覚障害者の双方が情報内容を簡単かつ迅速にしかも正確に把握できるようにした情報提示装置と方法と、及びその提示情報を作成する装置と方法を提供することができる。
【発明を実施するための最良の形態】
【００１３】
以下、図面を参照してこの発明に係わる実施形態を説明する。
図１は、この発明に係わる情報提示装置の一実施形態を示すブロック図である。情報提示装置１００は、入力制御部１０２と、キーワード抽出部１０３と、主制御部１０４と、出力制御部１０５とを備えている。このうち、入力制御部１０２と、キーワード抽出部１０３と、主制御部１０４は提示情報作成装置を構成する。
【００１４】
入力制御部１０２は、情報入力装置１０１から出力された文章データを取り込んでキーワード抽出部１０３に与える。情報入力装置１０１は、例えば話者によりアナウンスされた音声信号を音声認識してテキストからなる文章データに変換する装置からなる。なお、情報入力装置１０１としては手書きの文章をスキャナにより光学的に読み取ってテキストからなる文章データに変換するものや、文章作成機能を有するパーソナル・コンピュータでもよい。
【００１５】
キーワード抽出部１０３は例えばＤＳＰ（Digital Signal Processor）とバッファメモリにより構成され、上記入力制御部１０２から送られた文章データをバッファメモリに一時記憶したのち、ＤＳＰにより形態素解析等の文章解析手法を用いて上記文書データを解析処理し、これにより上記文章データに含まれるキーワードを抽出する。このキーワード抽出部１０３により抽出されたキーワードのデータは主制御部１０４内のバッファメモリに一時記憶される。
【００１６】
主制御部１０４は例えばコンピュータにより構成され、情報箇条書きテキスト記憶部１１０と、箇条書きテキスト取得部１１１と、断片手話データ記憶部１２０と、断片手話データ取得部１２１と、提示テンプレート記憶部１３０と、提示テンプレート取得部１３１と、リスト手話合成部１４０とを備えている。このうち、情報箇条書きテキスト記憶部１１０、断片手話データ記憶部１２０及び提示テンプレート記憶部１３０は、記憶媒体としてハードディスク又はフラッシュメモリ等を用いた記憶装置により構成される。
【００１７】
一方、上記箇条書きテキスト取得部１１１、断片手話データ取得部１２１、提示テンプレート取得部１３１及びリスト手話合成部１４０はいずれも、図示しないプログラムメモリに格納されたアプリケーション・プログラムを中央処理ユニット（ＣＰＵ；Central Processing Unit）に実行させることにより実現される。
【００１８】
情報箇条書きテキスト記憶部１１０には、予め設定された項目区分に対応付けて箇条書きテキストのデータが格納されている。例えば、列車の運行状況に関する情報を提示する場合には、図２に示すように「事象」、「原因」、「路線」、「区間」、「復旧時刻」及び「代替輸送機関」に区分された各項目２０１にそれぞれ対応付けて、箇条書きテキストデータ２０２が記憶される。この箇条書きテキストデータは、短文により要点のみを簡潔にまとめたテキストデータである。
【００１９】
断片手話データ記憶部１２０は、断片手話インデックス記憶部と、断片手話映像記憶部とから構成される。断片手話インデックス記憶部は、予め設定された項目区分に対応付けて箇条書きテキストと、当該箇条書きテキストと断片手話映像データとを対応付けるためのインデックスデータが記憶される。例えば、先に述べたように列車の運行状況に関する情報を提示する場合には、図３に示すように「事象」、「原因」、「路線」、「区間」、「復旧時刻」及び「代替輸送機関」に区分された各項目３０１に対応付けて、箇条書きテキストのデータ２０２と、インデックスデータ３０３が記憶される。
【００２０】
断片手話映像記憶部には、例えば図４に示すように、上記インデックスデータ３０３に対応付けて、断片手話映像データ３０４と、断片手話表現データ３０５が記憶される。断片手話映像データ３０４は、対応する箇条書きテキストで表される内容を手話通訳者が実演により手話で表現したときの姿を撮像したものである。断片手話表現データ３０５は、上記箇条書きテキストに対応する３次元コンピュータグラフィックスの断片手話アニメーション画像を作成するために必要なコードデータからなる。
【００２１】
提示テンプレート記憶部１３０には、後述するリスト手話合成部１４０がリスト手話データを合成する際に用いる提示テンプレートの画像データが、提示情報の種類に対応して複数種類記憶されている。提示テンプレート取得部１３１は、リスト手話合成部１４０の指示に従い、上記提示テンプレート記憶部１３０から提示情報の種類に対応する提示テンプレートの画像データを読み出してリスト手話合成部１４０に与える。
【００２２】
箇条書きテキスト取得部１１１は、上記キーワード抽出部１０３から抽出されたキーワードを受け取り、このキーワードをもとに上記箇条書きテキスト記憶部１１０を検索して、当該キーワードに対応する項目区分と箇条書きテキストデータを選択的に読み出す。そして、この読み出した項目区分と、箇条書きテキストデータとからなる情報セットをリスト手話合成部１４０に送る。
【００２３】
断片手話データ取得部１２１は、上記キーワード抽出部１０３から抽出されたキーワードを受け取り、先ずこのキーワードをもとに上記断片手話データ記憶部１２０の断片手話インデックス記憶部を検索して、当該キーワードに対応する項目区分と箇条書きテキストデータとインデックスデータを選択的に読み出す。次に、この読み出したインデックスデータをもとに上記断片手話データ記憶部１２０の断片手話映像記憶部を検索して、当該インデックスデータに対応する断片手話映像データを読み出す。また、対応する断片手話映像データが記憶されていなかった場合には、代わりに対応する断片手話表現データを読み出す。そして、上記読み出した項目区分と、箇条書きテキストデータと、断片手話映像データ又は断片手話表現データからなる情報セットをリスト手話合成部１４０に送る。
【００２４】
リスト手話合成部１４０は、上記箇条書きテキスト取得部１１１及び断片手話データ取得部１２１から送られた情報セットを、上記展示テンプレート取得部１３１から送られた提示テンプレートにより指定されるレイアウトに従い合成して提示コンテンツデータを作成する。なお、断片手話データ取得部１２１から送られた情報セットに断片手話表現データが含まれていた場合には、この断片手話表現データに基づいて３次元コンピュータグラフィックスによる断片手話アニメーション画像を生成し、断片手話映像データに代えてこの３次元コンピュータグラフィックスの断片手話アニメーション画像を合成する。
【００２５】
出力制御部１０５は、例えばＬＥＤ（Light Emitting Diode）マトリクスを使用した表示装置１０６を駆動する表示ドライバからなり、上記リスト手話合成部１４０により作成された情報提示コンテンツデータを上記表示装置１０６に供給して表示させる。なお、表示装置１０６としては液晶ディスプレイ、プラズマディスプレイ又はＣＲＴ（Cathode Lay Tube）を使用したテレビジョンモニタを使用することも可能であり、この場合出力制御部１０にはテレビジョンモニタ用のドライバが用いられる。
【００２６】
次に、以上のように構成された情報提示装置１００の動作を説明する。図５及び図６はその制御手順と制御内容を示すフローチャートである。
情報提示装置１００は、待機状態においてステップＳ５１において文章データの入力を監視している。この状態で、いま情報入力装置１０１において、例えば
「○○線は１３時１０頃に発生した信号機故障の影響により、東京−横浜間で列車運行を休止しています。」
と云った音声アナウンスが入力されたとする。そうすると、このアナウンスの音声信号は情報入力装置１０１により音声認識されてテキストからなる文章データに変換され、入力制御部１０２に入力される。入力制御部１０２は、上記入力された音声アナウンスに対応する文章データを受信すると、この受信された文章データをキーワード抽出部１０３に転送する。
【００２７】
キーワード抽出部１０３は、ステップＳ５２において、上記転送された文章データに対し例えば形態素解析を行い、その解析結果に基づいてステップＳ５３により上記入力された文章データに含まれるキーワードを抽出する。図７はその処理の一例を示すもので、先ず入力された文章データに対し（１）で形態素解析を行って文章データを（２）に示すように複数の形態素に分離する。次に、（３）において上記形態素の中からキーワードの抽出を行う。このキーワードの抽出処理では、固有名詞等のようにそれのみで意味を持つ語句が抽出される。例えば、図７（４）に示すように「○○線」、「１３時１０分頃」、「信号機故障」、「東京」、「横浜」、「列車運行」、「停止」がそれぞれ抽出される。
【００２８】
次に情報提示装置１００はステップＳ５４に移行し、箇条書きテキスト取得部１１１により箇条書きテキスト記憶部１１０を検索して、上記抽出されたキーワードに対応する項目区分と箇条書きテキストデータの情報セットを読み出す（図７に示す（５））。例えば、図７の（４）に示すキーワードに対しては、その項目区分と図２の破線で囲った箇条書きテキストデータが読み出される。そして、この読み出された項目区分と箇条書きテキストデータとからなる情報セットはリスト手話合成部１４０に転送される。
【００２９】
続いて情報提示装置１００はステップＳ５５に移行し、断片手話データ取得部１２１により断片手話データ記憶部１２０の検索処理を次のように実行する。すなわち、先ずステップＳ５５１によりキーワードをもとに上記断片手話データ記憶部１２０の断片手話インデックス記憶部を検索して、当該キーワードに対応する項目区分と箇条書きテキストデータとインデックスデータを選択的に読み出す。この結果、例えば図３に示すように、キーワードが「運休」であればインデックスデータとして「Ａ００２」が、また「信号機故障」であれば「Ｂ００１」がそれぞれ読み出される。
【００３０】
次に情報提示装置１００の断片手話データ取得部１２１は、ステップＳ５５２において、上記読み出したインデックスデータをもとに断片手話データ記憶部１２０の断片手話映像記憶部を検索して、当該インデックスデータに対応する断片手話映像データを読み出す。この結果、例えば図４に示すように、インデックスデータ「Ａ００２」であれば断片手話映像データ「Ｐａ００２」が、またインデックスデータ「Ｂ００１」であれば断片手話映像データ「Ｐｂ００１」がそれぞれ読み出される。
【００３１】
またこのとき、対応する断片手話映像データが断片手話映像記憶部に記憶されていたか否かをステップＳ５５３で判定する。そして、記憶されていなかった場合には、ステップＳ５５４により上記断片手話映像記憶部を再度検索して、上記インデックスデータに対応する断片手話表現データを読み出す。例えば、図４に示す例ではインデックスデータ「Ｂ００２」に対応する断片手話映像データは記憶されていないので、この場合にはインデックスデータ「Ｂ００２」に対応する断片手話表現データ「Ｇｂ００２」が読み出される。インデックスデータ「Ｄ００１」の場合も同様に、断片手話映像データに代わって断片手話表現データ「Ｇｄ００１」が読み出される。
以上の断片手話データ記憶部１２０から読み出された、項目区分と箇条書きテキストデータと断片手話映像データ又は断片手話表現データとからなる情報セットは、リスト手話合成部１４０に送られる。
【００３２】
情報提示装置１００は、上記抽出されたすべてのキーワードに対応する箇条書きテキストデータと、断片手話映像データ又は断片手話表現データの検索処理を繰り返し実行する。そして、上記すべてのキーワードに対応する検索処理が終了したことをステップＳ５６により検出すると、情報提示装置１００はステップＳ５７に移行し、提示テンプレート取得部１３１により提示テンプレート記憶部１３０を検索して、前記抽出されたキーワードに対応する提示テンプレートを取得する。例えば、図７に示したように抽出されたキーワードが交通機関の運転状況に関するものであれば、交通機関用の提示テンプレートを提示テンプレート記憶部１３０から読み出す。
【００３３】
次に情報提示装置１００は、リスト手話合成部１４０において、上記箇条書きテキスト取得部１１１及び断片手話データ取得部１２１から送られた情報セットを、上記展示テンプレート取得部１３１により取得された提示テンプレートにより指定されるレイアウトに従い合成して、提示コンテンツデータを作成する処理を、以下のように実行する。
【００３４】
すなわち、先ずステップＳ６１により、上記断片手話データ取得部１２１から送られた情報セットに含まれるデータが断片手話映像データであるか断片手話表現データであるかを判定する。この判定の結果、断片手話表現データであれば、ステップＳ６２により当該断片手話表現データをもとに３次元コンピュータグラフィックスによる断片手話アニメーション画像を生成する。次にステップＳ６３において、上記提示テンプレートにより指定されるレイアウトに従い、各項目区分の箇条書きテキストデータと、上記断片手話映像データ又は上記断片手話アニメーション画像データとを合成する。
【００３５】
例えば、提示テンプレートが図８に示されるものであれば、テンプレートの左半分側の箇条書きテキスト提示領域４０１に、「運転再開予定」、「代替輸送」、「原因」、「路線」、「区間」の項目に対応付けてそれぞれ箇条書きテキストデータが配置される。また、テンプレートの右半分側の断片手話提示領域４０２に、上記断片手話映像データ又は上記３次元コンピュータグラフィックスの断片手話アニメーション画像が配置される。図９は、以上のような合成処理により作成された、リスト手話による情報提示コンテンツ画像の一例を示すものである。なお、同図では断片手話提示領域４０２に３次元コンピュータグラフィックスの断片手話アニメーション画像データを合成した場合を例示している。
【００３６】
最後に情報提示装置１００はステップＳ６４に移行し、出力制御部１０５により、上記リスト手話合成部１４０により作成された情報提示コンテンツ画像を表示装置１０６へ送信し、この表示装置１０６に表示させる。この表示処理は１回だけでもよいが、一定の時間間隔で複数回繰り返し行ってもよい。
【００３７】
以上述べたようにこの実施形態に係わる情報提示装置１００では、入力制御部１０２で文章データを受信すると、当該文章データをキーワード抽出部１０３により形態素解析してキーワードを抽出し、この抽出したキーワードをもとに箇条書きテキスト取得部１１１により箇条書きテキスト記憶部１１０を検索して対応する箇条書きテキストデータを取得すると共に、断片手話データ取得部１２１により断片手話データ記憶部１２０を検索して対応する断片手話映像データを取得する。そして、上記取得した箇条書きテキストデータ及び断片手話映像データを、提示テンプレート取得部１３１により提示テンプレート記憶部１３０から取得した提示テンプレートのレイアウトに従い合成して提示情報コンテンツを作成し、この提示情報コンテンツを出力制御部１０５により表示装置１０６に表示させるようにしている。
【００３８】
したがって、聴覚障害者は断片手話映像とそれに対応付けられて提示される箇条書きテキストとにより、提示情報の内容を簡単かつ迅速にしかも要点を正確に把握することが可能となる。また、断片手話映像と共に箇条書きテキストが提示されるため、健聴者も提示情報の内容を簡単かつ迅速に把握することができる。
【００３９】
また、断片手話データ記憶部１２０から断片手話映像データを取得する際に、断片手話映像データが断片手話映像記憶部に記憶されているか否かを判定し、記憶されていなかった場合に上記断片手話映像記憶部を再度検索して対応する断片手話表現データを読み出す。そして、情報提示コンテンツを作成する際に、上記断片手話表現データをもとに３次元コンピュータグラフィックスの断片手話アニメーション画像を生成し、上記断片手話映像データの代わりにこの断片手話アニメーション画像データを合成するようにしている。したがって、例えば断片手話映像データが記憶されていない場合でも、手話画像を表示させることができる。
【００４０】
図１０は、本発明による箇条書きテキストデータと断片手話映像データとを並べて表示するリスト手話方式に対する聴覚障害者及び手話通訳者の評価結果を、従来の長文の文章をそのままテロップ表示する情報提示方式と比較して示したものである。同図から明らかなように、本発明によるリスト手話方式では、有効性、理解容易性、迅速性、正確性のいずれの指標についても、従来方式より優れているとの評価（１％の有意水準／Ｎ＝１７））が得られた。
【００４１】
なお、この発明は上記実施形態に限定されるものではない。例えば、前記実施形態では情報提示装置１００の断片手話データ記憶部１２０を断片手話インデックス記憶部と断片手話映像記憶部により構成した場合を例にとって説明した。しかし、それに限定されるものではなく、例えば図１１に示すように、区分された各項目３０１に対応付けて、箇条書きテキストデータ３０２と、断片手話映像データ３０４と、断片手話表現データ３０５をそれぞれ記憶したものとしてもよい。
【００４２】
また必ずしも断片手話映像データ３０４と断片手話表現データ３０５の両方を記憶させる必要はなく、３次元コンピュータグラフィックスによる断片手話アニメーション画像を表示しない場合には手話翻訳者を撮像した断片手話映像のデータ３０４のみを記憶させ、一方手話翻訳者を撮像した断片手話映像データ３０４を用意できない場合には断片手話表現データ３０５のみを記憶させるようにすればよい。
【００４３】
さらに、前記実施形態では箇条書きテキスト記憶部１１０及び断片手話データ記憶部１２０を情報提示装置内に設けた場合を例にとって説明した。しかし、それに限定されるものではなく、箇条書きテキスト記憶部１１０及び断片手話データ記憶部１２０をそれぞれ情報提示装置とは別に設けられた蓄積サーバ等に設け、情報提示装置と上記箇条書きテキスト記憶部１１０及び断片手話データ記憶部１２０との間をＬＡＮ（Local Area Network）やＩＰ（Internet Protocol）網等のネットワークを介して接続して情報セットを取得するようにしてもよい。
【００４４】
さらに、項目区分は図２及び図３に示すものに限定されるものではなく、それら以外にも適用対象に応じて柔軟に設定することが可能である。また、提示テンプレートのレイアウトは図８に示すように箇条書きテキスト提示領域４０１を画面の左側に、断片手話提示領域４０２を画面の右側に設定するものに限定されるものではなく、用途や利用者に合わせて適宜変更してもよい。さらに情報提示テンプレートは、常に予め決められた一つのテンプレートを用いるようにしてもよいし、例えば提示情報の種類や項目区分の数に応じて異なるテンプレートを選択して用いるようにしてもよい。
【００４５】
さらに、提示テンプレートの断片手話提示領域４０２に表示する断片手話映像又は断片手話アニメーション画像は、動画像や準動画像、静止画像のいずれでもよく、また複数の断片手話映像データを合成する際には、例えば時間的に先に表示する断片手話映像の最後の手の位置と次に表示する断片手話映像の最初の手の位置とが異なっている場合に、これらの手の位置が連続的に自然に変化するように見えるように、必要に応じて映像の追加や加工を行ってもよい。
【００４６】
さらに、提示情報の種類としては交通機関の運行状況に関する情報以外に、地震や台風、大雨、洪水等の天災に関する情報、政治、経済、芸能、スポーツなどに関する情報であってもよく、その他情報提示装置の構成や提示情報の作成制御手順と制御内容、提示情報のレイアウト等についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
【００４７】
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００４８】
【図１】この発明の一実施形態に係わる情報提示装置の構成を示すブロック図である。
【図２】図１に示した情報提示装置の箇条書きテキスト記憶部に記憶される箇条書きテキストの一例を示す図である。
【図３】図１に示した情報提示装置の断片手話データ記憶部を構成する断片手話インデックス記憶部と断片手話映像記憶部のうち、断片手話インデックス記憶部に記憶されるインデックスデータの一例を示す図である。
【図４】図１に示した情報提示装置の断片手話データ記憶部を構成する断片手話インデックス記憶部と断片手話映像記憶部のうち、断片手話映像記憶部に記憶される断片手話映像データ及び断片手話表現データの一例を示す図である。
【図５】図１に示した情報提示装置による提示情報作成及び表示制御の手順と内容の前半部分を示すフローチャートである。
【図６】図１に示した情報提示装置による提示情報作成及び表示制御の手順と内容の後半部分を示すフローチャートである。
【図７】図１に示した情報提示装置のキーワード抽出部によるキーワード抽出処理の手順と内容を示す図である。
【図８】図１に示した情報提示装置の提示テンプレート取得部において生成される提示テンプレートの一例を示す図である。
【図９】図１に示した情報提示装置のリスト手話合成部で作成される提示情報の一例を示す図である。
【図１０】この発明の効果を説明するためのグラフである。
【図１１】この発明の他の実施形態における断片手話データ記憶部に記憶されるデータの一例を示す図である。
【符号の説明】
【００４９】
１００…情報提示装置、１０１…情報入力装置、１０２…入力制御部、１０３…キーワード抽出部、１０４…主制御部、１０５…出力制御部、１０６…表示装置、１１０…箇条書きテキスト記憶部、１１１…箇条書きテキスト取得部、１２０…断片手話データ記憶部、１２１…断片手話データ取得部、１３０…提示テンプレート記憶部、１３１…提示テンプレート取得部、１４０…リスト手話合成部。
【技術分野】
【０００１】
この発明は、例えば緊急情報を視覚的に提示するための装置と方法、及びその提示情報を作成するための装置と方法に関する。
【背景技術】
【０００２】
例えば、大規模地震等の災害発生時や交通機関の障害発生時において、災害又は障害の状況及び避難方法等の緊急情報を、公共空間でユーザに迅速かつ正確に知らせることは、被害を最小限に抑える上で重要な社会的課題となっている。公共空間での緊急情報の報知手段としては音声アナウンスを用いたものが一般的である。しかし、音声アナウンスを用いた報知手段では、難聴者や聾者等の聴覚障害者に対して情報を知らせることができず、また周辺雑音が大きい環境下においては健聴者であっても情報を聞き取りにくく有効性が低い。
【０００３】
そこで、従来では視覚表示装置を用いた情報報知手段が多く用いられている。この視覚による情報提示手段としては、例えば電光掲示板にテロップを流すものや、グラフィックディスプレイ上にテキスト文書を表示するものが一般的である。また、聴覚障害者向けの情報提示手段として、音声処理と自然言語処理を利用することで入力音声に対する字幕を制作して表示する技術（例えば、非特許文献１を参照）や、３次元コンピュータグラフィックス技術を利用することによりリアルタイムに手話アニメーションを合成して表示する技術（例えば、非特許文献２を参照）が知られている。
【０００４】
【非特許文献１】「聴覚障害者向け字幕付きテレビ番組の自動制作システム」 電子情報通信学会論文誌 Ｄ−ＩＩ Vol.J84-D-II No.6 pp.888-897 ２００１年６月
【０００５】
【非特許文献２】「リアルタイム手話アニメーションの合成方法」 電子情報通信学会論文誌 Ｄ−ＩＩ Vol.J79-D-II No.2 pp.182-190 １９９６年２月
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところが、前記従来の情報提示手段では、入力音声に応じて字幕が長文になり易く、情報内容を把握するには表示された文章を最初から最後まで読み取らなければならないため、情報内容の把握に時間がかかる。特に、９歳前に聴覚を失って手話を母語とする聴覚障害者にとっては、例えばテロップ表示される長文の文章を迅速に読み下して内容を理解することが容易ではなかった。
【０００７】
一方、手話により直接表現することが可能な語句の数は一般に少ない。このため、リアルタイムに手話アニメーションを合成して表示する手段では、緊急情報の内容を正確に伝えることが難しい。また、手話を未習得の健聴者では理解することができないと云う課題があった。
【０００８】
この発明は上記事情に着目してなされたもので、その目的とするところは、健聴者及び聴覚障害者の双方が情報内容を簡単かつ迅速にしかも正確に把握できるようにした情報提示装置と方法と、及びその提示情報を作成する装置と方法を提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するためにこの発明に係わる情報提示装置と方法は、次のような手段又は過程を備えたものである。すなわち、先ず入力インタフェースにより文章データを受け取って、当該文章データを解析処理することにより当該文書データに含まれるキーワードを抽出する。次に、予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する箇条書きテキストデータを検索すると共に、上記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表現する断片手話データを記憶した第２の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する断片手話データを検索する。そして、この検索された箇条書きテキストデータと断片手話データを相互に対応付けて合成処理して情報提示コンテンツを生成し、この生成された情報提示コンテンツを視覚的に提示するべく出力するようにしたものである。
【００１０】
すなわち、入力された文章データから抽出されたキーワードに対応する箇条書きテキストデータと、当該キーワードの内容を断片的な手話映像により表現する断片手話データとが記憶装置からそれぞれ読み出される。そして、これらが相互に対応付けられた状態で合成され、この合成処理により作成された情報提示コンテンツがユーザに対し視覚的に提示される。
したがって、聴覚障害者は断片手話映像とそれに対応付けられて提示される箇条書きテキストとにより、提示情報の内容を簡単かつ迅速にしかも要点を正確に把握することが可能となる。また、断片手話映像と共に箇条書きテキストが提示されるため、健聴者も提示情報の内容を簡単かつ迅速に把握することができる。
【００１１】
一方、この発明に係わる提示情報作成装置及び方法は、次のような手段又は過程を備えたものである。すなわち、先ず入力インタフェースにより文章データを受け取って、当該文章データを解析処理することにより当該文書データに含まれるキーワードを抽出する。次に、予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する箇条書きテキストデータを検索すると共に、上記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表現する断片手話データを記憶した第２の記憶装置に対しアクセスすることにより、上記抽出されたキーワードに対応する断片手話データを検索する。そして、この検索された箇条書きテキストデータと断片手話データを相互に対応付けて合成処理して情報提示コンテンツを生成する。
したがって、特に聴覚障害者が簡単かつ迅速に情報内容を把握することが可能で、しかも健聴者にとっても情報内容を把握することが可能な提示情報コンテンツを生成することができる。
【発明の効果】
【００１２】
要するにこの発明によれば、健聴者及び聴覚障害者の双方が情報内容を簡単かつ迅速にしかも正確に把握できるようにした情報提示装置と方法と、及びその提示情報を作成する装置と方法を提供することができる。
【発明を実施するための最良の形態】
【００１３】
以下、図面を参照してこの発明に係わる実施形態を説明する。
図１は、この発明に係わる情報提示装置の一実施形態を示すブロック図である。情報提示装置１００は、入力制御部１０２と、キーワード抽出部１０３と、主制御部１０４と、出力制御部１０５とを備えている。このうち、入力制御部１０２と、キーワード抽出部１０３と、主制御部１０４は提示情報作成装置を構成する。
【００１４】
入力制御部１０２は、情報入力装置１０１から出力された文章データを取り込んでキーワード抽出部１０３に与える。情報入力装置１０１は、例えば話者によりアナウンスされた音声信号を音声認識してテキストからなる文章データに変換する装置からなる。なお、情報入力装置１０１としては手書きの文章をスキャナにより光学的に読み取ってテキストからなる文章データに変換するものや、文章作成機能を有するパーソナル・コンピュータでもよい。
【００１５】
キーワード抽出部１０３は例えばＤＳＰ（Digital Signal Processor）とバッファメモリにより構成され、上記入力制御部１０２から送られた文章データをバッファメモリに一時記憶したのち、ＤＳＰにより形態素解析等の文章解析手法を用いて上記文書データを解析処理し、これにより上記文章データに含まれるキーワードを抽出する。このキーワード抽出部１０３により抽出されたキーワードのデータは主制御部１０４内のバッファメモリに一時記憶される。
【００１６】
主制御部１０４は例えばコンピュータにより構成され、情報箇条書きテキスト記憶部１１０と、箇条書きテキスト取得部１１１と、断片手話データ記憶部１２０と、断片手話データ取得部１２１と、提示テンプレート記憶部１３０と、提示テンプレート取得部１３１と、リスト手話合成部１４０とを備えている。このうち、情報箇条書きテキスト記憶部１１０、断片手話データ記憶部１２０及び提示テンプレート記憶部１３０は、記憶媒体としてハードディスク又はフラッシュメモリ等を用いた記憶装置により構成される。
【００１７】
一方、上記箇条書きテキスト取得部１１１、断片手話データ取得部１２１、提示テンプレート取得部１３１及びリスト手話合成部１４０はいずれも、図示しないプログラムメモリに格納されたアプリケーション・プログラムを中央処理ユニット（ＣＰＵ；Central Processing Unit）に実行させることにより実現される。
【００１８】
情報箇条書きテキスト記憶部１１０には、予め設定された項目区分に対応付けて箇条書きテキストのデータが格納されている。例えば、列車の運行状況に関する情報を提示する場合には、図２に示すように「事象」、「原因」、「路線」、「区間」、「復旧時刻」及び「代替輸送機関」に区分された各項目２０１にそれぞれ対応付けて、箇条書きテキストデータ２０２が記憶される。この箇条書きテキストデータは、短文により要点のみを簡潔にまとめたテキストデータである。
【００１９】
断片手話データ記憶部１２０は、断片手話インデックス記憶部と、断片手話映像記憶部とから構成される。断片手話インデックス記憶部は、予め設定された項目区分に対応付けて箇条書きテキストと、当該箇条書きテキストと断片手話映像データとを対応付けるためのインデックスデータが記憶される。例えば、先に述べたように列車の運行状況に関する情報を提示する場合には、図３に示すように「事象」、「原因」、「路線」、「区間」、「復旧時刻」及び「代替輸送機関」に区分された各項目３０１に対応付けて、箇条書きテキストのデータ２０２と、インデックスデータ３０３が記憶される。
【００２０】
断片手話映像記憶部には、例えば図４に示すように、上記インデックスデータ３０３に対応付けて、断片手話映像データ３０４と、断片手話表現データ３０５が記憶される。断片手話映像データ３０４は、対応する箇条書きテキストで表される内容を手話通訳者が実演により手話で表現したときの姿を撮像したものである。断片手話表現データ３０５は、上記箇条書きテキストに対応する３次元コンピュータグラフィックスの断片手話アニメーション画像を作成するために必要なコードデータからなる。
【００２１】
提示テンプレート記憶部１３０には、後述するリスト手話合成部１４０がリスト手話データを合成する際に用いる提示テンプレートの画像データが、提示情報の種類に対応して複数種類記憶されている。提示テンプレート取得部１３１は、リスト手話合成部１４０の指示に従い、上記提示テンプレート記憶部１３０から提示情報の種類に対応する提示テンプレートの画像データを読み出してリスト手話合成部１４０に与える。
【００２２】
箇条書きテキスト取得部１１１は、上記キーワード抽出部１０３から抽出されたキーワードを受け取り、このキーワードをもとに上記箇条書きテキスト記憶部１１０を検索して、当該キーワードに対応する項目区分と箇条書きテキストデータを選択的に読み出す。そして、この読み出した項目区分と、箇条書きテキストデータとからなる情報セットをリスト手話合成部１４０に送る。
【００２３】
断片手話データ取得部１２１は、上記キーワード抽出部１０３から抽出されたキーワードを受け取り、先ずこのキーワードをもとに上記断片手話データ記憶部１２０の断片手話インデックス記憶部を検索して、当該キーワードに対応する項目区分と箇条書きテキストデータとインデックスデータを選択的に読み出す。次に、この読み出したインデックスデータをもとに上記断片手話データ記憶部１２０の断片手話映像記憶部を検索して、当該インデックスデータに対応する断片手話映像データを読み出す。また、対応する断片手話映像データが記憶されていなかった場合には、代わりに対応する断片手話表現データを読み出す。そして、上記読み出した項目区分と、箇条書きテキストデータと、断片手話映像データ又は断片手話表現データからなる情報セットをリスト手話合成部１４０に送る。
【００２４】
リスト手話合成部１４０は、上記箇条書きテキスト取得部１１１及び断片手話データ取得部１２１から送られた情報セットを、上記展示テンプレート取得部１３１から送られた提示テンプレートにより指定されるレイアウトに従い合成して提示コンテンツデータを作成する。なお、断片手話データ取得部１２１から送られた情報セットに断片手話表現データが含まれていた場合には、この断片手話表現データに基づいて３次元コンピュータグラフィックスによる断片手話アニメーション画像を生成し、断片手話映像データに代えてこの３次元コンピュータグラフィックスの断片手話アニメーション画像を合成する。
【００２５】
出力制御部１０５は、例えばＬＥＤ（Light Emitting Diode）マトリクスを使用した表示装置１０６を駆動する表示ドライバからなり、上記リスト手話合成部１４０により作成された情報提示コンテンツデータを上記表示装置１０６に供給して表示させる。なお、表示装置１０６としては液晶ディスプレイ、プラズマディスプレイ又はＣＲＴ（Cathode Lay Tube）を使用したテレビジョンモニタを使用することも可能であり、この場合出力制御部１０にはテレビジョンモニタ用のドライバが用いられる。
【００２６】
次に、以上のように構成された情報提示装置１００の動作を説明する。図５及び図６はその制御手順と制御内容を示すフローチャートである。
情報提示装置１００は、待機状態においてステップＳ５１において文章データの入力を監視している。この状態で、いま情報入力装置１０１において、例えば
「○○線は１３時１０頃に発生した信号機故障の影響により、東京−横浜間で列車運行を休止しています。」
と云った音声アナウンスが入力されたとする。そうすると、このアナウンスの音声信号は情報入力装置１０１により音声認識されてテキストからなる文章データに変換され、入力制御部１０２に入力される。入力制御部１０２は、上記入力された音声アナウンスに対応する文章データを受信すると、この受信された文章データをキーワード抽出部１０３に転送する。
【００２７】
キーワード抽出部１０３は、ステップＳ５２において、上記転送された文章データに対し例えば形態素解析を行い、その解析結果に基づいてステップＳ５３により上記入力された文章データに含まれるキーワードを抽出する。図７はその処理の一例を示すもので、先ず入力された文章データに対し（１）で形態素解析を行って文章データを（２）に示すように複数の形態素に分離する。次に、（３）において上記形態素の中からキーワードの抽出を行う。このキーワードの抽出処理では、固有名詞等のようにそれのみで意味を持つ語句が抽出される。例えば、図７（４）に示すように「○○線」、「１３時１０分頃」、「信号機故障」、「東京」、「横浜」、「列車運行」、「停止」がそれぞれ抽出される。
【００２８】
次に情報提示装置１００はステップＳ５４に移行し、箇条書きテキスト取得部１１１により箇条書きテキスト記憶部１１０を検索して、上記抽出されたキーワードに対応する項目区分と箇条書きテキストデータの情報セットを読み出す（図７に示す（５））。例えば、図７の（４）に示すキーワードに対しては、その項目区分と図２の破線で囲った箇条書きテキストデータが読み出される。そして、この読み出された項目区分と箇条書きテキストデータとからなる情報セットはリスト手話合成部１４０に転送される。
【００２９】
続いて情報提示装置１００はステップＳ５５に移行し、断片手話データ取得部１２１により断片手話データ記憶部１２０の検索処理を次のように実行する。すなわち、先ずステップＳ５５１によりキーワードをもとに上記断片手話データ記憶部１２０の断片手話インデックス記憶部を検索して、当該キーワードに対応する項目区分と箇条書きテキストデータとインデックスデータを選択的に読み出す。この結果、例えば図３に示すように、キーワードが「運休」であればインデックスデータとして「Ａ００２」が、また「信号機故障」であれば「Ｂ００１」がそれぞれ読み出される。
【００３０】
次に情報提示装置１００の断片手話データ取得部１２１は、ステップＳ５５２において、上記読み出したインデックスデータをもとに断片手話データ記憶部１２０の断片手話映像記憶部を検索して、当該インデックスデータに対応する断片手話映像データを読み出す。この結果、例えば図４に示すように、インデックスデータ「Ａ００２」であれば断片手話映像データ「Ｐａ００２」が、またインデックスデータ「Ｂ００１」であれば断片手話映像データ「Ｐｂ００１」がそれぞれ読み出される。
【００３１】
またこのとき、対応する断片手話映像データが断片手話映像記憶部に記憶されていたか否かをステップＳ５５３で判定する。そして、記憶されていなかった場合には、ステップＳ５５４により上記断片手話映像記憶部を再度検索して、上記インデックスデータに対応する断片手話表現データを読み出す。例えば、図４に示す例ではインデックスデータ「Ｂ００２」に対応する断片手話映像データは記憶されていないので、この場合にはインデックスデータ「Ｂ００２」に対応する断片手話表現データ「Ｇｂ００２」が読み出される。インデックスデータ「Ｄ００１」の場合も同様に、断片手話映像データに代わって断片手話表現データ「Ｇｄ００１」が読み出される。
以上の断片手話データ記憶部１２０から読み出された、項目区分と箇条書きテキストデータと断片手話映像データ又は断片手話表現データとからなる情報セットは、リスト手話合成部１４０に送られる。
【００３２】
情報提示装置１００は、上記抽出されたすべてのキーワードに対応する箇条書きテキストデータと、断片手話映像データ又は断片手話表現データの検索処理を繰り返し実行する。そして、上記すべてのキーワードに対応する検索処理が終了したことをステップＳ５６により検出すると、情報提示装置１００はステップＳ５７に移行し、提示テンプレート取得部１３１により提示テンプレート記憶部１３０を検索して、前記抽出されたキーワードに対応する提示テンプレートを取得する。例えば、図７に示したように抽出されたキーワードが交通機関の運転状況に関するものであれば、交通機関用の提示テンプレートを提示テンプレート記憶部１３０から読み出す。
【００３３】
次に情報提示装置１００は、リスト手話合成部１４０において、上記箇条書きテキスト取得部１１１及び断片手話データ取得部１２１から送られた情報セットを、上記展示テンプレート取得部１３１により取得された提示テンプレートにより指定されるレイアウトに従い合成して、提示コンテンツデータを作成する処理を、以下のように実行する。
【００３４】
すなわち、先ずステップＳ６１により、上記断片手話データ取得部１２１から送られた情報セットに含まれるデータが断片手話映像データであるか断片手話表現データであるかを判定する。この判定の結果、断片手話表現データであれば、ステップＳ６２により当該断片手話表現データをもとに３次元コンピュータグラフィックスによる断片手話アニメーション画像を生成する。次にステップＳ６３において、上記提示テンプレートにより指定されるレイアウトに従い、各項目区分の箇条書きテキストデータと、上記断片手話映像データ又は上記断片手話アニメーション画像データとを合成する。
【００３５】
例えば、提示テンプレートが図８に示されるものであれば、テンプレートの左半分側の箇条書きテキスト提示領域４０１に、「運転再開予定」、「代替輸送」、「原因」、「路線」、「区間」の項目に対応付けてそれぞれ箇条書きテキストデータが配置される。また、テンプレートの右半分側の断片手話提示領域４０２に、上記断片手話映像データ又は上記３次元コンピュータグラフィックスの断片手話アニメーション画像が配置される。図９は、以上のような合成処理により作成された、リスト手話による情報提示コンテンツ画像の一例を示すものである。なお、同図では断片手話提示領域４０２に３次元コンピュータグラフィックスの断片手話アニメーション画像データを合成した場合を例示している。
【００３６】
最後に情報提示装置１００はステップＳ６４に移行し、出力制御部１０５により、上記リスト手話合成部１４０により作成された情報提示コンテンツ画像を表示装置１０６へ送信し、この表示装置１０６に表示させる。この表示処理は１回だけでもよいが、一定の時間間隔で複数回繰り返し行ってもよい。
【００３７】
以上述べたようにこの実施形態に係わる情報提示装置１００では、入力制御部１０２で文章データを受信すると、当該文章データをキーワード抽出部１０３により形態素解析してキーワードを抽出し、この抽出したキーワードをもとに箇条書きテキスト取得部１１１により箇条書きテキスト記憶部１１０を検索して対応する箇条書きテキストデータを取得すると共に、断片手話データ取得部１２１により断片手話データ記憶部１２０を検索して対応する断片手話映像データを取得する。そして、上記取得した箇条書きテキストデータ及び断片手話映像データを、提示テンプレート取得部１３１により提示テンプレート記憶部１３０から取得した提示テンプレートのレイアウトに従い合成して提示情報コンテンツを作成し、この提示情報コンテンツを出力制御部１０５により表示装置１０６に表示させるようにしている。
【００３８】
したがって、聴覚障害者は断片手話映像とそれに対応付けられて提示される箇条書きテキストとにより、提示情報の内容を簡単かつ迅速にしかも要点を正確に把握することが可能となる。また、断片手話映像と共に箇条書きテキストが提示されるため、健聴者も提示情報の内容を簡単かつ迅速に把握することができる。
【００３９】
また、断片手話データ記憶部１２０から断片手話映像データを取得する際に、断片手話映像データが断片手話映像記憶部に記憶されているか否かを判定し、記憶されていなかった場合に上記断片手話映像記憶部を再度検索して対応する断片手話表現データを読み出す。そして、情報提示コンテンツを作成する際に、上記断片手話表現データをもとに３次元コンピュータグラフィックスの断片手話アニメーション画像を生成し、上記断片手話映像データの代わりにこの断片手話アニメーション画像データを合成するようにしている。したがって、例えば断片手話映像データが記憶されていない場合でも、手話画像を表示させることができる。
【００４０】
図１０は、本発明による箇条書きテキストデータと断片手話映像データとを並べて表示するリスト手話方式に対する聴覚障害者及び手話通訳者の評価結果を、従来の長文の文章をそのままテロップ表示する情報提示方式と比較して示したものである。同図から明らかなように、本発明によるリスト手話方式では、有効性、理解容易性、迅速性、正確性のいずれの指標についても、従来方式より優れているとの評価（１％の有意水準／Ｎ＝１７））が得られた。
【００４１】
なお、この発明は上記実施形態に限定されるものではない。例えば、前記実施形態では情報提示装置１００の断片手話データ記憶部１２０を断片手話インデックス記憶部と断片手話映像記憶部により構成した場合を例にとって説明した。しかし、それに限定されるものではなく、例えば図１１に示すように、区分された各項目３０１に対応付けて、箇条書きテキストデータ３０２と、断片手話映像データ３０４と、断片手話表現データ３０５をそれぞれ記憶したものとしてもよい。
【００４２】
また必ずしも断片手話映像データ３０４と断片手話表現データ３０５の両方を記憶させる必要はなく、３次元コンピュータグラフィックスによる断片手話アニメーション画像を表示しない場合には手話翻訳者を撮像した断片手話映像のデータ３０４のみを記憶させ、一方手話翻訳者を撮像した断片手話映像データ３０４を用意できない場合には断片手話表現データ３０５のみを記憶させるようにすればよい。
【００４３】
さらに、前記実施形態では箇条書きテキスト記憶部１１０及び断片手話データ記憶部１２０を情報提示装置内に設けた場合を例にとって説明した。しかし、それに限定されるものではなく、箇条書きテキスト記憶部１１０及び断片手話データ記憶部１２０をそれぞれ情報提示装置とは別に設けられた蓄積サーバ等に設け、情報提示装置と上記箇条書きテキスト記憶部１１０及び断片手話データ記憶部１２０との間をＬＡＮ（Local Area Network）やＩＰ（Internet Protocol）網等のネットワークを介して接続して情報セットを取得するようにしてもよい。
【００４４】
さらに、項目区分は図２及び図３に示すものに限定されるものではなく、それら以外にも適用対象に応じて柔軟に設定することが可能である。また、提示テンプレートのレイアウトは図８に示すように箇条書きテキスト提示領域４０１を画面の左側に、断片手話提示領域４０２を画面の右側に設定するものに限定されるものではなく、用途や利用者に合わせて適宜変更してもよい。さらに情報提示テンプレートは、常に予め決められた一つのテンプレートを用いるようにしてもよいし、例えば提示情報の種類や項目区分の数に応じて異なるテンプレートを選択して用いるようにしてもよい。
【００４５】
さらに、提示テンプレートの断片手話提示領域４０２に表示する断片手話映像又は断片手話アニメーション画像は、動画像や準動画像、静止画像のいずれでもよく、また複数の断片手話映像データを合成する際には、例えば時間的に先に表示する断片手話映像の最後の手の位置と次に表示する断片手話映像の最初の手の位置とが異なっている場合に、これらの手の位置が連続的に自然に変化するように見えるように、必要に応じて映像の追加や加工を行ってもよい。
【００４６】
さらに、提示情報の種類としては交通機関の運行状況に関する情報以外に、地震や台風、大雨、洪水等の天災に関する情報、政治、経済、芸能、スポーツなどに関する情報であってもよく、その他情報提示装置の構成や提示情報の作成制御手順と制御内容、提示情報のレイアウト等についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
【００４７】
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００４８】
【図１】この発明の一実施形態に係わる情報提示装置の構成を示すブロック図である。
【図２】図１に示した情報提示装置の箇条書きテキスト記憶部に記憶される箇条書きテキストの一例を示す図である。
【図３】図１に示した情報提示装置の断片手話データ記憶部を構成する断片手話インデックス記憶部と断片手話映像記憶部のうち、断片手話インデックス記憶部に記憶されるインデックスデータの一例を示す図である。
【図４】図１に示した情報提示装置の断片手話データ記憶部を構成する断片手話インデックス記憶部と断片手話映像記憶部のうち、断片手話映像記憶部に記憶される断片手話映像データ及び断片手話表現データの一例を示す図である。
【図５】図１に示した情報提示装置による提示情報作成及び表示制御の手順と内容の前半部分を示すフローチャートである。
【図６】図１に示した情報提示装置による提示情報作成及び表示制御の手順と内容の後半部分を示すフローチャートである。
【図７】図１に示した情報提示装置のキーワード抽出部によるキーワード抽出処理の手順と内容を示す図である。
【図８】図１に示した情報提示装置の提示テンプレート取得部において生成される提示テンプレートの一例を示す図である。
【図９】図１に示した情報提示装置のリスト手話合成部で作成される提示情報の一例を示す図である。
【図１０】この発明の効果を説明するためのグラフである。
【図１１】この発明の他の実施形態における断片手話データ記憶部に記憶されるデータの一例を示す図である。
【符号の説明】
【００４９】
１００…情報提示装置、１０１…情報入力装置、１０２…入力制御部、１０３…キーワード抽出部、１０４…主制御部、１０５…出力制御部、１０６…表示装置、１１０…箇条書きテキスト記憶部、１１１…箇条書きテキスト取得部、１２０…断片手話データ記憶部、１２１…断片手話データ取得部、１３０…提示テンプレート記憶部、１３１…提示テンプレート取得部、１４０…リスト手話合成部。
【特許請求の範囲】
【請求項１】
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置と、前記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表す断片手話データを記憶した第２の記憶装置に対し、それぞれ接続可能な情報提示装置であって、
文章データの入力を受け付ける入力インタフェース手段と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出するキーワード抽出手段と、
前記抽出されたキーワードに対応する箇条書きテキストデータを前記第１の記憶装置から検索する第１の検索手段と、
前記抽出されたキーワードに対応する断片手話データを前記第２の記憶装置から検索する第２の検索手段と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して、情報提示コンテンツを生成するコンテンツ生成手段と、
前記生成された情報提示コンテンツを視覚的に提示するべく出力する出力インタフェース手段と
を具備することを特徴とする情報提示装置。
【請求項２】
文章データの入力を受け付ける過程と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出する過程と、
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する箇条書きテキストデータを検索する過程と、
前記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表す断片手話データを記憶した第２の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する断片手話データを検索する過程と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して情報提示コンテンツを生成する過程と、
前記生成された情報提示コンテンツを視覚的に提示するべく出力する過程と
を具備することを特徴とする情報提示方法。
【請求項３】
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置と、前記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表わす断片手話データを記憶した第２の記憶装置に対し、それぞれ接続可能な提示情報作成装置であって、
文章データの入力を受け付ける入力インタフェース手段と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出するキーワード抽出手段と、
前記抽出されたキーワードに対応する箇条書きテキストデータを前記第１の記憶装置から検索する第１の検索手段と、
前記抽出されたキーワードに対応する断片手話データを前記第２の記憶装置から検索する第２の検索手段と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して情報提示コンテンツを生成するコンテンツ生成手段と
を具備することを特徴とする提示情報作成装置。
【請求項４】
文章データの入力を受け付ける過程と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出する過程と、
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する箇条書きテキストデータを検索する過程と、
予め設定したキーワードに対応付けて当該キーワードの内容を断片的な手話映像により表現する断片手話データを記憶した第２の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する断片手話データを検索する過程と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して情報提示コンテンツを生成する過程と
を具備することを特徴とする提示情報作成方法。
【請求項１】
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置と、前記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表す断片手話データを記憶した第２の記憶装置に対し、それぞれ接続可能な情報提示装置であって、
文章データの入力を受け付ける入力インタフェース手段と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出するキーワード抽出手段と、
前記抽出されたキーワードに対応する箇条書きテキストデータを前記第１の記憶装置から検索する第１の検索手段と、
前記抽出されたキーワードに対応する断片手話データを前記第２の記憶装置から検索する第２の検索手段と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して、情報提示コンテンツを生成するコンテンツ生成手段と、
前記生成された情報提示コンテンツを視覚的に提示するべく出力する出力インタフェース手段と
を具備することを特徴とする情報提示装置。
【請求項２】
文章データの入力を受け付ける過程と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出する過程と、
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する箇条書きテキストデータを検索する過程と、
前記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表す断片手話データを記憶した第２の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する断片手話データを検索する過程と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して情報提示コンテンツを生成する過程と、
前記生成された情報提示コンテンツを視覚的に提示するべく出力する過程と
を具備することを特徴とする情報提示方法。
【請求項３】
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置と、前記キーワードに対応付けて当該キーワードの内容を断片的な手話映像により表わす断片手話データを記憶した第２の記憶装置に対し、それぞれ接続可能な提示情報作成装置であって、
文章データの入力を受け付ける入力インタフェース手段と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出するキーワード抽出手段と、
前記抽出されたキーワードに対応する箇条書きテキストデータを前記第１の記憶装置から検索する第１の検索手段と、
前記抽出されたキーワードに対応する断片手話データを前記第２の記憶装置から検索する第２の検索手段と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して情報提示コンテンツを生成するコンテンツ生成手段と
を具備することを特徴とする提示情報作成装置。
【請求項４】
文章データの入力を受け付ける過程と、
前記入力された文章データを解析処理して、当該文書データに含まれるキーワードを抽出する過程と、
予め設定したキーワードに対応付けて当該キーワードに対応する箇条書きテキストデータを記憶した第１の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する箇条書きテキストデータを検索する過程と、
予め設定したキーワードに対応付けて当該キーワードの内容を断片的な手話映像により表現する断片手話データを記憶した第２の記憶装置に対しアクセスし、前記抽出されたキーワードに対応する断片手話データを検索する過程と、
前記検索された箇条書きテキストデータと前記検索された断片手話データとを相互に対応付けて合成処理して情報提示コンテンツを生成する過程と
を具備することを特徴とする提示情報作成方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２００８−２１６３９７（Ｐ２００８−２１６３９７Ａ）
【公開日】平成２０年９月１８日（２００８．９．１８）
【国際特許分類】
【出願番号】特願２００７−５０７６８（Ｐ２００７−５０７６８）
【出願日】平成１９年２月２８日（２００７．２．２８）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
【公開日】平成２０年９月１８日（２００８．９．１８）
【国際特許分類】
【出願日】平成１９年２月２８日（２００７．２．２８）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
[ Back to top ]