情報端末及び基地局
【課題】聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現する。
【解決手段】音声を認識する音声認識部２２と、音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手話画像変換部２３と、変換した手話画像を表示する画像表示部２４と、画像を撮影する画像撮影部２５と、撮影した画像から手話情報を認識する手話認識部２６と、手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手話音声変換部２７と、変換した音声を通信可能に出力する通信制御部２１とを備える。
【解決手段】音声を認識する音声認識部２２と、音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手話画像変換部２３と、変換した手話画像を表示する画像表示部２４と、画像を撮影する画像撮影部２５と、撮影した画像から手話情報を認識する手話認識部２６と、手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手話音声変換部２７と、変換した音声を通信可能に出力する通信制御部２１とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は移動体通信端末等の情報端末および基地局に関する。
【背景技術】
【０００２】
聴覚障害者の場合には通常の会話を行うことが困難であるため、聴覚が不要な手話を用いて会話を行う場合が多い。しかし、手話をマスターしている聴覚障害者は多いが、聴覚健常者の中で手話をマスターしている人は少ないため、手話をマスターした特別な聴覚健常者でない限り、聴覚障害者との間で手話を用いて会話するのは困難である。そこで、例えば特許文献１に開示された技術では、テレビカメラなどを用いて手話の手の動きを検出し、手話の内容を認識し、手話の内容を文字としてコンピュータの画面に表示することを提案している。
【特許文献１】特許第３２８９３０４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、例えば携帯電話のような通信手段を利用して聴覚障害者が会話を行おうとする場合には、望ましい通信手段が存在しないのが実情である。例えば、テレビ電話の通信が可能な携帯電話などの端末同士の間で通信する場合には、手話の画像を転送することができるが、この場合にも聴覚障害者の通信相手となる聴覚健常者が手話をマスターしていない限り会話はできない。また、特許文献１の技術を利用すれば手話を文字情報として表示できるが、一方向の情報伝達だけしかできないので、聴覚健常者から聴覚障害者側に適当な情報を伝えることができない。例えば、聴覚健常者から聴覚障害者側に文字として情報を伝えることができる場合であっても、一方の通信は手話でもう一方の通信は筆談のような形式になるため不自然であり、自然に近い会話は不可能である。
【０００４】
本発明の目的は、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することにある。
【課題を解決するための手段】
【０００５】
本発明の情報端末は、音声を認識する手段と、音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、変換した手話画像を表示する手段とを備える。また、画像を撮影する手段と、撮影した画像から手話情報を認識する手段と、手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、変換した音声を出力する手段とを備える。この構成によれば、音声信号と手話画像との対応表を参照して、音声と手話画像との変換が可能になるため、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができる。
【０００６】
本発明の基地局は、通信端末を移動体通信網にアクセスさせるための基地局であって、通信端末から送信される音声を認識する手段と、音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、変換した手話画像を通信可能に出力する手段と、通信端末から送信される画像から手話画像を認識する手段と、手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、変換した音声を通信可能に出力する手段とを備える。この構成によれば、基地局が音声と手話画像との変換機能を備えるため、通信端末を用いて聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができる。
【発明の効果】
【０００７】
本発明によれば、音声と手話画像との変換が可能になるため、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができる。
【発明を実施するための最良の形態】
【０００８】
（第１の実施の形態）
図１は本発明の情報端末が使用されるシステムの構成を示すブロック図であり、図２に示すような通信システムを用いて聴覚健常者４０と聴覚障害者５０との間で通信を行う場合を想定している。すなわち、聴覚健常者４０は携帯通信端末１０を使用し、聴覚障害者５０は携帯通信端末２０を使用し、移動体通信網３０を経由して携帯通信端末１０と携帯通信端末２０との間で通信を行う。図２に示す例では、携帯通信端末１０はその近くに存在する無線基地局３１との間に無線回線を形成し、携帯通信端末２０はその近くに存在する無線基地局３２との間に無線回線を形成する。無線基地局３１及び無線基地局３２は所定の通信網３３を介して互いに接続されている。また、この例では聴覚障害者５０は手話を用いて会話することを想定しており、一方、聴覚健常者４０としては手話をマスターしていない普通の人を想定している。
【０００９】
図１に示すように、聴覚健常者４０が用いる携帯通信端末１０としては一般的な携帯電話と同様に、音声入力部１１，音声出力部１２，画像表示部１３及び通信制御部１４を備えている。なお、図１においては携帯通信端末１０，２０の構成として最小限の主要な要素だけを示してあるが、実際には一般的な携帯電話と同様に図示しない様々な構成要素が搭載される。
【００１０】
音声入力部１１としてはマイクなどが用いられる。音声入力部１１は聴覚健常者４０の話す音声を検出して音声の電気信号として出力する。音声入力部１１が出力する音声の電気信号は通信制御部１４を介して送信され、移動体通信網３０を経由して携帯通信端末２０に送られる。携帯通信端末２０から送信される音声の電気信号は、移動体通信網３０を経由して携帯通信端末１０の通信制御部１４で受信され、音声出力部１２から音声として出力される。音声出力部１２としてはスピーカなどが用いられる。また、端末同士の間で画像や文字情報を伝送することもできる。携帯通信端末１０は受信した画像や文字情報を画像表示部１３に表示する。画像表示部１３としては画像や文字の表示が可能な液晶表示器などが用いられる。従って、一般的な構成の携帯電話を携帯通信端末１０として使用することも可能である。
【００１１】
一方、聴覚障害者５０が使用する携帯通信端末２０には、通信制御部２１，音声認識部２２，手話画像変換部２３，画像表示部２４，画像撮影部２５，手話認識部２６，手話音声変換部２７及び手話通信用辞書２８が備わっている。聴覚健常者４０の使用する携帯通信端末１０から送信される音声の信号は、移動体通信網３０を経由して通信制御部２１で受信され、音声認識部２２に入力される。音声認識部２２は、公知の音声認識技術を採用しており、入力された音声の内容を認識し、認識結果を文字列情報として出力する。なお、音声認識の際には手話通信用辞書２８に保持されている認識用の辞書を参照する。音声認識部２２が出力する認識結果は手話画像変換部２３に入力される。
【００１２】
手話画像変換部２３は、受信した音声を表す文字列情報に対応する手話画像を生成する。すなわち、人間が言葉を手話で表現する場合とよく似た像を表す画像の情報を生成する。具体的には、人間の体や顔の像を背景として両腕，両手及び全ての指に相当する像あるいは図形を重ねると共に、各部の位置関係，向き，曲がり具合などが標準的な手話の表現に近づくような動画を順次に生成し、入力された音声に従って画像の内容を変更する。手話画像変換部２３が手話画像を生成する際には、予め定められた規則などの辞書情報を手話通信用辞書２８から取得して、音声認識部２２から入力された文字列情報の内容と照合しながら順次に画像に変換する。
【００１３】
画像表示部２４は、手話画像変換部２３が生成した画像の情報を動画として画面上に表示する。この動画の内容は、携帯通信端末１０から送信された聴覚健常者４０の話す音声に相当するので、携帯通信端末２０を使用する聴覚障害者５０は、画像表示部２４の画面を参照することにより、聴覚健常者４０の話す言葉を手話として画像から認識することができる。
画像撮影部２５は、携帯通信端末２０に内蔵されたテレビカメラであり、通話をする際には連続的に撮影を行う。手話通信を行う場合には、画像撮影部２５の撮影方向を使用者である聴覚障害者５０自身に向けて、聴覚障害者５０の両腕，両手，全ての指を含む上半身のほぼ全域が写るように視野を調節しておく。
【００１４】
手話認識部２６は、画像撮影部２５から連続的に出力される画像、すなわち手話を撮影した動画の情報を順次に画像処理することにより、手話で表現された言葉の内容を認識する。手話認識部２６が手話を認識する際には、手話通信用辞書２８に保持されている辞書情報を参照して処理を行う。なお、手話認識部２６における処理に関しては、例えば引用文献１に開示されている技術を採用すればよい。手話認識部２６の認識結果である手話の内容は、その言葉を表す文字列情報として手話音声変換部２７に入力される。手話音声変換部２７は、公知の音声合成技術を用いて、入力された文字列情報に対応する音声信号を生成する。手話音声変換部２７が生成した音声信号は、通信制御部２１を介して送信され、移動体通信網３０を経由して携帯通信端末１０に届く。
【００１５】
従って、携帯通信端末２０の利用者である聴覚障害者５０が画像撮影部２５に向かって手話で言葉を表現すると、その手話の内容に相当する音声が自動的に生成され、音声信号として携帯通信端末１０に送信される。つまり、携帯通信端末１０の使用者である聴覚健常者４０は、聴覚障害者５０の表現した手話の内容を直接音声として音声出力部１２から聞くことができるので、聴覚健常者４０同士が会話する場合と同様に聴覚障害者５０との間で会話することができる。
【００１６】
図１に示す装置を用いる場合には、聴覚障害者５０は送信及び受信の双方向の通信について手話で通信相手と会話することができる。しかし、送信及び受信の何れか一方の通信だけを手話で実現しても十分な効果が期待できる。例えば、携帯通信端末２０から画像撮影部２５，手話認識部２６及び手話音声変換部２７の機能を省略した場合であっても、聴覚障害者５０は通信相手の聴覚健常者４０が話す言葉の内容を手話画像から認識できるので、それに応答し会話に参加することができる。この場合の聴覚障害者５０からの応答については、例えば電子メールなどを利用して文字情報として送信することが考えられる。また、逆に手話画像を音声に変換して送信する機能だけを残して、携帯通信端末２０から音声認識部２２，手話画像変換部２３及び画像表示部２４の機能を省略した場合には、聴覚障害者５０が表現した手話の内容が音声に変換されて送信されるので、聴覚健常者４０は聴覚障害者５０の送信した手話の内容を理解することができる。この場合には、携帯通信端末１０から携帯通信端末２０に向けて文字情報を電子メールなどの機能を用いて送信することにより、聴覚障害者５０は聴覚健常者４０からの送信内容を理解することができるので、双方向の通信が実現する。
【００１７】
（第２の実施の形態）
図３は本発明の基地局が使用されるシステムの構成を示すブロック図である。図３において第１の実施の形態と対応する要素には同一の符号を付けて示してある。変更された部分について以下に説明する。この形態では、音声から手話画像を生成する機能と、手話画像から音声を生成する機能とを携帯通信端末２０Ｂの通信を中継する無線基地局６０に設けてある。従って、それらの機能を携帯通信端末２０Ｂに設ける必要はなく、携帯通信端末２０Ｂには通信制御部２１，画像表示部２４及び画像撮影部２５のみが設けてある。
【００１８】
無線基地局６０に設けられた音声認識部２２，手話画像変換部２３，手話認識部２６，手話音声変換部２７及び手話通信用辞書２８については、それぞれ第１の実施の形態の場合と同様の機能を果たす。通信制御部６１は無線基地局６０と通信網３３との間の通信を制御し、通信制御部６２は無線基地局６０と携帯通信端末２０Ｂとの間の通信を制御する。従って、無線基地局６０は携帯通信端末１０から送信された音声の信号を音声認識部２２及び手話画像変換部２３で手話画像に変換し、画像情報として携帯通信端末２０Ｂに送信する。そのため、聴覚障害者５０が使用する携帯通信端末２０Ｂの画像表示部２４には聴覚健常者４０からの音声に相当する手話画像が表示される。
【００１９】
また、携帯通信端末２０Ｂは画像撮影部２５で聴覚障害者５０自身を撮影して得られた手話画像を画像情報として無線基地局６０に送信するので、無線基地局６０は携帯通信端末２０Ｂから送信された手話画像を手話認識部２６及び手話音声変換部２７で音声に変換し、音声信号として携帯通信端末１０に送信するので、聴覚健常者４０は聴覚障害者５０の表現した手話の内容を音声として音声出力部１２から聞くことができる。
【００２０】
この形態では、画像処理や音声認識のように負荷の大きい処理を無線基地局６０上に配置してあるため、携帯通信端末２０Ｂの構成を単純化することができ、携帯通信端末２０Ｂの小型化や電力消費の抑制が可能になる。また、従来より存在する携帯電話のような端末の構成や動作をほとんど変更することなく携帯通信端末２０Ｂとして利用することも可能になる。
【産業上の利用可能性】
【００２１】
本発明の情報端末及び基地局は、音声と手話画像との変換が可能になるため、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができるという効果を有し、移動体通信端末等の情報端末および基地局等として有用である。
【図面の簡単な説明】
【００２２】
【図１】第１の実施の形態の構成を示すブロック図
【図２】通信システムの構成例を示すブロック図
【図３】第２の実施の形態の構成を示すブロック図
【符号の説明】
【００２３】
１０，２０ 携帯通信端末
１１ 音声入力部
１２ 音声出力部
１３ 画像表示部
１４，２１ 通信制御部
２２ 音声認識部
２３ 手話画像変換部
２４ 画像表示部
２５ 画像撮影部
２６ 手話認識部
２７ 手話音声変換部
２８ 手話通信用辞書
３０ 移動体通信網
３１，３２，６０ 無線基地局
３３ 通信網
４０ 聴覚健常者
５０ 聴覚障害者
６１，６２ 通信制御部
【技術分野】
【０００１】
本発明は移動体通信端末等の情報端末および基地局に関する。
【背景技術】
【０００２】
聴覚障害者の場合には通常の会話を行うことが困難であるため、聴覚が不要な手話を用いて会話を行う場合が多い。しかし、手話をマスターしている聴覚障害者は多いが、聴覚健常者の中で手話をマスターしている人は少ないため、手話をマスターした特別な聴覚健常者でない限り、聴覚障害者との間で手話を用いて会話するのは困難である。そこで、例えば特許文献１に開示された技術では、テレビカメラなどを用いて手話の手の動きを検出し、手話の内容を認識し、手話の内容を文字としてコンピュータの画面に表示することを提案している。
【特許文献１】特許第３２８９３０４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、例えば携帯電話のような通信手段を利用して聴覚障害者が会話を行おうとする場合には、望ましい通信手段が存在しないのが実情である。例えば、テレビ電話の通信が可能な携帯電話などの端末同士の間で通信する場合には、手話の画像を転送することができるが、この場合にも聴覚障害者の通信相手となる聴覚健常者が手話をマスターしていない限り会話はできない。また、特許文献１の技術を利用すれば手話を文字情報として表示できるが、一方向の情報伝達だけしかできないので、聴覚健常者から聴覚障害者側に適当な情報を伝えることができない。例えば、聴覚健常者から聴覚障害者側に文字として情報を伝えることができる場合であっても、一方の通信は手話でもう一方の通信は筆談のような形式になるため不自然であり、自然に近い会話は不可能である。
【０００４】
本発明の目的は、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することにある。
【課題を解決するための手段】
【０００５】
本発明の情報端末は、音声を認識する手段と、音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、変換した手話画像を表示する手段とを備える。また、画像を撮影する手段と、撮影した画像から手話情報を認識する手段と、手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、変換した音声を出力する手段とを備える。この構成によれば、音声信号と手話画像との対応表を参照して、音声と手話画像との変換が可能になるため、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができる。
【０００６】
本発明の基地局は、通信端末を移動体通信網にアクセスさせるための基地局であって、通信端末から送信される音声を認識する手段と、音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、変換した手話画像を通信可能に出力する手段と、通信端末から送信される画像から手話画像を認識する手段と、手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、変換した音声を通信可能に出力する手段とを備える。この構成によれば、基地局が音声と手話画像との変換機能を備えるため、通信端末を用いて聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができる。
【発明の効果】
【０００７】
本発明によれば、音声と手話画像との変換が可能になるため、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができる。
【発明を実施するための最良の形態】
【０００８】
（第１の実施の形態）
図１は本発明の情報端末が使用されるシステムの構成を示すブロック図であり、図２に示すような通信システムを用いて聴覚健常者４０と聴覚障害者５０との間で通信を行う場合を想定している。すなわち、聴覚健常者４０は携帯通信端末１０を使用し、聴覚障害者５０は携帯通信端末２０を使用し、移動体通信網３０を経由して携帯通信端末１０と携帯通信端末２０との間で通信を行う。図２に示す例では、携帯通信端末１０はその近くに存在する無線基地局３１との間に無線回線を形成し、携帯通信端末２０はその近くに存在する無線基地局３２との間に無線回線を形成する。無線基地局３１及び無線基地局３２は所定の通信網３３を介して互いに接続されている。また、この例では聴覚障害者５０は手話を用いて会話することを想定しており、一方、聴覚健常者４０としては手話をマスターしていない普通の人を想定している。
【０００９】
図１に示すように、聴覚健常者４０が用いる携帯通信端末１０としては一般的な携帯電話と同様に、音声入力部１１，音声出力部１２，画像表示部１３及び通信制御部１４を備えている。なお、図１においては携帯通信端末１０，２０の構成として最小限の主要な要素だけを示してあるが、実際には一般的な携帯電話と同様に図示しない様々な構成要素が搭載される。
【００１０】
音声入力部１１としてはマイクなどが用いられる。音声入力部１１は聴覚健常者４０の話す音声を検出して音声の電気信号として出力する。音声入力部１１が出力する音声の電気信号は通信制御部１４を介して送信され、移動体通信網３０を経由して携帯通信端末２０に送られる。携帯通信端末２０から送信される音声の電気信号は、移動体通信網３０を経由して携帯通信端末１０の通信制御部１４で受信され、音声出力部１２から音声として出力される。音声出力部１２としてはスピーカなどが用いられる。また、端末同士の間で画像や文字情報を伝送することもできる。携帯通信端末１０は受信した画像や文字情報を画像表示部１３に表示する。画像表示部１３としては画像や文字の表示が可能な液晶表示器などが用いられる。従って、一般的な構成の携帯電話を携帯通信端末１０として使用することも可能である。
【００１１】
一方、聴覚障害者５０が使用する携帯通信端末２０には、通信制御部２１，音声認識部２２，手話画像変換部２３，画像表示部２４，画像撮影部２５，手話認識部２６，手話音声変換部２７及び手話通信用辞書２８が備わっている。聴覚健常者４０の使用する携帯通信端末１０から送信される音声の信号は、移動体通信網３０を経由して通信制御部２１で受信され、音声認識部２２に入力される。音声認識部２２は、公知の音声認識技術を採用しており、入力された音声の内容を認識し、認識結果を文字列情報として出力する。なお、音声認識の際には手話通信用辞書２８に保持されている認識用の辞書を参照する。音声認識部２２が出力する認識結果は手話画像変換部２３に入力される。
【００１２】
手話画像変換部２３は、受信した音声を表す文字列情報に対応する手話画像を生成する。すなわち、人間が言葉を手話で表現する場合とよく似た像を表す画像の情報を生成する。具体的には、人間の体や顔の像を背景として両腕，両手及び全ての指に相当する像あるいは図形を重ねると共に、各部の位置関係，向き，曲がり具合などが標準的な手話の表現に近づくような動画を順次に生成し、入力された音声に従って画像の内容を変更する。手話画像変換部２３が手話画像を生成する際には、予め定められた規則などの辞書情報を手話通信用辞書２８から取得して、音声認識部２２から入力された文字列情報の内容と照合しながら順次に画像に変換する。
【００１３】
画像表示部２４は、手話画像変換部２３が生成した画像の情報を動画として画面上に表示する。この動画の内容は、携帯通信端末１０から送信された聴覚健常者４０の話す音声に相当するので、携帯通信端末２０を使用する聴覚障害者５０は、画像表示部２４の画面を参照することにより、聴覚健常者４０の話す言葉を手話として画像から認識することができる。
画像撮影部２５は、携帯通信端末２０に内蔵されたテレビカメラであり、通話をする際には連続的に撮影を行う。手話通信を行う場合には、画像撮影部２５の撮影方向を使用者である聴覚障害者５０自身に向けて、聴覚障害者５０の両腕，両手，全ての指を含む上半身のほぼ全域が写るように視野を調節しておく。
【００１４】
手話認識部２６は、画像撮影部２５から連続的に出力される画像、すなわち手話を撮影した動画の情報を順次に画像処理することにより、手話で表現された言葉の内容を認識する。手話認識部２６が手話を認識する際には、手話通信用辞書２８に保持されている辞書情報を参照して処理を行う。なお、手話認識部２６における処理に関しては、例えば引用文献１に開示されている技術を採用すればよい。手話認識部２６の認識結果である手話の内容は、その言葉を表す文字列情報として手話音声変換部２７に入力される。手話音声変換部２７は、公知の音声合成技術を用いて、入力された文字列情報に対応する音声信号を生成する。手話音声変換部２７が生成した音声信号は、通信制御部２１を介して送信され、移動体通信網３０を経由して携帯通信端末１０に届く。
【００１５】
従って、携帯通信端末２０の利用者である聴覚障害者５０が画像撮影部２５に向かって手話で言葉を表現すると、その手話の内容に相当する音声が自動的に生成され、音声信号として携帯通信端末１０に送信される。つまり、携帯通信端末１０の使用者である聴覚健常者４０は、聴覚障害者５０の表現した手話の内容を直接音声として音声出力部１２から聞くことができるので、聴覚健常者４０同士が会話する場合と同様に聴覚障害者５０との間で会話することができる。
【００１６】
図１に示す装置を用いる場合には、聴覚障害者５０は送信及び受信の双方向の通信について手話で通信相手と会話することができる。しかし、送信及び受信の何れか一方の通信だけを手話で実現しても十分な効果が期待できる。例えば、携帯通信端末２０から画像撮影部２５，手話認識部２６及び手話音声変換部２７の機能を省略した場合であっても、聴覚障害者５０は通信相手の聴覚健常者４０が話す言葉の内容を手話画像から認識できるので、それに応答し会話に参加することができる。この場合の聴覚障害者５０からの応答については、例えば電子メールなどを利用して文字情報として送信することが考えられる。また、逆に手話画像を音声に変換して送信する機能だけを残して、携帯通信端末２０から音声認識部２２，手話画像変換部２３及び画像表示部２４の機能を省略した場合には、聴覚障害者５０が表現した手話の内容が音声に変換されて送信されるので、聴覚健常者４０は聴覚障害者５０の送信した手話の内容を理解することができる。この場合には、携帯通信端末１０から携帯通信端末２０に向けて文字情報を電子メールなどの機能を用いて送信することにより、聴覚障害者５０は聴覚健常者４０からの送信内容を理解することができるので、双方向の通信が実現する。
【００１７】
（第２の実施の形態）
図３は本発明の基地局が使用されるシステムの構成を示すブロック図である。図３において第１の実施の形態と対応する要素には同一の符号を付けて示してある。変更された部分について以下に説明する。この形態では、音声から手話画像を生成する機能と、手話画像から音声を生成する機能とを携帯通信端末２０Ｂの通信を中継する無線基地局６０に設けてある。従って、それらの機能を携帯通信端末２０Ｂに設ける必要はなく、携帯通信端末２０Ｂには通信制御部２１，画像表示部２４及び画像撮影部２５のみが設けてある。
【００１８】
無線基地局６０に設けられた音声認識部２２，手話画像変換部２３，手話認識部２６，手話音声変換部２７及び手話通信用辞書２８については、それぞれ第１の実施の形態の場合と同様の機能を果たす。通信制御部６１は無線基地局６０と通信網３３との間の通信を制御し、通信制御部６２は無線基地局６０と携帯通信端末２０Ｂとの間の通信を制御する。従って、無線基地局６０は携帯通信端末１０から送信された音声の信号を音声認識部２２及び手話画像変換部２３で手話画像に変換し、画像情報として携帯通信端末２０Ｂに送信する。そのため、聴覚障害者５０が使用する携帯通信端末２０Ｂの画像表示部２４には聴覚健常者４０からの音声に相当する手話画像が表示される。
【００１９】
また、携帯通信端末２０Ｂは画像撮影部２５で聴覚障害者５０自身を撮影して得られた手話画像を画像情報として無線基地局６０に送信するので、無線基地局６０は携帯通信端末２０Ｂから送信された手話画像を手話認識部２６及び手話音声変換部２７で音声に変換し、音声信号として携帯通信端末１０に送信するので、聴覚健常者４０は聴覚障害者５０の表現した手話の内容を音声として音声出力部１２から聞くことができる。
【００２０】
この形態では、画像処理や音声認識のように負荷の大きい処理を無線基地局６０上に配置してあるため、携帯通信端末２０Ｂの構成を単純化することができ、携帯通信端末２０Ｂの小型化や電力消費の抑制が可能になる。また、従来より存在する携帯電話のような端末の構成や動作をほとんど変更することなく携帯通信端末２０Ｂとして利用することも可能になる。
【産業上の利用可能性】
【００２１】
本発明の情報端末及び基地局は、音声と手話画像との変換が可能になるため、聴覚障害者と聴覚健常者との間でリアルタイムの会話を実現することができるという効果を有し、移動体通信端末等の情報端末および基地局等として有用である。
【図面の簡単な説明】
【００２２】
【図１】第１の実施の形態の構成を示すブロック図
【図２】通信システムの構成例を示すブロック図
【図３】第２の実施の形態の構成を示すブロック図
【符号の説明】
【００２３】
１０，２０ 携帯通信端末
１１ 音声入力部
１２ 音声出力部
１３ 画像表示部
１４，２１ 通信制御部
２２ 音声認識部
２３ 手話画像変換部
２４ 画像表示部
２５ 画像撮影部
２６ 手話認識部
２７ 手話音声変換部
２８ 手話通信用辞書
３０ 移動体通信網
３１，３２，６０ 無線基地局
３３ 通信網
４０ 聴覚健常者
５０ 聴覚障害者
６１，６２ 通信制御部
【特許請求の範囲】
【請求項１】
音声を認識する手段と、
音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、
変換した手話画像を表示する手段と、
を備える情報端末。
【請求項２】
画像を撮影する手段と、
撮影した画像から手話情報を認識する手段と、
手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、
変換した音声を出力する手段と、
を備える情報端末。
【請求項３】
請求項１記載の情報端末および請求項２記載の情報端末を搭載する情報端末。
【請求項４】
通信端末を移動体通信網にアクセスさせるための基地局であって、
通信端末から送信される音声を認識する手段と、
音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、
変換した手話画像を通信可能に出力する手段と、
通信端末から送信される画像から手話画像を認識する手段と、
手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、
変換した音声を通信可能に出力する手段と、
を備える基地局。
【請求項１】
音声を認識する手段と、
音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、
変換した手話画像を表示する手段と、
を備える情報端末。
【請求項２】
画像を撮影する手段と、
撮影した画像から手話情報を認識する手段と、
手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、
変換した音声を出力する手段と、
を備える情報端末。
【請求項３】
請求項１記載の情報端末および請求項２記載の情報端末を搭載する情報端末。
【請求項４】
通信端末を移動体通信網にアクセスさせるための基地局であって、
通信端末から送信される音声を認識する手段と、
音声信号と手話画像との対応表を参照して、認識した音声を手話画像に変換する手段と、
変換した手話画像を通信可能に出力する手段と、
通信端末から送信される画像から手話画像を認識する手段と、
手話情報と音声信号との対応表を参照して、認識した手話情報を音声に変換する手段と、
変換した音声を通信可能に出力する手段と、
を備える基地局。
【図１】
【図２】
【図３】
【図２】
【図３】
【公開番号】特開２００６−１３９１３８（Ｐ２００６−１３９１３８Ａ）
【公開日】平成１８年６月１日（２００６．６．１）
【国際特許分類】
【出願番号】特願２００４−３２９５７０（Ｐ２００４−３２９５７０）
【出願日】平成１６年１１月１２日（２００４．１１．１２）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成１８年６月１日（２００６．６．１）
【国際特許分類】
【出願日】平成１６年１１月１２日（２００４．１１．１２）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]