入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体
【課題】小さな文字であっても入力受付及び表示が確実、且つ簡単に行われる入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を提供する。
【解決手段】表示部、音声受付手段及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段を備える入力表示装置において、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字の前記表示部への表示属性が決定され、該表示属性に基づき前記文字が表示される。
【解決手段】表示部、音声受付手段及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段を備える入力表示装置において、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字の前記表示部への表示属性が決定され、該表示属性に基づき前記文字が表示される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文字の入力を受け付けて表示する入力表示装置、入力表示方法及びコンピュータプログラム並びに該コンピュータプログラムを記録している記録媒体に関する。
【背景技術】
【０００２】
近年、ＬＣＤモニタが大型化され、該ＬＣＤモニタにタッチパネル技術が加わることによって、いわゆる電子黒板としての利用が可能になった。
【０００３】
電子黒板としての利用においては、多くの場合、利用者が大型モニタの前に立って指先又はペンを用いてタッチパネルをタッチ操作するのでキーボードを併用することが難しいことから、タッチパネル上の指先又はペンで触れている箇所に点を描画し、又は所定時間ごとに繰り返してタッチ操作の有無を検知して得られる複数の接触座標を線で結ぶことにより文字、図形等を描画する方法が一般に用いられている。
【０００４】
一方、特許文献１には、コマンド操作までも音声で行うことにより、キーボード等の機械的入力手段を操作することなく音声だけでコンピュータのインタフェースを操作する、いわゆるハンドフリーで文字入力が可能な音声入力モード変換システムが開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００３−２９５８８４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、上述した電子黒板においては、タッチパネルの座標検知精度及び反応速度が劣る上に、ＬＣＤ面とタッチパネル面との間に距離があるなど、幾つかの要因によって正確に軌跡を描くことが困難であり、このため小さな文字を書くことが困難であり、たとえ書けたとしてもそれを視認できないという問題がある。
【０００７】
また、電子黒板にできる便利な機能として、入力済の図形を後で移動、拡縮等できる編集機能が付いているものの、文字又は文章を１つのまとまりとして正確に認識することが困難であるので、利用者が夫々の文字又は文章の編集を手作業で行う必要がある。これに対しては、操作の時間間隔に閾値を設けてまとまりを認識する機能、図形をＯＣＲ処理により文字へ変換する機能等も考案されているが、その精度が十分とは言えない。特許文献１の音声入力モード変換システムにおいても、このような問題を解決することは出来ない。
【０００８】
本発明は、斯かる事情に鑑みてなされたものであり、その目的とするところは、表示部、音声受付手段（音声受付部）及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段（位置指定受付部）を備える入力表示装置において、前記位置指定受付手段（位置指定受付部）が受け付けた位置指定に基づき、前記音声受付手段（音声受付部）が受け付けた音声のテキストデータに係る文字の前記表示部への表示属性が決定され、該表示属性に基づき前記文字が表示されることにより、小さな文字であっても入力受付及び表示が確実、且つ簡単に行われる入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を提供することにある。
【０００９】
また、本発明の他の目的は、前記位置指定受付手段が受け付けた位置指定に基づき、所定範囲内の文字を一括として記憶することにより、例えば、一つの文として記憶することにより、利用者の必要に応じて文字又は文章を１つのまとまりとして正確に認識することが出来る入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を提供することにある。
【課題を解決するための手段】
【００１０】
本発明に係る入力表示装置は、表示部と、音声を受け付けてテキストデータに変換する音声受付手段と、前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段とを備え、文字の入力を受け付けて表示する入力表示装置において、前記位置指定受付手段が受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定手段を備えることを特徴とする。
【００１１】
本発明にあっては、前記音声受付手段が受け付けた音声のテキストデータに係る文字を前記表示部に表示する際、前記位置指定受付手段が受け付けた位置指定に基づき、前記属性決定手段が前記文字の表示属性を決定する。該文字は前記前記属性決定手段によって決定された表示属性に基づき、前記表示部に表示される。
【００１２】
本発明に係る入力表示装置は、前記属性決定手段は前記文字の表示の開始終了位置を決定するように構成されていることを特徴とする。
【００１３】
本発明にあっては、前記属性決定手段は、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字の表示の開始終了位置を決定する。該文字は前記前記属性決定手段によって決定された開始終了位置に基づき、前記表示部に表示される。
【００１４】
本発明に係る入力表示装置は、前記属性決定手段は前記文字のフォントサイズを決定するように構成されていることを特徴とする。
【００１５】
本発明にあっては、前記属性決定手段は、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字のフォントサイズを決定する。該文字は前記属性決定手段によって決定されたフォントサイズに基づき、前記表示部に表示される。
【００１６】
本発明に係る入力表示装置は、前記属性決定手段は前記文字からなる文字列の向きを決定するように構成されていることを特徴とする。
【００１７】
本発明にあっては、前記属性決定手段は、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字からなる文字列の向きを決定する。該文字列は前記属性決定手段によって決定された向きに基づき、前記表示部に表示される。
【００１８】
本発明に係る入力表示装置は、前記属性決定手段は前記文字の表示の開始位置及び終了位置間の距離に基づき、該文字のフォントサイズを決定するように構成されていることを特徴とする。
【００１９】
本発明にあっては、例えば、前記属性決定手段は、前記表示の開始位置及び終了位置間の距離を、前記音声受付手段が受け付けた音声のテキストデータに係る文字（又は文字列）の長さに割ることによって、当該文字のフォントサイズを決定する。
【００２０】
本発明に係る入力表示装置は、前記開始終了位置による範囲内の文字を一括して記憶する記憶手段を備えることを特徴とする。
【００２１】
本発明にあっては、前記記憶手段が、前記開始終了位置による範囲内、換言すれば、前記表示の開始位置から終了位置までの範囲内の文字を一括して記憶する。例えば、前記記憶手段は、前記表示の開始位置から終了位置までの範囲内の文字を一つの文章として記憶する。
【００２２】
本発明に係る入力表示方法は、表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置にて、文字の入力を受け付けて表示する入力表示方法において、受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定ステップと、該属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示する表示ステップとを含むことを特徴とする。
【００２３】
本発明に係るコンピュータプログラムは、表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置を構成するコンピュータに、文字の入力を受け付けて表示させるコンピュータプログラムにおいて、コンピュータに、受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定させる属性決定ステップと、コンピュータに、前記属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示させる表示ステップとを実行させることを特徴とする。
【００２４】
本発明にあっては、前記音声受付部が受け付けた音声のテキストデータに係る文字を前記表示部に表示する際、前記位置指定受付部が受け付けた位置指定に基づき、前記文字の表示属性が決定される。該文字は決定された表示属性に基づき、前記表示部に表示される。
【００２５】
本発明に係る記録媒体は、前述の発明のコンピュータプログラムを記録してあることを特徴とする。
【００２６】
本発明にあっては、前記記録媒体に前述のコンピュータプログラムを記録する。コンピュータが前記記録媒体からコンピュータプログラムを読み出して、前述の入力表示装置及び入力表示方法がコンピュータにより実現される。
【発明の効果】
【００２７】
本発明によれば、たとえ入力される文字が小さな文字であっても、該文字の受付及び表示を確実、且つ簡単に行うことが出来る。
【００２８】
本発明によれば、利用者の必要に応じて、利用者によって入力された文字又は文章を１つのまとまりとして正確に認識することが出来る。
【図面の簡単な説明】
【００２９】
【図１】本発明の実施の形態１の電子黒板装置の要部構成を示す機能ブロック図である。
【図２】本発明の実施の形態１の電子黒板装置の表示部及びペン入力部の構成を説明する説明図である。
【図３】本発明の実施の形態１の電子黒板装置における、文字の入力の受け付け及び表示の処理を示すフローチャートである。
【図４】本発明の実施の形態１の電子黒板装置における、文字の入力の受け付け及び表示の処理を示すフローチャートである。
【図５】本発明の実施の形態１の電子黒板装置による処理過程を示す例示図である。
【図６】本発明の実施の形態２の電子黒板装置の要部構成を示す機能ブロック図である。
【発明を実施するための形態】
【００３０】
（実施の形態１）
以下に、本発明の実施の形態に係る、入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を、いわゆる電子黒板装置に適用した場合を例として、図面に基づいて詳述する。
【００３１】
図１は本発明の実施の形態１の電子黒板装置１００の要部構成を示す機能ブロック図である。電子黒板装置１００はＣＰＵ１、ＲＯＭ２及びＲＡＭ３を備えている。
【００３２】
ＲＯＭ２には各種の制御プログラム（例えば、電子黒板アプリケーション、描画用アプリケーション、音声受付用アプリケーション等）が予め格納されており、ＲＡＭ３はデータを一時的に記憶し、記憶順、記憶位置等に関係なく読み出すことが可能である。また、ＲＡＭ３は、例えば、ＲＯＭ２から読み出されたプログラム、該プログラムを実行することにより発生する各種データ等を記憶する。また、ＲＡＭ３には後述する座標履歴を記憶する
【００３３】
ＣＰＵ１は、ＲＯＭ２に予め格納されている制御プログラムをＲＡＭ３上にロードして実行することによって、バスＮを介して以下の各種ハードウェアの制御を行い、前記座標履歴を作成し、また、装置全体を本発明の電子黒板装置１００として動作させる。
【００３４】
また、電子黒板装置１００は、表示部７と、該表示部７への文字、線画等の表示を制御する表示制御部８と、後述するペン形入力器９２を介して利用者から表示部７上の位置指定、文字、線画等の入力を受け付けるペン入力部９と、該ペン入力部９による入力の受付を制御するペン入力制御部１０と、利用者から音声を受け付けるマイク１１と、マイク１１による音声の受付の制御を行う音声入力制御部１２とを備えている。
【００３５】
更に、電子黒板装置１００は、例えば、ハードディスク等の不揮発性の半導体メモリであり、後述するフォントテーブルが記憶されている記憶部４と、所定時刻からの時間の経過を測る計時部５と、表示制御部８が表示部７に文字又は文字列の表示を行う際における、表示属性を決定する表示属性決定部６とを備えている。
【００３６】
表示部７は、例えばＬＣＤモニタであり、表示部７にはペン入力部９及びマイク１１を介して利用者から受け付ける線画及び文字が表示される。また、表示部７には、電子黒板装置１００にて動作するソフトウエアを選択して起動させるための利用者インターフェース画面等が表示される。
【００３７】
表示制御部８は、表示属性決定部６によって決定された表示属性に基づいて、マイク１１を介して受け付けた音声に係る文字からなる文字又は文字列を表示部７に表示させる。前記表示属性は例えば、表示すべき文字又は文字列の表示開始及び表示終了位置（以下、表示始終位置と言う）、フォントサイズ、縦書き、横書き（向き）である。また、表示制御部８は、後述する位置指定受付部９１が受け付けた位置指定に係る座標に基づき、ペン形入力器９２を介して利用者から入力される線画を表示部７に表示させる。
【００３８】
図２は実施の形態１の電子黒板装置１００の表示部７及びペン入力部９の構成を説明する説明図である。
ペン入力部９は、いわゆるタッチパネルであり、利用者から表示部７の表示画面上における位置指定を受け付ける位置指定受付部９１と、ペン形状を有しており、利用者が該位置指定、文字及び線画の入力の際に用いるペン形入力器９２とを備えている。ペン入力部９は、これらを介して、利用者から表示部７上の位置指定、文字、線画等の入力を受け付ける。
【００３９】
ペン入力制御部１０は、ペン入力部９による入力の受付に関する制御を行ない、また、ペン入力部９の位置指定受付部９１を介して受け付けられる位置指定に係る座標（以下、指定座標と言う。）をＣＰＵ１に送出する。
【００４０】
ＣＰＵ１は、ペン入力制御部１０から指定座標を取得して、該指定座標を検出の順に関連付けた座標履歴を生成し、生成された座標履歴はＲＡＭ３に保存される。また、表示制御部８は、ＲＡＭ３に保存された座標履歴に基づき、例えば、表示部７に線画を表示させる。以下に、詳しく説明する。
【００４１】
ペン入力部９の位置指定受付部９１は、表示部７の表示画面上に重ねて設置される。本実施の形態では位置指定受付部９１がいわゆる光遮断型であるものとする。該光遮断型においては、入力はペン形入力器９２の先端が位置指定受付部９１表面の直近に近づいたことに応じて、位置指定受付部９１により光遮断が検出されることによって実現される。
【００４２】
利用者は電子黒板装置１００に予めインストールされている描画用アプリケーションソフトを起動して画像データを入力する。例えば、利用者がペン形入力器９２を用いて位置指定受付部９１の表面上に一本の線を引く操作を行った場合を例に挙げて説明する。初めに光遮断が検出され、その後連続した光遮断があった場合、ＣＰＵ１は、一本の線の入力が開始され、現在入力中であると判断する。一方、光遮断が途絶え、所定時間が経過した場合、ＣＰＵ１は一本の線の入力が終了したと判断する。これによって一本の線に係る画像データ（例えば、座標履歴）が取得でき、該画像データに基づき表示部７に一本の線が表示される。
【００４３】
位置指定受付部９１は、描画された線を複数の連続した点の集合としてとらえ、各点の座標（指定座標）を検出する。検出された各点の座標はペン入力制御部１０を介してＣＰＵ１に送出される。ＣＰＵ１は、送出された座標を受け、当該指定座標を、検出の順に該指定座標を関連付けて座標履歴を生成し、該座標履歴はＲＡＭ３に記憶される。ＣＰＵ１は、当該座標履歴に基づいて、例えば、複数の線データにより構成される所定の線画を表示部７に表示するよう表示制御部８に指示する。
【００４４】
利用者はマイク１１を用いて音声入力を行い、この際、音声入力制御部１２はマイク１１を介して受け付けた音声を音声データに変換してテキストデータを得る。音声入力制御部１２は、音声認識部１２１と、ＦＥＰ（かな漢字変換ソフトウエア）１２２とを備えている。
【００４５】
音声認識部１２１は、マイク１１を介して受け付けたアナログの音声信号を音声データに変換し、音響モデル、単語辞典等に基づいて語彙列に区分して、意味のあるひらがなのテキストデータに置き換える。該テキストデータはＲＡＭ３に記憶される。該テキストデータはＦＥＰ１２２に入力されてかな漢字変換され、複数の変換候補がある文字（単語）に対しては、斯かる候補が表示部７に表示され、ペン入力部９を介して利用者から何れかの候補の選択を受け付ける。
【００４６】
表示属性決定部６は、ペン入力部９を介して受付けた位置指定（指定座標）に基づき、前記表示属性を決定する。以下に、詳しく説明する。
本発明の電子黒板装置１００においては、利用者が表示部７の表示画面上に所定の範囲を指定しておき、マイク１１を用いて音声入力を行い、該音声に対応する文字又は文字列（以下、音声入力文字列と言う。）が該範囲内に表示される。なお、前記範囲の指定は、利用者がペン形入力器９２を用いて位置指定受付部９１の表面に一本の線を引くことによって行う。
【００４７】
このように、利用者が位置指定受付部９１の表面に一本の線を引く操作を行った場合、位置指定受付部９１は位置指定として受け付け、前記一本の線の始点及び終点の座標を検出し、ペン入力制御部１０を介して表示属性決定部６に送られる。表示属性決定部６は、検出された一本の線の始点及び終点の座標を、前記音声入力文字列の表示始終位置として決定する。
【００４８】
また、始点及び終点の座標を比較することによって、前記音声入力文字列の向きを決定する。例えば、前記始点座標及び終点座標のＹ値が等しく、該始点座標のＸ値が終点座標のＸ値より小さい場合、表示属性決定部６は前記音声入力文字列を横書きにて表示すべきであると決定する。一方、前記始点及び終点座標のＸ値が等しく、該始点座標のＹ値が終点座標のＹ値より大きい場合、表示属性決定部６は前記音声入力文字列を縦書きにて表示すべきであると決定する。
【００４９】
更に、表示属性決定部６は、検出された前記始点及び終点の座標間の距離を演算し、前記音声入力文字列の文字数に割ることによって、該音声入力文字列のフォントサイズを決定する。記憶部４には、前記始点及び終点の座標間の距離を前記音声入力文字列の文字数に割ることによって算出される算出値と、該算出値に対応するフォントサイズとが関連づけられたフォントテーブルが記憶されており、表示属性決定部６は該フォントテーブルに基づいて、前記音声入力文字列のフォントサイズを決定する。
【００５０】
図３及び図４は本発明の実施の形態１の電子黒板装置１００における、文字の入力の受け付け及び表示の処理を示すフローチャートである。発明の便宜上、利用者がペン形入力器９２を用いて位置指定受付部９１の表面に一本の線を引くことによって、表示部７の表示画面上に音声入力文字列を表示すべき範囲を指定しておき、マイク１１を用いて音声入力を行い、該音声に対応する１つの音声入力文字列が前記範囲内に表示させる場合を例として説明する。
【００５１】
例えば、利用者は前記利用者インターフェース画面に設けられた、音声入力のためのソフトキーをタッチ操作する（図５参照）。斯かる際、位置指定受付部９１は利用者のタッチ操作によって位置指定を受け付け、該位置指定に対応する指定座標に基づき、ＣＰＵ１は音声入力へ切替る指示を受け付ける（ステップＳ１０１）。ＣＰＵ１はＲＯＭ２に予め格納されている音声受付用のアプリケーションをＲＡＭ３上にロードして起動させる。
【００５２】
次いで、利用者がペン形入力器９２を用いて位置指定受付部９１の表面に一本の線を引いて、音声入力文字列を表示すべき範囲を指定する。ＣＰＵ１は斯かる操作を前記音声入力文字列の表示始終位置の指定として受け付け（ステップＳ１０２）、位置指定受付部９１は前記一本の線の始点及び終点の座標を検出し、表示属性決定部６は前記始点及び終点の座標を前記音声入力文字列の表示始終位置として決定する。
【００５３】
ＣＰＵ１は前記一本の線に係る座標履歴に基づき、表示部７に描画するように表示制御部８に指示する。ＣＰＵ１の指示に応じて、表示制御部８は該座標履歴に基づき、一本の線を表示部７に表示させる。ことにより、前記表示始終位置が表示部７に表示される（ステップＳ１０３）。
【００５４】
次いで、表示属性決定部６は、上述した手方により、前記音声入力文字列を縦書きすべきか、横書きすべきか決定する。説明の便宜上、本実施例においては、表示属性決定部６によって横書きであると決定されたものとし、該表示属性決定部６の決定結果に基づき、ＣＰＵ１はＦＥＰ１２２への入力方向を指定する（ステップＳ１０４）。
【００５５】
この後、ＣＰＵ１は音声入力制御部１２に音声の受付の開始を指示し、音声入力制御部１２はマイク１１を介して利用者から音声の受付を開始する（ステップＳ１０５）。
【００５６】
ＣＰＵ１はマイク１１を監視することによって、詳しくは、マイク１１から音声信号の出力があるか否かを監視することによって、利用者による音声入力があるか否かを判定する（ステップＳ１０６）。
【００５７】
マイク１１から音声信号の出力があることから、利用者による音声入力があると判定した場合（ステップＳ１０６：ＹＥＳ）、ＣＰＵ１は受け付けた音声のテキストデータへの変換を音声認識部１２１指示する。ＣＰＵ１の指示に応じて、音声認識部１２１は、上述した手方により、マイク１１を介して受け付けた音声をテキストデータに変換する（ステップＳ１０７）。
【００５８】
音声認識部１２１によって変換されたテキストデータはＦＥＰ１２２に入力されてかな漢字変換される（ステップＳ１０８）。
この際、ステップＳ１０７及びステップＳ１０８にて得られたデータはＲＡＭ３に記憶される（ステップＳ１０９）。一方、複数の変換候補がある文字（単語）においては、該変換候補が共に記憶される。ステップＳ１０９の後、処理は再びステップＳ１０６に戻る。
【００５９】
一方、マイク１１から音声信号の出力が無く、利用者による音声入力がないと判定した場合（ステップＳ１０６：ＮＯ）、ＣＰＵ１は計時部５に計時開始を指示する。次いで、ＣＰＵ１は前記計時開始から所定時間が経過したか否かを判定する（ステップＳ１１０）。
【００６０】
前記計時開始から所定時間が経過していないと判定した場合（ステップＳ１１０：ＮＯ）、ＣＰＵ１はステップＳ１０６の処理に戻る。一方、ＣＰＵ１が前記計時開始から所定時間が経過したと判定した場合（ステップＳ１１０：ＹＥＳ）、換言すれば、利用者による音声入力が途絶えてから所定時間が経過し、利用者による音声入力が終了したものとみなされる場合、表示属性決定部６は前記音声入力文字列のフォントサイズを決定する（ステップＳ１１１）。表示属性決定部６によるフォントサイズの決定は、上述したとおりであり、詳しい説明を省略する。
【００６１】
以上の処理によって、音声入力文字列を表示部７に表示するための表示属性、すなわち、表示始終位置（開始終了位置）、フォントサイズ及び向きが決定される。
【００６２】
次いで、ＣＰＵ１は、これら表示属性に基づく音声入力文字列の表示部７への表示を表示制御部８に指示する。ＣＰＵ１の指示に応じて、表示制御部８は決定された表示属性、ＲＡＭ３に記憶されているテキストデータ等に基づき、音声入力文字列を表示部７に表示する（ステップＳ１１２）。
【００６３】
この際、複数の変換候補があることから、かな漢字変換ができない単語においては、表示制御部８は、ＲＡＭ３に記憶されている変換候補に基づき、表示部７に該文字に対応する変換候補を表示して（ステップＳ１１３）、利用者による何れかの変換候補の選択を促す。
【００６４】
図５は本発明の実施の形態１の電子黒板装置１００による処理過程を示す例示図である。説明の便宜上、利用者がマイク１１を用いて「ほんじつのわーきんぐぐるーぷのぎだい」との文字列を音声入力した場合を例に説明する。
【００６５】
例えば、利用者はペン形入力器９２を用いて位置指定受付部９１の表面に一本の直線を引いた後、前記利用者インターフェース画面の音声入力のためのソフトキー（図中、白抜き矢印にて表示）をタッチ操作して「ほんじつのわーきんぐぐるーぷのぎだい」と発声することによって、文字列の音声入力を行い、該文字列がマイク１１を介して受け付けられ、上述した処理が施され、図５に示すように、前記一本の直線上に該文字列がひらがなにて表示される。なお、該文字列の先端側の「ほんじつ」との単語は複数の変換候補を有しており、該変換候補が、図５に示すように、列挙される。利用者が何れかの変換候補を選択することによって、当該単語は選択された候補に変換される。
【００６６】
斯かる際、ＣＰＵ１は位置指定受付部９１を監視することによって、すなわち、何れかの変換候補がタッチ操作されるかを監視することにより、利用者から何れかの変換候補の選択を受け付けたか否かを判定する（ステップＳ１１４）。ＣＰＵ１は利用者から変換候補の選択を受け付けていないと判定した場合（ステップＳ１１４：ＮＯ）、利用者から何れかの変換候補の選択を受け付けるまで待機する。
【００６７】
一方、利用者から何れかの変換候補の選択を受け付けたと判定した場合（ステップＳ１１４：ＹＥＳ）、すなわち、何れかの変換候補がタッチ操作された場合、ＣＰＵ１は、該タッチ点の座標に対応する変換候補への前記単語の変換を表示制御部８に指示する。
【００６８】
ＣＰＵ１の指示に応じて、表示制御部８は前記単語を前記タッチ操作された変換候補へ変換して表示する（ステップＳ１１５）。この後、ＣＰＵ１は表示始終位置による範囲内、すなわち、前記直線上の前記音声入力文字列を、一括して、例えば、一つの文章として記憶部４に記憶する。
【００６９】
上述した実施例においては、所定時間音声信号の出力が無い場合を音声入力の終了であるとみなす場合を例として説明したが、これに限るものでなく、ペン形入力器９２の操作、例えば前記一本の直線（図５参照）と交差する線を引くなどの所定のゼスチャーによる明示的な終了指示も可能である。
【００７０】
上述した実施例においては、１本の直線を引く操作によって音声（文字）を受け付ける場合を例として説明したが、これに限るものでない。例えば、「ペン形入力器９２の長押し」、「Ｖ字の描画」、「閉曲線の描画」、「文字列の上を１度以上往復」といった操作が行われた場合、夫々「既に入力した文字列（単語）の再変換（漢字変換）」、「挿入」、「ハイライト・色変更」、「一部または全部削除」を実行する指示として受け付けるように構成しても良い。
【００７１】
また、ペン形入力器９２を用いて所定の文字列（単語）をダブルタッチした場合、該単語が所定の選択枠にて囲まれることによって選択され、ペン形入力器９２を用いて該選択枠をドラッグすることにより拡大縮小の操作ができ、該選択枠の中をドラッグすることにより平行移動の操作ができるように構成しても良い。
【００７２】
また、上述した実施の形態においては、いわゆるタッチパネル（ペン入力部９）を用いて位置指定を受け付ける場合を例に挙げて説明したが、これに限るものでない。例えば、表示部７の２箇所にカメラを設置し、該カメラを用いて前記１本の直線に係る座標を取得するように構成しても良い。
【００７３】
更に、上述した実施の形態においては、一本の線を引いて音声入力文字列を表示すべき範囲を指定する場合を例として説明したが、線に限るものでなく、例えば、点、括弧等であっても良い。また、該線が透明であっても良い。
【００７４】
上述したような構成により、本発明の電子黒板装置においては、易しい操作で見やすい板書を行えることができる上に、文字列部分を図形として記憶せず、テキストデータとして記憶することにより、例えば斯かる文字列を電子的に蓄積した際には、記憶容量が小さくなると共に、全文検索によるファイル等の検索が可能になる。また、高解像度での印刷ができ、美しい文字での印刷が可能である。
【００７５】
（実施の形態２）
図６は本発明の実施の形態２の電子黒板装置１００の要部構成を示す機能ブロック図である。実施の形態２の電子黒板装置１００は、動作を行うためのコンピュータプログラムが、Ｉ／Ｆ１３を介してＣＤ−ＲＯＭ等の可搬型記録媒体Ａで提供することも可能であるように構成されている。更に、実施の形態２の電子黒板装置１００は、前記コンピュータプログラムを、図示しない外部装置からＩ／Ｆ１３を介してダウンロードすることも可能であるように構成されている。以下に、その内容を説明する。
【００７６】
実施の形態２のＩ／Ｆ１３は外装（又は内装）の記録媒体読み取り装置（図示せず）を備えており、該記録媒体読み取り装置に、受け付けた位置指定に基づき、テキストデータに係る文字の表示属性を決定させ、決定された表示属性に基づき、テキストデータ係る文字を表示させるプログラム等が記録された可搬型記録媒体Ａを挿入して、例えば、ＣＰＵ１がＲＯＭ２にこのプログラムをインストールする。かかるプログラムはＲＡＭ３にロードして実行される。これにより、実施の形態１の本発明の電子黒板装置１００として機能する。
【００７７】
前記記録媒体としては、いわゆるプログラムメディアであっても良く、磁気テープ及びカセットテープ等のテープ系、フレキシブルディスク及びハードディスク等の磁気ディスク並びにＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ等の光ディスクのディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュＲＯＭ等による半導体メモリを含めた固定的にプログラムコードを担持する媒体であっても良い。
【００７８】
Ｉ／Ｆ１３を介してネットワークからプログラムコードをダウンロードするように流動的にプログラムコードを担持する媒体であっても良い。なお、このように通信ネットワークからプログラムをダウンロードする場合には、そのダウンロード用のプログラムは予め本体装置に格納しておくか、あるいは別な記録媒体からインストールされるものであっても良い。なお、本発明は、前記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【００７９】
実施の形態１と同様の部分については、同一の符号を付して詳細な説明を省略する。
【符号の説明】
【００８０】
１ ＣＰＵ
４ 記憶部（記憶手段）
６ 表示属性決定部（属性決定手段）
７ 表示部
９ ペン入力部
１１ マイク
９１ 位置指定受付部
１００ 電子黒板装置
１２１ 音声認識部（音声受付手段）
【技術分野】
【０００１】
本発明は、文字の入力を受け付けて表示する入力表示装置、入力表示方法及びコンピュータプログラム並びに該コンピュータプログラムを記録している記録媒体に関する。
【背景技術】
【０００２】
近年、ＬＣＤモニタが大型化され、該ＬＣＤモニタにタッチパネル技術が加わることによって、いわゆる電子黒板としての利用が可能になった。
【０００３】
電子黒板としての利用においては、多くの場合、利用者が大型モニタの前に立って指先又はペンを用いてタッチパネルをタッチ操作するのでキーボードを併用することが難しいことから、タッチパネル上の指先又はペンで触れている箇所に点を描画し、又は所定時間ごとに繰り返してタッチ操作の有無を検知して得られる複数の接触座標を線で結ぶことにより文字、図形等を描画する方法が一般に用いられている。
【０００４】
一方、特許文献１には、コマンド操作までも音声で行うことにより、キーボード等の機械的入力手段を操作することなく音声だけでコンピュータのインタフェースを操作する、いわゆるハンドフリーで文字入力が可能な音声入力モード変換システムが開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００３−２９５８８４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、上述した電子黒板においては、タッチパネルの座標検知精度及び反応速度が劣る上に、ＬＣＤ面とタッチパネル面との間に距離があるなど、幾つかの要因によって正確に軌跡を描くことが困難であり、このため小さな文字を書くことが困難であり、たとえ書けたとしてもそれを視認できないという問題がある。
【０００７】
また、電子黒板にできる便利な機能として、入力済の図形を後で移動、拡縮等できる編集機能が付いているものの、文字又は文章を１つのまとまりとして正確に認識することが困難であるので、利用者が夫々の文字又は文章の編集を手作業で行う必要がある。これに対しては、操作の時間間隔に閾値を設けてまとまりを認識する機能、図形をＯＣＲ処理により文字へ変換する機能等も考案されているが、その精度が十分とは言えない。特許文献１の音声入力モード変換システムにおいても、このような問題を解決することは出来ない。
【０００８】
本発明は、斯かる事情に鑑みてなされたものであり、その目的とするところは、表示部、音声受付手段（音声受付部）及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段（位置指定受付部）を備える入力表示装置において、前記位置指定受付手段（位置指定受付部）が受け付けた位置指定に基づき、前記音声受付手段（音声受付部）が受け付けた音声のテキストデータに係る文字の前記表示部への表示属性が決定され、該表示属性に基づき前記文字が表示されることにより、小さな文字であっても入力受付及び表示が確実、且つ簡単に行われる入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を提供することにある。
【０００９】
また、本発明の他の目的は、前記位置指定受付手段が受け付けた位置指定に基づき、所定範囲内の文字を一括として記憶することにより、例えば、一つの文として記憶することにより、利用者の必要に応じて文字又は文章を１つのまとまりとして正確に認識することが出来る入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を提供することにある。
【課題を解決するための手段】
【００１０】
本発明に係る入力表示装置は、表示部と、音声を受け付けてテキストデータに変換する音声受付手段と、前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段とを備え、文字の入力を受け付けて表示する入力表示装置において、前記位置指定受付手段が受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定手段を備えることを特徴とする。
【００１１】
本発明にあっては、前記音声受付手段が受け付けた音声のテキストデータに係る文字を前記表示部に表示する際、前記位置指定受付手段が受け付けた位置指定に基づき、前記属性決定手段が前記文字の表示属性を決定する。該文字は前記前記属性決定手段によって決定された表示属性に基づき、前記表示部に表示される。
【００１２】
本発明に係る入力表示装置は、前記属性決定手段は前記文字の表示の開始終了位置を決定するように構成されていることを特徴とする。
【００１３】
本発明にあっては、前記属性決定手段は、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字の表示の開始終了位置を決定する。該文字は前記前記属性決定手段によって決定された開始終了位置に基づき、前記表示部に表示される。
【００１４】
本発明に係る入力表示装置は、前記属性決定手段は前記文字のフォントサイズを決定するように構成されていることを特徴とする。
【００１５】
本発明にあっては、前記属性決定手段は、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字のフォントサイズを決定する。該文字は前記属性決定手段によって決定されたフォントサイズに基づき、前記表示部に表示される。
【００１６】
本発明に係る入力表示装置は、前記属性決定手段は前記文字からなる文字列の向きを決定するように構成されていることを特徴とする。
【００１７】
本発明にあっては、前記属性決定手段は、前記位置指定受付手段が受け付けた位置指定に基づき、前記音声受付手段が受け付けた音声のテキストデータに係る文字からなる文字列の向きを決定する。該文字列は前記属性決定手段によって決定された向きに基づき、前記表示部に表示される。
【００１８】
本発明に係る入力表示装置は、前記属性決定手段は前記文字の表示の開始位置及び終了位置間の距離に基づき、該文字のフォントサイズを決定するように構成されていることを特徴とする。
【００１９】
本発明にあっては、例えば、前記属性決定手段は、前記表示の開始位置及び終了位置間の距離を、前記音声受付手段が受け付けた音声のテキストデータに係る文字（又は文字列）の長さに割ることによって、当該文字のフォントサイズを決定する。
【００２０】
本発明に係る入力表示装置は、前記開始終了位置による範囲内の文字を一括して記憶する記憶手段を備えることを特徴とする。
【００２１】
本発明にあっては、前記記憶手段が、前記開始終了位置による範囲内、換言すれば、前記表示の開始位置から終了位置までの範囲内の文字を一括して記憶する。例えば、前記記憶手段は、前記表示の開始位置から終了位置までの範囲内の文字を一つの文章として記憶する。
【００２２】
本発明に係る入力表示方法は、表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置にて、文字の入力を受け付けて表示する入力表示方法において、受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定ステップと、該属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示する表示ステップとを含むことを特徴とする。
【００２３】
本発明に係るコンピュータプログラムは、表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置を構成するコンピュータに、文字の入力を受け付けて表示させるコンピュータプログラムにおいて、コンピュータに、受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定させる属性決定ステップと、コンピュータに、前記属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示させる表示ステップとを実行させることを特徴とする。
【００２４】
本発明にあっては、前記音声受付部が受け付けた音声のテキストデータに係る文字を前記表示部に表示する際、前記位置指定受付部が受け付けた位置指定に基づき、前記文字の表示属性が決定される。該文字は決定された表示属性に基づき、前記表示部に表示される。
【００２５】
本発明に係る記録媒体は、前述の発明のコンピュータプログラムを記録してあることを特徴とする。
【００２６】
本発明にあっては、前記記録媒体に前述のコンピュータプログラムを記録する。コンピュータが前記記録媒体からコンピュータプログラムを読み出して、前述の入力表示装置及び入力表示方法がコンピュータにより実現される。
【発明の効果】
【００２７】
本発明によれば、たとえ入力される文字が小さな文字であっても、該文字の受付及び表示を確実、且つ簡単に行うことが出来る。
【００２８】
本発明によれば、利用者の必要に応じて、利用者によって入力された文字又は文章を１つのまとまりとして正確に認識することが出来る。
【図面の簡単な説明】
【００２９】
【図１】本発明の実施の形態１の電子黒板装置の要部構成を示す機能ブロック図である。
【図２】本発明の実施の形態１の電子黒板装置の表示部及びペン入力部の構成を説明する説明図である。
【図３】本発明の実施の形態１の電子黒板装置における、文字の入力の受け付け及び表示の処理を示すフローチャートである。
【図４】本発明の実施の形態１の電子黒板装置における、文字の入力の受け付け及び表示の処理を示すフローチャートである。
【図５】本発明の実施の形態１の電子黒板装置による処理過程を示す例示図である。
【図６】本発明の実施の形態２の電子黒板装置の要部構成を示す機能ブロック図である。
【発明を実施するための形態】
【００３０】
（実施の形態１）
以下に、本発明の実施の形態に係る、入力表示装置、入力表示方法、コンピュータプログラム及び記録媒体を、いわゆる電子黒板装置に適用した場合を例として、図面に基づいて詳述する。
【００３１】
図１は本発明の実施の形態１の電子黒板装置１００の要部構成を示す機能ブロック図である。電子黒板装置１００はＣＰＵ１、ＲＯＭ２及びＲＡＭ３を備えている。
【００３２】
ＲＯＭ２には各種の制御プログラム（例えば、電子黒板アプリケーション、描画用アプリケーション、音声受付用アプリケーション等）が予め格納されており、ＲＡＭ３はデータを一時的に記憶し、記憶順、記憶位置等に関係なく読み出すことが可能である。また、ＲＡＭ３は、例えば、ＲＯＭ２から読み出されたプログラム、該プログラムを実行することにより発生する各種データ等を記憶する。また、ＲＡＭ３には後述する座標履歴を記憶する
【００３３】
ＣＰＵ１は、ＲＯＭ２に予め格納されている制御プログラムをＲＡＭ３上にロードして実行することによって、バスＮを介して以下の各種ハードウェアの制御を行い、前記座標履歴を作成し、また、装置全体を本発明の電子黒板装置１００として動作させる。
【００３４】
また、電子黒板装置１００は、表示部７と、該表示部７への文字、線画等の表示を制御する表示制御部８と、後述するペン形入力器９２を介して利用者から表示部７上の位置指定、文字、線画等の入力を受け付けるペン入力部９と、該ペン入力部９による入力の受付を制御するペン入力制御部１０と、利用者から音声を受け付けるマイク１１と、マイク１１による音声の受付の制御を行う音声入力制御部１２とを備えている。
【００３５】
更に、電子黒板装置１００は、例えば、ハードディスク等の不揮発性の半導体メモリであり、後述するフォントテーブルが記憶されている記憶部４と、所定時刻からの時間の経過を測る計時部５と、表示制御部８が表示部７に文字又は文字列の表示を行う際における、表示属性を決定する表示属性決定部６とを備えている。
【００３６】
表示部７は、例えばＬＣＤモニタであり、表示部７にはペン入力部９及びマイク１１を介して利用者から受け付ける線画及び文字が表示される。また、表示部７には、電子黒板装置１００にて動作するソフトウエアを選択して起動させるための利用者インターフェース画面等が表示される。
【００３７】
表示制御部８は、表示属性決定部６によって決定された表示属性に基づいて、マイク１１を介して受け付けた音声に係る文字からなる文字又は文字列を表示部７に表示させる。前記表示属性は例えば、表示すべき文字又は文字列の表示開始及び表示終了位置（以下、表示始終位置と言う）、フォントサイズ、縦書き、横書き（向き）である。また、表示制御部８は、後述する位置指定受付部９１が受け付けた位置指定に係る座標に基づき、ペン形入力器９２を介して利用者から入力される線画を表示部７に表示させる。
【００３８】
図２は実施の形態１の電子黒板装置１００の表示部７及びペン入力部９の構成を説明する説明図である。
ペン入力部９は、いわゆるタッチパネルであり、利用者から表示部７の表示画面上における位置指定を受け付ける位置指定受付部９１と、ペン形状を有しており、利用者が該位置指定、文字及び線画の入力の際に用いるペン形入力器９２とを備えている。ペン入力部９は、これらを介して、利用者から表示部７上の位置指定、文字、線画等の入力を受け付ける。
【００３９】
ペン入力制御部１０は、ペン入力部９による入力の受付に関する制御を行ない、また、ペン入力部９の位置指定受付部９１を介して受け付けられる位置指定に係る座標（以下、指定座標と言う。）をＣＰＵ１に送出する。
【００４０】
ＣＰＵ１は、ペン入力制御部１０から指定座標を取得して、該指定座標を検出の順に関連付けた座標履歴を生成し、生成された座標履歴はＲＡＭ３に保存される。また、表示制御部８は、ＲＡＭ３に保存された座標履歴に基づき、例えば、表示部７に線画を表示させる。以下に、詳しく説明する。
【００４１】
ペン入力部９の位置指定受付部９１は、表示部７の表示画面上に重ねて設置される。本実施の形態では位置指定受付部９１がいわゆる光遮断型であるものとする。該光遮断型においては、入力はペン形入力器９２の先端が位置指定受付部９１表面の直近に近づいたことに応じて、位置指定受付部９１により光遮断が検出されることによって実現される。
【００４２】
利用者は電子黒板装置１００に予めインストールされている描画用アプリケーションソフトを起動して画像データを入力する。例えば、利用者がペン形入力器９２を用いて位置指定受付部９１の表面上に一本の線を引く操作を行った場合を例に挙げて説明する。初めに光遮断が検出され、その後連続した光遮断があった場合、ＣＰＵ１は、一本の線の入力が開始され、現在入力中であると判断する。一方、光遮断が途絶え、所定時間が経過した場合、ＣＰＵ１は一本の線の入力が終了したと判断する。これによって一本の線に係る画像データ（例えば、座標履歴）が取得でき、該画像データに基づき表示部７に一本の線が表示される。
【００４３】
位置指定受付部９１は、描画された線を複数の連続した点の集合としてとらえ、各点の座標（指定座標）を検出する。検出された各点の座標はペン入力制御部１０を介してＣＰＵ１に送出される。ＣＰＵ１は、送出された座標を受け、当該指定座標を、検出の順に該指定座標を関連付けて座標履歴を生成し、該座標履歴はＲＡＭ３に記憶される。ＣＰＵ１は、当該座標履歴に基づいて、例えば、複数の線データにより構成される所定の線画を表示部７に表示するよう表示制御部８に指示する。
【００４４】
利用者はマイク１１を用いて音声入力を行い、この際、音声入力制御部１２はマイク１１を介して受け付けた音声を音声データに変換してテキストデータを得る。音声入力制御部１２は、音声認識部１２１と、ＦＥＰ（かな漢字変換ソフトウエア）１２２とを備えている。
【００４５】
音声認識部１２１は、マイク１１を介して受け付けたアナログの音声信号を音声データに変換し、音響モデル、単語辞典等に基づいて語彙列に区分して、意味のあるひらがなのテキストデータに置き換える。該テキストデータはＲＡＭ３に記憶される。該テキストデータはＦＥＰ１２２に入力されてかな漢字変換され、複数の変換候補がある文字（単語）に対しては、斯かる候補が表示部７に表示され、ペン入力部９を介して利用者から何れかの候補の選択を受け付ける。
【００４６】
表示属性決定部６は、ペン入力部９を介して受付けた位置指定（指定座標）に基づき、前記表示属性を決定する。以下に、詳しく説明する。
本発明の電子黒板装置１００においては、利用者が表示部７の表示画面上に所定の範囲を指定しておき、マイク１１を用いて音声入力を行い、該音声に対応する文字又は文字列（以下、音声入力文字列と言う。）が該範囲内に表示される。なお、前記範囲の指定は、利用者がペン形入力器９２を用いて位置指定受付部９１の表面に一本の線を引くことによって行う。
【００４７】
このように、利用者が位置指定受付部９１の表面に一本の線を引く操作を行った場合、位置指定受付部９１は位置指定として受け付け、前記一本の線の始点及び終点の座標を検出し、ペン入力制御部１０を介して表示属性決定部６に送られる。表示属性決定部６は、検出された一本の線の始点及び終点の座標を、前記音声入力文字列の表示始終位置として決定する。
【００４８】
また、始点及び終点の座標を比較することによって、前記音声入力文字列の向きを決定する。例えば、前記始点座標及び終点座標のＹ値が等しく、該始点座標のＸ値が終点座標のＸ値より小さい場合、表示属性決定部６は前記音声入力文字列を横書きにて表示すべきであると決定する。一方、前記始点及び終点座標のＸ値が等しく、該始点座標のＹ値が終点座標のＹ値より大きい場合、表示属性決定部６は前記音声入力文字列を縦書きにて表示すべきであると決定する。
【００４９】
更に、表示属性決定部６は、検出された前記始点及び終点の座標間の距離を演算し、前記音声入力文字列の文字数に割ることによって、該音声入力文字列のフォントサイズを決定する。記憶部４には、前記始点及び終点の座標間の距離を前記音声入力文字列の文字数に割ることによって算出される算出値と、該算出値に対応するフォントサイズとが関連づけられたフォントテーブルが記憶されており、表示属性決定部６は該フォントテーブルに基づいて、前記音声入力文字列のフォントサイズを決定する。
【００５０】
図３及び図４は本発明の実施の形態１の電子黒板装置１００における、文字の入力の受け付け及び表示の処理を示すフローチャートである。発明の便宜上、利用者がペン形入力器９２を用いて位置指定受付部９１の表面に一本の線を引くことによって、表示部７の表示画面上に音声入力文字列を表示すべき範囲を指定しておき、マイク１１を用いて音声入力を行い、該音声に対応する１つの音声入力文字列が前記範囲内に表示させる場合を例として説明する。
【００５１】
例えば、利用者は前記利用者インターフェース画面に設けられた、音声入力のためのソフトキーをタッチ操作する（図５参照）。斯かる際、位置指定受付部９１は利用者のタッチ操作によって位置指定を受け付け、該位置指定に対応する指定座標に基づき、ＣＰＵ１は音声入力へ切替る指示を受け付ける（ステップＳ１０１）。ＣＰＵ１はＲＯＭ２に予め格納されている音声受付用のアプリケーションをＲＡＭ３上にロードして起動させる。
【００５２】
次いで、利用者がペン形入力器９２を用いて位置指定受付部９１の表面に一本の線を引いて、音声入力文字列を表示すべき範囲を指定する。ＣＰＵ１は斯かる操作を前記音声入力文字列の表示始終位置の指定として受け付け（ステップＳ１０２）、位置指定受付部９１は前記一本の線の始点及び終点の座標を検出し、表示属性決定部６は前記始点及び終点の座標を前記音声入力文字列の表示始終位置として決定する。
【００５３】
ＣＰＵ１は前記一本の線に係る座標履歴に基づき、表示部７に描画するように表示制御部８に指示する。ＣＰＵ１の指示に応じて、表示制御部８は該座標履歴に基づき、一本の線を表示部７に表示させる。ことにより、前記表示始終位置が表示部７に表示される（ステップＳ１０３）。
【００５４】
次いで、表示属性決定部６は、上述した手方により、前記音声入力文字列を縦書きすべきか、横書きすべきか決定する。説明の便宜上、本実施例においては、表示属性決定部６によって横書きであると決定されたものとし、該表示属性決定部６の決定結果に基づき、ＣＰＵ１はＦＥＰ１２２への入力方向を指定する（ステップＳ１０４）。
【００５５】
この後、ＣＰＵ１は音声入力制御部１２に音声の受付の開始を指示し、音声入力制御部１２はマイク１１を介して利用者から音声の受付を開始する（ステップＳ１０５）。
【００５６】
ＣＰＵ１はマイク１１を監視することによって、詳しくは、マイク１１から音声信号の出力があるか否かを監視することによって、利用者による音声入力があるか否かを判定する（ステップＳ１０６）。
【００５７】
マイク１１から音声信号の出力があることから、利用者による音声入力があると判定した場合（ステップＳ１０６：ＹＥＳ）、ＣＰＵ１は受け付けた音声のテキストデータへの変換を音声認識部１２１指示する。ＣＰＵ１の指示に応じて、音声認識部１２１は、上述した手方により、マイク１１を介して受け付けた音声をテキストデータに変換する（ステップＳ１０７）。
【００５８】
音声認識部１２１によって変換されたテキストデータはＦＥＰ１２２に入力されてかな漢字変換される（ステップＳ１０８）。
この際、ステップＳ１０７及びステップＳ１０８にて得られたデータはＲＡＭ３に記憶される（ステップＳ１０９）。一方、複数の変換候補がある文字（単語）においては、該変換候補が共に記憶される。ステップＳ１０９の後、処理は再びステップＳ１０６に戻る。
【００５９】
一方、マイク１１から音声信号の出力が無く、利用者による音声入力がないと判定した場合（ステップＳ１０６：ＮＯ）、ＣＰＵ１は計時部５に計時開始を指示する。次いで、ＣＰＵ１は前記計時開始から所定時間が経過したか否かを判定する（ステップＳ１１０）。
【００６０】
前記計時開始から所定時間が経過していないと判定した場合（ステップＳ１１０：ＮＯ）、ＣＰＵ１はステップＳ１０６の処理に戻る。一方、ＣＰＵ１が前記計時開始から所定時間が経過したと判定した場合（ステップＳ１１０：ＹＥＳ）、換言すれば、利用者による音声入力が途絶えてから所定時間が経過し、利用者による音声入力が終了したものとみなされる場合、表示属性決定部６は前記音声入力文字列のフォントサイズを決定する（ステップＳ１１１）。表示属性決定部６によるフォントサイズの決定は、上述したとおりであり、詳しい説明を省略する。
【００６１】
以上の処理によって、音声入力文字列を表示部７に表示するための表示属性、すなわち、表示始終位置（開始終了位置）、フォントサイズ及び向きが決定される。
【００６２】
次いで、ＣＰＵ１は、これら表示属性に基づく音声入力文字列の表示部７への表示を表示制御部８に指示する。ＣＰＵ１の指示に応じて、表示制御部８は決定された表示属性、ＲＡＭ３に記憶されているテキストデータ等に基づき、音声入力文字列を表示部７に表示する（ステップＳ１１２）。
【００６３】
この際、複数の変換候補があることから、かな漢字変換ができない単語においては、表示制御部８は、ＲＡＭ３に記憶されている変換候補に基づき、表示部７に該文字に対応する変換候補を表示して（ステップＳ１１３）、利用者による何れかの変換候補の選択を促す。
【００６４】
図５は本発明の実施の形態１の電子黒板装置１００による処理過程を示す例示図である。説明の便宜上、利用者がマイク１１を用いて「ほんじつのわーきんぐぐるーぷのぎだい」との文字列を音声入力した場合を例に説明する。
【００６５】
例えば、利用者はペン形入力器９２を用いて位置指定受付部９１の表面に一本の直線を引いた後、前記利用者インターフェース画面の音声入力のためのソフトキー（図中、白抜き矢印にて表示）をタッチ操作して「ほんじつのわーきんぐぐるーぷのぎだい」と発声することによって、文字列の音声入力を行い、該文字列がマイク１１を介して受け付けられ、上述した処理が施され、図５に示すように、前記一本の直線上に該文字列がひらがなにて表示される。なお、該文字列の先端側の「ほんじつ」との単語は複数の変換候補を有しており、該変換候補が、図５に示すように、列挙される。利用者が何れかの変換候補を選択することによって、当該単語は選択された候補に変換される。
【００６６】
斯かる際、ＣＰＵ１は位置指定受付部９１を監視することによって、すなわち、何れかの変換候補がタッチ操作されるかを監視することにより、利用者から何れかの変換候補の選択を受け付けたか否かを判定する（ステップＳ１１４）。ＣＰＵ１は利用者から変換候補の選択を受け付けていないと判定した場合（ステップＳ１１４：ＮＯ）、利用者から何れかの変換候補の選択を受け付けるまで待機する。
【００６７】
一方、利用者から何れかの変換候補の選択を受け付けたと判定した場合（ステップＳ１１４：ＹＥＳ）、すなわち、何れかの変換候補がタッチ操作された場合、ＣＰＵ１は、該タッチ点の座標に対応する変換候補への前記単語の変換を表示制御部８に指示する。
【００６８】
ＣＰＵ１の指示に応じて、表示制御部８は前記単語を前記タッチ操作された変換候補へ変換して表示する（ステップＳ１１５）。この後、ＣＰＵ１は表示始終位置による範囲内、すなわち、前記直線上の前記音声入力文字列を、一括して、例えば、一つの文章として記憶部４に記憶する。
【００６９】
上述した実施例においては、所定時間音声信号の出力が無い場合を音声入力の終了であるとみなす場合を例として説明したが、これに限るものでなく、ペン形入力器９２の操作、例えば前記一本の直線（図５参照）と交差する線を引くなどの所定のゼスチャーによる明示的な終了指示も可能である。
【００７０】
上述した実施例においては、１本の直線を引く操作によって音声（文字）を受け付ける場合を例として説明したが、これに限るものでない。例えば、「ペン形入力器９２の長押し」、「Ｖ字の描画」、「閉曲線の描画」、「文字列の上を１度以上往復」といった操作が行われた場合、夫々「既に入力した文字列（単語）の再変換（漢字変換）」、「挿入」、「ハイライト・色変更」、「一部または全部削除」を実行する指示として受け付けるように構成しても良い。
【００７１】
また、ペン形入力器９２を用いて所定の文字列（単語）をダブルタッチした場合、該単語が所定の選択枠にて囲まれることによって選択され、ペン形入力器９２を用いて該選択枠をドラッグすることにより拡大縮小の操作ができ、該選択枠の中をドラッグすることにより平行移動の操作ができるように構成しても良い。
【００７２】
また、上述した実施の形態においては、いわゆるタッチパネル（ペン入力部９）を用いて位置指定を受け付ける場合を例に挙げて説明したが、これに限るものでない。例えば、表示部７の２箇所にカメラを設置し、該カメラを用いて前記１本の直線に係る座標を取得するように構成しても良い。
【００７３】
更に、上述した実施の形態においては、一本の線を引いて音声入力文字列を表示すべき範囲を指定する場合を例として説明したが、線に限るものでなく、例えば、点、括弧等であっても良い。また、該線が透明であっても良い。
【００７４】
上述したような構成により、本発明の電子黒板装置においては、易しい操作で見やすい板書を行えることができる上に、文字列部分を図形として記憶せず、テキストデータとして記憶することにより、例えば斯かる文字列を電子的に蓄積した際には、記憶容量が小さくなると共に、全文検索によるファイル等の検索が可能になる。また、高解像度での印刷ができ、美しい文字での印刷が可能である。
【００７５】
（実施の形態２）
図６は本発明の実施の形態２の電子黒板装置１００の要部構成を示す機能ブロック図である。実施の形態２の電子黒板装置１００は、動作を行うためのコンピュータプログラムが、Ｉ／Ｆ１３を介してＣＤ−ＲＯＭ等の可搬型記録媒体Ａで提供することも可能であるように構成されている。更に、実施の形態２の電子黒板装置１００は、前記コンピュータプログラムを、図示しない外部装置からＩ／Ｆ１３を介してダウンロードすることも可能であるように構成されている。以下に、その内容を説明する。
【００７６】
実施の形態２のＩ／Ｆ１３は外装（又は内装）の記録媒体読み取り装置（図示せず）を備えており、該記録媒体読み取り装置に、受け付けた位置指定に基づき、テキストデータに係る文字の表示属性を決定させ、決定された表示属性に基づき、テキストデータ係る文字を表示させるプログラム等が記録された可搬型記録媒体Ａを挿入して、例えば、ＣＰＵ１がＲＯＭ２にこのプログラムをインストールする。かかるプログラムはＲＡＭ３にロードして実行される。これにより、実施の形態１の本発明の電子黒板装置１００として機能する。
【００７７】
前記記録媒体としては、いわゆるプログラムメディアであっても良く、磁気テープ及びカセットテープ等のテープ系、フレキシブルディスク及びハードディスク等の磁気ディスク並びにＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ等の光ディスクのディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュＲＯＭ等による半導体メモリを含めた固定的にプログラムコードを担持する媒体であっても良い。
【００７８】
Ｉ／Ｆ１３を介してネットワークからプログラムコードをダウンロードするように流動的にプログラムコードを担持する媒体であっても良い。なお、このように通信ネットワークからプログラムをダウンロードする場合には、そのダウンロード用のプログラムは予め本体装置に格納しておくか、あるいは別な記録媒体からインストールされるものであっても良い。なお、本発明は、前記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【００７９】
実施の形態１と同様の部分については、同一の符号を付して詳細な説明を省略する。
【符号の説明】
【００８０】
１ ＣＰＵ
４ 記憶部（記憶手段）
６ 表示属性決定部（属性決定手段）
７ 表示部
９ ペン入力部
１１ マイク
９１ 位置指定受付部
１００ 電子黒板装置
１２１ 音声認識部（音声受付手段）
【特許請求の範囲】
【請求項１】
表示部と、音声を受け付けてテキストデータに変換する音声受付手段と、前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段とを備え、文字の入力を受け付けて表示する入力表示装置において、
前記位置指定受付手段が受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定手段を備えることを特徴とする入力表示装置。
【請求項２】
前記属性決定手段は前記文字の表示の開始終了位置を決定するように構成されていることを特徴とする請求項１に記載の入力表示装置。
【請求項３】
前記属性決定手段は前記文字のフォントサイズを決定するように構成されていることを特徴とする請求項１に記載の入力表示装置。
【請求項４】
前記属性決定手段は前記文字からなる文字列の向きを決定するように構成されていることを特徴とする請求項１に記載の入力表示装置。
【請求項５】
前記属性決定手段は前記文字の表示の開始位置及び終了位置間の距離に基づき、該文字のフォントサイズを決定するように構成されていることを特徴とする請求項２に記載の入力表示装置。
【請求項６】
前記開始終了位置による範囲内の文字を一括して記憶する記憶手段を備えることを特徴とする請求項２又は５に記載の入力表示装置。
【請求項７】
表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置にて、文字の入力を受け付けて表示する入力表示方法において、
受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定ステップと、
該属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示する表示ステップと
を含むことを特徴とする入力表示方法。
【請求項８】
表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置を構成するコンピュータに、文字の入力を受け付けて表示させるコンピュータプログラムにおいて、
コンピュータに、受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定させる属性決定ステップと、
コンピュータに、前記属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示させる表示ステップと
を実行させることを特徴とするコンピュータプログラム。
【請求項９】
請求項８に記載のコンピュータプログラムを記録してあることを特徴とするコンピュータでの読み取りが可能な記録媒体。
【請求項１】
表示部と、音声を受け付けてテキストデータに変換する音声受付手段と、前記表示部の表示画面上の位置指定を受け付ける位置指定受付手段とを備え、文字の入力を受け付けて表示する入力表示装置において、
前記位置指定受付手段が受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定手段を備えることを特徴とする入力表示装置。
【請求項２】
前記属性決定手段は前記文字の表示の開始終了位置を決定するように構成されていることを特徴とする請求項１に記載の入力表示装置。
【請求項３】
前記属性決定手段は前記文字のフォントサイズを決定するように構成されていることを特徴とする請求項１に記載の入力表示装置。
【請求項４】
前記属性決定手段は前記文字からなる文字列の向きを決定するように構成されていることを特徴とする請求項１に記載の入力表示装置。
【請求項５】
前記属性決定手段は前記文字の表示の開始位置及び終了位置間の距離に基づき、該文字のフォントサイズを決定するように構成されていることを特徴とする請求項２に記載の入力表示装置。
【請求項６】
前記開始終了位置による範囲内の文字を一括して記憶する記憶手段を備えることを特徴とする請求項２又は５に記載の入力表示装置。
【請求項７】
表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置にて、文字の入力を受け付けて表示する入力表示方法において、
受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定する属性決定ステップと、
該属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示する表示ステップと
を含むことを特徴とする入力表示方法。
【請求項８】
表示部、音声を受け付けてテキストデータに変換する音声受付部、及び前記表示部の表示画面上の位置指定を受け付ける位置指定受付部を備える入力表示装置を構成するコンピュータに、文字の入力を受け付けて表示させるコンピュータプログラムにおいて、
コンピュータに、受け付けた位置指定に基づき、前記テキストデータに係る文字の表示属性を決定させる属性決定ステップと、
コンピュータに、前記属性決定ステップにて決定された表示属性に基づき、前記テキストデータに係る文字を表示させる表示ステップと
を実行させることを特徴とするコンピュータプログラム。
【請求項９】
請求項８に記載のコンピュータプログラムを記録してあることを特徴とするコンピュータでの読み取りが可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２０１２−８８９６９（Ｐ２０１２−８８９６９Ａ）
【公開日】平成２４年５月１０日（２０１２．５．１０）
【国際特許分類】
【出願番号】特願２０１０−２３５７５７（Ｐ２０１０−２３５７５７）
【出願日】平成２２年１０月２０日（２０１０．１０．２０）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２４年５月１０日（２０１２．５．１０）
【国際特許分類】
【出願日】平成２２年１０月２０日（２０１０．１０．２０）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]