筆記支援装置、筆記支援方法、およびプログラム
【課題】クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行ない得る、筆記支援装置、筆記支援方法、およびプログラムを提供する。
【解決手段】筆記支援装置１００は、授業中の映像データ及び音声データを取得する教師端末２のアドレス、生徒端末６のアドレスを格納する、格納部１と、口述筆記を行なう筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを筆記者端末４のアドレスとして格納部１に格納する、筆記者申し込み受付部１３と、格納部１に、筆記者端末４のアドレスが登録されているかどうかを判定し、登録されている場合に、教師端末２に対して、映像データ及び音声データの筆記者端末４への送信を指示し、筆記者端末４に対して、作成したテキストデータの生徒端末６への送信を指示する、制御部１４とを備えている。
【解決手段】筆記支援装置１００は、授業中の映像データ及び音声データを取得する教師端末２のアドレス、生徒端末６のアドレスを格納する、格納部１と、口述筆記を行なう筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを筆記者端末４のアドレスとして格納部１に格納する、筆記者申し込み受付部１３と、格納部１に、筆記者端末４のアドレスが登録されているかどうかを判定し、登録されている場合に、教師端末２に対して、映像データ及び音声データの筆記者端末４への送信を指示し、筆記者端末４に対して、作成したテキストデータの生徒端末６への送信を指示する、制御部１４とを備えている。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、聴覚障害者に対する口述筆記を支援するための、筆記支援装置、筆記支援方法、およびプログラムに関する。
【背景技術】
【０００２】
近年、インターネットの普及により、複数の利用者間での、映像、音声、テキストの通信及び共有が、安価にまたは無料で実現されている。例えば、ＰＣ（Personal Computer）にスカイプ（登録商標)と呼ばれる通信ソフトをインストールし、これを起動すれば、任意のインターネット利用者間で、無料の通話が可能になる。また、スカイプを使用した場合は、音声通話のみならず、Ｗｅｂカメラの設置によって映像の送受信も可能になり、更には、相互にキーボードから入力するテキスト画面の共有（チャット）も可能になる。
【０００３】
このような、スカイプをはじめとする新しい通信手段、Ｙａｈｏｏ社が提供するブログのような情報発信手段を通じて、不特定多数の人同士で、協力をしあう活動及び仕組みが様々な分野で実現されている。このような活動及び仕組みは、「クラウドソーシング（Crowd Sourcing)）と呼ばれることがある。なお、ここでの「クラウド(Crowd)」は、「群集」の意味であって、クラウドコンピューティングの「クラウド（Cloud）：雲の意味」とは、日本語のカタカナ標記では同じであるが、英語での意味及びスペルは全く異なるものである。
【０００４】
具体的なクラウドソーシングの例としては、アクセシビリティ（Accessibility）が挙げられる。アクセシビリティとは、障害者を含む誰もが、様々な製品、建物、サービスなどを支障なくできるかどうか、またはその度合を意味する。つまり、クラウドソーシングは、身体障害者が健常者と同レベルのサービスを受容するための活動（アクセシビリティ分野での活動）において、期待されている。
【０００５】
例えば、視覚障害者は、Ｗｅｂページにおいて、テキストで書かれている部分については、音声合成ソフトウェアを使ってテキスト部分を自動的に読み上げることにより、内容を理解することができるが、写真及び画像ファイルが貼付けられている部分については、理解できない。
【０００６】
一方、ＨＴＭＬ言語では、写真ファイルおよび画像ファイルの所に、タグによって、その内容をテキストで記載することができる仕組みが用意されている。従って、視覚障害者が読むことを想定して、このタグを使って写真ファイルおよび画像ファイルの内容がテキストで記述されていると、上記の読み上げソフトは、このタグを認識し、注釈情報として写真および画像などのテキスト部分も読み上げることとなる。例えば、「夕暮れの富士山を撮影した写真を掲載しています」と、写真のところにテキストが記述されている場合が挙げられる。こうすることで、視覚障害者は、写真および画像がどういう内容のものなのかを、概略知ることができるようになる。
【０００７】
但し、このようなタグをすべての写真ファイルおよび画像ファイルの裏側に用意することは、困難でもあり、視覚障害者が内容を十分に理解できない場合もある。このような視覚障害者における困難の解決を支援するため、鳥取県とＩＢＭ社とが新たなサービスを発表している（例えば、非特許文献１参照）。
【０００８】
具体的には、非特許文献１では、視覚障害者は、特定のホームページを読んでいるときに、写真および画像の部分で理解の困難に遭遇すると、そのことを通知する。そして、この通知を見た不特定の健常者である第三者は、その写真および画像の部分を参照して、その内容についての書き込みを行なう。これにより、視覚障害者の困難の解決が支援されるものと考えられる。
【０００９】
非特許文献１に開示されたサービスは、鳥取県のホームページに限定して開始されている。もちろん、全てのＷｅｂページの作成者が、最初から完全に、写真および画像のテキスト部分を準備していれば、または視覚障害者からのクレームがあったとしても、Ｗｅｂページの作成者がすぐに対応できれば、このようなサービスは必要ないとも考える。但し、これらのことを実現するのは、必ずしも容易ではないので、このような不特定の第三者による善意をベースとしたクラウドソーシングのサービスの存在意義がある。
【００１０】
続いて、聴覚障害者へのサービスについて説明する。例えば、聴覚障害者が小学生であった場合、この児童は、授業における先生の口の動きを読み取ることで、発話の内容を理解しようと努力する。但し、先生が、常に、その子供から先生の口の動きが良く見える方向を向いてくれるとは限らないし、口の動きを読むだけでは、発話の内容を理解できないことも多い。
【００１１】
そのため、音声認識装置を教室に用意しておき、音声認識装置によって、先生および他の児童の発話を認識し、認識結果を文字に変換して、ディスプレイに表示するようにしたシステムが検討されている。
【先行技術文献】
【非特許文献】
【００１２】
【非特許文献１】「公共ウェブサイトのアクセシビリティ向上事業に着手」、[online]、2010年8月2日、ＩＢＭ社プレスリリース、［2011年3月31日検索］、インターネット<URL:http://www-06.ibm.com/jp/press/2010/08/0201.html>
【発明の概要】
【発明が解決しようとする課題】
【００１３】
上述の音声認識システムを教室に配置すれば、聴覚障害を持った児童の理解支援に大いに役立つと期待されるが、現在の音声認識の技術では、音声認識には間違いが含まれるため、このようなシステムの実現は困難であると考えられる。
【００１４】
つまり、対象が大人の場合であれば、多くの音声認識の間違いを含んだ文字情報を見ても、頭の中で「本当はこういう意味なんだけど、同音異義語を音声認識装置が誤解して、こういう結果が出たんだな」というような知的な解釈を行い、訂正後の内容で理解しつつ使うことが可能である。
【００１５】
しかし、対象が、小学生のような子供の場合であれば、このような理解と訂正をしつつ、多くの間違いを含んだ音声認識装置の出力を利用するのには、困難を伴うと考えられる。従って、このような状況下では、音声認識装置以外によって授業内容の理解を支援するシステムが求められている。
【００１６】
本発明の目的の一例は、上記問題を解消し、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行ない得る、筆記支援装置、筆記支援方法、およびプログラムを提供することにある。
【課題を解決するための手段】
【００１７】
上記目的を達成するため、本発明の一側面における筆記支援装置は、授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末の間で通信を行う、筆記支援装置であって、
前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを格納する、格納部と、
前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記格納部に格納する、筆記者申し込み受付部と、
前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、制御部と、
を備えている、ことを特徴とする。
【００１８】
また、上記目的を達成するため、本発明の一側面における筆記支援方法は、授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、筆記支援を行なうための方法であって、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を有する、ことを特徴とする。
【００１９】
更に、上記目的を達成するため、本発明の一側面におけるプログラムは、授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、コンピュータによって、筆記支援を行なうためのプログラムであって、
前記コンピュータに、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を実行させることを特徴とする。
【発明の効果】
【００２０】
以上のように、本発明における、筆記支援装置、筆記支援方法、およびプログラムによれば、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行うことができる。
【図面の簡単な説明】
【００２１】
【図１】図１は、本発明の実施の形態における筆記支援装置の構成を示すブロック図である。
【図２】図２は、本発明の実施の形態１における筆記支援装置の会話開始時の動作を示すフロー図である。
【図３】図３は、本発明の実施の形態１における筆記支援装置の会話終了時の動作を示すフロー図である。
【図４】図４は、本発明の実施の形態１における筆記支援装置が授業の開始及び終了を管理するために行う動作を示すフロー図である。
【図５】図５は、本発明の実施の形態における筆記支援装置の授業申し込み受け付け時の動作を示すフロー図である。
【図６】図６は、本発明の実施の形態における筆記支援装置の筆記者申し込み受け付け時の動作を示すフロー図である。
【図７】図７は、本発明の実施の形態２における筆記支援装置の構成を示すブロック図である。
【図８】図８は、本発明の実施の形態３における筆記支援装置の構成を示すブロック図である。
【図９】図９は、本発明の実施の形態３における筆記支援装置の動作を示すフロー図である。
【図１０】図１０は、本発明の実施の形態４における筆記支援装置の構成を示すブロック図である。
【図１１】図１１は、本発明の実施の形態４における筆記支援装置の動作を示すフロー図である。
【図１２】図１２は、本発明の実施の形態１〜４における筆記支援装置を実現するコンピュータの一例を示すブロック図である。
【図１３】図１３は、本発明の原理の概要を説明するための説明図である。
【発明を実施するための形態】
【００２２】
（発明の概要）
上述した課題を解決するため、本発明においては、クラウドソーシングの考え方が導入される。以下に、図１３を用いて、本発明の概要について説明する。図１３は、本発明の原理を説明するための説明図である。
【００２３】
ある授業があり、そこに聴覚障害者の生徒がいた場合を想定する。この場合において、図１３に示すように、先生にマイクを取付、先生と黒板とを写すカメラを設置し、授業中に、マイクの音声とカメラの映像とを、インターネットを介して、全く別の場所にいる筆記者のＰＣに送信する。
【００２４】
筆記者は、先生の姿および黒板に書かれた情報を参考にして、マイクから聞こえる先生の声を、口述筆記する。その口述筆記の内容は、インターネットを介して、生徒のもつディスプレイに表示される。生徒は、そのディスプレイを見ることで、先生の発話を知ることができる。また、授業中に、先生と別の生徒との間でやり取りが行なわれたときは、口述筆記者は、それについても口述筆記してもよい。
【００２５】
例えば、口述筆記者が、
先生： この足し算わかった人、手をあげて
生徒： はい
先生： はい、佐藤君。
生徒： ３５です。
のように、口述筆記することで、聴覚障害の生徒に、教室のやりとりを伝えることが出来る。
【００２６】
図１３に示すシステムを実現するためには、まず、先生、生徒、筆記者の間で、音声および映像を相互に送受信する仕組（以下「通信基盤」と呼ぶ。）が必要である。このような通信基盤としては、背景術の欄で述べた、スカイプが挙げられ、その他、下記の参考資料に記載のマイクロソフト社のWindows（登録商標） Messengerも挙げられる。
参考資料：マイクロソフト社Ｗｅｂページ
<http://windowslive.jp.msn.com/messenger.htm>
【００２７】
更に、図１３に示すシステムを実現するため、その上位に、授業の開催に際して、口述筆記をしてくれる人の募集または依頼を行なうことと、ボランティアとして応募してくれた人が参加を申告することと、を相互に開示する一種の出会いの場を提供する必要がある。
【００２８】
ここで、相互協力をする当事者の居場所はどこであっても構わない。たとえば、授業が東京で行われ、口述筆記する人は北海道にいても実現可能である。但し、時間的には、授業と同時に口述筆記をしてもらう必要があるので、特定の授業の日時に時間の余裕のある人が口述筆記を応募してくれる必要がある。そのため、授業の募集は、カレンダー的に時系列で表現しておくことが一覧性の観点からは望ましい。
【００２９】
本発明は、先ず、以上の通信基盤の仕組と出会いの場とを一体にして実現する筆記支援装置を提案する。また、本発明は、このシステムに、授業の開始の直前に授業を開始する旨を関係者に自動通知する仕組みを追加することができる。
【００３０】
更に、本発明は、授業の開催に際して、ボランティアの応募がなかった場合に、先生の音声と教室の映像を保存しておき、後になって、ボランティアの第３者が、口述筆記が行なわれていない過去の授業を見つけた場合に、空いている時間に、その音声と映像をダウンロードして口述筆記を行い、その結果をアップロードできる仕組みを追加することもできる。また、本発明は、同様に、授業の開催に際して、ボランティアの応募がなかった場合に、音声データを音声認識することによって、授業内容のテキストを生成する仕組みを追加することもできる。
【００３１】
なお、類似の既存システムとして、日本遠隔コミュニケーション支援協会のIPtalk（http://iptalk.web.infoseek.co.jp/参照）が知られている。このシステムは、既に聴覚障害者向けに無料で提供されているパソコン要約筆記用ソフトウェアであり、このシステムを用いることにより、ネットワークで接続された複数の端末間で音声、映像、文字データを共有することができる。
【００３２】
また、本発明では、通信基盤部分については、インターネットを利用した既存の技術を用いるのに対して、IPTalkでは、通信基盤部分が内蔵されている。IPTalkは、その設計思想として、気心の知り合っている人々の間で、相互協力関係を行うことを前提としたシステムだからである。IPTalkでは、授業および講演において、実時間での口述筆記のみが前提となる。
【００３３】
一方、本発明では、全く見ず知らずの人が相互協力を行なうことを想定され、更に、カレンダー機能を内蔵していることが特徴である。その結果、必ずしも、全ての授業または講演に対して、実時間で口述筆記をする人が現れないことも当然の状況として想定されており、その場合の対処方法として、上述した事後に口述筆記をする仕組み、および音声認識によって口述筆記をする仕組みがある。
【００３４】
（実施の形態１）
以下、本発明の実施の形態１における、筆記支援装置、筆記支援方法、およびプログラムについて、図１〜図６を参照しながら説明する。
【００３５】
［装置構成」
最初に、本実施の形態１における筆記支援装置の構成について図１を用いて説明する。図１は、本発明の実施の形態における筆記支援装置の構成を示すブロック図である。
【００３６】
図１に示すように、本実施の形態における筆記支援装置１００は、授業中の映像データ及び音声データを取得する教師用の端末２と、生徒用の端末６と、口述筆記を行なう筆記者用の端末４との間で通信を行う。これらはインターネットなどのネットワーク１０１を介して接続されている。
【００３７】
なお、本実施の形態において、生徒用の端末６を使う生徒は、主に聴覚障害を持った生徒である。また、以降において、教師用の端末を「教師端末」と表記し、筆記者用の端末を「筆記端末」と表記し、生徒用の端末を「生徒端末」と表記する。
【００３８】
また、図１に示すように、筆記支援装置１００は、主に、格納部１と、筆記者申込受付部１３と、制御部１４とを備えている。このうち、格納部１は、教師端末２のアドレス、および生徒端末６のアドレスを格納している。
【００３９】
筆記者申込受付部１３は、広く一般から、筆記者としての参加の申請を受け付ける。そして、筆記者申込受付部１３は、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、筆記者端末４のアドレスとして格納部１に格納する。
【００４０】
制御部１４は、まず、格納部１に、筆記者用の端末のアドレスが登録されているかどうかを判定する。そして、判定の結果、登録されている場合は、制御部１４は、教師端末２に対して、取得した映像データ及び音声データの筆記者端末４への送信を指示する。更に、この場合において、制御部１４は、筆記者端末４に対しては、筆記者が口述筆記によって作成したテキストデータの生徒用端末６への送信を指示する。
【００４１】
以上のように、本実施の形態では、聴覚障害を持った生徒がいる場合に、授業において口述筆記を行うことができる人を公募によって探すことができ、応募してくれた筆記者から生徒に対して授業の内容をテキストで送信することができる。本実施の形態によれば、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行なうことができる。
【００４２】
ここで、本実施の形態１における筆記支援装置１００の構成について更に具体的に説明する。図１に示すように、本実施の形態１では、筆記支援装置１００は、格納部１、筆記者申込受付部１３、及び制御部１４に加えて、現在時刻を常に保持するタイマー１０と、新規の授業の開催の申込を受け付ける授業申し込み受付部１２とを更に備えている。
【００４３】
また、制御部１４は、会話開始制御部８と、会話終了制御部９と、授業開始終了制御部１１とを備えている。このうち、会話開始制御部８は、会話開始時（授業開始時）からの会話において、教師端末２、生徒端末６、及び筆記者端末４の制御を行う。会話終了制御部９は、会話終了時（授業終了時）における教師端末２、生徒端末６、及び筆記者端末４の制御の制御を行う。また、授業開始終了制御部１１は、格納部１に登録されている各授業の開始と終了とを管理し、会話開始制御部８及び会話終了制御部９の起動を制御している。
【００４４】
格納部１は、本実施の形態１では、更に、授業の状況を特定する情報も格納する。具体的には、格納部１は、図１に示すように、授業毎に、授業ＩＤ、授業の開始日時、授業の終了日時、授業状態、筆記化状態、教師端末アドレス、生徒端末アドレス、筆記者端末アドレス、授業ファイル、筆記ファイル、の各項目からなるレコードを格納している。本実施の形態１において、格納部１は、レコードの追加、参照、一部の変更が容易な点から、データベースによって実現されているのが好ましい。
【００４５】
また、図１の例では、４つのレコードが示されている。このうち、授業ＩＤ＝１のレコードは、すでに授業は終了し、授業には、口述筆記者が参加し、授業の映像ファイルおよび音声ファイルと、音声ファイルを文字データに変換した筆記ファイルとが既に登録ずみであることを示している。
【００４６】
また、授業ＩＤ＝２のレコードは、授業は終了したが、口述筆記をしてくれる人がいなかったため、未だ、授業内容を筆記したファイルが存在していないことを示している。授業ＩＤ＝３のレコードは、ちょうど、今授業中であるため、口述筆記者は参加しているが、未だ筆記ファイルが未作成（完成していない）の状態であることを示している。授業ＩＤ＝４のレコードは、まだ授業が開催されておらず、且つ、口述筆記者の応募がまだない状況を示している。
【００４７】
教師端末２には、マイクとカメラとが接続されている。教師端末２は、外部からの開始指示によって起動されると、マイク入力とカメラ入力とを受け取り、音声ファイルと映像ファイルとを筆記支援装置１００に送信する。また、教師端末２は、外部から終了を指示されると、送信処理を終了する。
【００４８】
具体的には、教師端末２は、ＰＣに、スカイプおよびWindows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。また、教師端末２に接続されるカメラとしては、Ｗｅｂカメラが挙げられる。
【００４９】
また、教師端末２は、教師端末のアドレスを格納する教師端末アドレス格納部３を備えている。図１の例では、教師端末のアドレスとして、「Teacher１」が格納されている。なお、教師端末アンドレス格納部３は、例えば、ＰＣに接続可能な不揮発性のメモリによって実現できる。
【００５０】
筆記者端末４には、ディスプレイ、スピーカ、キーボードが接続されている。筆記者端末４は、外部からの開始指示によって起動されると、教師端末２から送信される音声ファイルおよび映像ファイルを受信する。そして、筆記者端末４は、音声ファイルをスピーカで再生し、映像ファイルをディスプレイに出力する。また、筆記者端末４は、筆記者４がキーボードから入力するテキストデータを、筆記支援装置１００に対して継続して送信し、外部から終了を指示されると、送信処理を終了する。
【００５１】
具体的には、筆記者端末４も、教師端末２と同様に、ＰＣに、スカイプ、Windows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。また、筆記者端末４に接続されるディスプレイ、スピーカ、キーボードは、ＰＣに一般的に使用されるものであっても良い。
【００５２】
また、筆記者端末４は、筆記者端末４のアドレスを格納する筆記者端末アドレス格納部５を備えている。図１の例では、筆記者端末アドレスとして、「Dictator１」が格納されている。なお、筆記者端末アドレス格納部５は、例えば、ＰＣに接続可能な不揮発性のメモリによって実現できる。
【００５３】
生徒端末６には、ディスプレイとスピーカとが接続されている。生徒端末６は、外部から開始指示によって起動されると、筆記者端末４から送信されるテキストデータを受信し、受信したテキストデータを、継続してディスプレイに出力する。また、生徒端末６は、外部から終了を指示されると、受信処理を終了する。
【００５４】
具体的には、生徒端末６も、教師端末２および筆記者端末４と同様に、ＰＣに、スカイプ、Windows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。また、生徒端末６に接続されるディスプレイおよびスピーカは、ＰＣに一般的に使用されるものであっても良い。
【００５５】
また、生徒端末６は、生徒端末６のアドレスを格納する生徒端末アドレス格納部７を備えている。図１の例では、生徒端末アドレスとして、「Student１」が格納されている。なお、生徒端末アドレス格納部７は、例えば、ＰＣに接続可能な不揮発性のメモリによって実現できる。
【００５６】
［動作説明］
次に、本発明の実施の形態１における筆記支援装置１００の動作について図２〜図６を用いて説明する。以下の説明においては、適宜図１を参酌する。また、本実施の形態１では、筆記支援装置１００を動作させることによって、筆記支援方法が実施される。よって、本実施の形態１における筆記支援方法の説明は、以下の筆記支援装置１００の動作説明に代える。
【００５７】
最初に、本実施の形態１における筆記支援装置１００の会話開始時（授業開始時）の動作について図２を用いて説明する。図２は、本発明の実施の形態１における筆記支援装置の会話開始時の動作を示すフロー図である。
【００５８】
図２に示すように、まず、会話開始制御部８は、授業開始終了制御部１１から送受信のセッション開始指示を、授業ＩＤとともに受け取る（ステップＳ１）。次に、会話開始制御部８は、格納部１に格納されているレコードを調べ、「授業ＩＤ」項目において、受け取った授業ＩＤの値を有するレコードを特定し、特定したレコードの「授業状態」項目に「授業中」と入力する（ステップＳ２）。
【００５９】
次に、会話開始制御部８は、レコードの「筆記者端末アドレス」項目の値が「未定」であるかどうかを判定する（ステップＳ３）。
【００６０】
ステップＳ３の判定の結果、「未定」でない場合は、会話開始制御部８は、まず、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２を起動し、教師端末２の送信内容（教師端末２が取得する映像データおよび音声データ）を筆記者端末４へ送ることを指示する（ステップＳ６）。
【００６１】
次に、会話開始制御部８は、「生徒端末アドレス」項目のアドレスを持つ生徒端末６を起動する（ステップＳ７）。次に、会話開始制御部８は、「筆記者端末アドレス」項目のアドレスを持つ筆記者端末４を起動して、筆記者端末４の送信内容（筆記者端末４で作成されるテキストデータ）を生徒端末６へ送ることを指示する（ステップＳ８）。
【００６２】
次に、会話開始制御部８は、教師端末２から送られてくる送信内容を追記的に、レコードの「授業ファイル」項目に格納し（ステップＳ９）、筆記者端末６の送信内容を追記的にレコードの「筆記ファイル」項目に格納する（ステップＳ１０）。
【００６３】
なお、本実施の形態では、「授業ファイル」項目および「筆記ファイル」項目には、通常の数値ではなく、音声ファイルオブジェクトおよびテキストファイルオブジェクトを格納する必要がある。従って、実際には、これらの項目には、ファイルのパス名のみが保存されていても良い。この場合、ファイルの実態は、格納部１からの参照先に存在するデータとなる。但し、本実施の形態では、説明のため、論理的に、これらの項目にファイルが直接格納されていることとしている。
【００６４】
また、ステップＳ３の判定の結果、「未定」である場合は、会話開始制御部８は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２と、「生徒端末アドレス」項目のアドレスを持つ生徒端末６と、を起動する。（ステップＳ４）。その後、会話開始制御部８は、教師端末２の送信内容を追記的に、レコードの「授業ファイル」項目に格納する（ステップＳ５）。
【００６５】
ステップＳ３およびＳ４の処理は、この授業の筆記を申し出る人が誰もいなかった場合に実行されるが、この場合は、授業の様子を記録した映像データと音声データとの格納部１への格納だけが行われる。また、ステップＳ１〜Ｓ１０に述べた会話開始制御部８による処理は、次に述べる会話終了制御部９による処理が開始されるまで実行される。
【００６６】
次に、本実施の形態における筆記支援装置１００の会話終了時（授業終了時）の動作について図３を用いて説明する。図３は、本発明の実施の形態１における筆記支援装置の会話終了時の動作を示すフロー図である。
【００６７】
図３に示すように、まず、会話終了制御部９は、授業開始終了制御部１１から送受信のセッション終了指示を、授業ＩＤとともに受け取る（ステップＳ１１）。次に、会話終了制御部９は、格納部１のレコードを調べ、「授業ＩＤ」項目において、受け取った授業ＩＤの値を有するレコードを特定し、レコードの「授業状態」項目に「終了」と入力する（ステップＳ１２）。
【００６８】
次に、会話終了制御部９は、レコードの「筆記者端末アドレス」項目の値が「未定」であるかどうかを判定する（ステップＳ１３）。
【００６９】
ステップＳ１３の判定の結果、未定でない場合は、会話終了制御部９は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２と、「生徒端末アドレス」項目のアドレスを持つ生徒端末６と、「筆記者端末アドレス」項目のアドレスを持つ筆記者端末４とに対して、送受信セッションの終了を通知する（ステップＳ１６）。
【００７０】
その後、会話終了制御部９は、格納部１において、「授業ファイル」項目と、「筆記ファイル」項目のとのファイルをそれぞれクローズさせ（ステップＳ１７）、さらに、「筆記化状態」項目に「作成」を書き込み（ステップＳ１８）、処理を終了する。
【００７１】
一方、ステップＳ１３の判定の結果、未定である場合は、会話終了制御部９は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２に対して、送受信セッションの終了を通知して終了させる（ステップＳ１４）。その後、会話終了制御部９は、「授業ファイル」項目のファイルをクローズさせ（ステップＳ１５）、処理を終了する。
【００７２】
次に、本実施の形態１における筆記支援装置１００が授業の開始及び終了を管理する際の動作について図４を用いて説明する。図４は、本発明の実施の形態１における筆記支援装置が授業の開始及び終了を管理するために行う動作を示すフロー図である。
【００７３】
図４に示すように、まず、授業開始終了制御部１１は、定期的に、タイマー１０によって起動され（ステップＳ２１）、格納部１に、開始日時が経過していないレコードが存在しているかどうかを判定する（ステップＳ２２）。
【００７４】
ステップＳ２２の判定の結果、開始日時が経過していないレコードが存在している場合は、授業開始終了制御部１１は、開始日時が経過していないレコードを取り出す（ステップＳ２３）。そして、授業開始終了制御部１１は、そのレコードの授業開始日時項目の値が、タイマー１０が保持している現在時刻と一致しているかどうかを判定する（ステップＳ２４）。
【００７５】
次に、ステップＳ２４の判定の結果、一致しない場合は、授業開始終了制御部１１は、再度、ステップＳ２２を実行する。一方、一致する場合は、授業開始終了制御部１１は、レコードの授業ＩＤを引数にして会話開始制御部８にセッション開始を指示し（ステップＳ２５）、その後、再度、ステップＳ２２を実行する。
【００７６】
また、ステップＳ２２の判定の結果、開始日時が経過していないレコードが存在していない場合は、授業開始終了制御部１１は、新たに、最初から格納部１に格納されているレコードを取り出す用意をする（ステップＳ２６）。
【００７７】
そして、授業開始終了制御部１１は、格納部１のすべてのレコードの授業終了日時項目の値を調べ、終了日時が経過していないレコードが存在しているかどうかを判定する（ステップＳ２７）。
【００７８】
ステップＳ２７の判定の結果、終了日時が経過していないレコードが存在していない場合（全てのレコードの終了日時が経過している場合）は、授業開始終了制御部１１は、処理を終了する。
【００７９】
一方、ステップＳ２７の判定の結果、終了日時が経過していないレコードが存在している場合は、授業開始終了制御部１１は、終了日時が経過していないレコードを取り出す（ステップＳ２８）。そして、授業開始終了制御部１１は、そのレコードの授業終了日時項目の値が、タイマー１０の保持する現在時刻と一致しているかどうかを判定する（ステップＳ２９）。
【００８０】
次に、ステップＳ２９の判定の結果、一致しない場合は、授業開始終了制御部１１は、再度、ステップＳ２７を実行する。一方、一致する場合は、授業開始終了制御部１１は、レコードの授業ＩＤを引数にして会話終了制御部９にセッション終了を指示し、その後、再度、ステップＳ２７を実行する。
【００８１】
次に、本実施の形態における筆記支援装置１００の授業の申し込みの受け付け時の動作について図５を用いて説明する。図５は、本発明の実施の形態における筆記支援装置の授業申し込み受け付け時の動作を示すフロー図である。
【００８２】
図５に示すように、まず、授業申し込み受付部１２は、新規の授業開催申請を、授業の開始日時、終了日時、授業を指導する教師の端末アドレス、及び授業に参加する生徒の端末アドレスと共に受け付ける（ステップＳ３１）。
【００８３】
次に、授業申し込み受付部１２は、一意の授業識別番号を作成し（ステップＳ３２）、これを用いて新規のレコードを作成する（ステップＳ３３）。そして、授業申し込み受付部１２は、新規に作成したレコードを格納部１に格納する（ステップＳ３４）。
【００８４】
具体的には、ステップＳ３３では、授業申し込み受付部１２は、「授業ＩＤ」項目に一意の授業識別番号、「開始日時」項目に授業の開始日時、「終了日時」項目に授業の終了日時、「授業状態」項目に「予定」、「筆記化状態」項目に「未作成」を格納する。また、授業申し込み受付部１２は、「教師端末アドレス」項目に授業を指導する教師が利用する端末アドレス、「生徒端末アドレス」項目に授業に参加する生徒が利用する端末アドレスを格納する。さらに、授業申し込み受付部１２は、「筆記者端末アドレス」項目に「未定」、「授業ファイル」項目に「不在」、「筆記ファイル」項目に「不在」を、それぞれ格納する。
【００８５】
次に、本実施の形態１における筆記支援装置１００の筆記者申し込み受け付け時の動作について図６を用いて説明する。図６は、本発明の実施の形態における筆記支援装置の筆記者申し込み受け付け時の動作を示すフロー図である。
【００８６】
図６に示すように、まず、筆記者申し込み受付部１３は、特定の授業への筆記参加申請を、その授業ＩＤ及び授業へ参加する筆記者の筆記者端末アドレスと共に受け付ける（ステップＳ４１）。具体的には、ステップＳ４１では、筆記者申し込み受付部１３は、インターネット上でＷｅｂサイトを提供することによって、授業毎に、筆記者を公募することができる。
【００８７】
次に、筆記参加申請を受け付けた場合は、筆記者申し込み受付部１３は、格納部１のレコードを検索し、ステップＳ４１で受け付けた授業ＩＤを保持するレコードを特定する（ステップＳ４２）。
【００８８】
その後、筆記者申し込み受付部１３は、ステップＳ４２で特定したレコードにおける「筆記者アドレス」項目に、授業へ参加する筆記者の筆記者端末アドレスを格納する（ステップＳ４３）。ステップＳ４１〜Ｓ４３の実行により、筆記者が授業に参加できる状態となる。
【００８９】
また、本実施の形態１におけるプログラムは、コンピュータに、図２に示すステップＳ１〜Ｓ１０、図３に示すＳ１１〜Ｓ１８、図４に示すＳ２１〜Ｓ３０、図５に示すＳ３１〜Ｓ３４、図６に示すＳ４１〜Ｓ４３を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態１における筆記支援装置１００と筆記支援方法とを実現することができる。
【００９０】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１として機能する。
【００９１】
また、本実施の形態１では、筆記支援装置１００は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３が、それぞれ別々のコンピュータによって実用されていても良い。
【００９２】
［実施の形態１における効果］
以上のように、本実施の形態１では、筆記支援装置１００は、聴覚障害の生徒を持つ学校などで、例えば、カレンダー表示などによって、授業毎に、口述筆記の協力募集及び協力状況を広く公開することができる。つまり、筆記支援装置１００は、ボランティアの口述筆記者を広く世界に求めるクラウドソーシングを実現する仕組みを提供している。また、本実施の形態１では、その仕組みは、スカイプといった既存の通信ソフトを利用することにより、比較的低コストで実現される。
【００９３】
（実施の形態２）
次に、本発明の実施の形態２における、筆記支援装置、筆記支援方法、およびプログラムについて、図７を参照しながら説明する。図７は、本発明の実施の形態２における筆記支援装置の構成を示すブロック図である。
【００９４】
図７に示すように、本実施の形態２における筆記支援装置１０２は、実施の形態１において図１に示した筆記支援装置１００の構成に加えて、警告通知時間保持部２１と、通知部２２とを備えている。
【００９５】
警告通知時間保持部２１は、授業開始前に関係者に授業の開始直前であることを通知する際のタイミング、すなわち、通知時点と開始時点との差の時間を保持している。例えば、授業の開始１時間前に、教師、生徒、筆記者に授業開始を事前通知する場合であれば、警告通知時間保持部２１は、「１時間(６０分)」というデータを保持する。また、本実施の形態では、図７に示すように、事前に装置の管理者が「６０分」に設定している。
【００９６】
通知部２２は、定期的にタイマー１０によって起動される。そして、通知部２２は、起動されると、格納部１の全てのレコードの授業開始日時項目の値を特定し、特定した開始日時とタイマー１０の保持する現在時刻とを対比する。そして、通知部２２は、両者の時間差が、警告通知時間保持部２１が保持する時間と一致するレコードが存在する場合は、レコードの教師端末アドレス項目、生徒端末アドレス項目、筆記者端末アドレス項目のアドレス値を特定する。
【００９７】
その後、通知部２２は、特定したアドレスを送信先として、授業開始が間近であることを通知する。通知は、例えば、電子メール等によって行うことができる。また、以降および図７においては、通知部２２は、「授業開始前通知部」２２と表記する。
【００９８】
なお、本実施の形態２においても、筆記支援装置１０２を動作させることによって、筆記支援方法が実施される。よって、本実施の形態２における筆記支援方法の説明は、上述した筆記支援装置１０２の動作説明に代える。
【００９９】
また、本実施の形態２におけるプログラムは、コンピュータに、実施の形態１で述べた各ステップと、上記の動作とを実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態２における筆記支援装置１０２と筆記支援方法とを実現することができる。
【０１００】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、筆記者申し込み受付部１３、及び授業開始前通知部２２として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１および警告通知時間保持部２１として機能する。
【０１０１】
また、本実施の形態２においても、筆記支援装置１０２は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、筆記者申し込み受付部１３、及び授業開始前通知部２２が、それぞれ別々のコンピュータによって実用されていても良い。
【０１０２】
［実施の形態２における効果］
以上のように、本実施の形態２では、筆記支援装置１０２は、授業の直前に関係者に自動的に通知を行うことができる。本実施の形態２によれば、授業の参加者（教師、生徒、口述筆記者）が授業への参加準備を滞りなく行うことを支援することができる。
【０１０３】
（実施の形態３）
次に、本発明の実施の形態３における、筆記支援装置、筆記支援方法、およびプログラムについて、図８および図９を参照しながら説明する。
【０１０４】
［装置構成」
最初に、本実施の形態３における筆記支援装置の構成について図８を用いて説明する。図８は、本発明の実施の形態３における筆記支援装置の構成を示すブロック図である。
【０１０５】
図８に示すように、本実施の形態３における筆記支援装置１０３は、筆記者申し込み受付部３２を備えており、筆記者申し込み受付部３２の機能の点で、実施の形態１において図１に示した筆記支援装置１００と異なっている。また、筆記支援装置１０３は、ネットワーク１０１を介して、事後筆記者端末３１と接続されている。以下、相違点について説明する。
【０１０６】
筆記者申し込み受付部３２は、制御部１４によって、筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、筆記者としての参加の申請を受け付ける。そして、筆記者申し込み受付部３２は、参加申請があった場合に、参加申請を行なった筆記者が使用する端末３１（以下「事後筆記者端末」と表記する。）のアドレスを、当該授業についての筆記者端末のアドレスとして格納部１に格納する。
【０１０７】
また、筆記者申し込み受付部３２は、この場合、事後筆記者端末３１のアドレスに、当該授業について格納されている教師用の端末が取得した映像データ及び音声データを送信する。更に、この場合も、制御部１４は、事後筆記者端末３１に対して、筆記者が作成したテキストデータの生徒端末６及び筆記支援装置１０３への送信を指示する。
【０１０８】
なお、事後筆記者端末３１は、上述したように、授業の終了後に、筆記者が、すでに終了した授業の映像データおよび音声データをダウンロードして、口述筆記を行った結果をアップロードする時に使用する端末である。事後筆記端末３１も、図１に示した筆記者端末４と同様に、ＰＣに、スカイプ、Windows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。
【０１０９】
また、事後筆記者端末３１に接続されるディスプレイ、スピーカ、キーボードも、ＰＣに一般的に使用されるものであれば良い。更に、筆記者は、事後筆記端末３１を介して、映像データと音声データとを指定し、ディスプレイとスピーカとでデータを再生する一方で、キーボードを用いて口述筆記を行ない、テキストデータを生成する。
【０１１０】
［動作説明］
次に、本発明の実施の形態３における筆記支援装置１０３の動作について図９を用いて説明する。図９は、本発明の実施の形態３における筆記支援装置の動作を示すフロー図である。以下の説明においては、適宜図８を参酌する。また、本実施の形態３では、筆記支援装置１０３を動作させることによって、筆記支援方法が実施される。よって、本実施の形態３における筆記支援方法の説明は、以下の筆記支援装置１０３の動作説明に代える。
【０１１１】
図９に示すように、まず、筆記者申し込み受付部３２は、既に過去に実施されている特定の授業に対する口述筆記の参加申請を、当該授業の授業ＩＤおよび筆記者の端末アドレスと共に受け付ける（ステップＳ５１）。
【０１１２】
次に、筆記者申し込み受付部３２は、格納部１に格納されているレコードの中から、ステップＳ５１で受け付けた授業ＩＤを、授業ＩＤ項目の値として保持しているレコードを特定する（ステップＳ５２）。
【０１１３】
次に、筆記者申し込み受付部３２は、レコードの「筆記化状態」項目の値が「作成」となっているかどうかを判定する（ステップＳ５３）。ステップＳ５３の判定の結果、「作成」となっている場合は、筆記者申し込み受付部３２は、ステップＳ５１の参加申請を無効とし（ステップＳ５４）、処理を終了する。
【０１１４】
一方、ステップＳ５３の判定の結果、「作成」となっていない場合は、筆記者申し込み受付部５３は、レコードの「授業ファイル」項目のファイルを取り出し、事後筆記端末３１のアドレスに、取り出したファイルを送信する（ステップＳ５５）。
【０１１５】
次に、制御部１４は、事後筆記端末３１から、対応するテキストデータが送られてくると受信し、これをレコードの「筆記ファイル」項目に格納し（ステップＳ５６）、さらに、レコードの筆記化状態項目を「作成」とし（ステップＳ５７）、処理を終了する。
【０１１６】
また、本実施の形態３におけるプログラムは、コンピュータに、実施の形態１で述べた各ステップと、図９に示したステップＳ５１〜Ｓ５７とを実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態３における筆記支援装置１０３と筆記支援方法とを実現することができる。
【０１１７】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、および筆記者申し込み受付部３２として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１として機能する。
【０１１８】
また、本実施の形態３においても、筆記支援装置１０３は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、および筆記者申し込み受付部３２が、それぞれ別々のコンピュータによって実用されていても良い。
【０１１９】
［実施の形態３における効果］
以上のように、本実施の形態３にでは、授業のときに口述筆記者が登録されていなくても、後から、口述筆記を実行することができる。このため、本実施の形態３によれば、生徒は、授業の後で、効果的に復習を行なうことができる。
【０１２０】
（実施の形態４）
次に、本発明の実施の形態４における、筆記支援装置、筆記支援方法、およびプログラムについて、図１０および図１１を参照しながら説明する。
【０１２１】
［装置構成」
最初に、本実施の形態４における筆記支援装置の構成について図１０を用いて説明する。図１０は、本発明の実施の形態４における筆記支援装置の構成を示すブロック図である。
【０１２２】
図１０に示すように、本実施の形態４における筆記支援装置１０４は、会話開始制御部４３を備えており、会話開始制御部４３の機能の点で、実施の形態１において図１に示した筆記支援装置１００と異なっている。また、筆記支援装置１０４は、ネットワーク１０１を介して、自動筆記者端末４１と接続されている。以下、相違点について説明する。
【０１２３】
自動筆記者端末４１は、自動筆記者端末４１は、音声データを受け取ると、それをテキストデータに変換する処理（音声認識処理）を実行する音声認識装置を有している。自動筆記者端末４１は、外部から開始指示と共に起動されると、教師端末２から送信される音声データを受信し、これを自動認識装置に入力として与え、対応するテキストデータを出力させる。また、自動筆記者端末４１は、出力されたテキストデータを、継続して筆記支援装置１０４に送信する。また、自動筆記者端末４１は、外部から終了を指示されると、処理を終了する。
【０１２４】
また、自動筆記者端末４１は、自動筆記者端末４１のアドレスを格納する自動筆記者端末アドレス格納部４２を備えている。筆記支援装置１０４は、このアドレスから、この端末が音声認識装置を使った筆記者端末であることを判別する。図１０の例では、自動筆記者端末アドレスとして、「Auto-speech-translator１」が格納されている。なお、自動筆記者端末アドレス格納部４２は、不揮発性のメモリによって実現できる。
【０１２５】
また、本実施の形態４では、会話開始制御部４３は、筆記者端末４のアドレスが登録されていないと判定した場合に、格納部１において、当該判定の対象となった授業の筆記者端末４のアドレスとして、自動筆記者端末４１のアドレスを格納させる。そして、会話開始制御部４３は、教師端末２に対して、取得した音声データの自動筆記者端末４１への送信を指示し、自動筆記者端末４１に対して、音声データから得られた認識結果（テキストデータ）の生徒端末６への送信を指示する。
【０１２６】
［動作説明］
次に、本発明の実施の形態４における筆記支援装置１０４の動作について図１１を用いて説明する。図１１は、本発明の実施の形態４における筆記支援装置の動作を示すフロー図である。以下の説明においては、適宜図１０を参酌する。また、本実施の形態４では、筆記支援装置１０４を動作させることによって、筆記支援方法が実施される。よって、本実施の形態４における筆記支援方法の説明は、以下の筆記支援装置１０４の動作説明に代える。
【０１２７】
図１１に示すように、まず、会話開始制御部４３は、授業開始終了制御部１１から送受信のセッション開始指示を、授業ＩＤとともに受け取る（ステップＳ６１）。次に、会話開始制御部４３は、格納部１に格納されているレコードを調べ、「授業ＩＤ」項目において、受け取った授業ＩＤの値を有するレコードを特定し、特定したレコードの「授業状態」項目に「授業中」と入力する（ステップＳ６２）。
【０１２８】
次に、会話開始制御部４３は、レコードの「筆記者端末アドレス」項目の値が「未定」であるかどうかを判定する（ステップＳ６３）。
【０１２９】
ステップＳ６３の判定の結果、「未定」でない場合は、会話開始制御部４３は、ステップＳ７０〜Ｓ７４を実行する。なお、ステップＳ７０〜Ｓ７４は、図２に示したステップＳ６〜Ｓ１０と同様のステップである。
【０１３０】
一方、ステップＳ６３の判定の結果、「未定」である場合は、会話開始制御部４３は、レコードの「筆記者端末アドレス」に自動筆記者端末アドレス格納部４２のアドレスを格納する（ステップＳ６４）。
【０１３１】
次に、会話開始制御部４３は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末を起動し、教師端末２の送信内容を自動筆記者端末４１へ送ることを指示する（ステップＳ６５）。
【０１３２】
次に、会話開始制御部４３は、「生徒端末アドレス」項目のアドレスを持つ生徒端末６を起動する（ステップＳ６６）。次に、会話開始制御部４３は、「筆記者端末アドレス」項目のアドレスを持つ自動筆記者端末４１を起動し、生成したテキストデータを生徒端末６に送信することを指示する（ステップＳ６７）。
【０１３３】
次に、会話開始制御部４３は、教師端末２から送られてくる送信内容を追記的に、レコードの「授業ファイル」項目に格納し（ステップＳ６８）、自動筆記者端末４１の送信するテキストデータを追記的にレコードの「筆記ファイル」項目に格納する（ステップＳ６９）。以上のステップＳ６１〜Ｓ７４の処理により、筆記者端末４が登録されていない場合は、音声認識によるテキストデータが作成され、これが生徒端末６へと送信される。
【０１３４】
また、本実施の形態４におけるプログラムは、コンピュータに、図３に示すＳ１１〜Ｓ１８、図４に示すＳ２１〜Ｓ３０、図５に示すＳ３１〜Ｓ３４、図６に示すＳ４１〜Ｓ４３、図１１に示すステップＳ６１〜Ｓ７４、を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態４における筆記支援装置１０４と筆記支援方法とを実現することができる。
【０１３５】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部４３、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１として機能する。
【０１３６】
また、本実施の形態４では、筆記支援装置１０４は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部４３、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３が、それぞれ別々のコンピュータによって実用されていても良い。
【０１３７】
［実施の形態４における効果］
以上のように、本実施の形態４では、授業のときに口述筆記者がいない場合は、人間のボランティアの代わりに、音声認識装置が使用される。この場合、得られるテキストデータの品質は、人が行なう場合に比べて低下する可能性はあるが、何らかのヒントになると考えられる。つまり、テキストデータが全く作成されないよりも、生徒に理解力の向上に貢献できる。また、教師は、音声認識結果を確認し、これが正しくない場合は、授業中に生徒に正しい内容を伝達することができ（例えば、黒板に字を書く等）、誤りを補正することができ、この点からも生徒の理解力の向上を図ることができる。
【０１３８】
ここで、実施の形態１〜４におけるプログラムを実行することによって、筆記支援装置を実現するコンピュータについて図１２を用いて説明する。図１２は、本発明の実施の形態１〜４における筆記支援装置を実現するコンピュータの一例を示すブロック図である。
【０１３９】
図１２に示すように、コンピュータ１１０は、ＣＰＵ１１１と、メインメモリ１１２と、記憶装置１１３と、入力インターフェイス１１４と、表示コントローラ１１５と、データリーダ／ライタ１１６と、通信インターフェイス１１７とを備える。これらの各部は、バス１２１を介して、互いにデータ通信可能に接続される。
【０１４０】
ＣＰＵ１１１は、記憶装置１１３に格納された、本実施の形態におけるプログラム（コード）をメインメモリ１１２に展開し、これらを所定順序で実行することにより、各種の演算を実施する。メインメモリ１１２は、典型的には、ＤＲＡＭ（Dynamic Random Access Memory）等の揮発性の記憶装置である。また、本実施の形態におけるプログラムは、コンピュータ読み取り可能な記録媒体１２０に格納された状態で提供される。なお、本実施の形態におけるプログラムは、通信インターフェイス１１７を介して接続されたインターネット上で流通するものであっても良い。
【０１４１】
また、記憶装置１１３の具体例としては、ハードディスクの他、フラッシュメモリ等の半導体記憶装置が挙げられる。入力インターフェイス１１４は、ＣＰＵ１１１と、キーボード及びマウスといった入力機器１１８との間のデータ伝送を仲介する。表示コントローラ１１５は、ディスプレイ装置１１９と接続され、ディスプレイ装置１１９での表示を制御する。データリーダ／ライタ１１６は、ＣＰＵ１１１と記録媒体１２０との間のデータ伝送を仲介し、記録媒体１２０からのプログラムの読み出し、及びコンピュータ１１０における処理結果の記録媒体１２０への書き込みを実行する。通信インターフェイス１１７は、ＣＰＵ１１１と、他のコンピュータとの間のデータ伝送を仲介する。
【０１４２】
また、記録媒体１２０の具体例としては、ＣＦ（Compact Flash）及びＳＤ（Secure Digital）等の汎用的な半導体記憶デバイス、フレキシブルディスク（Flexible Disk）等の磁気記憶媒体、又はＣＤ−ＲＯＭ（Compact Disk Read Only Memory）などの光学記憶媒体が挙げられる。
【０１４３】
上述した実施の形態の一部又は全部は、以下に記載する（付記１）〜（付記１５）によって表現することができるが、以下の記載に限定されるものではない。
【０１４４】
（付記１）
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末の間で通信を行う、筆記支援装置であって、
前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを格納する、格納部と、
前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記格納部に格納する、筆記者申し込み受付部と、
前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、制御部と、
を備えている、ことを特徴とする筆記支援装置。
【０１４５】
（付記２）
前記筆記者申し込み受付部が、授業毎に、前記参加の申請を受け付け、
前記格納部が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納し、
前記制御部が、授業毎に、前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
付記１に記載の筆記支援装置。
【０１４６】
（付記３）
前記格納部が、授業毎に、授業の開始日時を格納しており、
当該筆記支援装置が、
授業毎に、前記格納部に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、通知部を更に備えている、
付記２に記載の筆記支援装置。
【０１４７】
（付記４）
前記格納部が、更に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納しており、
前記筆記者申し込み受付部が、
前記制御部によって、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記格納部に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、
付記２または３に記載の筆記支援装置。
【０１４８】
（付記５）
当該筆記支援装置が、音声認識処理を実行する音声認識装置に接続されており、
前記制御部が、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記格納部において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、付記２〜４のいずれかに記載の筆記支援装置。
【０１４９】
（付記６）
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、筆記支援を行なうための方法であって、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を有する、ことを特徴とする筆記支援方法。
【０１５０】
（付記７）
前記（ｂ）のステップで、授業毎に、前記参加の申請を受け付け、
前記記憶装置が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納しており、
前記（ｃ）のステップで、授業毎に、前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
付記６に記載の筆記支援方法。
【０１５１】
（付記８）
前記記憶装置が、授業毎に、授業の開始日時を格納しており、
（ｄ）授業毎に、前記記憶装置に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、ステップを更に有する、
付記７に記載の筆記支援方法。
【０１５２】
（付記９）
（ｅ）前記記憶装置に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納する、ステップと、
（ｆ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記記憶装置に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、ステップと、
を更に有する、付記７または８に記載の筆記支援方法。
【０１５３】
（付記１０）
更に、音声認識処理を実行する音声認識装置を用い、
（ｇ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記記憶装置において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、ステップを更に有する、
付記７〜９のいずれかに記載の筆記支援方法。
【０１５４】
（付記１１）
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、コンピュータによって、筆記支援を行なうためのプログラムであって、
前記コンピュータに、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を実行させるプログラム。
【０１５５】
（付記１２）
前記（ｂ）のステップで、授業毎に、前記参加の申請を受け付け、
前記記憶装置が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納しており、
前記（ｃ）のステップで、授業毎に、前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
付記１１に記載のプログラム。
【０１５６】
（付記１３）
前記記憶装置が、授業毎に、授業の開始日時を格納しており、
（ｄ）授業毎に、前記記憶装置に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、ステップを更に前記コンピュータに実行させる、
付記１２に記載のプログラム。
【０１５７】
（付記１４）
（ｅ）前記記憶装置に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納する、ステップと、
（ｆ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記記憶装置に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、ステップと、
を更に前記コンピュータに実行させる、付記１２または１３に記載のプログラム。
【０１５８】
（付記１５）
更に、音声認識処理を実行する音声認識装置を用い、
（ｇ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記記憶装置において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、ステップを更に前記コンピュータに実行させる、
付記１２〜１４のいずれかに記載のプログラム。
【産業上の利用可能性】
【０１５９】
以上のように、本発明によれば、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行うことができる。本発明は、聴覚障害者の支援を行なうシステムに有用である。
【符号の説明】
【０１６０】
１ 格納部
２ 教師端末
３ 教師端末アドレス格納部
４ 筆記者端末
５ 筆記者端末アドレス格納部
６ 生徒端末
７ 生徒端末アドレス格納部
８ 会話開始制御部
９ 会話終了制御部
１０ タイマー
１１ 授業開始終了制御部
１２ 授業申し込み受付部
１３ 筆記者申し込み受付部
１４ 制御部
２１ 警告通知時間保持部
２２ 授業開始前通知部（通知部）
３１ 事後筆記端末
３２ 筆記者申し込み受付部
４１ 自動筆記者端末（音声認識装置）
４２ 自動筆記者端末アドレス格納部
４３ 会話開始制御部（実施の形態４）
１００ 筆記支援装置（実施の形態１）
１０１ ネットワーク
１０２ 筆記支援装置（実施の形態２）
１０３ 筆記支援装置（実施の形態３）
１０４ 筆記支援装置（実施の形態４）
１１０ コンピュータ
１１１ ＣＰＵ
１１２ メインメモリ
１１３ 記憶装置
１１４ 入力インターフェイス
１１５ 表示コントローラ
１１６ データリーダ／ライタ
１１７ 通信インターフェイス
１１８ 入力機器
１１９ ディスプレイ装置
１２０ 記録媒体
１２１ バス
【技術分野】
【０００１】
本発明は、聴覚障害者に対する口述筆記を支援するための、筆記支援装置、筆記支援方法、およびプログラムに関する。
【背景技術】
【０００２】
近年、インターネットの普及により、複数の利用者間での、映像、音声、テキストの通信及び共有が、安価にまたは無料で実現されている。例えば、ＰＣ（Personal Computer）にスカイプ（登録商標)と呼ばれる通信ソフトをインストールし、これを起動すれば、任意のインターネット利用者間で、無料の通話が可能になる。また、スカイプを使用した場合は、音声通話のみならず、Ｗｅｂカメラの設置によって映像の送受信も可能になり、更には、相互にキーボードから入力するテキスト画面の共有（チャット）も可能になる。
【０００３】
このような、スカイプをはじめとする新しい通信手段、Ｙａｈｏｏ社が提供するブログのような情報発信手段を通じて、不特定多数の人同士で、協力をしあう活動及び仕組みが様々な分野で実現されている。このような活動及び仕組みは、「クラウドソーシング（Crowd Sourcing)）と呼ばれることがある。なお、ここでの「クラウド(Crowd)」は、「群集」の意味であって、クラウドコンピューティングの「クラウド（Cloud）：雲の意味」とは、日本語のカタカナ標記では同じであるが、英語での意味及びスペルは全く異なるものである。
【０００４】
具体的なクラウドソーシングの例としては、アクセシビリティ（Accessibility）が挙げられる。アクセシビリティとは、障害者を含む誰もが、様々な製品、建物、サービスなどを支障なくできるかどうか、またはその度合を意味する。つまり、クラウドソーシングは、身体障害者が健常者と同レベルのサービスを受容するための活動（アクセシビリティ分野での活動）において、期待されている。
【０００５】
例えば、視覚障害者は、Ｗｅｂページにおいて、テキストで書かれている部分については、音声合成ソフトウェアを使ってテキスト部分を自動的に読み上げることにより、内容を理解することができるが、写真及び画像ファイルが貼付けられている部分については、理解できない。
【０００６】
一方、ＨＴＭＬ言語では、写真ファイルおよび画像ファイルの所に、タグによって、その内容をテキストで記載することができる仕組みが用意されている。従って、視覚障害者が読むことを想定して、このタグを使って写真ファイルおよび画像ファイルの内容がテキストで記述されていると、上記の読み上げソフトは、このタグを認識し、注釈情報として写真および画像などのテキスト部分も読み上げることとなる。例えば、「夕暮れの富士山を撮影した写真を掲載しています」と、写真のところにテキストが記述されている場合が挙げられる。こうすることで、視覚障害者は、写真および画像がどういう内容のものなのかを、概略知ることができるようになる。
【０００７】
但し、このようなタグをすべての写真ファイルおよび画像ファイルの裏側に用意することは、困難でもあり、視覚障害者が内容を十分に理解できない場合もある。このような視覚障害者における困難の解決を支援するため、鳥取県とＩＢＭ社とが新たなサービスを発表している（例えば、非特許文献１参照）。
【０００８】
具体的には、非特許文献１では、視覚障害者は、特定のホームページを読んでいるときに、写真および画像の部分で理解の困難に遭遇すると、そのことを通知する。そして、この通知を見た不特定の健常者である第三者は、その写真および画像の部分を参照して、その内容についての書き込みを行なう。これにより、視覚障害者の困難の解決が支援されるものと考えられる。
【０００９】
非特許文献１に開示されたサービスは、鳥取県のホームページに限定して開始されている。もちろん、全てのＷｅｂページの作成者が、最初から完全に、写真および画像のテキスト部分を準備していれば、または視覚障害者からのクレームがあったとしても、Ｗｅｂページの作成者がすぐに対応できれば、このようなサービスは必要ないとも考える。但し、これらのことを実現するのは、必ずしも容易ではないので、このような不特定の第三者による善意をベースとしたクラウドソーシングのサービスの存在意義がある。
【００１０】
続いて、聴覚障害者へのサービスについて説明する。例えば、聴覚障害者が小学生であった場合、この児童は、授業における先生の口の動きを読み取ることで、発話の内容を理解しようと努力する。但し、先生が、常に、その子供から先生の口の動きが良く見える方向を向いてくれるとは限らないし、口の動きを読むだけでは、発話の内容を理解できないことも多い。
【００１１】
そのため、音声認識装置を教室に用意しておき、音声認識装置によって、先生および他の児童の発話を認識し、認識結果を文字に変換して、ディスプレイに表示するようにしたシステムが検討されている。
【先行技術文献】
【非特許文献】
【００１２】
【非特許文献１】「公共ウェブサイトのアクセシビリティ向上事業に着手」、[online]、2010年8月2日、ＩＢＭ社プレスリリース、［2011年3月31日検索］、インターネット<URL:http://www-06.ibm.com/jp/press/2010/08/0201.html>
【発明の概要】
【発明が解決しようとする課題】
【００１３】
上述の音声認識システムを教室に配置すれば、聴覚障害を持った児童の理解支援に大いに役立つと期待されるが、現在の音声認識の技術では、音声認識には間違いが含まれるため、このようなシステムの実現は困難であると考えられる。
【００１４】
つまり、対象が大人の場合であれば、多くの音声認識の間違いを含んだ文字情報を見ても、頭の中で「本当はこういう意味なんだけど、同音異義語を音声認識装置が誤解して、こういう結果が出たんだな」というような知的な解釈を行い、訂正後の内容で理解しつつ使うことが可能である。
【００１５】
しかし、対象が、小学生のような子供の場合であれば、このような理解と訂正をしつつ、多くの間違いを含んだ音声認識装置の出力を利用するのには、困難を伴うと考えられる。従って、このような状況下では、音声認識装置以外によって授業内容の理解を支援するシステムが求められている。
【００１６】
本発明の目的の一例は、上記問題を解消し、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行ない得る、筆記支援装置、筆記支援方法、およびプログラムを提供することにある。
【課題を解決するための手段】
【００１７】
上記目的を達成するため、本発明の一側面における筆記支援装置は、授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末の間で通信を行う、筆記支援装置であって、
前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを格納する、格納部と、
前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記格納部に格納する、筆記者申し込み受付部と、
前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、制御部と、
を備えている、ことを特徴とする。
【００１８】
また、上記目的を達成するため、本発明の一側面における筆記支援方法は、授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、筆記支援を行なうための方法であって、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を有する、ことを特徴とする。
【００１９】
更に、上記目的を達成するため、本発明の一側面におけるプログラムは、授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、コンピュータによって、筆記支援を行なうためのプログラムであって、
前記コンピュータに、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を実行させることを特徴とする。
【発明の効果】
【００２０】
以上のように、本発明における、筆記支援装置、筆記支援方法、およびプログラムによれば、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行うことができる。
【図面の簡単な説明】
【００２１】
【図１】図１は、本発明の実施の形態における筆記支援装置の構成を示すブロック図である。
【図２】図２は、本発明の実施の形態１における筆記支援装置の会話開始時の動作を示すフロー図である。
【図３】図３は、本発明の実施の形態１における筆記支援装置の会話終了時の動作を示すフロー図である。
【図４】図４は、本発明の実施の形態１における筆記支援装置が授業の開始及び終了を管理するために行う動作を示すフロー図である。
【図５】図５は、本発明の実施の形態における筆記支援装置の授業申し込み受け付け時の動作を示すフロー図である。
【図６】図６は、本発明の実施の形態における筆記支援装置の筆記者申し込み受け付け時の動作を示すフロー図である。
【図７】図７は、本発明の実施の形態２における筆記支援装置の構成を示すブロック図である。
【図８】図８は、本発明の実施の形態３における筆記支援装置の構成を示すブロック図である。
【図９】図９は、本発明の実施の形態３における筆記支援装置の動作を示すフロー図である。
【図１０】図１０は、本発明の実施の形態４における筆記支援装置の構成を示すブロック図である。
【図１１】図１１は、本発明の実施の形態４における筆記支援装置の動作を示すフロー図である。
【図１２】図１２は、本発明の実施の形態１〜４における筆記支援装置を実現するコンピュータの一例を示すブロック図である。
【図１３】図１３は、本発明の原理の概要を説明するための説明図である。
【発明を実施するための形態】
【００２２】
（発明の概要）
上述した課題を解決するため、本発明においては、クラウドソーシングの考え方が導入される。以下に、図１３を用いて、本発明の概要について説明する。図１３は、本発明の原理を説明するための説明図である。
【００２３】
ある授業があり、そこに聴覚障害者の生徒がいた場合を想定する。この場合において、図１３に示すように、先生にマイクを取付、先生と黒板とを写すカメラを設置し、授業中に、マイクの音声とカメラの映像とを、インターネットを介して、全く別の場所にいる筆記者のＰＣに送信する。
【００２４】
筆記者は、先生の姿および黒板に書かれた情報を参考にして、マイクから聞こえる先生の声を、口述筆記する。その口述筆記の内容は、インターネットを介して、生徒のもつディスプレイに表示される。生徒は、そのディスプレイを見ることで、先生の発話を知ることができる。また、授業中に、先生と別の生徒との間でやり取りが行なわれたときは、口述筆記者は、それについても口述筆記してもよい。
【００２５】
例えば、口述筆記者が、
先生： この足し算わかった人、手をあげて
生徒： はい
先生： はい、佐藤君。
生徒： ３５です。
のように、口述筆記することで、聴覚障害の生徒に、教室のやりとりを伝えることが出来る。
【００２６】
図１３に示すシステムを実現するためには、まず、先生、生徒、筆記者の間で、音声および映像を相互に送受信する仕組（以下「通信基盤」と呼ぶ。）が必要である。このような通信基盤としては、背景術の欄で述べた、スカイプが挙げられ、その他、下記の参考資料に記載のマイクロソフト社のWindows（登録商標） Messengerも挙げられる。
参考資料：マイクロソフト社Ｗｅｂページ
<http://windowslive.jp.msn.com/messenger.htm>
【００２７】
更に、図１３に示すシステムを実現するため、その上位に、授業の開催に際して、口述筆記をしてくれる人の募集または依頼を行なうことと、ボランティアとして応募してくれた人が参加を申告することと、を相互に開示する一種の出会いの場を提供する必要がある。
【００２８】
ここで、相互協力をする当事者の居場所はどこであっても構わない。たとえば、授業が東京で行われ、口述筆記する人は北海道にいても実現可能である。但し、時間的には、授業と同時に口述筆記をしてもらう必要があるので、特定の授業の日時に時間の余裕のある人が口述筆記を応募してくれる必要がある。そのため、授業の募集は、カレンダー的に時系列で表現しておくことが一覧性の観点からは望ましい。
【００２９】
本発明は、先ず、以上の通信基盤の仕組と出会いの場とを一体にして実現する筆記支援装置を提案する。また、本発明は、このシステムに、授業の開始の直前に授業を開始する旨を関係者に自動通知する仕組みを追加することができる。
【００３０】
更に、本発明は、授業の開催に際して、ボランティアの応募がなかった場合に、先生の音声と教室の映像を保存しておき、後になって、ボランティアの第３者が、口述筆記が行なわれていない過去の授業を見つけた場合に、空いている時間に、その音声と映像をダウンロードして口述筆記を行い、その結果をアップロードできる仕組みを追加することもできる。また、本発明は、同様に、授業の開催に際して、ボランティアの応募がなかった場合に、音声データを音声認識することによって、授業内容のテキストを生成する仕組みを追加することもできる。
【００３１】
なお、類似の既存システムとして、日本遠隔コミュニケーション支援協会のIPtalk（http://iptalk.web.infoseek.co.jp/参照）が知られている。このシステムは、既に聴覚障害者向けに無料で提供されているパソコン要約筆記用ソフトウェアであり、このシステムを用いることにより、ネットワークで接続された複数の端末間で音声、映像、文字データを共有することができる。
【００３２】
また、本発明では、通信基盤部分については、インターネットを利用した既存の技術を用いるのに対して、IPTalkでは、通信基盤部分が内蔵されている。IPTalkは、その設計思想として、気心の知り合っている人々の間で、相互協力関係を行うことを前提としたシステムだからである。IPTalkでは、授業および講演において、実時間での口述筆記のみが前提となる。
【００３３】
一方、本発明では、全く見ず知らずの人が相互協力を行なうことを想定され、更に、カレンダー機能を内蔵していることが特徴である。その結果、必ずしも、全ての授業または講演に対して、実時間で口述筆記をする人が現れないことも当然の状況として想定されており、その場合の対処方法として、上述した事後に口述筆記をする仕組み、および音声認識によって口述筆記をする仕組みがある。
【００３４】
（実施の形態１）
以下、本発明の実施の形態１における、筆記支援装置、筆記支援方法、およびプログラムについて、図１〜図６を参照しながら説明する。
【００３５】
［装置構成」
最初に、本実施の形態１における筆記支援装置の構成について図１を用いて説明する。図１は、本発明の実施の形態における筆記支援装置の構成を示すブロック図である。
【００３６】
図１に示すように、本実施の形態における筆記支援装置１００は、授業中の映像データ及び音声データを取得する教師用の端末２と、生徒用の端末６と、口述筆記を行なう筆記者用の端末４との間で通信を行う。これらはインターネットなどのネットワーク１０１を介して接続されている。
【００３７】
なお、本実施の形態において、生徒用の端末６を使う生徒は、主に聴覚障害を持った生徒である。また、以降において、教師用の端末を「教師端末」と表記し、筆記者用の端末を「筆記端末」と表記し、生徒用の端末を「生徒端末」と表記する。
【００３８】
また、図１に示すように、筆記支援装置１００は、主に、格納部１と、筆記者申込受付部１３と、制御部１４とを備えている。このうち、格納部１は、教師端末２のアドレス、および生徒端末６のアドレスを格納している。
【００３９】
筆記者申込受付部１３は、広く一般から、筆記者としての参加の申請を受け付ける。そして、筆記者申込受付部１３は、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、筆記者端末４のアドレスとして格納部１に格納する。
【００４０】
制御部１４は、まず、格納部１に、筆記者用の端末のアドレスが登録されているかどうかを判定する。そして、判定の結果、登録されている場合は、制御部１４は、教師端末２に対して、取得した映像データ及び音声データの筆記者端末４への送信を指示する。更に、この場合において、制御部１４は、筆記者端末４に対しては、筆記者が口述筆記によって作成したテキストデータの生徒用端末６への送信を指示する。
【００４１】
以上のように、本実施の形態では、聴覚障害を持った生徒がいる場合に、授業において口述筆記を行うことができる人を公募によって探すことができ、応募してくれた筆記者から生徒に対して授業の内容をテキストで送信することができる。本実施の形態によれば、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行なうことができる。
【００４２】
ここで、本実施の形態１における筆記支援装置１００の構成について更に具体的に説明する。図１に示すように、本実施の形態１では、筆記支援装置１００は、格納部１、筆記者申込受付部１３、及び制御部１４に加えて、現在時刻を常に保持するタイマー１０と、新規の授業の開催の申込を受け付ける授業申し込み受付部１２とを更に備えている。
【００４３】
また、制御部１４は、会話開始制御部８と、会話終了制御部９と、授業開始終了制御部１１とを備えている。このうち、会話開始制御部８は、会話開始時（授業開始時）からの会話において、教師端末２、生徒端末６、及び筆記者端末４の制御を行う。会話終了制御部９は、会話終了時（授業終了時）における教師端末２、生徒端末６、及び筆記者端末４の制御の制御を行う。また、授業開始終了制御部１１は、格納部１に登録されている各授業の開始と終了とを管理し、会話開始制御部８及び会話終了制御部９の起動を制御している。
【００４４】
格納部１は、本実施の形態１では、更に、授業の状況を特定する情報も格納する。具体的には、格納部１は、図１に示すように、授業毎に、授業ＩＤ、授業の開始日時、授業の終了日時、授業状態、筆記化状態、教師端末アドレス、生徒端末アドレス、筆記者端末アドレス、授業ファイル、筆記ファイル、の各項目からなるレコードを格納している。本実施の形態１において、格納部１は、レコードの追加、参照、一部の変更が容易な点から、データベースによって実現されているのが好ましい。
【００４５】
また、図１の例では、４つのレコードが示されている。このうち、授業ＩＤ＝１のレコードは、すでに授業は終了し、授業には、口述筆記者が参加し、授業の映像ファイルおよび音声ファイルと、音声ファイルを文字データに変換した筆記ファイルとが既に登録ずみであることを示している。
【００４６】
また、授業ＩＤ＝２のレコードは、授業は終了したが、口述筆記をしてくれる人がいなかったため、未だ、授業内容を筆記したファイルが存在していないことを示している。授業ＩＤ＝３のレコードは、ちょうど、今授業中であるため、口述筆記者は参加しているが、未だ筆記ファイルが未作成（完成していない）の状態であることを示している。授業ＩＤ＝４のレコードは、まだ授業が開催されておらず、且つ、口述筆記者の応募がまだない状況を示している。
【００４７】
教師端末２には、マイクとカメラとが接続されている。教師端末２は、外部からの開始指示によって起動されると、マイク入力とカメラ入力とを受け取り、音声ファイルと映像ファイルとを筆記支援装置１００に送信する。また、教師端末２は、外部から終了を指示されると、送信処理を終了する。
【００４８】
具体的には、教師端末２は、ＰＣに、スカイプおよびWindows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。また、教師端末２に接続されるカメラとしては、Ｗｅｂカメラが挙げられる。
【００４９】
また、教師端末２は、教師端末のアドレスを格納する教師端末アドレス格納部３を備えている。図１の例では、教師端末のアドレスとして、「Teacher１」が格納されている。なお、教師端末アンドレス格納部３は、例えば、ＰＣに接続可能な不揮発性のメモリによって実現できる。
【００５０】
筆記者端末４には、ディスプレイ、スピーカ、キーボードが接続されている。筆記者端末４は、外部からの開始指示によって起動されると、教師端末２から送信される音声ファイルおよび映像ファイルを受信する。そして、筆記者端末４は、音声ファイルをスピーカで再生し、映像ファイルをディスプレイに出力する。また、筆記者端末４は、筆記者４がキーボードから入力するテキストデータを、筆記支援装置１００に対して継続して送信し、外部から終了を指示されると、送信処理を終了する。
【００５１】
具体的には、筆記者端末４も、教師端末２と同様に、ＰＣに、スカイプ、Windows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。また、筆記者端末４に接続されるディスプレイ、スピーカ、キーボードは、ＰＣに一般的に使用されるものであっても良い。
【００５２】
また、筆記者端末４は、筆記者端末４のアドレスを格納する筆記者端末アドレス格納部５を備えている。図１の例では、筆記者端末アドレスとして、「Dictator１」が格納されている。なお、筆記者端末アドレス格納部５は、例えば、ＰＣに接続可能な不揮発性のメモリによって実現できる。
【００５３】
生徒端末６には、ディスプレイとスピーカとが接続されている。生徒端末６は、外部から開始指示によって起動されると、筆記者端末４から送信されるテキストデータを受信し、受信したテキストデータを、継続してディスプレイに出力する。また、生徒端末６は、外部から終了を指示されると、受信処理を終了する。
【００５４】
具体的には、生徒端末６も、教師端末２および筆記者端末４と同様に、ＰＣに、スカイプ、Windows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。また、生徒端末６に接続されるディスプレイおよびスピーカは、ＰＣに一般的に使用されるものであっても良い。
【００５５】
また、生徒端末６は、生徒端末６のアドレスを格納する生徒端末アドレス格納部７を備えている。図１の例では、生徒端末アドレスとして、「Student１」が格納されている。なお、生徒端末アドレス格納部７は、例えば、ＰＣに接続可能な不揮発性のメモリによって実現できる。
【００５６】
［動作説明］
次に、本発明の実施の形態１における筆記支援装置１００の動作について図２〜図６を用いて説明する。以下の説明においては、適宜図１を参酌する。また、本実施の形態１では、筆記支援装置１００を動作させることによって、筆記支援方法が実施される。よって、本実施の形態１における筆記支援方法の説明は、以下の筆記支援装置１００の動作説明に代える。
【００５７】
最初に、本実施の形態１における筆記支援装置１００の会話開始時（授業開始時）の動作について図２を用いて説明する。図２は、本発明の実施の形態１における筆記支援装置の会話開始時の動作を示すフロー図である。
【００５８】
図２に示すように、まず、会話開始制御部８は、授業開始終了制御部１１から送受信のセッション開始指示を、授業ＩＤとともに受け取る（ステップＳ１）。次に、会話開始制御部８は、格納部１に格納されているレコードを調べ、「授業ＩＤ」項目において、受け取った授業ＩＤの値を有するレコードを特定し、特定したレコードの「授業状態」項目に「授業中」と入力する（ステップＳ２）。
【００５９】
次に、会話開始制御部８は、レコードの「筆記者端末アドレス」項目の値が「未定」であるかどうかを判定する（ステップＳ３）。
【００６０】
ステップＳ３の判定の結果、「未定」でない場合は、会話開始制御部８は、まず、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２を起動し、教師端末２の送信内容（教師端末２が取得する映像データおよび音声データ）を筆記者端末４へ送ることを指示する（ステップＳ６）。
【００６１】
次に、会話開始制御部８は、「生徒端末アドレス」項目のアドレスを持つ生徒端末６を起動する（ステップＳ７）。次に、会話開始制御部８は、「筆記者端末アドレス」項目のアドレスを持つ筆記者端末４を起動して、筆記者端末４の送信内容（筆記者端末４で作成されるテキストデータ）を生徒端末６へ送ることを指示する（ステップＳ８）。
【００６２】
次に、会話開始制御部８は、教師端末２から送られてくる送信内容を追記的に、レコードの「授業ファイル」項目に格納し（ステップＳ９）、筆記者端末６の送信内容を追記的にレコードの「筆記ファイル」項目に格納する（ステップＳ１０）。
【００６３】
なお、本実施の形態では、「授業ファイル」項目および「筆記ファイル」項目には、通常の数値ではなく、音声ファイルオブジェクトおよびテキストファイルオブジェクトを格納する必要がある。従って、実際には、これらの項目には、ファイルのパス名のみが保存されていても良い。この場合、ファイルの実態は、格納部１からの参照先に存在するデータとなる。但し、本実施の形態では、説明のため、論理的に、これらの項目にファイルが直接格納されていることとしている。
【００６４】
また、ステップＳ３の判定の結果、「未定」である場合は、会話開始制御部８は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２と、「生徒端末アドレス」項目のアドレスを持つ生徒端末６と、を起動する。（ステップＳ４）。その後、会話開始制御部８は、教師端末２の送信内容を追記的に、レコードの「授業ファイル」項目に格納する（ステップＳ５）。
【００６５】
ステップＳ３およびＳ４の処理は、この授業の筆記を申し出る人が誰もいなかった場合に実行されるが、この場合は、授業の様子を記録した映像データと音声データとの格納部１への格納だけが行われる。また、ステップＳ１〜Ｓ１０に述べた会話開始制御部８による処理は、次に述べる会話終了制御部９による処理が開始されるまで実行される。
【００６６】
次に、本実施の形態における筆記支援装置１００の会話終了時（授業終了時）の動作について図３を用いて説明する。図３は、本発明の実施の形態１における筆記支援装置の会話終了時の動作を示すフロー図である。
【００６７】
図３に示すように、まず、会話終了制御部９は、授業開始終了制御部１１から送受信のセッション終了指示を、授業ＩＤとともに受け取る（ステップＳ１１）。次に、会話終了制御部９は、格納部１のレコードを調べ、「授業ＩＤ」項目において、受け取った授業ＩＤの値を有するレコードを特定し、レコードの「授業状態」項目に「終了」と入力する（ステップＳ１２）。
【００６８】
次に、会話終了制御部９は、レコードの「筆記者端末アドレス」項目の値が「未定」であるかどうかを判定する（ステップＳ１３）。
【００６９】
ステップＳ１３の判定の結果、未定でない場合は、会話終了制御部９は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２と、「生徒端末アドレス」項目のアドレスを持つ生徒端末６と、「筆記者端末アドレス」項目のアドレスを持つ筆記者端末４とに対して、送受信セッションの終了を通知する（ステップＳ１６）。
【００７０】
その後、会話終了制御部９は、格納部１において、「授業ファイル」項目と、「筆記ファイル」項目のとのファイルをそれぞれクローズさせ（ステップＳ１７）、さらに、「筆記化状態」項目に「作成」を書き込み（ステップＳ１８）、処理を終了する。
【００７１】
一方、ステップＳ１３の判定の結果、未定である場合は、会話終了制御部９は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末２に対して、送受信セッションの終了を通知して終了させる（ステップＳ１４）。その後、会話終了制御部９は、「授業ファイル」項目のファイルをクローズさせ（ステップＳ１５）、処理を終了する。
【００７２】
次に、本実施の形態１における筆記支援装置１００が授業の開始及び終了を管理する際の動作について図４を用いて説明する。図４は、本発明の実施の形態１における筆記支援装置が授業の開始及び終了を管理するために行う動作を示すフロー図である。
【００７３】
図４に示すように、まず、授業開始終了制御部１１は、定期的に、タイマー１０によって起動され（ステップＳ２１）、格納部１に、開始日時が経過していないレコードが存在しているかどうかを判定する（ステップＳ２２）。
【００７４】
ステップＳ２２の判定の結果、開始日時が経過していないレコードが存在している場合は、授業開始終了制御部１１は、開始日時が経過していないレコードを取り出す（ステップＳ２３）。そして、授業開始終了制御部１１は、そのレコードの授業開始日時項目の値が、タイマー１０が保持している現在時刻と一致しているかどうかを判定する（ステップＳ２４）。
【００７５】
次に、ステップＳ２４の判定の結果、一致しない場合は、授業開始終了制御部１１は、再度、ステップＳ２２を実行する。一方、一致する場合は、授業開始終了制御部１１は、レコードの授業ＩＤを引数にして会話開始制御部８にセッション開始を指示し（ステップＳ２５）、その後、再度、ステップＳ２２を実行する。
【００７６】
また、ステップＳ２２の判定の結果、開始日時が経過していないレコードが存在していない場合は、授業開始終了制御部１１は、新たに、最初から格納部１に格納されているレコードを取り出す用意をする（ステップＳ２６）。
【００７７】
そして、授業開始終了制御部１１は、格納部１のすべてのレコードの授業終了日時項目の値を調べ、終了日時が経過していないレコードが存在しているかどうかを判定する（ステップＳ２７）。
【００７８】
ステップＳ２７の判定の結果、終了日時が経過していないレコードが存在していない場合（全てのレコードの終了日時が経過している場合）は、授業開始終了制御部１１は、処理を終了する。
【００７９】
一方、ステップＳ２７の判定の結果、終了日時が経過していないレコードが存在している場合は、授業開始終了制御部１１は、終了日時が経過していないレコードを取り出す（ステップＳ２８）。そして、授業開始終了制御部１１は、そのレコードの授業終了日時項目の値が、タイマー１０の保持する現在時刻と一致しているかどうかを判定する（ステップＳ２９）。
【００８０】
次に、ステップＳ２９の判定の結果、一致しない場合は、授業開始終了制御部１１は、再度、ステップＳ２７を実行する。一方、一致する場合は、授業開始終了制御部１１は、レコードの授業ＩＤを引数にして会話終了制御部９にセッション終了を指示し、その後、再度、ステップＳ２７を実行する。
【００８１】
次に、本実施の形態における筆記支援装置１００の授業の申し込みの受け付け時の動作について図５を用いて説明する。図５は、本発明の実施の形態における筆記支援装置の授業申し込み受け付け時の動作を示すフロー図である。
【００８２】
図５に示すように、まず、授業申し込み受付部１２は、新規の授業開催申請を、授業の開始日時、終了日時、授業を指導する教師の端末アドレス、及び授業に参加する生徒の端末アドレスと共に受け付ける（ステップＳ３１）。
【００８３】
次に、授業申し込み受付部１２は、一意の授業識別番号を作成し（ステップＳ３２）、これを用いて新規のレコードを作成する（ステップＳ３３）。そして、授業申し込み受付部１２は、新規に作成したレコードを格納部１に格納する（ステップＳ３４）。
【００８４】
具体的には、ステップＳ３３では、授業申し込み受付部１２は、「授業ＩＤ」項目に一意の授業識別番号、「開始日時」項目に授業の開始日時、「終了日時」項目に授業の終了日時、「授業状態」項目に「予定」、「筆記化状態」項目に「未作成」を格納する。また、授業申し込み受付部１２は、「教師端末アドレス」項目に授業を指導する教師が利用する端末アドレス、「生徒端末アドレス」項目に授業に参加する生徒が利用する端末アドレスを格納する。さらに、授業申し込み受付部１２は、「筆記者端末アドレス」項目に「未定」、「授業ファイル」項目に「不在」、「筆記ファイル」項目に「不在」を、それぞれ格納する。
【００８５】
次に、本実施の形態１における筆記支援装置１００の筆記者申し込み受け付け時の動作について図６を用いて説明する。図６は、本発明の実施の形態における筆記支援装置の筆記者申し込み受け付け時の動作を示すフロー図である。
【００８６】
図６に示すように、まず、筆記者申し込み受付部１３は、特定の授業への筆記参加申請を、その授業ＩＤ及び授業へ参加する筆記者の筆記者端末アドレスと共に受け付ける（ステップＳ４１）。具体的には、ステップＳ４１では、筆記者申し込み受付部１３は、インターネット上でＷｅｂサイトを提供することによって、授業毎に、筆記者を公募することができる。
【００８７】
次に、筆記参加申請を受け付けた場合は、筆記者申し込み受付部１３は、格納部１のレコードを検索し、ステップＳ４１で受け付けた授業ＩＤを保持するレコードを特定する（ステップＳ４２）。
【００８８】
その後、筆記者申し込み受付部１３は、ステップＳ４２で特定したレコードにおける「筆記者アドレス」項目に、授業へ参加する筆記者の筆記者端末アドレスを格納する（ステップＳ４３）。ステップＳ４１〜Ｓ４３の実行により、筆記者が授業に参加できる状態となる。
【００８９】
また、本実施の形態１におけるプログラムは、コンピュータに、図２に示すステップＳ１〜Ｓ１０、図３に示すＳ１１〜Ｓ１８、図４に示すＳ２１〜Ｓ３０、図５に示すＳ３１〜Ｓ３４、図６に示すＳ４１〜Ｓ４３を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態１における筆記支援装置１００と筆記支援方法とを実現することができる。
【００９０】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１として機能する。
【００９１】
また、本実施の形態１では、筆記支援装置１００は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３が、それぞれ別々のコンピュータによって実用されていても良い。
【００９２】
［実施の形態１における効果］
以上のように、本実施の形態１では、筆記支援装置１００は、聴覚障害の生徒を持つ学校などで、例えば、カレンダー表示などによって、授業毎に、口述筆記の協力募集及び協力状況を広く公開することができる。つまり、筆記支援装置１００は、ボランティアの口述筆記者を広く世界に求めるクラウドソーシングを実現する仕組みを提供している。また、本実施の形態１では、その仕組みは、スカイプといった既存の通信ソフトを利用することにより、比較的低コストで実現される。
【００９３】
（実施の形態２）
次に、本発明の実施の形態２における、筆記支援装置、筆記支援方法、およびプログラムについて、図７を参照しながら説明する。図７は、本発明の実施の形態２における筆記支援装置の構成を示すブロック図である。
【００９４】
図７に示すように、本実施の形態２における筆記支援装置１０２は、実施の形態１において図１に示した筆記支援装置１００の構成に加えて、警告通知時間保持部２１と、通知部２２とを備えている。
【００９５】
警告通知時間保持部２１は、授業開始前に関係者に授業の開始直前であることを通知する際のタイミング、すなわち、通知時点と開始時点との差の時間を保持している。例えば、授業の開始１時間前に、教師、生徒、筆記者に授業開始を事前通知する場合であれば、警告通知時間保持部２１は、「１時間(６０分)」というデータを保持する。また、本実施の形態では、図７に示すように、事前に装置の管理者が「６０分」に設定している。
【００９６】
通知部２２は、定期的にタイマー１０によって起動される。そして、通知部２２は、起動されると、格納部１の全てのレコードの授業開始日時項目の値を特定し、特定した開始日時とタイマー１０の保持する現在時刻とを対比する。そして、通知部２２は、両者の時間差が、警告通知時間保持部２１が保持する時間と一致するレコードが存在する場合は、レコードの教師端末アドレス項目、生徒端末アドレス項目、筆記者端末アドレス項目のアドレス値を特定する。
【００９７】
その後、通知部２２は、特定したアドレスを送信先として、授業開始が間近であることを通知する。通知は、例えば、電子メール等によって行うことができる。また、以降および図７においては、通知部２２は、「授業開始前通知部」２２と表記する。
【００９８】
なお、本実施の形態２においても、筆記支援装置１０２を動作させることによって、筆記支援方法が実施される。よって、本実施の形態２における筆記支援方法の説明は、上述した筆記支援装置１０２の動作説明に代える。
【００９９】
また、本実施の形態２におけるプログラムは、コンピュータに、実施の形態１で述べた各ステップと、上記の動作とを実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態２における筆記支援装置１０２と筆記支援方法とを実現することができる。
【０１００】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、筆記者申し込み受付部１３、及び授業開始前通知部２２として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１および警告通知時間保持部２１として機能する。
【０１０１】
また、本実施の形態２においても、筆記支援装置１０２は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、筆記者申し込み受付部１３、及び授業開始前通知部２２が、それぞれ別々のコンピュータによって実用されていても良い。
【０１０２】
［実施の形態２における効果］
以上のように、本実施の形態２では、筆記支援装置１０２は、授業の直前に関係者に自動的に通知を行うことができる。本実施の形態２によれば、授業の参加者（教師、生徒、口述筆記者）が授業への参加準備を滞りなく行うことを支援することができる。
【０１０３】
（実施の形態３）
次に、本発明の実施の形態３における、筆記支援装置、筆記支援方法、およびプログラムについて、図８および図９を参照しながら説明する。
【０１０４】
［装置構成」
最初に、本実施の形態３における筆記支援装置の構成について図８を用いて説明する。図８は、本発明の実施の形態３における筆記支援装置の構成を示すブロック図である。
【０１０５】
図８に示すように、本実施の形態３における筆記支援装置１０３は、筆記者申し込み受付部３２を備えており、筆記者申し込み受付部３２の機能の点で、実施の形態１において図１に示した筆記支援装置１００と異なっている。また、筆記支援装置１０３は、ネットワーク１０１を介して、事後筆記者端末３１と接続されている。以下、相違点について説明する。
【０１０６】
筆記者申し込み受付部３２は、制御部１４によって、筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、筆記者としての参加の申請を受け付ける。そして、筆記者申し込み受付部３２は、参加申請があった場合に、参加申請を行なった筆記者が使用する端末３１（以下「事後筆記者端末」と表記する。）のアドレスを、当該授業についての筆記者端末のアドレスとして格納部１に格納する。
【０１０７】
また、筆記者申し込み受付部３２は、この場合、事後筆記者端末３１のアドレスに、当該授業について格納されている教師用の端末が取得した映像データ及び音声データを送信する。更に、この場合も、制御部１４は、事後筆記者端末３１に対して、筆記者が作成したテキストデータの生徒端末６及び筆記支援装置１０３への送信を指示する。
【０１０８】
なお、事後筆記者端末３１は、上述したように、授業の終了後に、筆記者が、すでに終了した授業の映像データおよび音声データをダウンロードして、口述筆記を行った結果をアップロードする時に使用する端末である。事後筆記端末３１も、図１に示した筆記者端末４と同様に、ＰＣに、スカイプ、Windows messengerといった、複数の端末間での音声、映像、文字の送信および受信を実現する通信ソフトを組み込むことによって実現できる。
【０１０９】
また、事後筆記者端末３１に接続されるディスプレイ、スピーカ、キーボードも、ＰＣに一般的に使用されるものであれば良い。更に、筆記者は、事後筆記端末３１を介して、映像データと音声データとを指定し、ディスプレイとスピーカとでデータを再生する一方で、キーボードを用いて口述筆記を行ない、テキストデータを生成する。
【０１１０】
［動作説明］
次に、本発明の実施の形態３における筆記支援装置１０３の動作について図９を用いて説明する。図９は、本発明の実施の形態３における筆記支援装置の動作を示すフロー図である。以下の説明においては、適宜図８を参酌する。また、本実施の形態３では、筆記支援装置１０３を動作させることによって、筆記支援方法が実施される。よって、本実施の形態３における筆記支援方法の説明は、以下の筆記支援装置１０３の動作説明に代える。
【０１１１】
図９に示すように、まず、筆記者申し込み受付部３２は、既に過去に実施されている特定の授業に対する口述筆記の参加申請を、当該授業の授業ＩＤおよび筆記者の端末アドレスと共に受け付ける（ステップＳ５１）。
【０１１２】
次に、筆記者申し込み受付部３２は、格納部１に格納されているレコードの中から、ステップＳ５１で受け付けた授業ＩＤを、授業ＩＤ項目の値として保持しているレコードを特定する（ステップＳ５２）。
【０１１３】
次に、筆記者申し込み受付部３２は、レコードの「筆記化状態」項目の値が「作成」となっているかどうかを判定する（ステップＳ５３）。ステップＳ５３の判定の結果、「作成」となっている場合は、筆記者申し込み受付部３２は、ステップＳ５１の参加申請を無効とし（ステップＳ５４）、処理を終了する。
【０１１４】
一方、ステップＳ５３の判定の結果、「作成」となっていない場合は、筆記者申し込み受付部５３は、レコードの「授業ファイル」項目のファイルを取り出し、事後筆記端末３１のアドレスに、取り出したファイルを送信する（ステップＳ５５）。
【０１１５】
次に、制御部１４は、事後筆記端末３１から、対応するテキストデータが送られてくると受信し、これをレコードの「筆記ファイル」項目に格納し（ステップＳ５６）、さらに、レコードの筆記化状態項目を「作成」とし（ステップＳ５７）、処理を終了する。
【０１１６】
また、本実施の形態３におけるプログラムは、コンピュータに、実施の形態１で述べた各ステップと、図９に示したステップＳ５１〜Ｓ５７とを実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態３における筆記支援装置１０３と筆記支援方法とを実現することができる。
【０１１７】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、および筆記者申し込み受付部３２として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１として機能する。
【０１１８】
また、本実施の形態３においても、筆記支援装置１０３は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部８、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、および筆記者申し込み受付部３２が、それぞれ別々のコンピュータによって実用されていても良い。
【０１１９】
［実施の形態３における効果］
以上のように、本実施の形態３にでは、授業のときに口述筆記者が登録されていなくても、後から、口述筆記を実行することができる。このため、本実施の形態３によれば、生徒は、授業の後で、効果的に復習を行なうことができる。
【０１２０】
（実施の形態４）
次に、本発明の実施の形態４における、筆記支援装置、筆記支援方法、およびプログラムについて、図１０および図１１を参照しながら説明する。
【０１２１】
［装置構成」
最初に、本実施の形態４における筆記支援装置の構成について図１０を用いて説明する。図１０は、本発明の実施の形態４における筆記支援装置の構成を示すブロック図である。
【０１２２】
図１０に示すように、本実施の形態４における筆記支援装置１０４は、会話開始制御部４３を備えており、会話開始制御部４３の機能の点で、実施の形態１において図１に示した筆記支援装置１００と異なっている。また、筆記支援装置１０４は、ネットワーク１０１を介して、自動筆記者端末４１と接続されている。以下、相違点について説明する。
【０１２３】
自動筆記者端末４１は、自動筆記者端末４１は、音声データを受け取ると、それをテキストデータに変換する処理（音声認識処理）を実行する音声認識装置を有している。自動筆記者端末４１は、外部から開始指示と共に起動されると、教師端末２から送信される音声データを受信し、これを自動認識装置に入力として与え、対応するテキストデータを出力させる。また、自動筆記者端末４１は、出力されたテキストデータを、継続して筆記支援装置１０４に送信する。また、自動筆記者端末４１は、外部から終了を指示されると、処理を終了する。
【０１２４】
また、自動筆記者端末４１は、自動筆記者端末４１のアドレスを格納する自動筆記者端末アドレス格納部４２を備えている。筆記支援装置１０４は、このアドレスから、この端末が音声認識装置を使った筆記者端末であることを判別する。図１０の例では、自動筆記者端末アドレスとして、「Auto-speech-translator１」が格納されている。なお、自動筆記者端末アドレス格納部４２は、不揮発性のメモリによって実現できる。
【０１２５】
また、本実施の形態４では、会話開始制御部４３は、筆記者端末４のアドレスが登録されていないと判定した場合に、格納部１において、当該判定の対象となった授業の筆記者端末４のアドレスとして、自動筆記者端末４１のアドレスを格納させる。そして、会話開始制御部４３は、教師端末２に対して、取得した音声データの自動筆記者端末４１への送信を指示し、自動筆記者端末４１に対して、音声データから得られた認識結果（テキストデータ）の生徒端末６への送信を指示する。
【０１２６】
［動作説明］
次に、本発明の実施の形態４における筆記支援装置１０４の動作について図１１を用いて説明する。図１１は、本発明の実施の形態４における筆記支援装置の動作を示すフロー図である。以下の説明においては、適宜図１０を参酌する。また、本実施の形態４では、筆記支援装置１０４を動作させることによって、筆記支援方法が実施される。よって、本実施の形態４における筆記支援方法の説明は、以下の筆記支援装置１０４の動作説明に代える。
【０１２７】
図１１に示すように、まず、会話開始制御部４３は、授業開始終了制御部１１から送受信のセッション開始指示を、授業ＩＤとともに受け取る（ステップＳ６１）。次に、会話開始制御部４３は、格納部１に格納されているレコードを調べ、「授業ＩＤ」項目において、受け取った授業ＩＤの値を有するレコードを特定し、特定したレコードの「授業状態」項目に「授業中」と入力する（ステップＳ６２）。
【０１２８】
次に、会話開始制御部４３は、レコードの「筆記者端末アドレス」項目の値が「未定」であるかどうかを判定する（ステップＳ６３）。
【０１２９】
ステップＳ６３の判定の結果、「未定」でない場合は、会話開始制御部４３は、ステップＳ７０〜Ｓ７４を実行する。なお、ステップＳ７０〜Ｓ７４は、図２に示したステップＳ６〜Ｓ１０と同様のステップである。
【０１３０】
一方、ステップＳ６３の判定の結果、「未定」である場合は、会話開始制御部４３は、レコードの「筆記者端末アドレス」に自動筆記者端末アドレス格納部４２のアドレスを格納する（ステップＳ６４）。
【０１３１】
次に、会話開始制御部４３は、レコードの「教師端末アドレス」項目のアドレスを持つ教師端末を起動し、教師端末２の送信内容を自動筆記者端末４１へ送ることを指示する（ステップＳ６５）。
【０１３２】
次に、会話開始制御部４３は、「生徒端末アドレス」項目のアドレスを持つ生徒端末６を起動する（ステップＳ６６）。次に、会話開始制御部４３は、「筆記者端末アドレス」項目のアドレスを持つ自動筆記者端末４１を起動し、生成したテキストデータを生徒端末６に送信することを指示する（ステップＳ６７）。
【０１３３】
次に、会話開始制御部４３は、教師端末２から送られてくる送信内容を追記的に、レコードの「授業ファイル」項目に格納し（ステップＳ６８）、自動筆記者端末４１の送信するテキストデータを追記的にレコードの「筆記ファイル」項目に格納する（ステップＳ６９）。以上のステップＳ６１〜Ｓ７４の処理により、筆記者端末４が登録されていない場合は、音声認識によるテキストデータが作成され、これが生徒端末６へと送信される。
【０１３４】
また、本実施の形態４におけるプログラムは、コンピュータに、図３に示すＳ１１〜Ｓ１８、図４に示すＳ２１〜Ｓ３０、図５に示すＳ３１〜Ｓ３４、図６に示すＳ４１〜Ｓ４３、図１１に示すステップＳ６１〜Ｓ７４、を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態４における筆記支援装置１０４と筆記支援方法とを実現することができる。
【０１３５】
この場合、コンピュータのＣＰＵ（Central Processing Unit）は、会話開始制御部４３、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３として機能し、処理を行なう。また、コンピュータに備えられたハードディスク等の記憶装置が、格納部１として機能する。
【０１３６】
また、本実施の形態４では、筆記支援装置１０４は、複数台のコンピュータによって実現されていてもよい。例えば、会話開始制御部４３、会話終了制御部９、授業開始終了制御部１１、授業申し込み受付部１２、及び筆記者申し込み受付部１３が、それぞれ別々のコンピュータによって実用されていても良い。
【０１３７】
［実施の形態４における効果］
以上のように、本実施の形態４では、授業のときに口述筆記者がいない場合は、人間のボランティアの代わりに、音声認識装置が使用される。この場合、得られるテキストデータの品質は、人が行なう場合に比べて低下する可能性はあるが、何らかのヒントになると考えられる。つまり、テキストデータが全く作成されないよりも、生徒に理解力の向上に貢献できる。また、教師は、音声認識結果を確認し、これが正しくない場合は、授業中に生徒に正しい内容を伝達することができ（例えば、黒板に字を書く等）、誤りを補正することができ、この点からも生徒の理解力の向上を図ることができる。
【０１３８】
ここで、実施の形態１〜４におけるプログラムを実行することによって、筆記支援装置を実現するコンピュータについて図１２を用いて説明する。図１２は、本発明の実施の形態１〜４における筆記支援装置を実現するコンピュータの一例を示すブロック図である。
【０１３９】
図１２に示すように、コンピュータ１１０は、ＣＰＵ１１１と、メインメモリ１１２と、記憶装置１１３と、入力インターフェイス１１４と、表示コントローラ１１５と、データリーダ／ライタ１１６と、通信インターフェイス１１７とを備える。これらの各部は、バス１２１を介して、互いにデータ通信可能に接続される。
【０１４０】
ＣＰＵ１１１は、記憶装置１１３に格納された、本実施の形態におけるプログラム（コード）をメインメモリ１１２に展開し、これらを所定順序で実行することにより、各種の演算を実施する。メインメモリ１１２は、典型的には、ＤＲＡＭ（Dynamic Random Access Memory）等の揮発性の記憶装置である。また、本実施の形態におけるプログラムは、コンピュータ読み取り可能な記録媒体１２０に格納された状態で提供される。なお、本実施の形態におけるプログラムは、通信インターフェイス１１７を介して接続されたインターネット上で流通するものであっても良い。
【０１４１】
また、記憶装置１１３の具体例としては、ハードディスクの他、フラッシュメモリ等の半導体記憶装置が挙げられる。入力インターフェイス１１４は、ＣＰＵ１１１と、キーボード及びマウスといった入力機器１１８との間のデータ伝送を仲介する。表示コントローラ１１５は、ディスプレイ装置１１９と接続され、ディスプレイ装置１１９での表示を制御する。データリーダ／ライタ１１６は、ＣＰＵ１１１と記録媒体１２０との間のデータ伝送を仲介し、記録媒体１２０からのプログラムの読み出し、及びコンピュータ１１０における処理結果の記録媒体１２０への書き込みを実行する。通信インターフェイス１１７は、ＣＰＵ１１１と、他のコンピュータとの間のデータ伝送を仲介する。
【０１４２】
また、記録媒体１２０の具体例としては、ＣＦ（Compact Flash）及びＳＤ（Secure Digital）等の汎用的な半導体記憶デバイス、フレキシブルディスク（Flexible Disk）等の磁気記憶媒体、又はＣＤ−ＲＯＭ（Compact Disk Read Only Memory）などの光学記憶媒体が挙げられる。
【０１４３】
上述した実施の形態の一部又は全部は、以下に記載する（付記１）〜（付記１５）によって表現することができるが、以下の記載に限定されるものではない。
【０１４４】
（付記１）
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末の間で通信を行う、筆記支援装置であって、
前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを格納する、格納部と、
前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記格納部に格納する、筆記者申し込み受付部と、
前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、制御部と、
を備えている、ことを特徴とする筆記支援装置。
【０１４５】
（付記２）
前記筆記者申し込み受付部が、授業毎に、前記参加の申請を受け付け、
前記格納部が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納し、
前記制御部が、授業毎に、前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
付記１に記載の筆記支援装置。
【０１４６】
（付記３）
前記格納部が、授業毎に、授業の開始日時を格納しており、
当該筆記支援装置が、
授業毎に、前記格納部に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、通知部を更に備えている、
付記２に記載の筆記支援装置。
【０１４７】
（付記４）
前記格納部が、更に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納しており、
前記筆記者申し込み受付部が、
前記制御部によって、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記格納部に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、
付記２または３に記載の筆記支援装置。
【０１４８】
（付記５）
当該筆記支援装置が、音声認識処理を実行する音声認識装置に接続されており、
前記制御部が、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記格納部において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、付記２〜４のいずれかに記載の筆記支援装置。
【０１４９】
（付記６）
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、筆記支援を行なうための方法であって、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を有する、ことを特徴とする筆記支援方法。
【０１５０】
（付記７）
前記（ｂ）のステップで、授業毎に、前記参加の申請を受け付け、
前記記憶装置が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納しており、
前記（ｃ）のステップで、授業毎に、前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
付記６に記載の筆記支援方法。
【０１５１】
（付記８）
前記記憶装置が、授業毎に、授業の開始日時を格納しており、
（ｄ）授業毎に、前記記憶装置に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、ステップを更に有する、
付記７に記載の筆記支援方法。
【０１５２】
（付記９）
（ｅ）前記記憶装置に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納する、ステップと、
（ｆ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記記憶装置に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、ステップと、
を更に有する、付記７または８に記載の筆記支援方法。
【０１５３】
（付記１０）
更に、音声認識処理を実行する音声認識装置を用い、
（ｇ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記記憶装置において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、ステップを更に有する、
付記７〜９のいずれかに記載の筆記支援方法。
【０１５４】
（付記１１）
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、コンピュータによって、筆記支援を行なうためのプログラムであって、
前記コンピュータに、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を実行させるプログラム。
【０１５５】
（付記１２）
前記（ｂ）のステップで、授業毎に、前記参加の申請を受け付け、
前記記憶装置が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納しており、
前記（ｃ）のステップで、授業毎に、前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
付記１１に記載のプログラム。
【０１５６】
（付記１３）
前記記憶装置が、授業毎に、授業の開始日時を格納しており、
（ｄ）授業毎に、前記記憶装置に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、ステップを更に前記コンピュータに実行させる、
付記１２に記載のプログラム。
【０１５７】
（付記１４）
（ｅ）前記記憶装置に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納する、ステップと、
（ｆ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記記憶装置に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、ステップと、
を更に前記コンピュータに実行させる、付記１２または１３に記載のプログラム。
【０１５８】
（付記１５）
更に、音声認識処理を実行する音声認識装置を用い、
（ｇ）前記（ｃ）のステップで、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記記憶装置において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、ステップを更に前記コンピュータに実行させる、
付記１２〜１４のいずれかに記載のプログラム。
【産業上の利用可能性】
【０１５９】
以上のように、本発明によれば、クラウドソーシングの活用によって、聴覚障害者の聞き取りの支援を行うことができる。本発明は、聴覚障害者の支援を行なうシステムに有用である。
【符号の説明】
【０１６０】
１ 格納部
２ 教師端末
３ 教師端末アドレス格納部
４ 筆記者端末
５ 筆記者端末アドレス格納部
６ 生徒端末
７ 生徒端末アドレス格納部
８ 会話開始制御部
９ 会話終了制御部
１０ タイマー
１１ 授業開始終了制御部
１２ 授業申し込み受付部
１３ 筆記者申し込み受付部
１４ 制御部
２１ 警告通知時間保持部
２２ 授業開始前通知部（通知部）
３１ 事後筆記端末
３２ 筆記者申し込み受付部
４１ 自動筆記者端末（音声認識装置）
４２ 自動筆記者端末アドレス格納部
４３ 会話開始制御部（実施の形態４）
１００ 筆記支援装置（実施の形態１）
１０１ ネットワーク
１０２ 筆記支援装置（実施の形態２）
１０３ 筆記支援装置（実施の形態３）
１０４ 筆記支援装置（実施の形態４）
１１０ コンピュータ
１１１ ＣＰＵ
１１２ メインメモリ
１１３ 記憶装置
１１４ 入力インターフェイス
１１５ 表示コントローラ
１１６ データリーダ／ライタ
１１７ 通信インターフェイス
１１８ 入力機器
１１９ ディスプレイ装置
１２０ 記録媒体
１２１ バス
【特許請求の範囲】
【請求項１】
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末の間で通信を行う、筆記支援装置であって、
前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを格納する、格納部と、
前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記格納部に格納する、筆記者申し込み受付部と、
前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、制御部と、
を備えている、ことを特徴とする筆記支援装置。
【請求項２】
前記筆記者申し込み受付部が、授業毎に、前記参加の申請を受け付け、
前記格納部が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納し、
前記制御部が、授業毎に、前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
請求項１に記載の筆記支援装置。
【請求項３】
前記格納部が、授業毎に、授業の開始日時を格納しており、
当該筆記支援装置が、
授業毎に、前記格納部に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、通知部を更に備えている、
請求項２に記載の筆記支援装置。
【請求項４】
前記格納部が、更に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納しており、
前記筆記者申し込み受付部が、
前記制御部によって、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記格納部に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、
請求項２または３に記載の筆記支援装置。
【請求項５】
当該筆記支援装置が、音声認識処理を実行する音声認識装置に接続されており、
前記制御部が、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記格納部において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、請求項２〜４のいずれかに記載の筆記支援装置。
【請求項６】
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、筆記支援を行なうための方法であって、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を有する、ことを特徴とする筆記支援方法。
【請求項７】
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、コンピュータによって、筆記支援を行なうためのプログラムであって、
前記コンピュータに、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を実行させるプログラム。
【請求項１】
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末の間で通信を行う、筆記支援装置であって、
前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを格納する、格納部と、
前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記格納部に格納する、筆記者申し込み受付部と、
前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、制御部と、
を備えている、ことを特徴とする筆記支援装置。
【請求項２】
前記筆記者申し込み受付部が、授業毎に、前記参加の申請を受け付け、
前記格納部が、授業毎に、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスを格納し、
前記制御部が、授業毎に、前記格納部に、前記筆記者用の端末のアドレスが登録されているかどうかを判定する、
請求項１に記載の筆記支援装置。
【請求項３】
前記格納部が、授業毎に、授業の開始日時を格納しており、
当該筆記支援装置が、
授業毎に、前記格納部に格納されている当該授業の開始日時と現在の時刻とを対比し、両者の時間差が設定値となった場合に、該当する授業についての、前記教師用の端末のアドレス、前記生徒用の端末のアドレス、および前記筆記者用の端末のアドレスに、当該授業の開始を通知する、通知部を更に備えている、
請求項２に記載の筆記支援装置。
【請求項４】
前記格納部が、更に、授業毎に、前記教師用の端末が取得した前記映像データ及び前記音声データを格納しており、
前記筆記者申し込み受付部が、
前記制御部によって、前記筆記者用の端末のアドレスが登録されていないと判定された授業について、更に、前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、当該授業についての前記筆記者用の端末のアドレスとして前記格納部に格納すると共に、前記筆記者用の端末のアドレスに、当該授業について格納されている前記教師用の端末が取得した前記映像データ及び前記音声データを送信する、
請求項２または３に記載の筆記支援装置。
【請求項５】
当該筆記支援装置が、音声認識処理を実行する音声認識装置に接続されており、
前記制御部が、前記筆記者用の端末のアドレスが登録されていないと判定した場合に、前記格納部において、当該判定の対象となった授業の前記筆記者用の端末のアドレスとして、前記音声認識装置のアドレスを格納させ、
そして、前記教師用の端末に対して、取得した前記音声データの前記音声認識装置への送信を指示し、前記音声認識装置に対して、前記音声データから得られた認識結果の前記生徒用の端末への送信を指示する、請求項２〜４のいずれかに記載の筆記支援装置。
【請求項６】
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、筆記支援を行なうための方法であって、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を有する、ことを特徴とする筆記支援方法。
【請求項７】
授業中の映像データ及び音声データを取得する教師用の端末、生徒用の端末、および口述筆記を行なう筆記者用の端末を用いて、コンピュータによって、筆記支援を行なうためのプログラムであって、
前記コンピュータに、
（ａ）前記教師用の端末のアドレス、および前記生徒用の端末のアドレスを、記憶装置に格納する、ステップと、
（ｂ）前記筆記者としての参加の申請を受け付け、参加申請があった場合に、参加申請を行なった筆記者が使用する端末のアドレスを、前記筆記者用の端末のアドレスとして前記記憶装置に格納する、ステップと、
（ｃ）前記記憶装置に、前記筆記者用の端末のアドレスが登録されているかどうかを判定し、
登録されている場合に、前記教師用の端末に対して、取得した前記映像データ及び前記音声データの前記筆記者用の端末への送信を指示し、更に、前記筆記者用の端末に対して、前記筆記者が作成したテキストデータの前記生徒用の端末への送信を指示する、ステップと、
を実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１２−２１５９６２（Ｐ２０１２−２１５９６２Ａ）
【公開日】平成２４年１１月８日（２０１２．１１．８）
【国際特許分類】
【出願番号】特願２０１１−７９３１５（Ｐ２０１１−７９３１５）
【出願日】平成２３年３月３１日（２０１１．３．３１）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＣＯＭＰＡＣＴＦＬＡＳＨ
【出願人】（３９０００１３９５）ＮＥＣシステムテクノロジー株式会社 (438)
【公開日】平成２４年１１月８日（２０１２．１１．８）
【国際特許分類】
【出願日】平成２３年３月３１日（２０１１．３．３１）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＣＯＭＰＡＣＴＦＬＡＳＨ
【出願人】（３９０００１３９５）ＮＥＣシステムテクノロジー株式会社 (438)
[ Back to top ]