文書処理方法および文書処理システム
【課題】見えにくい、または、読みにくい文書の内容を容易に把握すること。
【解決手段】スキャナー１１は、受領者が配置した紙媒体の文書をデジタルデータに変換し、撮影画像生成部１７ａは、デジタルデータから撮影画像を生成する。そして、分割部１７ｂは、撮影画像を複数の領域に分割し、表示制御部１７ｃは、撮影画像を表示部１２に表示させるように制御する。そして、表示部１２の光センサは、リモコン２０から照射された可視光の表示部１２における位置を特定し、特定部１７ｄは、光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。そして、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像を表示部１２に表示するように制御する。
【解決手段】スキャナー１１は、受領者が配置した紙媒体の文書をデジタルデータに変換し、撮影画像生成部１７ａは、デジタルデータから撮影画像を生成する。そして、分割部１７ｂは、撮影画像を複数の領域に分割し、表示制御部１７ｃは、撮影画像を表示部１２に表示させるように制御する。そして、表示部１２の光センサは、リモコン２０から照射された可視光の表示部１２における位置を特定し、特定部１７ｄは、光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。そして、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像を表示部１２に表示するように制御する。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、文書処理方法および文書処理システムに関する。
【背景技術】
【０００２】
従来、加齢による視力低下などの要因により文書を見たり読んだりすることが困難な人を支援するための装置の開発が進められている。
【０００３】
かかる装置としては、例えば、オートフォーカス機能により読書対象となる文書を高倍率で拡大する装置が知られている（例えば、非特許文献１参照）。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】“拡大読書器”、［online］、［平成２２年３月２３日検索］、インターネット＜http://www.kougakudo.jp/newpage-6.html＞
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、読者は、例えば、葉書などを読む場合、文書全体を見たり、文書の一部を読んだり、文書にある写真を見たりといったように、文書全体と文書のある部分とを交互に見たり読んだりすることが一般的である。しかし、上記した従来の技術は、読者が指定した特定の範囲を拡大するのみである。したがって、読者は、読書対象となる文書において、見たい範囲や読みたい範囲が拡大されるように上記した装置を操作する必要があった。
【０００６】
すなわち、上記した従来の技術は、見えにくい、または、読みにくい文書の内容を容易に把握することが困難であるといった課題があった。
【０００７】
そこで、この発明は、上述した従来技術の課題を解決するためになされたものであり、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる文書処理方法および文書処理システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決し、目的を達成するために、この方法は、利用者が配置した文書を撮影した画像を生成する撮影ステップと、前記撮影ステップにより生成された前記画像を複数の領域に分割する分割ステップと、前記撮影ステップにより生成された前記画像を所定の表示部に表示させるように制御する表示制御ステップと、前記表示制御ステップの制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知ステップと、前記検知ステップが検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割ステップにより分割された前記複数の領域から特定する特定ステップと、前記特定ステップにより特定された領域を拡大した拡大画像を生成する拡大画像生成ステップと、前記拡大画像生成ステップにより生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御ステップと、を含んだことを要件とする。
【０００９】
また、このシステムは、文書に対して処理を行なう文書処理装置と、光を送信する光送信装置とを含む文書処理システムであって、前記文書処理装置は、利用者が配置した文書を撮影した画像を生成する撮影手段と、前記撮影手段により生成された前記画像を複数の領域に分割する分割手段と、前記撮影手段により生成された前記画像を所定の表示部に表示させるように制御する表示制御手段と、前記表示制御手段の制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して前記光送信装置から送信された光を検知する検知手段と、前記検知手段が検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割手段により分割された前記複数の領域から特定する特定手段と、前記特定手段により特定された領域を拡大した拡大画像を生成する拡大画像生成手段と、前記拡大画像生成手段により生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御手段と、を備えたことを要件とする。
【発明の効果】
【００１０】
開示の方法およびシステムによれば、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる。
【図面の簡単な説明】
【００１１】
【図１】図１は、実施例１に係る文書処理システムの構成を説明するための図である。
【図２】図２は、実施例１に係るリモコンの外観例を説明するための図である。
【図３】図３は、実施例１に係る文書処理装置の外観例を説明するための図である。
【図４】図４は、実施例１に係る文書処理装置の構成を説明するための図である。
【図５】図５は、分割部を説明するための図である。
【図６】図６は、表示制御部により表示される撮影画像の一例を説明するための図である。
【図７】図７は、受領者から照射される可視光の一例を説明するための図である。
【図８】図８は、特定部を説明するための図である。
【図９】図９は、表示制御部により表示される拡大画像の一例を説明するための図である。
【図１０】図１０は、画像処理指示による拡大画像生成部および表示制御部の処理を説明するための図である。
【図１１】図１１は、実施例１に係る文書処理装置の処理を説明するためのフローチャートである。
【図１２】図１２は、実施例２に係るリモコンの外観例を説明するための図である。
【図１３】図１３は、実施例２に係る文書処理装置の構成を説明するための図である。
【図１４】図１４は、音声出力制御部による判定処理を説明するための図である。
【図１５】図１５は、音声出力制御部による音声出力処理を説明するための図である。
【図１６】図１６は、音声出力制御部の音声出力処理にともなう表示制御部の表示処理を説明するための図である。
【図１７】図１７は、実施例２に係る文書処理装置の処理を説明するためのフローチャートである。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照して、この発明に係る文書処理方法および文書処理システムの実施例を詳細に説明する。なお、以下では、本発明に係る文書処理方法を実行する文書処理システムを実施例として説明する。
【実施例１】
【００１３】
まず、図１を用いて、実施例１に係る文書処理システムの構成について説明する。図１は、実施例１に係る文書処理システムの構成を説明するための図である。
【００１４】
実施例１に係る文書処理システムは、図１に示すように、発送者が発送した紙媒体の文書（例えば、葉書など）に対して処理を行なう文書処理装置１０と、可視光を送信するリモコン２０とを含む。ここで、図１に示す文書処理装置１０およびリモコン２０は、紙媒体の文書を受領した受領者が操作する装置である。
【００１５】
図２は、実施例１に係るリモコンの外観例を説明するための図である。図２に示すように、リモコン２０は、照射口２２から可視光を照射するための可視光スイッチ２１を有する。リモコン２０は、可視光スイッチ２１が受領者により押下された場合、照射口２２から可視光を照射させる。また、リモコン２０は、文書処理装置１０にて表示される画像に関する処理を指示するための各種ボタンを有する。具体的には、リモコン２０は、拡大ボタン２３（図中に示す「拡大」）、縮小ボタン２４（図中に示す「縮小」）および消去ボタン２５（図中に示す「消去」）を有する。なお、拡大ボタン２３、縮小ボタン２４および消去ボタン２５については、後に詳述する。
【００１６】
図３は、実施例１に係る文書処理装置の外観例を説明するための図である。図３に示すように、文書処理装置１０は、スキャナー１１と、表示部１２と、信号受信部１３と、スピーカ１４と、入力部１５とを有する。
【００１７】
スキャナー１１は、受領者が配置した紙媒体の文書を撮影した撮影画像を生成するために用いられ、文書を読込んで、読込んだ文書をデジタルデータに変換する。
【００１８】
表示部１２は、光センサが内蔵された光センサ内臓ディスプレイである。具体的には、表示部１２は、ディスプレイ機能により、スキャナー１１が変換したデジタルデータから生成された撮影画像を表示する。また、表示部１２は、内蔵された光センサにより、リモコン２０から照射された可視光を検知する。
【００１９】
信号受信部１３は、拡大ボタン２３、縮小ボタン２４および消去ボタン２５から送信された各種画像処理指示を受信する。
【００２０】
スピーカ１４は、音声出力に用いられ、例えば、図３に示すように、文書処理装置１０の前面において２箇所設置される。
【００２１】
入力部１５は、受領者が文書処理装置１０の電源ＯＮ／ＯＦＦや、スキャナー１１によるスキャン開始、文書処理装置１０による処理終了などを行なうための各種ボタン群を有する。
【００２２】
ここで、文書の受領者は、例えば、老齢であるために文書を見たり読んだりすることが困難であっても、かかる外観を有する文書処理装置１０およびリモコン２０を用いることで、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる。以下、文書処理装置１０が有する機能について図４などを用いて詳細に説明する。
【００２３】
図４は、実施例１に係る文書処理装置の構成を説明するための図である。図４に示すように、実施例１に係る文書処理装置１０は、上述したスキャナー１１、表示部１２、信号受信部１３、スピーカ１４および入力部１５とともに、記憶部１６と制御部１７とを有する。
【００２４】
記憶部１６は、制御部１７による各種処理結果を記憶し、図４に示すように、特に本実施例に関連するものとして、画像記憶部１６ａおよび分割結果記憶部１６ｂを有する。
【００２５】
画像記憶部１６ａは、後述する撮影画像生成部１７ａおよび後述する拡大画像生成部１７ｅによる処理結果を記憶し、分割結果記憶部１６ｂは、後述する分割部１７ｂによる処理結果を記憶するが、これらについては、後に詳述する。
【００２６】
制御部１７は、スキャナー１１、表示部１２、信号受信部１３から転送された各種情報に基づいて各種処理を実行し、特に本実施例に関連するものとして、撮影画像生成部１７ａと、分割部１７ｂと、表示制御部１７ｃと、特定部１７ｄと、拡大画像生成部１７ｅと、指示判定部１７ｆとを有する。
【００２７】
撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから文書を撮影した画像（撮影画像）を生成し、生成した撮影画像を画像記憶部１６ａに格納する。
【００２８】
分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を画像記憶部１６ａから読み出し、読み出した撮影画像を複数の領域に分割する。ここで、葉書などの文書は、一般的に、写真や、本文、発送者の情報（住所、氏名、電話番号など）などのように、内容に応じて複数の領域に分けることができる。また、文書は、文書の背景色により占められる領域と、当該背景色と異なる色調により占められる領域とに分割することができる。すなわち、文書の背景色により囲まれる領域を特定することで、文書は、当該文書に記載されている内容に応じて、複数の領域に分割することができる。
【００２９】
そこで、分割部１７ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。図５は、分割部を説明するための図である。
【００３０】
例えば、撮影画像の生成元である文書が、図５の（Ａ）に示すように、「写真」の領域と、「本文１」の領域と、「本文２」の領域と、「発送者情報」の領域との４つの領域により構成されているとする。
【００３１】
かかる場合、分割部１７ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、図５の（Ｂ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」の領域に対応する「領域Ｂ」と、「本文２」の領域に対応する「領域Ｃ」と、「発送者情報」の領域に対応する「領域Ｄ」とに撮影画像を分割する。
【００３２】
そして、分割部１７ｂは、図５の（Ｂ）に示すように、撮影画像における領域Ａの位置情報を「位置情報Ａ」として分割結果記憶部１６ｂに格納する。同様に、分割部１７ｂは、図５の（Ｂ）に示すように、撮影画像における領域Ｂの位置情報である「位置情報Ｂ」と、撮影画像における領域Ｃの位置情報である「位置情報Ｃ」と、撮影画像における領域Ｄの位置情報である「位置情報Ｄ」とをそれぞれ分割結果記憶部１６ｂに格納する。
【００３３】
なお、分割部１７ｂによる分割処理の粒度は、受領者の設定により任意に変更可能である。例えば、入力部１５が有する分割設定ボタンにより分割粒度が粗く設定された場合、分割部１７ｂは、図５の（Ｃ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」と「本文２」と「発送者情報」との領域に対応する「領域Ｂ」とに撮影画像を分割する。
【００３４】
図４に戻って、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を画像記憶部１６ａから読み出し、読み出した撮影画像を表示部１２に表示させるように制御する。図６は、表示制御部により表示される撮影画像の一例を説明するための図である。例えば、表示制御部１７ｃは、図６に示すように、図５の（Ａ）を用いて説明した文書から生成された撮影画像を、表示部１２の中心に表示させる。
【００３５】
かかる表示制御部１７ｃの制御により撮影画像が表示された状態で、受領者は、撮影画像にて自身が拡大表示したい領域に向けてリモコン２０から可視光を照射する。そして、表示部１２の光センサは、リモコンから照射された可視光を検知し、検知した可視光の表示部１２における位置を特定する。図７は、受領者から照射される可視光の一例を説明するための図である。
【００３６】
例えば、図７に示すように、受領者は、表示部１２に表示された撮影画像の中で本文１に向けてリモコン２０から可視光を照射させる。そして、表示部１２の光センサは、リモコン２０から照射された可視光を検知し、検知した可視光の表示部１２における位置を特定する。
【００３７】
図４に戻って、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。具体的には、特定部１７ｄは、光センサが特定した表示部１２における可視光の位置と、撮影画像の表示部１２における表示位置とから、可視光が照射された位置が撮影画像においてどの位置に対応するかを特定する。そして、特定部１７ｄは、分割結果記憶部１６ｂに格納された各領域の位置情報を参照して、可視光が照射された位置に対応する領域を特定する。図８は、特定部を説明するための図である。例えば、特定部１７ｄは、図８に示すように、表示部１２の光センサが特定した可視光の表示部１２における位置が「位置情報Ｂ」内に対応する位置にあると判定して、可視光の照射位置が分割部１７ｂにより撮影画像から分割された「領域Ｂ」に対応すると特定する。
【００３８】
図４に戻って、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し、生成した拡大画像を画像記憶部１６ａに格納する。そして、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を画像記憶部１６ａから読み出し、読み出した拡大画像を表示部１２に表示するように制御する。図９は、表示制御部により表示される拡大画像の一例を説明するための図である。
【００３９】
例えば、拡大画像生成部１７ｅは、特定部１７ｄが特定した領域Ｂを拡大した拡大画像を生成し、表示制御部１７ｃは、図９に示すように、領域Ｂの拡大画像を表示部１２に表示させる。これにより、表示部１２は、図９に示すように、文書の本文１を拡大表示する。
【００４０】
ここで、表示制御部１７ｃは、撮影画像が表示部１２にて表示された状態で、当該撮影画像の前面に拡大画像を表示する。例えば、表示制御部１７ｃは、図９に示すように、本文１の拡大画像が文書全体を撮影した撮影画像の前面に表示されるように制御する。
【００４１】
かかる表示制御部１７ｃの制御により撮影画像の前面に拡大画像が表示された状態で、受領者は、リモコン２０が有する各種ボタンを操作することで、拡大画像に対する画像処理指示を送信することができる。
【００４２】
例えば、受領者は、拡大画像をさらに拡大したい場合、拡大ボタン２３を押下する。また、受領者は、拡大画像を縮小したい場合、縮小ボタン２４を押下する。また、受領者は、拡大画像を消去して撮影画像を再度参照したい場合や、拡大画像を消去して撮影画像における他の領域を拡大参照したい場合、消去ボタン２５を押下する。
【００４３】
なお、受領者が拡大ボタン２３を押下することで、リモコン２０は、表示されている拡大画像を所定の倍率で拡大する指示を送信する。例えば、受領者は、表示される拡大画像が所望の大きさまで拡大されるまで、拡大ボタン２３を連続して押下する。また、受領者が縮小ボタン２４を押下することで、リモコン２０は、表示されている拡大画像を所定の倍率で縮小する指示を送信する。例えば、受領者は、表示される拡大画像が所望の大きさまで縮小されるまで、縮小ボタン２４を連続して押下する。
【００４４】
かかる操作によりリモコン２０から送信された画像処理指示の信号は、図３および４に示す信号受信部１３により受信され、信号受信部１３は、受信した画像処理指示の信号を、図４に示す指示判定部１７ｆに転送する。
【００４５】
指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の信号に含まれる指示内容を判定し、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃに転送する。図１０は、画像処理指示による拡大画像生成部および表示制御部の処理を説明するための図である。
【００４６】
例えば、判定結果が拡大画像の拡大処理であった場合、指示判定部１７ｆは、拡大率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、生成した拡大画像を新規に画像記憶部１６ａに格納する。そして、表示制御部１７ｃは、画像記憶部１６ａに新規に格納された拡大画像を読み出して表示部１２に表示させる。例えば、表示制御部１７ｃは、図１０の（Ａ）に示すように、本文１がさらに拡大された拡大画像を表示部１２に表示させる。
【００４７】
また、判定結果が拡大画像の縮小処理であった場合、指示判定部１７ｆは、縮小率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、生成した縮小画像を新規に画像記憶部１６ａに格納する。そして、表示制御部１７ｃは、画像記憶部１６ａに新規に格納された縮小画像を読み出して表示部１２に表示させる。例えば、表示制御部１７ｃは、図１０の（Ｂ）に示すように、本文１が縮小された縮小画像を表示部１２に表示させる。
【００４８】
また、判定結果が拡大画像の消去処理であった場合、指示判定部１７ｆは、拡大画像の非表示指示を表示制御部１７ｃに転送し、表示制御部１７ｃは、表示されている拡大画像を非表示とする。そして、受領者は、リモコン２０を操作することで、例えば、撮影画像の写真などを拡大表示させる。
【００４９】
上述した文書処理は、入力部１５が有する処理終了ボタンが受領者により押下されることで終了する。なお、本実施例は、例えば、表示される拡大画像に対して受領者がリモコン２０から可視光を照射した状態で可視光スイッチ２１を押下しながら可視光の照射位置を移動した場合、表示制御部１７ｃが拡大画像の表示位置を移動するように制御することも可能である。
【００５０】
続いて、図１１を用いて実施例１に係る文書処理装置１０の処理の手順について説明する。図１１は、実施例１に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１１では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。
【００５１】
図１１に示すように、本実施例１における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ１０１）。スキャン開始要求を受け付けない場合（ステップＳ１０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ１０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ１０２）。
【００５２】
そして、分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を複数の領域に分割する（ステップＳ１０３）。具体的には、分割部１７ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。
【００５３】
その後、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ１０４）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ１０５）。
【００５４】
ここで、可視光を検知した場合（ステップＳ１０５肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する（ステップＳ１０６）。
【００５５】
続いて、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し（ステップＳ１０７）、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ１０８）。具体的には、表示制御部１７ｃは、撮影画像の前面に拡大画像を表示させる。
【００５６】
ステップＳ１０８の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ１０５否定）、信号受信部１３は、リモコン２０から画像処理指示を受信したか否かを判定する（ステップＳ１０９）。ここで、リモコン２０から画像処理指示を受信した場合（ステップＳ１０９肯定）、信号受信部１３は、受信した画像処理指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の内容を判定する（ステップＳ１１０）。すなわち、指示判定部１７ｆは、画像処理指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるかを判定する。
【００５７】
そして、指示判定部１７ｆは、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃに転送し、拡大画像生成部１７ｅおよび表示制御部１７ｃは、判定結果に沿った処理を実行する（ステップＳ１１１）。例えば、判定結果が拡大画像の拡大処理であった場合、指示判定部１７ｆは、拡大率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像を表示部１２に表示させる。また、判定結果が拡大画像の縮小処理であった場合、指示判定部１７ｆは、縮小率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、表示制御部１７ｃは、縮小画像を表示部１２に表示させる。また、判定結果が拡大画像の消去処理であった場合、指示判定部１７ｆは、拡大画像の非表示指示を表示制御部１７ｃに転送し、表示制御部１７ｃは、表示されている拡大画像を非表示とする。
【００５８】
ステップＳ１１１の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ１０９否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ１１２）。
【００５９】
ここで、処理終了要求を受け付けなかった場合（ステップＳ１１２否定）、ステップＳ１０５に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。
【００６０】
一方、処理終了要求を受け付けた場合（ステップＳ１１２肯定）、文書処理装置１０は、処理を終了する。
【００６１】
上述してきたように、実施例１では、スキャナー１１は、受領者が配置した紙媒体の文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する。そして、分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を複数の領域に分割し、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を表示部１２に表示させるように制御する。そして、表示部１２の光センサは、リモコン２０から照射された可視光の表示部１２における位置を特定し、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。そして、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する。
【００６２】
したがって、実施例１によれば、受領者は、リモコン２０から可視光を照射するといった簡単な操作のみで、自身が見えにくい、または、読みにくい箇所を拡大した拡大画像を撮影画像とともに参照することができる。その結果、受領者は、撮影画像を参照しながら拡大画像を参照することができ、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる。
【００６３】
また、実施例１では、表示制御部１７ｃは、撮影画像の前面に拡大画像を表示させるので、受領者は、所望の領域を拡大した拡大画像を確実に参照することができる。
【００６４】
また、実施例１では、リモコン２０は、表示部１２にて表示される拡大画像に関する処理を指示するための画像処理指示を送信し、信号受信部１３は、リモコン２０から受信した画像処理指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるかを判定する。
【００６５】
そして、指示判定部１７ｆは、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃに転送し、拡大画像生成部１７ｅおよび表示制御部１７ｃは、判定結果に沿った処理を実行する。すなわち、判定結果が拡大画像の拡大処理であった場合、指示判定部１７ｆは、拡大率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像を表示部１２に表示させる。また、判定結果が拡大画像の縮小処理であった場合、指示判定部１７ｆは、縮小率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、表示制御部１７ｃは、縮小画像を表示部１２に表示させる。また、判定結果が拡大画像の消去処理であった場合、指示判定部１７ｆは、拡大画像の非表示指示を表示制御部１７ｃに転送し、表示制御部１７ｃは、表示されている拡大画像を非表示とする。
【００６６】
したがって、実施例１によれば、受領者は、リモコン２０のボタンを操作するといった簡単な操作のみで、自身が見えにくい、または、読みにくい箇所を自身が認識しやすい拡大率に変更することができ、また、別の箇所を拡大したい場合に現時点で表示されている拡大画像を消去することができる。その結果、受領者は、見えにくい、または、読みにくい文書の内容をさらに容易に把握することが可能となる。
【実施例２】
【００６７】
上述した実施例１では、受領者が指定した領域の拡大画像が表示される場合について説明した。実施例２では、さらに受領者が指定した領域に含まれる文字列が音声にて出力される場合について、図１２〜図１６を用いて説明する。なお、図１２は、実施例２に係るリモコンの外観例を説明するための図であり、図１３は、実施例２に係る文書処理装置の構成を説明するための図であり、図１４は、音声出力制御部による判定処理を説明するための図である。また、図１５は、音声出力制御部による音声出力処理を説明するための図であり、図１６は、音声出力制御部の音声出力処理にともなう表示制御部の表示処理を説明するための図である。
【００６８】
実施例２に係る文書処理システムは、図１を用いて説明した文書処理システムと同様に、文書処理装置１０とリモコン２０とを含む。しかし、実施例２に係るリモコン２０は、図２を用いて説明した実施例１に係るリモコン２０と比較して、図１２に示すように、音量を調整するために用いられる音量増大ボタン２６（図中の「大」）および音量減少ボタン２７（図中の「小」）と、再生速度を調整するために用いられる再生速度増大ボタン２８（図中の「早」）および再生速度減少ボタン２９（図中の「遅」）をさらに有する点が異なる。
【００６９】
また、実施例２に係る文書処理装置１０は、図３を用いて説明した実施例１に係る文書処理装置１０と同様の外観を有する。しかし、実施例２に係る文書処理装置１０は、図４を用いて説明した実施例１に係る文書処理装置１０と比較して、図１３に示すように、制御部１７が文字列認識部１７ｇ、音声合成部１７ｈおよび音声出力制御部１７ｉをさらに有し、記憶部１６が音声記憶部１６ｃをさらに有する点が異なる。
【００７０】
以下、これらを中心に、実施例２に係る文書処理装置１０およびリモコン２０について説明する。
【００７１】
文字列認識部１７ｇは、画像記憶部１６ａから撮影画像生成部１７ａが生成した撮影画像を読み出して、読み出した撮影画像に含まれる文字列を認識する。例えば、文字列認識部１７ｇは、図５の（Ａ）を用いて説明した文書から生成された撮影画像に含まれる文字列を認識する。これにより、文字列認識部１７ｇは、例えば、「本文１」に記載されている文字列である「お元気ですか？・・・・・・・・・・・・を送ります。」を認識する。また、文字列認識部１７ｇは、認識した文字列の撮影画像における位置情報を取得する。なお、文字列認識部１７ｇは、写真に含まれる文字列を認識することも可能である。
【００７２】
図１３に示す音声合成部１７ｈは、文字列認識部１７ｇにより認識された文字列の音声データを合成する。例えば、音声合成部１７ｈは、「本文１」に記載されている「お元気ですか？・・・・・・・・・・・・を送ります。」の音声データを合成する。そして、音声合成部１７ｈは、合成した音声データを、当該音声データを合成するために用いた文字列の撮影画像における位置情報に対応付けて音声記憶部１６ｃに格納する。
【００７３】
なお、分割部１７ｂは、実施例１と同様に、撮影画像を複数の領域に分割する。例えば、分割部１７ｂは、図５の（Ｂ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」の領域に対応する「領域Ｂ」と、「本文２」の領域に対応する「領域Ｃ」と、「発送者情報」の領域に対応する「領域Ｄ」とに撮影画像を分割する。
【００７４】
また、表示制御部１７ｃは、実施例１と同様に、撮影画像を表示部１２に表示させる。そして、特定部１７ｄは、実施例１と同様に、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。
【００７５】
そして、拡大画像生成部１７ｅは、実施例１と同様に、特定部１７ｄにより特定された領域を拡大した拡大画像を生成する。さらに、表示制御部１７ｃは、実施例１と同様に、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する。
【００７６】
ここで、実施例２において、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれるか否かを判定する。具体的には、音声出力制御部１７ｉは、音声記憶部１６ｃを参照して、特定部１７ｄにより特定された領域内の位置情報に対応付けられている音声データがあるか否かを判定する。
【００７７】
例えば、音声出力制御部１７ｉは、図１４に示すように、特定部１７ｄにより特定された領域Ｂ内の位置情報に対応付けられている音声データ「お元気ですか？・・・・・・・・・・・・を送ります。」が音声記憶部１６ｃに記憶されていることから、領域Ｂに文字列が含まれていると判定する。
【００７８】
そして、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれる場合、当該文字列から音声合成部１７ｈにより合成された音声データを音声記憶部１６ｃから読み出してスピーカ１４から出力するように制御する。
【００７９】
例えば、音声出力制御部１７ｉは、図１５に示すように、表示部１２に本文１の拡大画像が表示されている状態で、スピーカ１４から「音声データ：お元気ですか？・・・・・・・・・・・・を送ります。」を出力させる。
【００８０】
なお、本実施例は、音声出力制御部１７ｉの制御により音声データが出力されていることに同期して、表示制御部１７ｃにより以下に説明するような表示処理が行なわれる場合であってもよい。例えば、表示制御部１７ｃは、図１６の（Ａ）に示すように、音声出力用ソフトウェアの動作画面を表示させる。これにより、受領者は、自身が拡大表示させた領域に含まれる文字列の音声データが再生されていることを認識することができる。あるいは、表示制御部１７ｃは、図１６の（Ｂ）に示すように、現に再生されている音声データに該当する文字列の箇所を、拡大画像において表示させてもよい。例えば、図１６の（Ｂ）に示す一例では、本文１の「お元気ですか」が現在再生されていることが示されている。これにより、受領者は、自身が拡大表示させた領域に含まれる文字列のうち、どの部分が再生されているのかを認識することができる。
【００８１】
かかる音声出力制御部１７ｉの制御により音声データが出力された場合、受領者は、リモコン２０が有する音量増大ボタン２６、音量減少ボタン２７、再生速度増大ボタン２８および再生速度減少ボタン２９を操作することで、スピーカ１４から出力される音声データに関する処理を指示するための音声処理指示を送信することができる。
【００８２】
例えば、受領者は、スピーカ１４から出力される音声データの音量を調整したい場合、音量増大ボタン２６または音量減少ボタン２７を押下する。また、受領者は、スピーカ１４から出力される音声データの再生速度を調整したい場合、再生速度増大ボタン２８または再生速度減少ボタン２９を押下する。
【００８３】
かかる操作によりリモコン２０から送信された音声処理指示の信号は、信号受信部１３により受信され、信号受信部１３は、受信した音声処理指示の信号を指示判定部１７ｆに転送する。そして、指示判定部１７ｆは、信号受信部１３から転送された音声処理指示の信号に含まれる指示内容を判定し、判定結果を音声出力制御部１７ｉに転送する。そして、音声出力制御部１７ｉは、指示判定部１７ｆの判定結果に基づいて、音声データの音量や音声データの再生速度を制御する。
【００８４】
例えば、判定結果が音量増大であった場合、音声出力制御部１７ｉは、スピーカ１４からの出力音量を増大させ、判定結果が音量減少であった場合、音声出力制御部１７ｉは、スピーカ１４からの出力音量を減少させる。また、判定結果が再生速度増大であった場合、音声出力制御部１７ｉは、スピーカ１４からの再生速度を増大させ、判定結果が再生速度減少であった場合、音声出力制御部１７ｉは、スピーカ１４からの再生速度を減少させる。
【００８５】
なお、図１６の（Ａ）に示すような音声出力用ソフトウェアの動作画面が表示部１２にて表示されている場合、表示部１２の光センサ機能をタッチパネル機能として用いることで、受領者は、音声出力用ソフトウェアの動作画面における「再生」、「停止」「早送り」および「巻き戻し」ボタンを押下することで、所望の音声出力指示を行なうことも可能である。
【００８６】
また、実施例１にて説明した画像処理指示による処理は、実施例２においても実行可能である。また、上述した文書処理は、実施例１と同様に、入力部１５が有する処理終了ボタンが受領者により押下されることで終了する。
【００８７】
続いて、図１７を用いて実施例２に係る文書処理装置１０の処理の手順について説明する。図１７は、実施例２に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１７では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。
【００８８】
図１７に示すように、本実施例２における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ２０１）。スキャン開始要求を受け付けない場合（ステップＳ２０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ２０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ２０２）。
【００８９】
そして、分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を複数の領域に分割し（ステップＳ２０３）、文字列認識部１７ｇは、撮影画像に含まれる文字列を認識し（ステップＳ２０４）、音声合成部１７ｈは、文字列認識部１７ｇにより認識された文字列の音声データを合成する（ステップＳ２０５）。なお、音声合成部１７ｈは、合成した音声データを、当該音声データを合成するために用いた文字列の撮影画像における位置情報に対応付けて音声記憶部１６ｃに格納する。
【００９０】
その後、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ２０６）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ２０７）。
【００９１】
ここで、可視光を検知した場合（ステップＳ２０７肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する（ステップＳ２０８）。
【００９２】
続いて、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し（ステップＳ２０９）、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ２１０）。
【００９３】
そして、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれるか否かを判定する（ステップＳ２１１）。具体的には、音声出力制御部１７ｉは、音声記憶部１６ｃを参照して、特定部１７ｄにより特定された領域に含まれる位置情報に対応付けられている音声データがあるか否かを判定する。
【００９４】
ここで、特定部１７ｄにより特定された領域にて文字列が含まれる場合（ステップＳ２１１肯定）、音声出力制御部１７ｉは、当該領域に含まれている文字列から音声合成部１７ｈにより合成された音声データをスピーカ１４からから出力するように制御する（ステップＳ２１２）。
【００９５】
ステップＳ２１１の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ２０７否定）、または、特定部１７ｄにより特定された領域にて文字列が含まれていない場合（ステップＳ２１１否定）、信号受信部１３は、リモコン２０から画像処理指示または音声処理指示を受信したか否かを判定する（ステップＳ２１３）。ここで、リモコン２０から画像処理指示または音声処理指示を受信した場合（ステップＳ２１３肯定）、信号受信部１３は、受信した指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された指示の内容を判定する（ステップＳ２１４）。すなわち、指示判定部１７ｆは、指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるか、音声データの音量調整処理であるか、音声データの再生速度調整処理であるかを判定する。
【００９６】
そして、指示判定部１７ｆは、判定結果の内容に応じて、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃか、音声出力制御部１７ｉに転送し、判定結果を転送された拡大画像生成部１７ｅおよび表示制御部１７ｃ、または、音声出力制御部１７ｉは、判定結果に沿った処理を実行する（ステップＳ２１５）。
【００９７】
ステップＳ２１５の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ２１３否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ２１６）。
【００９８】
ここで、処理終了要求を受け付けなかった場合（ステップＳ２１６否定）、ステップＳ２０７に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。
【００９９】
一方、処理終了要求を受け付けた場合（ステップＳ２１６肯定）、文書処理装置１０は、処理を終了する。
【０１００】
上述してきたように、実施例２では、文字列認識部１７ｇは、撮影画像に含まれる文字列を認識し、音声合成部１７ｈは、文字列認識部１７ｇにより認識された文字列の音声データを合成する。そして、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれる場合、当該文字列から音声合成部１７ｈにより合成された音声データをスピーカ１４から出力するように制御する。
【０１０１】
したがって、実施例２によれば、受領者は、自身が見えにくい、または、読みにくい箇所を拡大して参照できるとともに、当該箇所に含まれる文字を音声にて認識することができる。その結果、受領者は、見えにくい、または、読みにくい文書の内容を音声により容易に把握することが可能となる。
【０１０２】
また、実施例２では、リモコン２０は、スピーカ１４から出力される音声の音量および再生速度を調整するための音声処理指示を送信し、信号受信部１３は、リモコン２０から受信した音声処理指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の内容を判定する。そして、指示判定部１７ｆは、判定結果を音声出力制御部１７ｉに転送し、音声出力制御部１７ｉは、判定結果に沿った音量または再生速度の調整制御を行なう。
【０１０３】
したがって、実施例２によれば、受領者は、リモコン２０のボタンを操作するといった簡単な操作のみで、スピーカ１４から出力される音声の音量および再生速度を自身が認識しやすい音量または再生速度に変更することができる。その結果、受領者は、自信が見えにくい、または、読みにくい箇所を音声によりさらに容易に把握することが可能となる。
【０１０４】
なお、上記した実施例１および２では、拡大画像の表示に際してリモコン２０から可視光が照射される場合について説明したが、本発明は、拡大画像の表示に際してリモコン２０から赤外線などが照射される場合であってもよい。
【０１０５】
また、本実施例において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。
【０１０６】
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、ＣＰＵおよび当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
【０１０７】
なお、本実施例で説明した文書処理方法は、あらかじめ用意されたプログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。このプログラムは、インターネットなどのネットワークを介して配布することができる。また、このプログラムは、ハードディスク、フレキシブルディスク（ＦＤ）、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。
【産業上の利用可能性】
【０１０８】
以上のように、本発明に係る文書処理方法および文書処理システムは、紙媒体の文書を画像処理する場合に有用であり、特に、見えにくい、または、読みにくい文書の内容を容易に把握することに適する。
【符号の説明】
【０１０９】
１０ 文書処理装置
１１ スキャナー
１２ 表示部（光センサ内蔵ディスプレイ）
１３ 信号受信部
１４ スピーカ
１５ 入力部
１６ 記憶部
１６ａ 画像記憶部
１６ｂ 分割結果記憶部
１７ 制御部
１７ａ 撮影画像生成部
１７ｂ 分割部
１７ｃ 表示制御部
１７ｄ 特定部
１７ｅ 拡大画像生成部
１７ｆ 指示判定部
２０ リモコン
２１ 可視光スイッチ
２２ 照射口
２３ 拡大ボタン
２４ 縮小ボタン
２５ 消去ボタン
【技術分野】
【０００１】
この発明は、文書処理方法および文書処理システムに関する。
【背景技術】
【０００２】
従来、加齢による視力低下などの要因により文書を見たり読んだりすることが困難な人を支援するための装置の開発が進められている。
【０００３】
かかる装置としては、例えば、オートフォーカス機能により読書対象となる文書を高倍率で拡大する装置が知られている（例えば、非特許文献１参照）。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】“拡大読書器”、［online］、［平成２２年３月２３日検索］、インターネット＜http://www.kougakudo.jp/newpage-6.html＞
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、読者は、例えば、葉書などを読む場合、文書全体を見たり、文書の一部を読んだり、文書にある写真を見たりといったように、文書全体と文書のある部分とを交互に見たり読んだりすることが一般的である。しかし、上記した従来の技術は、読者が指定した特定の範囲を拡大するのみである。したがって、読者は、読書対象となる文書において、見たい範囲や読みたい範囲が拡大されるように上記した装置を操作する必要があった。
【０００６】
すなわち、上記した従来の技術は、見えにくい、または、読みにくい文書の内容を容易に把握することが困難であるといった課題があった。
【０００７】
そこで、この発明は、上述した従来技術の課題を解決するためになされたものであり、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる文書処理方法および文書処理システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決し、目的を達成するために、この方法は、利用者が配置した文書を撮影した画像を生成する撮影ステップと、前記撮影ステップにより生成された前記画像を複数の領域に分割する分割ステップと、前記撮影ステップにより生成された前記画像を所定の表示部に表示させるように制御する表示制御ステップと、前記表示制御ステップの制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知ステップと、前記検知ステップが検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割ステップにより分割された前記複数の領域から特定する特定ステップと、前記特定ステップにより特定された領域を拡大した拡大画像を生成する拡大画像生成ステップと、前記拡大画像生成ステップにより生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御ステップと、を含んだことを要件とする。
【０００９】
また、このシステムは、文書に対して処理を行なう文書処理装置と、光を送信する光送信装置とを含む文書処理システムであって、前記文書処理装置は、利用者が配置した文書を撮影した画像を生成する撮影手段と、前記撮影手段により生成された前記画像を複数の領域に分割する分割手段と、前記撮影手段により生成された前記画像を所定の表示部に表示させるように制御する表示制御手段と、前記表示制御手段の制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して前記光送信装置から送信された光を検知する検知手段と、前記検知手段が検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割手段により分割された前記複数の領域から特定する特定手段と、前記特定手段により特定された領域を拡大した拡大画像を生成する拡大画像生成手段と、前記拡大画像生成手段により生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御手段と、を備えたことを要件とする。
【発明の効果】
【００１０】
開示の方法およびシステムによれば、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる。
【図面の簡単な説明】
【００１１】
【図１】図１は、実施例１に係る文書処理システムの構成を説明するための図である。
【図２】図２は、実施例１に係るリモコンの外観例を説明するための図である。
【図３】図３は、実施例１に係る文書処理装置の外観例を説明するための図である。
【図４】図４は、実施例１に係る文書処理装置の構成を説明するための図である。
【図５】図５は、分割部を説明するための図である。
【図６】図６は、表示制御部により表示される撮影画像の一例を説明するための図である。
【図７】図７は、受領者から照射される可視光の一例を説明するための図である。
【図８】図８は、特定部を説明するための図である。
【図９】図９は、表示制御部により表示される拡大画像の一例を説明するための図である。
【図１０】図１０は、画像処理指示による拡大画像生成部および表示制御部の処理を説明するための図である。
【図１１】図１１は、実施例１に係る文書処理装置の処理を説明するためのフローチャートである。
【図１２】図１２は、実施例２に係るリモコンの外観例を説明するための図である。
【図１３】図１３は、実施例２に係る文書処理装置の構成を説明するための図である。
【図１４】図１４は、音声出力制御部による判定処理を説明するための図である。
【図１５】図１５は、音声出力制御部による音声出力処理を説明するための図である。
【図１６】図１６は、音声出力制御部の音声出力処理にともなう表示制御部の表示処理を説明するための図である。
【図１７】図１７は、実施例２に係る文書処理装置の処理を説明するためのフローチャートである。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照して、この発明に係る文書処理方法および文書処理システムの実施例を詳細に説明する。なお、以下では、本発明に係る文書処理方法を実行する文書処理システムを実施例として説明する。
【実施例１】
【００１３】
まず、図１を用いて、実施例１に係る文書処理システムの構成について説明する。図１は、実施例１に係る文書処理システムの構成を説明するための図である。
【００１４】
実施例１に係る文書処理システムは、図１に示すように、発送者が発送した紙媒体の文書（例えば、葉書など）に対して処理を行なう文書処理装置１０と、可視光を送信するリモコン２０とを含む。ここで、図１に示す文書処理装置１０およびリモコン２０は、紙媒体の文書を受領した受領者が操作する装置である。
【００１５】
図２は、実施例１に係るリモコンの外観例を説明するための図である。図２に示すように、リモコン２０は、照射口２２から可視光を照射するための可視光スイッチ２１を有する。リモコン２０は、可視光スイッチ２１が受領者により押下された場合、照射口２２から可視光を照射させる。また、リモコン２０は、文書処理装置１０にて表示される画像に関する処理を指示するための各種ボタンを有する。具体的には、リモコン２０は、拡大ボタン２３（図中に示す「拡大」）、縮小ボタン２４（図中に示す「縮小」）および消去ボタン２５（図中に示す「消去」）を有する。なお、拡大ボタン２３、縮小ボタン２４および消去ボタン２５については、後に詳述する。
【００１６】
図３は、実施例１に係る文書処理装置の外観例を説明するための図である。図３に示すように、文書処理装置１０は、スキャナー１１と、表示部１２と、信号受信部１３と、スピーカ１４と、入力部１５とを有する。
【００１７】
スキャナー１１は、受領者が配置した紙媒体の文書を撮影した撮影画像を生成するために用いられ、文書を読込んで、読込んだ文書をデジタルデータに変換する。
【００１８】
表示部１２は、光センサが内蔵された光センサ内臓ディスプレイである。具体的には、表示部１２は、ディスプレイ機能により、スキャナー１１が変換したデジタルデータから生成された撮影画像を表示する。また、表示部１２は、内蔵された光センサにより、リモコン２０から照射された可視光を検知する。
【００１９】
信号受信部１３は、拡大ボタン２３、縮小ボタン２４および消去ボタン２５から送信された各種画像処理指示を受信する。
【００２０】
スピーカ１４は、音声出力に用いられ、例えば、図３に示すように、文書処理装置１０の前面において２箇所設置される。
【００２１】
入力部１５は、受領者が文書処理装置１０の電源ＯＮ／ＯＦＦや、スキャナー１１によるスキャン開始、文書処理装置１０による処理終了などを行なうための各種ボタン群を有する。
【００２２】
ここで、文書の受領者は、例えば、老齢であるために文書を見たり読んだりすることが困難であっても、かかる外観を有する文書処理装置１０およびリモコン２０を用いることで、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる。以下、文書処理装置１０が有する機能について図４などを用いて詳細に説明する。
【００２３】
図４は、実施例１に係る文書処理装置の構成を説明するための図である。図４に示すように、実施例１に係る文書処理装置１０は、上述したスキャナー１１、表示部１２、信号受信部１３、スピーカ１４および入力部１５とともに、記憶部１６と制御部１７とを有する。
【００２４】
記憶部１６は、制御部１７による各種処理結果を記憶し、図４に示すように、特に本実施例に関連するものとして、画像記憶部１６ａおよび分割結果記憶部１６ｂを有する。
【００２５】
画像記憶部１６ａは、後述する撮影画像生成部１７ａおよび後述する拡大画像生成部１７ｅによる処理結果を記憶し、分割結果記憶部１６ｂは、後述する分割部１７ｂによる処理結果を記憶するが、これらについては、後に詳述する。
【００２６】
制御部１７は、スキャナー１１、表示部１２、信号受信部１３から転送された各種情報に基づいて各種処理を実行し、特に本実施例に関連するものとして、撮影画像生成部１７ａと、分割部１７ｂと、表示制御部１７ｃと、特定部１７ｄと、拡大画像生成部１７ｅと、指示判定部１７ｆとを有する。
【００２７】
撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから文書を撮影した画像（撮影画像）を生成し、生成した撮影画像を画像記憶部１６ａに格納する。
【００２８】
分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を画像記憶部１６ａから読み出し、読み出した撮影画像を複数の領域に分割する。ここで、葉書などの文書は、一般的に、写真や、本文、発送者の情報（住所、氏名、電話番号など）などのように、内容に応じて複数の領域に分けることができる。また、文書は、文書の背景色により占められる領域と、当該背景色と異なる色調により占められる領域とに分割することができる。すなわち、文書の背景色により囲まれる領域を特定することで、文書は、当該文書に記載されている内容に応じて、複数の領域に分割することができる。
【００２９】
そこで、分割部１７ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。図５は、分割部を説明するための図である。
【００３０】
例えば、撮影画像の生成元である文書が、図５の（Ａ）に示すように、「写真」の領域と、「本文１」の領域と、「本文２」の領域と、「発送者情報」の領域との４つの領域により構成されているとする。
【００３１】
かかる場合、分割部１７ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、図５の（Ｂ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」の領域に対応する「領域Ｂ」と、「本文２」の領域に対応する「領域Ｃ」と、「発送者情報」の領域に対応する「領域Ｄ」とに撮影画像を分割する。
【００３２】
そして、分割部１７ｂは、図５の（Ｂ）に示すように、撮影画像における領域Ａの位置情報を「位置情報Ａ」として分割結果記憶部１６ｂに格納する。同様に、分割部１７ｂは、図５の（Ｂ）に示すように、撮影画像における領域Ｂの位置情報である「位置情報Ｂ」と、撮影画像における領域Ｃの位置情報である「位置情報Ｃ」と、撮影画像における領域Ｄの位置情報である「位置情報Ｄ」とをそれぞれ分割結果記憶部１６ｂに格納する。
【００３３】
なお、分割部１７ｂによる分割処理の粒度は、受領者の設定により任意に変更可能である。例えば、入力部１５が有する分割設定ボタンにより分割粒度が粗く設定された場合、分割部１７ｂは、図５の（Ｃ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」と「本文２」と「発送者情報」との領域に対応する「領域Ｂ」とに撮影画像を分割する。
【００３４】
図４に戻って、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を画像記憶部１６ａから読み出し、読み出した撮影画像を表示部１２に表示させるように制御する。図６は、表示制御部により表示される撮影画像の一例を説明するための図である。例えば、表示制御部１７ｃは、図６に示すように、図５の（Ａ）を用いて説明した文書から生成された撮影画像を、表示部１２の中心に表示させる。
【００３５】
かかる表示制御部１７ｃの制御により撮影画像が表示された状態で、受領者は、撮影画像にて自身が拡大表示したい領域に向けてリモコン２０から可視光を照射する。そして、表示部１２の光センサは、リモコンから照射された可視光を検知し、検知した可視光の表示部１２における位置を特定する。図７は、受領者から照射される可視光の一例を説明するための図である。
【００３６】
例えば、図７に示すように、受領者は、表示部１２に表示された撮影画像の中で本文１に向けてリモコン２０から可視光を照射させる。そして、表示部１２の光センサは、リモコン２０から照射された可視光を検知し、検知した可視光の表示部１２における位置を特定する。
【００３７】
図４に戻って、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。具体的には、特定部１７ｄは、光センサが特定した表示部１２における可視光の位置と、撮影画像の表示部１２における表示位置とから、可視光が照射された位置が撮影画像においてどの位置に対応するかを特定する。そして、特定部１７ｄは、分割結果記憶部１６ｂに格納された各領域の位置情報を参照して、可視光が照射された位置に対応する領域を特定する。図８は、特定部を説明するための図である。例えば、特定部１７ｄは、図８に示すように、表示部１２の光センサが特定した可視光の表示部１２における位置が「位置情報Ｂ」内に対応する位置にあると判定して、可視光の照射位置が分割部１７ｂにより撮影画像から分割された「領域Ｂ」に対応すると特定する。
【００３８】
図４に戻って、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し、生成した拡大画像を画像記憶部１６ａに格納する。そして、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を画像記憶部１６ａから読み出し、読み出した拡大画像を表示部１２に表示するように制御する。図９は、表示制御部により表示される拡大画像の一例を説明するための図である。
【００３９】
例えば、拡大画像生成部１７ｅは、特定部１７ｄが特定した領域Ｂを拡大した拡大画像を生成し、表示制御部１７ｃは、図９に示すように、領域Ｂの拡大画像を表示部１２に表示させる。これにより、表示部１２は、図９に示すように、文書の本文１を拡大表示する。
【００４０】
ここで、表示制御部１７ｃは、撮影画像が表示部１２にて表示された状態で、当該撮影画像の前面に拡大画像を表示する。例えば、表示制御部１７ｃは、図９に示すように、本文１の拡大画像が文書全体を撮影した撮影画像の前面に表示されるように制御する。
【００４１】
かかる表示制御部１７ｃの制御により撮影画像の前面に拡大画像が表示された状態で、受領者は、リモコン２０が有する各種ボタンを操作することで、拡大画像に対する画像処理指示を送信することができる。
【００４２】
例えば、受領者は、拡大画像をさらに拡大したい場合、拡大ボタン２３を押下する。また、受領者は、拡大画像を縮小したい場合、縮小ボタン２４を押下する。また、受領者は、拡大画像を消去して撮影画像を再度参照したい場合や、拡大画像を消去して撮影画像における他の領域を拡大参照したい場合、消去ボタン２５を押下する。
【００４３】
なお、受領者が拡大ボタン２３を押下することで、リモコン２０は、表示されている拡大画像を所定の倍率で拡大する指示を送信する。例えば、受領者は、表示される拡大画像が所望の大きさまで拡大されるまで、拡大ボタン２３を連続して押下する。また、受領者が縮小ボタン２４を押下することで、リモコン２０は、表示されている拡大画像を所定の倍率で縮小する指示を送信する。例えば、受領者は、表示される拡大画像が所望の大きさまで縮小されるまで、縮小ボタン２４を連続して押下する。
【００４４】
かかる操作によりリモコン２０から送信された画像処理指示の信号は、図３および４に示す信号受信部１３により受信され、信号受信部１３は、受信した画像処理指示の信号を、図４に示す指示判定部１７ｆに転送する。
【００４５】
指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の信号に含まれる指示内容を判定し、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃに転送する。図１０は、画像処理指示による拡大画像生成部および表示制御部の処理を説明するための図である。
【００４６】
例えば、判定結果が拡大画像の拡大処理であった場合、指示判定部１７ｆは、拡大率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、生成した拡大画像を新規に画像記憶部１６ａに格納する。そして、表示制御部１７ｃは、画像記憶部１６ａに新規に格納された拡大画像を読み出して表示部１２に表示させる。例えば、表示制御部１７ｃは、図１０の（Ａ）に示すように、本文１がさらに拡大された拡大画像を表示部１２に表示させる。
【００４７】
また、判定結果が拡大画像の縮小処理であった場合、指示判定部１７ｆは、縮小率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、生成した縮小画像を新規に画像記憶部１６ａに格納する。そして、表示制御部１７ｃは、画像記憶部１６ａに新規に格納された縮小画像を読み出して表示部１２に表示させる。例えば、表示制御部１７ｃは、図１０の（Ｂ）に示すように、本文１が縮小された縮小画像を表示部１２に表示させる。
【００４８】
また、判定結果が拡大画像の消去処理であった場合、指示判定部１７ｆは、拡大画像の非表示指示を表示制御部１７ｃに転送し、表示制御部１７ｃは、表示されている拡大画像を非表示とする。そして、受領者は、リモコン２０を操作することで、例えば、撮影画像の写真などを拡大表示させる。
【００４９】
上述した文書処理は、入力部１５が有する処理終了ボタンが受領者により押下されることで終了する。なお、本実施例は、例えば、表示される拡大画像に対して受領者がリモコン２０から可視光を照射した状態で可視光スイッチ２１を押下しながら可視光の照射位置を移動した場合、表示制御部１７ｃが拡大画像の表示位置を移動するように制御することも可能である。
【００５０】
続いて、図１１を用いて実施例１に係る文書処理装置１０の処理の手順について説明する。図１１は、実施例１に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１１では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。
【００５１】
図１１に示すように、本実施例１における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ１０１）。スキャン開始要求を受け付けない場合（ステップＳ１０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ１０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ１０２）。
【００５２】
そして、分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を複数の領域に分割する（ステップＳ１０３）。具体的には、分割部１７ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。
【００５３】
その後、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ１０４）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ１０５）。
【００５４】
ここで、可視光を検知した場合（ステップＳ１０５肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する（ステップＳ１０６）。
【００５５】
続いて、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し（ステップＳ１０７）、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ１０８）。具体的には、表示制御部１７ｃは、撮影画像の前面に拡大画像を表示させる。
【００５６】
ステップＳ１０８の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ１０５否定）、信号受信部１３は、リモコン２０から画像処理指示を受信したか否かを判定する（ステップＳ１０９）。ここで、リモコン２０から画像処理指示を受信した場合（ステップＳ１０９肯定）、信号受信部１３は、受信した画像処理指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の内容を判定する（ステップＳ１１０）。すなわち、指示判定部１７ｆは、画像処理指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるかを判定する。
【００５７】
そして、指示判定部１７ｆは、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃに転送し、拡大画像生成部１７ｅおよび表示制御部１７ｃは、判定結果に沿った処理を実行する（ステップＳ１１１）。例えば、判定結果が拡大画像の拡大処理であった場合、指示判定部１７ｆは、拡大率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像を表示部１２に表示させる。また、判定結果が拡大画像の縮小処理であった場合、指示判定部１７ｆは、縮小率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、表示制御部１７ｃは、縮小画像を表示部１２に表示させる。また、判定結果が拡大画像の消去処理であった場合、指示判定部１７ｆは、拡大画像の非表示指示を表示制御部１７ｃに転送し、表示制御部１７ｃは、表示されている拡大画像を非表示とする。
【００５８】
ステップＳ１１１の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ１０９否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ１１２）。
【００５９】
ここで、処理終了要求を受け付けなかった場合（ステップＳ１１２否定）、ステップＳ１０５に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。
【００６０】
一方、処理終了要求を受け付けた場合（ステップＳ１１２肯定）、文書処理装置１０は、処理を終了する。
【００６１】
上述してきたように、実施例１では、スキャナー１１は、受領者が配置した紙媒体の文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する。そして、分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を複数の領域に分割し、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を表示部１２に表示させるように制御する。そして、表示部１２の光センサは、リモコン２０から照射された可視光の表示部１２における位置を特定し、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。そして、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する。
【００６２】
したがって、実施例１によれば、受領者は、リモコン２０から可視光を照射するといった簡単な操作のみで、自身が見えにくい、または、読みにくい箇所を拡大した拡大画像を撮影画像とともに参照することができる。その結果、受領者は、撮影画像を参照しながら拡大画像を参照することができ、見えにくい、または、読みにくい文書の内容を容易に把握することが可能となる。
【００６３】
また、実施例１では、表示制御部１７ｃは、撮影画像の前面に拡大画像を表示させるので、受領者は、所望の領域を拡大した拡大画像を確実に参照することができる。
【００６４】
また、実施例１では、リモコン２０は、表示部１２にて表示される拡大画像に関する処理を指示するための画像処理指示を送信し、信号受信部１３は、リモコン２０から受信した画像処理指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるかを判定する。
【００６５】
そして、指示判定部１７ｆは、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃに転送し、拡大画像生成部１７ｅおよび表示制御部１７ｃは、判定結果に沿った処理を実行する。すなわち、判定結果が拡大画像の拡大処理であった場合、指示判定部１７ｆは、拡大率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、表示制御部１７ｃは、拡大画像を表示部１２に表示させる。また、判定結果が拡大画像の縮小処理であった場合、指示判定部１７ｆは、縮小率を拡大画像生成部１７ｅに転送し、拡大画像生成部１７ｅは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、表示制御部１７ｃは、縮小画像を表示部１２に表示させる。また、判定結果が拡大画像の消去処理であった場合、指示判定部１７ｆは、拡大画像の非表示指示を表示制御部１７ｃに転送し、表示制御部１７ｃは、表示されている拡大画像を非表示とする。
【００６６】
したがって、実施例１によれば、受領者は、リモコン２０のボタンを操作するといった簡単な操作のみで、自身が見えにくい、または、読みにくい箇所を自身が認識しやすい拡大率に変更することができ、また、別の箇所を拡大したい場合に現時点で表示されている拡大画像を消去することができる。その結果、受領者は、見えにくい、または、読みにくい文書の内容をさらに容易に把握することが可能となる。
【実施例２】
【００６７】
上述した実施例１では、受領者が指定した領域の拡大画像が表示される場合について説明した。実施例２では、さらに受領者が指定した領域に含まれる文字列が音声にて出力される場合について、図１２〜図１６を用いて説明する。なお、図１２は、実施例２に係るリモコンの外観例を説明するための図であり、図１３は、実施例２に係る文書処理装置の構成を説明するための図であり、図１４は、音声出力制御部による判定処理を説明するための図である。また、図１５は、音声出力制御部による音声出力処理を説明するための図であり、図１６は、音声出力制御部の音声出力処理にともなう表示制御部の表示処理を説明するための図である。
【００６８】
実施例２に係る文書処理システムは、図１を用いて説明した文書処理システムと同様に、文書処理装置１０とリモコン２０とを含む。しかし、実施例２に係るリモコン２０は、図２を用いて説明した実施例１に係るリモコン２０と比較して、図１２に示すように、音量を調整するために用いられる音量増大ボタン２６（図中の「大」）および音量減少ボタン２７（図中の「小」）と、再生速度を調整するために用いられる再生速度増大ボタン２８（図中の「早」）および再生速度減少ボタン２９（図中の「遅」）をさらに有する点が異なる。
【００６９】
また、実施例２に係る文書処理装置１０は、図３を用いて説明した実施例１に係る文書処理装置１０と同様の外観を有する。しかし、実施例２に係る文書処理装置１０は、図４を用いて説明した実施例１に係る文書処理装置１０と比較して、図１３に示すように、制御部１７が文字列認識部１７ｇ、音声合成部１７ｈおよび音声出力制御部１７ｉをさらに有し、記憶部１６が音声記憶部１６ｃをさらに有する点が異なる。
【００７０】
以下、これらを中心に、実施例２に係る文書処理装置１０およびリモコン２０について説明する。
【００７１】
文字列認識部１７ｇは、画像記憶部１６ａから撮影画像生成部１７ａが生成した撮影画像を読み出して、読み出した撮影画像に含まれる文字列を認識する。例えば、文字列認識部１７ｇは、図５の（Ａ）を用いて説明した文書から生成された撮影画像に含まれる文字列を認識する。これにより、文字列認識部１７ｇは、例えば、「本文１」に記載されている文字列である「お元気ですか？・・・・・・・・・・・・を送ります。」を認識する。また、文字列認識部１７ｇは、認識した文字列の撮影画像における位置情報を取得する。なお、文字列認識部１７ｇは、写真に含まれる文字列を認識することも可能である。
【００７２】
図１３に示す音声合成部１７ｈは、文字列認識部１７ｇにより認識された文字列の音声データを合成する。例えば、音声合成部１７ｈは、「本文１」に記載されている「お元気ですか？・・・・・・・・・・・・を送ります。」の音声データを合成する。そして、音声合成部１７ｈは、合成した音声データを、当該音声データを合成するために用いた文字列の撮影画像における位置情報に対応付けて音声記憶部１６ｃに格納する。
【００７３】
なお、分割部１７ｂは、実施例１と同様に、撮影画像を複数の領域に分割する。例えば、分割部１７ｂは、図５の（Ｂ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」の領域に対応する「領域Ｂ」と、「本文２」の領域に対応する「領域Ｃ」と、「発送者情報」の領域に対応する「領域Ｄ」とに撮影画像を分割する。
【００７４】
また、表示制御部１７ｃは、実施例１と同様に、撮影画像を表示部１２に表示させる。そして、特定部１７ｄは、実施例１と同様に、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する。
【００７５】
そして、拡大画像生成部１７ｅは、実施例１と同様に、特定部１７ｄにより特定された領域を拡大した拡大画像を生成する。さらに、表示制御部１７ｃは、実施例１と同様に、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する。
【００７６】
ここで、実施例２において、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれるか否かを判定する。具体的には、音声出力制御部１７ｉは、音声記憶部１６ｃを参照して、特定部１７ｄにより特定された領域内の位置情報に対応付けられている音声データがあるか否かを判定する。
【００７７】
例えば、音声出力制御部１７ｉは、図１４に示すように、特定部１７ｄにより特定された領域Ｂ内の位置情報に対応付けられている音声データ「お元気ですか？・・・・・・・・・・・・を送ります。」が音声記憶部１６ｃに記憶されていることから、領域Ｂに文字列が含まれていると判定する。
【００７８】
そして、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれる場合、当該文字列から音声合成部１７ｈにより合成された音声データを音声記憶部１６ｃから読み出してスピーカ１４から出力するように制御する。
【００７９】
例えば、音声出力制御部１７ｉは、図１５に示すように、表示部１２に本文１の拡大画像が表示されている状態で、スピーカ１４から「音声データ：お元気ですか？・・・・・・・・・・・・を送ります。」を出力させる。
【００８０】
なお、本実施例は、音声出力制御部１７ｉの制御により音声データが出力されていることに同期して、表示制御部１７ｃにより以下に説明するような表示処理が行なわれる場合であってもよい。例えば、表示制御部１７ｃは、図１６の（Ａ）に示すように、音声出力用ソフトウェアの動作画面を表示させる。これにより、受領者は、自身が拡大表示させた領域に含まれる文字列の音声データが再生されていることを認識することができる。あるいは、表示制御部１７ｃは、図１６の（Ｂ）に示すように、現に再生されている音声データに該当する文字列の箇所を、拡大画像において表示させてもよい。例えば、図１６の（Ｂ）に示す一例では、本文１の「お元気ですか」が現在再生されていることが示されている。これにより、受領者は、自身が拡大表示させた領域に含まれる文字列のうち、どの部分が再生されているのかを認識することができる。
【００８１】
かかる音声出力制御部１７ｉの制御により音声データが出力された場合、受領者は、リモコン２０が有する音量増大ボタン２６、音量減少ボタン２７、再生速度増大ボタン２８および再生速度減少ボタン２９を操作することで、スピーカ１４から出力される音声データに関する処理を指示するための音声処理指示を送信することができる。
【００８２】
例えば、受領者は、スピーカ１４から出力される音声データの音量を調整したい場合、音量増大ボタン２６または音量減少ボタン２７を押下する。また、受領者は、スピーカ１４から出力される音声データの再生速度を調整したい場合、再生速度増大ボタン２８または再生速度減少ボタン２９を押下する。
【００８３】
かかる操作によりリモコン２０から送信された音声処理指示の信号は、信号受信部１３により受信され、信号受信部１３は、受信した音声処理指示の信号を指示判定部１７ｆに転送する。そして、指示判定部１７ｆは、信号受信部１３から転送された音声処理指示の信号に含まれる指示内容を判定し、判定結果を音声出力制御部１７ｉに転送する。そして、音声出力制御部１７ｉは、指示判定部１７ｆの判定結果に基づいて、音声データの音量や音声データの再生速度を制御する。
【００８４】
例えば、判定結果が音量増大であった場合、音声出力制御部１７ｉは、スピーカ１４からの出力音量を増大させ、判定結果が音量減少であった場合、音声出力制御部１７ｉは、スピーカ１４からの出力音量を減少させる。また、判定結果が再生速度増大であった場合、音声出力制御部１７ｉは、スピーカ１４からの再生速度を増大させ、判定結果が再生速度減少であった場合、音声出力制御部１７ｉは、スピーカ１４からの再生速度を減少させる。
【００８５】
なお、図１６の（Ａ）に示すような音声出力用ソフトウェアの動作画面が表示部１２にて表示されている場合、表示部１２の光センサ機能をタッチパネル機能として用いることで、受領者は、音声出力用ソフトウェアの動作画面における「再生」、「停止」「早送り」および「巻き戻し」ボタンを押下することで、所望の音声出力指示を行なうことも可能である。
【００８６】
また、実施例１にて説明した画像処理指示による処理は、実施例２においても実行可能である。また、上述した文書処理は、実施例１と同様に、入力部１５が有する処理終了ボタンが受領者により押下されることで終了する。
【００８７】
続いて、図１７を用いて実施例２に係る文書処理装置１０の処理の手順について説明する。図１７は、実施例２に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１７では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。
【００８８】
図１７に示すように、本実施例２における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ２０１）。スキャン開始要求を受け付けない場合（ステップＳ２０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ２０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、撮影画像生成部１７ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ２０２）。
【００８９】
そして、分割部１７ｂは、撮影画像生成部１７ａにより生成された撮影画像を複数の領域に分割し（ステップＳ２０３）、文字列認識部１７ｇは、撮影画像に含まれる文字列を認識し（ステップＳ２０４）、音声合成部１７ｈは、文字列認識部１７ｇにより認識された文字列の音声データを合成する（ステップＳ２０５）。なお、音声合成部１７ｈは、合成した音声データを、当該音声データを合成するために用いた文字列の撮影画像における位置情報に対応付けて音声記憶部１６ｃに格納する。
【００９０】
その後、表示制御部１７ｃは、撮影画像生成部１７ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ２０６）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ２０７）。
【００９１】
ここで、可視光を検知した場合（ステップＳ２０７肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１７ｄは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１７ｂにより分割された複数の領域から特定する（ステップＳ２０８）。
【００９２】
続いて、拡大画像生成部１７ｅは、特定部１７ｄにより特定された領域を拡大した拡大画像を生成し（ステップＳ２０９）、表示制御部１７ｃは、拡大画像生成部１７ｅにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ２１０）。
【００９３】
そして、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれるか否かを判定する（ステップＳ２１１）。具体的には、音声出力制御部１７ｉは、音声記憶部１６ｃを参照して、特定部１７ｄにより特定された領域に含まれる位置情報に対応付けられている音声データがあるか否かを判定する。
【００９４】
ここで、特定部１７ｄにより特定された領域にて文字列が含まれる場合（ステップＳ２１１肯定）、音声出力制御部１７ｉは、当該領域に含まれている文字列から音声合成部１７ｈにより合成された音声データをスピーカ１４からから出力するように制御する（ステップＳ２１２）。
【００９５】
ステップＳ２１１の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ２０７否定）、または、特定部１７ｄにより特定された領域にて文字列が含まれていない場合（ステップＳ２１１否定）、信号受信部１３は、リモコン２０から画像処理指示または音声処理指示を受信したか否かを判定する（ステップＳ２１３）。ここで、リモコン２０から画像処理指示または音声処理指示を受信した場合（ステップＳ２１３肯定）、信号受信部１３は、受信した指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された指示の内容を判定する（ステップＳ２１４）。すなわち、指示判定部１７ｆは、指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるか、音声データの音量調整処理であるか、音声データの再生速度調整処理であるかを判定する。
【００９６】
そして、指示判定部１７ｆは、判定結果の内容に応じて、判定結果を拡大画像生成部１７ｅおよび表示制御部１７ｃか、音声出力制御部１７ｉに転送し、判定結果を転送された拡大画像生成部１７ｅおよび表示制御部１７ｃ、または、音声出力制御部１７ｉは、判定結果に沿った処理を実行する（ステップＳ２１５）。
【００９７】
ステップＳ２１５の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ２１３否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ２１６）。
【００９８】
ここで、処理終了要求を受け付けなかった場合（ステップＳ２１６否定）、ステップＳ２０７に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。
【００９９】
一方、処理終了要求を受け付けた場合（ステップＳ２１６肯定）、文書処理装置１０は、処理を終了する。
【０１００】
上述してきたように、実施例２では、文字列認識部１７ｇは、撮影画像に含まれる文字列を認識し、音声合成部１７ｈは、文字列認識部１７ｇにより認識された文字列の音声データを合成する。そして、音声出力制御部１７ｉは、特定部１７ｄにより特定された領域にて文字列が含まれる場合、当該文字列から音声合成部１７ｈにより合成された音声データをスピーカ１４から出力するように制御する。
【０１０１】
したがって、実施例２によれば、受領者は、自身が見えにくい、または、読みにくい箇所を拡大して参照できるとともに、当該箇所に含まれる文字を音声にて認識することができる。その結果、受領者は、見えにくい、または、読みにくい文書の内容を音声により容易に把握することが可能となる。
【０１０２】
また、実施例２では、リモコン２０は、スピーカ１４から出力される音声の音量および再生速度を調整するための音声処理指示を送信し、信号受信部１３は、リモコン２０から受信した音声処理指示を指示判定部１７ｆに転送し、指示判定部１７ｆは、信号受信部１３から転送された画像処理指示の内容を判定する。そして、指示判定部１７ｆは、判定結果を音声出力制御部１７ｉに転送し、音声出力制御部１７ｉは、判定結果に沿った音量または再生速度の調整制御を行なう。
【０１０３】
したがって、実施例２によれば、受領者は、リモコン２０のボタンを操作するといった簡単な操作のみで、スピーカ１４から出力される音声の音量および再生速度を自身が認識しやすい音量または再生速度に変更することができる。その結果、受領者は、自信が見えにくい、または、読みにくい箇所を音声によりさらに容易に把握することが可能となる。
【０１０４】
なお、上記した実施例１および２では、拡大画像の表示に際してリモコン２０から可視光が照射される場合について説明したが、本発明は、拡大画像の表示に際してリモコン２０から赤外線などが照射される場合であってもよい。
【０１０５】
また、本実施例において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。
【０１０６】
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、ＣＰＵおよび当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
【０１０７】
なお、本実施例で説明した文書処理方法は、あらかじめ用意されたプログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。このプログラムは、インターネットなどのネットワークを介して配布することができる。また、このプログラムは、ハードディスク、フレキシブルディスク（ＦＤ）、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。
【産業上の利用可能性】
【０１０８】
以上のように、本発明に係る文書処理方法および文書処理システムは、紙媒体の文書を画像処理する場合に有用であり、特に、見えにくい、または、読みにくい文書の内容を容易に把握することに適する。
【符号の説明】
【０１０９】
１０ 文書処理装置
１１ スキャナー
１２ 表示部（光センサ内蔵ディスプレイ）
１３ 信号受信部
１４ スピーカ
１５ 入力部
１６ 記憶部
１６ａ 画像記憶部
１６ｂ 分割結果記憶部
１７ 制御部
１７ａ 撮影画像生成部
１７ｂ 分割部
１７ｃ 表示制御部
１７ｄ 特定部
１７ｅ 拡大画像生成部
１７ｆ 指示判定部
２０ リモコン
２１ 可視光スイッチ
２２ 照射口
２３ 拡大ボタン
２４ 縮小ボタン
２５ 消去ボタン
【特許請求の範囲】
【請求項１】
利用者が配置した文書を撮影した画像を生成する撮影ステップと、
前記撮影ステップにより生成された前記画像を複数の領域に分割する分割ステップと、
前記撮影ステップにより生成された前記画像を所定の表示部に表示させるように制御する表示制御ステップと、
前記表示制御ステップの制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知ステップと、
前記検知ステップが検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割ステップにより分割された前記複数の領域から特定する特定ステップと、
前記特定ステップにより特定された領域を拡大した拡大画像を生成する拡大画像生成ステップと、
前記拡大画像生成ステップにより生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御ステップと、
を含んだことを特徴とする文書処理方法。
【請求項２】
前記第二の表示制御ステップは、前記画像が前記所定の表示部にて表示された状態で、当該画像の前面に前記拡大画像を表示するように制御することを特徴とする請求項１に記載の文書処理方法。
【請求項３】
前記撮影ステップにより生成された前記画像に含まれる文字列を認識する文字列認識ステップと、
前記文字列認識ステップにより認識された文字列の音声データを合成する音声合成ステップと、
前記特定ステップにより特定された領域にて文字列が含まれる場合、当該文字列から前記音声合成ステップにより合成された音声データを所定の音声出力部から出力するように制御する音声出力制御ステップと、
をさらに含んだことを特徴とする請求項１または２に記載の文書処理方法。
【請求項４】
前記光送信装置は、前記所定の表示部にて表示される画像に関する処理を指示するための画像処理指示をさらに送信し、
前記第二の表示制御ステップは、前記光送信装置から送信された前記画像処理指示に基づいて、前記拡大画像の拡大率を制御することを特徴とする請求項１〜３のいずれか一つに記載の文書処理方法。
【請求項５】
前記光送信装置は、前記所定の音声出力部から出力される音声データに関する処理を指示するための音声処理指示をさらに送信し、
前記音声出力制御ステップは、前記光送信装置から送信された前記音声処理指示に基づいて、前記音声データの音量、または前記音声データの再生速度を制御することを特徴とする請求項１〜４のいずれか一つに記載の文書処理方法。
【請求項６】
文書に対して処理を行なう文書処理装置と、光を送信する光送信装置とを含む文書処理システムであって、
前記文書処理装置は、
利用者が配置した文書を撮影した画像を生成する撮影手段と、
前記撮影手段により生成された前記画像を複数の領域に分割する分割手段と、
前記撮影手段により生成された前記画像を所定の表示部に表示させるように制御する表示制御手段と、
前記表示制御手段の制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して前記光送信装置から送信された光を検知する検知手段と、
前記検知手段が検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割手段により分割された前記複数の領域から特定する特定手段と、
前記特定手段により特定された領域を拡大した拡大画像を生成する拡大画像生成手段と、
前記拡大画像生成手段により生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御手段と、
を備えたことを特徴とする文書処理システム。
【請求項１】
利用者が配置した文書を撮影した画像を生成する撮影ステップと、
前記撮影ステップにより生成された前記画像を複数の領域に分割する分割ステップと、
前記撮影ステップにより生成された前記画像を所定の表示部に表示させるように制御する表示制御ステップと、
前記表示制御ステップの制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知ステップと、
前記検知ステップが検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割ステップにより分割された前記複数の領域から特定する特定ステップと、
前記特定ステップにより特定された領域を拡大した拡大画像を生成する拡大画像生成ステップと、
前記拡大画像生成ステップにより生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御ステップと、
を含んだことを特徴とする文書処理方法。
【請求項２】
前記第二の表示制御ステップは、前記画像が前記所定の表示部にて表示された状態で、当該画像の前面に前記拡大画像を表示するように制御することを特徴とする請求項１に記載の文書処理方法。
【請求項３】
前記撮影ステップにより生成された前記画像に含まれる文字列を認識する文字列認識ステップと、
前記文字列認識ステップにより認識された文字列の音声データを合成する音声合成ステップと、
前記特定ステップにより特定された領域にて文字列が含まれる場合、当該文字列から前記音声合成ステップにより合成された音声データを所定の音声出力部から出力するように制御する音声出力制御ステップと、
をさらに含んだことを特徴とする請求項１または２に記載の文書処理方法。
【請求項４】
前記光送信装置は、前記所定の表示部にて表示される画像に関する処理を指示するための画像処理指示をさらに送信し、
前記第二の表示制御ステップは、前記光送信装置から送信された前記画像処理指示に基づいて、前記拡大画像の拡大率を制御することを特徴とする請求項１〜３のいずれか一つに記載の文書処理方法。
【請求項５】
前記光送信装置は、前記所定の音声出力部から出力される音声データに関する処理を指示するための音声処理指示をさらに送信し、
前記音声出力制御ステップは、前記光送信装置から送信された前記音声処理指示に基づいて、前記音声データの音量、または前記音声データの再生速度を制御することを特徴とする請求項１〜４のいずれか一つに記載の文書処理方法。
【請求項６】
文書に対して処理を行なう文書処理装置と、光を送信する光送信装置とを含む文書処理システムであって、
前記文書処理装置は、
利用者が配置した文書を撮影した画像を生成する撮影手段と、
前記撮影手段により生成された前記画像を複数の領域に分割する分割手段と、
前記撮影手段により生成された前記画像を所定の表示部に表示させるように制御する表示制御手段と、
前記表示制御手段の制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して前記光送信装置から送信された光を検知する検知手段と、
前記検知手段が検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割手段により分割された前記複数の領域から特定する特定手段と、
前記特定手段により特定された領域を拡大した拡大画像を生成する拡大画像生成手段と、
前記拡大画像生成手段により生成された前記拡大画像を前記所定の表示部にてさらに表示するように制御する第二の表示制御手段と、
を備えたことを特徴とする文書処理システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【公開番号】特開２０１１−２０４１９０（Ｐ２０１１−２０４１９０Ａ）
【公開日】平成２３年１０月１３日（２０１１．１０．１３）
【国際特許分類】
【出願番号】特願２０１０−７３４７０（Ｐ２０１０−７３４７０）
【出願日】平成２２年３月２６日（２０１０．３．２６）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
【公開日】平成２３年１０月１３日（２０１１．１０．１３）
【国際特許分類】
【出願日】平成２２年３月２６日（２０１０．３．２６）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
[ Back to top ]