電子メール装置およびプログラム
【課題】電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能とする。
【解決手段】画像データ受付部４１は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける。オブジェクト分離部４２は、画像データ受付部４１により受け付けられた画像データから文字画像、表画像または写真画像を分離する。文字コード化部４５は、オブジェクト分離部４２により分離された表画像または写真画像の概要を文字により表現した文字表現データを生成する。電子メール生成部４８は、文字コード化部４５により生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成する。
【解決手段】画像データ受付部４１は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける。オブジェクト分離部４２は、画像データ受付部４１により受け付けられた画像データから文字画像、表画像または写真画像を分離する。文字コード化部４５は、オブジェクト分離部４２により分離された表画像または写真画像の概要を文字により表現した文字表現データを生成する。電子メール生成部４８は、文字コード化部４５により生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子メール装置およびプログラムに関する。
【背景技術】
【０００２】
特許文献１には、画像データを電子メール本文に埋め込み可能なファイル形式に変換して電子メール本文中に埋め込んだ電子メールを作成するようにした電子メール装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１１４８５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能な電子メールを生成することができる電子メール装置およびプログラムを提供することである。
【課題を解決するための手段】
【０００５】
［電子メール装置］
請求項１に係る本発明は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける受付手段と、
前記受付手段により受け付けられた画像データから文字画像、表画像または写真画像を分離する分離手段と、
前記分離手段により分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換する変換手段と、
前記分離手段により分離された表画像または写真画像の概要が文字により表現された文字表現データを生成する文字表現データ生成手段と、
前記変換手段により変換された文字データおよび前記生成手段により生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成する電子メール生成手段とを備えた電子メール装置である。
【０００６】
請求項２に係る本発明は、前記文字表現データ生成手段が、前記分離手段により分離された表画像に含まれる表内の文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換し、得られた文字データを表内の文字として表現した文字表現データを生成する請求項１記載の電子メール装置である。
【０００７】
請求項３に係る本発明は、前記文字表現データ生成手段が、前記分離手段により分離された写真画像に対して、それぞれの領域の濃度値を文字により表現した文字表現データを生成する請求項１記載の電子メール装置である。
【０００８】
請求項４に係る本発明は、前記電子メール生成手段が、画像データにおける文字画像、写真画像または表画像の位置関係が表現されるように電子メールを生成する請求項１から３のいずれか１項記載の電子メール装置である。
【０００９】
請求項５に係る本発明は、前記変換手段により変換された文字データから、特定の条件を満たす文字データを部分的に抽出する抽出手段をさらに備えた請求項１から４のいずれか１項記載の電子メール装置である。
【００１０】
請求項６に係る本発明は、前記抽出手段が、前記変換手段により変換された文字データから、重要度が高いと判定された文字データを部分的に抽出する請求項５記載の電子メール装置である。
【００１１】
請求項７に係る本発明は、生成する電子メールの形式をＨＴＬＭ形式にするのかテキスト形式にするのかを指示する指示手段をさらに備え、
前記文字表現データ生成手段が、前記指示手段により指示された電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から６のいずれか１項記載の電子メール装置である。
【００１２】
請求項８に係る本発明は、前記受付手段により受け付けられた画像データの文書種類を判定する判定手段をさらに備え、
前記文字表現データ生成手段が、前記判定手段により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から７のいずれか１項記載の電子メール装置である。
【００１３】
[プログラム]
請求項９に係る本発明は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付けるステップと、
受け付けられた画像データから文字画像、表画像または写真画像を分離するステップと、
分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換するステップと、
分離された表画像または写真画像の概要が文字により表現された文字表現データを生成するステップと、
変換された文字データおよび生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成するステップとをコンピュータに実行させるためのプログラムである。
【発明の効果】
【００１４】
請求項１に係る本発明によれば、電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１５】
請求項２に係る本発明によれば、請求項１に係る本発明により得られる効果に加えて、表内の文字と表外の文字とが区別可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１６】
請求項３に係る本発明によれば、請求項１に係る本発明により得られる効果に加えて、写真画像の濃淡の概要を把握可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１７】
請求項４に係る本発明によれば、請求項１から３のいずれか１項に係る本発明により得られる効果に加えて、文字画像、写真画像または表画像の位置関係を把握可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１８】
請求項５に係る本発明によれば、請求項１から４のいずれか１項に係る本発明により得られる効果に加えて、電子メール内において表現しようとする画像データの文書レイアウトを維持することが可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１９】
請求項６に係る本発明によれば、請求項５に係る本発明により得られる効果に加えて、文字データを部分的に抽出する際に、重要な文字が省かれることを防ぐことができる電子メール装置を提供することができる。
【００２０】
請求項７に係る本発明によれば、請求項１から６のいずれか１項に係る本発明により得られる効果に加えて、電子メールの形式に応じた適切な表現で表画像または写真画像を表現した電子メールを生成することが可能な電子メール装置を提供することができる。
【００２１】
請求項８に係る本発明によれば、請求項１から７のいずれか１項に係る本発明により得られる効果に加えて、画像データの文書種類に応じた適切な表現で表画像または写真画像を表現した電子メールを生成することが可能な電子メール装置を提供することができる。
【００２２】
請求項９に係る本発明によれば、電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能な電子メールを生成することができるプログラムを提供することができる。
【図面の簡単な説明】
【００２３】
【図１】図１は電子メール（Ｅメール）の送受信機能を有する各種装置がインターネット等のネットワーク３０により相互に接続されている様子を示すシステム図である。
【図２】本発明の一実施形態における電子メール装置４０のハードウェア構成を示すブロック図である。
【図３】本発明の一実施形態における電子メール装置４０の機能構成を示すブロック図である。
【図４】画像データ受付部４１により受け付けられた画像の元となる原稿の一例を示す図である。
【図５】図４に示した画像データを文字表現データとして表現して電子メールの本文に含めるようにした場合の一例を示す図である。
【図６】図３中に示された部分文字抽出部４３の詳細な構成を説明するための図である。
【図７】部分文字抽出部４３により重要度の高い文字または行のみが抽出される様子を示す図である。
【図８】電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える際に使用するテーブルの一例を示す図である。
【図９】写真画像または表画像をテキストデータにより表現した場合の一例を示す図である。
【図１０】写真画像または表画像をテキストデータにより表現した場合の他の例を示す図である。
【図１１】文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える場合に使用されるテーブルの一例を示す図である。
【発明を実施するための形態】
【００２４】
次に、本発明の実施の形態について図面を参照して詳細に説明する。
図１は電子メール（Ｅメール）の送受信機能を有する各種装置がインターネット等のネットワーク３０により相互に接続されている様子を示すシステム図である。
【００２５】
図１に示したシステムでは、電子メールの送受信可能な２台の画像形成装置１１、１２と、電子メールの送受信可能な３台の端末装置２１〜２３とがネットワーク３０を介して接続された構成となっている。画像形成装置１１、１２は、印刷（プリント）機能、スキャン機能、複写（コピー）機能、ファクシミリ機能等の複数の機能を有するいわゆる複合機と呼ばれる装置である。
【００２６】
本発明の一実施形態の電子メール装置は、上記のような電子メールの送受信を行う各種装置に含まれ、他の装置からの電子メールを受信したり、他の装置へ電子メールを送信する機能を有する。
【００２７】
このような本実施形態の電子メール装置４０のハードウェア構成を図２に示す。
【００２８】
本実施形態の電子メール装置４０は、図２に示されるように、ＣＰＵ３１、メモリ３２、ハードディスクドライブ（ＨＤＤ）等の記憶装置３３、ネットワーク３０を介して他の電子メール装置等との間でデータの送信及び受信を行う通信インタフェース（ＩＦ）３４、タッチパネル又は液晶ディスプレイ並びにキーボードを含むユーザインタフェース（ＵＩ）装置３５を有する。これらの構成要素は、制御バス３６を介して互いに接続されている。
【００２９】
ＣＰＵ３１は、メモリ３２または記憶装置３３に格納された制御プログラムに基づいて所定の処理を実行して、本実施形態の電子メール装置４０の動作を制御する。なお、本実施形態では、ＣＰＵ３１は、メモリ３２または記憶装置３３内に格納された制御プログラムを読み出して実行するものとして説明したが、当該プログラムをＣＤ−ＲＯＭ等の記憶媒体に格納してＣＰＵ３１に提供することも可能である。
【００３０】
図３は、上記の制御プログラムが実行されることにより実現される電子メール装置４０の機能構成を示すブロック図である。
【００３１】
本実施形態の電子メール装置４０は、図３に示されるように、画像データ受付部４１と、オブジェクト分離部４２と、テキストデータ変換部４３と、部分文字抽出部４４と、文字コード化部４５と、文書種類判定部４６と、メール形式指示部４７と、電子メール生成部４８と、電子メール送信部４９とを備えている。
【００３２】
なお、本実施形態では、説明を簡単にするために、電子メールを受信するための機能についての説明は省略する。
【００３３】
画像データ受付部４１は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける。
【００３４】
オブジェクト分離部４２は、画像データ受付部４１により受け付けられた画像データから文字画像、表画像または写真画像を分離する。
【００３５】
テキストデータ変換部４３は、オブジェクト分離部４２により分離された文字画像に対して、いわゆるＯＣＲ（Optical Character Reader）処理と呼ばれるような文字認識処理を行うことにより、その文字画像をテキスト（文字）データに変換する。
【００３６】
部分文字抽出部４４は、テキストデータ変換部４３により変換されたテキストデータから、特定の条件を満たすテキストデータを部分的に抽出する。具体的には、部分文字抽出部４４は、テキストデータ変換部４３により変換されたテキストデータから、重要度が高いと判定されたテキストデータを部分的に抽出する。
【００３７】
文字コード化部４５は、オブジェクト分離部４２により分離された表画像または写真画像の概要を文字により表現した文字表現データを生成する。
【００３８】
具体的には、文字コード化部４５は、オブジェクト分離部４２により分離された表画像に含まれる表内の文字画像に対して文字認識を行うことにより、その文字画像をテキストデータに変換し、得られたテキストデータを表内の文字として表現した文字表現データを生成する。
【００３９】
また、文字コード化部４５は、オブジェクト分離部４２により分離された写真画像に対して、それぞれの領域の濃度値を文字により表現した文字表現データを生成する。
【００４０】
文書種類判定部４６は、オブジェクト分離部４２により分離された文字画像、表画像および写真画像に基づいて、画像データ受付部４１により受け付けられた画像データの文書種類を判定する。
【００４１】
具体的には、文書種類判定部４６は、画像データ受付部４１により受け付けられた画像データが、文字画像のみの画像なのか、文字画像と表画像からなる画像なのか、文字画像と写真画像からなる画像なのか、文字画像、表画像および写真画像が含まれる画像なのか等の文書種類を判定する。
【００４２】
メール形式指示部４７は、生成する電子メールの形式をＨＴＭＬ（Hyper Text Markup Language）形式にするのかテキスト形式にするのかを、電子メール生成部４８に対して指示する。
【００４３】
なお、メール形式指示部４７は、ユーザからの入力に基づいて、生成する電子メールの形式を電子メール生成部４８に対して指示するようにしてもよいし、電子メールを送信しようとする宛先から過去に受信した電子メールに基づいて、宛先の電子メール装置が受信可能なメール形式の情報を取得して生成する電子メールの形式を電子メール生成部４８に対して指示するようにしてもよい。
【００４４】
電子メール生成部４８は、テキストデータ変換部４３により変換された文字データおよび文字コード化部４５により生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成する。その際、電子メール生成部４８は、画像データにおける文字画像、写真画像または表画像の位置関係が表現されるように電子メールを生成する。
【００４５】
例えば、画像データ受付部４１により受け付けられた画像の元となる原稿が、図４に示すような原稿８０であったものとして説明する。この原稿８０は、図４に示すように、写真画像８１と、表画像８２と、文字画像８３とを含んでいるものとして説明する。このような画像データを文字表現データとして表現して電子メールの本文に含めるようにした場合の一例を図５に示す。
【００４６】
図５に示した例では、写真画像８１は、“Ｈ”という文字により概略が表現され、表画像８２は、表内の文字を表現したテキストデータおよび“｜”や“−”等のテキストデータにより表現されていることが分かる。また、文字画像８３については、部分文字抽出部４４により重要と判定された文字のみが抽出されてテキストコードとして表現されている
【００４７】
また、電子メール生成部４８は、メール形式指示部４７により指示された電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替えるようにしてもよい。
【００４８】
さらに、電子メール生成部４８は、文書種類判定部４６により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替えるようにしてもよい。
【００４９】
電子メール送信部４９は、電子メール生成部４８により生成された電子メールを、指定された宛先に送信する。
【００５０】
次に、図３中に示された部分文字抽出部４３の詳細な構成を図６を参照して説明する。
【００５１】
部分文字抽出部４３は、図６に示されるように、形態素解析部５１と、重要度算出部５２と、重要行抽出部５３と、重要語抽出部５４と、不要文字・行削除部５５とから構成されている。
【００５２】
形態素解析部５１は、テキストデータ変換部４３により変換されたテキストデータに対して、形態素解析（構文解析）を行うことにより、文章を各単語に分割し、分割した単語のそれぞれの品詞を判別する。
【００５３】
重要度算出部５２は、形態素解析部５１により分割された各単語の重要度を算出する。ここで、重要度が高いとは、文書を特定するためのキーワードになる可能性が高いことを意味し、例えば出現頻度が高い名詞は重要度が高いと判定するようにする。
【００５４】
重要行抽出部５３は、重要度算出部５２により算出された各単語毎の重要度に応じて、文章の意味上において重要な行を元の文章から抽出する。重要語抽出部５４は、重要度算出部５２により算出された各単語毎の重要度に応じて、重要度の高い単語を抽出する。
【００５５】
不要文字・行削除部５５は、重要行抽出部５３により抽出された重要度の高い行の情報、および重要語抽出部５４により抽出された重要度の高い単語の情報に基づいて、テキストデータ変換部４３によりテキストデータに変換された文書から、不要な文字および不要な行を削除して電子メール生成部４８に出力する。
【００５６】
上記のような構成の部分文字抽出部４３により重要度の高い文字または行のみが抽出される様子を図７に示す。図７に示した例では、元の文章に対して、重要度の高いと判定された単語や行のみが抽出されて残っていることが分かる。
【００５７】
次に、電子メール生成部４８が、電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える場合の具体例について説明する。
【００５８】
電子メール生成部４８は、例えば、図８に示すようなテーブルに基づいて、生成する文字表現データの種類を切り替える。
【００５９】
例えば、電子メールの形式としてＨＴＭＬ形式が指示されている場合、電子メール作成部４８は、表画像については、ＨＴＭＬのテーブルタグにより表画像を表現するか、“｜”、“−”というテキストを用いて罫線を表現した文字表現データを用いるようにする。
【００６０】
また、電子メールの形式としてテキスト形式が指示されている場合、電子メール作成部４８は、“｜”、“−”というテキストを用いて罫線を表現した文字表現データを用いるか、所定のテキストを配置して表画像を表現する。
【００６１】
写真画像については、電子メールの形式としてＨＴＭＬ形式が指示されている場合、電子メール作成部４８は、ＨＴＭＬのテーブルタグにより写真画像を表現するか、写真画像の各領域の濃淡（濃度値）をテキスト色で表現したような文字表現データを用いる。
【００６２】
また、電子メールの形式としてテキスト形式が指示されている場合、電子メール作成部４８は、写真画像の各領域の濃淡をテキストの画数で表現したような文字表現データを用いるか、所定のテキストを配置して写真画像を表現する。つまり、濃度値が高いほど画数の多い文字を配置するようにして、写真画像の濃淡を表現する。
【００６３】
このようにして写真画像および表画像をテキストデータにより表現した場合の一例を図９および図１０に示す。
【００６４】
図９（Ａ）は、写真画像を所定テキストの配置により表現した場合の一例を示す図であり、“＊”という文字により写真画像が表現されている。
【００６５】
また、図９（Ｂ）は、写真画像の濃淡をテキスト画像で表現した場合の一例を示す図であり、濃度値が低い領域は“・”という文字により表現され濃度値が高い領域は“Ｈ”という文字により表現されている。
【００６６】
さらに、図１０（Ａ）は、写真画像の濃淡をテキスト画数で表現した場合の一例を示す図であり、濃度値が低い領域は“山”という画数の少ない文字により表現され濃度値が高い領域は“鑑”という画数が高い文字により表現されている。
【００６７】
また、図１０（Ｂ）は、表画像を所定テキストの配置により表現した場合の一例を示す図であり、罫線部分が“＊”という文字により現されていることが分かる。
【００６８】
次に、電子メール生成部４８が、文書種類判定部４６により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える場合の具体例について説明する。
【００６９】
電子メール生成部４８は、例えば、図１１に示すようなテーブルに基づいて、生成する文字表現データの種類を切り替える。図１１に示すテーブルでは、電子メールの形式としてＨＴＭＬ形式が指定されている場合の一例が示されている。
【００７０】
例えば、文書種類が、表、写真、文字が含まれるものである場合、電子メール生成部４８は、文字画像についてはテキストデータで表現し、表画像については“｜”、“−”というテキスト等により表現し、写真画像については所定のテキストを配置して表現を行う。
【００７１】
また、文書種類が、写真、文字が含まれるものである場合、電子メール生成部４８は、写真画像については濃淡をテキスト色で表現した文字表現データを採用する。
【００７２】
また、文書種類が、写真、表が含まれるものである場合、電子メール生成部４８は、ＨＴＭＬのテーブルタグにより表画像を表現し、所定のテキストを配置して写真画像を表現する。
【００７３】
さらに、文書種類が全面写真のような場合、写真画像をテキストデータにみで表現しただけでは画像内容を把握することが困難なため、電子メール生成部４８は、ＨＴＭＬのテーブルタグによりサムネイル画像を電子メール本文に埋め込むようにする。
【符号の説明】
【００７４】
１１、１２ 画像形成装置
２１〜２３ 端末装置
３０ ネットワーク
３１ ＣＰＵ
３２ メモリ
３３ 記憶装置
３４ 通信インタフェース（ＩＦ）
３５ ユーザインタフェース（ＵＩ）装置
３６ 制御バス
４１ 画像データ受付部
４２ オブジェクト分離部
４３ テキストデータ変換部
４４ 部分文字抽出部
４５ 文字コード化部
４６ 文書種類判定部
４７ メール形式指示部
４８ 電子メール生成部
４９ 電子メール送信部
５１ 形態素解析部
５２ 重要度算出部
５３ 重要行抽出部
５４ 重要語抽出部
５５ 不要文字・行削除部
８０ 原稿
８１ 写真画像
８２ 表画像
８３ 文字画像
【技術分野】
【０００１】
本発明は、電子メール装置およびプログラムに関する。
【背景技術】
【０００２】
特許文献１には、画像データを電子メール本文に埋め込み可能なファイル形式に変換して電子メール本文中に埋め込んだ電子メールを作成するようにした電子メール装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１１４８５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能な電子メールを生成することができる電子メール装置およびプログラムを提供することである。
【課題を解決するための手段】
【０００５】
［電子メール装置］
請求項１に係る本発明は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける受付手段と、
前記受付手段により受け付けられた画像データから文字画像、表画像または写真画像を分離する分離手段と、
前記分離手段により分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換する変換手段と、
前記分離手段により分離された表画像または写真画像の概要が文字により表現された文字表現データを生成する文字表現データ生成手段と、
前記変換手段により変換された文字データおよび前記生成手段により生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成する電子メール生成手段とを備えた電子メール装置である。
【０００６】
請求項２に係る本発明は、前記文字表現データ生成手段が、前記分離手段により分離された表画像に含まれる表内の文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換し、得られた文字データを表内の文字として表現した文字表現データを生成する請求項１記載の電子メール装置である。
【０００７】
請求項３に係る本発明は、前記文字表現データ生成手段が、前記分離手段により分離された写真画像に対して、それぞれの領域の濃度値を文字により表現した文字表現データを生成する請求項１記載の電子メール装置である。
【０００８】
請求項４に係る本発明は、前記電子メール生成手段が、画像データにおける文字画像、写真画像または表画像の位置関係が表現されるように電子メールを生成する請求項１から３のいずれか１項記載の電子メール装置である。
【０００９】
請求項５に係る本発明は、前記変換手段により変換された文字データから、特定の条件を満たす文字データを部分的に抽出する抽出手段をさらに備えた請求項１から４のいずれか１項記載の電子メール装置である。
【００１０】
請求項６に係る本発明は、前記抽出手段が、前記変換手段により変換された文字データから、重要度が高いと判定された文字データを部分的に抽出する請求項５記載の電子メール装置である。
【００１１】
請求項７に係る本発明は、生成する電子メールの形式をＨＴＬＭ形式にするのかテキスト形式にするのかを指示する指示手段をさらに備え、
前記文字表現データ生成手段が、前記指示手段により指示された電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から６のいずれか１項記載の電子メール装置である。
【００１２】
請求項８に係る本発明は、前記受付手段により受け付けられた画像データの文書種類を判定する判定手段をさらに備え、
前記文字表現データ生成手段が、前記判定手段により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から７のいずれか１項記載の電子メール装置である。
【００１３】
[プログラム]
請求項９に係る本発明は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付けるステップと、
受け付けられた画像データから文字画像、表画像または写真画像を分離するステップと、
分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換するステップと、
分離された表画像または写真画像の概要が文字により表現された文字表現データを生成するステップと、
変換された文字データおよび生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成するステップとをコンピュータに実行させるためのプログラムである。
【発明の効果】
【００１４】
請求項１に係る本発明によれば、電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１５】
請求項２に係る本発明によれば、請求項１に係る本発明により得られる効果に加えて、表内の文字と表外の文字とが区別可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１６】
請求項３に係る本発明によれば、請求項１に係る本発明により得られる効果に加えて、写真画像の濃淡の概要を把握可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１７】
請求項４に係る本発明によれば、請求項１から３のいずれか１項に係る本発明により得られる効果に加えて、文字画像、写真画像または表画像の位置関係を把握可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１８】
請求項５に係る本発明によれば、請求項１から４のいずれか１項に係る本発明により得られる効果に加えて、電子メール内において表現しようとする画像データの文書レイアウトを維持することが可能な電子メールを生成することができる電子メール装置を提供することができる。
【００１９】
請求項６に係る本発明によれば、請求項５に係る本発明により得られる効果に加えて、文字データを部分的に抽出する際に、重要な文字が省かれることを防ぐことができる電子メール装置を提供することができる。
【００２０】
請求項７に係る本発明によれば、請求項１から６のいずれか１項に係る本発明により得られる効果に加えて、電子メールの形式に応じた適切な表現で表画像または写真画像を表現した電子メールを生成することが可能な電子メール装置を提供することができる。
【００２１】
請求項８に係る本発明によれば、請求項１から７のいずれか１項に係る本発明により得られる効果に加えて、画像データの文書種類に応じた適切な表現で表画像または写真画像を表現した電子メールを生成することが可能な電子メール装置を提供することができる。
【００２２】
請求項９に係る本発明によれば、電子メールに添付しようとする画像または電子メールにより通知しようとする画像データに、表画像または写真画像が含まれる場合でも、添付された画像データまたは通知しようとする画像データの画像内容を把握可能な電子メールを生成することができるプログラムを提供することができる。
【図面の簡単な説明】
【００２３】
【図１】図１は電子メール（Ｅメール）の送受信機能を有する各種装置がインターネット等のネットワーク３０により相互に接続されている様子を示すシステム図である。
【図２】本発明の一実施形態における電子メール装置４０のハードウェア構成を示すブロック図である。
【図３】本発明の一実施形態における電子メール装置４０の機能構成を示すブロック図である。
【図４】画像データ受付部４１により受け付けられた画像の元となる原稿の一例を示す図である。
【図５】図４に示した画像データを文字表現データとして表現して電子メールの本文に含めるようにした場合の一例を示す図である。
【図６】図３中に示された部分文字抽出部４３の詳細な構成を説明するための図である。
【図７】部分文字抽出部４３により重要度の高い文字または行のみが抽出される様子を示す図である。
【図８】電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える際に使用するテーブルの一例を示す図である。
【図９】写真画像または表画像をテキストデータにより表現した場合の一例を示す図である。
【図１０】写真画像または表画像をテキストデータにより表現した場合の他の例を示す図である。
【図１１】文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える場合に使用されるテーブルの一例を示す図である。
【発明を実施するための形態】
【００２４】
次に、本発明の実施の形態について図面を参照して詳細に説明する。
図１は電子メール（Ｅメール）の送受信機能を有する各種装置がインターネット等のネットワーク３０により相互に接続されている様子を示すシステム図である。
【００２５】
図１に示したシステムでは、電子メールの送受信可能な２台の画像形成装置１１、１２と、電子メールの送受信可能な３台の端末装置２１〜２３とがネットワーク３０を介して接続された構成となっている。画像形成装置１１、１２は、印刷（プリント）機能、スキャン機能、複写（コピー）機能、ファクシミリ機能等の複数の機能を有するいわゆる複合機と呼ばれる装置である。
【００２６】
本発明の一実施形態の電子メール装置は、上記のような電子メールの送受信を行う各種装置に含まれ、他の装置からの電子メールを受信したり、他の装置へ電子メールを送信する機能を有する。
【００２７】
このような本実施形態の電子メール装置４０のハードウェア構成を図２に示す。
【００２８】
本実施形態の電子メール装置４０は、図２に示されるように、ＣＰＵ３１、メモリ３２、ハードディスクドライブ（ＨＤＤ）等の記憶装置３３、ネットワーク３０を介して他の電子メール装置等との間でデータの送信及び受信を行う通信インタフェース（ＩＦ）３４、タッチパネル又は液晶ディスプレイ並びにキーボードを含むユーザインタフェース（ＵＩ）装置３５を有する。これらの構成要素は、制御バス３６を介して互いに接続されている。
【００２９】
ＣＰＵ３１は、メモリ３２または記憶装置３３に格納された制御プログラムに基づいて所定の処理を実行して、本実施形態の電子メール装置４０の動作を制御する。なお、本実施形態では、ＣＰＵ３１は、メモリ３２または記憶装置３３内に格納された制御プログラムを読み出して実行するものとして説明したが、当該プログラムをＣＤ−ＲＯＭ等の記憶媒体に格納してＣＰＵ３１に提供することも可能である。
【００３０】
図３は、上記の制御プログラムが実行されることにより実現される電子メール装置４０の機能構成を示すブロック図である。
【００３１】
本実施形態の電子メール装置４０は、図３に示されるように、画像データ受付部４１と、オブジェクト分離部４２と、テキストデータ変換部４３と、部分文字抽出部４４と、文字コード化部４５と、文書種類判定部４６と、メール形式指示部４７と、電子メール生成部４８と、電子メール送信部４９とを備えている。
【００３２】
なお、本実施形態では、説明を簡単にするために、電子メールを受信するための機能についての説明は省略する。
【００３３】
画像データ受付部４１は、電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける。
【００３４】
オブジェクト分離部４２は、画像データ受付部４１により受け付けられた画像データから文字画像、表画像または写真画像を分離する。
【００３５】
テキストデータ変換部４３は、オブジェクト分離部４２により分離された文字画像に対して、いわゆるＯＣＲ（Optical Character Reader）処理と呼ばれるような文字認識処理を行うことにより、その文字画像をテキスト（文字）データに変換する。
【００３６】
部分文字抽出部４４は、テキストデータ変換部４３により変換されたテキストデータから、特定の条件を満たすテキストデータを部分的に抽出する。具体的には、部分文字抽出部４４は、テキストデータ変換部４３により変換されたテキストデータから、重要度が高いと判定されたテキストデータを部分的に抽出する。
【００３７】
文字コード化部４５は、オブジェクト分離部４２により分離された表画像または写真画像の概要を文字により表現した文字表現データを生成する。
【００３８】
具体的には、文字コード化部４５は、オブジェクト分離部４２により分離された表画像に含まれる表内の文字画像に対して文字認識を行うことにより、その文字画像をテキストデータに変換し、得られたテキストデータを表内の文字として表現した文字表現データを生成する。
【００３９】
また、文字コード化部４５は、オブジェクト分離部４２により分離された写真画像に対して、それぞれの領域の濃度値を文字により表現した文字表現データを生成する。
【００４０】
文書種類判定部４６は、オブジェクト分離部４２により分離された文字画像、表画像および写真画像に基づいて、画像データ受付部４１により受け付けられた画像データの文書種類を判定する。
【００４１】
具体的には、文書種類判定部４６は、画像データ受付部４１により受け付けられた画像データが、文字画像のみの画像なのか、文字画像と表画像からなる画像なのか、文字画像と写真画像からなる画像なのか、文字画像、表画像および写真画像が含まれる画像なのか等の文書種類を判定する。
【００４２】
メール形式指示部４７は、生成する電子メールの形式をＨＴＭＬ（Hyper Text Markup Language）形式にするのかテキスト形式にするのかを、電子メール生成部４８に対して指示する。
【００４３】
なお、メール形式指示部４７は、ユーザからの入力に基づいて、生成する電子メールの形式を電子メール生成部４８に対して指示するようにしてもよいし、電子メールを送信しようとする宛先から過去に受信した電子メールに基づいて、宛先の電子メール装置が受信可能なメール形式の情報を取得して生成する電子メールの形式を電子メール生成部４８に対して指示するようにしてもよい。
【００４４】
電子メール生成部４８は、テキストデータ変換部４３により変換された文字データおよび文字コード化部４５により生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成する。その際、電子メール生成部４８は、画像データにおける文字画像、写真画像または表画像の位置関係が表現されるように電子メールを生成する。
【００４５】
例えば、画像データ受付部４１により受け付けられた画像の元となる原稿が、図４に示すような原稿８０であったものとして説明する。この原稿８０は、図４に示すように、写真画像８１と、表画像８２と、文字画像８３とを含んでいるものとして説明する。このような画像データを文字表現データとして表現して電子メールの本文に含めるようにした場合の一例を図５に示す。
【００４６】
図５に示した例では、写真画像８１は、“Ｈ”という文字により概略が表現され、表画像８２は、表内の文字を表現したテキストデータおよび“｜”や“−”等のテキストデータにより表現されていることが分かる。また、文字画像８３については、部分文字抽出部４４により重要と判定された文字のみが抽出されてテキストコードとして表現されている
【００４７】
また、電子メール生成部４８は、メール形式指示部４７により指示された電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替えるようにしてもよい。
【００４８】
さらに、電子メール生成部４８は、文書種類判定部４６により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替えるようにしてもよい。
【００４９】
電子メール送信部４９は、電子メール生成部４８により生成された電子メールを、指定された宛先に送信する。
【００５０】
次に、図３中に示された部分文字抽出部４３の詳細な構成を図６を参照して説明する。
【００５１】
部分文字抽出部４３は、図６に示されるように、形態素解析部５１と、重要度算出部５２と、重要行抽出部５３と、重要語抽出部５４と、不要文字・行削除部５５とから構成されている。
【００５２】
形態素解析部５１は、テキストデータ変換部４３により変換されたテキストデータに対して、形態素解析（構文解析）を行うことにより、文章を各単語に分割し、分割した単語のそれぞれの品詞を判別する。
【００５３】
重要度算出部５２は、形態素解析部５１により分割された各単語の重要度を算出する。ここで、重要度が高いとは、文書を特定するためのキーワードになる可能性が高いことを意味し、例えば出現頻度が高い名詞は重要度が高いと判定するようにする。
【００５４】
重要行抽出部５３は、重要度算出部５２により算出された各単語毎の重要度に応じて、文章の意味上において重要な行を元の文章から抽出する。重要語抽出部５４は、重要度算出部５２により算出された各単語毎の重要度に応じて、重要度の高い単語を抽出する。
【００５５】
不要文字・行削除部５５は、重要行抽出部５３により抽出された重要度の高い行の情報、および重要語抽出部５４により抽出された重要度の高い単語の情報に基づいて、テキストデータ変換部４３によりテキストデータに変換された文書から、不要な文字および不要な行を削除して電子メール生成部４８に出力する。
【００５６】
上記のような構成の部分文字抽出部４３により重要度の高い文字または行のみが抽出される様子を図７に示す。図７に示した例では、元の文章に対して、重要度の高いと判定された単語や行のみが抽出されて残っていることが分かる。
【００５７】
次に、電子メール生成部４８が、電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える場合の具体例について説明する。
【００５８】
電子メール生成部４８は、例えば、図８に示すようなテーブルに基づいて、生成する文字表現データの種類を切り替える。
【００５９】
例えば、電子メールの形式としてＨＴＭＬ形式が指示されている場合、電子メール作成部４８は、表画像については、ＨＴＭＬのテーブルタグにより表画像を表現するか、“｜”、“−”というテキストを用いて罫線を表現した文字表現データを用いるようにする。
【００６０】
また、電子メールの形式としてテキスト形式が指示されている場合、電子メール作成部４８は、“｜”、“−”というテキストを用いて罫線を表現した文字表現データを用いるか、所定のテキストを配置して表画像を表現する。
【００６１】
写真画像については、電子メールの形式としてＨＴＭＬ形式が指示されている場合、電子メール作成部４８は、ＨＴＭＬのテーブルタグにより写真画像を表現するか、写真画像の各領域の濃淡（濃度値）をテキスト色で表現したような文字表現データを用いる。
【００６２】
また、電子メールの形式としてテキスト形式が指示されている場合、電子メール作成部４８は、写真画像の各領域の濃淡をテキストの画数で表現したような文字表現データを用いるか、所定のテキストを配置して写真画像を表現する。つまり、濃度値が高いほど画数の多い文字を配置するようにして、写真画像の濃淡を表現する。
【００６３】
このようにして写真画像および表画像をテキストデータにより表現した場合の一例を図９および図１０に示す。
【００６４】
図９（Ａ）は、写真画像を所定テキストの配置により表現した場合の一例を示す図であり、“＊”という文字により写真画像が表現されている。
【００６５】
また、図９（Ｂ）は、写真画像の濃淡をテキスト画像で表現した場合の一例を示す図であり、濃度値が低い領域は“・”という文字により表現され濃度値が高い領域は“Ｈ”という文字により表現されている。
【００６６】
さらに、図１０（Ａ）は、写真画像の濃淡をテキスト画数で表現した場合の一例を示す図であり、濃度値が低い領域は“山”という画数の少ない文字により表現され濃度値が高い領域は“鑑”という画数が高い文字により表現されている。
【００６７】
また、図１０（Ｂ）は、表画像を所定テキストの配置により表現した場合の一例を示す図であり、罫線部分が“＊”という文字により現されていることが分かる。
【００６８】
次に、電子メール生成部４８が、文書種類判定部４６により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える場合の具体例について説明する。
【００６９】
電子メール生成部４８は、例えば、図１１に示すようなテーブルに基づいて、生成する文字表現データの種類を切り替える。図１１に示すテーブルでは、電子メールの形式としてＨＴＭＬ形式が指定されている場合の一例が示されている。
【００７０】
例えば、文書種類が、表、写真、文字が含まれるものである場合、電子メール生成部４８は、文字画像についてはテキストデータで表現し、表画像については“｜”、“−”というテキスト等により表現し、写真画像については所定のテキストを配置して表現を行う。
【００７１】
また、文書種類が、写真、文字が含まれるものである場合、電子メール生成部４８は、写真画像については濃淡をテキスト色で表現した文字表現データを採用する。
【００７２】
また、文書種類が、写真、表が含まれるものである場合、電子メール生成部４８は、ＨＴＭＬのテーブルタグにより表画像を表現し、所定のテキストを配置して写真画像を表現する。
【００７３】
さらに、文書種類が全面写真のような場合、写真画像をテキストデータにみで表現しただけでは画像内容を把握することが困難なため、電子メール生成部４８は、ＨＴＭＬのテーブルタグによりサムネイル画像を電子メール本文に埋め込むようにする。
【符号の説明】
【００７４】
１１、１２ 画像形成装置
２１〜２３ 端末装置
３０ ネットワーク
３１ ＣＰＵ
３２ メモリ
３３ 記憶装置
３４ 通信インタフェース（ＩＦ）
３５ ユーザインタフェース（ＵＩ）装置
３６ 制御バス
４１ 画像データ受付部
４２ オブジェクト分離部
４３ テキストデータ変換部
４４ 部分文字抽出部
４５ 文字コード化部
４６ 文書種類判定部
４７ メール形式指示部
４８ 電子メール生成部
４９ 電子メール送信部
５１ 形態素解析部
５２ 重要度算出部
５３ 重要行抽出部
５４ 重要語抽出部
５５ 不要文字・行削除部
８０ 原稿
８１ 写真画像
８２ 表画像
８３ 文字画像
【特許請求の範囲】
【請求項１】
電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける受付手段と、
前記受付手段により受け付けられた画像データから文字画像、表画像または写真画像を分離する分離手段と、
前記分離手段により分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換する変換手段と、
前記分離手段により分離された表画像または写真画像の概要が文字により表現された文字表現データを生成する文字表現データ生成手段と、
前記変換手段により変換された文字データおよび前記生成手段により生成された文字表現データが電子メール本文に埋め込まれた電子メールを作成する電子メール生成手段と、
を備えた電子メール装置。
【請求項２】
前記文字表現データ生成手段は、前記分離手段により分離された表画像に含まれる表内の文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換し、得られた文字データを表内の文字として表現した文字表現データを生成する請求項１記載の電子メール装置。
【請求項３】
前記文字表現データ生成手段は、前記分離手段により分離された写真画像に対して、それぞれの領域の濃度値を文字により表現した文字表現データを生成する請求項１記載の電子メール装置。
【請求項４】
前記電子メール生成手段は、画像データにおける文字画像、写真画像または表画像の位置関係が表現されるように電子メールを生成する請求項１から３のいずれか１項記載の電子メール装置。
【請求項５】
前記変換手段により変換された文字データから、特定の条件を満たす文字データを部分的に抽出する抽出手段をさらに備えた請求項１から４のいずれか１項記載の電子メール装置。
【請求項６】
前記抽出手段は、前記変換手段により変換された文字データから、重要度が高いと判定された文字データを部分的に抽出する請求項５記載の電子メール装置。
【請求項７】
生成する電子メールの形式をＨＴＬＭ形式にするのかテキスト形式にするのかを指示する指示手段をさらに備え、
前記文字表現データ生成手段は、前記指示手段により指示された電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から６のいずれか１項記載の電子メール装置。
【請求項８】
前記受付手段により受け付けられた画像データの文書種類を判定する判定手段をさらに備え、
前記文字表現データ生成手段は、前記判定手段により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から７のいずれか１項記載の電子メール装置。
【請求項９】
電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付けるステップと、
受け付けられた画像データから文字画像、表画像または写真画像を分離するステップと、
分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換するステップと、
分離された表画像または写真画像の概要が文字により表現された文字表現データを生成するステップと、
変換された文字データおよび生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成するステップとをコンピュータに実行させるためのプログラム。
【請求項１】
電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付ける受付手段と、
前記受付手段により受け付けられた画像データから文字画像、表画像または写真画像を分離する分離手段と、
前記分離手段により分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換する変換手段と、
前記分離手段により分離された表画像または写真画像の概要が文字により表現された文字表現データを生成する文字表現データ生成手段と、
前記変換手段により変換された文字データおよび前記生成手段により生成された文字表現データが電子メール本文に埋め込まれた電子メールを作成する電子メール生成手段と、
を備えた電子メール装置。
【請求項２】
前記文字表現データ生成手段は、前記分離手段により分離された表画像に含まれる表内の文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換し、得られた文字データを表内の文字として表現した文字表現データを生成する請求項１記載の電子メール装置。
【請求項３】
前記文字表現データ生成手段は、前記分離手段により分離された写真画像に対して、それぞれの領域の濃度値を文字により表現した文字表現データを生成する請求項１記載の電子メール装置。
【請求項４】
前記電子メール生成手段は、画像データにおける文字画像、写真画像または表画像の位置関係が表現されるように電子メールを生成する請求項１から３のいずれか１項記載の電子メール装置。
【請求項５】
前記変換手段により変換された文字データから、特定の条件を満たす文字データを部分的に抽出する抽出手段をさらに備えた請求項１から４のいずれか１項記載の電子メール装置。
【請求項６】
前記抽出手段は、前記変換手段により変換された文字データから、重要度が高いと判定された文字データを部分的に抽出する請求項５記載の電子メール装置。
【請求項７】
生成する電子メールの形式をＨＴＬＭ形式にするのかテキスト形式にするのかを指示する指示手段をさらに備え、
前記文字表現データ生成手段は、前記指示手段により指示された電子メールの形式に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から６のいずれか１項記載の電子メール装置。
【請求項８】
前記受付手段により受け付けられた画像データの文書種類を判定する判定手段をさらに備え、
前記文字表現データ生成手段は、前記判定手段により判定された文書種類に応じて、表画像または写真画像の概要を文字により表現する際に生成する文字表現データの種類を切り替える請求項１から７のいずれか１項記載の電子メール装置。
【請求項９】
電子メールに添付しようとする画像データまたは電子メールにより通知しようとする画像データを受け付けるステップと、
受け付けられた画像データから文字画像、表画像または写真画像を分離するステップと、
分離された文字画像に対して文字認識を行うことにより、当該文字画像を文字データに変換するステップと、
分離された表画像または写真画像の概要が文字により表現された文字表現データを生成するステップと、
変換された文字データおよび生成された文字表現データが電子メール本文に埋め込まれた電子メールを生成するステップとをコンピュータに実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１９０１３３（Ｐ２０１２−１９０１３３Ａ）
【公開日】平成２４年１０月４日（２０１２．１０．４）
【国際特許分類】
【出願番号】特願２０１１−５１４９１（Ｐ２０１１−５１４９１）
【出願日】平成２３年３月９日（２０１１．３．９）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２４年１０月４日（２０１２．１０．４）
【国際特許分類】
【出願日】平成２３年３月９日（２０１１．３．９）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]