画像処理装置および画像処理方法
【課題】文字画像から文字を認識する精度を向上する。
【解決手段】この画像処理装置は、文書画像が記憶されたメモリと、文字とその特徴データが対応して格納された認識辞書と、前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、前記前処理部より生成された文字画像を、系統毎に異なる処理でいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する複数の計算系統と、前記複数の計算系統による計算結果として得られる複数の類似度を一つに統合する類似度統合部とを備える。
【解決手段】この画像処理装置は、文書画像が記憶されたメモリと、文字とその特徴データが対応して格納された認識辞書と、前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、前記前処理部より生成された文字画像を、系統毎に異なる処理でいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する複数の計算系統と、前記複数の計算系統による計算結果として得られる複数の類似度を一つに統合する類似度統合部とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置および画像処理方法に関する。
【背景技術】
【０００２】
画像処理装置としては、例えば画像に含まれる文字を認識する文字認識装置がある。文字認識装置において、複数の特徴量を用いて文字認識を行う技術の一つとして相互部分空間法という認識技術が提唱されている。この認識技術は１枚の文字画像の多様な特徴に着目して認識を行うものである（例えば非特許文献１参照）。
【０００３】
一方、文字画像には、１枚ごとに位置ずれや角度などによる変動要因が存在する。これに対応してパターン認識を行うための一つの手法として部分空間法という技術が公開されているが、その対応能力は必ずしも完全とはいえない（例えば非特許文献２参照）。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】前田賢一、渡辺貞一「局所的構造を導入したパターン・マッチング法」、電子通信学会論文誌Vol.J68-D, No.3, 1985.
【非特許文献２】石井健一郎ほか「わかりやすいパターン認識」(1998)、オーム社
【発明の概要】
【発明が解決しようとする課題】
【０００５】
部分空間法では、例えば学習パターンの中にこれらの変動要因が多く含まれていなければ、実用上は必ずしも大きな対応能力を発揮しないこともあり得る。また、入力画像の変動が余りにも大きい場合、部分空間法といえども対応できず、認識精度が低下する。
【０００６】
本発明はこのような課題を解決するためになされたもので、文字画像から文字を認識する精度を向上することのできる画像処理装置および画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記した課題を解決するために、本発明の画像処理装置は、文書画像が記憶されたメモリと、文字とその特徴データが対応して格納された認識辞書と、前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、前記前処理部より生成された文字画像をいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第１計算系統と、前記文字画像を第１計算系統とは異なる処理でいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第２計算系統と、前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを一つに統合する類似度統合部とを具備することを特徴とする。
【０００８】
本発明の画像処理方法は、文書画像が記憶されたメモリ、文字とその特徴データが対応して格納された認識辞書、前処理部、第１計算系統、第２計算系統、類似度統合部を有する画像処理装置による画像処理方法において、前記メモリから読み出した文書画像を前記前処理部が所定の前処理を施して文字画像を生成するステップと、前記文字画像を前記第１計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、前記第１計算系統とは異なる処理で前記文字画像を前記第２計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを前記類似度統合部が一つに統合するステップとを有することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、文字画像から文字を認識する精度を向上することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施形態の画像処理装置の構成を示す図である。
【図２】画像処理装置の動作を示すフローチャートである。
【図３】４近傍ガウシアンフィルタを説明するための図である。
【図４】８近傍ガウシアンフィルタを説明するための図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して、本発明の一つの実施の形態の画像処理装置を詳細に説明する。
【００１２】
図１に示すように、この実施形態の画像処理装置は、入力部１、コンピュータ２（以下「ＰＣ２」と称す）、出力部３などを有している。
【００１３】
入力部１は、カメラ・スキャナなどの外部入力装置であり、紙の文書(書類)からＣＣＤセンサなどにより光学的に読み取った文書画像をＰＣ２に入力する。出力部３は、例えばモニタなどの表示装置、プリンタなどの印刷装置であり、ＰＣ２から出力された認識結果のデータを出力（表示または印刷）する。
【００１４】
ＰＣ２は、メモリ１０、前処理部１１、パターン生成部１２ａ，１２ｂ、特徴抽出部１３ａ，１３ｂ、認識辞書１４ａ，１４ｂ、部分類似度計算部１５ａ，１５ｂ、類似度統合部１６などを有している。これら各部はコンピュータのハードディスクにインストールされたソフトウェアのモジュールとして実現される。なお、これら各部はハードウェアで構成してもよい。
【００１５】
パターン生成部１２ａ、特徴抽出部１３ａ、認識辞書１４ａ、部分類似度計算部１５ａは、第１計算系統４である。この第１計算系統４は、前処理部１１より生成された文字画像２２をいくつかの文字パターン２３，２４に変化させた上で認識辞書１４ａに格納されている文字２７ａとの類似度を計算する。
【００１６】
パターン生成部１２ｂ、特徴抽出部１３ｂ、認識辞書１４ｂ、部分類似度計算部１５ｂは、第２計算系統５である。この第２計算系統５は、前処理部１１より生成された文字画像２２を第１計算系統４とは異なる処理でいくつかの文字パターン２５，２６に変化させた上で認識辞書１４ａに格納されている文字２７ｂとの類似度を計算する。
第１計算系統４および第２計算系統５は、前処理部１１より生成された文字画像を、系統毎に異なる処理でいくつかのパターンに変化させた上で、対応する認識辞書１４ａ，１４ｂに格納されている文字との類似度を計算する複数の計算系統である。
【００１７】
メモリ１０は、オペレーティングシステム（ＯＳ）などのコンピュータ制御プログラムが読み込まれる領域として利用される他、上記各部による演算用および処理用の記憶領域として利用される。メモリ１０には、例えば比較処理のための画像データや処理結果のデータなどが記憶される。
【００１８】
前処理部１１は、文字認識に使用する画像(文字画像)の部分的な切り出し、二値化、ノイズ除去、輪郭強調などの所定の前処理を行う。前処理部１１は、所定の前処理として、文字画像の部分的な切り出し、二値化、ノイズ除去、輪郭強調などのうちの少なくとも一つを行うものとする。これら個々の画像処理技術については、既知の技術のため詳細な説明は省略する。
【００１９】
パターン生成部１２ａ，１２ｂは、前処理部１１で前処理済みの画像を拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換するなどの画像加工処理を行って、元の文字画像を変化（変形または変質）させた新たな画像を生成する。
パターン生成部１２ａは、文字画像に対して第１画像加工処理を行うことで複数の異なる文字パターン２３，２４を有する第１文字パターン群を生成する。パターン生成部１２ａは、第１画像加工処理として、例えば文字（黒画素）の移動処理を行うものとする。
パターン生成部１２ｂは、文字画像に対して第２画像加工処理を行うことで複数の異なる文字パターン２５，２６を有する第２文字パターン群を生成する。パターン生成部１２ｂは、第２画像加工処理として、例えば文字（黒画素）の移動処理と文字（黒画素）の拡張処理とを行うものとする。文字の移動処理とは、文字の取り得る範囲（文字枠）内で文字の位置をずらす（黒画素を平行移動する）処理である。文字の拡張処理とは文字の線を画素単位で太くする処理である。
【００２０】
特徴抽出部１３ａは、パターン生成部１２ａにより生成された第１文字パターン群の中の個々の文字パターン２３，２４の特徴量（以下特徴データと称す）を抽出する。特徴抽出部１３ｂは、パターン生成部１２ｂにより生成された第２文字パターン群の中の個々の文字パターン２５，２６の特徴量（以下特徴データと称す）を抽出する。
【００２１】
文字画像２３，２４と文字画像２５，２６とは、異なる種別の画像加工処理が行われた結果の画像であるものとする。異なる画像加工処理とは一部に同じ加工処理を含んでいてもよい。
【００２２】
認識辞書１４ａ，１４ｂには、予め複数（多く）の文字とその特徴データが対応して格納されている。認識辞書１４ａには、パターン生成部１２ａで生成される文字パターン２３，２４を認識するための文字２７ａの特徴パターン（特徴データとテキストデータ）が格納されている。認識辞書１４ｂには、パターン生成部１２ｂで生成される文字パターン２５，２６を認識するための文字２７ｂの特徴パターン（特徴データとテキストデータ）が格納されている。
【００２３】
部分類似度計算部１５ａは、特徴抽出部１３ａにより抽出された複数の特徴データと認識辞書１４ａに格納されている文字の特徴データとの類似度を、演算により求める。
部分類似度計算部１５ｂは、特徴抽出部１３ｂにより抽出された複数の特徴データと認識辞書１４ｂに格納されている文字の特徴データとの類似度を、演算により求める。演算とは、メモリ１０に記憶されている式（５）〜式（７）に示す計算式（関数）に、特徴データを入れて計算することをいう。
【００２４】
類似度統合部１６は、第１計算系統４により計算された類似度と第２計算系統５により計算された類似度とを一つに統合する。より具体的には、類似度統合部１６は、部分類似度計算部１５ａ，１５ｂによりそれぞれ計算された複数の部分類似度を一つに統合する。類似度の統合には、メモリ１０に記憶されている式（８）で示す類似度統合関数σを用いる。
【００２５】
以下、図２のフローチャートおよび図３，図４を参照してこの画像処理装置の動作を説明する。
【００２６】
認識対象の文書をカメラ・スキャナなどの入力部１にセットして、デジタルカメラであれば撮影操作、またスキャナであればスキャン操作を行うと、入力部１により文書の画像が読み取られてＰＣ２へデジタル画像（これを「文書画像２１」と称す）として出力される。
【００２７】
入力部１から出力された文書画像２１がＰＣ２に入力されると、その文書画像２１は、前処理部１１により一旦、メモリ１０に記憶される（図２のステップＳ１０１）。
【００２８】
文書画像２１をメモリ１０に記憶した後、前処理部１１は、メモリ１０から文書画像２１を読み出し、読み出した文書画像２１に対して所定の前処理を施して文字認識の対象となる文字画像２２を生成し（ステップＳ１０２）、メモリ１０に記憶する。所定の前処理とは、画像の部分切り出し、二値化、ノイズ除去、輪郭強調などの画像処理のうちの予め決められた処理である。所定の前処理により生成された文字画像２２は、例えば「Ａ」のような文字とする。
【００２９】
パターン生成部１２ａは、メモリ１０から文字画像２２を読み出し、読み出した文字画像２２（前処理済みの画像）に対して第１の画像加工処理を行うことで複数個の異なる文字パターン群（図１の文字パターン２３，２４）を生成し（ステップＳ１０３）、メモリ１０に記憶する。第１の画像加工処理は、画像の拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換などの処理のうち予め決められた処理である。第１の画像加工処理により生成された文字パターン群を第１文字パターン群と言う。
【００３０】
文字パターン２３は、文字画像２２（前処理済みの画像）に対して文字枠内左上に移動された文字「Ａ」である。文字パターン２４は、文字画像２２（前処理済みの画像）に対して文字枠内左下に移動された文字「Ａ」である。
また、パターン生成部１２ａとほぼ同時にパターン生成部１２ｂは、メモリ１０から文字画像２２を読み出し、読み出した文字画像２２（前処理済みの画像）に対して第２の画像加工処理を行うことで複数個の異なる文字パターン群（図１の文字パターン２５,２６）を生成し（ステップＳ１０４）、メモリ１０に記憶する。第２の画像加工処理により生成された文字パターン群を第２文字パターン群と言う。
【００３１】
第２の画像加工処理は、画像の拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換などの処理のうち予め決められた処理であり、第１の画像加工処理とは異なる処理である。
文字パターン２５は、文字画像２２（前処理済みの画像）に対して文字枠内右上に移動されかつ太字とされた文字「Ａ」である。文字パターン２６は、文字画像２２（前処理済みの画像）に対して文字枠内右下に移動されかつ太字とされた文字「Ａ」である。
【００３２】
すなわち、第１の画像加工処理と第２の画像加工処理は、画像の拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換などの処理のうち予め決められた異なる処理である。
【００３３】
特徴抽出部１３ａは、メモリ１０から第１文字パターン群、つまり複数の文字パターン２３，２４を読み出し、読み出した文字パターン２３，２４からそれぞれの特徴データを抽出し（ステップＳ１０５）、メモリ１０に記憶する。これとほぼ同時に特徴抽出部１３ｂは、メモリ１０から第２文字パターン群、つまり複数の文字パターン２５，２６を読み出し、読み出した文字パターン２５，２６からそれぞれの特徴データを抽出し（ステップＳ１０６）、メモリ１０に記憶する。
【００３４】
部分類似度計算部１５ａ，１５ｂは、メモリ１０から文字パターン２３，２４それぞれの特徴データを読み出し、読み出した複数の特徴データと認識辞書１４ａから読み出した文字２７ａの特徴データとを用いて部分類似度を計算し（ステップＳ１０７）、メモリ１０に記憶する。
【００３５】
これとほぼ同時に部分類似度計算部１５ｂは、メモリ１０から文字パターン２５，２６それぞれの特徴データを読み出し、読み出した複数の特徴データと認識辞書１４ｂから読み出した文字２７ｂの特徴データとを用いて部分類似度を計算し（ステップＳ１０８）、メモリ１０に記憶する。
【００３６】
類似度統合部１６は、計算されたそれぞれの文字パターン群の部分類似度をメモリ１０より読み出して統合する（ステップＳ１０９）。
【００３７】
そして、類似度統合部１６は、統合した類似度を用いて、類似度の高い文字を認識辞書１４ａ，１４ｂから選出（ステップＳ１１０）、つまりパターン認識処理を行い、認識結果の文字（テキストデータおよび認識元の文字画像２２）を出力部３へ出力し、出力部３が例えば表示装置であれば、認識結果を表示装置の画面に表示する。
【００３８】
ここで、パターン生成部１２ａ，１２ｂが行う文字パターンの生成処理（画像処理）について説明する。
【００３９】
パターン生成部１２ａ，１２ｂは、前処理部１１で前処理済みの画像を拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換するなどの所定の画像加工処理を行って、元の文字画像２２を切り出し範囲（文字枠の範囲）内で変動（変形または変質）させて新たな画像を複数生成し、生成した複数の画像を画像加工処理の方式に従ってグループ化（グループ分け）する。
【００４０】
例えば１つ目のグループは前処理済画像に拡張処理を施したもの、２つ目のグループは前処理済画像に収縮処理を施したもの、３つ目のグループは前処理済画像に回転処理を施したもの、といったグループ分けが考えられる。
【００４１】
画像拡張処理の一例として、例えば各画素について、その画素または上下左右４画素のうち１つ以上が黒ならばその画素も黒とするといった処理を行う。
【００４２】
画像収縮処理の一例として、例えば各画素について、その画素または上下左右４画素のうち１つ以上が白ならばその画素も白とする（収縮）といった処理を行う。
【００４３】
画像の回転および移動については、前処理済みの画像において座標ｘの画素値をｆ（ｘ）で表したとき、
【数１】
で表されるＲｕ［ｆ］，Ｓｓ［ｆ］をそれぞれ、回転行列Ｕおよび移動量ｓをパラメータとする回転済み、または移動済み画像とすることができる。この処理によって、座標Ｕ-1ｘ,（ｘ−ｓ）にあった黒点が座標ｘの位置にそれぞれ回転・平行移動する。
【００４４】
画像の回転については、例えば１０度刻みに９０度までといったようにして回転する。また画像の移動については、例えば前処理済画像の辺や対角線の長さを基準に、例えば１／４などといった比率を用いて移動する。
【００４５】
画像のぼかし、手ぶれ処理については、これらを実現する点拡がり関数（ＰＳＦ）を準備し、前処理済みの画像に畳み込み処理を行い、それを再度二値化する。
【００４６】
ぼかしに対応する点拡がり関数（ＰＳＦ）は、図３に示すように、中心画素とその周囲８方向に隣接する画素とを配置した９画素モデルにおいて、中心の画素を「２」としたときに、その上下左右の画素を「１」とし、斜め方向の画素を「０」とする４近傍ガウシアンフィルタがある。
【００４７】
また、この他、図４に示すように、中心画素とその周囲８方向に隣接する画素とを配置した９画素モデルにおいて、中心の画素を「４」としたときに、その上下左右の画素を「２」とし、斜め方向の画素を「１」とする８近傍ガウシアンフィルタなどを用いる。
【００４８】
手ぶれに対応する点拡がり関数（ＰＳＦ）としては、原点Ｏの近傍に一点Ｐを選び、
【数２】
として作ることができる。点拡がり関数（ＰＳＦ）として１（ｙ）を原画像ｆ（ｘ）に畳み込む処理は、
【数３】
と表せる。上記ｈ（ｘ）が畳み込み処理後の画像である。
【００４９】
透視変換は、射影変換の名で広く知られており、一般的な射影幾何学の文献、例えば川又雄二郎「射影空間の幾何学」(2001)、朝倉書店等に開示されている射影変換の技術を利用するものとする。
【００５０】
特徴抽出部１３ａ，１３ｂが前処理済みの画像（文字パターン２３，２４または２５，２６）から特徴量を抽出する処理を以下に示す。
例えば、画像に前述の方法でぼかし処理を施した上で、そのぼかし処理した画像を、画素値を成分とするベクトルとみなしてそのまま特徴量とする方法がある。このとき、上記画像のグループ毎に、異なった特徴抽出を行ってもよい。
【００５１】
また、部分類似度計算部１５ａ，１５ｂがパターン認識処理を行う方法および認識辞書１４ａ，１４ｂの作成方法としては、非特許文献２に開示されているＣＬＡＦＩＣ法に基づいて認識辞書１４ａ，１４ｂを作成した上で、複数の生成パターンの特徴量と、認識辞書１４ａ，１４ｂに登録済みの文字種との類似度を、相互部分空間法などを用いて計算する。
【００５２】
相互部分空間法を用いた類似度の計算方法としては、例えば特徴抽出部１３ａ，１３ｂから入力された複数の特徴ベクトルのグループαの元
【数４】
を計算し、その固有ベクトルをｕα１，ｕαｍとした上で、０≦ｐ≦ｍ，０≦ｑ≦ｎとなる整数ｐ、ｑを選んだ上で、行列Ｕｐ＝（ｕα１，…ｕαｐ），Ｖｑ＝（ｖ１…ｖｑ）を用いて定義される
【数５】
の最大固有値ραを求め、このραを類似度とする。ただし、左肩のtは転置を表す。このときραは、例えば二宮市三編著「数値計算のわざ」（2006）、共立出版）などに開示されている累乗法などの既知の計算方法を用いて計算する。ただし、ｖ1 ，ｖn は辞書データであり、これは各文字種毎に予め準備した学習パターンｙ1，…，ｙnを用いて行列
【数６】
を計算し、その固有ベクトルをｖ1 ，ｖn とすることで計算できる。
【００５３】
この例では、認識辞書１４ａ，１４ｂは、各パターン生成部１２ａ，１２ｂに対応する部分類似度計算部１５ａ、１５ｂごとに別の学習パターンを用意して個別に設けているが、全ての部分類似度計算部１５ａ、１５ｂにおいて共通の認識辞書を用いてもよい。
【００５４】
類似度計算統合部１６の処理としては、各グループの部分類似度がρ1，…，ρμと表されるとき、ある類似度統合関数σを用いて
【数７】
と定まるρを類似度とする。
【００５５】
このとき、類似度統合関数σの定め方としては、部分類似度のうち最大のものを選ぶ方法、部分類似度が大きい順にいくつかを選びこれを平均する方法、部分類似度全体の平均を取る方法がある。また、選択した部分類似度に直接平均操作を施すかわりに、一度単調増加関数を用いて部分類似度の差を強調してもよい。
【００５６】
そのためには、単調増加関数τを用いて
【数８】
などとする方法がある。ただし、ｒは１≦ｒ≦μとなる整数であり、ρt(s)は、ρ1，…，ρμのうち大きいものからs番目の値である。
【００５７】
さらに、τの例としては
【数９】
などが挙げられる。ただし、ρ0 ，βは定数として適当なものを別途選ぶ。
【００５８】
類似度統合部１６の別の実現方法として、非特許文献２に開示されているニューラルネットなどの既存の方法を用いてもよい。また、部分類似度計算部１５ａ，１５ｂおよび類似度統合部１６において、顕著に類似度が高い文字種が存在しない場合、結果不明としてこれをリジェクトしてもよい。
【００５９】
このようにこの実施形態の画像処理装置によれば、認識対象の文字画像の文字（黒画素）について積極的に部分的な変化（黒画素を所定のルールでずらしたり太くしたりする等）を起こさせた異なる文字パターンを含む文字パターン群を複数生成し、それぞれの文字パターン群の複数の特徴データと対応する認識辞書１４ａ，１４ｂの特徴データとの部分類似度を計算し、得られた部分類似度を一つに統合するので、文字認識精度を向上することができる。
【００６０】
なお、本願発明は、上記実施形態のみに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形してもよい。
上記実施形態では、第１計算系統４と第２計算系統５の２つの計算系統を例示したが、この他、例えば第３計算系統、第４計算系統を加えても良く、その以上、多数（複数）の計算系統を加え、各計算系統の計算で得られた複数の類似度を統合しても良い。
この場合、複数の計算系統は、前処理部１１より生成された文字画像を、系統毎に異なる処理でいくつかのパターンに変化させた上で、それぞれ対応する認識辞書１４ａ，１４ｂに格納されている文字との類似度を計算することになる。また類似度統合部６は、複数の計算系統による計算結果として得られる複数の類似度を一つに統合することになる。
【００６１】
また、上記実施形態の各構成要素を、コンピュータのハードディスク装置などのストレージにインストールしたプログラムで実現してもよい。
さらに、プログラムを、コンピュータ読取可能なＣＤ−ＲＯＭなどの記憶媒体に記憶しておき、プログラムを記憶媒体からコンピュータに読み取らせることで実現してもよい。さらに、ネットワークを介して接続した異なるコンピュータに構成要素を分散して記憶し、各構成要素を機能させたコンピュータ間で通信することで実現してもよい。
【符号の説明】
【００６２】
１…入力部、２…コンピュータ（ＰＣ）、３…出力部、４…第１計算系統、５…第２計算系統、１０…メモリ、１１…前処理部、１２ａ，１２ｂ…パターン生成部、１３ａ，１３ｂ…特徴抽出部、１４ａ，１４ｂ…認識辞書、１５ａ，１５ｂ…部分類似度計算部、１６…類似度統合部。
【技術分野】
【０００１】
本発明は、画像処理装置および画像処理方法に関する。
【背景技術】
【０００２】
画像処理装置としては、例えば画像に含まれる文字を認識する文字認識装置がある。文字認識装置において、複数の特徴量を用いて文字認識を行う技術の一つとして相互部分空間法という認識技術が提唱されている。この認識技術は１枚の文字画像の多様な特徴に着目して認識を行うものである（例えば非特許文献１参照）。
【０００３】
一方、文字画像には、１枚ごとに位置ずれや角度などによる変動要因が存在する。これに対応してパターン認識を行うための一つの手法として部分空間法という技術が公開されているが、その対応能力は必ずしも完全とはいえない（例えば非特許文献２参照）。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】前田賢一、渡辺貞一「局所的構造を導入したパターン・マッチング法」、電子通信学会論文誌Vol.J68-D, No.3, 1985.
【非特許文献２】石井健一郎ほか「わかりやすいパターン認識」(1998)、オーム社
【発明の概要】
【発明が解決しようとする課題】
【０００５】
部分空間法では、例えば学習パターンの中にこれらの変動要因が多く含まれていなければ、実用上は必ずしも大きな対応能力を発揮しないこともあり得る。また、入力画像の変動が余りにも大きい場合、部分空間法といえども対応できず、認識精度が低下する。
【０００６】
本発明はこのような課題を解決するためになされたもので、文字画像から文字を認識する精度を向上することのできる画像処理装置および画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記した課題を解決するために、本発明の画像処理装置は、文書画像が記憶されたメモリと、文字とその特徴データが対応して格納された認識辞書と、前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、前記前処理部より生成された文字画像をいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第１計算系統と、前記文字画像を第１計算系統とは異なる処理でいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第２計算系統と、前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを一つに統合する類似度統合部とを具備することを特徴とする。
【０００８】
本発明の画像処理方法は、文書画像が記憶されたメモリ、文字とその特徴データが対応して格納された認識辞書、前処理部、第１計算系統、第２計算系統、類似度統合部を有する画像処理装置による画像処理方法において、前記メモリから読み出した文書画像を前記前処理部が所定の前処理を施して文字画像を生成するステップと、前記文字画像を前記第１計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、前記第１計算系統とは異なる処理で前記文字画像を前記第２計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを前記類似度統合部が一つに統合するステップとを有することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、文字画像から文字を認識する精度を向上することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施形態の画像処理装置の構成を示す図である。
【図２】画像処理装置の動作を示すフローチャートである。
【図３】４近傍ガウシアンフィルタを説明するための図である。
【図４】８近傍ガウシアンフィルタを説明するための図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して、本発明の一つの実施の形態の画像処理装置を詳細に説明する。
【００１２】
図１に示すように、この実施形態の画像処理装置は、入力部１、コンピュータ２（以下「ＰＣ２」と称す）、出力部３などを有している。
【００１３】
入力部１は、カメラ・スキャナなどの外部入力装置であり、紙の文書(書類)からＣＣＤセンサなどにより光学的に読み取った文書画像をＰＣ２に入力する。出力部３は、例えばモニタなどの表示装置、プリンタなどの印刷装置であり、ＰＣ２から出力された認識結果のデータを出力（表示または印刷）する。
【００１４】
ＰＣ２は、メモリ１０、前処理部１１、パターン生成部１２ａ，１２ｂ、特徴抽出部１３ａ，１３ｂ、認識辞書１４ａ，１４ｂ、部分類似度計算部１５ａ，１５ｂ、類似度統合部１６などを有している。これら各部はコンピュータのハードディスクにインストールされたソフトウェアのモジュールとして実現される。なお、これら各部はハードウェアで構成してもよい。
【００１５】
パターン生成部１２ａ、特徴抽出部１３ａ、認識辞書１４ａ、部分類似度計算部１５ａは、第１計算系統４である。この第１計算系統４は、前処理部１１より生成された文字画像２２をいくつかの文字パターン２３，２４に変化させた上で認識辞書１４ａに格納されている文字２７ａとの類似度を計算する。
【００１６】
パターン生成部１２ｂ、特徴抽出部１３ｂ、認識辞書１４ｂ、部分類似度計算部１５ｂは、第２計算系統５である。この第２計算系統５は、前処理部１１より生成された文字画像２２を第１計算系統４とは異なる処理でいくつかの文字パターン２５，２６に変化させた上で認識辞書１４ａに格納されている文字２７ｂとの類似度を計算する。
第１計算系統４および第２計算系統５は、前処理部１１より生成された文字画像を、系統毎に異なる処理でいくつかのパターンに変化させた上で、対応する認識辞書１４ａ，１４ｂに格納されている文字との類似度を計算する複数の計算系統である。
【００１７】
メモリ１０は、オペレーティングシステム（ＯＳ）などのコンピュータ制御プログラムが読み込まれる領域として利用される他、上記各部による演算用および処理用の記憶領域として利用される。メモリ１０には、例えば比較処理のための画像データや処理結果のデータなどが記憶される。
【００１８】
前処理部１１は、文字認識に使用する画像(文字画像)の部分的な切り出し、二値化、ノイズ除去、輪郭強調などの所定の前処理を行う。前処理部１１は、所定の前処理として、文字画像の部分的な切り出し、二値化、ノイズ除去、輪郭強調などのうちの少なくとも一つを行うものとする。これら個々の画像処理技術については、既知の技術のため詳細な説明は省略する。
【００１９】
パターン生成部１２ａ，１２ｂは、前処理部１１で前処理済みの画像を拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換するなどの画像加工処理を行って、元の文字画像を変化（変形または変質）させた新たな画像を生成する。
パターン生成部１２ａは、文字画像に対して第１画像加工処理を行うことで複数の異なる文字パターン２３，２４を有する第１文字パターン群を生成する。パターン生成部１２ａは、第１画像加工処理として、例えば文字（黒画素）の移動処理を行うものとする。
パターン生成部１２ｂは、文字画像に対して第２画像加工処理を行うことで複数の異なる文字パターン２５，２６を有する第２文字パターン群を生成する。パターン生成部１２ｂは、第２画像加工処理として、例えば文字（黒画素）の移動処理と文字（黒画素）の拡張処理とを行うものとする。文字の移動処理とは、文字の取り得る範囲（文字枠）内で文字の位置をずらす（黒画素を平行移動する）処理である。文字の拡張処理とは文字の線を画素単位で太くする処理である。
【００２０】
特徴抽出部１３ａは、パターン生成部１２ａにより生成された第１文字パターン群の中の個々の文字パターン２３，２４の特徴量（以下特徴データと称す）を抽出する。特徴抽出部１３ｂは、パターン生成部１２ｂにより生成された第２文字パターン群の中の個々の文字パターン２５，２６の特徴量（以下特徴データと称す）を抽出する。
【００２１】
文字画像２３，２４と文字画像２５，２６とは、異なる種別の画像加工処理が行われた結果の画像であるものとする。異なる画像加工処理とは一部に同じ加工処理を含んでいてもよい。
【００２２】
認識辞書１４ａ，１４ｂには、予め複数（多く）の文字とその特徴データが対応して格納されている。認識辞書１４ａには、パターン生成部１２ａで生成される文字パターン２３，２４を認識するための文字２７ａの特徴パターン（特徴データとテキストデータ）が格納されている。認識辞書１４ｂには、パターン生成部１２ｂで生成される文字パターン２５，２６を認識するための文字２７ｂの特徴パターン（特徴データとテキストデータ）が格納されている。
【００２３】
部分類似度計算部１５ａは、特徴抽出部１３ａにより抽出された複数の特徴データと認識辞書１４ａに格納されている文字の特徴データとの類似度を、演算により求める。
部分類似度計算部１５ｂは、特徴抽出部１３ｂにより抽出された複数の特徴データと認識辞書１４ｂに格納されている文字の特徴データとの類似度を、演算により求める。演算とは、メモリ１０に記憶されている式（５）〜式（７）に示す計算式（関数）に、特徴データを入れて計算することをいう。
【００２４】
類似度統合部１６は、第１計算系統４により計算された類似度と第２計算系統５により計算された類似度とを一つに統合する。より具体的には、類似度統合部１６は、部分類似度計算部１５ａ，１５ｂによりそれぞれ計算された複数の部分類似度を一つに統合する。類似度の統合には、メモリ１０に記憶されている式（８）で示す類似度統合関数σを用いる。
【００２５】
以下、図２のフローチャートおよび図３，図４を参照してこの画像処理装置の動作を説明する。
【００２６】
認識対象の文書をカメラ・スキャナなどの入力部１にセットして、デジタルカメラであれば撮影操作、またスキャナであればスキャン操作を行うと、入力部１により文書の画像が読み取られてＰＣ２へデジタル画像（これを「文書画像２１」と称す）として出力される。
【００２７】
入力部１から出力された文書画像２１がＰＣ２に入力されると、その文書画像２１は、前処理部１１により一旦、メモリ１０に記憶される（図２のステップＳ１０１）。
【００２８】
文書画像２１をメモリ１０に記憶した後、前処理部１１は、メモリ１０から文書画像２１を読み出し、読み出した文書画像２１に対して所定の前処理を施して文字認識の対象となる文字画像２２を生成し（ステップＳ１０２）、メモリ１０に記憶する。所定の前処理とは、画像の部分切り出し、二値化、ノイズ除去、輪郭強調などの画像処理のうちの予め決められた処理である。所定の前処理により生成された文字画像２２は、例えば「Ａ」のような文字とする。
【００２９】
パターン生成部１２ａは、メモリ１０から文字画像２２を読み出し、読み出した文字画像２２（前処理済みの画像）に対して第１の画像加工処理を行うことで複数個の異なる文字パターン群（図１の文字パターン２３，２４）を生成し（ステップＳ１０３）、メモリ１０に記憶する。第１の画像加工処理は、画像の拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換などの処理のうち予め決められた処理である。第１の画像加工処理により生成された文字パターン群を第１文字パターン群と言う。
【００３０】
文字パターン２３は、文字画像２２（前処理済みの画像）に対して文字枠内左上に移動された文字「Ａ」である。文字パターン２４は、文字画像２２（前処理済みの画像）に対して文字枠内左下に移動された文字「Ａ」である。
また、パターン生成部１２ａとほぼ同時にパターン生成部１２ｂは、メモリ１０から文字画像２２を読み出し、読み出した文字画像２２（前処理済みの画像）に対して第２の画像加工処理を行うことで複数個の異なる文字パターン群（図１の文字パターン２５,２６）を生成し（ステップＳ１０４）、メモリ１０に記憶する。第２の画像加工処理により生成された文字パターン群を第２文字パターン群と言う。
【００３１】
第２の画像加工処理は、画像の拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換などの処理のうち予め決められた処理であり、第１の画像加工処理とは異なる処理である。
文字パターン２５は、文字画像２２（前処理済みの画像）に対して文字枠内右上に移動されかつ太字とされた文字「Ａ」である。文字パターン２６は、文字画像２２（前処理済みの画像）に対して文字枠内右下に移動されかつ太字とされた文字「Ａ」である。
【００３２】
すなわち、第１の画像加工処理と第２の画像加工処理は、画像の拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換などの処理のうち予め決められた異なる処理である。
【００３３】
特徴抽出部１３ａは、メモリ１０から第１文字パターン群、つまり複数の文字パターン２３，２４を読み出し、読み出した文字パターン２３，２４からそれぞれの特徴データを抽出し（ステップＳ１０５）、メモリ１０に記憶する。これとほぼ同時に特徴抽出部１３ｂは、メモリ１０から第２文字パターン群、つまり複数の文字パターン２５，２６を読み出し、読み出した文字パターン２５，２６からそれぞれの特徴データを抽出し（ステップＳ１０６）、メモリ１０に記憶する。
【００３４】
部分類似度計算部１５ａ，１５ｂは、メモリ１０から文字パターン２３，２４それぞれの特徴データを読み出し、読み出した複数の特徴データと認識辞書１４ａから読み出した文字２７ａの特徴データとを用いて部分類似度を計算し（ステップＳ１０７）、メモリ１０に記憶する。
【００３５】
これとほぼ同時に部分類似度計算部１５ｂは、メモリ１０から文字パターン２５，２６それぞれの特徴データを読み出し、読み出した複数の特徴データと認識辞書１４ｂから読み出した文字２７ｂの特徴データとを用いて部分類似度を計算し（ステップＳ１０８）、メモリ１０に記憶する。
【００３６】
類似度統合部１６は、計算されたそれぞれの文字パターン群の部分類似度をメモリ１０より読み出して統合する（ステップＳ１０９）。
【００３７】
そして、類似度統合部１６は、統合した類似度を用いて、類似度の高い文字を認識辞書１４ａ，１４ｂから選出（ステップＳ１１０）、つまりパターン認識処理を行い、認識結果の文字（テキストデータおよび認識元の文字画像２２）を出力部３へ出力し、出力部３が例えば表示装置であれば、認識結果を表示装置の画面に表示する。
【００３８】
ここで、パターン生成部１２ａ，１２ｂが行う文字パターンの生成処理（画像処理）について説明する。
【００３９】
パターン生成部１２ａ，１２ｂは、前処理部１１で前処理済みの画像を拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換するなどの所定の画像加工処理を行って、元の文字画像２２を切り出し範囲（文字枠の範囲）内で変動（変形または変質）させて新たな画像を複数生成し、生成した複数の画像を画像加工処理の方式に従ってグループ化（グループ分け）する。
【００４０】
例えば１つ目のグループは前処理済画像に拡張処理を施したもの、２つ目のグループは前処理済画像に収縮処理を施したもの、３つ目のグループは前処理済画像に回転処理を施したもの、といったグループ分けが考えられる。
【００４１】
画像拡張処理の一例として、例えば各画素について、その画素または上下左右４画素のうち１つ以上が黒ならばその画素も黒とするといった処理を行う。
【００４２】
画像収縮処理の一例として、例えば各画素について、その画素または上下左右４画素のうち１つ以上が白ならばその画素も白とする（収縮）といった処理を行う。
【００４３】
画像の回転および移動については、前処理済みの画像において座標ｘの画素値をｆ（ｘ）で表したとき、
【数１】
で表されるＲｕ［ｆ］，Ｓｓ［ｆ］をそれぞれ、回転行列Ｕおよび移動量ｓをパラメータとする回転済み、または移動済み画像とすることができる。この処理によって、座標Ｕ-1ｘ,（ｘ−ｓ）にあった黒点が座標ｘの位置にそれぞれ回転・平行移動する。
【００４４】
画像の回転については、例えば１０度刻みに９０度までといったようにして回転する。また画像の移動については、例えば前処理済画像の辺や対角線の長さを基準に、例えば１／４などといった比率を用いて移動する。
【００４５】
画像のぼかし、手ぶれ処理については、これらを実現する点拡がり関数（ＰＳＦ）を準備し、前処理済みの画像に畳み込み処理を行い、それを再度二値化する。
【００４６】
ぼかしに対応する点拡がり関数（ＰＳＦ）は、図３に示すように、中心画素とその周囲８方向に隣接する画素とを配置した９画素モデルにおいて、中心の画素を「２」としたときに、その上下左右の画素を「１」とし、斜め方向の画素を「０」とする４近傍ガウシアンフィルタがある。
【００４７】
また、この他、図４に示すように、中心画素とその周囲８方向に隣接する画素とを配置した９画素モデルにおいて、中心の画素を「４」としたときに、その上下左右の画素を「２」とし、斜め方向の画素を「１」とする８近傍ガウシアンフィルタなどを用いる。
【００４８】
手ぶれに対応する点拡がり関数（ＰＳＦ）としては、原点Ｏの近傍に一点Ｐを選び、
【数２】
として作ることができる。点拡がり関数（ＰＳＦ）として１（ｙ）を原画像ｆ（ｘ）に畳み込む処理は、
【数３】
と表せる。上記ｈ（ｘ）が畳み込み処理後の画像である。
【００４９】
透視変換は、射影変換の名で広く知られており、一般的な射影幾何学の文献、例えば川又雄二郎「射影空間の幾何学」(2001)、朝倉書店等に開示されている射影変換の技術を利用するものとする。
【００５０】
特徴抽出部１３ａ，１３ｂが前処理済みの画像（文字パターン２３，２４または２５，２６）から特徴量を抽出する処理を以下に示す。
例えば、画像に前述の方法でぼかし処理を施した上で、そのぼかし処理した画像を、画素値を成分とするベクトルとみなしてそのまま特徴量とする方法がある。このとき、上記画像のグループ毎に、異なった特徴抽出を行ってもよい。
【００５１】
また、部分類似度計算部１５ａ，１５ｂがパターン認識処理を行う方法および認識辞書１４ａ，１４ｂの作成方法としては、非特許文献２に開示されているＣＬＡＦＩＣ法に基づいて認識辞書１４ａ，１４ｂを作成した上で、複数の生成パターンの特徴量と、認識辞書１４ａ，１４ｂに登録済みの文字種との類似度を、相互部分空間法などを用いて計算する。
【００５２】
相互部分空間法を用いた類似度の計算方法としては、例えば特徴抽出部１３ａ，１３ｂから入力された複数の特徴ベクトルのグループαの元
【数４】
を計算し、その固有ベクトルをｕα１，ｕαｍとした上で、０≦ｐ≦ｍ，０≦ｑ≦ｎとなる整数ｐ、ｑを選んだ上で、行列Ｕｐ＝（ｕα１，…ｕαｐ），Ｖｑ＝（ｖ１…ｖｑ）を用いて定義される
【数５】
の最大固有値ραを求め、このραを類似度とする。ただし、左肩のtは転置を表す。このときραは、例えば二宮市三編著「数値計算のわざ」（2006）、共立出版）などに開示されている累乗法などの既知の計算方法を用いて計算する。ただし、ｖ1 ，ｖn は辞書データであり、これは各文字種毎に予め準備した学習パターンｙ1，…，ｙnを用いて行列
【数６】
を計算し、その固有ベクトルをｖ1 ，ｖn とすることで計算できる。
【００５３】
この例では、認識辞書１４ａ，１４ｂは、各パターン生成部１２ａ，１２ｂに対応する部分類似度計算部１５ａ、１５ｂごとに別の学習パターンを用意して個別に設けているが、全ての部分類似度計算部１５ａ、１５ｂにおいて共通の認識辞書を用いてもよい。
【００５４】
類似度計算統合部１６の処理としては、各グループの部分類似度がρ1，…，ρμと表されるとき、ある類似度統合関数σを用いて
【数７】
と定まるρを類似度とする。
【００５５】
このとき、類似度統合関数σの定め方としては、部分類似度のうち最大のものを選ぶ方法、部分類似度が大きい順にいくつかを選びこれを平均する方法、部分類似度全体の平均を取る方法がある。また、選択した部分類似度に直接平均操作を施すかわりに、一度単調増加関数を用いて部分類似度の差を強調してもよい。
【００５６】
そのためには、単調増加関数τを用いて
【数８】
などとする方法がある。ただし、ｒは１≦ｒ≦μとなる整数であり、ρt(s)は、ρ1，…，ρμのうち大きいものからs番目の値である。
【００５７】
さらに、τの例としては
【数９】
などが挙げられる。ただし、ρ0 ，βは定数として適当なものを別途選ぶ。
【００５８】
類似度統合部１６の別の実現方法として、非特許文献２に開示されているニューラルネットなどの既存の方法を用いてもよい。また、部分類似度計算部１５ａ，１５ｂおよび類似度統合部１６において、顕著に類似度が高い文字種が存在しない場合、結果不明としてこれをリジェクトしてもよい。
【００５９】
このようにこの実施形態の画像処理装置によれば、認識対象の文字画像の文字（黒画素）について積極的に部分的な変化（黒画素を所定のルールでずらしたり太くしたりする等）を起こさせた異なる文字パターンを含む文字パターン群を複数生成し、それぞれの文字パターン群の複数の特徴データと対応する認識辞書１４ａ，１４ｂの特徴データとの部分類似度を計算し、得られた部分類似度を一つに統合するので、文字認識精度を向上することができる。
【００６０】
なお、本願発明は、上記実施形態のみに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形してもよい。
上記実施形態では、第１計算系統４と第２計算系統５の２つの計算系統を例示したが、この他、例えば第３計算系統、第４計算系統を加えても良く、その以上、多数（複数）の計算系統を加え、各計算系統の計算で得られた複数の類似度を統合しても良い。
この場合、複数の計算系統は、前処理部１１より生成された文字画像を、系統毎に異なる処理でいくつかのパターンに変化させた上で、それぞれ対応する認識辞書１４ａ，１４ｂに格納されている文字との類似度を計算することになる。また類似度統合部６は、複数の計算系統による計算結果として得られる複数の類似度を一つに統合することになる。
【００６１】
また、上記実施形態の各構成要素を、コンピュータのハードディスク装置などのストレージにインストールしたプログラムで実現してもよい。
さらに、プログラムを、コンピュータ読取可能なＣＤ−ＲＯＭなどの記憶媒体に記憶しておき、プログラムを記憶媒体からコンピュータに読み取らせることで実現してもよい。さらに、ネットワークを介して接続した異なるコンピュータに構成要素を分散して記憶し、各構成要素を機能させたコンピュータ間で通信することで実現してもよい。
【符号の説明】
【００６２】
１…入力部、２…コンピュータ（ＰＣ）、３…出力部、４…第１計算系統、５…第２計算系統、１０…メモリ、１１…前処理部、１２ａ，１２ｂ…パターン生成部、１３ａ，１３ｂ…特徴抽出部、１４ａ，１４ｂ…認識辞書、１５ａ，１５ｂ…部分類似度計算部、１６…類似度統合部。
【特許請求の範囲】
【請求項１】
文書画像が記憶されたメモリと、
文字とその特徴データが対応して格納された認識辞書と、
前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、
前記前処理部より生成された文字画像をいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第１計算系統と、
前記文字画像を第１計算系統とは異なる処理でいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第２計算系統と、
前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを一つに統合する類似度統合部と
を具備することを特徴とする画像処理装置。
【請求項２】
文書画像が記憶されたメモリと、
文字とその特徴データが対応して格納された認識辞書と、
前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、
前記前処理部より生成された文字画像に対して第１画像加工処理を行うことで複数の異なる文字パターンを有する第１文字パターン群を生成する第１パターン生成部と、
前記前処理部より生成された文字画像に対して第２画像加工処理を行うことで複数の異なる文字パターンを有する第２文字パターン群を生成する第２パターン生成部と、
前記第１パターン生成部により生成された第１文字パターン群の複数の文字パターンそれぞれから特徴データを抽出する第１特徴抽出部と、
前記第２パターン生成部により生成された第２文字パターン群の複数の文字パターンそれぞれからから特徴データを抽出する第２特徴抽出部と、
前記第１特徴抽出部より抽出された複数の特徴データと前記認識辞書に格納されている文字の特徴データとの類似度を計算する第１類似度計算部と、
前記第２特徴抽出部より抽出された複数の特徴データと前記認識辞書に格納されている文字の特徴データとの類似度を計算する第２類似度計算部と、
前記第１類似度計算部により計算された類似度と前記第２類似度計算部により計算された類似度とを所定の類似度統合関数により一つに統合する類似度統合部と
を具備することを特徴とする画像処理装置。
【請求項３】
請求項１乃至２いずれか記載の画像処理装置において、
前記前処理部は、
所定の前処理として、前記文字画像の部分的な切り出し、二値化、ノイズ除去、輪郭強調などのうちの少なくとも一つを行うことを特徴とする画像処理装置。
【請求項４】
請求項２記載の画像処理装置において、
前記第１パターン生成部は、
前記第１画像加工処理として、拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換のうちの少なくとも一つを行い、
前記第２パターン生成部は、
前記第２画像加工処理として、拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換のうち、前記第１画像加工処理とは異なる画像加工処理を行うことを特徴とする画像処理装置。
【請求項５】
請求項１乃至２いずれか記載の画像処理装置において、
前記類似度統合部は、
各文字パターン群の類似度がρ1，…，ρμと表されるとき、類似度統合関数σを用いて、類似度ρをσ（ρ1，…，ρμ）という計算式で計算することを特徴とする画像処理装置。
【請求項６】
請求項１乃至２いずれか記載の画像処理装置において、
前記類似度統合部は、
統合した類似度を用いて、類似度の高い文字を認識辞書から選出することを特徴とする画像処理装置。
【請求項７】
文書画像が記憶されたメモリ、文字とその特徴データが対応して格納された認識辞書、前処理部、第１計算系統、第２計算系統、類似度統合部を有する画像処理装置による画像処理方法において、
前記メモリから読み出した文書画像を前記前処理部が所定の前処理を施して文字画像を生成するステップと、
前記文字画像を前記第１計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、
前記第１計算系統とは異なる処理で前記文字画像を前記第２計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、
前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを前記類似度統合部が一つに統合するステップと
を有することを特徴とする画像処理方法。
【請求項８】
文書画像が記憶されたメモリ、文字とその特徴データが対応して格納された認識辞書、前処理部、第１パターン生成部、第２パターン生成部、第１特徴抽出部、第２特徴抽出部、第１類似度計算部、第２類似度計算部、類似度統合部を有する画像処理装置による画像処理方法において、
前記メモリから文書画像を前記前処理部が読み出し、読み出した前記文書画像に対して所定の前処理を施して文字画像を生成するステップと、
前記文字画像に対して前記 第１パターン生成部が第１画像加工処理を行うことで複数の異なる文字パターンを有する第１文字パターン群を生成するステップと、
前記文字画像に対して前記 第２パターン生成部が第２画像加工処理を行うことで複数の異なる文字パターンを有する第２文字パターン群を生成するステップと、
前記第１画像加工処理を行うことにより生成された第１文字パターン群の複数の文字パターンそれぞれから前記第１特徴抽出部が特徴データを抽出する前記複数の文字パターンからそれぞれの特徴データを抽出するステップと、
前記第２画像加工処理を行うことにより生成された第２文字パターン群の複数の文字パターンそれぞれから前記第２特徴抽出部が特徴データを抽出するステップと、
前記第１特徴抽出部により抽出された前記複数の特徴データと、前記認識辞書の文字の特徴データとの類似度を前記第１類似度計算部が計算するステップと、
前記第２特徴抽出部により抽出された前記複数の特徴データと、前記認識辞書の文字の特徴データとの類似度を前記第２類似度計算部が計算するステップと、
前記第１類似度計算部により計算された類似度と前記第２類似度計算部により計算された類似度とを前記類似度統合部が一つに統合するステップと
を有することを特徴とする画像処理方法。
【請求項１】
文書画像が記憶されたメモリと、
文字とその特徴データが対応して格納された認識辞書と、
前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、
前記前処理部より生成された文字画像をいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第１計算系統と、
前記文字画像を第１計算系統とは異なる処理でいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算する第２計算系統と、
前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを一つに統合する類似度統合部と
を具備することを特徴とする画像処理装置。
【請求項２】
文書画像が記憶されたメモリと、
文字とその特徴データが対応して格納された認識辞書と、
前記メモリから読み出した文書画像に対して所定の前処理を施して文字画像を生成する前処理部と、
前記前処理部より生成された文字画像に対して第１画像加工処理を行うことで複数の異なる文字パターンを有する第１文字パターン群を生成する第１パターン生成部と、
前記前処理部より生成された文字画像に対して第２画像加工処理を行うことで複数の異なる文字パターンを有する第２文字パターン群を生成する第２パターン生成部と、
前記第１パターン生成部により生成された第１文字パターン群の複数の文字パターンそれぞれから特徴データを抽出する第１特徴抽出部と、
前記第２パターン生成部により生成された第２文字パターン群の複数の文字パターンそれぞれからから特徴データを抽出する第２特徴抽出部と、
前記第１特徴抽出部より抽出された複数の特徴データと前記認識辞書に格納されている文字の特徴データとの類似度を計算する第１類似度計算部と、
前記第２特徴抽出部より抽出された複数の特徴データと前記認識辞書に格納されている文字の特徴データとの類似度を計算する第２類似度計算部と、
前記第１類似度計算部により計算された類似度と前記第２類似度計算部により計算された類似度とを所定の類似度統合関数により一つに統合する類似度統合部と
を具備することを特徴とする画像処理装置。
【請求項３】
請求項１乃至２いずれか記載の画像処理装置において、
前記前処理部は、
所定の前処理として、前記文字画像の部分的な切り出し、二値化、ノイズ除去、輪郭強調などのうちの少なくとも一つを行うことを特徴とする画像処理装置。
【請求項４】
請求項２記載の画像処理装置において、
前記第１パターン生成部は、
前記第１画像加工処理として、拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換のうちの少なくとも一つを行い、
前記第２パターン生成部は、
前記第２画像加工処理として、拡張・収縮・回転・移動・ぼかし・手ぶれ・透視変換のうち、前記第１画像加工処理とは異なる画像加工処理を行うことを特徴とする画像処理装置。
【請求項５】
請求項１乃至２いずれか記載の画像処理装置において、
前記類似度統合部は、
各文字パターン群の類似度がρ1，…，ρμと表されるとき、類似度統合関数σを用いて、類似度ρをσ（ρ1，…，ρμ）という計算式で計算することを特徴とする画像処理装置。
【請求項６】
請求項１乃至２いずれか記載の画像処理装置において、
前記類似度統合部は、
統合した類似度を用いて、類似度の高い文字を認識辞書から選出することを特徴とする画像処理装置。
【請求項７】
文書画像が記憶されたメモリ、文字とその特徴データが対応して格納された認識辞書、前処理部、第１計算系統、第２計算系統、類似度統合部を有する画像処理装置による画像処理方法において、
前記メモリから読み出した文書画像を前記前処理部が所定の前処理を施して文字画像を生成するステップと、
前記文字画像を前記第１計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、
前記第１計算系統とは異なる処理で前記文字画像を前記第２計算系統がいくつかのパターンに変化させた上で前記認識辞書に格納されている文字との類似度を計算するステップと、
前記第１計算系統により計算された類似度と前記第２計算系統により計算された類似度とを前記類似度統合部が一つに統合するステップと
を有することを特徴とする画像処理方法。
【請求項８】
文書画像が記憶されたメモリ、文字とその特徴データが対応して格納された認識辞書、前処理部、第１パターン生成部、第２パターン生成部、第１特徴抽出部、第２特徴抽出部、第１類似度計算部、第２類似度計算部、類似度統合部を有する画像処理装置による画像処理方法において、
前記メモリから文書画像を前記前処理部が読み出し、読み出した前記文書画像に対して所定の前処理を施して文字画像を生成するステップと、
前記文字画像に対して前記 第１パターン生成部が第１画像加工処理を行うことで複数の異なる文字パターンを有する第１文字パターン群を生成するステップと、
前記文字画像に対して前記 第２パターン生成部が第２画像加工処理を行うことで複数の異なる文字パターンを有する第２文字パターン群を生成するステップと、
前記第１画像加工処理を行うことにより生成された第１文字パターン群の複数の文字パターンそれぞれから前記第１特徴抽出部が特徴データを抽出する前記複数の文字パターンからそれぞれの特徴データを抽出するステップと、
前記第２画像加工処理を行うことにより生成された第２文字パターン群の複数の文字パターンそれぞれから前記第２特徴抽出部が特徴データを抽出するステップと、
前記第１特徴抽出部により抽出された前記複数の特徴データと、前記認識辞書の文字の特徴データとの類似度を前記第１類似度計算部が計算するステップと、
前記第２特徴抽出部により抽出された前記複数の特徴データと、前記認識辞書の文字の特徴データとの類似度を前記第２類似度計算部が計算するステップと、
前記第１類似度計算部により計算された類似度と前記第２類似度計算部により計算された類似度とを前記類似度統合部が一つに統合するステップと
を有することを特徴とする画像処理方法。
【図１】
【図２】
【図３】
【図４】
【図２】
【図３】
【図４】
【公開番号】特開２０１０−１８２１６７（Ｐ２０１０−１８２１６７Ａ）
【公開日】平成２２年８月１９日（２０１０．８．１９）
【国際特許分類】
【出願番号】特願２００９−２６１０４（Ｐ２００９−２６１０４）
【出願日】平成２１年２月６日（２００９．２．６）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【出願人】（３０１０６３４９６）東芝ソリューション株式会社 (1,478)
【Ｆターム（参考）】
【公開日】平成２２年８月１９日（２０１０．８．１９）
【国際特許分類】
【出願日】平成２１年２月６日（２００９．２．６）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【出願人】（３０１０６３４９６）東芝ソリューション株式会社 (1,478)
【Ｆターム（参考）】
[ Back to top ]