記番号認識装置、紙葉類処理装置、自動取引処理装置、及び記番号認識方法
【課題】紙葉類に表記された記番号を確実に認識できる記番号認識装置、紙幣処理装置、自動取引処理装置、及び記番号認識方法を提供する。
【解決手段】紙幣識別部（記番号認識装置）２５が、紙幣のカラー画像を撮像し、このカラー画像を用いて、紙幣の金種と紙幣の向きの判定と、記番号の認識と、を行う。紙幣識別部２５は、記番号を認識する際には、紙幣の記番号が表示されている領域を切り出し、この領域の背景色や模様を消去して記番号の画像を抽出して文字認識を行う。
【解決手段】紙幣識別部（記番号認識装置）２５が、紙幣のカラー画像を撮像し、このカラー画像を用いて、紙幣の金種と紙幣の向きの判定と、記番号の認識と、を行う。紙幣識別部２５は、記番号を認識する際には、紙幣の記番号が表示されている領域を切り出し、この領域の背景色や模様を消去して記番号の画像を抽出して文字認識を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、紙葉類に表記された記番号を認識する記番号認識装置、紙葉類処理装置、自動取引処理装置、及び記番号認識方法に関する。
【背景技術】
【０００２】
従来、複数の光源及びイメージセンサを備え、背景色をドロップアウトする色の光源を、金種情報に従い選択的に駆動する記番号識別装置が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２１３５６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
一般的に、紙幣は金種毎に背景色が異なる場合が多い。そのため、特許文献１に記載の発明では、金種に応じた光源を選択するために、まず、繰出し部から紙幣を繰り出して、金種識別部を通過させて金種情報と方向情報を取得し、その紙幣を一時保留部に集積する。続いて、紙幣を記番号読取部に搬送して金種に応じた光源を点灯させて、紙幣の記番号を読み取って記番号の認識処理を行う。このように、従来の記番号認識装置では、紙幣の記番号を読み取るまでに時間がかかるという問題があった。
【０００５】
また、記番号を正しく認識するためには、紙幣の背景色に応じて複数色の光源を備える必要があり、コストがかかるという問題があった。
【０００６】
また、今までの背景色と異なる紙幣が発行された場合、この金種の記番号を認識するためには、新たな色の光源を追加しなければならないという問題があった。
【０００７】
そこで、本発明は、紙葉類の記番号を確実に認識できる記番号認識装置、紙葉類処理装置、自動取引処理装置、及び記番号認識方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明では、撮像手段で紙葉類のカラー画像を撮像し、判別手段でこのカラー画像から紙葉類の種類と向きを判別する。そして、選択手段で、紙葉類の種類と向きの情報に基づいて記番号が表記されている記番号領域を特定し、この領域の画像から、紙葉類の種類情報に基づいて決定した色の画素のみを選択して、選択した画素から成る画像に対して文字認識手段で文字認識を行う。紙葉類によって、記番号や記番号の周囲の背景色や模様が異なるが、紙葉類の種類の情報に基づいて記番号の色は特定できるので、この情報を用いて記番号に相当する画素のみを選択することができ、記番号の文字列を確実に抽出できる。
【０００９】
また、本発明では、選択手段は、記番号領域の画像を構成する画素毎に、その画素についてＲ・Ｇ・Ｂの各明度を取得し、これら各明度に基づく値が閾値の範囲内であれば、その画素を選択する。画素の各明度が閾値の範囲内の場合には、その画素は記番号の文字列を構成する画素である。したがって、紙葉類の印刷によるばらつきや紙葉類の使用による劣化などで、紙葉類の記番号や背景色に幅がある場合でも、記番号を確実に抽出して文字認識を行うことができる。
【００１０】
また、本発明では、選択手段は、記番号領域の画像を構成する画素毎に、その画素についてＲ・Ｇ・Ｂの各明度を取得し、取得したＲ・Ｇ・Ｂの各明度と紙葉類の種類毎にそれぞれ定義された固有ベクトルとを線形結合した値を算出し、その値が閾値の範囲内であれば選択する。線形結合した値が閾値の範囲内の場合には、その画素は記番号の文字列を構成する画素である。したがって、紙葉類の印刷によるばらつきや紙葉類の使用による劣化などで、紙葉類の記番号や背景色に幅がある場合でも、記番号を確実に抽出して文字認識を行うことができる。
【００１１】
また、本発明では、選択手段は、Ｒ・Ｇ・Ｂの各明度に基づく値が前記閾値の範囲外であれば、予め設定した別の明度に置換する。画素の各明度または線形結合した値が閾値の範囲外の場合には、その画素は記番号の文字列を構成する画素ではなく、背景の画素である。したがって、記番号の背景の画素を全て予め設定した別の明度に置換することで、記番号の文字列のみを抽出できる。
【００１２】
また、本発明では、不要領域除去手段は、選択手段が選択した画素から成る画像に対して、メディアンフィルタにより画像処理を行って不要な画素を除去する。メディアンフィルタにより画像処理を行うと細かい点などのノイズ成分を除去できる。したがって、選択手段により選択された画像に不要な画素が含まれている場合には、不要領域除去手段で画像処理を行うことで、記番号の文字列を確実に抽出できる。
【発明の効果】
【００１３】
本発明によれば、記番号の文字列を確実に抽出できる。
【図面の簡単な説明】
【００１４】
【図１】ＡＴＭの主要部の構成を示すブロック図である。
【図２】ＡＴＭの内部に形成されている紙幣搬送路を示す概略図である。
【図３】紙幣識別部の主要部の構成を示すブロック図である。
【図４】紙幣の記番号の一例を示す外観図である。
【図５】撮像部における紙幣の画像の撮像時の状態を示す側面図である。
【図６】記番号の抽出結果を示す図である。
【図７】画素を選択する２つの処理方法を対比説明するための図である。
【図８】記番号の不要領域の除去処理結果を示す図である。
【図９】第１の画素選択処理、第２の画素選択処理、及び不要領域除去処理用のデータが記録されたテーブルの一例である。
【図１０】紙幣識別部の動作を説明するためのフローチャートである。
【図１１】第１の画素選択処理を説明するためのフローチャートである。
【図１２】第２の画素選択処理を説明するためのフローチャートである。
【発明を実施するための形態】
【００１５】
以下の説明では、自動取引処理装置の一例として現金自動預け払い機（以下、ＡＴＭと称する。）について説明する。また、紙葉類の一例として紙幣を用いる場合について説明する。図１は、ＡＴＭの主要部の構成を示すブロック図である。
【００１６】
ＡＴＭ１は、図１に示すように、主制御部２と、表示・操作ユニット３と、紙幣処理ユニット４と、硬貨処理ユニット５と、カード・明細書処理ユニット６と、通帳処理ユニット７と、通信ユニット８と、利用者検知ユニット１０と、を備えている。このＡＴＭ１は、金融機関の店舗やコンビニエンスストア等に設置され、利用者が要求する種別の取引（入金取引や出金取引等）を処理する。主制御部２は、各ユニットの動作を制御する。また、主制御部２は、利用者検知ユニット１０から入力されている信号に基づいて、ＡＴＭ１本体のモードを待機モードと実行モードとの間で切り替える。待機モードは、ＡＴＭ１本体の一部の機能に対して動作電源の供給を停止し、ＡＴＭ１本体における消費電力を抑制するモードである。実行モードは、利用者によって要求された処理を実行するモードである。
【００１７】
表示・操作ユニット３は、本体前面に設けた表示器３ａ（不図示）、及びこの表示器３ａの画面上に貼付したタッチパネル３ｂ（不図示）を有している。表示・操作ユニット３は、利用者に対する操作案内画面を表示器３ａに表示する。また、表示・操作ユニット３は、タッチパネル３ｂの押下位置を検知することにより、暗証番号や取引内容（取引種別、入出金金額等）にかかる利用者の入力操作を受け付ける。また、表示・操作ユニット３は、利用者の生体情報（指紋、指静脈、掌紋等）を読み取る生体情報読取部等を有していても良い。
【００１８】
紙幣処理ユニット４は、本体前面に設けた紙幣入出金口４ａ（不図示）と、本体内部に設けられている金種別紙幣カートリッジ（不図示）と、の間に形成された紙幣搬送路に沿って紙幣を搬送する紙幣搬送部（不図示）を有している。また、紙幣処理ユニット４は、紙幣搬送路に沿って搬送されている紙幣毎に、金種（紙幣の種類）、及び真偽を識別する紙幣識別部（不図示）を有している。硬貨処理ユニット５は、本体前面に設けた硬貨入出金口５ａ（不図示）と、本体内部に収納されている金種別硬貨カートリッジ（不図示）と、の間に形成された硬貨搬送路に沿って硬貨を搬送する硬貨搬送部（不図示）を有している。また、硬貨処理ユニット５は、硬貨搬送路に沿って搬送している硬貨毎に、金種、及び真偽を識別する硬貨識別部（不図示）を有している。紙幣処理ユニット４は、本発明の紙幣処理装置に相当する。
【００１９】
カード・明細書処理ユニット６は、本体前面に設けたカード挿入口６ａ（不図示）に挿入されたカードを取り込み、このカードに記録されているカード情報（金融機関番号、店舗番号、口座番号等）の読み取りや、カード情報の書き換え等を行う。カード・明細書処理ユニット６は、磁気カードを処理する構成であっても良いし、ＩＣカードを処理する構成であっても良いし、両方のカード（磁気カード、及びＩＣカード）を処理する構成であっても良い。また、カード・明細書処理ユニット６は、取引内容を明細書に印字する印字部（不図示）を有する。カード・明細書処理ユニット６は、取引内容を印字した明細書を本体前面に設けた明細書放出口６ｂ（不図示）に放出する。
【００２０】
通帳処理ユニット７は、本体前面に設けた通帳挿入口７ａ（不図示）に挿入された通帳を取り込み、この通帳に対して取引履歴を印字する印字部（不図示）を有している。また、通帳処理ユニット７は、取り込んだ通帳のページを捲るページ捲り機構や、通帳に印刷されているページ番号を示すバーコードを読み取るバーコードリーダ、通帳に貼付されている磁気ストライプに記録されている通帳情報（金融機関番号、店舗番号、口座番号等）を読み取る磁気ヘッド等も有している。通信ユニット８は、センタに設置されている上位装置（不図示）との間におけるデータ通信を制御する。
【００２１】
利用者検知ユニット１０は、ＡＴＭ１本体の利用者を検知する。利用者検知ユニット１０は、ＡＴＭ１本体の天板に取り付ける構成としても、ＡＴＭ１本体に内蔵する構成としても良い。
【００２２】
次に、紙幣処理ユニット４における紙幣の搬送について簡単に説明しておく。図２は、ＡＴＭの内部に形成されている紙幣搬送路を示す概略図である。ＡＴＭ１の下部には、金種別に紙幣を収納する紙幣カートリッジ（紙葉類カートリッジ）２１（２１ａ〜２１ｄ）や、不良紙幣を回収する回収カートリッジ２２が収納される。紙幣カートリッジ２１、及び回収カートリッジ２２は、ＡＴＭ１本体に対して着脱自在に構成されている。また、ＡＴＭ１の上部には、紙幣を一時的に保留する一時保留部２３、紙幣入出金口に設けられた入出金紙幣保留部２４、紙幣の金種及び紙幣の真偽を識別する紙幣識別部２５が設けられている。紙幣搬送路２０は、紙幣カートリッジ２１、回収カートリッジ２２、一時保留部２３、入出金紙幣保留部２４、紙幣識別部２５を結んでいる。紙幣処理ユニット４は、紙幣搬送路２０の分岐点に設けたゲート２６（２６ａ〜２６ｆ）を制御し、紙幣搬送路２０上を搬送されている紙幣の搬送先（搬送経路）を切り替える。
【００２３】
また、紙幣処理ユニット４は、紙幣搬送路２０に沿って配置した複数のセンサにより、紙幣搬送路２０上を搬送している紙幣の有無や、紙幣の傾きを検知する。このセンサは、例えば、紙幣搬送路２０を挟んで、発光部と、受光部と、を対向させて配置した透過型の光センサである。紙幣搬送路２０は、駆動源であるモータ（不図示）によって駆動される。
【００２４】
次に、入金紙幣、及び出金紙幣の搬送経路について、簡単に説明しておく。入金紙幣は、入出金紙幣保留部２４から１枚ずつ繰り出され、紙幣搬送路２０に沿って紙幣識別部２５に搬送され、金種や真偽が識別される。紙幣識別部２５で金種、及び真券であることが識別された紙幣は、紙幣搬送路２０に沿って一時保留部２３に搬送される。一方、紙幣識別部２５で金種、及び真券であることが識別されなかった紙幣は、紙幣搬送路２０に沿って入出金紙幣保留部２４に戻される。一時保留部２３に保留した紙幣は、取引の終了後、この一時保留部２３から１枚ずつ繰り出され、紙幣搬送路２０に沿って紙幣識別部２５に搬送され、再度金種や真偽が識別される。その後、紙幣搬送路２０に沿って、該当する金種の紙幣カートリッジ２１に搬送される。
【００２５】
また、出金紙幣は、紙幣カートリッジ２１から繰り出される。紙幣カートリッジ２１から繰り出された出金紙幣は、紙幣搬送路２０に沿って紙幣識別部２５に搬送され、この紙幣識別部２５で金種や真偽が識別される。紙幣識別部２５で金種、及び真券であることが識別された紙幣は、紙幣搬送路２０に沿って入出金紙幣保留部２４に搬送され、それ以外の紙幣は一時保留部２３に搬送される。その後、一時保留部２３の紙幣（紙幣識別部２５で金種、及び真券であることが識別されなかった紙幣）は、紙幣搬送路２０を逆転させ、回収カートリッジ２２に搬送される。
【００２６】
次に、紙幣識別部２５の具体的な構成について説明する。図３は、紙幣識別部の主要部の構成を示すブロック図である。紙幣識別部２５は、本発明の記番号認識装置に相当する。
【００２７】
紙幣識別部２５は、制御部３０、ＲＯＭ３１、ＲＡＭ３２、撮像部３３、金種判別部３４、切り出し部３５、選択部３６、不要領域除去部３７、及び文字認識部３８を備えている。
【００２８】
制御部３０は、紙幣識別部２５全体の制御を行う。ＲＯＭ３１は、不揮発性メモリであり、制御部３０が使う制御プログラム、金種を判別するためのテンプレート画像（ＡＴＭで取り扱う複数の金種の紙幣を撮影した画像）、及び金種毎の記番号領域の位置とサイズなどを格納している。ＲＡＭ３２は、揮発性メモリであり、制御部３０が使う変数や撮像部３３が撮像したカラー画像などを格納している。撮像部３３は、紙葉類のカラー画像を撮像する。金種判別部３４は、紙幣の金種と向き（方向）を判別する。切り出し部３５は、紙幣の金種と向きの情報に基づいて記番号領域を特定し、紙葉類全体のカラー画像の中から記番号領域のカラー画像（記番号画像）を切り出す。選択部３６は、記番号領域のカラー画像から、各画素の色情報と紙幣の種類情報に基づいて決定した特定の色の画素を選択することにより文字の画素を抽出する。不要領域除去部３７は、選択後の画像に対して不要領域の除去を行う。文字認識部３８は、文字が抽出された画像を基に記番号の文字を認識する。
【００２９】
図４は、紙幣の記番号の一例を示す外観図である。一般的に、紙幣には、少なくとも１箇所に記番号が印刷されている。図４に示す紙幣４０には、１箇所に記番号４１が印刷されている。なお、図４に示すように、記番号及び記番号の周囲の背景を含む領域を記番号領域４２と称する。また、図４には、英数字を組み合わせた記番号を例示したが、英数字に限らず紙幣を特定できる記号や文字などが使用される。
【００３０】
図５は、撮像部における紙幣の画像の撮像時の状態を示す側面図である。撮像部３３は、白色光を照射するランプ３３０Ａ及びランプ３３０Ｂと、カラー画像を撮像するラインセンサ３３１Ａ及びラインセンサ３３１Ｂと、を備えている。図５において、紙幣４０は、搬送部２０（不図示）を矢印４５の方向に搬送されている。ランプ３３０Ａは紙幣４０の上面全体を照射し、紙幣４０から反射された光をラインセンサ３３１Ａで受光する。ラインセンサ３３１Ａが出力したカラー画像のデータは１ライン分であるが、紙幣４０が搬送されるにつれてラインセンサ３３１Ａが順次紙幣４０の画像を撮像するように設定することで、結果として２次元の画像が得られる。また、紙幣４０の下面は、ランプ３３０Ｂとラインセンサ３３１Ｂの組により撮像されて、上面と同様に２次元の画像が得られる。
【００３１】
ここで、紙幣は、金種毎に記番号が印刷されている位置や面が決まっている。例えば、日本の紙幣は、一方の面のみに記番号が印刷されており、他方の面には記番号は印刷されていない。そこで、図５に示した撮像部３３は、紙幣のどちらの面が上になって搬送されても良いように、紙幣４０の上側と下側に対して画像を撮像する構成を配している。しかし、外国の紙幣で両面に記番号が印刷されているものを扱う場合には、片側だけに画像を撮像する構成を配置しても構わない。また、日本の紙幣など片面だけに記番号が印刷されている紙葉類を扱う装置でも、紙葉類の面の向きを固定して扱える場合には、片側だけにランプ及びラインセンサを配しても構わない。また、ラインセンサに替えて２次元イメージセンサを使っても構わない。この場合、搬送中の紙葉類を１回〜数回に分けて撮像して、紙葉類全体の画像を得るように構成すれば良い。
【００３２】
次に、本発明では、記番号を正しく文字認識するために、以下に説明するような方法で記番号を抽出する。
【００３３】
［第１の画素選択処理］
紙幣識別部２５では、撮像部３３が紙幣４０のカラー画像を撮像すると、金種判別部３４がＲＯＭ３１からテンプレート画像を読み出し、撮像した画像と比較して紙幣の金種を判別する。続いて、切り出し部３５がこの判別した金種情報に基づいて記番号の位置情報をＲＯＭ３１から読み出し、この位置情報に対応する記番号領域を紙幣のカラー画像から切り出す。このとき、選択部３６は、第１の画素選択処理として、記番号領域のカラー画像から金種毎に決められた範囲内の色である画素を選択することにより、文字の画素を抽出するように設定できる。
【００３４】
例えば、画素毎に、Ｒ（赤）・Ｇ（緑）・Ｂ（青）の３つの明度について、金種毎に予め設定した範囲内であるかを確認する。選択した画素の明度が、赤の下限値ＲＬ≦Ｒ明度≦赤の上限値ＲＨ、且つ緑の下限値ＧＬ≦Ｇ明度≦緑の上限値ＧＨ、且つ青の下限値ＢＬ≦Ｂ明度≦青の上限値ＢＨならば、選択後の画素値に元の画素値を代入する。一方、選択した画素の明度がいずれか一つでも範囲内に入らなければ（範囲外であれば）、選択後の画素値に各々２５５（最大値）を代入し、背景として白色に設定（置換）する。
【００３５】
なお、選択した画素の明度が範囲内に入らない場合には、記番号を背景との色の違いがはっきりする色に変換すれば良い。例えば、紙幣の紙の色（媒体の色）に応じた色に変換すれば良く、紙幣の紙の色が白色の場合には、上記のように、背景として白色を設定する。
【００３６】
この処理の具体例を図６に示す。図６は、記番号の抽出結果を示す図である。図６（Ａ）は、切り出し部３５により切り出された記番号領域４２の画像である。本来はカラー画像であるが、紙面の都合によりグレー画像で表現されている。記番号「ＥＬ９５６２９３ＹＣ」は赤色のインクにより印刷されている。記番号の周囲の背景には水色基調で種々の線画が印刷されている。
【００３７】
図６（Ｂ）は、図６（Ａ）に示したカラー画像をグレー画像に変換し、さらに２値化した画像である。このように、画素の選択を行わずに記番号領域全体を２値化すると、右から４つ目の文字「９」の一部が切れていたり、左の先頭からの４文字「ＥＬ９５」の周囲には記番号の文字以外に背景の線や点が残ってしまったりする。このような画像を文字認識しても精度が悪く、正しく文字認識できない可能性がある。
【００３８】
図６（Ｃ）は、図６（Ａ）に対して画素の選択処理を行った画像である。文字色が赤なので、文字部分ではＧ明度とＢ明度は非常に小さいため、緑の上限値ＧＨと青の上限値ＢＨはかなり小さな値に設定されている。一方、背景は水色基調であるため、Ｂ明度が青の上限値ＢＨより大きく、白色に変換されている。背景だけが白色に変換された結果、文字列のみが抽出されており、正しく文字認識を行うことができる。
【００３９】
なお、図６（Ｃ）に示したように抽出した画素を、図６（Ｄ）に示すように２値化しても良い。これにより、文字列の色と背景色との明暗がはっきりするので、文字認識の精度が向上する。
【００４０】
以上のように、文字色と背景色が異なる金種について記番号の文字認識を行う際には、画素をその明度に応じて選択することで、記番号の文字を正確に抽出できる。
【００４１】
［第２の画素選択処理］
切り出し部３５が切り出した記番号領域のカラー画像について、選択部３６は、第２の画素の選択処理として、予め設定した固有ベクトルと明度を線形結合した値を演算し、この値が金種毎に定めた範囲内である画素を選択することにより文字の画素を抽出するように設定できる。
【００４２】
例えば、予め定めた判定用の固有ベクトルを（ＷＲ，ＷＧ，ＷＢ）で、画素の明度を（ＲＳ，ＧＳ，ＢＳ）とすると、判定用ベクトルと画素の明度を線形結合させた値である特徴量Ｆは、Ｆ＝ＷＲ＊ＲＳ＋ＷＧ＊ＧＳ＋ＷＢ＊ＢＳとなる。この特徴量Ｆが、金種毎に予め設定した範囲内であるかを確認する。特徴量Ｆが、閾値ＷＬ≦Ｆ≦閾値ＷＨならば、選択後の画素値に元の画素値を代入する。一方、選択した画素の明度がいずれか一つでも範囲内に入らなければ、選択後の画素値に各々２５５（最大値）を代入し、背景としての白色を設定する。
【００４３】
なお、第１の画素選択処理と同様に、選択した画素の明度が範囲内に入らない場合には、記番号を背景との色の違いがはっきりする色に変換すれば良い。
【００４４】
この処理の具体例を図７に示す。図７は、画素を選択する２つの処理方法を対比説明するための図である。図７（Ａ）は、明度が特定範囲内の画素を選択する第１の画素選択処理方法であり、図７（Ｂ）は、第２の画素選択処理方法である。
【００４５】
図７（Ａ）には、ＲとＧを軸とした空間において、文字部分の画素を○でプロットし、背景色Ａの模様の画素を□でプロットし、背景色Ｂの模様の画素を△でプロットしている。なお、図７に示すデータは、実際にはＲＧＢの３次元データであるが、ここでは説明の簡単のためにＲＧの２次元データとして扱う。文字色と背景色Ａと背景色Ｂが似通っているので、閾値ＲＨ，ＲＬ，ＧＨ，ＧＬでは、記番号の文字だけでなく背景の一部も選択してしまうことを示している。つまり、赤の上限値ＲＨ，赤の下限値ＲＬ，緑の上限値ＧＨ，緑の下限値ＧＬで囲まれた判別範囲内（矩形の内側）が、文字色画素として判定されるが、背景色Ａの画素群の一部分がこの判別範囲内（矩形内）に含まれており、これらの画素は背景でありながら文字を構成する画素として判定される。また、背景色Ｂの画素群の一部分がこの判別範囲内（矩形内）に含まれており、これらの画素も背景でありながら文字の構成する画素として判定される。そのため、文字認識は可能であるが、認識精度が若干低下する。
【００４６】
一方、図７（Ｂ）に示す本処理方法では、ＲＧ空間ではなく、固有ベクトル（ＷＲ０，ＷＧ０）と画素の明度で線形結合された軸と、固有ベクトル（ＷＲ１，ＷＧ１）で線形結合された軸と、で表された空間に投影されている。特徴量Ｆ０は、Ｆ０＝ＷＲ０＊ＲＳ＋ＷＧ０＊ＧＳ、特徴量Ｆ１は、Ｆ１＝ＷＲ１＊ＲＳ＋ＷＧ１＊ＧＳである。この場合、閾値ＷＨ０，閾値ＷＬ０，閾値ＷＨ１，閾値ＷＬ１で囲まれた判別範囲内（矩形内）には、背景色Ａと背景色Ｂの画素は含まれておらず、文字の画素のみが含まれている。そのため、本処理方法を用いることで、記番号の文字を構成する画素のみを抽出できる。
【００４７】
この処理方法で記番号の文字のみを抽出するためには、実験などを行って予め金種毎にサンプリングした紙幣の複数のデータに基づいて、固有ベクトルと閾値を適切に設定すれば良い。これにより、文字の抽出精度が向上する。
【００４８】
なお、紙葉類の種類によっては、背景に複数の色で模様が描かれている場合には、文字色を複数の色に対して分離するように構成すれば良い。
【００４９】
［不要領域除去処理］
次に、上記のように第１の画素選択処理または第２の画素選択処理を行うことで、記番号の文字を抽出することができる。しかし、記番号の文字色と、記番号領域の背景色と、が同系色の場合には、背景の模様も抽出することがある。そこで、このような場合には、第１の画素選択処理または第２の画素選択処理の後に、以下に説明する不要領域除去処理（変換処理）を行うように構成すると良い。
【００５０】
図３に示した不要領域除去部３７は、メディアンフィルタを備えており、このメディアンフィルタにより、選択部３６が選択した各画素に対して不要領域の除去（変換）処理を行う。周知のように、メディアンフィルタは、注目画素とその周辺の画素から成るｎ×ｎ個の画素に割り当てられた値（例えば明度）をソートして、その中央値を、注目画素の値と置き換える手法であり、この方法により背景の模様など、不要なノイズ成分を除去（消去）することができる。
【００５１】
この処理の具体例を図８に示す。図８は、記番号の不要領域の除去処理結果を示す図である。図８（Ａ）は、切り出し部３５により切り出された記番号領域の一部の画像である。本来はカラー画像であるが、紙面の都合によりグレー画像で表現されている。記番号「ＡＬ８」が赤色のインクで印刷されている。また、この記番号の周囲の背景は同系色であり、明るい赤色調である。
【００５２】
図８（Ｂ）は、図８（Ａ）に対して画素の選択処理を行った結果の画像である。上記のように文字色と背景色が同形色であるため、画素の選択処理を行っても、文字部分のみを抽出できず、背景の模様も抽出している。特に文字「Ａ」の周囲に文字以外の模様が残っている。
【００５３】
図８（Ｃ）は、図８（Ｂ）に対して不要領域の除去処理を行った画像である。図８（Ｃ）に示す画像は、５×５のメディアンフィルタで画像処理しており、図８（Ｂ）に見られた小さな斑点状の模様が消えている。
【００５４】
図８（Ｄ）は、図８（Ｃ）に示す画像を２値化処理した画像である。メディアンフィルタでの画像処理後に、画像を２値化することで、記番号の文字列の色と背景色との明暗をはっきりさせることができる。
【００５５】
このように、記番号の文字色と背景色が似ていても、選択処理の後に不要領域の除去処理を行うことで、記番号の文字のみを抽出できる。
【００５６】
次に、ＡＴＭ１では、第１の画素選択処理、第２の画素選択処理、及び不要領域除去処理を行うために、ＲＯＭ３１で、紙幣の金種毎にテーブルを記憶している。図９は、第１の画素選択処理、第２の画素選択処理、及び不要領域除去処理用のデータが記録されたテーブルの一例である。
【００５７】
図９（Ａ）は、第１の画素選択処理用のテーブルの一例である。図９（Ａ）において、方向とは、搬送路を搬送される紙幣の向きのことである。紙幣の向きは、搬送方向に向かう側を上とすると、紙幣の左辺が上の場合・右辺が上の場合・上辺が上の場合・下辺が上の場合の４通りがある。これらをそれぞれ方向０・方向１・方向２・方向３と称する。また、各金種毎及び各方向毎に切り出しに使う領域開始Ｘ座標・領域開始Ｙ座標・領域サイズＸ座標・領域サイズＹ座標、及び各金種毎の選択に使うＲ（赤）・Ｇ（緑）・Ｂ（青）の各明度の上限値と下限値（Ｒ上限値・Ｒ下限値・Ｇ上限値・Ｇ下限値・Ｂ上限値・Ｂ下限値）が格納されている。
【００５８】
また、図９（Ｂ）は、第２の画素選択処理用のデータテーブルの一例である。図９（Ａ）と異なる部分のみ説明する。判定個数は、１画素について判定に用いる判定式の個数である。図９（Ｂ）に示す例では２個が設定されている。係数セット０は、最初の判定式に使う固有ベクトル（ＷＲ０，ＷＧ０，ＷＢ０）である。これら固有ベクトルと画素の明度との線形結合により特徴量０が求められる。ＷＨ０とＷＬ０は特徴量０の判定用の閾値（上限値と下限値）である。同様に、（ＷＲ１，ＷＧ１，ＷＢ１），ＷＨ１，ＷＬ１は特徴量１を求めるために使用する固有ベクトルと、特徴量１の判定用の閾値（上限値と下限値）である。
【００５９】
図９（Ｃ）は、不要領域除去処理用のテーブルの一例である。図９（Ａ）と異なる部分のみ説明する。メディアンフィルタ使用フラグは、メディアンフィルタ処理の実行の可否が設定されている。また、メディアンフィルタ処理において、金種毎に異なるパラメータを設定できるようになっている。例えば、フィルタの大きさ（３×３，５×５など）や、中央値ではなくソート後の前からＮ番目を選択して置換するなど、紙幣の特徴に応じたパラメータを設定可能である。
【００６０】
次に、ＡＴＭ１の識別部の動作について説明する。図１０は、紙幣識別部の動作を説明するためのフローチャートである。図１１は、第１の画素選択処理を説明するためのフローチャートである。図１２は、第２の画素選択処理を説明するためのフローチャートである。
【００６１】
ＡＴＭ１の紙幣入出金口４ａから１枚ずつ紙幣が繰り出され、紙幣識別部２５まで搬送されると、制御部３０は、紙葉類検知センサ（不図示）により紙葉類の到来を検知し、撮像部３３（ランプ３３０Ａ、ランプ３３０Ｂ、ラインセンサ３３１Ａ、及びラインセンサ３３１Ｂ）により紙幣４０のカラー画像を撮像する（ｓ１）。
【００６２】
続いて、制御部３０は、金種判別部３４に撮像部３３が撮像したカラー画像を出力して、紙葉類の金種と向き（方向）を判別させて、これらの情報を取得する（ｓ２）。制御部３０は、ＲＯＭ３１に格納されているテーブルを参照し、取得した金種と方向の情報に対応した記番号領域４２の開始位置とサイズの情報を読み出して、切り出し部３５により記番号領域をカラー画像から切り出す（ｓ３）。
【００６３】
制御部３０は、選択部３６により、切り出した記番号領域のカラー画像から、文字部分の色成分に着目し、文字部分を選択して抽出する（ｓ４）。具体的には、制御部３０は、ステップｓ３で参照したテーブルに図９（Ａ）に示したようにＲ・Ｇ・Ｂの上限値と下限値が記載されている場合には、図１１に示す第１の画素選択処理を行う。一方、制御部３０は、ステップｓ３で参照したテーブルに図９（Ｂ）に示したように固有ベクトルと特徴量の上限値と下限値が記載されている場合には、図１２に示す第２の画素選択処理を行う。
【００６４】
第１の画素選択処理を行う場合には、以下の手順で行う。図１１に示すように、選択処理においては、まず切り出された記番号領域のカラー画像から１画素分のＲ明度・Ｇ明度・Ｂ明度を取り出す（ｓ１１）。次にテーブルから読み出した閾値（ＲＨ，ＲＬ，ＧＨ，ＧＬ，ＢＨ，ＢＬ）の範囲内であるかを確認する（ｓ１２）。
【００６５】
もし、ＲＬ≦Ｒ明度≦ＲＨ、且つＧＬ≦Ｇ明度≦ＧＨ、且つＧＬ≦Ｇ明度≦ＧＨならば（ｓ１２：Ｙ）、選択後の画素値に元の画素値を代入する（ｓ１３）。一方、もし前記条件が成り立たなければ（ｓ１２：Ｎ）、選択後の画素値に各々２５５（最大値）を代入し、背景としての白色を設定する（ｓ１４）。
【００６６】
続いて、全ての画素に対して処理が終わったかチェックし（ｓ１５）、まだ終了してなければ次の画素の処理に移り（ｓ１１）、終了していれば選択処理を終える。
【００６７】
また、第２の画素選択処理を行う場合には、以下の手順で行う。図１２に示すように、まず切り出された記番号領域のカラー画像から１画素分のＲ明度・Ｇ明度・Ｂ明度を取り出す（ｓ２１）。次に、取り出した明度と、テーブルから読み出した固有ベクトルと、を線形結合させ、特徴量Ｆ＝ＷＲ＊ＲＳ＋ＷＧ＊ＧＳ＋ＷＢ＊ＢＳを求め（ｓ２２）、この特徴量Ｆに対して、判定式ＷＬ≦Ｆ≦ＷＨを判定する（ｓ２３）。全ての判定式での判定が終了したかチェックし（ｓ２４）、終了していなければ（ｓ２４：Ｎ）、次の特徴量を求め（ｓ２１）、全ての判定式が終了していれば（ｓ２４：Ｙ）、全ての判定式が真であったのかをチェックする（ｓ２５）。全ての判定式が真であったなら（ｓ２５：Ｙ）、選択後の画素値に元の画素値を代入する（ｓ２６）。一方、もし判定式が一つでも偽であったならば（ｓ２５：Ｎ）、選択後の画素値に各々２５５（最大値）を代入し、背景としての白色を設定する（ｓ２７）。
【００６８】
続いて、全ての画素に対して処理が終わったかチェックし（ｓ２８）、まだ終了してなければ（ｓ２８：Ｎ）、次の画素の処理に移り（ｓ２１）、終了していれば（ｓ２８：Ｙ）、選択処理を終了する。
【００６９】
なお、選択後の画素値もカラー画像として扱ったが、グレー画像や２値画像に変換しても構わない。これは、後処理においてどのような画像表現で処理するかによって決めれば良い。
【００７０】
図１０に示したフローチャートに示したように、ステップｓ４の処理を終了すると、続いて、制御部３０は、不要領域除去処理を行う必要があるか否かを、ＲＯＭ２１に設定されている金種毎のテーブルを参照して判定する（ｓ５）。
【００７１】
制御部３０は、参照したテーブルのメディアンフィルタ使用フラグが「使用」となっていれば（ｓ５：Ｙ）、不要領域除去処理を行い（ｓ６）、「不使用」となっていれば（ｓ５：Ｎ）、不要領域除去処理を行わずに次のステップｓ７を実行する。
【００７２】
制御部３０は、上記の各画像処理によって得られた記番号の文字列について、文字認識部３８により文字認識を行う（ｓ７）。
【００７３】
なお、文字認識には種々の周知の手法があるが、任意の手法で行えば良く、ここではその詳細な説明は省略する。
【００７４】
以上のように、本発明では、記番号を認識する際に、紙幣の記番号が表示されている領域を切り出し、この領域の背景色や模様を消去して記番号の画像のみを抽出するので、確実に文字認識を行うことができる。また、記番号に基づいて真券と偽造券を容易に判別できる。
【００７５】
なお、以上の説明では、紙葉類の一例として紙幣を用いる場合を説明したが、本発明はこれに限るものではなく、くじ、チケット、有価証券など記番号が表記されている他の紙葉類を用いることも、当然可能である。
【符号の説明】
【００７６】
１…ＡＴＭ ２…主制御部 ４ａ…紙幣入出金口 ２０…紙幣搬送路（搬送部） ２１…ＲＯＭ ２１…紙幣カートリッジ ２２…回収カートリッジ ２３…一時保留部 ２４…入出金紙幣保留部 ２５…紙幣識別部 ３０…制御部 ３１…ＲＯＭ ３２…ＲＡＭ ３３…撮像部 ３４…金種判別部 ３５…切り出し部 ３６…選択部 ３７…不要領域除去部 ３８…文字認識部
【技術分野】
【０００１】
本発明は、紙葉類に表記された記番号を認識する記番号認識装置、紙葉類処理装置、自動取引処理装置、及び記番号認識方法に関する。
【背景技術】
【０００２】
従来、複数の光源及びイメージセンサを備え、背景色をドロップアウトする色の光源を、金種情報に従い選択的に駆動する記番号識別装置が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２１３５６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
一般的に、紙幣は金種毎に背景色が異なる場合が多い。そのため、特許文献１に記載の発明では、金種に応じた光源を選択するために、まず、繰出し部から紙幣を繰り出して、金種識別部を通過させて金種情報と方向情報を取得し、その紙幣を一時保留部に集積する。続いて、紙幣を記番号読取部に搬送して金種に応じた光源を点灯させて、紙幣の記番号を読み取って記番号の認識処理を行う。このように、従来の記番号認識装置では、紙幣の記番号を読み取るまでに時間がかかるという問題があった。
【０００５】
また、記番号を正しく認識するためには、紙幣の背景色に応じて複数色の光源を備える必要があり、コストがかかるという問題があった。
【０００６】
また、今までの背景色と異なる紙幣が発行された場合、この金種の記番号を認識するためには、新たな色の光源を追加しなければならないという問題があった。
【０００７】
そこで、本発明は、紙葉類の記番号を確実に認識できる記番号認識装置、紙葉類処理装置、自動取引処理装置、及び記番号認識方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明では、撮像手段で紙葉類のカラー画像を撮像し、判別手段でこのカラー画像から紙葉類の種類と向きを判別する。そして、選択手段で、紙葉類の種類と向きの情報に基づいて記番号が表記されている記番号領域を特定し、この領域の画像から、紙葉類の種類情報に基づいて決定した色の画素のみを選択して、選択した画素から成る画像に対して文字認識手段で文字認識を行う。紙葉類によって、記番号や記番号の周囲の背景色や模様が異なるが、紙葉類の種類の情報に基づいて記番号の色は特定できるので、この情報を用いて記番号に相当する画素のみを選択することができ、記番号の文字列を確実に抽出できる。
【０００９】
また、本発明では、選択手段は、記番号領域の画像を構成する画素毎に、その画素についてＲ・Ｇ・Ｂの各明度を取得し、これら各明度に基づく値が閾値の範囲内であれば、その画素を選択する。画素の各明度が閾値の範囲内の場合には、その画素は記番号の文字列を構成する画素である。したがって、紙葉類の印刷によるばらつきや紙葉類の使用による劣化などで、紙葉類の記番号や背景色に幅がある場合でも、記番号を確実に抽出して文字認識を行うことができる。
【００１０】
また、本発明では、選択手段は、記番号領域の画像を構成する画素毎に、その画素についてＲ・Ｇ・Ｂの各明度を取得し、取得したＲ・Ｇ・Ｂの各明度と紙葉類の種類毎にそれぞれ定義された固有ベクトルとを線形結合した値を算出し、その値が閾値の範囲内であれば選択する。線形結合した値が閾値の範囲内の場合には、その画素は記番号の文字列を構成する画素である。したがって、紙葉類の印刷によるばらつきや紙葉類の使用による劣化などで、紙葉類の記番号や背景色に幅がある場合でも、記番号を確実に抽出して文字認識を行うことができる。
【００１１】
また、本発明では、選択手段は、Ｒ・Ｇ・Ｂの各明度に基づく値が前記閾値の範囲外であれば、予め設定した別の明度に置換する。画素の各明度または線形結合した値が閾値の範囲外の場合には、その画素は記番号の文字列を構成する画素ではなく、背景の画素である。したがって、記番号の背景の画素を全て予め設定した別の明度に置換することで、記番号の文字列のみを抽出できる。
【００１２】
また、本発明では、不要領域除去手段は、選択手段が選択した画素から成る画像に対して、メディアンフィルタにより画像処理を行って不要な画素を除去する。メディアンフィルタにより画像処理を行うと細かい点などのノイズ成分を除去できる。したがって、選択手段により選択された画像に不要な画素が含まれている場合には、不要領域除去手段で画像処理を行うことで、記番号の文字列を確実に抽出できる。
【発明の効果】
【００１３】
本発明によれば、記番号の文字列を確実に抽出できる。
【図面の簡単な説明】
【００１４】
【図１】ＡＴＭの主要部の構成を示すブロック図である。
【図２】ＡＴＭの内部に形成されている紙幣搬送路を示す概略図である。
【図３】紙幣識別部の主要部の構成を示すブロック図である。
【図４】紙幣の記番号の一例を示す外観図である。
【図５】撮像部における紙幣の画像の撮像時の状態を示す側面図である。
【図６】記番号の抽出結果を示す図である。
【図７】画素を選択する２つの処理方法を対比説明するための図である。
【図８】記番号の不要領域の除去処理結果を示す図である。
【図９】第１の画素選択処理、第２の画素選択処理、及び不要領域除去処理用のデータが記録されたテーブルの一例である。
【図１０】紙幣識別部の動作を説明するためのフローチャートである。
【図１１】第１の画素選択処理を説明するためのフローチャートである。
【図１２】第２の画素選択処理を説明するためのフローチャートである。
【発明を実施するための形態】
【００１５】
以下の説明では、自動取引処理装置の一例として現金自動預け払い機（以下、ＡＴＭと称する。）について説明する。また、紙葉類の一例として紙幣を用いる場合について説明する。図１は、ＡＴＭの主要部の構成を示すブロック図である。
【００１６】
ＡＴＭ１は、図１に示すように、主制御部２と、表示・操作ユニット３と、紙幣処理ユニット４と、硬貨処理ユニット５と、カード・明細書処理ユニット６と、通帳処理ユニット７と、通信ユニット８と、利用者検知ユニット１０と、を備えている。このＡＴＭ１は、金融機関の店舗やコンビニエンスストア等に設置され、利用者が要求する種別の取引（入金取引や出金取引等）を処理する。主制御部２は、各ユニットの動作を制御する。また、主制御部２は、利用者検知ユニット１０から入力されている信号に基づいて、ＡＴＭ１本体のモードを待機モードと実行モードとの間で切り替える。待機モードは、ＡＴＭ１本体の一部の機能に対して動作電源の供給を停止し、ＡＴＭ１本体における消費電力を抑制するモードである。実行モードは、利用者によって要求された処理を実行するモードである。
【００１７】
表示・操作ユニット３は、本体前面に設けた表示器３ａ（不図示）、及びこの表示器３ａの画面上に貼付したタッチパネル３ｂ（不図示）を有している。表示・操作ユニット３は、利用者に対する操作案内画面を表示器３ａに表示する。また、表示・操作ユニット３は、タッチパネル３ｂの押下位置を検知することにより、暗証番号や取引内容（取引種別、入出金金額等）にかかる利用者の入力操作を受け付ける。また、表示・操作ユニット３は、利用者の生体情報（指紋、指静脈、掌紋等）を読み取る生体情報読取部等を有していても良い。
【００１８】
紙幣処理ユニット４は、本体前面に設けた紙幣入出金口４ａ（不図示）と、本体内部に設けられている金種別紙幣カートリッジ（不図示）と、の間に形成された紙幣搬送路に沿って紙幣を搬送する紙幣搬送部（不図示）を有している。また、紙幣処理ユニット４は、紙幣搬送路に沿って搬送されている紙幣毎に、金種（紙幣の種類）、及び真偽を識別する紙幣識別部（不図示）を有している。硬貨処理ユニット５は、本体前面に設けた硬貨入出金口５ａ（不図示）と、本体内部に収納されている金種別硬貨カートリッジ（不図示）と、の間に形成された硬貨搬送路に沿って硬貨を搬送する硬貨搬送部（不図示）を有している。また、硬貨処理ユニット５は、硬貨搬送路に沿って搬送している硬貨毎に、金種、及び真偽を識別する硬貨識別部（不図示）を有している。紙幣処理ユニット４は、本発明の紙幣処理装置に相当する。
【００１９】
カード・明細書処理ユニット６は、本体前面に設けたカード挿入口６ａ（不図示）に挿入されたカードを取り込み、このカードに記録されているカード情報（金融機関番号、店舗番号、口座番号等）の読み取りや、カード情報の書き換え等を行う。カード・明細書処理ユニット６は、磁気カードを処理する構成であっても良いし、ＩＣカードを処理する構成であっても良いし、両方のカード（磁気カード、及びＩＣカード）を処理する構成であっても良い。また、カード・明細書処理ユニット６は、取引内容を明細書に印字する印字部（不図示）を有する。カード・明細書処理ユニット６は、取引内容を印字した明細書を本体前面に設けた明細書放出口６ｂ（不図示）に放出する。
【００２０】
通帳処理ユニット７は、本体前面に設けた通帳挿入口７ａ（不図示）に挿入された通帳を取り込み、この通帳に対して取引履歴を印字する印字部（不図示）を有している。また、通帳処理ユニット７は、取り込んだ通帳のページを捲るページ捲り機構や、通帳に印刷されているページ番号を示すバーコードを読み取るバーコードリーダ、通帳に貼付されている磁気ストライプに記録されている通帳情報（金融機関番号、店舗番号、口座番号等）を読み取る磁気ヘッド等も有している。通信ユニット８は、センタに設置されている上位装置（不図示）との間におけるデータ通信を制御する。
【００２１】
利用者検知ユニット１０は、ＡＴＭ１本体の利用者を検知する。利用者検知ユニット１０は、ＡＴＭ１本体の天板に取り付ける構成としても、ＡＴＭ１本体に内蔵する構成としても良い。
【００２２】
次に、紙幣処理ユニット４における紙幣の搬送について簡単に説明しておく。図２は、ＡＴＭの内部に形成されている紙幣搬送路を示す概略図である。ＡＴＭ１の下部には、金種別に紙幣を収納する紙幣カートリッジ（紙葉類カートリッジ）２１（２１ａ〜２１ｄ）や、不良紙幣を回収する回収カートリッジ２２が収納される。紙幣カートリッジ２１、及び回収カートリッジ２２は、ＡＴＭ１本体に対して着脱自在に構成されている。また、ＡＴＭ１の上部には、紙幣を一時的に保留する一時保留部２３、紙幣入出金口に設けられた入出金紙幣保留部２４、紙幣の金種及び紙幣の真偽を識別する紙幣識別部２５が設けられている。紙幣搬送路２０は、紙幣カートリッジ２１、回収カートリッジ２２、一時保留部２３、入出金紙幣保留部２４、紙幣識別部２５を結んでいる。紙幣処理ユニット４は、紙幣搬送路２０の分岐点に設けたゲート２６（２６ａ〜２６ｆ）を制御し、紙幣搬送路２０上を搬送されている紙幣の搬送先（搬送経路）を切り替える。
【００２３】
また、紙幣処理ユニット４は、紙幣搬送路２０に沿って配置した複数のセンサにより、紙幣搬送路２０上を搬送している紙幣の有無や、紙幣の傾きを検知する。このセンサは、例えば、紙幣搬送路２０を挟んで、発光部と、受光部と、を対向させて配置した透過型の光センサである。紙幣搬送路２０は、駆動源であるモータ（不図示）によって駆動される。
【００２４】
次に、入金紙幣、及び出金紙幣の搬送経路について、簡単に説明しておく。入金紙幣は、入出金紙幣保留部２４から１枚ずつ繰り出され、紙幣搬送路２０に沿って紙幣識別部２５に搬送され、金種や真偽が識別される。紙幣識別部２５で金種、及び真券であることが識別された紙幣は、紙幣搬送路２０に沿って一時保留部２３に搬送される。一方、紙幣識別部２５で金種、及び真券であることが識別されなかった紙幣は、紙幣搬送路２０に沿って入出金紙幣保留部２４に戻される。一時保留部２３に保留した紙幣は、取引の終了後、この一時保留部２３から１枚ずつ繰り出され、紙幣搬送路２０に沿って紙幣識別部２５に搬送され、再度金種や真偽が識別される。その後、紙幣搬送路２０に沿って、該当する金種の紙幣カートリッジ２１に搬送される。
【００２５】
また、出金紙幣は、紙幣カートリッジ２１から繰り出される。紙幣カートリッジ２１から繰り出された出金紙幣は、紙幣搬送路２０に沿って紙幣識別部２５に搬送され、この紙幣識別部２５で金種や真偽が識別される。紙幣識別部２５で金種、及び真券であることが識別された紙幣は、紙幣搬送路２０に沿って入出金紙幣保留部２４に搬送され、それ以外の紙幣は一時保留部２３に搬送される。その後、一時保留部２３の紙幣（紙幣識別部２５で金種、及び真券であることが識別されなかった紙幣）は、紙幣搬送路２０を逆転させ、回収カートリッジ２２に搬送される。
【００２６】
次に、紙幣識別部２５の具体的な構成について説明する。図３は、紙幣識別部の主要部の構成を示すブロック図である。紙幣識別部２５は、本発明の記番号認識装置に相当する。
【００２７】
紙幣識別部２５は、制御部３０、ＲＯＭ３１、ＲＡＭ３２、撮像部３３、金種判別部３４、切り出し部３５、選択部３６、不要領域除去部３７、及び文字認識部３８を備えている。
【００２８】
制御部３０は、紙幣識別部２５全体の制御を行う。ＲＯＭ３１は、不揮発性メモリであり、制御部３０が使う制御プログラム、金種を判別するためのテンプレート画像（ＡＴＭで取り扱う複数の金種の紙幣を撮影した画像）、及び金種毎の記番号領域の位置とサイズなどを格納している。ＲＡＭ３２は、揮発性メモリであり、制御部３０が使う変数や撮像部３３が撮像したカラー画像などを格納している。撮像部３３は、紙葉類のカラー画像を撮像する。金種判別部３４は、紙幣の金種と向き（方向）を判別する。切り出し部３５は、紙幣の金種と向きの情報に基づいて記番号領域を特定し、紙葉類全体のカラー画像の中から記番号領域のカラー画像（記番号画像）を切り出す。選択部３６は、記番号領域のカラー画像から、各画素の色情報と紙幣の種類情報に基づいて決定した特定の色の画素を選択することにより文字の画素を抽出する。不要領域除去部３７は、選択後の画像に対して不要領域の除去を行う。文字認識部３８は、文字が抽出された画像を基に記番号の文字を認識する。
【００２９】
図４は、紙幣の記番号の一例を示す外観図である。一般的に、紙幣には、少なくとも１箇所に記番号が印刷されている。図４に示す紙幣４０には、１箇所に記番号４１が印刷されている。なお、図４に示すように、記番号及び記番号の周囲の背景を含む領域を記番号領域４２と称する。また、図４には、英数字を組み合わせた記番号を例示したが、英数字に限らず紙幣を特定できる記号や文字などが使用される。
【００３０】
図５は、撮像部における紙幣の画像の撮像時の状態を示す側面図である。撮像部３３は、白色光を照射するランプ３３０Ａ及びランプ３３０Ｂと、カラー画像を撮像するラインセンサ３３１Ａ及びラインセンサ３３１Ｂと、を備えている。図５において、紙幣４０は、搬送部２０（不図示）を矢印４５の方向に搬送されている。ランプ３３０Ａは紙幣４０の上面全体を照射し、紙幣４０から反射された光をラインセンサ３３１Ａで受光する。ラインセンサ３３１Ａが出力したカラー画像のデータは１ライン分であるが、紙幣４０が搬送されるにつれてラインセンサ３３１Ａが順次紙幣４０の画像を撮像するように設定することで、結果として２次元の画像が得られる。また、紙幣４０の下面は、ランプ３３０Ｂとラインセンサ３３１Ｂの組により撮像されて、上面と同様に２次元の画像が得られる。
【００３１】
ここで、紙幣は、金種毎に記番号が印刷されている位置や面が決まっている。例えば、日本の紙幣は、一方の面のみに記番号が印刷されており、他方の面には記番号は印刷されていない。そこで、図５に示した撮像部３３は、紙幣のどちらの面が上になって搬送されても良いように、紙幣４０の上側と下側に対して画像を撮像する構成を配している。しかし、外国の紙幣で両面に記番号が印刷されているものを扱う場合には、片側だけに画像を撮像する構成を配置しても構わない。また、日本の紙幣など片面だけに記番号が印刷されている紙葉類を扱う装置でも、紙葉類の面の向きを固定して扱える場合には、片側だけにランプ及びラインセンサを配しても構わない。また、ラインセンサに替えて２次元イメージセンサを使っても構わない。この場合、搬送中の紙葉類を１回〜数回に分けて撮像して、紙葉類全体の画像を得るように構成すれば良い。
【００３２】
次に、本発明では、記番号を正しく文字認識するために、以下に説明するような方法で記番号を抽出する。
【００３３】
［第１の画素選択処理］
紙幣識別部２５では、撮像部３３が紙幣４０のカラー画像を撮像すると、金種判別部３４がＲＯＭ３１からテンプレート画像を読み出し、撮像した画像と比較して紙幣の金種を判別する。続いて、切り出し部３５がこの判別した金種情報に基づいて記番号の位置情報をＲＯＭ３１から読み出し、この位置情報に対応する記番号領域を紙幣のカラー画像から切り出す。このとき、選択部３６は、第１の画素選択処理として、記番号領域のカラー画像から金種毎に決められた範囲内の色である画素を選択することにより、文字の画素を抽出するように設定できる。
【００３４】
例えば、画素毎に、Ｒ（赤）・Ｇ（緑）・Ｂ（青）の３つの明度について、金種毎に予め設定した範囲内であるかを確認する。選択した画素の明度が、赤の下限値ＲＬ≦Ｒ明度≦赤の上限値ＲＨ、且つ緑の下限値ＧＬ≦Ｇ明度≦緑の上限値ＧＨ、且つ青の下限値ＢＬ≦Ｂ明度≦青の上限値ＢＨならば、選択後の画素値に元の画素値を代入する。一方、選択した画素の明度がいずれか一つでも範囲内に入らなければ（範囲外であれば）、選択後の画素値に各々２５５（最大値）を代入し、背景として白色に設定（置換）する。
【００３５】
なお、選択した画素の明度が範囲内に入らない場合には、記番号を背景との色の違いがはっきりする色に変換すれば良い。例えば、紙幣の紙の色（媒体の色）に応じた色に変換すれば良く、紙幣の紙の色が白色の場合には、上記のように、背景として白色を設定する。
【００３６】
この処理の具体例を図６に示す。図６は、記番号の抽出結果を示す図である。図６（Ａ）は、切り出し部３５により切り出された記番号領域４２の画像である。本来はカラー画像であるが、紙面の都合によりグレー画像で表現されている。記番号「ＥＬ９５６２９３ＹＣ」は赤色のインクにより印刷されている。記番号の周囲の背景には水色基調で種々の線画が印刷されている。
【００３７】
図６（Ｂ）は、図６（Ａ）に示したカラー画像をグレー画像に変換し、さらに２値化した画像である。このように、画素の選択を行わずに記番号領域全体を２値化すると、右から４つ目の文字「９」の一部が切れていたり、左の先頭からの４文字「ＥＬ９５」の周囲には記番号の文字以外に背景の線や点が残ってしまったりする。このような画像を文字認識しても精度が悪く、正しく文字認識できない可能性がある。
【００３８】
図６（Ｃ）は、図６（Ａ）に対して画素の選択処理を行った画像である。文字色が赤なので、文字部分ではＧ明度とＢ明度は非常に小さいため、緑の上限値ＧＨと青の上限値ＢＨはかなり小さな値に設定されている。一方、背景は水色基調であるため、Ｂ明度が青の上限値ＢＨより大きく、白色に変換されている。背景だけが白色に変換された結果、文字列のみが抽出されており、正しく文字認識を行うことができる。
【００３９】
なお、図６（Ｃ）に示したように抽出した画素を、図６（Ｄ）に示すように２値化しても良い。これにより、文字列の色と背景色との明暗がはっきりするので、文字認識の精度が向上する。
【００４０】
以上のように、文字色と背景色が異なる金種について記番号の文字認識を行う際には、画素をその明度に応じて選択することで、記番号の文字を正確に抽出できる。
【００４１】
［第２の画素選択処理］
切り出し部３５が切り出した記番号領域のカラー画像について、選択部３６は、第２の画素の選択処理として、予め設定した固有ベクトルと明度を線形結合した値を演算し、この値が金種毎に定めた範囲内である画素を選択することにより文字の画素を抽出するように設定できる。
【００４２】
例えば、予め定めた判定用の固有ベクトルを（ＷＲ，ＷＧ，ＷＢ）で、画素の明度を（ＲＳ，ＧＳ，ＢＳ）とすると、判定用ベクトルと画素の明度を線形結合させた値である特徴量Ｆは、Ｆ＝ＷＲ＊ＲＳ＋ＷＧ＊ＧＳ＋ＷＢ＊ＢＳとなる。この特徴量Ｆが、金種毎に予め設定した範囲内であるかを確認する。特徴量Ｆが、閾値ＷＬ≦Ｆ≦閾値ＷＨならば、選択後の画素値に元の画素値を代入する。一方、選択した画素の明度がいずれか一つでも範囲内に入らなければ、選択後の画素値に各々２５５（最大値）を代入し、背景としての白色を設定する。
【００４３】
なお、第１の画素選択処理と同様に、選択した画素の明度が範囲内に入らない場合には、記番号を背景との色の違いがはっきりする色に変換すれば良い。
【００４４】
この処理の具体例を図７に示す。図７は、画素を選択する２つの処理方法を対比説明するための図である。図７（Ａ）は、明度が特定範囲内の画素を選択する第１の画素選択処理方法であり、図７（Ｂ）は、第２の画素選択処理方法である。
【００４５】
図７（Ａ）には、ＲとＧを軸とした空間において、文字部分の画素を○でプロットし、背景色Ａの模様の画素を□でプロットし、背景色Ｂの模様の画素を△でプロットしている。なお、図７に示すデータは、実際にはＲＧＢの３次元データであるが、ここでは説明の簡単のためにＲＧの２次元データとして扱う。文字色と背景色Ａと背景色Ｂが似通っているので、閾値ＲＨ，ＲＬ，ＧＨ，ＧＬでは、記番号の文字だけでなく背景の一部も選択してしまうことを示している。つまり、赤の上限値ＲＨ，赤の下限値ＲＬ，緑の上限値ＧＨ，緑の下限値ＧＬで囲まれた判別範囲内（矩形の内側）が、文字色画素として判定されるが、背景色Ａの画素群の一部分がこの判別範囲内（矩形内）に含まれており、これらの画素は背景でありながら文字を構成する画素として判定される。また、背景色Ｂの画素群の一部分がこの判別範囲内（矩形内）に含まれており、これらの画素も背景でありながら文字の構成する画素として判定される。そのため、文字認識は可能であるが、認識精度が若干低下する。
【００４６】
一方、図７（Ｂ）に示す本処理方法では、ＲＧ空間ではなく、固有ベクトル（ＷＲ０，ＷＧ０）と画素の明度で線形結合された軸と、固有ベクトル（ＷＲ１，ＷＧ１）で線形結合された軸と、で表された空間に投影されている。特徴量Ｆ０は、Ｆ０＝ＷＲ０＊ＲＳ＋ＷＧ０＊ＧＳ、特徴量Ｆ１は、Ｆ１＝ＷＲ１＊ＲＳ＋ＷＧ１＊ＧＳである。この場合、閾値ＷＨ０，閾値ＷＬ０，閾値ＷＨ１，閾値ＷＬ１で囲まれた判別範囲内（矩形内）には、背景色Ａと背景色Ｂの画素は含まれておらず、文字の画素のみが含まれている。そのため、本処理方法を用いることで、記番号の文字を構成する画素のみを抽出できる。
【００４７】
この処理方法で記番号の文字のみを抽出するためには、実験などを行って予め金種毎にサンプリングした紙幣の複数のデータに基づいて、固有ベクトルと閾値を適切に設定すれば良い。これにより、文字の抽出精度が向上する。
【００４８】
なお、紙葉類の種類によっては、背景に複数の色で模様が描かれている場合には、文字色を複数の色に対して分離するように構成すれば良い。
【００４９】
［不要領域除去処理］
次に、上記のように第１の画素選択処理または第２の画素選択処理を行うことで、記番号の文字を抽出することができる。しかし、記番号の文字色と、記番号領域の背景色と、が同系色の場合には、背景の模様も抽出することがある。そこで、このような場合には、第１の画素選択処理または第２の画素選択処理の後に、以下に説明する不要領域除去処理（変換処理）を行うように構成すると良い。
【００５０】
図３に示した不要領域除去部３７は、メディアンフィルタを備えており、このメディアンフィルタにより、選択部３６が選択した各画素に対して不要領域の除去（変換）処理を行う。周知のように、メディアンフィルタは、注目画素とその周辺の画素から成るｎ×ｎ個の画素に割り当てられた値（例えば明度）をソートして、その中央値を、注目画素の値と置き換える手法であり、この方法により背景の模様など、不要なノイズ成分を除去（消去）することができる。
【００５１】
この処理の具体例を図８に示す。図８は、記番号の不要領域の除去処理結果を示す図である。図８（Ａ）は、切り出し部３５により切り出された記番号領域の一部の画像である。本来はカラー画像であるが、紙面の都合によりグレー画像で表現されている。記番号「ＡＬ８」が赤色のインクで印刷されている。また、この記番号の周囲の背景は同系色であり、明るい赤色調である。
【００５２】
図８（Ｂ）は、図８（Ａ）に対して画素の選択処理を行った結果の画像である。上記のように文字色と背景色が同形色であるため、画素の選択処理を行っても、文字部分のみを抽出できず、背景の模様も抽出している。特に文字「Ａ」の周囲に文字以外の模様が残っている。
【００５３】
図８（Ｃ）は、図８（Ｂ）に対して不要領域の除去処理を行った画像である。図８（Ｃ）に示す画像は、５×５のメディアンフィルタで画像処理しており、図８（Ｂ）に見られた小さな斑点状の模様が消えている。
【００５４】
図８（Ｄ）は、図８（Ｃ）に示す画像を２値化処理した画像である。メディアンフィルタでの画像処理後に、画像を２値化することで、記番号の文字列の色と背景色との明暗をはっきりさせることができる。
【００５５】
このように、記番号の文字色と背景色が似ていても、選択処理の後に不要領域の除去処理を行うことで、記番号の文字のみを抽出できる。
【００５６】
次に、ＡＴＭ１では、第１の画素選択処理、第２の画素選択処理、及び不要領域除去処理を行うために、ＲＯＭ３１で、紙幣の金種毎にテーブルを記憶している。図９は、第１の画素選択処理、第２の画素選択処理、及び不要領域除去処理用のデータが記録されたテーブルの一例である。
【００５７】
図９（Ａ）は、第１の画素選択処理用のテーブルの一例である。図９（Ａ）において、方向とは、搬送路を搬送される紙幣の向きのことである。紙幣の向きは、搬送方向に向かう側を上とすると、紙幣の左辺が上の場合・右辺が上の場合・上辺が上の場合・下辺が上の場合の４通りがある。これらをそれぞれ方向０・方向１・方向２・方向３と称する。また、各金種毎及び各方向毎に切り出しに使う領域開始Ｘ座標・領域開始Ｙ座標・領域サイズＸ座標・領域サイズＹ座標、及び各金種毎の選択に使うＲ（赤）・Ｇ（緑）・Ｂ（青）の各明度の上限値と下限値（Ｒ上限値・Ｒ下限値・Ｇ上限値・Ｇ下限値・Ｂ上限値・Ｂ下限値）が格納されている。
【００５８】
また、図９（Ｂ）は、第２の画素選択処理用のデータテーブルの一例である。図９（Ａ）と異なる部分のみ説明する。判定個数は、１画素について判定に用いる判定式の個数である。図９（Ｂ）に示す例では２個が設定されている。係数セット０は、最初の判定式に使う固有ベクトル（ＷＲ０，ＷＧ０，ＷＢ０）である。これら固有ベクトルと画素の明度との線形結合により特徴量０が求められる。ＷＨ０とＷＬ０は特徴量０の判定用の閾値（上限値と下限値）である。同様に、（ＷＲ１，ＷＧ１，ＷＢ１），ＷＨ１，ＷＬ１は特徴量１を求めるために使用する固有ベクトルと、特徴量１の判定用の閾値（上限値と下限値）である。
【００５９】
図９（Ｃ）は、不要領域除去処理用のテーブルの一例である。図９（Ａ）と異なる部分のみ説明する。メディアンフィルタ使用フラグは、メディアンフィルタ処理の実行の可否が設定されている。また、メディアンフィルタ処理において、金種毎に異なるパラメータを設定できるようになっている。例えば、フィルタの大きさ（３×３，５×５など）や、中央値ではなくソート後の前からＮ番目を選択して置換するなど、紙幣の特徴に応じたパラメータを設定可能である。
【００６０】
次に、ＡＴＭ１の識別部の動作について説明する。図１０は、紙幣識別部の動作を説明するためのフローチャートである。図１１は、第１の画素選択処理を説明するためのフローチャートである。図１２は、第２の画素選択処理を説明するためのフローチャートである。
【００６１】
ＡＴＭ１の紙幣入出金口４ａから１枚ずつ紙幣が繰り出され、紙幣識別部２５まで搬送されると、制御部３０は、紙葉類検知センサ（不図示）により紙葉類の到来を検知し、撮像部３３（ランプ３３０Ａ、ランプ３３０Ｂ、ラインセンサ３３１Ａ、及びラインセンサ３３１Ｂ）により紙幣４０のカラー画像を撮像する（ｓ１）。
【００６２】
続いて、制御部３０は、金種判別部３４に撮像部３３が撮像したカラー画像を出力して、紙葉類の金種と向き（方向）を判別させて、これらの情報を取得する（ｓ２）。制御部３０は、ＲＯＭ３１に格納されているテーブルを参照し、取得した金種と方向の情報に対応した記番号領域４２の開始位置とサイズの情報を読み出して、切り出し部３５により記番号領域をカラー画像から切り出す（ｓ３）。
【００６３】
制御部３０は、選択部３６により、切り出した記番号領域のカラー画像から、文字部分の色成分に着目し、文字部分を選択して抽出する（ｓ４）。具体的には、制御部３０は、ステップｓ３で参照したテーブルに図９（Ａ）に示したようにＲ・Ｇ・Ｂの上限値と下限値が記載されている場合には、図１１に示す第１の画素選択処理を行う。一方、制御部３０は、ステップｓ３で参照したテーブルに図９（Ｂ）に示したように固有ベクトルと特徴量の上限値と下限値が記載されている場合には、図１２に示す第２の画素選択処理を行う。
【００６４】
第１の画素選択処理を行う場合には、以下の手順で行う。図１１に示すように、選択処理においては、まず切り出された記番号領域のカラー画像から１画素分のＲ明度・Ｇ明度・Ｂ明度を取り出す（ｓ１１）。次にテーブルから読み出した閾値（ＲＨ，ＲＬ，ＧＨ，ＧＬ，ＢＨ，ＢＬ）の範囲内であるかを確認する（ｓ１２）。
【００６５】
もし、ＲＬ≦Ｒ明度≦ＲＨ、且つＧＬ≦Ｇ明度≦ＧＨ、且つＧＬ≦Ｇ明度≦ＧＨならば（ｓ１２：Ｙ）、選択後の画素値に元の画素値を代入する（ｓ１３）。一方、もし前記条件が成り立たなければ（ｓ１２：Ｎ）、選択後の画素値に各々２５５（最大値）を代入し、背景としての白色を設定する（ｓ１４）。
【００６６】
続いて、全ての画素に対して処理が終わったかチェックし（ｓ１５）、まだ終了してなければ次の画素の処理に移り（ｓ１１）、終了していれば選択処理を終える。
【００６７】
また、第２の画素選択処理を行う場合には、以下の手順で行う。図１２に示すように、まず切り出された記番号領域のカラー画像から１画素分のＲ明度・Ｇ明度・Ｂ明度を取り出す（ｓ２１）。次に、取り出した明度と、テーブルから読み出した固有ベクトルと、を線形結合させ、特徴量Ｆ＝ＷＲ＊ＲＳ＋ＷＧ＊ＧＳ＋ＷＢ＊ＢＳを求め（ｓ２２）、この特徴量Ｆに対して、判定式ＷＬ≦Ｆ≦ＷＨを判定する（ｓ２３）。全ての判定式での判定が終了したかチェックし（ｓ２４）、終了していなければ（ｓ２４：Ｎ）、次の特徴量を求め（ｓ２１）、全ての判定式が終了していれば（ｓ２４：Ｙ）、全ての判定式が真であったのかをチェックする（ｓ２５）。全ての判定式が真であったなら（ｓ２５：Ｙ）、選択後の画素値に元の画素値を代入する（ｓ２６）。一方、もし判定式が一つでも偽であったならば（ｓ２５：Ｎ）、選択後の画素値に各々２５５（最大値）を代入し、背景としての白色を設定する（ｓ２７）。
【００６８】
続いて、全ての画素に対して処理が終わったかチェックし（ｓ２８）、まだ終了してなければ（ｓ２８：Ｎ）、次の画素の処理に移り（ｓ２１）、終了していれば（ｓ２８：Ｙ）、選択処理を終了する。
【００６９】
なお、選択後の画素値もカラー画像として扱ったが、グレー画像や２値画像に変換しても構わない。これは、後処理においてどのような画像表現で処理するかによって決めれば良い。
【００７０】
図１０に示したフローチャートに示したように、ステップｓ４の処理を終了すると、続いて、制御部３０は、不要領域除去処理を行う必要があるか否かを、ＲＯＭ２１に設定されている金種毎のテーブルを参照して判定する（ｓ５）。
【００７１】
制御部３０は、参照したテーブルのメディアンフィルタ使用フラグが「使用」となっていれば（ｓ５：Ｙ）、不要領域除去処理を行い（ｓ６）、「不使用」となっていれば（ｓ５：Ｎ）、不要領域除去処理を行わずに次のステップｓ７を実行する。
【００７２】
制御部３０は、上記の各画像処理によって得られた記番号の文字列について、文字認識部３８により文字認識を行う（ｓ７）。
【００７３】
なお、文字認識には種々の周知の手法があるが、任意の手法で行えば良く、ここではその詳細な説明は省略する。
【００７４】
以上のように、本発明では、記番号を認識する際に、紙幣の記番号が表示されている領域を切り出し、この領域の背景色や模様を消去して記番号の画像のみを抽出するので、確実に文字認識を行うことができる。また、記番号に基づいて真券と偽造券を容易に判別できる。
【００７５】
なお、以上の説明では、紙葉類の一例として紙幣を用いる場合を説明したが、本発明はこれに限るものではなく、くじ、チケット、有価証券など記番号が表記されている他の紙葉類を用いることも、当然可能である。
【符号の説明】
【００７６】
１…ＡＴＭ ２…主制御部 ４ａ…紙幣入出金口 ２０…紙幣搬送路（搬送部） ２１…ＲＯＭ ２１…紙幣カートリッジ ２２…回収カートリッジ ２３…一時保留部 ２４…入出金紙幣保留部 ２５…紙幣識別部 ３０…制御部 ３１…ＲＯＭ ３２…ＲＡＭ ３３…撮像部 ３４…金種判別部 ３５…切り出し部 ３６…選択部 ３７…不要領域除去部 ３８…文字認識部
【特許請求の範囲】
【請求項１】
搬送路に沿って搬送されている紙葉類に表記されている記番号を認識する記番号認識装置において、
前記紙葉類のカラー画像を撮像する撮像手段と、
前記撮像手段が撮像したカラー画像に基づいて前記紙葉類の種類と向きを判別する判別手段と、
前記判別手段が判別した紙葉類の種類と向きの情報に基づいて前記記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する選択手段と、
前記選択手段が選択した画素から成る画像に対して文字認識する文字認識手段と、
を備えたことを特徴とする記番号認識装置。
【請求項２】
前記選択手段は、
前記記番号領域の画像から画素毎に、その画素について取得したＲ・Ｇ・Ｂの各明度に基づく値が、閾値の範囲内であれば選択する請求項１に記載の記番号認識装置。
【請求項３】
前記選択手段は、
前記記番号領域の画像から画素毎に、その画素について取得したＲ・Ｇ・Ｂの各明度と、紙葉類の種類毎にそれぞれ設定された固有ベクトルと、を線形結合した値を算出し、その値が閾値の範囲内であれば選択する請求項２に記載の記番号認識装置。
【請求項４】
前記選択手段は、前記Ｒ・Ｇ・Ｂの各明度に基づく値が前記閾値の範囲外であれば、予め設定した別の明度に置換する請求項２または３に記載の記番号認識装置。
【請求項５】
前記選択手段が選択した画素から成る画像に対して、メディアンフィルタにより画像処理を行って、不要な画素を除去する不要領域除去手段を備え、
前記文字認識手段は、不要領域除去手段が不要な画素を除去した画像に対して文字認識する請求項１乃至４のいずれかに記載の記番号認識装置。
【請求項６】
本体前面に設けられた入出金口と、本体内部に設けられた紙葉類カートリッジとの間で、入出金する紙葉類を搬送する紙幣処理装置において、
記番号が表記されている紙葉類のカラー画像を撮像する撮像手段と、
前記撮像手段が撮像したカラー画像に基づいて紙葉類の種類と向きを判別する判別手段と、
前記判別手段が判別した紙葉類の種類と向きの情報に基づいて前記記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する選択手段と、
前記選択手段が選択した画素から成る画像に対して文字認識する文字認識手段と、
を備えたことを特徴とする紙幣処理装置。
【請求項７】
本体前面に設けられた入出金口と、本体内部に設けられた紙葉類カートリッジとの間で、入出金する紙葉類を搬送し、入出金取引を処理する自動取引処理装置において、
記番号が表記されている紙葉類のカラー画像を撮像する撮像手段と、
前記撮像手段が撮像したカラー画像に基づいて紙葉類の種類と向きを判別する判別手段と、
前記判別手段が判別した紙葉類の種類と向きの情報に基づいて前記記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する選択手段と、
前記選択手段が選択した画素から成る画像に対して文字認識する文字認識手段と、
を備えたことを特徴とする自動取引処理装置。
【請求項８】
撮像手段が、記番号が表記された紙葉類のカラー画像を撮像する手順と、
判別手段が、前記撮像手段によって撮像されたカラー画像に基づいて前記紙葉類の種類と向きを判別する手順と、
選択手段が、前記判別手段によって判別された紙葉類の種類と向きの情報に基づいて紙葉類の記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する手順と、
文字認識手段が、前記選択手段によって選択された画素から成る記番号画像に対して文字認識する手順と、
から構成される記番号認識方法。
【請求項１】
搬送路に沿って搬送されている紙葉類に表記されている記番号を認識する記番号認識装置において、
前記紙葉類のカラー画像を撮像する撮像手段と、
前記撮像手段が撮像したカラー画像に基づいて前記紙葉類の種類と向きを判別する判別手段と、
前記判別手段が判別した紙葉類の種類と向きの情報に基づいて前記記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する選択手段と、
前記選択手段が選択した画素から成る画像に対して文字認識する文字認識手段と、
を備えたことを特徴とする記番号認識装置。
【請求項２】
前記選択手段は、
前記記番号領域の画像から画素毎に、その画素について取得したＲ・Ｇ・Ｂの各明度に基づく値が、閾値の範囲内であれば選択する請求項１に記載の記番号認識装置。
【請求項３】
前記選択手段は、
前記記番号領域の画像から画素毎に、その画素について取得したＲ・Ｇ・Ｂの各明度と、紙葉類の種類毎にそれぞれ設定された固有ベクトルと、を線形結合した値を算出し、その値が閾値の範囲内であれば選択する請求項２に記載の記番号認識装置。
【請求項４】
前記選択手段は、前記Ｒ・Ｇ・Ｂの各明度に基づく値が前記閾値の範囲外であれば、予め設定した別の明度に置換する請求項２または３に記載の記番号認識装置。
【請求項５】
前記選択手段が選択した画素から成る画像に対して、メディアンフィルタにより画像処理を行って、不要な画素を除去する不要領域除去手段を備え、
前記文字認識手段は、不要領域除去手段が不要な画素を除去した画像に対して文字認識する請求項１乃至４のいずれかに記載の記番号認識装置。
【請求項６】
本体前面に設けられた入出金口と、本体内部に設けられた紙葉類カートリッジとの間で、入出金する紙葉類を搬送する紙幣処理装置において、
記番号が表記されている紙葉類のカラー画像を撮像する撮像手段と、
前記撮像手段が撮像したカラー画像に基づいて紙葉類の種類と向きを判別する判別手段と、
前記判別手段が判別した紙葉類の種類と向きの情報に基づいて前記記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する選択手段と、
前記選択手段が選択した画素から成る画像に対して文字認識する文字認識手段と、
を備えたことを特徴とする紙幣処理装置。
【請求項７】
本体前面に設けられた入出金口と、本体内部に設けられた紙葉類カートリッジとの間で、入出金する紙葉類を搬送し、入出金取引を処理する自動取引処理装置において、
記番号が表記されている紙葉類のカラー画像を撮像する撮像手段と、
前記撮像手段が撮像したカラー画像に基づいて紙葉類の種類と向きを判別する判別手段と、
前記判別手段が判別した紙葉類の種類と向きの情報に基づいて前記記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する選択手段と、
前記選択手段が選択した画素から成る画像に対して文字認識する文字認識手段と、
を備えたことを特徴とする自動取引処理装置。
【請求項８】
撮像手段が、記番号が表記された紙葉類のカラー画像を撮像する手順と、
判別手段が、前記撮像手段によって撮像されたカラー画像に基づいて前記紙葉類の種類と向きを判別する手順と、
選択手段が、前記判別手段によって判別された紙葉類の種類と向きの情報に基づいて紙葉類の記番号が表記されている記番号領域を特定し、この領域の画像から前記紙葉類の種類情報に基づいて決定した色の画素のみを選択する手順と、
文字認識手段が、前記選択手段によって選択された画素から成る記番号画像に対して文字認識する手順と、
から構成される記番号認識方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図７】
【図９】
【図１０】
【図１１】
【図１２】
【図６】
【図８】
【図２】
【図３】
【図４】
【図５】
【図７】
【図９】
【図１０】
【図１１】
【図１２】
【図６】
【図８】
【公開番号】特開２０１０−２２５０１３（Ｐ２０１０−２２５０１３Ａ）
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願番号】特願２００９−７３２２８（Ｐ２００９−７３２２８）
【出願日】平成２１年３月２５日（２００９．３．２５）
【出願人】（５０４３７３０９３）日立オムロンターミナルソリューションズ株式会社 (1,225)
【Ｆターム（参考）】
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願日】平成２１年３月２５日（２００９．３．２５）
【出願人】（５０４３７３０９３）日立オムロンターミナルソリューションズ株式会社 (1,225)
【Ｆターム（参考）】
[ Back to top ]