データ登録管理装置
【課題】例えばメモリ容量やＣＰＵパワーが限られた携帯端末装置であっても、各種データを登録する時のユーザの操作性を向上することができるデータ登録管理装置を提供する。
【解決手段】データ登録管理装置１００は、ＣＣＤカメラ１０１によって撮影されてデータメモリ１０２に記録された画像の特徴量を抽出する画像特徴量抽出部１０３と、画像内の文字を抽出し、認識する文字認識部１０４と、抽出された特徴量をコード受付部１０６によって受け付けられたデータ項目と対応づけて初期設定メモリ１０７に記録する初期設定部１０５と、データ項目に対応するコードを受け付けるコード受付部１０６と、認識された文字を含む画像の特徴量を初期設定メモリ１０７にあらかじめ記憶されている特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に文字を分類し、データメモリ１０２に記録するデータ登録部１０８とを備える。
【解決手段】データ登録管理装置１００は、ＣＣＤカメラ１０１によって撮影されてデータメモリ１０２に記録された画像の特徴量を抽出する画像特徴量抽出部１０３と、画像内の文字を抽出し、認識する文字認識部１０４と、抽出された特徴量をコード受付部１０６によって受け付けられたデータ項目と対応づけて初期設定メモリ１０７に記録する初期設定部１０５と、データ項目に対応するコードを受け付けるコード受付部１０６と、認識された文字を含む画像の特徴量を初期設定メモリ１０７にあらかじめ記憶されている特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に文字を分類し、データメモリ１０２に記録するデータ登録部１０８とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、各種データを登録管理するデータ登録管理装置に関し、特にメモリ容量やＣＰＵ(Central Processing Unit)パワーが限られた携帯端末装置におけるデータ登録時の操作性を向上するための技術に関する。
【背景技術】
【０００２】
近年、例えば携帯電話等に代表される携帯端末装置において様々な情報データを本体に入力し、登録管理する用途や要求が多くなっている。例えば、日々の体重や体温、血圧等の数値を携帯電話に入力し、ダイエットや健康の管理に利用している。このようなデータを入力する時の操作における操作性向上は重要な課題である。
【０００３】
図８は従来の携帯端末装置の外観の構成を示す図である。この携帯端末装置は、操作部８０１と、表示部８０２と、スピーカー８０３と、マイク８０４とから構成されている。この携帯端末を代表とする従来の装置においてデータを入力する場合、操作部８０１の方向キー８０５で表示部８０２に表示されたメニューからデータ登録メニューを選択し、さらに登録項目を選択した後に、操作部８０１の０〜９までの数字キー等で数字や文字を入れるという操作が一般的になっている。しかしながら、このような携帯端末での操作においては、入力の都度にキーを押すという操作が必要であり、体重や体温、血圧等の日常的に入力が必要な場合には、メニュー選択、入力項目選択、一文字毎の文字入力というように手間がかかり、結果、管理が継続しないという課題がある。
【０００４】
このような問題を解決するために、例えば、端末が自動でデータ入力時の自装置の周辺を撮影した画像データを環境対象データとして記録し、操作の状況データとして、データの登録管理に利用するような技術が提案されている（例えば、特許文献１参照。）。
【特許文献１】特許第３４６９５６１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１で提案されているような技術の場合には、大量の画像データを蓄積記録する必要があるために、例えばメモリ容量やＣＰＵパワーが限られた携帯端末装置では利用は困難である。
【０００６】
そこで、本発明は上記の事情に鑑みてなされたものであり、例えばメモリ容量やＣＰＵパワーが限られた携帯端末装置であっても、各種データを登録する時のユーザの操作性を向上することができるデータ登録管理装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、本発明に係るデータ登録管理装置は、被写体を撮影する撮影手段と、前記撮影手段によって撮影された前記被写体の画像内の文字を認識する文字認識手段と、前記撮影手段によって撮影された前記画像の特徴量を抽出する画像特徴量抽出手段と、前記文字認識手段によって認識された前記画像内の文字を、前記画像特徴量抽出手段によって抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録手段とを備えることを特徴とする。
【０００８】
これによって、例えばＣＣＤ(Charge Coupled Devices)カメラやＣＭＯＳ(Complementary Metal Oxide Semiconductor)カメラ等の撮影手段で対象を撮影するだけで、必要なデータを分類して登録管理することができ、手間のかからない操作を実現することができる。
【０００９】
ここで、前記画像特徴量抽出手段は、前記特徴量として色分布、輝度分布、および文字部分位置の少なくとも１つを抽出してもよい。
【００１０】
また、前記画像特徴量抽出手段は、前記画像を２次元の所定の小領域に分割する画像分割部と、前記小領域に含まれる画素の輝度平均を算出する輝度平均算出部と、各前記小領域の輝度平均をベクトル化し、前記ベクトルを前記特徴量として出力する特徴ベクトル出力部を備えてもよい。
【００１１】
これによって、特徴量を効率的に表すことができる。
また、前記データ登録管理装置は、さらに、データ項目を受け付けるデータ項目受付手段と、前記画像特徴量抽出手段によって抽出された前記特徴量と前記データ項目受付手段によって受け付けられた前記データ項目とを記憶する初期設定記憶手段と、前記画像特徴量抽出手段によって抽出された前記特徴量を前記データ項目受付手段によって受け付けられた前記データ項目と対応づけて前記初期設定記憶手段に記録する初期設定手段とを備えてもよい。
【００１２】
ここで、前記データ登録手段は、前記文字認識手段によって認識された前記文字を含む画像の特徴量を、前記初期設定記憶手段にあらかじめ記憶されている前記特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に、前記文字を分類し、記録してもよい。
【００１３】
これによって、膨大な画像データの比較を必要とせずに登録するデータの項目、種類を判別することができる。
【００１４】
また、前記データ登録管理装置は、さらに、前記初期設定記憶手段にあらかじめ記憶されている前記特徴量に基づいて、画像撮影が行われる際に被写体の文字位置を合わせるための基準位置を決定する基準位置決定手段と、画像撮影が行われる際に、前記基準位置決定手段によって決定された前記基準位置を示す基準表示と現在撮影中の画像との合成画像を出力する制御手段と、前記制御手段から出力された前記合成画像を表示する表示手段とを備えてもよい。
【００１５】
これによって、文字認識すべき文字位置の特定がしやすくなり、文字認識の精度が向上し、誤操作を低減することができる。
【００１６】
なお、本発明は、このようなデータ登録管理装置として実現することができるだけでなく、このようなデータ登録管理装置が備える特徴的な手段をステップとするデータ登録管理方法として実現したり、それらのステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ等の記録媒体やインターネット等の伝送媒体を介して配信することができるのは言うまでもない。
【発明の効果】
【００１７】
本発明に係るデータ登録管理装置によれば、例えばＣＣＤカメラやＣＭＯＳカメラ等の撮影手段で対象を撮影するだけで、必要なデータを分類して登録管理することができ、各種データを登録する時の操作性を向上することができる。また、膨大な画像データの比較を行う必要がなく、大きなメモリ容量やＣＰＵへの大きな負荷なく、実現することができる。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の各実施の形態について、それぞれ図面を参照しながら説明する。
【００１９】
（実施の形態１）
図１は、本発明の実施の形態１に係るデータ登録管理装置の構成を示すブロック図である。
【００２０】
データ登録管理装置１００は、データを登録管理するための例えば携帯端末装置として実現される装置であり、図１に示すようにＣＣＤカメラ１０１、データメモリ１０２、画像特徴量抽出部１０３、文字認識部１０４、初期設定部１０５、コード受付部１０６、初期設定メモリ１０７、データ登録部１０８、制御部１０９、表示部１１０、および通信処理部１１１を備えている。
【００２１】
ＣＣＤカメラ１０１は、撮影手段であり、被写体（対象の計測機器等）を撮影して画像を取得する。データメモリ１０２は、データ記憶手段であり、画像や文字等のデータを記憶する。画像特徴量抽出部１０３は、ＣＣＤカメラ１０１によって撮影されてデータメモリ１０２に記録された画像の特徴量を抽出する。文字認識部１０４は、ＣＣＤカメラ１０１によって撮影されてデータメモリ１０２に記録された画像内の文字を抽出し、認識する。
【００２２】
コード受付部１０６は、データ項目受付手段であり、使用者によって入力される例えば「体重」、「体温」、「血圧」等のデータ項目に対応するコードを受け付ける。初期設定部１０５は、画像特徴量抽出部１０３によって抽出された特徴量をコード受付部１０６によって受け付けられたデータ項目（コード）と対応づけて初期設定メモリ１０７に記録する。初期設定メモリ１０７は、初期設定において記録される特徴量とデータ項目とを記憶する初期設定記憶手段である。
【００２３】
データ登録部１０８は、文字認識部１０４によって認識された文字を含む画像の特徴量を、初期設定メモリ１０７にあらかじめ記憶されている特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に、文字を分類し、データメモリ１０２に記録する。
【００２４】
制御部１０９は、データ項目毎に、データメモリ１０２に記録された文字と記録された日時とを対応づけてグラフ化または図形化して出力する。表示部１１０は、例えば液晶表示装置等の表示装置であり、制御部１０９から出力されたグラフまたは図形を表示する。通信処理部１１１は、制御部１０９から出力される文字、データ項目を通信データとして遠隔にある他の端末や記録装置に送信する等、無線によりデータの送受信を行う。
【００２５】
図２は、実施の形態１における画像特徴量抽出部の詳細な構成を示すブロック図である。
【００２６】
画像特徴量抽出部１０３は、図２に示すように画像分割部２０１、輝度平均算出部２０２、画像２値化部２０３、画素ヒストグラム算出部２０４、文字部分位置決定部２０５、および特徴ベクトル出力部２０７を備えている。
【００２７】
画像分割部２０１は、入力された画像を２次元の所定の小領域に分割する。輝度平均算出部２０２は、各小領域に含まれる画素の輝度平均を算出する。画像２値化部２０３は、各小領域の平均輝度の分布画像を２値化する。画素ヒストグラム算出部２０４は、２値化画像において、水平方向の軸と垂直方向の軸に対して投影される画素の画素値を計数する。文字部分位置決定部２０５は、画素ヒストグラム算出部２０４から入力された計数結果において、あらかじめ設定された閾値以上となる各軸上の区間で、中心から連続している部分を抜き出し、抜き出した区間を文字部分位置と決定する。特徴ベクトル出力部２０７は、各前記小領域の輝度平均をベクトル化し、前記ベクトルを前記特徴量として出力する。
【００２８】
次に、上記のように構成されたデータ登録管理装置１００の動作について説明する。具体的な動作として、ここでは健康データとして体重を登録管理する場合を例に説明する。
【００２９】
まず使用者は、新しい項目のデータを入力する場合に、これから登録するデータの項目に関して初期設定を行う。初期設定として、まず表示部１１０に表示される操作メニューより、初期データ登録項目として「体重」を選択し、次に自分の体重を計測する体重計の画像をＣＣＤカメラ１０１で撮影する。撮影された画像は、データメモリ１０２に記憶され、次に画像特徴量抽出部１０３が撮影された画像を読み出し、以下の処理を行う。
【００３０】
まず、画像分割部２０１は、図３（ａ）に示す入力された画像を図３（ｃ）に示すように２次元の小領域に分割し、各小領域の各軸における座標の最大値と最小値をその小領域の位置情報として輝度平均算出部２０２に出力する。図３の例では、垂直方向、水平方向の各軸であらかじめ設定された数で等分割した場合を示している。なお、ここでは画像分割部２０１の分割は、各軸で等しい分割としたが、例えば、画像の中心付近は細かく、周辺は大きくというように各軸で違う割合で分割してもよい。
【００３１】
輝度平均算出部２０２は、画像分割部２０１から入力された位置情報に基づき、各領域内に含まれる輝度平均値を求め、特徴ベクトル出力部２０７に出力する。この時、各画素の輝度値は、入力画像がＲＧＢカラー画像である場合には、例えばＧ成分の画素の輝度としてもよいし、ＲＧＢの各成分の輝度値を平均するとしてもよい。図３では、図３（ｂ）に示すＧ成分の画素の輝度を用い、図３（ｄ）に示すように各領域の輝度平均値を濃淡で示している。この濃淡の分布画像は、撮影された計測器毎に異なり、計測器の撮影画像の大まかな特徴を表していると考えられる。
【００３２】
次に、画像２値化部２０３は、輝度平均算出部２０２から入力された図４（ａ）に示すような各領域の平均輝度の分布画像を図４（ｃ）に示すように２値化し、画素ヒストグラム算出部２０４に出力する。この時、画像２値化部２０３は、図４（ｂ）に示すように各輝度平均値毎に入力された濃淡の分布画像内の画素数をカウントし、全体画素数の割合で設定される輝度値を閾値として、それよりも輝度値が大きい画素の画素値を０（図４では白）、小さい画素の画素値を１（図４では黒）とすることで２値化を実行する。
【００３３】
画素ヒストグラム算出部２０４は、画像２値化部２０３から入力された２値化画像において、水平方向の軸と垂直方向の軸に対して投影される画素の画素値を計数し、図４（ｄ）、図４（ｅ）に示すような各軸座標における画素値の計数結果を文字部分位置決定部２０５に出力する。
【００３４】
次に、文字部分位置決定部２０５は、「計測値を表す文字は、画像の中心付近に水平に並んでいる」、「文字は輝度が低く、２値化画像で画素値が１になる」という仮定から、画素ヒストグラム算出部２０４から入力された計数結果において、図５（ｂ）、図５（ｃ）に示すようにあらかじめ設定された計数結果の平均値に対する割合で決められる閾値以上となる各軸上の区間で、中心から連続している部分を抜き出し、抜き出された区間の各軸における最小値（Ｘｍｉｎ，Ｙｍｉｎ）、最大値（Ｘｍａｘ，Ｙｍａｘ）を文字部分位置と決定し、文字位置情報として特徴ベクトル出力部２０７と文字認識部１０４に出力する。
【００３５】
特徴ベクトル出力部２０７は、輝度平均算出部２０２と文字部分位置決定部２０５から入力される数値をベクトル化し、画像の特徴を表す特徴量として、初期設定部１５に出力する。
【００３６】
ベクトル化した結果得られる特徴ベクトルＶ（ｘ）は、輝度平均算出部２０２からの入力値が、垂直方向でｉ番目、水平方向でｊ番目の小領域の平均輝度をＰ（ｉ，ｊ）、文字部分位置決定部２０５からの入力値を（Ｘｍｉｎ，Ｙｍｉｎ），（Ｘｍｉｎ，Ｙｍｉｎ）とした場合には、次の式１に示すように、（ｍ×ｎ＋４）次元のベクトルで表現される。
【００３７】
Ｖ（ｘ）＝｛０≦ｉ≦ｍ，０≦ｊ≦ｎ，Ｐ（ｉ，ｊ），Ｘｍｉｎ，Ｙｍｉｎ，Ｘｍｉｎ，Ｙｍｉｎ｝ （０≦ｘ≦ｍ×ｎ＋４） …（式１）
【００３８】
これによって、画像の色分布や輝度分布、文字部分と背景部分の分布を特徴として数値に反映できる。
【００３９】
次に、コード受付部１０６は、使用者によって入力される「体重」というデータ項目に対応するコードを受け付ける。このとき、使用者は、例えば携帯端末装置の操作部にあるボタンを押してコードを入力したり、十字キーで表示手段１１０上に表示されたデータ項目を選択したりすることで入力を行う。なお、データ項目が選択されるような場合は、コード受付部１０６が選択されたデータ項目をコードに変換する。
【００４０】
最後に、初期設定部１０５は、画像特徴量抽出部１０３から入力される式１で表される特徴量を「体重」というデータ項目であるとして、初期設定メモリ１０７に記録し、初期設定を終了する。
【００４１】
なお、使用者は、データ登録管理したい対象の計測機器毎に対して、上記の初期設定を行い、各画像の特徴ベクトルを初期設定メモリ１０７に登録することになる。
【００４２】
次に、使用者が通常にデータを登録する場合の動作について説明する。
まず、使用者は、自分の体重を計測する体重計の画像をＣＣＤカメラ１０１で撮影する。次に、撮影された画像は、初期設定時と同様にデータメモリ１０２に記憶され、画像特徴量抽出部１０３に入力される。次に、画像特徴量抽出部１０３は、上記に述べた初期設定時と同様にして画像内の文字位置を決定し、その文字位置情報を文字認識部１０４に出力する。文字認識部１０４は、入力された文字位置の画像を図４に示すように２値化画像に変換するとともに、初期設定時と同様にして垂直方向と水平方向の画素値のヒストグラムを作成し、各軸の中心に近い部分のピーク値から文字列の位置を決定する。次に、文字認識部１０４は、１文字毎の画像を切り出し、文字を対応する文字コードに置き換える。ここでは、体重計に表示された計測結果の数値に置き換えられることになる。文字コードに置き換える手法としては、既に提案されているテンプレートマッチングやベクトル量子化、ニューラルネットといった手法を用いる。次に、文字認識部１０４は、文字毎に前記置き換えられた文字コードをデータ登録部１０８に出力する。
【００４３】
さらに、初期設定時と同様に画像特徴量抽出部１０３が撮影された画像の特徴を表す特徴量である特徴ベクトルを求め、データ登録部１０８に出力する。
【００４４】
データ登録部１０８は、初期設定メモリ１０７に登録されている特徴ベクトルと画像特徴量抽出部１０３から入力される特徴ベクトルとの距離を求め、最も近いと判断される初期設定メモリ１０７上に登録されている特徴ベクトルに対応するデータ項目が現在入力されたデータ項目であると判断する。そして、データ登録部１０８は、現在入力されたデータ項目であると判断したデータ項目に対応させて、文字認識部１０４から入力される文字コードをデータメモリ１０２に記録する。なお、特徴ベクトル間の距離については、初期設定時に登録されている特徴ベクトルをＶｎ（ｘ）、画像特徴量抽出部１０３から入力される特徴ベクトルをＵ（ｘ）とした場合には、次の式２で表されるユークリッド距離として表現される。
【００４５】
【数１】
【００４６】
以上のようにして、計測対象を撮影した画像から計測結果の数値を読み出し、対応するデータ項目の計測値として登録することが可能となる。
【００４７】
（実施の形態２）
図６は、本発明の実施の形態２に係るデータ登録管理装置の構成を示すブロック図である。なお、実施の形態１と同様の構成については同一の符号を付し、説明を省略する。
【００４８】
データ登録管理装置６００は、実施の形態１の構成に加えて図６に示すように基準位置決定部６０１および基準位置メモリ６０２を備えている。
【００４９】
基準位置決定部６０１は、初期設定メモリ１０７にあらかじめ記憶されている特徴量に基づいて、画像撮影が行われる際に被写体の文字位置を合わせるための基準位置を決定する。基準位置メモリ６０２は、基準位置決定部６０１によって決定された基準位置を記憶する。制御部６０３は、画像撮影が行われる際に、基準位置メモリ６０２に記憶された基準位置を示す基準表示と現在撮影中の画像との合成画像を出力する。
【００５０】
次に、上記のように構成されたデータ登録管理装置６００で使用者がデータを登録する際の動作について説明する。ここでは、初期設定が実施の形態１で述べた手順で実施されているものとする。
【００５１】
まず、コード受付部１０６は、使用者によって入力される例えば「体重」というデータ項目に対応するコードを受け付ける。このとき、使用者は、例えば携帯端末装置の操作部にあるボタンを押してコードを入力したり、十字キーで表示手段１１０上に表示されたデータ項目を選択したりすることで入力を行う。
【００５２】
コード受付部１０６は、受け付けたコードを基準位置決定部６０１に出力する。次に、基準位置決定部６０１は、初期設定メモリ１０７にアクセスし、入力されたコードに対応する特徴ベクトルから文字位置情報を読み出し、文字位置情報から文字領域が含まれる矩形領域を求める。そして、基準位置決定部６０１は、あらかじめ設定された撮影される画像サイズと表示部１１０の表示画面の画素数から矩形領域の表示画面上の位置を決定し、その位置を文字が存在する基準位置として、基準位置メモリ６０２に記録する。制御部１０９は、図７に示すようにＣＣＤカメラ１０１で撮影する際に基準位置メモリ６０２から基準位置を読み出し、使用者に対象計測器（ここでは、体重計）の文字表示部分をあわせられるように表示画面上に基準位置に対応する矩形７０１を表示する。使用者は、その矩形７０１に対象計測器の表示部があうようにしてＣＣＤカメラ１０１で撮影を行う。
【００５３】
このことによって、あらかじめ文字認識するべき位置が決められるとともに、いつも同じサイズの画像として撮影でき、結果的に文字認識精度を向上することができる。
【産業上の利用可能性】
【００５４】
上述のように、本発明に係るデータ登録管理装置は、大きなメモリやＣＰＵの負荷なく、携帯端末装置のカメラでデータ登録対象を撮影するだけでデータを登録することができ、例えば携帯電話機、ＰＤＡ（Personal Digital Assistant）などの携帯端末装置に用いるのに適している。
【図面の簡単な説明】
【００５５】
【図１】本発明の実施の形態１に係るデータ登録管理装置の構成を示すブロック図である。
【図２】本発明の実施の形態１における画像特徴量抽出部の詳細な構成を示すブロック図である。
【図３】本発明の実施の形態１における画像分割部および輝度平均算出部の動作を説明するための図であり、（ａ）撮影されたカラー入力画像、（ｂ）入力画像のＧ成分の画像、（ｃ）小領域に分割された画像、（ｄ）濃淡分布の画像、の一例を示す図である。
【図４】本発明の実施の形態１における画像２値化部および画素ヒストグラム算出部の動作を説明するための図であり、（ａ）濃淡分布の画像、（ｂ）平均輝度値と画素数との関係のグラフ、（ｃ）濃淡分布の２値化画像、（ｄ）水平方向に投影した画素値の計数結果、（ｅ）垂直方向に投影した画素値の計数結果、の一例を示す図である。
【図５】本発明の実施の形態１における文字部分位置決定部の動作を説明するための図であり、（ａ）濃淡分布の２値化画像、（ｂ）水平方向に投影した画素値の計数結果、（ｃ）垂直方向に投影した画素値の計数結果、の一例を示す図である。
【図６】本発明の実施の形態２に係るデータ登録管理装置の構成を示すブロック図である。
【図７】本発明の実施の形態２における基準位置に対応する矩形の表示例を示す図である。
【図８】従来の携帯端末装置の外観の構成を示す図である。
【符号の説明】
【００５６】
１００、６００ データ登録管理装置
１０１ ＣＣＤカメラ
１０２ データメモリ
１０３ 画像特徴量抽出部
１０４ 文字認識部
１０５ 初期設定部
１０６ コード受付部
１０７ 初期設定メモリ
１０８ データ登録部
１０９、６０３ 制御部
１１０ 表示部
１１１ 通信処理部
２０１ 画像分割部
２０２ 輝度平均算出部
２０３ 画像２値化部
２０４ 画素ヒストグラム算出部
２０５ 文字部分位置決定部
２０７ 特徴ベクトル出力部
６０１ 基準位置決定部
６０２ 基準位置メモリ
【技術分野】
【０００１】
本発明は、各種データを登録管理するデータ登録管理装置に関し、特にメモリ容量やＣＰＵ(Central Processing Unit)パワーが限られた携帯端末装置におけるデータ登録時の操作性を向上するための技術に関する。
【背景技術】
【０００２】
近年、例えば携帯電話等に代表される携帯端末装置において様々な情報データを本体に入力し、登録管理する用途や要求が多くなっている。例えば、日々の体重や体温、血圧等の数値を携帯電話に入力し、ダイエットや健康の管理に利用している。このようなデータを入力する時の操作における操作性向上は重要な課題である。
【０００３】
図８は従来の携帯端末装置の外観の構成を示す図である。この携帯端末装置は、操作部８０１と、表示部８０２と、スピーカー８０３と、マイク８０４とから構成されている。この携帯端末を代表とする従来の装置においてデータを入力する場合、操作部８０１の方向キー８０５で表示部８０２に表示されたメニューからデータ登録メニューを選択し、さらに登録項目を選択した後に、操作部８０１の０〜９までの数字キー等で数字や文字を入れるという操作が一般的になっている。しかしながら、このような携帯端末での操作においては、入力の都度にキーを押すという操作が必要であり、体重や体温、血圧等の日常的に入力が必要な場合には、メニュー選択、入力項目選択、一文字毎の文字入力というように手間がかかり、結果、管理が継続しないという課題がある。
【０００４】
このような問題を解決するために、例えば、端末が自動でデータ入力時の自装置の周辺を撮影した画像データを環境対象データとして記録し、操作の状況データとして、データの登録管理に利用するような技術が提案されている（例えば、特許文献１参照。）。
【特許文献１】特許第３４６９５６１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１で提案されているような技術の場合には、大量の画像データを蓄積記録する必要があるために、例えばメモリ容量やＣＰＵパワーが限られた携帯端末装置では利用は困難である。
【０００６】
そこで、本発明は上記の事情に鑑みてなされたものであり、例えばメモリ容量やＣＰＵパワーが限られた携帯端末装置であっても、各種データを登録する時のユーザの操作性を向上することができるデータ登録管理装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、本発明に係るデータ登録管理装置は、被写体を撮影する撮影手段と、前記撮影手段によって撮影された前記被写体の画像内の文字を認識する文字認識手段と、前記撮影手段によって撮影された前記画像の特徴量を抽出する画像特徴量抽出手段と、前記文字認識手段によって認識された前記画像内の文字を、前記画像特徴量抽出手段によって抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録手段とを備えることを特徴とする。
【０００８】
これによって、例えばＣＣＤ(Charge Coupled Devices)カメラやＣＭＯＳ(Complementary Metal Oxide Semiconductor)カメラ等の撮影手段で対象を撮影するだけで、必要なデータを分類して登録管理することができ、手間のかからない操作を実現することができる。
【０００９】
ここで、前記画像特徴量抽出手段は、前記特徴量として色分布、輝度分布、および文字部分位置の少なくとも１つを抽出してもよい。
【００１０】
また、前記画像特徴量抽出手段は、前記画像を２次元の所定の小領域に分割する画像分割部と、前記小領域に含まれる画素の輝度平均を算出する輝度平均算出部と、各前記小領域の輝度平均をベクトル化し、前記ベクトルを前記特徴量として出力する特徴ベクトル出力部を備えてもよい。
【００１１】
これによって、特徴量を効率的に表すことができる。
また、前記データ登録管理装置は、さらに、データ項目を受け付けるデータ項目受付手段と、前記画像特徴量抽出手段によって抽出された前記特徴量と前記データ項目受付手段によって受け付けられた前記データ項目とを記憶する初期設定記憶手段と、前記画像特徴量抽出手段によって抽出された前記特徴量を前記データ項目受付手段によって受け付けられた前記データ項目と対応づけて前記初期設定記憶手段に記録する初期設定手段とを備えてもよい。
【００１２】
ここで、前記データ登録手段は、前記文字認識手段によって認識された前記文字を含む画像の特徴量を、前記初期設定記憶手段にあらかじめ記憶されている前記特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に、前記文字を分類し、記録してもよい。
【００１３】
これによって、膨大な画像データの比較を必要とせずに登録するデータの項目、種類を判別することができる。
【００１４】
また、前記データ登録管理装置は、さらに、前記初期設定記憶手段にあらかじめ記憶されている前記特徴量に基づいて、画像撮影が行われる際に被写体の文字位置を合わせるための基準位置を決定する基準位置決定手段と、画像撮影が行われる際に、前記基準位置決定手段によって決定された前記基準位置を示す基準表示と現在撮影中の画像との合成画像を出力する制御手段と、前記制御手段から出力された前記合成画像を表示する表示手段とを備えてもよい。
【００１５】
これによって、文字認識すべき文字位置の特定がしやすくなり、文字認識の精度が向上し、誤操作を低減することができる。
【００１６】
なお、本発明は、このようなデータ登録管理装置として実現することができるだけでなく、このようなデータ登録管理装置が備える特徴的な手段をステップとするデータ登録管理方法として実現したり、それらのステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ等の記録媒体やインターネット等の伝送媒体を介して配信することができるのは言うまでもない。
【発明の効果】
【００１７】
本発明に係るデータ登録管理装置によれば、例えばＣＣＤカメラやＣＭＯＳカメラ等の撮影手段で対象を撮影するだけで、必要なデータを分類して登録管理することができ、各種データを登録する時の操作性を向上することができる。また、膨大な画像データの比較を行う必要がなく、大きなメモリ容量やＣＰＵへの大きな負荷なく、実現することができる。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の各実施の形態について、それぞれ図面を参照しながら説明する。
【００１９】
（実施の形態１）
図１は、本発明の実施の形態１に係るデータ登録管理装置の構成を示すブロック図である。
【００２０】
データ登録管理装置１００は、データを登録管理するための例えば携帯端末装置として実現される装置であり、図１に示すようにＣＣＤカメラ１０１、データメモリ１０２、画像特徴量抽出部１０３、文字認識部１０４、初期設定部１０５、コード受付部１０６、初期設定メモリ１０７、データ登録部１０８、制御部１０９、表示部１１０、および通信処理部１１１を備えている。
【００２１】
ＣＣＤカメラ１０１は、撮影手段であり、被写体（対象の計測機器等）を撮影して画像を取得する。データメモリ１０２は、データ記憶手段であり、画像や文字等のデータを記憶する。画像特徴量抽出部１０３は、ＣＣＤカメラ１０１によって撮影されてデータメモリ１０２に記録された画像の特徴量を抽出する。文字認識部１０４は、ＣＣＤカメラ１０１によって撮影されてデータメモリ１０２に記録された画像内の文字を抽出し、認識する。
【００２２】
コード受付部１０６は、データ項目受付手段であり、使用者によって入力される例えば「体重」、「体温」、「血圧」等のデータ項目に対応するコードを受け付ける。初期設定部１０５は、画像特徴量抽出部１０３によって抽出された特徴量をコード受付部１０６によって受け付けられたデータ項目（コード）と対応づけて初期設定メモリ１０７に記録する。初期設定メモリ１０７は、初期設定において記録される特徴量とデータ項目とを記憶する初期設定記憶手段である。
【００２３】
データ登録部１０８は、文字認識部１０４によって認識された文字を含む画像の特徴量を、初期設定メモリ１０７にあらかじめ記憶されている特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に、文字を分類し、データメモリ１０２に記録する。
【００２４】
制御部１０９は、データ項目毎に、データメモリ１０２に記録された文字と記録された日時とを対応づけてグラフ化または図形化して出力する。表示部１１０は、例えば液晶表示装置等の表示装置であり、制御部１０９から出力されたグラフまたは図形を表示する。通信処理部１１１は、制御部１０９から出力される文字、データ項目を通信データとして遠隔にある他の端末や記録装置に送信する等、無線によりデータの送受信を行う。
【００２５】
図２は、実施の形態１における画像特徴量抽出部の詳細な構成を示すブロック図である。
【００２６】
画像特徴量抽出部１０３は、図２に示すように画像分割部２０１、輝度平均算出部２０２、画像２値化部２０３、画素ヒストグラム算出部２０４、文字部分位置決定部２０５、および特徴ベクトル出力部２０７を備えている。
【００２７】
画像分割部２０１は、入力された画像を２次元の所定の小領域に分割する。輝度平均算出部２０２は、各小領域に含まれる画素の輝度平均を算出する。画像２値化部２０３は、各小領域の平均輝度の分布画像を２値化する。画素ヒストグラム算出部２０４は、２値化画像において、水平方向の軸と垂直方向の軸に対して投影される画素の画素値を計数する。文字部分位置決定部２０５は、画素ヒストグラム算出部２０４から入力された計数結果において、あらかじめ設定された閾値以上となる各軸上の区間で、中心から連続している部分を抜き出し、抜き出した区間を文字部分位置と決定する。特徴ベクトル出力部２０７は、各前記小領域の輝度平均をベクトル化し、前記ベクトルを前記特徴量として出力する。
【００２８】
次に、上記のように構成されたデータ登録管理装置１００の動作について説明する。具体的な動作として、ここでは健康データとして体重を登録管理する場合を例に説明する。
【００２９】
まず使用者は、新しい項目のデータを入力する場合に、これから登録するデータの項目に関して初期設定を行う。初期設定として、まず表示部１１０に表示される操作メニューより、初期データ登録項目として「体重」を選択し、次に自分の体重を計測する体重計の画像をＣＣＤカメラ１０１で撮影する。撮影された画像は、データメモリ１０２に記憶され、次に画像特徴量抽出部１０３が撮影された画像を読み出し、以下の処理を行う。
【００３０】
まず、画像分割部２０１は、図３（ａ）に示す入力された画像を図３（ｃ）に示すように２次元の小領域に分割し、各小領域の各軸における座標の最大値と最小値をその小領域の位置情報として輝度平均算出部２０２に出力する。図３の例では、垂直方向、水平方向の各軸であらかじめ設定された数で等分割した場合を示している。なお、ここでは画像分割部２０１の分割は、各軸で等しい分割としたが、例えば、画像の中心付近は細かく、周辺は大きくというように各軸で違う割合で分割してもよい。
【００３１】
輝度平均算出部２０２は、画像分割部２０１から入力された位置情報に基づき、各領域内に含まれる輝度平均値を求め、特徴ベクトル出力部２０７に出力する。この時、各画素の輝度値は、入力画像がＲＧＢカラー画像である場合には、例えばＧ成分の画素の輝度としてもよいし、ＲＧＢの各成分の輝度値を平均するとしてもよい。図３では、図３（ｂ）に示すＧ成分の画素の輝度を用い、図３（ｄ）に示すように各領域の輝度平均値を濃淡で示している。この濃淡の分布画像は、撮影された計測器毎に異なり、計測器の撮影画像の大まかな特徴を表していると考えられる。
【００３２】
次に、画像２値化部２０３は、輝度平均算出部２０２から入力された図４（ａ）に示すような各領域の平均輝度の分布画像を図４（ｃ）に示すように２値化し、画素ヒストグラム算出部２０４に出力する。この時、画像２値化部２０３は、図４（ｂ）に示すように各輝度平均値毎に入力された濃淡の分布画像内の画素数をカウントし、全体画素数の割合で設定される輝度値を閾値として、それよりも輝度値が大きい画素の画素値を０（図４では白）、小さい画素の画素値を１（図４では黒）とすることで２値化を実行する。
【００３３】
画素ヒストグラム算出部２０４は、画像２値化部２０３から入力された２値化画像において、水平方向の軸と垂直方向の軸に対して投影される画素の画素値を計数し、図４（ｄ）、図４（ｅ）に示すような各軸座標における画素値の計数結果を文字部分位置決定部２０５に出力する。
【００３４】
次に、文字部分位置決定部２０５は、「計測値を表す文字は、画像の中心付近に水平に並んでいる」、「文字は輝度が低く、２値化画像で画素値が１になる」という仮定から、画素ヒストグラム算出部２０４から入力された計数結果において、図５（ｂ）、図５（ｃ）に示すようにあらかじめ設定された計数結果の平均値に対する割合で決められる閾値以上となる各軸上の区間で、中心から連続している部分を抜き出し、抜き出された区間の各軸における最小値（Ｘｍｉｎ，Ｙｍｉｎ）、最大値（Ｘｍａｘ，Ｙｍａｘ）を文字部分位置と決定し、文字位置情報として特徴ベクトル出力部２０７と文字認識部１０４に出力する。
【００３５】
特徴ベクトル出力部２０７は、輝度平均算出部２０２と文字部分位置決定部２０５から入力される数値をベクトル化し、画像の特徴を表す特徴量として、初期設定部１５に出力する。
【００３６】
ベクトル化した結果得られる特徴ベクトルＶ（ｘ）は、輝度平均算出部２０２からの入力値が、垂直方向でｉ番目、水平方向でｊ番目の小領域の平均輝度をＰ（ｉ，ｊ）、文字部分位置決定部２０５からの入力値を（Ｘｍｉｎ，Ｙｍｉｎ），（Ｘｍｉｎ，Ｙｍｉｎ）とした場合には、次の式１に示すように、（ｍ×ｎ＋４）次元のベクトルで表現される。
【００３７】
Ｖ（ｘ）＝｛０≦ｉ≦ｍ，０≦ｊ≦ｎ，Ｐ（ｉ，ｊ），Ｘｍｉｎ，Ｙｍｉｎ，Ｘｍｉｎ，Ｙｍｉｎ｝ （０≦ｘ≦ｍ×ｎ＋４） …（式１）
【００３８】
これによって、画像の色分布や輝度分布、文字部分と背景部分の分布を特徴として数値に反映できる。
【００３９】
次に、コード受付部１０６は、使用者によって入力される「体重」というデータ項目に対応するコードを受け付ける。このとき、使用者は、例えば携帯端末装置の操作部にあるボタンを押してコードを入力したり、十字キーで表示手段１１０上に表示されたデータ項目を選択したりすることで入力を行う。なお、データ項目が選択されるような場合は、コード受付部１０６が選択されたデータ項目をコードに変換する。
【００４０】
最後に、初期設定部１０５は、画像特徴量抽出部１０３から入力される式１で表される特徴量を「体重」というデータ項目であるとして、初期設定メモリ１０７に記録し、初期設定を終了する。
【００４１】
なお、使用者は、データ登録管理したい対象の計測機器毎に対して、上記の初期設定を行い、各画像の特徴ベクトルを初期設定メモリ１０７に登録することになる。
【００４２】
次に、使用者が通常にデータを登録する場合の動作について説明する。
まず、使用者は、自分の体重を計測する体重計の画像をＣＣＤカメラ１０１で撮影する。次に、撮影された画像は、初期設定時と同様にデータメモリ１０２に記憶され、画像特徴量抽出部１０３に入力される。次に、画像特徴量抽出部１０３は、上記に述べた初期設定時と同様にして画像内の文字位置を決定し、その文字位置情報を文字認識部１０４に出力する。文字認識部１０４は、入力された文字位置の画像を図４に示すように２値化画像に変換するとともに、初期設定時と同様にして垂直方向と水平方向の画素値のヒストグラムを作成し、各軸の中心に近い部分のピーク値から文字列の位置を決定する。次に、文字認識部１０４は、１文字毎の画像を切り出し、文字を対応する文字コードに置き換える。ここでは、体重計に表示された計測結果の数値に置き換えられることになる。文字コードに置き換える手法としては、既に提案されているテンプレートマッチングやベクトル量子化、ニューラルネットといった手法を用いる。次に、文字認識部１０４は、文字毎に前記置き換えられた文字コードをデータ登録部１０８に出力する。
【００４３】
さらに、初期設定時と同様に画像特徴量抽出部１０３が撮影された画像の特徴を表す特徴量である特徴ベクトルを求め、データ登録部１０８に出力する。
【００４４】
データ登録部１０８は、初期設定メモリ１０７に登録されている特徴ベクトルと画像特徴量抽出部１０３から入力される特徴ベクトルとの距離を求め、最も近いと判断される初期設定メモリ１０７上に登録されている特徴ベクトルに対応するデータ項目が現在入力されたデータ項目であると判断する。そして、データ登録部１０８は、現在入力されたデータ項目であると判断したデータ項目に対応させて、文字認識部１０４から入力される文字コードをデータメモリ１０２に記録する。なお、特徴ベクトル間の距離については、初期設定時に登録されている特徴ベクトルをＶｎ（ｘ）、画像特徴量抽出部１０３から入力される特徴ベクトルをＵ（ｘ）とした場合には、次の式２で表されるユークリッド距離として表現される。
【００４５】
【数１】
【００４６】
以上のようにして、計測対象を撮影した画像から計測結果の数値を読み出し、対応するデータ項目の計測値として登録することが可能となる。
【００４７】
（実施の形態２）
図６は、本発明の実施の形態２に係るデータ登録管理装置の構成を示すブロック図である。なお、実施の形態１と同様の構成については同一の符号を付し、説明を省略する。
【００４８】
データ登録管理装置６００は、実施の形態１の構成に加えて図６に示すように基準位置決定部６０１および基準位置メモリ６０２を備えている。
【００４９】
基準位置決定部６０１は、初期設定メモリ１０７にあらかじめ記憶されている特徴量に基づいて、画像撮影が行われる際に被写体の文字位置を合わせるための基準位置を決定する。基準位置メモリ６０２は、基準位置決定部６０１によって決定された基準位置を記憶する。制御部６０３は、画像撮影が行われる際に、基準位置メモリ６０２に記憶された基準位置を示す基準表示と現在撮影中の画像との合成画像を出力する。
【００５０】
次に、上記のように構成されたデータ登録管理装置６００で使用者がデータを登録する際の動作について説明する。ここでは、初期設定が実施の形態１で述べた手順で実施されているものとする。
【００５１】
まず、コード受付部１０６は、使用者によって入力される例えば「体重」というデータ項目に対応するコードを受け付ける。このとき、使用者は、例えば携帯端末装置の操作部にあるボタンを押してコードを入力したり、十字キーで表示手段１１０上に表示されたデータ項目を選択したりすることで入力を行う。
【００５２】
コード受付部１０６は、受け付けたコードを基準位置決定部６０１に出力する。次に、基準位置決定部６０１は、初期設定メモリ１０７にアクセスし、入力されたコードに対応する特徴ベクトルから文字位置情報を読み出し、文字位置情報から文字領域が含まれる矩形領域を求める。そして、基準位置決定部６０１は、あらかじめ設定された撮影される画像サイズと表示部１１０の表示画面の画素数から矩形領域の表示画面上の位置を決定し、その位置を文字が存在する基準位置として、基準位置メモリ６０２に記録する。制御部１０９は、図７に示すようにＣＣＤカメラ１０１で撮影する際に基準位置メモリ６０２から基準位置を読み出し、使用者に対象計測器（ここでは、体重計）の文字表示部分をあわせられるように表示画面上に基準位置に対応する矩形７０１を表示する。使用者は、その矩形７０１に対象計測器の表示部があうようにしてＣＣＤカメラ１０１で撮影を行う。
【００５３】
このことによって、あらかじめ文字認識するべき位置が決められるとともに、いつも同じサイズの画像として撮影でき、結果的に文字認識精度を向上することができる。
【産業上の利用可能性】
【００５４】
上述のように、本発明に係るデータ登録管理装置は、大きなメモリやＣＰＵの負荷なく、携帯端末装置のカメラでデータ登録対象を撮影するだけでデータを登録することができ、例えば携帯電話機、ＰＤＡ（Personal Digital Assistant）などの携帯端末装置に用いるのに適している。
【図面の簡単な説明】
【００５５】
【図１】本発明の実施の形態１に係るデータ登録管理装置の構成を示すブロック図である。
【図２】本発明の実施の形態１における画像特徴量抽出部の詳細な構成を示すブロック図である。
【図３】本発明の実施の形態１における画像分割部および輝度平均算出部の動作を説明するための図であり、（ａ）撮影されたカラー入力画像、（ｂ）入力画像のＧ成分の画像、（ｃ）小領域に分割された画像、（ｄ）濃淡分布の画像、の一例を示す図である。
【図４】本発明の実施の形態１における画像２値化部および画素ヒストグラム算出部の動作を説明するための図であり、（ａ）濃淡分布の画像、（ｂ）平均輝度値と画素数との関係のグラフ、（ｃ）濃淡分布の２値化画像、（ｄ）水平方向に投影した画素値の計数結果、（ｅ）垂直方向に投影した画素値の計数結果、の一例を示す図である。
【図５】本発明の実施の形態１における文字部分位置決定部の動作を説明するための図であり、（ａ）濃淡分布の２値化画像、（ｂ）水平方向に投影した画素値の計数結果、（ｃ）垂直方向に投影した画素値の計数結果、の一例を示す図である。
【図６】本発明の実施の形態２に係るデータ登録管理装置の構成を示すブロック図である。
【図７】本発明の実施の形態２における基準位置に対応する矩形の表示例を示す図である。
【図８】従来の携帯端末装置の外観の構成を示す図である。
【符号の説明】
【００５６】
１００、６００ データ登録管理装置
１０１ ＣＣＤカメラ
１０２ データメモリ
１０３ 画像特徴量抽出部
１０４ 文字認識部
１０５ 初期設定部
１０６ コード受付部
１０７ 初期設定メモリ
１０８ データ登録部
１０９、６０３ 制御部
１１０ 表示部
１１１ 通信処理部
２０１ 画像分割部
２０２ 輝度平均算出部
２０３ 画像２値化部
２０４ 画素ヒストグラム算出部
２０５ 文字部分位置決定部
２０７ 特徴ベクトル出力部
６０１ 基準位置決定部
６０２ 基準位置メモリ
【特許請求の範囲】
【請求項１】
被写体を撮影する撮影手段と、
前記撮影手段によって撮影された前記被写体の画像内の文字を認識する文字認識手段と、
前記撮影手段によって撮影された前記画像の特徴量を抽出する画像特徴量抽出手段と、
前記文字認識手段によって認識された前記画像内の文字を、前記画像特徴量抽出手段によって抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録手段と
を備えることを特徴とするデータ登録管理装置。
【請求項２】
前記画像特徴量抽出手段は、前記特徴量として色分布、輝度分布、および文字部分位置の少なくとも１つを抽出する
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項３】
前記画像特徴量抽出手段は、
前記画像を２次元の所定の小領域に分割する画像分割部と、
前記小領域に含まれる画素の輝度平均を算出する輝度平均算出部と、
各前記小領域の輝度平均をベクトル化し、前記ベクトルを前記特徴量として出力する特徴ベクトル出力部を備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項４】
前記データ登録管理装置は、さらに、
前記撮影手段によって撮影された前記画像、および前記文字認識手段によって認識された前記文字を記憶するデータ記憶手段を備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項５】
前記データ登録管理装置は、さらに、
データ項目を受け付けるデータ項目受付手段と、
前記画像特徴量抽出手段によって抽出された前記特徴量と前記データ項目受付手段によって受け付けられた前記データ項目とを記憶する初期設定記憶手段と、
前記画像特徴量抽出手段によって抽出された前記特徴量を前記データ項目受付手段によって受け付けられた前記データ項目と対応づけて前記初期設定記憶手段に記録する初期設定手段とを備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項６】
前記データ登録手段は、前記文字認識手段によって認識された前記文字を含む画像の特徴量を、前記初期設定記憶手段にあらかじめ記憶されている前記特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に、前記文字を分類し、記録する
ことを特徴とする請求項５記載のデータ登録管理装置。
【請求項７】
前記データ登録管理装置は、さらに、
前記データ項目毎に、前記データ記憶手段に記録された文字と記録された日時とを対応づけてグラフ化または図形化して出力する制御手段と、
前記制御手段から出力されたグラフまたは図形を表示する表示手段とを備える
ことを特徴とする請求項６記載のデータ登録管理装置。
【請求項８】
前記データ登録管理装置は、さらに、
前記初期設定記憶手段にあらかじめ記憶されている前記特徴量に基づいて、画像撮影が行われる際に被写体の文字位置を合わせるための基準位置を決定する基準位置決定手段と、
画像撮影が行われる際に、前記基準位置決定手段によって決定された前記基準位置を示す基準表示と現在撮影中の画像との合成画像を出力する制御手段と、
前記制御手段から出力された前記合成画像を表示する表示手段とを備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項９】
被写体を撮影する撮影ステップと、
前記撮影ステップにおいて撮影された前記被写体の画像内の文字を認識する文字認識ステップと、
前記撮影ステップにおいて撮影された前記画像の特徴量を抽出する画像特徴量抽出ステップと、
前記文字認識ステップにおいて認識された前記画像内の文字を、前記画像特徴量抽出ステップにおいて抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録ステップと
を含むことを特徴とするデータ登録管理方法。
【請求項１０】
被写体を撮影する撮影ステップと、
前記撮影ステップにおいて撮影された前記被写体の画像内の文字を認識する文字認識ステップと、
前記撮影ステップにおいて撮影された前記画像の特徴量を抽出する画像特徴量抽出ステップと、
前記文字認識ステップにおいて認識された前記画像内の文字を、前記画像特徴量抽出ステップにおいて抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録ステップとをコンピュータに実行させる
ことを特徴とするプログラム。
【請求項１】
被写体を撮影する撮影手段と、
前記撮影手段によって撮影された前記被写体の画像内の文字を認識する文字認識手段と、
前記撮影手段によって撮影された前記画像の特徴量を抽出する画像特徴量抽出手段と、
前記文字認識手段によって認識された前記画像内の文字を、前記画像特徴量抽出手段によって抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録手段と
を備えることを特徴とするデータ登録管理装置。
【請求項２】
前記画像特徴量抽出手段は、前記特徴量として色分布、輝度分布、および文字部分位置の少なくとも１つを抽出する
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項３】
前記画像特徴量抽出手段は、
前記画像を２次元の所定の小領域に分割する画像分割部と、
前記小領域に含まれる画素の輝度平均を算出する輝度平均算出部と、
各前記小領域の輝度平均をベクトル化し、前記ベクトルを前記特徴量として出力する特徴ベクトル出力部を備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項４】
前記データ登録管理装置は、さらに、
前記撮影手段によって撮影された前記画像、および前記文字認識手段によって認識された前記文字を記憶するデータ記憶手段を備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項５】
前記データ登録管理装置は、さらに、
データ項目を受け付けるデータ項目受付手段と、
前記画像特徴量抽出手段によって抽出された前記特徴量と前記データ項目受付手段によって受け付けられた前記データ項目とを記憶する初期設定記憶手段と、
前記画像特徴量抽出手段によって抽出された前記特徴量を前記データ項目受付手段によって受け付けられた前記データ項目と対応づけて前記初期設定記憶手段に記録する初期設定手段とを備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項６】
前記データ登録手段は、前記文字認識手段によって認識された前記文字を含む画像の特徴量を、前記初期設定記憶手段にあらかじめ記憶されている前記特徴量と比較し、最も類似している特徴量に対応づけられたデータ項目に、前記文字を分類し、記録する
ことを特徴とする請求項５記載のデータ登録管理装置。
【請求項７】
前記データ登録管理装置は、さらに、
前記データ項目毎に、前記データ記憶手段に記録された文字と記録された日時とを対応づけてグラフ化または図形化して出力する制御手段と、
前記制御手段から出力されたグラフまたは図形を表示する表示手段とを備える
ことを特徴とする請求項６記載のデータ登録管理装置。
【請求項８】
前記データ登録管理装置は、さらに、
前記初期設定記憶手段にあらかじめ記憶されている前記特徴量に基づいて、画像撮影が行われる際に被写体の文字位置を合わせるための基準位置を決定する基準位置決定手段と、
画像撮影が行われる際に、前記基準位置決定手段によって決定された前記基準位置を示す基準表示と現在撮影中の画像との合成画像を出力する制御手段と、
前記制御手段から出力された前記合成画像を表示する表示手段とを備える
ことを特徴とする請求項１記載のデータ登録管理装置。
【請求項９】
被写体を撮影する撮影ステップと、
前記撮影ステップにおいて撮影された前記被写体の画像内の文字を認識する文字認識ステップと、
前記撮影ステップにおいて撮影された前記画像の特徴量を抽出する画像特徴量抽出ステップと、
前記文字認識ステップにおいて認識された前記画像内の文字を、前記画像特徴量抽出ステップにおいて抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録ステップと
を含むことを特徴とするデータ登録管理方法。
【請求項１０】
被写体を撮影する撮影ステップと、
前記撮影ステップにおいて撮影された前記被写体の画像内の文字を認識する文字認識ステップと、
前記撮影ステップにおいて撮影された前記画像の特徴量を抽出する画像特徴量抽出ステップと、
前記文字認識ステップにおいて認識された前記画像内の文字を、前記画像特徴量抽出ステップにおいて抽出された前記画像の特徴量に基づいて分類し、記録するデータ登録ステップとをコンピュータに実行させる
ことを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２００８−６７３２１（Ｐ２００８−６７３２１Ａ）
【公開日】平成２０年３月２１日（２００８．３．２１）
【国際特許分類】
【出願番号】特願２００６−２４５９９８（Ｐ２００６−２４５９９８）
【出願日】平成１８年９月１１日（２００６．９．１１）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２０年３月２１日（２００８．３．２１）
【国際特許分類】
【出願日】平成１８年９月１１日（２００６．９．１１）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]