処理装置、プログラム及び電子ペン用帳票
【課題】予めグリッドが印刷されている方眼用紙にフリーハンドで記入した図形を精緻化した上でイメージ化することができる図形解析システムを提供する。
【解決手段】図形解析システム１００において、利用者は、方眼用紙３に図形を記入する。サーバ５は、時間情報に基づいて、電子ペン１０から取得した記入情報に含まれるストロークのグループ化を行う。また、サーバ５は、ストロークから所定の長さの線分を抽出し、当該線分から一定時刻毎のベクトルを抽出する。そして、サーバ５は、複数のベクトルの移動方向に基づいて、総合的に当該線分の移動方向し、グループ化されたストローク中に存在する分岐点を特定する。さらに、サーバ５は、特定した分岐点に基づいて、対応する図形を特定する。そして、サーバ５は、時系列に基づいて、グループ化されたストロークのデータを、特定した図形となるように精緻化することで精緻化データを生成する。
【解決手段】図形解析システム１００において、利用者は、方眼用紙３に図形を記入する。サーバ５は、時間情報に基づいて、電子ペン１０から取得した記入情報に含まれるストロークのグループ化を行う。また、サーバ５は、ストロークから所定の長さの線分を抽出し、当該線分から一定時刻毎のベクトルを抽出する。そして、サーバ５は、複数のベクトルの移動方向に基づいて、総合的に当該線分の移動方向し、グループ化されたストローク中に存在する分岐点を特定する。さらに、サーバ５は、特定した分岐点に基づいて、対応する図形を特定する。そして、サーバ５は、時系列に基づいて、グループ化されたストロークのデータを、特定した図形となるように精緻化することで精緻化データを生成する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子ペン用帳票に記入された情報をイメージ化するための技術に関する。
【背景技術】
【０００２】
近年、「電子ペン」、「デジタルペン」などと呼ばれるペン型入力デバイスが登場しており（以下、本明細書では「電子ペン」と呼ぶ。）、その代表的なものとしてスウェーデンのAnoto社が開発した「アノトペン（Anoto pen）」が知られている。アノトペンは、所定のドットパターンが印刷された専用紙（以下、「専用ペーパー」とも呼ぶ。）とペアで使用される。アノトペンは、通常のインクタイプのペン先部に加えて、専用紙上のドットパターンを読み取るための小型カメラと、データ通信ユニットを搭載している。利用者が専用紙上にアノトペンで文字などを書いたり、専用紙上に図案化されている画像をチェックしたりすると、ペンの移動に伴って小型カメラが専用紙上のドットパターンを検出し、利用者が書き込んだ文字、画像などの記入情報（「ストロークデータ」とも呼ぶ。）が取得される。この記入情報が、データ通信ユニットによりアノトペンから近くのパーソナルコンピュータや携帯電話などの端末装置に送信される。このアノトペンを利用したシステムは、キーボードに代わる入力デバイスとして利用することが可能であり、上述のパーソナルコンピュータやキーボードの使用に抵抗がある利用者にとっては非常に使いやすい。そのため、現在、各種ビジネス上の書類、申込書、契約書等に記入されたデータをデジタル化する手法として、電子ペンを利用したシステムが普及しつつある（例えば、特許文献１）。
【０００３】
上記のようなシステムでは、利用者がアノトペンを使用して専用紙に図形を記入した場合、当該図形をイメージデータとして取得することができる。この場合、システムは、専用紙に記入された軌跡データをそのままイメージ化し、画像として保存していた。このようなシステムでは、入力が電子ペンと専用紙を使用してラフに行えるがゆえ、イメージ化されるデータがフリーハンドのデータとなる。そのため、通常、フリーハンドのデータをある程度精緻化する必要が生じていた。
【０００４】
【特許文献１】特開２００４−１５３６１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明は、以上の点に鑑みてなされたものであり、予めグリッドが印刷されている方眼用紙にフリーハンドで記入した図形を精緻化した上でイメージ化することができる図形解析システムを提供することを課題とする。
【課題を解決するための手段】
【０００６】
本発明の１つの観点では、前記電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理する処理装置において、前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段と、前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段と、前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段と、前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段と、前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段と、前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段と、前記分岐点に基づいて、前記図形を特定する図形特定手段と、前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段と、を備える。
【０００７】
上記のように構成された処理装置において、利用者は、電子ペンを使用して電子ペン用帳票に図形を記入する。ここで、図形とは、直線、三角形、正方形、長方形、ひし形又は円のいずれかであるとする。電子ペンは、電子ペンの移動に伴って帳票上のドットパターンを読み取り、利用者が記入した記入内容、即ち図形に関するストロークやドットパターン上の位置座標に関するデータを取得する。位置情報とは、ドットパターン上の位置座標（座標データ）のことである。さらに、電子ペンは、ストロークや位置座標に関するデータを記入情報として処理装置に送信する。ここで、ストロークとは、一筆で書かれた軌跡のことである。処理装置は、電子ペンから取得した記入情報から、まず、記入時刻に関する時間情報を抽出する。さらに、処理装置は、時間情報に基づいて、記入情報に含まれるストロークのグループ化を行う。具体的には、時系列に基づいて、１つの図形に対応するストロークをひとまとめにグループ化する。これによれば、複数のストロークから構成される図形であっても、時系列に基づいて適切なグループ化を行うことで、容易に１つの図形に対応するストロークを認識して処理することができる。なお、１つの図形に対応するストロークが１つである場合、グループ化する複数のストロークは存在しないが、グループ化と呼ぶものとする。
【０００８】
また、処理装置は、記入情報に含まれるストロークから所定の長さの線分を抽出する。さらに、処理装置は、線分から、一定時刻毎のベクトルを抽出する。そして、処理装置は、複数のベクトルの移動方向に基づいて、総合的に当該線分の移動方向を特定する。特定した線分の移動方向に基づいて、処理装置は、グループ化されたストローク中に存在する分岐点を特定する。具体的には、線分の移動方向に基づいて、最短距離の点を抽出しながらストローク上の各点が同一方向に移動しているかを解析する。そして、Ｘ軸方向及び／又はＹ軸方向の移動に変化が見られた場合、異なる方向に移動し始めた点の最短距離の点を分岐点と特定する。さらに、処理装置は、特定した分岐点に基づいて、グループ化されたストロークに対応する図形を特定する。そして、処理装置は、時系列に基づいて、グループ化されたストロークのデータを、特定した図形となるように精緻化することでイメージデータである精緻化データを生成する。生成した精緻化データは、保存、送信等任意の処理を施すことができる。これによれば、電子ペン用帳票にフリーハンドで記入した図形の体裁を自動的に整えて、イメージ化することができる。
【０００９】
上記処理装置の一態様では、前記処理装置は、前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の開始点を特定する開始点特定手段と、前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の終了点を特定する終了点特定手段と、をさらに備え、前記精緻化データ生成手段は、前記分岐点、前記開始点及び前記終了点の位置情報と、前記時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する。
【００１０】
上記のように構成された処理装置は、時間情報及び位置情報に基づいて、グループ化されたストローク中の開始点及び終了点を特定する。具体的には、例えば、時系列に基づいて、グループ化されたストロークの中で最も早い時刻に記入された点を開始点と特定し、最も遅い時刻に記入された点を終了点と特定することが考えられる。また、直線以外の図形の場合、開始点と終了点が一致することも多いため、位置情報に基づいて、極めて近い点を開始点及び終了点と特定することも考えられる。処理装置は、このように特定した開始点、終了点及び分岐点を、時系列に基づいて直線で結ぶ等により、精緻化データを生成している。
【００１１】
上記処理装置の他の一態様では、グループ化されたストローク中の分岐点の数を算出する分岐点数算出手段をさらに備え、前記図形特定手段は、グループ化されたストローク中の分岐点の数に基づいて、前記図形を特定する。これによれば、処理装置は、ストローク中の分岐点数に基づいて、自動的に図形を特定し、当該図形に精緻化したイメージデータである精緻化データを生成することができる。
【００１２】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記図形を直線であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記開始点及び前記終了点の位置情報に基づいて、直線に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が存在しない場合、対応する図形は直線であると特定する。よって、開始点及び終了点を直線で結ぶことで、容易に精緻化データを生成することができる。
【００１３】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記図形を三角形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、時間情報とに基づいて、三角形に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が２つ存在する場合、対応する図形は三角形であると特定する。よって、開始点又は終了点と、２つの分岐点とを時系列により直線で結ぶことで、容易に精緻化データを生成することができる。
【００１４】
上記処理装置の他の一態様では、前記帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアを有しており、前記処理装置は、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づく線分の移動方向が、Ｘ軸又はＹ軸のいずれかと平行であるか否かを判定する軸判定手段をさらに備え、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記図形を正方形又は長方形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、正方形又は長方形に精緻化した精緻化データを生成する。
【００１５】
上記のように構成された処理装置において、電子ペン用帳票は、縦線及び横線が格子状に並んだグリッドエリアを有している。利用者は、電子ペンを使用して、電子ペン用帳票状のグリッドエリアに所定の図形を記入する。これによれば、縦線及び横線をガイドとして、フリーハンドで容易に図形を記入することができる。
【００１６】
また、これによれば、処理装置は、時系列に基づいて開始点、終了点及び分岐点それぞれを結んだ全ての線分が、Ｘ軸又はＹ軸のいずれかと平行であるか否かを判定する。そして、処理装置は、時系列に基づいて開始点、終了点及び分岐点の間の線分の移動方向を特定する。換言すると、処理装置は、利用者が記入した図形の辺に対応する線分の移動方向を特定する。具体的に、分岐点が３つであるということは、利用者が記入する図形としては、正方形／長方形又はひし形が考えられる。そのため、処理装置は、全ての線分がＸ軸又はＹ軸のいずれかと平行であるということは、グループ化されたストロークに対応する図形は正方形／長方形であると特定する。よって、処理装置は、グループ化されたストローク中に分岐点が３つ存在し、且つ、図形の辺に対応する全ての線分の移動方向がＸ軸又はＹ軸と平行である場合、開始点又は終了点と、３つの分岐点とを時系列により直線で結ぶことで、容易に精緻化データを生成することができる。
【００１７】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記図形をひし形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が３つ存在し、且つ、図形の辺に対応する線分がＸ軸又はＹ軸と平行ではない場合、自動的に、グループ化されたストロークに対応する図形はひし形であると特定することができる。よって、開始点又は終了点と、３つの分岐点とを時系列により直線で結ぶことで、容易に精緻化データを生成することができる。
【００１８】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３以上である場合、前記図形を円であると特定し、前記処理装置は、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、前記円の直径を算出する直径算出手段をさらに備え、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が４以上である場合、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した前記直径とに基づいて、円に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が４つ以上存在している場合、自動的に、グループ化されたストロークに対応する図形は円であると特定することができる。また、処理装置は、開始点、終了点及び分岐点の位置座標に基づいて円の直径を算出する。そして、処理装置は、算出した直径と、開始点又は終了点及び分岐点とに基づいて、弧を描くことにより、容易に精緻化したデータを生成することができる。
【００１９】
上記処理装置の他の一態様では、前記処理装置は、円と、ひし形とを判別するための特定領域において、グループ化されたストロークの出現頻度が高いか低いかを判定する特定領域判定手段をさらに備え、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記図形をひし形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成する。これによれば、グループ化されたストローク中の分岐点数が３であっても、特定領域における出現頻度に基づいて、容易に対応する図形がひし形であることを特定することができる。よって、的確な図形に精緻化したイメージデータを生成することができる。
【００２０】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記図形を円であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した直径とに基づいて、円に精緻化した精緻化データを生成する。これによれば、グループ化されたストローク中の分岐点数が３であっても、特定領域における出現頻度に基づいて、容易に対応する図形が円であることを特定することができる。よって、的確な図形に精緻化したイメージデータを生成することができる。
【００２１】
上記処理装置の他の一態様では、前記帳票は、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアを有しており、前記処理装置は、前記選択エリアに記入された記入情報に基づいて、選択された図形の種類を特定する図形種類特定手段をさらに備え、前記図形特定手段は、選択された図形の種類と、前記分岐点とに基づいて、前記図形を特定する。これによれば、利用者が選択した図形の種類に基づいて、精緻化データを生成することができる。よって、図形の認識率を向上させることができる。
【００２２】
本発明の別の観点では、前記電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理するコンピュータにより実行されるプログラムであって、前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段、前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段、前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段、前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段、前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段、前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段、前記分岐点に基づいて、前記図形を特定する図形特定手段、前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段、として前記コンピュータを機能させる。
【００２３】
上記プログラムをコンピュータにより実行することにより、上述の処理装置を実現することができる。また、上述の処理装置の各態様も同様に実現することができる。
【００２４】
本発明のさらに別の観点では、インクペンユニット及び光学的にドットパターンを読み取る読取ユニットを備える電子ペンにより記入される電子ペン用帳票であって、前記電子ペン用帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアと、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアとを有する。
【００２５】
これによれば、電子ペン用帳票は、図形が記入されるグリッドエリアと、図形の種類が選択される選択エリアとを有している。そのため、処理装置やサーバは、選択エリアに記入された記入情報に基づいて、利用者が選択した図形を特定することができる。そして、処理装置等は、特定した図形を考慮した上で、グリッドエリアに記入された記入情報に基づいて、精緻化したイメージデータである精緻化データを生成する。よって、選択エリアにより、図形の認識率を向上させると共に、的確な精緻化データを生成することを可能とする。
【発明の効果】
【００２６】
本発明によれば、予めグリッドが印刷されている方眼用紙にフリーハンドで記入した図形を精緻化した上でイメージ化することができる。
【発明を実施するための最良の形態】
【００２７】
以下、図面を参照して本発明の好適な実施の形態について説明する。まず、本発明のシステムにおいて入力デバイスとして使用される電子ペンの概要について説明する。
【００２８】
［電子ペン］
図１は電子ペンの使用形態を模式的に示す図であり、図２は電子ペンの構造を示す機能ブロック図である。図１に示すように、電子ペン１０は、ドットパターンが印刷された専用ペーパー２０と組み合わせて使用される。電子ペン１０は、通常のインクペンと同様のペン先部１７を備えており、利用者は通常のインクペンと同様に専用ペーパー２０上に文字などを書くことになる。
【００２９】
図２に示すように、電子ペン１０は、その内部にプロセッサ１１、メモリ１２、データ通信ユニット１３、バッテリー１４、ＬＥＤ１５、カメラ１６及び圧力センサ１８を備える。また、電子ペン１０は通常のインクペンと同様の構成要素としてインクカートリッジ（図示せず）などを有する。
【００３０】
電子ペン１０は、ペン先部１７により専用ペーパー２０上に描かれたインクの軌跡をデータ化するのではなく、専用ペーパー２０上で電子ペン１０が移動した軌跡座標をデータ化する。ＬＥＤ１５が専用ペーパー２０上のペン先部１７近傍を照明しつつ、カメラ１６が専用ペーパー２０に印刷されているドットパターンを読み取り、データ化する。つまり、電子ペン１０は専用ペーパー２０上で利用者が電子ペン１０を移動させることにより生じるストロークを画像データ又はベクトルデータとして取得することができる。
【００３１】
圧力センサ１８は、利用者が電子ペン１０により専用ペーパー上に文字などを書く際にペン先部１７に与えられる圧力、即ち筆圧を検出し、プロセッサ１１へ供給する。プロセッサ１１は、圧力センサ１８から与えられる筆圧データに基づいて、ＬＥＤ１５及びカメラ１６のスイッチオン／オフの切換を行う。即ち、利用者が電子ペン１０で専用ペーパー２０上に文字などを書くと、ペン先部１７には筆圧がかかる。よって、所定値以上の筆圧が検出されたときに、利用者が記述を開始したと判定して、ＬＥＤ１５及びカメラ１６を作動する。
【００３２】
カメラ１６は専用ペーパー２０上のドットパターンを読み取り、そのパターンデータをプロセッサ１１に供給する。プロセッサ１１は、供給されたドットパターンから、専用ペーパー２０上でのＸ／Ｙ座標を算出する。
【００３３】
プロセッサ１１は、利用者の記述が行われる間に、筆圧の配列データ及びＸ／Ｙ座標データを取得し、タイムスタンプ（時間情報）と関連付けてメモリ１２に記憶していく。よって、メモリ１２内には利用者の記述内容に対応するデータが時系列で記憶されていく。メモリ１２の容量は例えば１Ｍバイト程度とすることができる。
【００３４】
利用者により送信指示がなされるまでは、取得された全てのデータはメモリ１２内に保持される。そして、利用者が送信指示を行うと、データ通信ユニット１３により、電子ペン１０と所定距離内にある端末装置２５へメモリ１２内のデータが送信される。基本的には、一度送信指示がなされると、電子ペン１０はメモリ１２内に記憶していた全てのデータを端末装置２５へ送信するため、メモリ１２内はクリアされる。よって、送信後にもう一度同じ情報を端末装置２５へ送信したい場合には、利用者は専用ペーパー２０上に再度記述を行う必要がある。なお、この場合、利用者は専用ペーパー２０上にインクペンで書かれた文字などをなぞればよいことになる。
【００３５】
電子ペン１０自体は、送信ボタンなどの機能ボタンを備えておらず、送信指示その他の指示は、利用者が専用ペーパー２０上の所定位置に設けられた専用ボックスを電子ペン１０でチェックすることにより実行される。専用ボックスの位置座標には、予め送信指示が対応付けられており、プロセッサ１１は専用ボックスの位置座標を受信すると、データ通信ユニット１３にメモリ１２内のデータを供給し、端末装置２５への送信を行わせる。なお、電子ペン１０は、データの送信完了を電子ペンの振動により示すことができる。
【００３６】
バッテリー１４は電子ペン１０内の各要素に電源供給するためのものであり、例えば電子ペンのキャップ（図示せず）により電子ペン１０自体の電源のオン／オフを行うことができる。
【００３７】
このように、電子ペン１０は利用者が専用ペーパー２０上に記述した文字などに対応する座標データ及び筆圧データを取得して近傍の端末装置２５へ送信する機能を有するが、電子ペン１０のペン先部１７は通常のインクペンとなっているため、専用ペーパー２０上に記述した内容はオリジナルの原本として残るという特徴がある。即ち、紙の原本に対して記述するのと同時に、その内容を座標データなどの形態でリアルタイムに電子化することができる。
【００３８】
なお、電子ペン１０の標準機能によれば、電子ペン１０により得られるデータは、原則として座標データ又はベクトルデータの形態であり、テキストデータではない。但し、電子ペン１０は標準機能として、専用ペーパー２０上に設けられた専用エリアに記述することにより、英数字に限りテキスト化する機能は備えている。
【００３９】
また、電子ペン１０内には、ペン自体及びその所有者に関するプロパティ情報（ペン情報及びペン所有者情報）を保持することができ、アプリケーションから参照することができる。ペン情報としては、バッテリーレベル、ペンＩＤ、ペン製造者番号、ペンソフトウェアのバージョン、サブスクリプションプロバイダのＩＤなどを保持できる。また、ペン所有者情報としては、国籍、言語、タイムゾーン、emailアドレス、空きメモリ容量、名称、住所、ファックス／電話番号、携帯電話番号などを保持することができる。
【００４０】
なお、上記の例におけるデータ通信ユニット１３では、Bluetooth（登録商標）の無線伝送、ＵＳＢケーブルを使用した有線伝送、端子などの接触によるデータ伝送など、各種の方法によって電子ペン１０から端末装置２５へのデータ送信を行うことが考えられる。
【００４１】
次に、電子ペンにより利用者が記述した内容のＸ／Ｙ座標データを取得する方法について説明する。前述のように専用ペーパー２０には、所定のドットパターンが印刷されている。電子ペン１０のカメラ１６は、利用者が専用ペーパー２０上に記述したインクの軌跡を読み取るのではなく、専用ペーパー２０上のドットパターンを読み取る。実際、図１に示すように、ＬＥＤ１５による照明エリア及びカメラ１６の撮影エリア（照明エリア内に位置する）は、ペン先部１７が専用ペーパー２０に接触する位置とはずれている。
【００４２】
ドットパターンはカーボンを含む専用インキなどで印刷されており、カメラ１６はその専用インキによるパターンのみを認識することができる。専用インキ以外のインキ（カーボンを含まない）により、専用ペーパー上に罫線や枠などを印刷しても、電子ペンはそれらを認識することはない。よって、専用ペーパーを利用して各種申込書などの帳票を作成する際は、専用インキ以外のインキで入力枠や罫線、注意書きなどを印刷する。
【００４３】
ドットパターンは、図３に例示するように、各ドットの位置がデータに対応付けされている。図３の例では、ドットの位置を格子の基準位置（縦線及び横線の交差点）から上下左右にシフトすることにより、０〜３の２ビット情報を表示した例である。このようにして表現された情報の組合せにより、専用ペーパー上の位置座標が決定される。図４（ａ）に例示するように、縦横２mmの範囲内に３６個のドットが格子状に配置され、これらのドットにより示されるデータの配列（図４（ｂ））が、その専用ペーパー上の位置座標と対応付けされている。よって、電子ペン１０のカメラ１６が図４（ａ）に示すようなドットパターンを撮影すると、プロセッサ１１はカメラ１６から入力されるドットパターンのデータに基づいて図４（ｂ）に示すデータ配列を取得し、それに対応する専用ペーパー上の位置座標（即ち、そのドットパターンがその専用ペーパー上のどの位置にあるのか）をリアルタイムで算出する。なお、ドットパターンを認識する最小単位は２mm×２mmであり、カメラ１６は毎秒１００回程度の撮影を行う。
【００４４】
次に、専用ペーパーについて説明する。専用ペーパーの構造の一例を図５に示す。図示のように、専用ペーパー２０は、台紙３０上にドットパターン３２が印刷され、その上に罫線などの図案３４が印刷されている。台紙３０は通常は紙であり、ドットパターン３２は前述のようにカーボンを含んだ専用インキにより印刷される。また、通常のインキなどにより図案３４が印刷される。ドットパターンと図案とは同時に印刷してもよいし、いずれかを先に印刷してもよい。
【００４５】
図案３４の例を図６に示す。図６は、ある申込書３６の例であり、複数の記入欄３８や送信ボックス３９が印刷されている。図６には明確に図示されておらず、詳細は後述するが、実際にはドットパターンが申込書３６の全面に印刷されており、その上に記入欄３８や送信ボックス３９が通常のインキにより印刷されている。利用者は、ドットパターンを意識することなく、従来からある申込書と同様に、電子ペン１０を使用して必要事項を申込書３６の各記入欄３８に記入すればよい。
【００４６】
専用ペーパー２０上のエリアは大きく２種類のエリアに分けることができる。１つは記入エリアであり、電子ペン１０による記述内容をそのまま情報として取り扱うエリアである。図６の例では複数の記入欄３８がこれに該当する。もう１つは機能エレメントであり、対応するエリア内を電子ペン１０でチェックした際に、予めそのエリアに対して定義されているアクション、指示などを実行するようになっている。図６の例における送信ボックス３９がこれに該当する。
【００４７】
送信ボックス３９は前述したように電子ペン１０内に記憶されているデータを近傍の端末装置２５へ送信するための指示を行う際に使用される。利用者が送信ボックス３９内に電子ペン１０でチェックを入れると、電子ペン１０が送信ボックス内のドットパターンを読み取る。当該パターンは送信指示に対応付けられており、電子ペン１０内のプロセッサ１１はデータ通信ユニット１３にメモリ１２内の記憶データの送信命令を発する。
【００４８】
ドットパターンの割り当ては、通常、アプリケーション（用紙の種類）毎に行われる。即ち、ある申込書内のドットパターンは１枚の用紙の中で重複することはないが、同一の申込書には全て同じドットパターンが印刷されている。よって、利用者が電子ペン１０で必要事項を入力すると、その入力事項がその申込書のどの項目に対するものであるかを、申込書上の座標データから特定することができる。
【００４９】
このように、ドットパターンを印刷した専用ペーパー上に所定の図案を印刷することにより、専用ペーパーを利用した各種申込書が作成できる。利用者は電子ペン１０を使用して通常の要領で必要事項を記入すれば、その電子データが自動的に取得される。
【００５０】
上記の例では、ドットパターンは専用ペーパー上にカーボンを含むインキにより印刷されているが、プリンタ及びカーボンを含むインクを使用してドットパターンを通常の紙上にプリントすることも可能である。さらに、専用ペーパー上の図案も印刷ではなく、プリンタにより形成することも可能である。ドットパターンをプリンタにより紙上に形成する場合には、１枚１枚に異なるドットパターンを形成することが可能である。よって、形成されたドットパターンの違いにより、それらの用紙１枚１枚を識別し、区別することが可能となる。
【００５１】
なお、本明細書においては、「印刷」の語は、通常の印刷のみならず、プリンタによるプリントも含む概念とする。
【００５２】
次に、電子ペンにより取得したデータの送信処理について図２を参照して説明する。電子ペン１０が取得したデータは、主として利用者が入力した事項のデータであるが、通常はそのデータの送信先であるサービスサーバがどこであるかの情報は含まれていない。その代わりに、その専用ペーパーに関するアプリケーションやサービスを特定する情報が専用ペーパー上のドットパターンに含まれており、利用者の入力作業中に専用ペーパーからその情報が取得されている。よって、電子ペン１０から記入情報を受け取った端末装置２５は、まず、問い合わせサーバ２６に対して、その専用ペーパーに対して入力されたデータをどのサービスサーバ２７へ送信すべきかの問い合わせを行う。問い合わせサーバ２６は、専用ペーパー毎に、対応するサービスサーバの情報を有しており、端末装置２５からの問い合わせに応じて、当該専用ペーパーに関するサービスなどを行うサービスサーバ２７の情報（ＵＲＬなど）を端末装置２５へ回答する。それから、端末装置２５は、電子ペンから取得した記入情報をそのサービスサーバ２７へ送信することになる。
【００５３】
なお、上記の例では端末装置２５、問い合わせサーバ２６及びサービスサーバ２７が別個に構成されているが、これらの幾つか又は全てを１つの装置として構成することも可能である。本実施形態において後述するサーバは、問い合わせサーバ２６及びサービスサーバ２７を兼ねていることとしている。また、本実施形態では、記入情報には、ストロークデータや時間情報が含まれているものとする。
【００５４】
[図形解析システム]
次に、本発明の図形解析システムについて説明する。図７に図形解析システム１００の概略構成を示す。図７に示す処理システム１００は、電子ペン１０により専用ペーパーである電子ペン用帳票に記入された情報に基づいて、特定の図形に精緻化したイメージデータを作成するシステムである。具体的に、電子ペン用帳票は方眼用紙３であり、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成されるグリッドエリアを有している。なお、グリッドエリアは、方眼用紙３の一部であっても、全部であっても構わない。利用者は、方眼用紙３上のグリッドエリアに、直線、三角形、四角形又は円いずれかの図形をフリーハンドでラフに記入する。サーバ５は、方眼用紙３への記入情報に基づいて、利用者が記入した図形を特定し、さらに特定した図形に精緻化したイメージデータ（以下、「精緻化データ」とも呼ぶ。）を作成する。なお、本実施形態では、便宜上、直線も図形に含まれるものとする。
【００５５】
図７に示すように、図形解析システム１００は、端末装置２５及びサーバ５がネットワーク２を通じて接続されることにより構成される。ここで、ネットワーク２の１つの好適な例はインターネットである。また、端末装置２５とは、利用者が使用するパーソナルコンピュータ（以下、「ＰＣ」と呼ぶ。）や携帯電話といったネットワークを介してデータの授受が可能な端末である。
【００５６】
ここで、図８及び図９を参照して、本システムによる図形解析方法の概要を述べておく。図８は、方眼用紙３が有するグリッドエリアの例である。一方、図９は、グリッドエリアにフリーハンドで記入されたデータと、記入情報に基づいて精緻化されたデータとを示す例である。
【００５７】
利用者は、電子ペン１０を使用して、電子ペン用帳票である方眼用紙３上に設けられたグリッドエリアに、フリーハンドでラフに図形を記入する。なお、記入する図形は、直線、三角形、四角形又は円いずれかであるものとする。方眼用紙３上に設けられたグリッドエリアは、図８に示すように、Ｘ軸と平行である横線と、Ｙ軸と平行である縦線とから構成された格子状のエリアのことである。このようなグリッドの目盛りに従って、利用者は、フリーハンドであっても容易に図形を記入することができる。
【００５８】
なお、方眼用紙３は、グリッドエリアの他に、上述の送信ボックス３９を有しているものとする。
【００５９】
本実施形態において、利用者が電子ペン１０によりフリーハンドでグリッドエリアに記入する図形は、図９（ａ）に示すような、直線６０ａ、三角形６１ａ、正方形、長方形６２ａ、ひし形６３ａ及び円６４ａである。電子ペン１０は、記入された内容に対応する記入情報を取得し、電子ペン１０内のメモリに一時的に記憶した後、当該記入情報を端末装置２５へ送信する。端末装置２５は、取得した記入情報を、ネットワーク２を介してサーバ５へ送信する。
【００６０】
サーバ５は、記入情報から、記入時刻に関する時間情報を抽出し、当該時間情報に基づいて１つの図形に対応する１つ以上のストロークをグループ化する。ここで、ストロークとは、一筆で書かれた軌跡のことである。長方形やひし形は、複数のストロークに分けて記入されることも考えられるため、サーバ５は、時間情報に基づいて、グループ化を行っている。具体的には、所定の時間以内に記入されたストロークをグループ化する等が考えられる。なお、１つの図形に対応するストロークが１つである場合、グループ化する複数のストロークは存在しないが、グループ化と呼ぶものとする。
【００６１】
そして、サーバ５は、記入情報に含まれるドットパターン上の位置座標に基づいて、開始点及び終了点を特定する。具体的には、グループ化された各ストロークの開始点及び終了点を分析し、各々の方眼用紙３上で最も近い点を図形解析用の開始点及び終了点とする。なお、開始点及び終了点の特定はこれに限定されるものではなく、時間情報に基づいて、時系列的に最も早く記入された点を開始点、時系列的に最も遅く記入された点を終了点と特定することとしてもよい。また、位置座標及び時間情報に基づいて特定することとしてもよい。
【００６２】
また、サーバ５は、各ストロークから所定の長さの線分を抽出する。さらに、サーバ５は、詳細は後述するが、ストロークの揺らぎを考慮するため、線分から一定時間又は一定頻度のベクトルを抽出する。そして、サーバ５は、ベクトルの移動方向に基づいて、線分の移動方向を特定する。
【００６３】
サーバ５は、詳細は後述するが、線分の移動方向に基づいてストローク上の点が、同一方向に移動しているか否かを解析する。そして、サーバ５は、Ｘ軸方向及び／又はＹ軸方向の移動に変化がみられた場合、異なる方向に移動し始めた点の方眼用紙３上の最短距離の点を分岐点と特定する。さらに、サーバ５は、分岐点の数を算出する。
【００６４】
そして、サーバ５は、時間情報、算出した分岐点数、線分の移動方向及び特定領域による判定等に基づいて、方眼用紙３に記入された図形が直線、三角形、正方形／長方形、ひし形又は円のいずれであるかを特定する。そして、サーバ５は、グループ化されたストローク中の分岐点、開始点及び終了点に基づいて、特定した図形に精緻化した精緻化データを生成する。この精緻化データとはイメージデータであり、サーバ５に保存されたり、端末装置２５に送信されたりする。端末装置２５は、取得した精緻化データを画面上に出力することもできる。つまり、端末装置２５は、図９（ａ）に示すようなフリーハンドでラフに記入されたストロークのデータを精緻化して、図９（ｂ）に示すように表示することができる。
【００６５】
このように、本発明のサーバ５は、方眼用紙３の目盛りに従ってフリーハンドで記入した図形の体裁を整えて、精緻化したイメージデータを自動的に生成することができる。
【００６６】
[図形]
ここで、図１０乃至図１４を参照して、グリッドエリアに記入された図形及び精緻化された図形について詳細に説明する。図１０乃至図１４は、それぞれグリッドエリアへの直線、三角形、正方形／長方形、ひし形及び円の記入例と、精緻化された図形の例である。
【００６７】
まず、図１０を参照し、直線について説明する。利用者は、電子ペン１０を使用して、図１０（ａ）に示すように、グリッドエリアにフリーハンドで直線６０ａを記入する。このとき、直線の２つの端点、即ち、図１０（ｂ）に示す開始点８０及び終了点８１は、グリッドエリアを構成する縦線と横線が交差する交点上に位置しなければならない。換言すると、利用者は、開始点８０及び終了点８１が、グリッドエリアの交点に重なるように直線６０ａを記入する。なお、直線６０ａは、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）と平行である必要はない。
【００６８】
サーバ５は、グループ化されたストローク中に分岐点がない場合、当該グループ化されたストロークに対応する図形は直線であると特定する。換言すると、サーバ５は、グループ化されたストローク中の線分の移動方向が全て同じ一方向である場合、当該グループ化されたストロークに対応する図形は直線であると特定する。さらに、サーバ５は、特定した開始点と終了点を結ぶことにより、直線に精緻化したイメージデータを作成する。即ち、図１０（ｃ）に示すように、開始点８０及び終了点８１を結んだ直線６０ｂのイメージデータを生成する。
【００６９】
次に、図１１を参照し、三角形について説明する。利用者は、電子ペン１０を使用して、図１１（ａ）に示すように、グリッドエリアにフリーハンドで三角形６１ａを記入する。このとき、三角形６１ａの３つの頂点は、交点上に位置しなければならない。原則として、三角形６１ａを記入する場合、図１１（ｂ）に示すように、開始点８２及び終了点８３は一致するように記入されなければならない。換言すると、利用者は、三角形６１ａの３つの頂点である開始点８２（終了点８３）と、分岐点８４と、分岐点８５とが、グリッドエリアの交点に重なるように三角形６１ａを記入する。
【００７０】
なお、三角形６１ａの辺は、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）と平行である必要はない。三角形６１ａの辺とは、開始点８２（終了点８３）と、分岐点８４と、分岐点８５とを時系列に沿ってそれぞれ結ぶ線分のことである。線分の移動方向についての詳細は後述する。
【００７１】
サーバ５は、グループ化されたストローク中の分岐点が２つの場合、当該グループ化されたストロークに対応する図形は三角形であると特定する。さらに、サーバ５は、特定した開始点８２（終了点８３）と、分岐点８４と、分岐点８５とを直線で結ぶことにより、三角形に精緻化したイメージデータを作成する。即ち、図１１（ｃ）に示すように、開始点８２（終了点８３）、分岐点８４及び分岐点８５を結んだ三角形６１ｂのイメージデータを生成する。
【００７２】
次に、図１２を参照し、正方形／長方形について説明する。利用者は、電子ペン１０を使用して、図１２（ａ）に示すように、グリッドエリアにフリーハンドで正方形／長方形６２ａを記入する。このとき、長方形６２ａの４つの頂点は、交点上に位置しなければならない。原則として、長方形６２ａを記入する場合、図１２（ｂ）に示すように、開始点８６及び終了点８７は一致するように記入されなければならない。また、長方形６２ａの辺は、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）のいずれかと平行でなければならない。長方形６２ａの辺とは、開始点８６（終了点８７）と、分岐点８８と、分岐点８９と、分岐点９０とをそれぞれ結ぶ線分のことである。
【００７３】
サーバ５は、グループ化されたストローク中の分岐点が３つであって、且つ、開始点８６（終了点８７）、分岐点８８、分岐点８９及び分岐点９０をそれぞれ結ぶ線分が縦線（Ｙ軸）又は横線（Ｘ軸）と平行である場合、当該グループ化されたストロークに対応する図形は長方形であると特定する。さらに、サーバ５は、特定した開始点８６（終了点８７）と、分岐点８８と、分岐点８９と、分岐点９０とを時系列に沿って直線で結ぶことにより、長方形に精緻化したイメージデータを生成する。即ち、図１２（ｃ）に示すように、開始点８６（終了点８７）、分岐点８８、分岐点８９及び分岐点９０を結んだ長方形６２ｂのイメージデータを生成する。
【００７４】
なお、図１２では、長方形について説明しているが、辺の長さが全て同じである以外は正方形も同様であるため、便宜上説明は省略する。
【００７５】
次に、図１３を参照し、ひし形について説明する。利用者は、電子ペン１０を使用して、図１３（ａ）に示すように、グリッドエリアにフリーハンドでひし形６３ａを記入する。このとき、ひし形６３ａの４つの頂点は、交点上に位置しなければならない。原則として、ひし形６３ａを記入する場合、図１３（ｂ）に示すように、開始点９１及び終了点９２は一致するように記入されなければならない。なお、ひし形６３ａの辺は、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）と平行である必要はない。ひし形６３ａの辺とは、開始点９１（終了点９２）と、分岐点９３と、分岐点９４と、分岐点９５とをそれぞれ結ぶ線分のことである。
【００７６】
サーバ５は、グループ化されたストローク中の分岐点が３つであって、且つ、開始点９１（終了点９２）、分岐点９３、分岐点９４及び分岐点９５をそれぞれ結ぶ線分が縦線（Ｙ軸）又は横線（Ｘ軸）と平行ではない場合、当該グループ化されたストロークに対応する図形はひし形であると特定する。さらに、サーバ５は、開始点９１（終了点９２）と、分岐点９３と、分岐点９４と、分岐点９５とをそれぞれ時系列に沿って直線で結ぶことにより、ひし形に精緻化したイメージデータを生成する。即ち、図１３（ｃ）に示すように、開始点９１（終了点９２）、分岐点９３、分岐点９４及び分岐点９５を結んだひし形６３ｂのイメージデータを生成する。
【００７７】
次に、図１４を参照し、円について説明する。利用者は、電子ペン１０を使用して、図１４（ａ）に示すように、グリッドエリアにフリーハンドで円６４ａを記入する。このとき、円６４ａの直径は１目盛り単位（例えば、１ｃｍ又は２ｃｍ）でなければならない。また、円６４ａは、グリッドエリアを構成する縦線又は横線と４点で接していなければならない。原則として、円６４ａを記入する場合、図１４（ｂ）に示すように、開始点９６及び終了点９７は一致するように記入される。また、ひし形６３ａを構成する４つ以上の点が、縦線及び／又は横線に接するように記入される。
【００７８】
サーバ５は、グループ化されたストローク中の分岐点が４つ以上である場合、当該グループ化されたストロークに対応する図形は円であると特定する。さらに、サーバ５は、円の直径を算出すると共に、当該直径に基づいて、開始点９６（終了点９７）、分岐点９８、分岐点９９、分岐点１２１及び分岐点１２２を弧で結ぶことにより、円に精緻化したイメージデータを生成する。即ち、１４（ｃ）に示すように、開始点９６（終了点９７）、分岐点９８、分岐点９９、分岐点１２１及び分岐点１２２を結んだ円６４ｂのイメージデータを生成する。
【００７９】
なお、利用者は原則として図形を記入する際、上述のルールに従う必要があるが、多少のずれが生じている場合、サーバ５は、ストロークの揺らぎとして開始点、終了点及び分岐点の位置座標を修正することとしてもよい。
【００８０】
[特定領域]
次に、図１５を参照して、特定領域について説明する。特定領域とは、グループ化されたストローク中の分岐点が３つである場合に、ひし形であるか円であるかを判別するための領域である。具体的には、図１５（ａ）及び（ｂ）に示す斜線の領域が特定領域である。
【００８１】
図１５（ａ）に示すように、特定領域上のストロークの出現頻度が低い場合、サーバ５は、グループ化されたストロークに対応する図形はひし形であると特定する。一方、図１５（ｂ）に示すように、特定領域上のストロークの出現頻度が高い場合、サーバ５は、グループ化されたストロークに対応する図形は円であると特定する。
【００８２】
このように、サーバ５は、グループ化されたストローク中の分岐点が３つである場合、特定領域上のストロークの出現頻度に基づいて、対応する図形がひし形であるか円であるかを判別している。
【００８３】
[移動方向の特定]
次に、図１６を参照して、ストロークの揺らぎの考慮した移動方向の特定について詳しく説明する。上述のように、サーバ５は、ストロークから、図１６に示すように、所定の長さの線分を抽出する。さらに、サーバ５は、図示のように、線分から一定時間又は一定頻度のベクトルを抽出する。抽出したベクトルの移動方向は、記入情報に含まれるストロークの位置座標及び時間情報に基づいて特定することができる。そして、サーバ５は、ベクトルの移動方向のうち、最も多い移動方向を線分の移動方向であると特定する。つまり、サーバ５は、ベクトルの移動方向を総合して、線分の移動方向を特定する。具体的に、図１６の例では、真下に向いているベクトルが最も多いため、総合して線分の移動方向はＹ軸マイナス方向であると特定する。
【００８４】
このように、サーバ５は、利用者がフリーハンドでラフに記入したストロークであっても、揺らぎを考慮して、各ストローク中の線分の移動方向を適切に特定することができる。
【００８５】
[分岐点の特定]
次に、図１７を参照して、分岐点の特定について詳しく説明する。
【００８６】
利用者は、電子ペン１０を使用し、図１７（ａ）に示すように、左上の頂点を開始点として、ワンストロークで長方形を記入したとする。この場合、サーバ５は、ストローク中の線分の移動方向に基づいて、グリッドエリア上の最短距離の点を抽出しながら各点が同一方向に移動していることを解析し、移動に変化が見られた場合、異なる方向に移動し始めた点の最短距離の点を分岐点であると特定する。揺らぎを考慮した場合、最短距離の点に最も近いグリッドエリア上の交点を分岐点であると特定する。具体的に、図１７（ｂ）に示すように、線分１３１の移動方向は、上述の揺らぎを考慮すると、真下に向かっていると特定される。即ち、線分１３１の移動方向は、Ｘ軸において０方向に移動、Ｙ軸においてマイナス方向に移動となる。ここで、０方向に移動とは、移動していないことを表している。一方、線分１３２の移動方向は、上述の揺らぎを考慮すると、右に向かっていると特定される。即ち、線分１３２の移動方向は、Ｘ軸においてプラス方向に移動、Ｙ軸において０方向に移動となる。
【００８７】
サーバ５は、記入情報に含まれる時間情報により、時系列に基づいて線分１３１と線分１３２の移動方向を比較することで、ストローク中の点の移動方向を解析する。上述の例では、線分１３１と線分１３２は、Ｘ軸及びＹ軸共に移動方向が変化していることが明らかである。よって、線分の移動方向が大きく変化した点１３３が分岐点となる。このとき、点１３３がグリッドエリアの交点上にない場合、サーバ５は、点１３３と最も距離が近い交点を分岐点と特定する。
【００８８】
このように、サーバ５は、ストロークの移動方向や近似値線を算出することで、ストロークの移動方向が大きく変化する分岐点を特定する。
【００８９】
図１７は、長方形の分岐点を特定する例であるが、その他の図形（三角形、正方形、ひし形及び円）の分岐点を特定する場合も同様であるため、便宜上、説明は省略する。
【００９０】
なお、分岐点の特定は、グループ化されたストローク中の開始点と終了点が一致するまで行われる。即ち、解析している点が終了点になるまで行われる。
【００９１】
また、サーバ５は、位置座標及び時間情報に基づいて、開始点と終了点が誤差の範囲ではなく全く別の位置に存在する場合、図形を直線であると特定することとしてもよい。
【００９２】
[サーバ]
次に、サーバ５について詳しく説明する。図１８は、図形解析システム１００における、特にサーバ５の内部構成を示す。図示のように、サーバ５は、図形解析プログラム１０１、記入情報取得機能１０２、グループ化機能１０３、開始点終了点特定機能１０４、ベクトル抽出機能１０５、移動方向特定機能１０６、分岐点特定機能１０７、分岐点数判定機能１０８、直線特定機能１０９、三角形特定機能１１０、軸判定機能１１１、正方形／長方形特定機能１１２、特定領域判定機能１１３、ひし形特定機能１１４、円特定機能１１５、精緻化データ生成機能１１６及び精緻化データ送信機能１１７を有する。なお、各機能は、サーバ５が有するＣＰＵが予め用意されたプログラムを実行することにより実現される。
【００９３】
図形解析プログラム１０１は、電子ペン１０を使用してフリーハンドでグリッドエリアに記入された情報に基づいて、図形を特定すると共に、当該図形に基づいて精緻化した精緻化データを生成するプログラムである。
【００９４】
記入情報取得機能１０２は、図形解析プログラム１０１を実行することにより、利用者が電子ペン１０を使用して、方眼用紙３のグリッドエリアに記入した記入情報を取得する機能である。
【００９５】
グループ化機能１０３は、記入情報取得機能１０２が取得した記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化する機能である。
【００９６】
開始点終了点特定機能１０４は、記入情報取得機能１０２が取得した記入情報に含まれるドットパターン上の位置座標及び時間情報に基づいて、グループ化されたストローク内の開始点及び終了点を特定する機能である。
【００９７】
ベクトル抽出機能１０５は、記入情報から線分を抽出し、当該線分から一定時間又は一定頻度毎のベクトルを抽出する機能である。
【００９８】
移動方向特定機能１０６は、ベクトルの移動方向に基づいて、線分の移動方向を特定する機能である。
【００９９】
分岐点特定機能１０７は、移動方向特定機能１０６が特定した線分の移動方向に基づいて、グループ化されたストローク内における全ての分岐点を特定する機能である。また、分岐点特定機能１０７は、グループ化されたストローク内の分岐点の数を算出する機能である。
【０１００】
分岐点数判定機能１０８は、分岐点特定機能１０７が算出した、グループ化されたストローク内における分岐点の数を判定する機能である。
【０１０１】
直線特定機能１０９は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が０であると判定した場合に、当該グループ化されたストロークに対応する図形が直線であると特定する機能である。
【０１０２】
三角形特定機能１１０は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が２であると判定した場合に、当該グループ化されたストロークに対応する図形が三角形であると特定する機能である。
【０１０３】
軸判定機能１１１は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が３であると判定した場合に、分岐点間を結ぶ線分がＸ軸又はＹ軸と平行であるか否かを判定する機能である。具体的に、グループ化されたストロークに対応する図形が正方形又は長方形の場合、分岐点間を結ぶ線分のうち２本の移動方向がＸ軸と平行となり、他の２本の移動方向がＹ軸と平行となるはずである。よって、軸判定機能１１１は、分岐点間を結ぶ線分の移動方向に基づいて、全ての線分がＸ軸又はＹ軸のいずれかと平行であるか否かを判定する機能である。
【０１０４】
正方形／長方形判定機能１１２は、軸判定機能１１１が、分岐点間を結ぶ線分の移動方向がＸ軸又はＹ軸のいずれかと平行であると判定した場合に、グループ化されたストロークに対応する図形が正方形又は長方形であると特定する機能である。
【０１０５】
特定領域判定機能１１３は、分岐点数判定機能１０８がグループ化されたストローク内における分岐点数が３と判定し、且つ、軸判定機能１１１が分岐点間を結ぶ線分の移動方向がＸ軸又はＹ軸のいずれかと平行ではないと判定した場合に、ストロークの特定領域上の出現頻度が高いか低いかを判定する機能である。具体的には、予め一定の出現頻度を設定しておき、グループ化されたストロークの出現頻度が当該一定の出現頻度より高いか否かで判定する。
【０１０６】
ひし形特定機能１１４は、特定領域判定機能１１３が特定領域上の出現頻度が低いと判定した場合に、グループ化されたストロークに対応する図形をひし形であると特定する機能である。
【０１０７】
円判定機能１１５は、特定領域判定機能１１３が特定領域上の出現頻度が高いと判定した場合に、グループ化されたストロークに対応する図形を円であると特定する機能である。また、円判定機能１１５は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が４以上であると判定した場合に、当該グループ化されたストロークに対応する図形が円であると特定する機能である。
【０１０８】
精緻化データ生成機能１１６は、特定した開始点、終了点及び分岐点のドットパターン上の位置座標に基づいて、特定した図形に精緻化した精緻化データを生成する機能である。
【０１０９】
精緻化データ送信機能１１７は、精緻化データ生成機能１１６が生成した精緻化データを、ネットワーク２を通じて端末装置２５へ送信する機能である。
【０１１０】
[図形解析処理]
次に、上記の図形解析システム１００により実行される図形解析処理について説明する。図１９及び図２０は、図形解析処理のフローチャートである。
【０１１１】
まず、利用者は、電子ペン１０を使用して、方眼用紙３のグリッドエリアに任意の図形を記入する。このとき、利用者は、頂点は交点上といった上述のルールに従い、直線、三角形、正方形／長方形、ひし形又は円を図形として記入するものとする。図形の記入が完了すると、利用者は、方眼用紙３の送信ボックス３９にチェックマークを記入することにより、記入情報を、端末装置２５を介してサーバ５へ送信する。
【０１１２】
サーバ５は、電子ペン１０から端末装置２５を介して記入情報を取得する（ステップＳ１）。そして、サーバ５は、記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化する（ステップＳ２）。さらに、サーバ５は、記入情報に含まれるドットパターン上の位置座標及び時間情報に基づいて、グループ化されたストローク中の開始点及び終了点を特定する（ステップＳ３）。
【０１１３】
次に、サーバ５は、グループ化されたストロークから所定の長さの線分を抽出する。このとき、サーバ５は、特定した開始点から線分の抽出を行う。さらに、サーバ５は、線分から一定時間又は一定頻度毎のベクトルを抽出する（ステップＳ４）。そして、サーバ５は、ベクトルの移動方向を総合して、線分の移動方向を特定する（ステップＳ５）。
【０１１４】
サーバ５は、線分の移動方向に基づいて、最短距離の点を抽出しながらストローク上の各点が同一方向に移動しているか否かを判定する。即ち、移動方向が変化しているか否かを判定する（ステップＳ６）。変化していない場合（ステップＳ６；Ｎｏ）、サーバ５は、ステップＳ８に進む。一方、変化している場合（ステップＳ６；Ｙｅｓ）、サーバ５は、分岐が発生したと判定し、異なる方向に移動し始めた点を分岐点と特定する（ステップＳ７）。そして、サーバ５は、判定した点が終了点であるか否かを判定する（ステップＳ８）。線分の移動方向の特定及び分岐点の特定は、開始点から始めて、終了点で終了することで、グループ化されたストローク全てを確認することができたといえるからである。そのため、判定した点が終了点でないと判定した場合（ステップＳ８；Ｎｏ）、サーバ５は、ステップＳ４乃至Ｓ８の処理を繰り返し行う。一方、判定した点が終了点であると判定した場合（ステップＳ８；Ｙｅｓ）、サーバ５は、ステップＳ９に進む。
【０１１５】
そして、サーバ５は、グループ化されたストローク中の分岐点数がいくつであるかを判定する（ステップＳ９）。分岐点が存在しない、即ち分岐点数が０である場合（ステップＳ９；０）、サーバ５は、グループ化されたストロークに対応する図形は直線であると特定する（ステップＳ１０）。一方、分岐点数が２の場合（ステップＳ９；２）、サーバ５は、グループ化されたストロークに対応する図形は三角形であると特定し（ステップＳ１１）、ステップＳ１９へ進む。また、分岐点数が３以上である場合（ステップＳ９；３以上）、サーバ５は、さらに分岐点数が３であるか否かを判定する（ステップＳ１２）。なお、便宜上、図２１に示すフローチャートには記載されていないが、分岐点数が１の場合、サーバ５は、グループ化されたストロークに対応する図形を特定できないため、図形解析処理を終了する。
【０１１６】
分岐点数が３以上である場合（ステップＳ１２；Ｎｏ）、サーバ５は、グループ化されたストロークに対応する図形は円であると特定する（ステップＳ１７）。一方、分岐点数が３である場合（ステップＳ１２；Ｙｅｓ）、サーバ５は、開始点、終了点及び分岐点の位置座標に基づいて、各点を結ぶ全ての辺がＸ軸又はＹ軸のいずれかと平行であるか否かを判定する（ステップＳ１３）。全ての辺がＸ軸又はＹ軸のいずれかと平行である場合（ステップＳ１３；Ｙｅｓ）、サーバ５は、グループ化されたストロークに対応する図形は正方形／長方形であると特定し（ステップＳ１４）、ステップＳ１９に進む。一方、辺がＸ軸又はＹ軸のいずれかと平行ではない場合（ステップＳ１３；Ｎｏ）、サーバ５は、グループ化されたストロークの特定領域における出現頻度が高いか否かを判定する（ステップＳ１５）。
【０１１７】
出現頻度が低い場合（ステップＳ１５；Ｎｏ）、サーバ５は、グループ化されたストロークに対応する図形はひし形であると特定し（ステップＳ１６）、ステップＳ１９へ進む。一方、出現頻度が高い場合（ステップＳ１５；Ｙｅｓ）、サーバ５は、グループ化されたストロークに対応する図形は円であると特定する（ステップＳ１７）。さらに、サーバ５は、開始点、終了点及び分岐点の位置座標に基づいて、円の直径を算出する（ステップＳ１８）。
【０１１８】
そして、サーバ５は、時間情報と、開始点、終了点及び分岐点の位置座標とに基づいて、特定した図形に精緻化したイメージデータである精緻化データを生成する（ステップＳ１９）。このとき、サーバ５は、特定した図形が円であれば、直径も考慮して精緻化データを生成する。さらに、サーバ５が、生成した精緻化データを、ネットワーク２を介して端末装置２５に送信する（ステップＳ２０）ことにより、図形解析処理は完了する。精緻化データを受信した端末装置２５は、保存したり、画面上に出力したりといった所定の処理を行うことができる。
【０１１９】
なお、本実施形態では、端末装置２５とサーバ５とは別々であって、ネットワーク２を介して接続されたものとしているが、本発明はこれに限定されるものではなく、それぞれの機能を備えた１つの端末装置であることとしてもよい。
【０１２０】
また、本実施形態では、特に記載していないが、サーバ５は、直線、三角形、正方形／長方形及びひし形の精緻化データを方法する場合に、開始点、終了点及び分岐点の位置座標に基づいて、各図形の辺の長さを算出することとしてもよい。つまり、サーバ５は、利用者が電子ペン１０を使用してフリーハンドで記入したストロークの分析を行い、グループ化されたストロークがいずれの図形であるかを特定すると共に、サイズやグリッドエリア上の位置に基づいて解析及び算出を行うことで精緻化データを生成している。
【０１２１】
本発明によれば、方眼用紙３上の目盛りに従ってフリーハンドで記入した図形の体裁を自動的に整えて、イメージ化することができる。このようなグリッドエリアを有する電子ペン用帳票は、工事現場等で図面を描く場合や、システムのフローチャート等を描く場合に特に有用である。
【０１２２】
[変形例]
上記実施形態では記載していないが、図形の認識率を向上させるため、グリッドエリアに図形を記入する前に、予め図形選択ボックスにて記入する図形を選択することも可能である。この場合、電子ペン用帳票である方眼用紙３は、例えば図２１に示すように、グリッドエリアの他に図形選択エリアを有している。図形選択エリアは、図示のように、各図形のイラストにチェックボックスが対応付けられている。利用者は、任意の図形に対応するチェックボックスにチェックマークを記入した後、グリッドエリアに当該図形を記入する。そして、利用者が送信ボックス３９にチェックマークを記入することで、電子ペン１０内に格納された記入情報が、端末装置２５を介してサーバ５へ送信される。
【０１２３】
サーバ５は、予め、図形選択エリア内の各チェックボックスの内容と、各チェックボックスのドットパターン上の位置座標とを対応付けた座標テーブルを有している。そのため、サーバ５は、電子ペン１０から取得した記入情報に基づいて、座標テーブルを参照することにより、利用者が選択した図形が何であるかを容易に特定することができる。よって、サーバ５は、利用者が選択した図形を考慮した上で、上記実施形態のようにグループ化されたストロークに対応する図形を特定することができる。即ち、図形の認識率を向上させることができる。
【産業上の利用可能性】
【０１２４】
本発明によれば、フリーハンドで記入した図形を自動的に精緻化した上でイメージ化することが可能な方眼用紙として利用することができる。
【図面の簡単な説明】
【０１２５】
【図１】電子ペンの使用形態を模式的に示す図である。
【図２】電子ペンの構造を示す機能ブロック図である。
【図３】専用ペーパーに印刷されたドットパターンによる情報の表現方法を説明する図である。
【図４】ドットパターン及びそれに対応する情報の例である。
【図５】専用ペーパーにより構成される帳票の構造を示す。
【図６】電子ペン用帳票の例を示す。
【図７】図形解析システムの概略構成を示す。
【図８】グリッドエリアの例である。
【図９】フリーハンドの図形と、精緻化された図形を示す図である。
【図１０】グリッドエリア上の直線を説明する図である。
【図１１】グリッドエリア上の三角形を説明する図である。
【図１２】グリッドエリア上の正方形／長方形を説明する図である。
【図１３】グリッドエリア上のひし形を説明する図である。
【図１４】グリッドエリア上の円を説明する図である。
【図１５】特定領域を説明する図である。
【図１６】揺らぎを考慮した線分の移動方向特定方法を説明する図である。
【図１７】分岐点特定方法を説明する図である。
【図１８】図７に示す図形解析システムに含まれるサーバの機能ブロック図である。
【図１９】図形解析処理のフローチャートである。
【図２０】図形解析処理のフローチャートである。
【図２１】方眼用紙上のグリッドエリア及び図形選択エリアを示す図である。
【符号の説明】
【０１２６】
２…ネットワーク
３…方眼用紙
５…サーバ
１０…電子ペン
１１…プロセッサ
１２…メモリ
１３…データ通信ユニット
１４…バッテリー
２５…端末装置
２６…問い合わせサーバ
２７…サービスサーバ
１００…図形解析システム
【技術分野】
【０００１】
本発明は、電子ペン用帳票に記入された情報をイメージ化するための技術に関する。
【背景技術】
【０００２】
近年、「電子ペン」、「デジタルペン」などと呼ばれるペン型入力デバイスが登場しており（以下、本明細書では「電子ペン」と呼ぶ。）、その代表的なものとしてスウェーデンのAnoto社が開発した「アノトペン（Anoto pen）」が知られている。アノトペンは、所定のドットパターンが印刷された専用紙（以下、「専用ペーパー」とも呼ぶ。）とペアで使用される。アノトペンは、通常のインクタイプのペン先部に加えて、専用紙上のドットパターンを読み取るための小型カメラと、データ通信ユニットを搭載している。利用者が専用紙上にアノトペンで文字などを書いたり、専用紙上に図案化されている画像をチェックしたりすると、ペンの移動に伴って小型カメラが専用紙上のドットパターンを検出し、利用者が書き込んだ文字、画像などの記入情報（「ストロークデータ」とも呼ぶ。）が取得される。この記入情報が、データ通信ユニットによりアノトペンから近くのパーソナルコンピュータや携帯電話などの端末装置に送信される。このアノトペンを利用したシステムは、キーボードに代わる入力デバイスとして利用することが可能であり、上述のパーソナルコンピュータやキーボードの使用に抵抗がある利用者にとっては非常に使いやすい。そのため、現在、各種ビジネス上の書類、申込書、契約書等に記入されたデータをデジタル化する手法として、電子ペンを利用したシステムが普及しつつある（例えば、特許文献１）。
【０００３】
上記のようなシステムでは、利用者がアノトペンを使用して専用紙に図形を記入した場合、当該図形をイメージデータとして取得することができる。この場合、システムは、専用紙に記入された軌跡データをそのままイメージ化し、画像として保存していた。このようなシステムでは、入力が電子ペンと専用紙を使用してラフに行えるがゆえ、イメージ化されるデータがフリーハンドのデータとなる。そのため、通常、フリーハンドのデータをある程度精緻化する必要が生じていた。
【０００４】
【特許文献１】特開２００４−１５３６１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明は、以上の点に鑑みてなされたものであり、予めグリッドが印刷されている方眼用紙にフリーハンドで記入した図形を精緻化した上でイメージ化することができる図形解析システムを提供することを課題とする。
【課題を解決するための手段】
【０００６】
本発明の１つの観点では、前記電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理する処理装置において、前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段と、前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段と、前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段と、前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段と、前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段と、前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段と、前記分岐点に基づいて、前記図形を特定する図形特定手段と、前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段と、を備える。
【０００７】
上記のように構成された処理装置において、利用者は、電子ペンを使用して電子ペン用帳票に図形を記入する。ここで、図形とは、直線、三角形、正方形、長方形、ひし形又は円のいずれかであるとする。電子ペンは、電子ペンの移動に伴って帳票上のドットパターンを読み取り、利用者が記入した記入内容、即ち図形に関するストロークやドットパターン上の位置座標に関するデータを取得する。位置情報とは、ドットパターン上の位置座標（座標データ）のことである。さらに、電子ペンは、ストロークや位置座標に関するデータを記入情報として処理装置に送信する。ここで、ストロークとは、一筆で書かれた軌跡のことである。処理装置は、電子ペンから取得した記入情報から、まず、記入時刻に関する時間情報を抽出する。さらに、処理装置は、時間情報に基づいて、記入情報に含まれるストロークのグループ化を行う。具体的には、時系列に基づいて、１つの図形に対応するストロークをひとまとめにグループ化する。これによれば、複数のストロークから構成される図形であっても、時系列に基づいて適切なグループ化を行うことで、容易に１つの図形に対応するストロークを認識して処理することができる。なお、１つの図形に対応するストロークが１つである場合、グループ化する複数のストロークは存在しないが、グループ化と呼ぶものとする。
【０００８】
また、処理装置は、記入情報に含まれるストロークから所定の長さの線分を抽出する。さらに、処理装置は、線分から、一定時刻毎のベクトルを抽出する。そして、処理装置は、複数のベクトルの移動方向に基づいて、総合的に当該線分の移動方向を特定する。特定した線分の移動方向に基づいて、処理装置は、グループ化されたストローク中に存在する分岐点を特定する。具体的には、線分の移動方向に基づいて、最短距離の点を抽出しながらストローク上の各点が同一方向に移動しているかを解析する。そして、Ｘ軸方向及び／又はＹ軸方向の移動に変化が見られた場合、異なる方向に移動し始めた点の最短距離の点を分岐点と特定する。さらに、処理装置は、特定した分岐点に基づいて、グループ化されたストロークに対応する図形を特定する。そして、処理装置は、時系列に基づいて、グループ化されたストロークのデータを、特定した図形となるように精緻化することでイメージデータである精緻化データを生成する。生成した精緻化データは、保存、送信等任意の処理を施すことができる。これによれば、電子ペン用帳票にフリーハンドで記入した図形の体裁を自動的に整えて、イメージ化することができる。
【０００９】
上記処理装置の一態様では、前記処理装置は、前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の開始点を特定する開始点特定手段と、前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の終了点を特定する終了点特定手段と、をさらに備え、前記精緻化データ生成手段は、前記分岐点、前記開始点及び前記終了点の位置情報と、前記時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する。
【００１０】
上記のように構成された処理装置は、時間情報及び位置情報に基づいて、グループ化されたストローク中の開始点及び終了点を特定する。具体的には、例えば、時系列に基づいて、グループ化されたストロークの中で最も早い時刻に記入された点を開始点と特定し、最も遅い時刻に記入された点を終了点と特定することが考えられる。また、直線以外の図形の場合、開始点と終了点が一致することも多いため、位置情報に基づいて、極めて近い点を開始点及び終了点と特定することも考えられる。処理装置は、このように特定した開始点、終了点及び分岐点を、時系列に基づいて直線で結ぶ等により、精緻化データを生成している。
【００１１】
上記処理装置の他の一態様では、グループ化されたストローク中の分岐点の数を算出する分岐点数算出手段をさらに備え、前記図形特定手段は、グループ化されたストローク中の分岐点の数に基づいて、前記図形を特定する。これによれば、処理装置は、ストローク中の分岐点数に基づいて、自動的に図形を特定し、当該図形に精緻化したイメージデータである精緻化データを生成することができる。
【００１２】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記図形を直線であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記開始点及び前記終了点の位置情報に基づいて、直線に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が存在しない場合、対応する図形は直線であると特定する。よって、開始点及び終了点を直線で結ぶことで、容易に精緻化データを生成することができる。
【００１３】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記図形を三角形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、時間情報とに基づいて、三角形に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が２つ存在する場合、対応する図形は三角形であると特定する。よって、開始点又は終了点と、２つの分岐点とを時系列により直線で結ぶことで、容易に精緻化データを生成することができる。
【００１４】
上記処理装置の他の一態様では、前記帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアを有しており、前記処理装置は、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づく線分の移動方向が、Ｘ軸又はＹ軸のいずれかと平行であるか否かを判定する軸判定手段をさらに備え、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記図形を正方形又は長方形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、正方形又は長方形に精緻化した精緻化データを生成する。
【００１５】
上記のように構成された処理装置において、電子ペン用帳票は、縦線及び横線が格子状に並んだグリッドエリアを有している。利用者は、電子ペンを使用して、電子ペン用帳票状のグリッドエリアに所定の図形を記入する。これによれば、縦線及び横線をガイドとして、フリーハンドで容易に図形を記入することができる。
【００１６】
また、これによれば、処理装置は、時系列に基づいて開始点、終了点及び分岐点それぞれを結んだ全ての線分が、Ｘ軸又はＹ軸のいずれかと平行であるか否かを判定する。そして、処理装置は、時系列に基づいて開始点、終了点及び分岐点の間の線分の移動方向を特定する。換言すると、処理装置は、利用者が記入した図形の辺に対応する線分の移動方向を特定する。具体的に、分岐点が３つであるということは、利用者が記入する図形としては、正方形／長方形又はひし形が考えられる。そのため、処理装置は、全ての線分がＸ軸又はＹ軸のいずれかと平行であるということは、グループ化されたストロークに対応する図形は正方形／長方形であると特定する。よって、処理装置は、グループ化されたストローク中に分岐点が３つ存在し、且つ、図形の辺に対応する全ての線分の移動方向がＸ軸又はＹ軸と平行である場合、開始点又は終了点と、３つの分岐点とを時系列により直線で結ぶことで、容易に精緻化データを生成することができる。
【００１７】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記図形をひし形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が３つ存在し、且つ、図形の辺に対応する線分がＸ軸又はＹ軸と平行ではない場合、自動的に、グループ化されたストロークに対応する図形はひし形であると特定することができる。よって、開始点又は終了点と、３つの分岐点とを時系列により直線で結ぶことで、容易に精緻化データを生成することができる。
【００１８】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３以上である場合、前記図形を円であると特定し、前記処理装置は、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、前記円の直径を算出する直径算出手段をさらに備え、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が４以上である場合、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した前記直径とに基づいて、円に精緻化した精緻化データを生成する。これによれば、処理装置は、グループ化されたストローク中に分岐点が４つ以上存在している場合、自動的に、グループ化されたストロークに対応する図形は円であると特定することができる。また、処理装置は、開始点、終了点及び分岐点の位置座標に基づいて円の直径を算出する。そして、処理装置は、算出した直径と、開始点又は終了点及び分岐点とに基づいて、弧を描くことにより、容易に精緻化したデータを生成することができる。
【００１９】
上記処理装置の他の一態様では、前記処理装置は、円と、ひし形とを判別するための特定領域において、グループ化されたストロークの出現頻度が高いか低いかを判定する特定領域判定手段をさらに備え、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記図形をひし形であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成する。これによれば、グループ化されたストローク中の分岐点数が３であっても、特定領域における出現頻度に基づいて、容易に対応する図形がひし形であることを特定することができる。よって、的確な図形に精緻化したイメージデータを生成することができる。
【００２０】
上記処理装置の他の一態様では、前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記図形を円であると特定し、前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した直径とに基づいて、円に精緻化した精緻化データを生成する。これによれば、グループ化されたストローク中の分岐点数が３であっても、特定領域における出現頻度に基づいて、容易に対応する図形が円であることを特定することができる。よって、的確な図形に精緻化したイメージデータを生成することができる。
【００２１】
上記処理装置の他の一態様では、前記帳票は、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアを有しており、前記処理装置は、前記選択エリアに記入された記入情報に基づいて、選択された図形の種類を特定する図形種類特定手段をさらに備え、前記図形特定手段は、選択された図形の種類と、前記分岐点とに基づいて、前記図形を特定する。これによれば、利用者が選択した図形の種類に基づいて、精緻化データを生成することができる。よって、図形の認識率を向上させることができる。
【００２２】
本発明の別の観点では、前記電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理するコンピュータにより実行されるプログラムであって、前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段、前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段、前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段、前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段、前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段、前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段、前記分岐点に基づいて、前記図形を特定する図形特定手段、前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段、として前記コンピュータを機能させる。
【００２３】
上記プログラムをコンピュータにより実行することにより、上述の処理装置を実現することができる。また、上述の処理装置の各態様も同様に実現することができる。
【００２４】
本発明のさらに別の観点では、インクペンユニット及び光学的にドットパターンを読み取る読取ユニットを備える電子ペンにより記入される電子ペン用帳票であって、前記電子ペン用帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアと、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアとを有する。
【００２５】
これによれば、電子ペン用帳票は、図形が記入されるグリッドエリアと、図形の種類が選択される選択エリアとを有している。そのため、処理装置やサーバは、選択エリアに記入された記入情報に基づいて、利用者が選択した図形を特定することができる。そして、処理装置等は、特定した図形を考慮した上で、グリッドエリアに記入された記入情報に基づいて、精緻化したイメージデータである精緻化データを生成する。よって、選択エリアにより、図形の認識率を向上させると共に、的確な精緻化データを生成することを可能とする。
【発明の効果】
【００２６】
本発明によれば、予めグリッドが印刷されている方眼用紙にフリーハンドで記入した図形を精緻化した上でイメージ化することができる。
【発明を実施するための最良の形態】
【００２７】
以下、図面を参照して本発明の好適な実施の形態について説明する。まず、本発明のシステムにおいて入力デバイスとして使用される電子ペンの概要について説明する。
【００２８】
［電子ペン］
図１は電子ペンの使用形態を模式的に示す図であり、図２は電子ペンの構造を示す機能ブロック図である。図１に示すように、電子ペン１０は、ドットパターンが印刷された専用ペーパー２０と組み合わせて使用される。電子ペン１０は、通常のインクペンと同様のペン先部１７を備えており、利用者は通常のインクペンと同様に専用ペーパー２０上に文字などを書くことになる。
【００２９】
図２に示すように、電子ペン１０は、その内部にプロセッサ１１、メモリ１２、データ通信ユニット１３、バッテリー１４、ＬＥＤ１５、カメラ１６及び圧力センサ１８を備える。また、電子ペン１０は通常のインクペンと同様の構成要素としてインクカートリッジ（図示せず）などを有する。
【００３０】
電子ペン１０は、ペン先部１７により専用ペーパー２０上に描かれたインクの軌跡をデータ化するのではなく、専用ペーパー２０上で電子ペン１０が移動した軌跡座標をデータ化する。ＬＥＤ１５が専用ペーパー２０上のペン先部１７近傍を照明しつつ、カメラ１６が専用ペーパー２０に印刷されているドットパターンを読み取り、データ化する。つまり、電子ペン１０は専用ペーパー２０上で利用者が電子ペン１０を移動させることにより生じるストロークを画像データ又はベクトルデータとして取得することができる。
【００３１】
圧力センサ１８は、利用者が電子ペン１０により専用ペーパー上に文字などを書く際にペン先部１７に与えられる圧力、即ち筆圧を検出し、プロセッサ１１へ供給する。プロセッサ１１は、圧力センサ１８から与えられる筆圧データに基づいて、ＬＥＤ１５及びカメラ１６のスイッチオン／オフの切換を行う。即ち、利用者が電子ペン１０で専用ペーパー２０上に文字などを書くと、ペン先部１７には筆圧がかかる。よって、所定値以上の筆圧が検出されたときに、利用者が記述を開始したと判定して、ＬＥＤ１５及びカメラ１６を作動する。
【００３２】
カメラ１６は専用ペーパー２０上のドットパターンを読み取り、そのパターンデータをプロセッサ１１に供給する。プロセッサ１１は、供給されたドットパターンから、専用ペーパー２０上でのＸ／Ｙ座標を算出する。
【００３３】
プロセッサ１１は、利用者の記述が行われる間に、筆圧の配列データ及びＸ／Ｙ座標データを取得し、タイムスタンプ（時間情報）と関連付けてメモリ１２に記憶していく。よって、メモリ１２内には利用者の記述内容に対応するデータが時系列で記憶されていく。メモリ１２の容量は例えば１Ｍバイト程度とすることができる。
【００３４】
利用者により送信指示がなされるまでは、取得された全てのデータはメモリ１２内に保持される。そして、利用者が送信指示を行うと、データ通信ユニット１３により、電子ペン１０と所定距離内にある端末装置２５へメモリ１２内のデータが送信される。基本的には、一度送信指示がなされると、電子ペン１０はメモリ１２内に記憶していた全てのデータを端末装置２５へ送信するため、メモリ１２内はクリアされる。よって、送信後にもう一度同じ情報を端末装置２５へ送信したい場合には、利用者は専用ペーパー２０上に再度記述を行う必要がある。なお、この場合、利用者は専用ペーパー２０上にインクペンで書かれた文字などをなぞればよいことになる。
【００３５】
電子ペン１０自体は、送信ボタンなどの機能ボタンを備えておらず、送信指示その他の指示は、利用者が専用ペーパー２０上の所定位置に設けられた専用ボックスを電子ペン１０でチェックすることにより実行される。専用ボックスの位置座標には、予め送信指示が対応付けられており、プロセッサ１１は専用ボックスの位置座標を受信すると、データ通信ユニット１３にメモリ１２内のデータを供給し、端末装置２５への送信を行わせる。なお、電子ペン１０は、データの送信完了を電子ペンの振動により示すことができる。
【００３６】
バッテリー１４は電子ペン１０内の各要素に電源供給するためのものであり、例えば電子ペンのキャップ（図示せず）により電子ペン１０自体の電源のオン／オフを行うことができる。
【００３７】
このように、電子ペン１０は利用者が専用ペーパー２０上に記述した文字などに対応する座標データ及び筆圧データを取得して近傍の端末装置２５へ送信する機能を有するが、電子ペン１０のペン先部１７は通常のインクペンとなっているため、専用ペーパー２０上に記述した内容はオリジナルの原本として残るという特徴がある。即ち、紙の原本に対して記述するのと同時に、その内容を座標データなどの形態でリアルタイムに電子化することができる。
【００３８】
なお、電子ペン１０の標準機能によれば、電子ペン１０により得られるデータは、原則として座標データ又はベクトルデータの形態であり、テキストデータではない。但し、電子ペン１０は標準機能として、専用ペーパー２０上に設けられた専用エリアに記述することにより、英数字に限りテキスト化する機能は備えている。
【００３９】
また、電子ペン１０内には、ペン自体及びその所有者に関するプロパティ情報（ペン情報及びペン所有者情報）を保持することができ、アプリケーションから参照することができる。ペン情報としては、バッテリーレベル、ペンＩＤ、ペン製造者番号、ペンソフトウェアのバージョン、サブスクリプションプロバイダのＩＤなどを保持できる。また、ペン所有者情報としては、国籍、言語、タイムゾーン、emailアドレス、空きメモリ容量、名称、住所、ファックス／電話番号、携帯電話番号などを保持することができる。
【００４０】
なお、上記の例におけるデータ通信ユニット１３では、Bluetooth（登録商標）の無線伝送、ＵＳＢケーブルを使用した有線伝送、端子などの接触によるデータ伝送など、各種の方法によって電子ペン１０から端末装置２５へのデータ送信を行うことが考えられる。
【００４１】
次に、電子ペンにより利用者が記述した内容のＸ／Ｙ座標データを取得する方法について説明する。前述のように専用ペーパー２０には、所定のドットパターンが印刷されている。電子ペン１０のカメラ１６は、利用者が専用ペーパー２０上に記述したインクの軌跡を読み取るのではなく、専用ペーパー２０上のドットパターンを読み取る。実際、図１に示すように、ＬＥＤ１５による照明エリア及びカメラ１６の撮影エリア（照明エリア内に位置する）は、ペン先部１７が専用ペーパー２０に接触する位置とはずれている。
【００４２】
ドットパターンはカーボンを含む専用インキなどで印刷されており、カメラ１６はその専用インキによるパターンのみを認識することができる。専用インキ以外のインキ（カーボンを含まない）により、専用ペーパー上に罫線や枠などを印刷しても、電子ペンはそれらを認識することはない。よって、専用ペーパーを利用して各種申込書などの帳票を作成する際は、専用インキ以外のインキで入力枠や罫線、注意書きなどを印刷する。
【００４３】
ドットパターンは、図３に例示するように、各ドットの位置がデータに対応付けされている。図３の例では、ドットの位置を格子の基準位置（縦線及び横線の交差点）から上下左右にシフトすることにより、０〜３の２ビット情報を表示した例である。このようにして表現された情報の組合せにより、専用ペーパー上の位置座標が決定される。図４（ａ）に例示するように、縦横２mmの範囲内に３６個のドットが格子状に配置され、これらのドットにより示されるデータの配列（図４（ｂ））が、その専用ペーパー上の位置座標と対応付けされている。よって、電子ペン１０のカメラ１６が図４（ａ）に示すようなドットパターンを撮影すると、プロセッサ１１はカメラ１６から入力されるドットパターンのデータに基づいて図４（ｂ）に示すデータ配列を取得し、それに対応する専用ペーパー上の位置座標（即ち、そのドットパターンがその専用ペーパー上のどの位置にあるのか）をリアルタイムで算出する。なお、ドットパターンを認識する最小単位は２mm×２mmであり、カメラ１６は毎秒１００回程度の撮影を行う。
【００４４】
次に、専用ペーパーについて説明する。専用ペーパーの構造の一例を図５に示す。図示のように、専用ペーパー２０は、台紙３０上にドットパターン３２が印刷され、その上に罫線などの図案３４が印刷されている。台紙３０は通常は紙であり、ドットパターン３２は前述のようにカーボンを含んだ専用インキにより印刷される。また、通常のインキなどにより図案３４が印刷される。ドットパターンと図案とは同時に印刷してもよいし、いずれかを先に印刷してもよい。
【００４５】
図案３４の例を図６に示す。図６は、ある申込書３６の例であり、複数の記入欄３８や送信ボックス３９が印刷されている。図６には明確に図示されておらず、詳細は後述するが、実際にはドットパターンが申込書３６の全面に印刷されており、その上に記入欄３８や送信ボックス３９が通常のインキにより印刷されている。利用者は、ドットパターンを意識することなく、従来からある申込書と同様に、電子ペン１０を使用して必要事項を申込書３６の各記入欄３８に記入すればよい。
【００４６】
専用ペーパー２０上のエリアは大きく２種類のエリアに分けることができる。１つは記入エリアであり、電子ペン１０による記述内容をそのまま情報として取り扱うエリアである。図６の例では複数の記入欄３８がこれに該当する。もう１つは機能エレメントであり、対応するエリア内を電子ペン１０でチェックした際に、予めそのエリアに対して定義されているアクション、指示などを実行するようになっている。図６の例における送信ボックス３９がこれに該当する。
【００４７】
送信ボックス３９は前述したように電子ペン１０内に記憶されているデータを近傍の端末装置２５へ送信するための指示を行う際に使用される。利用者が送信ボックス３９内に電子ペン１０でチェックを入れると、電子ペン１０が送信ボックス内のドットパターンを読み取る。当該パターンは送信指示に対応付けられており、電子ペン１０内のプロセッサ１１はデータ通信ユニット１３にメモリ１２内の記憶データの送信命令を発する。
【００４８】
ドットパターンの割り当ては、通常、アプリケーション（用紙の種類）毎に行われる。即ち、ある申込書内のドットパターンは１枚の用紙の中で重複することはないが、同一の申込書には全て同じドットパターンが印刷されている。よって、利用者が電子ペン１０で必要事項を入力すると、その入力事項がその申込書のどの項目に対するものであるかを、申込書上の座標データから特定することができる。
【００４９】
このように、ドットパターンを印刷した専用ペーパー上に所定の図案を印刷することにより、専用ペーパーを利用した各種申込書が作成できる。利用者は電子ペン１０を使用して通常の要領で必要事項を記入すれば、その電子データが自動的に取得される。
【００５０】
上記の例では、ドットパターンは専用ペーパー上にカーボンを含むインキにより印刷されているが、プリンタ及びカーボンを含むインクを使用してドットパターンを通常の紙上にプリントすることも可能である。さらに、専用ペーパー上の図案も印刷ではなく、プリンタにより形成することも可能である。ドットパターンをプリンタにより紙上に形成する場合には、１枚１枚に異なるドットパターンを形成することが可能である。よって、形成されたドットパターンの違いにより、それらの用紙１枚１枚を識別し、区別することが可能となる。
【００５１】
なお、本明細書においては、「印刷」の語は、通常の印刷のみならず、プリンタによるプリントも含む概念とする。
【００５２】
次に、電子ペンにより取得したデータの送信処理について図２を参照して説明する。電子ペン１０が取得したデータは、主として利用者が入力した事項のデータであるが、通常はそのデータの送信先であるサービスサーバがどこであるかの情報は含まれていない。その代わりに、その専用ペーパーに関するアプリケーションやサービスを特定する情報が専用ペーパー上のドットパターンに含まれており、利用者の入力作業中に専用ペーパーからその情報が取得されている。よって、電子ペン１０から記入情報を受け取った端末装置２５は、まず、問い合わせサーバ２６に対して、その専用ペーパーに対して入力されたデータをどのサービスサーバ２７へ送信すべきかの問い合わせを行う。問い合わせサーバ２６は、専用ペーパー毎に、対応するサービスサーバの情報を有しており、端末装置２５からの問い合わせに応じて、当該専用ペーパーに関するサービスなどを行うサービスサーバ２７の情報（ＵＲＬなど）を端末装置２５へ回答する。それから、端末装置２５は、電子ペンから取得した記入情報をそのサービスサーバ２７へ送信することになる。
【００５３】
なお、上記の例では端末装置２５、問い合わせサーバ２６及びサービスサーバ２７が別個に構成されているが、これらの幾つか又は全てを１つの装置として構成することも可能である。本実施形態において後述するサーバは、問い合わせサーバ２６及びサービスサーバ２７を兼ねていることとしている。また、本実施形態では、記入情報には、ストロークデータや時間情報が含まれているものとする。
【００５４】
[図形解析システム]
次に、本発明の図形解析システムについて説明する。図７に図形解析システム１００の概略構成を示す。図７に示す処理システム１００は、電子ペン１０により専用ペーパーである電子ペン用帳票に記入された情報に基づいて、特定の図形に精緻化したイメージデータを作成するシステムである。具体的に、電子ペン用帳票は方眼用紙３であり、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成されるグリッドエリアを有している。なお、グリッドエリアは、方眼用紙３の一部であっても、全部であっても構わない。利用者は、方眼用紙３上のグリッドエリアに、直線、三角形、四角形又は円いずれかの図形をフリーハンドでラフに記入する。サーバ５は、方眼用紙３への記入情報に基づいて、利用者が記入した図形を特定し、さらに特定した図形に精緻化したイメージデータ（以下、「精緻化データ」とも呼ぶ。）を作成する。なお、本実施形態では、便宜上、直線も図形に含まれるものとする。
【００５５】
図７に示すように、図形解析システム１００は、端末装置２５及びサーバ５がネットワーク２を通じて接続されることにより構成される。ここで、ネットワーク２の１つの好適な例はインターネットである。また、端末装置２５とは、利用者が使用するパーソナルコンピュータ（以下、「ＰＣ」と呼ぶ。）や携帯電話といったネットワークを介してデータの授受が可能な端末である。
【００５６】
ここで、図８及び図９を参照して、本システムによる図形解析方法の概要を述べておく。図８は、方眼用紙３が有するグリッドエリアの例である。一方、図９は、グリッドエリアにフリーハンドで記入されたデータと、記入情報に基づいて精緻化されたデータとを示す例である。
【００５７】
利用者は、電子ペン１０を使用して、電子ペン用帳票である方眼用紙３上に設けられたグリッドエリアに、フリーハンドでラフに図形を記入する。なお、記入する図形は、直線、三角形、四角形又は円いずれかであるものとする。方眼用紙３上に設けられたグリッドエリアは、図８に示すように、Ｘ軸と平行である横線と、Ｙ軸と平行である縦線とから構成された格子状のエリアのことである。このようなグリッドの目盛りに従って、利用者は、フリーハンドであっても容易に図形を記入することができる。
【００５８】
なお、方眼用紙３は、グリッドエリアの他に、上述の送信ボックス３９を有しているものとする。
【００５９】
本実施形態において、利用者が電子ペン１０によりフリーハンドでグリッドエリアに記入する図形は、図９（ａ）に示すような、直線６０ａ、三角形６１ａ、正方形、長方形６２ａ、ひし形６３ａ及び円６４ａである。電子ペン１０は、記入された内容に対応する記入情報を取得し、電子ペン１０内のメモリに一時的に記憶した後、当該記入情報を端末装置２５へ送信する。端末装置２５は、取得した記入情報を、ネットワーク２を介してサーバ５へ送信する。
【００６０】
サーバ５は、記入情報から、記入時刻に関する時間情報を抽出し、当該時間情報に基づいて１つの図形に対応する１つ以上のストロークをグループ化する。ここで、ストロークとは、一筆で書かれた軌跡のことである。長方形やひし形は、複数のストロークに分けて記入されることも考えられるため、サーバ５は、時間情報に基づいて、グループ化を行っている。具体的には、所定の時間以内に記入されたストロークをグループ化する等が考えられる。なお、１つの図形に対応するストロークが１つである場合、グループ化する複数のストロークは存在しないが、グループ化と呼ぶものとする。
【００６１】
そして、サーバ５は、記入情報に含まれるドットパターン上の位置座標に基づいて、開始点及び終了点を特定する。具体的には、グループ化された各ストロークの開始点及び終了点を分析し、各々の方眼用紙３上で最も近い点を図形解析用の開始点及び終了点とする。なお、開始点及び終了点の特定はこれに限定されるものではなく、時間情報に基づいて、時系列的に最も早く記入された点を開始点、時系列的に最も遅く記入された点を終了点と特定することとしてもよい。また、位置座標及び時間情報に基づいて特定することとしてもよい。
【００６２】
また、サーバ５は、各ストロークから所定の長さの線分を抽出する。さらに、サーバ５は、詳細は後述するが、ストロークの揺らぎを考慮するため、線分から一定時間又は一定頻度のベクトルを抽出する。そして、サーバ５は、ベクトルの移動方向に基づいて、線分の移動方向を特定する。
【００６３】
サーバ５は、詳細は後述するが、線分の移動方向に基づいてストローク上の点が、同一方向に移動しているか否かを解析する。そして、サーバ５は、Ｘ軸方向及び／又はＹ軸方向の移動に変化がみられた場合、異なる方向に移動し始めた点の方眼用紙３上の最短距離の点を分岐点と特定する。さらに、サーバ５は、分岐点の数を算出する。
【００６４】
そして、サーバ５は、時間情報、算出した分岐点数、線分の移動方向及び特定領域による判定等に基づいて、方眼用紙３に記入された図形が直線、三角形、正方形／長方形、ひし形又は円のいずれであるかを特定する。そして、サーバ５は、グループ化されたストローク中の分岐点、開始点及び終了点に基づいて、特定した図形に精緻化した精緻化データを生成する。この精緻化データとはイメージデータであり、サーバ５に保存されたり、端末装置２５に送信されたりする。端末装置２５は、取得した精緻化データを画面上に出力することもできる。つまり、端末装置２５は、図９（ａ）に示すようなフリーハンドでラフに記入されたストロークのデータを精緻化して、図９（ｂ）に示すように表示することができる。
【００６５】
このように、本発明のサーバ５は、方眼用紙３の目盛りに従ってフリーハンドで記入した図形の体裁を整えて、精緻化したイメージデータを自動的に生成することができる。
【００６６】
[図形]
ここで、図１０乃至図１４を参照して、グリッドエリアに記入された図形及び精緻化された図形について詳細に説明する。図１０乃至図１４は、それぞれグリッドエリアへの直線、三角形、正方形／長方形、ひし形及び円の記入例と、精緻化された図形の例である。
【００６７】
まず、図１０を参照し、直線について説明する。利用者は、電子ペン１０を使用して、図１０（ａ）に示すように、グリッドエリアにフリーハンドで直線６０ａを記入する。このとき、直線の２つの端点、即ち、図１０（ｂ）に示す開始点８０及び終了点８１は、グリッドエリアを構成する縦線と横線が交差する交点上に位置しなければならない。換言すると、利用者は、開始点８０及び終了点８１が、グリッドエリアの交点に重なるように直線６０ａを記入する。なお、直線６０ａは、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）と平行である必要はない。
【００６８】
サーバ５は、グループ化されたストローク中に分岐点がない場合、当該グループ化されたストロークに対応する図形は直線であると特定する。換言すると、サーバ５は、グループ化されたストローク中の線分の移動方向が全て同じ一方向である場合、当該グループ化されたストロークに対応する図形は直線であると特定する。さらに、サーバ５は、特定した開始点と終了点を結ぶことにより、直線に精緻化したイメージデータを作成する。即ち、図１０（ｃ）に示すように、開始点８０及び終了点８１を結んだ直線６０ｂのイメージデータを生成する。
【００６９】
次に、図１１を参照し、三角形について説明する。利用者は、電子ペン１０を使用して、図１１（ａ）に示すように、グリッドエリアにフリーハンドで三角形６１ａを記入する。このとき、三角形６１ａの３つの頂点は、交点上に位置しなければならない。原則として、三角形６１ａを記入する場合、図１１（ｂ）に示すように、開始点８２及び終了点８３は一致するように記入されなければならない。換言すると、利用者は、三角形６１ａの３つの頂点である開始点８２（終了点８３）と、分岐点８４と、分岐点８５とが、グリッドエリアの交点に重なるように三角形６１ａを記入する。
【００７０】
なお、三角形６１ａの辺は、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）と平行である必要はない。三角形６１ａの辺とは、開始点８２（終了点８３）と、分岐点８４と、分岐点８５とを時系列に沿ってそれぞれ結ぶ線分のことである。線分の移動方向についての詳細は後述する。
【００７１】
サーバ５は、グループ化されたストローク中の分岐点が２つの場合、当該グループ化されたストロークに対応する図形は三角形であると特定する。さらに、サーバ５は、特定した開始点８２（終了点８３）と、分岐点８４と、分岐点８５とを直線で結ぶことにより、三角形に精緻化したイメージデータを作成する。即ち、図１１（ｃ）に示すように、開始点８２（終了点８３）、分岐点８４及び分岐点８５を結んだ三角形６１ｂのイメージデータを生成する。
【００７２】
次に、図１２を参照し、正方形／長方形について説明する。利用者は、電子ペン１０を使用して、図１２（ａ）に示すように、グリッドエリアにフリーハンドで正方形／長方形６２ａを記入する。このとき、長方形６２ａの４つの頂点は、交点上に位置しなければならない。原則として、長方形６２ａを記入する場合、図１２（ｂ）に示すように、開始点８６及び終了点８７は一致するように記入されなければならない。また、長方形６２ａの辺は、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）のいずれかと平行でなければならない。長方形６２ａの辺とは、開始点８６（終了点８７）と、分岐点８８と、分岐点８９と、分岐点９０とをそれぞれ結ぶ線分のことである。
【００７３】
サーバ５は、グループ化されたストローク中の分岐点が３つであって、且つ、開始点８６（終了点８７）、分岐点８８、分岐点８９及び分岐点９０をそれぞれ結ぶ線分が縦線（Ｙ軸）又は横線（Ｘ軸）と平行である場合、当該グループ化されたストロークに対応する図形は長方形であると特定する。さらに、サーバ５は、特定した開始点８６（終了点８７）と、分岐点８８と、分岐点８９と、分岐点９０とを時系列に沿って直線で結ぶことにより、長方形に精緻化したイメージデータを生成する。即ち、図１２（ｃ）に示すように、開始点８６（終了点８７）、分岐点８８、分岐点８９及び分岐点９０を結んだ長方形６２ｂのイメージデータを生成する。
【００７４】
なお、図１２では、長方形について説明しているが、辺の長さが全て同じである以外は正方形も同様であるため、便宜上説明は省略する。
【００７５】
次に、図１３を参照し、ひし形について説明する。利用者は、電子ペン１０を使用して、図１３（ａ）に示すように、グリッドエリアにフリーハンドでひし形６３ａを記入する。このとき、ひし形６３ａの４つの頂点は、交点上に位置しなければならない。原則として、ひし形６３ａを記入する場合、図１３（ｂ）に示すように、開始点９１及び終了点９２は一致するように記入されなければならない。なお、ひし形６３ａの辺は、グリッドエリアを構成する縦線（Ｙ軸）又は横線（Ｘ軸）と平行である必要はない。ひし形６３ａの辺とは、開始点９１（終了点９２）と、分岐点９３と、分岐点９４と、分岐点９５とをそれぞれ結ぶ線分のことである。
【００７６】
サーバ５は、グループ化されたストローク中の分岐点が３つであって、且つ、開始点９１（終了点９２）、分岐点９３、分岐点９４及び分岐点９５をそれぞれ結ぶ線分が縦線（Ｙ軸）又は横線（Ｘ軸）と平行ではない場合、当該グループ化されたストロークに対応する図形はひし形であると特定する。さらに、サーバ５は、開始点９１（終了点９２）と、分岐点９３と、分岐点９４と、分岐点９５とをそれぞれ時系列に沿って直線で結ぶことにより、ひし形に精緻化したイメージデータを生成する。即ち、図１３（ｃ）に示すように、開始点９１（終了点９２）、分岐点９３、分岐点９４及び分岐点９５を結んだひし形６３ｂのイメージデータを生成する。
【００７７】
次に、図１４を参照し、円について説明する。利用者は、電子ペン１０を使用して、図１４（ａ）に示すように、グリッドエリアにフリーハンドで円６４ａを記入する。このとき、円６４ａの直径は１目盛り単位（例えば、１ｃｍ又は２ｃｍ）でなければならない。また、円６４ａは、グリッドエリアを構成する縦線又は横線と４点で接していなければならない。原則として、円６４ａを記入する場合、図１４（ｂ）に示すように、開始点９６及び終了点９７は一致するように記入される。また、ひし形６３ａを構成する４つ以上の点が、縦線及び／又は横線に接するように記入される。
【００７８】
サーバ５は、グループ化されたストローク中の分岐点が４つ以上である場合、当該グループ化されたストロークに対応する図形は円であると特定する。さらに、サーバ５は、円の直径を算出すると共に、当該直径に基づいて、開始点９６（終了点９７）、分岐点９８、分岐点９９、分岐点１２１及び分岐点１２２を弧で結ぶことにより、円に精緻化したイメージデータを生成する。即ち、１４（ｃ）に示すように、開始点９６（終了点９７）、分岐点９８、分岐点９９、分岐点１２１及び分岐点１２２を結んだ円６４ｂのイメージデータを生成する。
【００７９】
なお、利用者は原則として図形を記入する際、上述のルールに従う必要があるが、多少のずれが生じている場合、サーバ５は、ストロークの揺らぎとして開始点、終了点及び分岐点の位置座標を修正することとしてもよい。
【００８０】
[特定領域]
次に、図１５を参照して、特定領域について説明する。特定領域とは、グループ化されたストローク中の分岐点が３つである場合に、ひし形であるか円であるかを判別するための領域である。具体的には、図１５（ａ）及び（ｂ）に示す斜線の領域が特定領域である。
【００８１】
図１５（ａ）に示すように、特定領域上のストロークの出現頻度が低い場合、サーバ５は、グループ化されたストロークに対応する図形はひし形であると特定する。一方、図１５（ｂ）に示すように、特定領域上のストロークの出現頻度が高い場合、サーバ５は、グループ化されたストロークに対応する図形は円であると特定する。
【００８２】
このように、サーバ５は、グループ化されたストローク中の分岐点が３つである場合、特定領域上のストロークの出現頻度に基づいて、対応する図形がひし形であるか円であるかを判別している。
【００８３】
[移動方向の特定]
次に、図１６を参照して、ストロークの揺らぎの考慮した移動方向の特定について詳しく説明する。上述のように、サーバ５は、ストロークから、図１６に示すように、所定の長さの線分を抽出する。さらに、サーバ５は、図示のように、線分から一定時間又は一定頻度のベクトルを抽出する。抽出したベクトルの移動方向は、記入情報に含まれるストロークの位置座標及び時間情報に基づいて特定することができる。そして、サーバ５は、ベクトルの移動方向のうち、最も多い移動方向を線分の移動方向であると特定する。つまり、サーバ５は、ベクトルの移動方向を総合して、線分の移動方向を特定する。具体的に、図１６の例では、真下に向いているベクトルが最も多いため、総合して線分の移動方向はＹ軸マイナス方向であると特定する。
【００８４】
このように、サーバ５は、利用者がフリーハンドでラフに記入したストロークであっても、揺らぎを考慮して、各ストローク中の線分の移動方向を適切に特定することができる。
【００８５】
[分岐点の特定]
次に、図１７を参照して、分岐点の特定について詳しく説明する。
【００８６】
利用者は、電子ペン１０を使用し、図１７（ａ）に示すように、左上の頂点を開始点として、ワンストロークで長方形を記入したとする。この場合、サーバ５は、ストローク中の線分の移動方向に基づいて、グリッドエリア上の最短距離の点を抽出しながら各点が同一方向に移動していることを解析し、移動に変化が見られた場合、異なる方向に移動し始めた点の最短距離の点を分岐点であると特定する。揺らぎを考慮した場合、最短距離の点に最も近いグリッドエリア上の交点を分岐点であると特定する。具体的に、図１７（ｂ）に示すように、線分１３１の移動方向は、上述の揺らぎを考慮すると、真下に向かっていると特定される。即ち、線分１３１の移動方向は、Ｘ軸において０方向に移動、Ｙ軸においてマイナス方向に移動となる。ここで、０方向に移動とは、移動していないことを表している。一方、線分１３２の移動方向は、上述の揺らぎを考慮すると、右に向かっていると特定される。即ち、線分１３２の移動方向は、Ｘ軸においてプラス方向に移動、Ｙ軸において０方向に移動となる。
【００８７】
サーバ５は、記入情報に含まれる時間情報により、時系列に基づいて線分１３１と線分１３２の移動方向を比較することで、ストローク中の点の移動方向を解析する。上述の例では、線分１３１と線分１３２は、Ｘ軸及びＹ軸共に移動方向が変化していることが明らかである。よって、線分の移動方向が大きく変化した点１３３が分岐点となる。このとき、点１３３がグリッドエリアの交点上にない場合、サーバ５は、点１３３と最も距離が近い交点を分岐点と特定する。
【００８８】
このように、サーバ５は、ストロークの移動方向や近似値線を算出することで、ストロークの移動方向が大きく変化する分岐点を特定する。
【００８９】
図１７は、長方形の分岐点を特定する例であるが、その他の図形（三角形、正方形、ひし形及び円）の分岐点を特定する場合も同様であるため、便宜上、説明は省略する。
【００９０】
なお、分岐点の特定は、グループ化されたストローク中の開始点と終了点が一致するまで行われる。即ち、解析している点が終了点になるまで行われる。
【００９１】
また、サーバ５は、位置座標及び時間情報に基づいて、開始点と終了点が誤差の範囲ではなく全く別の位置に存在する場合、図形を直線であると特定することとしてもよい。
【００９２】
[サーバ]
次に、サーバ５について詳しく説明する。図１８は、図形解析システム１００における、特にサーバ５の内部構成を示す。図示のように、サーバ５は、図形解析プログラム１０１、記入情報取得機能１０２、グループ化機能１０３、開始点終了点特定機能１０４、ベクトル抽出機能１０５、移動方向特定機能１０６、分岐点特定機能１０７、分岐点数判定機能１０８、直線特定機能１０９、三角形特定機能１１０、軸判定機能１１１、正方形／長方形特定機能１１２、特定領域判定機能１１３、ひし形特定機能１１４、円特定機能１１５、精緻化データ生成機能１１６及び精緻化データ送信機能１１７を有する。なお、各機能は、サーバ５が有するＣＰＵが予め用意されたプログラムを実行することにより実現される。
【００９３】
図形解析プログラム１０１は、電子ペン１０を使用してフリーハンドでグリッドエリアに記入された情報に基づいて、図形を特定すると共に、当該図形に基づいて精緻化した精緻化データを生成するプログラムである。
【００９４】
記入情報取得機能１０２は、図形解析プログラム１０１を実行することにより、利用者が電子ペン１０を使用して、方眼用紙３のグリッドエリアに記入した記入情報を取得する機能である。
【００９５】
グループ化機能１０３は、記入情報取得機能１０２が取得した記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化する機能である。
【００９６】
開始点終了点特定機能１０４は、記入情報取得機能１０２が取得した記入情報に含まれるドットパターン上の位置座標及び時間情報に基づいて、グループ化されたストローク内の開始点及び終了点を特定する機能である。
【００９７】
ベクトル抽出機能１０５は、記入情報から線分を抽出し、当該線分から一定時間又は一定頻度毎のベクトルを抽出する機能である。
【００９８】
移動方向特定機能１０６は、ベクトルの移動方向に基づいて、線分の移動方向を特定する機能である。
【００９９】
分岐点特定機能１０７は、移動方向特定機能１０６が特定した線分の移動方向に基づいて、グループ化されたストローク内における全ての分岐点を特定する機能である。また、分岐点特定機能１０７は、グループ化されたストローク内の分岐点の数を算出する機能である。
【０１００】
分岐点数判定機能１０８は、分岐点特定機能１０７が算出した、グループ化されたストローク内における分岐点の数を判定する機能である。
【０１０１】
直線特定機能１０９は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が０であると判定した場合に、当該グループ化されたストロークに対応する図形が直線であると特定する機能である。
【０１０２】
三角形特定機能１１０は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が２であると判定した場合に、当該グループ化されたストロークに対応する図形が三角形であると特定する機能である。
【０１０３】
軸判定機能１１１は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が３であると判定した場合に、分岐点間を結ぶ線分がＸ軸又はＹ軸と平行であるか否かを判定する機能である。具体的に、グループ化されたストロークに対応する図形が正方形又は長方形の場合、分岐点間を結ぶ線分のうち２本の移動方向がＸ軸と平行となり、他の２本の移動方向がＹ軸と平行となるはずである。よって、軸判定機能１１１は、分岐点間を結ぶ線分の移動方向に基づいて、全ての線分がＸ軸又はＹ軸のいずれかと平行であるか否かを判定する機能である。
【０１０４】
正方形／長方形判定機能１１２は、軸判定機能１１１が、分岐点間を結ぶ線分の移動方向がＸ軸又はＹ軸のいずれかと平行であると判定した場合に、グループ化されたストロークに対応する図形が正方形又は長方形であると特定する機能である。
【０１０５】
特定領域判定機能１１３は、分岐点数判定機能１０８がグループ化されたストローク内における分岐点数が３と判定し、且つ、軸判定機能１１１が分岐点間を結ぶ線分の移動方向がＸ軸又はＹ軸のいずれかと平行ではないと判定した場合に、ストロークの特定領域上の出現頻度が高いか低いかを判定する機能である。具体的には、予め一定の出現頻度を設定しておき、グループ化されたストロークの出現頻度が当該一定の出現頻度より高いか否かで判定する。
【０１０６】
ひし形特定機能１１４は、特定領域判定機能１１３が特定領域上の出現頻度が低いと判定した場合に、グループ化されたストロークに対応する図形をひし形であると特定する機能である。
【０１０７】
円判定機能１１５は、特定領域判定機能１１３が特定領域上の出現頻度が高いと判定した場合に、グループ化されたストロークに対応する図形を円であると特定する機能である。また、円判定機能１１５は、分岐点数判定機能１０８が、グループ化されたストローク内における分岐点数が４以上であると判定した場合に、当該グループ化されたストロークに対応する図形が円であると特定する機能である。
【０１０８】
精緻化データ生成機能１１６は、特定した開始点、終了点及び分岐点のドットパターン上の位置座標に基づいて、特定した図形に精緻化した精緻化データを生成する機能である。
【０１０９】
精緻化データ送信機能１１７は、精緻化データ生成機能１１６が生成した精緻化データを、ネットワーク２を通じて端末装置２５へ送信する機能である。
【０１１０】
[図形解析処理]
次に、上記の図形解析システム１００により実行される図形解析処理について説明する。図１９及び図２０は、図形解析処理のフローチャートである。
【０１１１】
まず、利用者は、電子ペン１０を使用して、方眼用紙３のグリッドエリアに任意の図形を記入する。このとき、利用者は、頂点は交点上といった上述のルールに従い、直線、三角形、正方形／長方形、ひし形又は円を図形として記入するものとする。図形の記入が完了すると、利用者は、方眼用紙３の送信ボックス３９にチェックマークを記入することにより、記入情報を、端末装置２５を介してサーバ５へ送信する。
【０１１２】
サーバ５は、電子ペン１０から端末装置２５を介して記入情報を取得する（ステップＳ１）。そして、サーバ５は、記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化する（ステップＳ２）。さらに、サーバ５は、記入情報に含まれるドットパターン上の位置座標及び時間情報に基づいて、グループ化されたストローク中の開始点及び終了点を特定する（ステップＳ３）。
【０１１３】
次に、サーバ５は、グループ化されたストロークから所定の長さの線分を抽出する。このとき、サーバ５は、特定した開始点から線分の抽出を行う。さらに、サーバ５は、線分から一定時間又は一定頻度毎のベクトルを抽出する（ステップＳ４）。そして、サーバ５は、ベクトルの移動方向を総合して、線分の移動方向を特定する（ステップＳ５）。
【０１１４】
サーバ５は、線分の移動方向に基づいて、最短距離の点を抽出しながらストローク上の各点が同一方向に移動しているか否かを判定する。即ち、移動方向が変化しているか否かを判定する（ステップＳ６）。変化していない場合（ステップＳ６；Ｎｏ）、サーバ５は、ステップＳ８に進む。一方、変化している場合（ステップＳ６；Ｙｅｓ）、サーバ５は、分岐が発生したと判定し、異なる方向に移動し始めた点を分岐点と特定する（ステップＳ７）。そして、サーバ５は、判定した点が終了点であるか否かを判定する（ステップＳ８）。線分の移動方向の特定及び分岐点の特定は、開始点から始めて、終了点で終了することで、グループ化されたストローク全てを確認することができたといえるからである。そのため、判定した点が終了点でないと判定した場合（ステップＳ８；Ｎｏ）、サーバ５は、ステップＳ４乃至Ｓ８の処理を繰り返し行う。一方、判定した点が終了点であると判定した場合（ステップＳ８；Ｙｅｓ）、サーバ５は、ステップＳ９に進む。
【０１１５】
そして、サーバ５は、グループ化されたストローク中の分岐点数がいくつであるかを判定する（ステップＳ９）。分岐点が存在しない、即ち分岐点数が０である場合（ステップＳ９；０）、サーバ５は、グループ化されたストロークに対応する図形は直線であると特定する（ステップＳ１０）。一方、分岐点数が２の場合（ステップＳ９；２）、サーバ５は、グループ化されたストロークに対応する図形は三角形であると特定し（ステップＳ１１）、ステップＳ１９へ進む。また、分岐点数が３以上である場合（ステップＳ９；３以上）、サーバ５は、さらに分岐点数が３であるか否かを判定する（ステップＳ１２）。なお、便宜上、図２１に示すフローチャートには記載されていないが、分岐点数が１の場合、サーバ５は、グループ化されたストロークに対応する図形を特定できないため、図形解析処理を終了する。
【０１１６】
分岐点数が３以上である場合（ステップＳ１２；Ｎｏ）、サーバ５は、グループ化されたストロークに対応する図形は円であると特定する（ステップＳ１７）。一方、分岐点数が３である場合（ステップＳ１２；Ｙｅｓ）、サーバ５は、開始点、終了点及び分岐点の位置座標に基づいて、各点を結ぶ全ての辺がＸ軸又はＹ軸のいずれかと平行であるか否かを判定する（ステップＳ１３）。全ての辺がＸ軸又はＹ軸のいずれかと平行である場合（ステップＳ１３；Ｙｅｓ）、サーバ５は、グループ化されたストロークに対応する図形は正方形／長方形であると特定し（ステップＳ１４）、ステップＳ１９に進む。一方、辺がＸ軸又はＹ軸のいずれかと平行ではない場合（ステップＳ１３；Ｎｏ）、サーバ５は、グループ化されたストロークの特定領域における出現頻度が高いか否かを判定する（ステップＳ１５）。
【０１１７】
出現頻度が低い場合（ステップＳ１５；Ｎｏ）、サーバ５は、グループ化されたストロークに対応する図形はひし形であると特定し（ステップＳ１６）、ステップＳ１９へ進む。一方、出現頻度が高い場合（ステップＳ１５；Ｙｅｓ）、サーバ５は、グループ化されたストロークに対応する図形は円であると特定する（ステップＳ１７）。さらに、サーバ５は、開始点、終了点及び分岐点の位置座標に基づいて、円の直径を算出する（ステップＳ１８）。
【０１１８】
そして、サーバ５は、時間情報と、開始点、終了点及び分岐点の位置座標とに基づいて、特定した図形に精緻化したイメージデータである精緻化データを生成する（ステップＳ１９）。このとき、サーバ５は、特定した図形が円であれば、直径も考慮して精緻化データを生成する。さらに、サーバ５が、生成した精緻化データを、ネットワーク２を介して端末装置２５に送信する（ステップＳ２０）ことにより、図形解析処理は完了する。精緻化データを受信した端末装置２５は、保存したり、画面上に出力したりといった所定の処理を行うことができる。
【０１１９】
なお、本実施形態では、端末装置２５とサーバ５とは別々であって、ネットワーク２を介して接続されたものとしているが、本発明はこれに限定されるものではなく、それぞれの機能を備えた１つの端末装置であることとしてもよい。
【０１２０】
また、本実施形態では、特に記載していないが、サーバ５は、直線、三角形、正方形／長方形及びひし形の精緻化データを方法する場合に、開始点、終了点及び分岐点の位置座標に基づいて、各図形の辺の長さを算出することとしてもよい。つまり、サーバ５は、利用者が電子ペン１０を使用してフリーハンドで記入したストロークの分析を行い、グループ化されたストロークがいずれの図形であるかを特定すると共に、サイズやグリッドエリア上の位置に基づいて解析及び算出を行うことで精緻化データを生成している。
【０１２１】
本発明によれば、方眼用紙３上の目盛りに従ってフリーハンドで記入した図形の体裁を自動的に整えて、イメージ化することができる。このようなグリッドエリアを有する電子ペン用帳票は、工事現場等で図面を描く場合や、システムのフローチャート等を描く場合に特に有用である。
【０１２２】
[変形例]
上記実施形態では記載していないが、図形の認識率を向上させるため、グリッドエリアに図形を記入する前に、予め図形選択ボックスにて記入する図形を選択することも可能である。この場合、電子ペン用帳票である方眼用紙３は、例えば図２１に示すように、グリッドエリアの他に図形選択エリアを有している。図形選択エリアは、図示のように、各図形のイラストにチェックボックスが対応付けられている。利用者は、任意の図形に対応するチェックボックスにチェックマークを記入した後、グリッドエリアに当該図形を記入する。そして、利用者が送信ボックス３９にチェックマークを記入することで、電子ペン１０内に格納された記入情報が、端末装置２５を介してサーバ５へ送信される。
【０１２３】
サーバ５は、予め、図形選択エリア内の各チェックボックスの内容と、各チェックボックスのドットパターン上の位置座標とを対応付けた座標テーブルを有している。そのため、サーバ５は、電子ペン１０から取得した記入情報に基づいて、座標テーブルを参照することにより、利用者が選択した図形が何であるかを容易に特定することができる。よって、サーバ５は、利用者が選択した図形を考慮した上で、上記実施形態のようにグループ化されたストロークに対応する図形を特定することができる。即ち、図形の認識率を向上させることができる。
【産業上の利用可能性】
【０１２４】
本発明によれば、フリーハンドで記入した図形を自動的に精緻化した上でイメージ化することが可能な方眼用紙として利用することができる。
【図面の簡単な説明】
【０１２５】
【図１】電子ペンの使用形態を模式的に示す図である。
【図２】電子ペンの構造を示す機能ブロック図である。
【図３】専用ペーパーに印刷されたドットパターンによる情報の表現方法を説明する図である。
【図４】ドットパターン及びそれに対応する情報の例である。
【図５】専用ペーパーにより構成される帳票の構造を示す。
【図６】電子ペン用帳票の例を示す。
【図７】図形解析システムの概略構成を示す。
【図８】グリッドエリアの例である。
【図９】フリーハンドの図形と、精緻化された図形を示す図である。
【図１０】グリッドエリア上の直線を説明する図である。
【図１１】グリッドエリア上の三角形を説明する図である。
【図１２】グリッドエリア上の正方形／長方形を説明する図である。
【図１３】グリッドエリア上のひし形を説明する図である。
【図１４】グリッドエリア上の円を説明する図である。
【図１５】特定領域を説明する図である。
【図１６】揺らぎを考慮した線分の移動方向特定方法を説明する図である。
【図１７】分岐点特定方法を説明する図である。
【図１８】図７に示す図形解析システムに含まれるサーバの機能ブロック図である。
【図１９】図形解析処理のフローチャートである。
【図２０】図形解析処理のフローチャートである。
【図２１】方眼用紙上のグリッドエリア及び図形選択エリアを示す図である。
【符号の説明】
【０１２６】
２…ネットワーク
３…方眼用紙
５…サーバ
１０…電子ペン
１１…プロセッサ
１２…メモリ
１３…データ通信ユニット
１４…バッテリー
２５…端末装置
２６…問い合わせサーバ
２７…サービスサーバ
１００…図形解析システム
【特許請求の範囲】
【請求項１】
電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理する処理装置において、
前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段と、
前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段と、
前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段と、
前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段と、
前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段と、
前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段と、
前記分岐点に基づいて、前記図形を特定する図形特定手段と、
前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段と、を備えることを特徴とする処理装置。
【請求項２】
前記処理装置は、
前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の開始点を特定する開始点特定手段と、
前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の終了点を特定する終了点特定手段と、をさらに備え、
前記精緻化データ生成手段は、前記分岐点、前記開始点及び前記終了点の位置情報と、前記時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成することを特徴とする請求項１に記載の処理装置。
【請求項３】
グループ化されたストローク中の分岐点の数を算出する分岐点数算出手段をさらに備え、
前記図形特定手段は、グループ化されたストローク中の分岐点の数に基づいて、前記図形を特定することを特徴とする請求項１又は２に記載の処理装置。
【請求項４】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記図形を直線であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記開始点及び前記終了点の位置情報に基づいて、直線に精緻化した精緻化データを生成することを特徴とする請求項３に記載の処理装置。
【請求項５】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記図形を三角形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、三角形に精緻化した精緻化データを生成することを特徴とする請求項３又は４に記載の処理装置。
【請求項６】
前記帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアを有しており、
前記処理装置は、
前記前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づく線分の移動方向が、Ｘ軸又はＹ軸のいずれかと平行であるか否かを判定する軸判定手段をさらに備え、
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記図形を正方形又は長方形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、正方形又は長方形に精緻化した精緻化データを生成することを特徴とする３乃至５のいずれか一項に記載の処理装置。
【請求項７】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記図形をひし形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成することを特徴とする請求項６に記載の処理装置。
【請求項８】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が４以上である場合、前記図形を円であると特定し、
前記処理装置は、
前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、前記円の直径を算出する直径算出手段をさらに備え、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３以上である場合、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した前記直径とに基づいて、円に精緻化した精緻化データを生成することを特徴とする請求項７に記載の処理装置。
【請求項９】
前記処理装置は、
円と、ひし形とを判別するための特定領域において、グループ化されたストロークの出現頻度が高いか低いかを判定する特定領域判定手段をさらに備え、
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記図形をひし形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成することを特徴とする６乃至８のいずれか一項に記載の処理装置。
【請求項１０】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記図形を円であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した直径とに基づいて、円に精緻化した精緻化データを生成することを特徴とする請求項９に記載の処理装置。
【請求項１１】
前記帳票は、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアを有しており、
前記処理装置は、
前記選択エリアに記入された記入情報に基づいて、選択された図形の種類を特定する図形種類特定手段をさらに備え、
前記図形特定手段は、選択された図形の種類と、前記分岐点とに基づいて、前記図形を特定することを特徴とする請求項１乃至１０のいずれか一項に記載の処理装置。
【請求項１２】
電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理するコンピュータにより実行されるプログラムであって、
前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段、
前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段、
前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段、
前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段、
前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段、
前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段、
前記分岐点に基づいて、前記図形を特定する図形特定手段、
前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段、として前記コンピュータを機能させることを特徴とするプログラム。
【請求項１３】
インクペンユニット及び光学的にドットパターンを読み取る読取ユニットを備える電子ペンにより記入される電子ペン用帳票であって、
前記電子ペン用帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアと、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアとを有することを特徴とする電子ペン用帳票。
【請求項１】
電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理する処理装置において、
前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段と、
前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段と、
前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段と、
前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段と、
前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段と、
前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段と、
前記分岐点に基づいて、前記図形を特定する図形特定手段と、
前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段と、を備えることを特徴とする処理装置。
【請求項２】
前記処理装置は、
前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の開始点を特定する開始点特定手段と、
前記記入情報に含まれる前記時間情報及び前記位置情報に基づいて、グループ化されたストロークの中の終了点を特定する終了点特定手段と、をさらに備え、
前記精緻化データ生成手段は、前記分岐点、前記開始点及び前記終了点の位置情報と、前記時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成することを特徴とする請求項１に記載の処理装置。
【請求項３】
グループ化されたストローク中の分岐点の数を算出する分岐点数算出手段をさらに備え、
前記図形特定手段は、グループ化されたストローク中の分岐点の数に基づいて、前記図形を特定することを特徴とする請求項１又は２に記載の処理装置。
【請求項４】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記図形を直線であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が０である場合に、前記開始点及び前記終了点の位置情報に基づいて、直線に精緻化した精緻化データを生成することを特徴とする請求項３に記載の処理装置。
【請求項５】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記図形を三角形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が２である場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、三角形に精緻化した精緻化データを生成することを特徴とする請求項３又は４に記載の処理装置。
【請求項６】
前記帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアを有しており、
前記処理装置は、
前記前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づく線分の移動方向が、Ｘ軸又はＹ軸のいずれかと平行であるか否かを判定する軸判定手段をさらに備え、
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記図形を正方形又は長方形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行であると判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、正方形又は長方形に精緻化した精緻化データを生成することを特徴とする３乃至５のいずれか一項に記載の処理装置。
【請求項７】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記図形をひし形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であって、且つ、前記軸判定手段が平行ではないと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成することを特徴とする請求項６に記載の処理装置。
【請求項８】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が４以上である場合、前記図形を円であると特定し、
前記処理装置は、
前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、前記円の直径を算出する直径算出手段をさらに備え、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３以上である場合、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した前記直径とに基づいて、円に精緻化した精緻化データを生成することを特徴とする請求項７に記載の処理装置。
【請求項９】
前記処理装置は、
円と、ひし形とを判別するための特定領域において、グループ化されたストロークの出現頻度が高いか低いかを判定する特定領域判定手段をさらに備え、
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記図形をひし形であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が低いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報とに基づいて、ひし形に精緻化した精緻化データを生成することを特徴とする６乃至８のいずれか一項に記載の処理装置。
【請求項１０】
前記図形特定手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記図形を円であると特定し、
前記精緻化データ生成手段は、グループ化されたストローク中の分岐点の数が３であり、前記軸判定手段が平行ではないと判定し、且つ、前記特定領域判定手段がストロークの出現頻度が高いと判定した場合に、前記開始点、前記終了点及び前記分岐点の位置情報と、前記時間情報と、算出した直径とに基づいて、円に精緻化した精緻化データを生成することを特徴とする請求項９に記載の処理装置。
【請求項１１】
前記帳票は、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアを有しており、
前記処理装置は、
前記選択エリアに記入された記入情報に基づいて、選択された図形の種類を特定する図形種類特定手段をさらに備え、
前記図形特定手段は、選択された図形の種類と、前記分岐点とに基づいて、前記図形を特定することを特徴とする請求項１乃至１０のいずれか一項に記載の処理装置。
【請求項１２】
電子ペンにより認識可能なドットパターンが印刷された電子ペン用帳票に記入された情報を処理するコンピュータにより実行されるプログラムであって、
前記電子ペン用帳票に記入された１つ以上のストロークを記入情報として取得する記入情報取得手段、
前記記入情報に含まれる時間情報に基づいて、１つの図形に対応する１つ以上のストロークをグループ化するグループ化手段、
前記記入情報に含まれるストロークから、所定の長さの線分を抽出する線分抽出手段、
前記時間情報に基づいて、前記線分から、一定時間内におけるベクトルを抽出するベクトル抽出手段、
前記ベクトルの移動方向に基づいて、前記線分の移動方向を特定する移動方向特定手段、
前記線分の移動方向に基づいて、グループ化されたストローク中の分岐点を特定する分岐点特定手段、
前記分岐点に基づいて、前記図形を特定する図形特定手段、
前記分岐点のドットパターン上の位置情報と、グループ化されたストロークのデータと、時間情報とに基づいて、特定した前記図形に精緻化した精緻化データを生成する精緻化データ生成手段、として前記コンピュータを機能させることを特徴とするプログラム。
【請求項１３】
インクペンユニット及び光学的にドットパターンを読み取る読取ユニットを備える電子ペンにより記入される電子ペン用帳票であって、
前記電子ペン用帳票は、Ｘ軸と平行する横線及びＹ軸と平行する縦線から構成され、前記電子ペンによって図形が記入されるグリッドエリアと、前記図形の種類を選択するために、前記電子ペンによってチェックマークが記入される選択エリアとを有することを特徴とする電子ペン用帳票。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【公開番号】特開２００７−１８８１５９（Ｐ２００７−１８８１５９Ａ）
【公開日】平成１９年７月２６日（２００７．７．２６）
【国際特許分類】
【出願番号】特願２００６−３７０１（Ｐ２００６−３７０１）
【出願日】平成１８年１月１１日（２００６．１．１１）
【出願人】（０００００２８９７）大日本印刷株式会社 (14,506)
【Ｆターム（参考）】
【公開日】平成１９年７月２６日（２００７．７．２６）
【国際特許分類】
【出願日】平成１８年１月１１日（２００６．１．１１）
【出願人】（０００００２８９７）大日本印刷株式会社 (14,506)
【Ｆターム（参考）】
[ Back to top ]