画像処理システムおよび画像処理プログラム
【課題】操作者によって色付きペンを用いて意味を持たされた領域を有する用紙の解析ができるようにした画像処理システムを提供する。
【解決手段】画像処理システムは、画像入力手段が色付きペンにて追記された画像を入力し、追記抽出手段が前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出し、追記色判定手段が前記追記抽出手段によって抽出された領域の色を判定し、色毎領域分離手段が前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離し、追記位置算出手段が前記色毎領域分離手段によって分離された領域の位置を算出し、領域間関連判定手段が前記追記位置算出手段によって算出された領域の位置から領域間の関連を判定する。
【解決手段】画像処理システムは、画像入力手段が色付きペンにて追記された画像を入力し、追記抽出手段が前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出し、追記色判定手段が前記追記抽出手段によって抽出された領域の色を判定し、色毎領域分離手段が前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離し、追記位置算出手段が前記色毎領域分離手段によって分離された領域の位置を算出し、領域間関連判定手段が前記追記位置算出手段によって算出された領域の位置から領域間の関連を判定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理システムおよび画像処理プログラムに関する。
【背景技術】
【０００２】
調査のためにアンケートをとることはよく行われている。このアンケートの方法として、回答者がパソコン等の電子機器を用いるものもあるが、アンケート用紙に回答者がペンによって書き込む方法が、簡単でより広い層の回答者を得ることができるため、一般的に広く使用されている。
アンケート用紙に記入されたアンケート回答を集計する際、最も一般的には人間が手作業で集計を行っている。電子機器を用いて、自動化されている場合もあるが、自動集計するためには回答欄の位置情報が必要であり、下記のような方法がとられている。
（１）ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を用いたアンケート用紙作成システムを使用して、ボタンなどを貼り付けていく感覚（ドラッグ＆ドロップ）で、回答欄などをアンケート用紙に配置する方法
（２）あるいは、一般的な文書作成ソフトにてアンケート用紙を作成した後、所定のツールにて回答欄位置情報を取得する方法
しかし、上記（１）の方法では、アンケート用紙作成システムが許す形式（フォーマット）の文書しか作成することができず、アンケート内容の自由度が制限されてしまう。また、上記（２）の方法では、全ての回答欄の位置情報をほぼ正確に取得していく必要があり、回答欄の個数が多いと、非常に作業が煩雑になり、その作業効率を低下させている。
【０００３】
これらに関係する技術として、例えば、特許文献１には、原稿上の１つ以上の領域を指定し（マークし）、マークされた色に対応して画像処理内容を決定し、指定された領域に対し決定された画像処理を行うことが記載されている。
また、例えば、特許文献２には、原稿中の所定マークに基づいて目的のエリアを検出し、そのエリア内の原稿種類を判定し、その判定結果に従って、その検出エリアに対して他のエリアと異なる処理を行うことが記載されている。
例えば、特許文献３には、読取範囲が記入された範囲指定用原稿を読み取って得られた画像データ中の読取範囲を認識する読取範囲認識手段と、読取範囲認識手段が認識した読取範囲を読み取って画像データを得る第２読取手段とを備えたことを特徴とする技術が記載されている。
例えば、特許文献４には、紙原稿に対して切り出したい領域を線で囲んでスキャンさせ、線で囲んだ領域を切り出し保存することが記載されている。
【特許文献１】特開平０６−２７６３５８号公報
【特許文献２】特開平０７−０５８９６６号公報
【特許文献３】特開２０００−２７０１９６号公報
【特許文献４】特開２０００−１６５６５１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、このような背景技術の状況の中でなされたもので、操作者によって色付きペンを用いて意味を持たされた領域を有する用紙の解析ができるようにした画像処理システムおよび画像処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００５】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
［１］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記追記位置算出手段によって算出された領域の位置から領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００６】
［２］ 操作者によって追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００７】
［３］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００８】
［４］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００９】
［５］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【００１０】
［６］ 前記領域間関連判定手段は、前記追記色判定手段によって判定された領域の色をも用いて領域間の関連を判定する
ことを特徴とする［１］、［３］または［５］記載の画像処理システム。
【００１１】
［７］ 前記追記抽出手段は、色、領域の形状、線幅のうちいずれか１つ以上を用いて追記された領域を抽出する
ことを特徴とする［１］、［２］、［３］、［４］、［５］、［６］または［７］記載の画像処理システム。
【００１２】
［８］ コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の色を判定する追記色判定機能と、
前記追記色判定機能によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離機能と、
前記色毎領域分離機能によって分離された領域の位置を算出する追記位置算出機能と、
前記追記位置算出機能によって算出された領域の位置から領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【００１３】
［９］ コンピュータに、
操作者によって追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像の原本画像に関するデータを入力する原本画像入力機能と、
前記画像入力機能によって入力された画像および前記原本画像入力機能によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記原本画像入力機能によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【００１４】
［１０］ コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記画像入力機能によって入力された画像および前記追記抽出機能によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成機能と、
原本画像生成機能によって生成された原本に関する画像からレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を実現させることを特徴とする画像処理プログラム。
【発明の効果】
【００１５】
本発明にかかる画像処理システムおよび画像処理プログラムによれば、本発明の構成を有していない場合に比較して、操作者によって色付きペンを用いて意味を持たされた領域を有する用紙の解析ができる。特に、操作者は色付きペンを用いて指定することができるので、操作性、利便性がより一層向上する。
【発明を実施するための最良の形態】
【００１６】
以下、図面に基づき本発明の好適な各種の実施の形態を説明する。
図１から図７は本発明の第１の実施の形態を説明するものである。図１は、第１の実施の形態である画像処理システムの概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはハードウェア構成におけるモジュールのことだけでなく、プログラムにおけるモジュールも指す。それゆえ、本実施の形態は、システム、プログラムおよび方法の説明をも兼ねている。また、モジュールは機能にほぼ一対一に対応しているが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよい。逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散または並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続を含む。
また、システムとは、複数のコンピュータ、ハードウェア、装置等がネットワーク等で接続されて構成されるほか、１つのコンピュータによって実現される場合も含まれる。
【００１７】
本実施の形態の概要を説明する。
以下、画像処理システムとして、アンケート用紙のデータ取得領域の設定を行う画像システムを主に例示して説明する。つまり、アンケートは、予め定めた一定のアンケート用紙に回答者による手書きによる書き込み等がなされることによって行われるのが一般的である。回答済みのアンケート用紙を集計するのに、手書きが行われる領域（すなわち回答欄）を予め集計装置に設定する必要がある。これを操作者がそのアンケート用紙に色付きペンで印付け（マーキング）することによってできるようにしたものである。これによって、アンケートを集計する際に、手書き位置の抽出、すなわち回答の認識、取得、集計が電子的に可能となる。
すなわち、色付きペンで印付けされたアンケート用紙（紙文書）からその印付けされたところに関する情報（位置など）を取得する。そして、その情報を用いて、回答後の複数枚のアンケート用紙に書き込まれた情報を認識、取得、集計するための領域情報を設定するものである。
【００１８】
ここで、色付きペンとは、黒以外の色を有しており、黒色文字の上から塗ってもその下の文字が読めるような塗料を用いたペンであり、一般的にはマーカーペン、蛍光ペン、カラーペンとも呼ばれている。また、その塗料には蛍光塗料が含まれていてもよい。
【００１９】
画像処理システムは、図１に示すように、画像入力モジュール１０１、追記抽出モジュール１０２、追記色判定モジュール１０３、色毎領域分離モジュール１０４、追記位置算出モジュール１０５、回答欄関連判定モジュール１０６により構成されている。
マーキング原稿１０は、一般の文書作成ソフトを用いて作成、印刷されたアンケート用紙であり、その用紙に操作者によって色付きペンを用い、所定のルールに則り、回答欄などに印付けされたものである。ここでの印付けのルールの例としては、アンケート内の質問ごとに色を変え、１つの質問内の選択肢ごとにその色で色付けを行うというものである。詳細については、図４を用いて後述する。
【００２０】
画像入力モジュール１０１は、マーキング原稿１０を入力する。具体的には、スキャナ（スキャナ等のデータ読み取り部４１７）を用いて画像をデジタルデータとして入力する。また、ファックス等の通信によって外部から入力してもよい。また、少なくとも色付きペンのカラーを識別できるようなデジタルデータであり、一般的には、ＲＧＢ、ＹＣｒＣｂ等の色空間によって表現されており、各色８ビットの３プレーンで構成されている。
【００２１】
追記抽出モジュール１０２は、画像入力モジュール１０１によって入力されたマーキング原稿１０から色付きペンによって色付けされた領域を抽出する。
色付きペンによって色付けされた領域を抽出するには、色相情報または色度情報を用いて、黒以外の色がある領域の画像を抽出することによって行われる。予め色付きペンによる画像の色相または色度を測定し、その色相または色度に近い値を有している領域を色付きペンによって色付けされた領域として抽出することもできる。また、原本画像には色がない画像（白色、黒色のみで構成された画像）であるならば、何らかの色が付された領域を色付けされた領域として抽出するようにしてもよい。また、カラー画像であったとしても、淡い色が付された領域を色付きペンによって色付けされた領域として抽出するようにしてもよい。
【００２２】
さらに、色付きペンによって色付けされた領域は、手書きによって記載されたものであるので、色付き領域であってかつ周囲が曲線によって構成されている領域を追記された領域として抽出することもできる。色付きペンのペン先は一定の太さであるので、一定の太さによって構成されている領域、または色付き領域であってかつ一定の太さによって構成されている領域を色付けされた領域として抽出することもできる。
もちろんのことながら、色付けされた領域を抽出するのに、以上の条件を、１つのみ、または任意に複数組み合わせて用いてもよい。
【００２３】
追記色判定モジュール１０３は、追記抽出モジュール１０２によって抽出された領域の色を判定する。
また、色付きペンで色付けされたところは常に一定の色であるわけではない。色付きペンに濃淡がある場合が、操作者の筆圧の変化、筆記速度（すばやく動かした場合と止めた場合では濃淡に差がある）、スキャナのセンサによるノイズ等によって発生するからである。これらに対応するために、多少の色の相違があったとしても同一色による色付けと判断する。その際、その領域内で最も頻度の多い色を代表色とする。あるいは、平均色や、画素数で重み付けをした重み付け平均色を代表色としても良い。
【００２４】
色毎領域分離モジュール１０４は、追記色判定モジュール１０３によって判定された領域の色を用いて色毎に領域を分離する。追記色判定モジュール１０３によって、色付けされた領域の各々の色が判明している。同一色の領域は、色付けルールに沿って、１つの質問における選択肢群であると判断する。ここでも、領域の色は、多少の色の相違があったとしても同一色による色付けと判断する。
【００２５】
追記位置算出モジュール１０５は、色毎領域分離モジュール１０４によって分離された領域の位置を算出する。例えば、画像入力モジュール１０１によって入力された画像データの左上を原点（０，０）とし、２次元のＸＹ座標で表してもよく、また、領域間の相対的な位置関係によって位置を表現してもよい。
【００２６】
回答欄関連判定モジュール１０６は、追記位置算出モジュール１０５によって算出された領域の位置から領域間の関連を判定する。追記位置算出モジュール１０５によって、各領域の位置が判明している。この領域間の位置関係を用いて、選択肢群を特定する。つまり、アンケートにおける質問内の選択肢の配置は規則的に並べられているものが多い。例えば、横一列、または近傍に集まって配置されている等である。これらを利用して、追記抽出モジュール１０２によって抽出された色付け領域（回答欄）間の関連を判定する。また、追記色判定モジュール１０３によって判定された領域の色をも判定の条件として加えて領域間の関連を判定するようにしてもよい。つまり、同一色は、同一の質問に対しての選択肢であるので、これを利用して領域間の関係を判定するようにしてもよい。回答欄関連判定モジュール１０６による結果は、マーキング原稿１０の上から質問１の回答欄群の選択肢１の領域位置、同じく選択肢２の領域位置、質問２の回答欄群の選択肢１の領域位置、同じく選択肢２の領域位置等のようになる。
【００２７】
このようにして、色付け領域の位置、およびその関連が画像処理システムによって判明した。これによって、そのアンケート用紙を用いて手書きのアンケートが行われ、その結果である記入済みのアンケート用紙をスキャナで読み取ることによって集計することができる。つまり、色付け領域の位置が判明しているので、アンケートによって記入された回答欄の領域位置およびその周辺にある画像のみを解析して、そこに記入があるか否かを判断することが可能になる。単に、チェックをするような質問の場合には、その領域内にチェックの画像があるか否かを判断することによって集計することが可能になる。また、アンケートが単にチェックではなく、文字等を記入するものである場合は、その領域内部を切り出して収集するようにしてもよい。また、文字認識処理を行い、記入された回答をデータ処理してもよい。
また、１つの質問内に１つのチェックであり、複数のチェックは許さないような場合は、回答欄関連判定モジュール１０６によって回答欄群ごとに関連性が判明しているので、そのような検査をすることも可能である。
【００２８】
図２を参照して、第１の実施の形態の画像処理システムのハードウェア構成例について説明する。なお、第２、第３の実施の形態の画像処理システムも同様のハードウェア構成例である。図２に示す構成は、例えばパーソナルコンピュータ（ＰＣ）などによって構成される画像処理システムであり、スキャナ等のデータ読み取り部４１７と、プリンタなどのデータ出力部４１８を備えたハード構成例を示している。なお、このハードウェア構成は、他の実施の形態についても適用する。
【００２９】
ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）４０１は、上述の実施の形態において説明した各種のモジュール、すなわち、追記抽出モジュール１０２、追記色判定モジュール１０３、色毎領域分離モジュール１０４、追記位置算出モジュール１０５、回答欄関連判定モジュール１０６等の各モジュールの実行シーケンスを記述したコンピュータ・プログラムに従った処理を実行する制御部である。
【００３０】
ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）４０２は、ＣＰＵ４０１が使用するプログラムや演算パラメータ等を格納する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）４０３は、ＣＰＵ４０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を格納する。これらはＣＰＵバスなどから構成されるホストバス４０４により相互に接続されている。
【００３１】
ホストバス４０４は、ブリッジ４０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス４０６に接続されている。
【００３２】
キーボード４０８、マウス等のポインティングデバイス４０９は、操作者により操作される入力デバイスである。ディスプレイ４１０は、液晶表示装置またはＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）などから成り、各種情報をテキストやイメージ情報として表示する。
【００３３】
ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）４１１は、ハードディスクを内蔵し、ハードディスクを駆動し、ＣＰＵ４０１によって実行するプログラムや情報を記録または再生させる。ハードディスクは、入力されたマーキング原稿１０や回答欄関連判定モジュール１０６の結果データなどが格納される。さらに、その他の各種のデータ処理プログラム等、各種コンピュータ・プログラムが格納される。
【００３４】
ドライブ４１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体４１３に記録されているデータまたはプログラムを読み出して、そのデータまたはプログラムを、インタフェース４０７、外部バス４０６、ブリッジ４０５、およびホストバス４０４を介して接続されているＲＡＭ４０３に供給する。リムーバブル記録媒体４１３も、ハードディスクと同様のデータ記録領域として利用可能である。
【００３５】
接続ポート４１４は、外部接続機器４１５を接続するポートであり、ＵＳＢ、ＩＥＥＥ１３９４等の接続部を持つ。接続ポート４１４は、インタフェース４０７、および外部バス４０６、ブリッジ４０５、ホストバス４０４等を介してＣＰＵ４０１等に接続されている。通信部４１６は、ネットワークに接続され、外部とのデータ通信処理を実行する。データ読み取り部４１７は、例えばスキャナであり、ドキュメントの読み取り処理を実行する。データ出力部４１８は、例えばプリンタであり、ドキュメントデータの出力処理を実行する。
【００３６】
なお、図２に示す画像処理システムのハードウェア構成は、１つの構成例を示すものであり、本実施の形態の画像処理システムは、図２に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェアで構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図２に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、複写機、ファックス、複合機（多機能複写機とも呼ばれ、スキャナ、プリンタ、複写機、ファックス等の機能を有している）などに組み込まれていてもよい。
【００３７】
次に作用・働き（動作）を説明する。その概要は次の通りである。
（１）一般の文書作成ソフトを用いて作成されたアンケート用紙をプリントアウトする。
（２）操作者は、そのアンケート用紙に対して、色付きペンを用いて、所定のルールに則り、回答欄・回答語句などに印付けしていく。これによって、マーキング原稿１０が完成する。
（３）マーキングしたアンケート用紙を画像入力モジュール１０１（データ読み取り部４１７）によってスキャンし、追記抽出モジュール１０２によって色付きペンによって追記された領域を抽出する。
（４）追記色判定モジュール１０３によって、抽出された領域の色、つまり色付きペンの色を判定する。そして、色毎領域分離モジュール１０４によって、色毎に領域を分離する。
（５）そして、追記位置算出モジュール１０５、回答欄関連判定モジュール１０６によって、回答欄・回答語句の領域情報（位置情報、種別）を算出する。
（６）回答済みアンケートを集計する際には、算出された領域情報を用いて集計を行う。
【００３８】
図３を用いて、アンケート用紙（原本）の例について説明する。アンケート原本（画像）３００は、各ブース毎に説明等を行う展覧会におけるアンケート用紙である。ここでは、７つ（所属、職種、役職、今回のフェアの感想、そのコメント、印象に残ったブース番号、そのコメント）の質問により構成されている。記入方法として、丸をつけて選択するもの、数字を記載するもの、文章を記載するものがある。
アンケート原本（画像）３００は、一般的な文書作成ソフトを用いて作成されている。
【００３９】
図４を用いて、処理対象となるアンケート用紙に色付きペンで印付けした例について説明する。多色マーキング用紙４００は、アンケート原本（画像）３００に対して、色付きペンで印付けしたものであり、図１で説明したマーキング原稿１０である。ここでの印付けのルールとしては、アンケート内の質問ごと、つまり集計したい対象ごとに色を変えることが挙げられる。したがって、多色マーキング用紙４００は７色の色付きペンで色付けされている。具体的には、所属欄の研究所４０１ａ〜その他４０１ｅ、職種欄の研究４０２ａ〜その他４０２ｇ、役職欄の役員４０３ａ〜一般４０３ｆ、今回のフェアの感想欄の大変満足４０４ａ〜不満４０４ｅ、そのコメント欄のコメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂ、印象に残ったブース番号欄の印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅ、そのコメント欄のコメント４０７ａは、それぞれ異なる色で色付けが行われている。
そして、１つの質問内の選択肢ごとにその色で色付けを行うというものである。例えば、研究所４０１ａ、商品開発部４０１ｂ、商品製造部４０１ｃ、営業部４０１ｄ、その他４０１ｅは同一色で、それぞれの選択肢が区別できるように色付けされている。
このように、操作者は、意味を持たせたい領域を、紙の用紙に色付きペンを用いて指定することができるようになる。
【００４０】
この多色マーキング用紙４００を画像入力モジュール１０１（データ読み取り部４１７）により入力する。
画像入力モジュール１０１により入力された画像から色付けされた領域を、追記抽出モジュール１０２が抽出する。つまり、多色マーキング用紙４００内の研究所４０１ａ〜その他４０１ｅ、研究４０２ａ〜その他４０２ｇ、役員４０３ａ〜一般４０３ｆ、大変満足４０４ａ〜不満４０４ｅ、コメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂ、印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅ、コメント４０７ａを抽出する。
【００４１】
追記抽出モジュール１０２により抽出された領域の各々の色を、追記色判定モジュール１０３が判定する。つまり、多色マーキング用紙４００内の研究所４０１ａ〜その他４０１ｅ、研究４０２ａ〜その他４０２ｇ、役員４０３ａ〜一般４０３ｆ、大変満足４０４ａ〜不満４０４ｅ、コメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂ、印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅ、コメント４０７ａごとに付けられた領域毎の色、例えば代表色を判定する。
【００４２】
追記色判定モジュール１０３により判定された色毎の色付け領域を、色毎領域分離モジュール１０４が分離する。つまり、多色マーキング用紙４００内の研究所４０１ａ〜その他４０１ｅそれぞれに付けられた色を同色と判定し、１つの群として、研究４０２ａ〜その他４０２ｇを同様に１つの群、役員４０３ａ〜一般４０３ｆを同様に１つの群、大変満足４０４ａ〜不満４０４ｅを同様に１つの群、コメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂを同様に１つの群、印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅを同様に１つの群、コメント４０７ａを同様に１つの群としてそれぞれ分離する。
【００４３】
色毎領域分離モジュール１０４により分離された色付け領域の位置を、追記位置算出モジュール１０５が算出する。算出結果はＲＡＭ４０３、ＨＤＤ４１１に格納する。そのデータ構造は、図７で示す解析結果テーブル７００の構造である。つまり、抽出した色付き領域毎に番号を割り当て、その番号を解析結果テーブル７００内のＮｏ．欄７０１に格納する。この番号によって、多色マーキング用紙４００内の色付き領域が一意に識別できる。色付き領域の位置は、左上のｘ座標、左上のｙ座標、幅（ｗ）、高さ（ｈ）により特定される。それぞれ解析結果テーブル７００内のｘ欄７０２、ｙ欄７０３、ｗ欄７０４、ｈ欄７０５に格納する。また、追記色判定モジュール１０３によって判定された領域の色を解析結果テーブル７００内の色欄７０６に格納する。
【００４４】
追記位置算出モジュール１０５により算出された領域の位置から回答欄の関連性を、回答欄関連判定モジュール１０６が判定する。１つの質問に対する選択肢群は、横一列に並んでいる、近辺に位置している等の性質があるので、解析結果テーブル７００内のｘ欄７０２〜ｈ欄７０５を用いて、その性質に合致する領域を１つの選択肢群として関連付ける。また、１つの質問に対する選択肢群は、同一色によって色付けされているので、解析結果テーブル７００内の色欄７０６を用いて、同一色の領域を１つの選択肢群として関連付けるようにしてもよい。
そして、１つの選択肢群として関連付けられた領域に対して、質問１に対する回答、質問２に対する回答等のように区別して、解析結果テーブル７００内のレイアウト構成欄７０７に格納する。これによって、より領域の意味が明確となる。
【００４５】
図８、図９は第２の実施の形態を示している。
本実施の形態では、第１の実施の形態と異なり、マーキング原稿１０のほかに原本原稿／ファイル２０を用いてアンケート用紙のレイアウト構造を解析したものを利用する画像処理システムである。そして、黒色のペンまたは１色の色付きペンで全ての領域に対して色付け（黒色ペンで加筆したものもここでは色付けと称する）を行ったマーキング原稿１０を対象としたものを図８に示し、複数色の色付きペンで色付けを行ったマーキング原稿１０を対象としたものを図９に示す。原本画像を用いてレイアウト解析して、そのレイアウト解析の結果とともに領域間の関連性を判定するので、より正確な判定ができるようになる。さらに、原本のアンケート用紙がカラーであっても対応できるようになる。
【００４６】
第２の実施の形態である画像処理システムは、図８に示すように、第１画像入力モジュール２０１、追記抽出モジュール２０２、追記位置算出モジュール２０５、第２画像入力モジュール２０６、レイアウト解析モジュール２０７、回答欄関連判定モジュール２０８により構成されている。
マーキング原稿１０は、図６に示すように黒色のペンまたは１色の色付きペンで色付けが行われているものである。つまり、１色マーキング用紙６００内の研究所６０１ａ〜その他６０１ｅ、研究６０２ａ〜その他６０２ｇ、役員６０３ａ〜一般６０３ｆ、大変満足６０４ａ〜不満６０４ｅ、コメント欄左かっこ６０５ａ〜コメント欄右かっこ６０５ｂ、印象に残ったブース番号６０６ａ〜印象に残ったブース番号６０６ｅ、コメント６０７ａは、１色で色付けが行われている。
原本原稿／ファイル２０は、色付けが行われていないアンケート用紙（図３参照）、つまり原本原稿である。また、文書作成ソフトによって作成された電子データであってもよい。
【００４７】
第１画像入力モジュール２０１は、図１の画像入力モジュール１０１と同様である。
第２画像入力モジュール２０６は、原本原稿／ファイル２０を入力する。具体的には、スキャナ（データ読み取り部４１７）を用いて画像をデジタルデータとして入力する。また、ファックス等による通信によって外部から入力してもよい。また、原本原稿／ファイル２０が文書作成ソフトによって作成された電子データである場合は、ＨＤＤ４１１、リムーバブル記録媒体４１３に記憶された電子データを読み取る、または外部接続機器４１５、通信部４１６によって外部から送付されてきた電子データを受信等するものである。また、黒色のペンにより色付けが行われている場合は、カラースキャナでなく、白黒スキャナであってもよい。
【００４８】
追記抽出モジュール２０２は、第１画像入力モジュール２０１によって入力されたマーキング原稿１０と、第２画像入力モジュール２０６によって入力された原本原稿／ファイル２０から黒色のペンまたは色付きペンによって色付けされた領域を抽出する。つまり、第１画像入力モジュール２０１によって入力されたマーキング原稿１０と第２画像入力モジュール２０６によって入力された原本原稿／ファイル２０との差分領域を抽出することによって、色付け領域を抽出してもよい。これによって、第１の実施の形態よりも、より正確に色付け領域を抽出することが可能となる。
追記位置算出モジュール２０５は、第１の実施の形態の追記位置算出モジュール１０５と同様に、各々の領域の位置を算出する。ここでは、第１の実施の形態と異なり、マーキング原稿１０は１色のみで色付けされているので、解析結果テーブル７００の色欄７０６は不要である。
【００４９】
レイアウト解析モジュール２０７は、第２画像入力モジュール２０６によってスキャン入力された原本原稿／ファイル２０からレイアウトを解析する。図５を用いて説明する。一定の大きさを持つ黒画素の塊を１文字とし、その文字の一定距離内にある文字を連結することによって単語として抽出する。これによって、図５のレイアウト解析結果５００内の研究所５０１ａ〜その他５０１ｅ、研究５０２ａ〜その他５０２ｇ、役員５０３ａ〜一般５０３ｆを各々の領域として抽出できる。そして、黒画素の連結した塊で一定以上の大きさのものは、選択肢が数直線状に並んでいるものとして抽出する。これによって、レイアウト解析結果５００内の今回のフェアの感想５０４ａが抽出できる。さらに線で構成されているものという条件を付加してもよい。また、黒枠に囲まれている一定面積以上の領域があるものは、数字等の記入欄として抽出する。これによって、レイアウト解析結果５００内のコメント５０５ａ、印象に残ったブース番号５０６ａ、コメント５０７ａが抽出できる。もちろんのことながら、その位置も抽出する。
また、原本原稿／ファイル２０は文書作成ソフトによって作成された電子データでもよいが、その場合はどの領域がどの質問の選択肢であるかを正確に把握できる。特に、文書内にタグ情報が埋め込まれているものは、そのタグ情報を用いることによってレイアウト解析が可能である。
【００５０】
回答欄関連判定モジュール２０８は、追記位置算出モジュール２０５によって算出された色付け領域の位置およびレイアウト解析モジュール２０７によって解析されたレイアウトから領域間の関連を判定する。つまり、研究所６０１ａは研究所５０１ａに、研究６０２ａは研究５０２ａに、役員６０３ａは役員５０３ａに対応しており、第１の実施の形態と同様に、研究所６０１ａ〜その他６０１ｅは選択肢群として関連付ける。また、大変満足６０４ａは今回のフェアの感想５０４ａ内の１つの選択肢として、コメント欄左かっこ６０５ａはコメント５０５ａの枠として、印象に残ったブース番号６０６ａは印象に残ったブース番号５０６ａの記入欄として、コメント６０７ａはコメント５０７ａとして、それぞれ関連付ける。
【００５１】
また、第２の実施の形態である画像処理システムは、図９に示すように、第１画像入力モジュール２０１、追記抽出モジュール２０２、追記色判定モジュール２０３、色毎領域分離モジュール２０４、追記位置算出モジュール２０５、第２画像入力モジュール２０６、レイアウト解析モジュール２０７、回答欄関連判定モジュール２０８により構成されていてもよい。図８の画像処理システムと異なるのは、追記色判定モジュール２０３、色毎領域分離モジュール２０４を付加した点である。つまり、この付加したモジュールによって、第１の実施の形態と同様に、マーキング原稿１０が複数色の色付きペンで色付けされていた場合には、さらに高精度に対応できるようになっている。
【００５２】
マーキング原稿１０は、第１の実施の形態と同様に、複数色の色付きペンで色付けが行われており、同じルールで色付けが行われている。
原本原稿／ファイル２０、第１画像入力モジュール２０１、追記抽出モジュール２０２、第２画像入力モジュール２０６、レイアウト解析モジュール２０７、回答欄関連判定モジュール２０８は、図８を用いて説明したものと同様である。
追記色判定モジュール２０３は、第１の実施の形態と同様に、追記抽出モジュール２０２によって抽出された領域の色を判定する。
色毎領域分離モジュール２０４は、第１の実施の形態と同様に、追記色判定モジュール２０３によって判定された領域の色を用いて色毎に領域を分離する。
追記位置算出モジュール２０５は、第１の実施の形態と同様に、色毎領域分離モジュール２０４によって分離された領域の位置を算出する。
【００５３】
図１０、図１１は第３の実施の形態を示している。
本実施の形態では、前記の実施の形態と異なり、色付きペンで色付けされたアンケート用紙からレイアウトを解析し、そのレイアウト解析結果をも利用した画像処理システムである。そして、１色の色付きペンで全ての領域に対して色付けを行ったマーキング原稿１０を対象としたものを図１０に示し、複数色の色付きペンで色付けを行ったマーキング原稿１０を対象としたものを図１１に示す。原本のレイアウト解析を行うと、より正確な領域間の判定が可能となるが、必ずしも原本が存在するとは限らない。原本が存在しないような場合であっても、色付け画像から元の原本画像を生成することによって、原本画像のレイアウト解析を行うことができるようになる。
【００５４】
第３の実施の形態である画像処理システムは、図１０に示すように、画像入力モジュール３０１、追記抽出モジュール３０２、追記位置算出モジュール３０５、原本画像生成モジュール３０６、レイアウト解析モジュール３０７、回答欄関連判定モジュール３０８により構成されている。
マーキング原稿１０は、図６に示すように１色の色付きペンで色付けが行われているものである。
画像入力モジュール３０１は、図１の画像入力モジュール１０１と同様である。
追記抽出モジュール３０２は、図１の追記抽出モジュール１０２と同様である。
追記位置算出モジュール３０５は、図８の追記位置算出モジュール２０５と同様である。
【００５５】
原本画像生成モジュール３０６は、画像入力モジュール３０１によって入力された画像および追記抽出モジュール３０２によって抽出された領域に基づいて原本に関する画像を生成する。つまり、マーキング原稿１０はアンケート用紙の原本が白黒画像であり、色付きペンで色付けが行われているので、画像入力モジュール３０１によって入力された画像から追記抽出モジュール３０２によって抽出された領域を削除することによって原本画像を生成することができる。
レイアウト解析モジュール３０７は、図８のレイアウト解析モジュール２０７と同様である。つまり、原本画像生成モジュール３０６によって生成された原本画像からレイアウトを解析する。ただし、文書作成ソフトで作成された電子データの原本ということはないので、画像データからの解析を行う。
回答欄関連判定モジュール３０８は、図８の回答欄関連判定モジュール２０８と同様である。
【００５６】
また、第３の実施の形態である画像処理システムは、図１１に示すように、画像入力モジュール３０１、追記抽出モジュール３０２、追記色判定モジュール３０３、色毎領域分離モジュール３０４、追記位置算出モジュール３０５、原本画像生成モジュール３０６、レイアウト解析モジュール３０７、回答欄関連判定モジュール３０８により構成されていてもよい。図１０の画像処理システムと異なるのは、追記色判定モジュール３０３、色毎領域分離モジュール３０４を付加した点である。つまり、この付加したモジュールによって、第１の実施の形態と同様に、マーキング原稿１０が複数色の色付きペンで色付けされていた場合には、さらに高精度に対応できるようになっている。
【００５７】
マーキング原稿１０は、第１の実施の形態と同様に、複数色の色付きペンで色付けが行われており、同じルールで色付けが行われている。
画像入力モジュール３０１、追記抽出モジュール３０２、原本画像生成モジュール３０６、レイアウト解析モジュール３０７、回答欄関連判定モジュール３０８は、図１０を用いて説明したものと同様である。
追記色判定モジュール３０３は、第１の実施の形態と同様に、追記抽出モジュール３０２によって抽出された領域の色を判定する。
色毎領域分離モジュール３０４は、第１の実施の形態と同様に、追記色判定モジュール３０３によって判定された領域の色を用いて色毎に領域を分離する。
追記位置算出モジュール３０５は、第１の実施の形態と同様に、色毎領域分離モジュール３０４によって分離された領域の位置を算出する。
【００５８】
前記実施の形態においては、アンケート用紙のデータ取得領域の設定を行う画像システムを主に説明したが、他の用途に用いてもよい。例えば、学生に対して行うテストであって、そのテスト用紙の解答欄の設定を行ってもよい。
【００５９】
なお、説明したプログラムについては、記録媒体に格納することも可能であり、その場合は、例えば以下の発明としても把握することができる。
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の色を判定する追記色判定機能と、
前記追記色判定機能によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離機能と、
前記色毎領域分離機能によって分離された領域の位置を算出する追記位置算出機能と、
前記追記位置算出機能によって算出された領域の位置から領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【００６０】
コンピュータに、
操作者によって追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像の原本画像に関するデータを入力する原本画像入力機能と、
前記画像入力機能によって入力された画像および前記原本画像入力機能によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記原本画像入力機能によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【００６１】
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記画像入力機能によって入力された画像および前記追記抽出機能によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成機能と、
原本画像生成機能によって生成された原本に関する画像からレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を実現させることを特徴とする画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【００６２】
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去および書換可能な読出し専用メモリ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）等が含まれる。
そして、上記のプログラムまたはその一部は、上記記録媒体に記録して保存や流通等させることが可能である。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにはこれらの組合せ等の伝送媒体を用いて伝送することが可能であり、また、搬送波に乗せて搬送することも可能である。
さらに、上記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。
【図面の簡単な説明】
【００６３】
【図１】画像処理システムの構成例を示すブロック図である。
【図２】画像処理システムのハードウェア構成例について説明する図である。
【図３】アンケート用紙（原本）の例について説明する図である。
【図４】処理対象となるアンケート用紙に色付きペンでマーキングした例について説明する図である。
【図５】レイアウトの解析の例について説明する図である。
【図６】処理対象となるアンケート用紙に色付きペンでマーキングした例について説明する図である。
【図７】領域に関するデータ構造の例について説明する図である。
【図８】第２の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【図９】第２の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【図１０】第３の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【図１１】第３の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【符号の説明】
【００６４】
１０…マーキング原稿
２０…原本原稿／ファイル
１０１…画像入力モジュール
１０２…追記抽出モジュール
１０３…追記色判定モジュール
１０４…色毎領域分離モジュール
１０５…追記位置算出モジュール
１０６…回答欄関連判定モジュール
２０１…第１画像入力モジュール
２０２…追記抽出モジュール
２０３…追記色判定モジュール
２０４…色毎領域分離モジュール
２０５…追記位置算出モジュール
２０６…第２画像入力モジュール
２０７…レイアウト解析モジュール
２０８…回答欄関連判定モジュール
３００…アンケート原本（画像）
３０１…画像入力モジュール
３０２…追記抽出モジュール
３０３…追記色判定モジュール
３０４…色毎領域分離モジュール
３０５…追記位置算出モジュール
３０６…原本画像生成モジュール
３０７…レイアウト解析モジュール
３０８…回答欄関連判定モジュール
【技術分野】
【０００１】
本発明は、画像処理システムおよび画像処理プログラムに関する。
【背景技術】
【０００２】
調査のためにアンケートをとることはよく行われている。このアンケートの方法として、回答者がパソコン等の電子機器を用いるものもあるが、アンケート用紙に回答者がペンによって書き込む方法が、簡単でより広い層の回答者を得ることができるため、一般的に広く使用されている。
アンケート用紙に記入されたアンケート回答を集計する際、最も一般的には人間が手作業で集計を行っている。電子機器を用いて、自動化されている場合もあるが、自動集計するためには回答欄の位置情報が必要であり、下記のような方法がとられている。
（１）ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を用いたアンケート用紙作成システムを使用して、ボタンなどを貼り付けていく感覚（ドラッグ＆ドロップ）で、回答欄などをアンケート用紙に配置する方法
（２）あるいは、一般的な文書作成ソフトにてアンケート用紙を作成した後、所定のツールにて回答欄位置情報を取得する方法
しかし、上記（１）の方法では、アンケート用紙作成システムが許す形式（フォーマット）の文書しか作成することができず、アンケート内容の自由度が制限されてしまう。また、上記（２）の方法では、全ての回答欄の位置情報をほぼ正確に取得していく必要があり、回答欄の個数が多いと、非常に作業が煩雑になり、その作業効率を低下させている。
【０００３】
これらに関係する技術として、例えば、特許文献１には、原稿上の１つ以上の領域を指定し（マークし）、マークされた色に対応して画像処理内容を決定し、指定された領域に対し決定された画像処理を行うことが記載されている。
また、例えば、特許文献２には、原稿中の所定マークに基づいて目的のエリアを検出し、そのエリア内の原稿種類を判定し、その判定結果に従って、その検出エリアに対して他のエリアと異なる処理を行うことが記載されている。
例えば、特許文献３には、読取範囲が記入された範囲指定用原稿を読み取って得られた画像データ中の読取範囲を認識する読取範囲認識手段と、読取範囲認識手段が認識した読取範囲を読み取って画像データを得る第２読取手段とを備えたことを特徴とする技術が記載されている。
例えば、特許文献４には、紙原稿に対して切り出したい領域を線で囲んでスキャンさせ、線で囲んだ領域を切り出し保存することが記載されている。
【特許文献１】特開平０６−２７６３５８号公報
【特許文献２】特開平０７−０５８９６６号公報
【特許文献３】特開２０００−２７０１９６号公報
【特許文献４】特開２０００−１６５６５１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、このような背景技術の状況の中でなされたもので、操作者によって色付きペンを用いて意味を持たされた領域を有する用紙の解析ができるようにした画像処理システムおよび画像処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００５】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
［１］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記追記位置算出手段によって算出された領域の位置から領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００６】
［２］ 操作者によって追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００７】
［３］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００８】
［４］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【０００９】
［５］ 色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【００１０】
［６］ 前記領域間関連判定手段は、前記追記色判定手段によって判定された領域の色をも用いて領域間の関連を判定する
ことを特徴とする［１］、［３］または［５］記載の画像処理システム。
【００１１】
［７］ 前記追記抽出手段は、色、領域の形状、線幅のうちいずれか１つ以上を用いて追記された領域を抽出する
ことを特徴とする［１］、［２］、［３］、［４］、［５］、［６］または［７］記載の画像処理システム。
【００１２】
［８］ コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の色を判定する追記色判定機能と、
前記追記色判定機能によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離機能と、
前記色毎領域分離機能によって分離された領域の位置を算出する追記位置算出機能と、
前記追記位置算出機能によって算出された領域の位置から領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【００１３】
［９］ コンピュータに、
操作者によって追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像の原本画像に関するデータを入力する原本画像入力機能と、
前記画像入力機能によって入力された画像および前記原本画像入力機能によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記原本画像入力機能によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【００１４】
［１０］ コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記画像入力機能によって入力された画像および前記追記抽出機能によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成機能と、
原本画像生成機能によって生成された原本に関する画像からレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を実現させることを特徴とする画像処理プログラム。
【発明の効果】
【００１５】
本発明にかかる画像処理システムおよび画像処理プログラムによれば、本発明の構成を有していない場合に比較して、操作者によって色付きペンを用いて意味を持たされた領域を有する用紙の解析ができる。特に、操作者は色付きペンを用いて指定することができるので、操作性、利便性がより一層向上する。
【発明を実施するための最良の形態】
【００１６】
以下、図面に基づき本発明の好適な各種の実施の形態を説明する。
図１から図７は本発明の第１の実施の形態を説明するものである。図１は、第１の実施の形態である画像処理システムの概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはハードウェア構成におけるモジュールのことだけでなく、プログラムにおけるモジュールも指す。それゆえ、本実施の形態は、システム、プログラムおよび方法の説明をも兼ねている。また、モジュールは機能にほぼ一対一に対応しているが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよい。逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散または並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続を含む。
また、システムとは、複数のコンピュータ、ハードウェア、装置等がネットワーク等で接続されて構成されるほか、１つのコンピュータによって実現される場合も含まれる。
【００１７】
本実施の形態の概要を説明する。
以下、画像処理システムとして、アンケート用紙のデータ取得領域の設定を行う画像システムを主に例示して説明する。つまり、アンケートは、予め定めた一定のアンケート用紙に回答者による手書きによる書き込み等がなされることによって行われるのが一般的である。回答済みのアンケート用紙を集計するのに、手書きが行われる領域（すなわち回答欄）を予め集計装置に設定する必要がある。これを操作者がそのアンケート用紙に色付きペンで印付け（マーキング）することによってできるようにしたものである。これによって、アンケートを集計する際に、手書き位置の抽出、すなわち回答の認識、取得、集計が電子的に可能となる。
すなわち、色付きペンで印付けされたアンケート用紙（紙文書）からその印付けされたところに関する情報（位置など）を取得する。そして、その情報を用いて、回答後の複数枚のアンケート用紙に書き込まれた情報を認識、取得、集計するための領域情報を設定するものである。
【００１８】
ここで、色付きペンとは、黒以外の色を有しており、黒色文字の上から塗ってもその下の文字が読めるような塗料を用いたペンであり、一般的にはマーカーペン、蛍光ペン、カラーペンとも呼ばれている。また、その塗料には蛍光塗料が含まれていてもよい。
【００１９】
画像処理システムは、図１に示すように、画像入力モジュール１０１、追記抽出モジュール１０２、追記色判定モジュール１０３、色毎領域分離モジュール１０４、追記位置算出モジュール１０５、回答欄関連判定モジュール１０６により構成されている。
マーキング原稿１０は、一般の文書作成ソフトを用いて作成、印刷されたアンケート用紙であり、その用紙に操作者によって色付きペンを用い、所定のルールに則り、回答欄などに印付けされたものである。ここでの印付けのルールの例としては、アンケート内の質問ごとに色を変え、１つの質問内の選択肢ごとにその色で色付けを行うというものである。詳細については、図４を用いて後述する。
【００２０】
画像入力モジュール１０１は、マーキング原稿１０を入力する。具体的には、スキャナ（スキャナ等のデータ読み取り部４１７）を用いて画像をデジタルデータとして入力する。また、ファックス等の通信によって外部から入力してもよい。また、少なくとも色付きペンのカラーを識別できるようなデジタルデータであり、一般的には、ＲＧＢ、ＹＣｒＣｂ等の色空間によって表現されており、各色８ビットの３プレーンで構成されている。
【００２１】
追記抽出モジュール１０２は、画像入力モジュール１０１によって入力されたマーキング原稿１０から色付きペンによって色付けされた領域を抽出する。
色付きペンによって色付けされた領域を抽出するには、色相情報または色度情報を用いて、黒以外の色がある領域の画像を抽出することによって行われる。予め色付きペンによる画像の色相または色度を測定し、その色相または色度に近い値を有している領域を色付きペンによって色付けされた領域として抽出することもできる。また、原本画像には色がない画像（白色、黒色のみで構成された画像）であるならば、何らかの色が付された領域を色付けされた領域として抽出するようにしてもよい。また、カラー画像であったとしても、淡い色が付された領域を色付きペンによって色付けされた領域として抽出するようにしてもよい。
【００２２】
さらに、色付きペンによって色付けされた領域は、手書きによって記載されたものであるので、色付き領域であってかつ周囲が曲線によって構成されている領域を追記された領域として抽出することもできる。色付きペンのペン先は一定の太さであるので、一定の太さによって構成されている領域、または色付き領域であってかつ一定の太さによって構成されている領域を色付けされた領域として抽出することもできる。
もちろんのことながら、色付けされた領域を抽出するのに、以上の条件を、１つのみ、または任意に複数組み合わせて用いてもよい。
【００２３】
追記色判定モジュール１０３は、追記抽出モジュール１０２によって抽出された領域の色を判定する。
また、色付きペンで色付けされたところは常に一定の色であるわけではない。色付きペンに濃淡がある場合が、操作者の筆圧の変化、筆記速度（すばやく動かした場合と止めた場合では濃淡に差がある）、スキャナのセンサによるノイズ等によって発生するからである。これらに対応するために、多少の色の相違があったとしても同一色による色付けと判断する。その際、その領域内で最も頻度の多い色を代表色とする。あるいは、平均色や、画素数で重み付けをした重み付け平均色を代表色としても良い。
【００２４】
色毎領域分離モジュール１０４は、追記色判定モジュール１０３によって判定された領域の色を用いて色毎に領域を分離する。追記色判定モジュール１０３によって、色付けされた領域の各々の色が判明している。同一色の領域は、色付けルールに沿って、１つの質問における選択肢群であると判断する。ここでも、領域の色は、多少の色の相違があったとしても同一色による色付けと判断する。
【００２５】
追記位置算出モジュール１０５は、色毎領域分離モジュール１０４によって分離された領域の位置を算出する。例えば、画像入力モジュール１０１によって入力された画像データの左上を原点（０，０）とし、２次元のＸＹ座標で表してもよく、また、領域間の相対的な位置関係によって位置を表現してもよい。
【００２６】
回答欄関連判定モジュール１０６は、追記位置算出モジュール１０５によって算出された領域の位置から領域間の関連を判定する。追記位置算出モジュール１０５によって、各領域の位置が判明している。この領域間の位置関係を用いて、選択肢群を特定する。つまり、アンケートにおける質問内の選択肢の配置は規則的に並べられているものが多い。例えば、横一列、または近傍に集まって配置されている等である。これらを利用して、追記抽出モジュール１０２によって抽出された色付け領域（回答欄）間の関連を判定する。また、追記色判定モジュール１０３によって判定された領域の色をも判定の条件として加えて領域間の関連を判定するようにしてもよい。つまり、同一色は、同一の質問に対しての選択肢であるので、これを利用して領域間の関係を判定するようにしてもよい。回答欄関連判定モジュール１０６による結果は、マーキング原稿１０の上から質問１の回答欄群の選択肢１の領域位置、同じく選択肢２の領域位置、質問２の回答欄群の選択肢１の領域位置、同じく選択肢２の領域位置等のようになる。
【００２７】
このようにして、色付け領域の位置、およびその関連が画像処理システムによって判明した。これによって、そのアンケート用紙を用いて手書きのアンケートが行われ、その結果である記入済みのアンケート用紙をスキャナで読み取ることによって集計することができる。つまり、色付け領域の位置が判明しているので、アンケートによって記入された回答欄の領域位置およびその周辺にある画像のみを解析して、そこに記入があるか否かを判断することが可能になる。単に、チェックをするような質問の場合には、その領域内にチェックの画像があるか否かを判断することによって集計することが可能になる。また、アンケートが単にチェックではなく、文字等を記入するものである場合は、その領域内部を切り出して収集するようにしてもよい。また、文字認識処理を行い、記入された回答をデータ処理してもよい。
また、１つの質問内に１つのチェックであり、複数のチェックは許さないような場合は、回答欄関連判定モジュール１０６によって回答欄群ごとに関連性が判明しているので、そのような検査をすることも可能である。
【００２８】
図２を参照して、第１の実施の形態の画像処理システムのハードウェア構成例について説明する。なお、第２、第３の実施の形態の画像処理システムも同様のハードウェア構成例である。図２に示す構成は、例えばパーソナルコンピュータ（ＰＣ）などによって構成される画像処理システムであり、スキャナ等のデータ読み取り部４１７と、プリンタなどのデータ出力部４１８を備えたハード構成例を示している。なお、このハードウェア構成は、他の実施の形態についても適用する。
【００２９】
ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）４０１は、上述の実施の形態において説明した各種のモジュール、すなわち、追記抽出モジュール１０２、追記色判定モジュール１０３、色毎領域分離モジュール１０４、追記位置算出モジュール１０５、回答欄関連判定モジュール１０６等の各モジュールの実行シーケンスを記述したコンピュータ・プログラムに従った処理を実行する制御部である。
【００３０】
ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）４０２は、ＣＰＵ４０１が使用するプログラムや演算パラメータ等を格納する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）４０３は、ＣＰＵ４０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を格納する。これらはＣＰＵバスなどから構成されるホストバス４０４により相互に接続されている。
【００３１】
ホストバス４０４は、ブリッジ４０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス４０６に接続されている。
【００３２】
キーボード４０８、マウス等のポインティングデバイス４０９は、操作者により操作される入力デバイスである。ディスプレイ４１０は、液晶表示装置またはＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）などから成り、各種情報をテキストやイメージ情報として表示する。
【００３３】
ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）４１１は、ハードディスクを内蔵し、ハードディスクを駆動し、ＣＰＵ４０１によって実行するプログラムや情報を記録または再生させる。ハードディスクは、入力されたマーキング原稿１０や回答欄関連判定モジュール１０６の結果データなどが格納される。さらに、その他の各種のデータ処理プログラム等、各種コンピュータ・プログラムが格納される。
【００３４】
ドライブ４１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体４１３に記録されているデータまたはプログラムを読み出して、そのデータまたはプログラムを、インタフェース４０７、外部バス４０６、ブリッジ４０５、およびホストバス４０４を介して接続されているＲＡＭ４０３に供給する。リムーバブル記録媒体４１３も、ハードディスクと同様のデータ記録領域として利用可能である。
【００３５】
接続ポート４１４は、外部接続機器４１５を接続するポートであり、ＵＳＢ、ＩＥＥＥ１３９４等の接続部を持つ。接続ポート４１４は、インタフェース４０７、および外部バス４０６、ブリッジ４０５、ホストバス４０４等を介してＣＰＵ４０１等に接続されている。通信部４１６は、ネットワークに接続され、外部とのデータ通信処理を実行する。データ読み取り部４１７は、例えばスキャナであり、ドキュメントの読み取り処理を実行する。データ出力部４１８は、例えばプリンタであり、ドキュメントデータの出力処理を実行する。
【００３６】
なお、図２に示す画像処理システムのハードウェア構成は、１つの構成例を示すものであり、本実施の形態の画像処理システムは、図２に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェアで構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図２に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、複写機、ファックス、複合機（多機能複写機とも呼ばれ、スキャナ、プリンタ、複写機、ファックス等の機能を有している）などに組み込まれていてもよい。
【００３７】
次に作用・働き（動作）を説明する。その概要は次の通りである。
（１）一般の文書作成ソフトを用いて作成されたアンケート用紙をプリントアウトする。
（２）操作者は、そのアンケート用紙に対して、色付きペンを用いて、所定のルールに則り、回答欄・回答語句などに印付けしていく。これによって、マーキング原稿１０が完成する。
（３）マーキングしたアンケート用紙を画像入力モジュール１０１（データ読み取り部４１７）によってスキャンし、追記抽出モジュール１０２によって色付きペンによって追記された領域を抽出する。
（４）追記色判定モジュール１０３によって、抽出された領域の色、つまり色付きペンの色を判定する。そして、色毎領域分離モジュール１０４によって、色毎に領域を分離する。
（５）そして、追記位置算出モジュール１０５、回答欄関連判定モジュール１０６によって、回答欄・回答語句の領域情報（位置情報、種別）を算出する。
（６）回答済みアンケートを集計する際には、算出された領域情報を用いて集計を行う。
【００３８】
図３を用いて、アンケート用紙（原本）の例について説明する。アンケート原本（画像）３００は、各ブース毎に説明等を行う展覧会におけるアンケート用紙である。ここでは、７つ（所属、職種、役職、今回のフェアの感想、そのコメント、印象に残ったブース番号、そのコメント）の質問により構成されている。記入方法として、丸をつけて選択するもの、数字を記載するもの、文章を記載するものがある。
アンケート原本（画像）３００は、一般的な文書作成ソフトを用いて作成されている。
【００３９】
図４を用いて、処理対象となるアンケート用紙に色付きペンで印付けした例について説明する。多色マーキング用紙４００は、アンケート原本（画像）３００に対して、色付きペンで印付けしたものであり、図１で説明したマーキング原稿１０である。ここでの印付けのルールとしては、アンケート内の質問ごと、つまり集計したい対象ごとに色を変えることが挙げられる。したがって、多色マーキング用紙４００は７色の色付きペンで色付けされている。具体的には、所属欄の研究所４０１ａ〜その他４０１ｅ、職種欄の研究４０２ａ〜その他４０２ｇ、役職欄の役員４０３ａ〜一般４０３ｆ、今回のフェアの感想欄の大変満足４０４ａ〜不満４０４ｅ、そのコメント欄のコメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂ、印象に残ったブース番号欄の印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅ、そのコメント欄のコメント４０７ａは、それぞれ異なる色で色付けが行われている。
そして、１つの質問内の選択肢ごとにその色で色付けを行うというものである。例えば、研究所４０１ａ、商品開発部４０１ｂ、商品製造部４０１ｃ、営業部４０１ｄ、その他４０１ｅは同一色で、それぞれの選択肢が区別できるように色付けされている。
このように、操作者は、意味を持たせたい領域を、紙の用紙に色付きペンを用いて指定することができるようになる。
【００４０】
この多色マーキング用紙４００を画像入力モジュール１０１（データ読み取り部４１７）により入力する。
画像入力モジュール１０１により入力された画像から色付けされた領域を、追記抽出モジュール１０２が抽出する。つまり、多色マーキング用紙４００内の研究所４０１ａ〜その他４０１ｅ、研究４０２ａ〜その他４０２ｇ、役員４０３ａ〜一般４０３ｆ、大変満足４０４ａ〜不満４０４ｅ、コメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂ、印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅ、コメント４０７ａを抽出する。
【００４１】
追記抽出モジュール１０２により抽出された領域の各々の色を、追記色判定モジュール１０３が判定する。つまり、多色マーキング用紙４００内の研究所４０１ａ〜その他４０１ｅ、研究４０２ａ〜その他４０２ｇ、役員４０３ａ〜一般４０３ｆ、大変満足４０４ａ〜不満４０４ｅ、コメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂ、印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅ、コメント４０７ａごとに付けられた領域毎の色、例えば代表色を判定する。
【００４２】
追記色判定モジュール１０３により判定された色毎の色付け領域を、色毎領域分離モジュール１０４が分離する。つまり、多色マーキング用紙４００内の研究所４０１ａ〜その他４０１ｅそれぞれに付けられた色を同色と判定し、１つの群として、研究４０２ａ〜その他４０２ｇを同様に１つの群、役員４０３ａ〜一般４０３ｆを同様に１つの群、大変満足４０４ａ〜不満４０４ｅを同様に１つの群、コメント欄左かっこ４０５ａ〜コメント欄右かっこ４０５ｂを同様に１つの群、印象に残ったブース番号４０６ａ〜印象に残ったブース番号４０６ｅを同様に１つの群、コメント４０７ａを同様に１つの群としてそれぞれ分離する。
【００４３】
色毎領域分離モジュール１０４により分離された色付け領域の位置を、追記位置算出モジュール１０５が算出する。算出結果はＲＡＭ４０３、ＨＤＤ４１１に格納する。そのデータ構造は、図７で示す解析結果テーブル７００の構造である。つまり、抽出した色付き領域毎に番号を割り当て、その番号を解析結果テーブル７００内のＮｏ．欄７０１に格納する。この番号によって、多色マーキング用紙４００内の色付き領域が一意に識別できる。色付き領域の位置は、左上のｘ座標、左上のｙ座標、幅（ｗ）、高さ（ｈ）により特定される。それぞれ解析結果テーブル７００内のｘ欄７０２、ｙ欄７０３、ｗ欄７０４、ｈ欄７０５に格納する。また、追記色判定モジュール１０３によって判定された領域の色を解析結果テーブル７００内の色欄７０６に格納する。
【００４４】
追記位置算出モジュール１０５により算出された領域の位置から回答欄の関連性を、回答欄関連判定モジュール１０６が判定する。１つの質問に対する選択肢群は、横一列に並んでいる、近辺に位置している等の性質があるので、解析結果テーブル７００内のｘ欄７０２〜ｈ欄７０５を用いて、その性質に合致する領域を１つの選択肢群として関連付ける。また、１つの質問に対する選択肢群は、同一色によって色付けされているので、解析結果テーブル７００内の色欄７０６を用いて、同一色の領域を１つの選択肢群として関連付けるようにしてもよい。
そして、１つの選択肢群として関連付けられた領域に対して、質問１に対する回答、質問２に対する回答等のように区別して、解析結果テーブル７００内のレイアウト構成欄７０７に格納する。これによって、より領域の意味が明確となる。
【００４５】
図８、図９は第２の実施の形態を示している。
本実施の形態では、第１の実施の形態と異なり、マーキング原稿１０のほかに原本原稿／ファイル２０を用いてアンケート用紙のレイアウト構造を解析したものを利用する画像処理システムである。そして、黒色のペンまたは１色の色付きペンで全ての領域に対して色付け（黒色ペンで加筆したものもここでは色付けと称する）を行ったマーキング原稿１０を対象としたものを図８に示し、複数色の色付きペンで色付けを行ったマーキング原稿１０を対象としたものを図９に示す。原本画像を用いてレイアウト解析して、そのレイアウト解析の結果とともに領域間の関連性を判定するので、より正確な判定ができるようになる。さらに、原本のアンケート用紙がカラーであっても対応できるようになる。
【００４６】
第２の実施の形態である画像処理システムは、図８に示すように、第１画像入力モジュール２０１、追記抽出モジュール２０２、追記位置算出モジュール２０５、第２画像入力モジュール２０６、レイアウト解析モジュール２０７、回答欄関連判定モジュール２０８により構成されている。
マーキング原稿１０は、図６に示すように黒色のペンまたは１色の色付きペンで色付けが行われているものである。つまり、１色マーキング用紙６００内の研究所６０１ａ〜その他６０１ｅ、研究６０２ａ〜その他６０２ｇ、役員６０３ａ〜一般６０３ｆ、大変満足６０４ａ〜不満６０４ｅ、コメント欄左かっこ６０５ａ〜コメント欄右かっこ６０５ｂ、印象に残ったブース番号６０６ａ〜印象に残ったブース番号６０６ｅ、コメント６０７ａは、１色で色付けが行われている。
原本原稿／ファイル２０は、色付けが行われていないアンケート用紙（図３参照）、つまり原本原稿である。また、文書作成ソフトによって作成された電子データであってもよい。
【００４７】
第１画像入力モジュール２０１は、図１の画像入力モジュール１０１と同様である。
第２画像入力モジュール２０６は、原本原稿／ファイル２０を入力する。具体的には、スキャナ（データ読み取り部４１７）を用いて画像をデジタルデータとして入力する。また、ファックス等による通信によって外部から入力してもよい。また、原本原稿／ファイル２０が文書作成ソフトによって作成された電子データである場合は、ＨＤＤ４１１、リムーバブル記録媒体４１３に記憶された電子データを読み取る、または外部接続機器４１５、通信部４１６によって外部から送付されてきた電子データを受信等するものである。また、黒色のペンにより色付けが行われている場合は、カラースキャナでなく、白黒スキャナであってもよい。
【００４８】
追記抽出モジュール２０２は、第１画像入力モジュール２０１によって入力されたマーキング原稿１０と、第２画像入力モジュール２０６によって入力された原本原稿／ファイル２０から黒色のペンまたは色付きペンによって色付けされた領域を抽出する。つまり、第１画像入力モジュール２０１によって入力されたマーキング原稿１０と第２画像入力モジュール２０６によって入力された原本原稿／ファイル２０との差分領域を抽出することによって、色付け領域を抽出してもよい。これによって、第１の実施の形態よりも、より正確に色付け領域を抽出することが可能となる。
追記位置算出モジュール２０５は、第１の実施の形態の追記位置算出モジュール１０５と同様に、各々の領域の位置を算出する。ここでは、第１の実施の形態と異なり、マーキング原稿１０は１色のみで色付けされているので、解析結果テーブル７００の色欄７０６は不要である。
【００４９】
レイアウト解析モジュール２０７は、第２画像入力モジュール２０６によってスキャン入力された原本原稿／ファイル２０からレイアウトを解析する。図５を用いて説明する。一定の大きさを持つ黒画素の塊を１文字とし、その文字の一定距離内にある文字を連結することによって単語として抽出する。これによって、図５のレイアウト解析結果５００内の研究所５０１ａ〜その他５０１ｅ、研究５０２ａ〜その他５０２ｇ、役員５０３ａ〜一般５０３ｆを各々の領域として抽出できる。そして、黒画素の連結した塊で一定以上の大きさのものは、選択肢が数直線状に並んでいるものとして抽出する。これによって、レイアウト解析結果５００内の今回のフェアの感想５０４ａが抽出できる。さらに線で構成されているものという条件を付加してもよい。また、黒枠に囲まれている一定面積以上の領域があるものは、数字等の記入欄として抽出する。これによって、レイアウト解析結果５００内のコメント５０５ａ、印象に残ったブース番号５０６ａ、コメント５０７ａが抽出できる。もちろんのことながら、その位置も抽出する。
また、原本原稿／ファイル２０は文書作成ソフトによって作成された電子データでもよいが、その場合はどの領域がどの質問の選択肢であるかを正確に把握できる。特に、文書内にタグ情報が埋め込まれているものは、そのタグ情報を用いることによってレイアウト解析が可能である。
【００５０】
回答欄関連判定モジュール２０８は、追記位置算出モジュール２０５によって算出された色付け領域の位置およびレイアウト解析モジュール２０７によって解析されたレイアウトから領域間の関連を判定する。つまり、研究所６０１ａは研究所５０１ａに、研究６０２ａは研究５０２ａに、役員６０３ａは役員５０３ａに対応しており、第１の実施の形態と同様に、研究所６０１ａ〜その他６０１ｅは選択肢群として関連付ける。また、大変満足６０４ａは今回のフェアの感想５０４ａ内の１つの選択肢として、コメント欄左かっこ６０５ａはコメント５０５ａの枠として、印象に残ったブース番号６０６ａは印象に残ったブース番号５０６ａの記入欄として、コメント６０７ａはコメント５０７ａとして、それぞれ関連付ける。
【００５１】
また、第２の実施の形態である画像処理システムは、図９に示すように、第１画像入力モジュール２０１、追記抽出モジュール２０２、追記色判定モジュール２０３、色毎領域分離モジュール２０４、追記位置算出モジュール２０５、第２画像入力モジュール２０６、レイアウト解析モジュール２０７、回答欄関連判定モジュール２０８により構成されていてもよい。図８の画像処理システムと異なるのは、追記色判定モジュール２０３、色毎領域分離モジュール２０４を付加した点である。つまり、この付加したモジュールによって、第１の実施の形態と同様に、マーキング原稿１０が複数色の色付きペンで色付けされていた場合には、さらに高精度に対応できるようになっている。
【００５２】
マーキング原稿１０は、第１の実施の形態と同様に、複数色の色付きペンで色付けが行われており、同じルールで色付けが行われている。
原本原稿／ファイル２０、第１画像入力モジュール２０１、追記抽出モジュール２０２、第２画像入力モジュール２０６、レイアウト解析モジュール２０７、回答欄関連判定モジュール２０８は、図８を用いて説明したものと同様である。
追記色判定モジュール２０３は、第１の実施の形態と同様に、追記抽出モジュール２０２によって抽出された領域の色を判定する。
色毎領域分離モジュール２０４は、第１の実施の形態と同様に、追記色判定モジュール２０３によって判定された領域の色を用いて色毎に領域を分離する。
追記位置算出モジュール２０５は、第１の実施の形態と同様に、色毎領域分離モジュール２０４によって分離された領域の位置を算出する。
【００５３】
図１０、図１１は第３の実施の形態を示している。
本実施の形態では、前記の実施の形態と異なり、色付きペンで色付けされたアンケート用紙からレイアウトを解析し、そのレイアウト解析結果をも利用した画像処理システムである。そして、１色の色付きペンで全ての領域に対して色付けを行ったマーキング原稿１０を対象としたものを図１０に示し、複数色の色付きペンで色付けを行ったマーキング原稿１０を対象としたものを図１１に示す。原本のレイアウト解析を行うと、より正確な領域間の判定が可能となるが、必ずしも原本が存在するとは限らない。原本が存在しないような場合であっても、色付け画像から元の原本画像を生成することによって、原本画像のレイアウト解析を行うことができるようになる。
【００５４】
第３の実施の形態である画像処理システムは、図１０に示すように、画像入力モジュール３０１、追記抽出モジュール３０２、追記位置算出モジュール３０５、原本画像生成モジュール３０６、レイアウト解析モジュール３０７、回答欄関連判定モジュール３０８により構成されている。
マーキング原稿１０は、図６に示すように１色の色付きペンで色付けが行われているものである。
画像入力モジュール３０１は、図１の画像入力モジュール１０１と同様である。
追記抽出モジュール３０２は、図１の追記抽出モジュール１０２と同様である。
追記位置算出モジュール３０５は、図８の追記位置算出モジュール２０５と同様である。
【００５５】
原本画像生成モジュール３０６は、画像入力モジュール３０１によって入力された画像および追記抽出モジュール３０２によって抽出された領域に基づいて原本に関する画像を生成する。つまり、マーキング原稿１０はアンケート用紙の原本が白黒画像であり、色付きペンで色付けが行われているので、画像入力モジュール３０１によって入力された画像から追記抽出モジュール３０２によって抽出された領域を削除することによって原本画像を生成することができる。
レイアウト解析モジュール３０７は、図８のレイアウト解析モジュール２０７と同様である。つまり、原本画像生成モジュール３０６によって生成された原本画像からレイアウトを解析する。ただし、文書作成ソフトで作成された電子データの原本ということはないので、画像データからの解析を行う。
回答欄関連判定モジュール３０８は、図８の回答欄関連判定モジュール２０８と同様である。
【００５６】
また、第３の実施の形態である画像処理システムは、図１１に示すように、画像入力モジュール３０１、追記抽出モジュール３０２、追記色判定モジュール３０３、色毎領域分離モジュール３０４、追記位置算出モジュール３０５、原本画像生成モジュール３０６、レイアウト解析モジュール３０７、回答欄関連判定モジュール３０８により構成されていてもよい。図１０の画像処理システムと異なるのは、追記色判定モジュール３０３、色毎領域分離モジュール３０４を付加した点である。つまり、この付加したモジュールによって、第１の実施の形態と同様に、マーキング原稿１０が複数色の色付きペンで色付けされていた場合には、さらに高精度に対応できるようになっている。
【００５７】
マーキング原稿１０は、第１の実施の形態と同様に、複数色の色付きペンで色付けが行われており、同じルールで色付けが行われている。
画像入力モジュール３０１、追記抽出モジュール３０２、原本画像生成モジュール３０６、レイアウト解析モジュール３０７、回答欄関連判定モジュール３０８は、図１０を用いて説明したものと同様である。
追記色判定モジュール３０３は、第１の実施の形態と同様に、追記抽出モジュール３０２によって抽出された領域の色を判定する。
色毎領域分離モジュール３０４は、第１の実施の形態と同様に、追記色判定モジュール３０３によって判定された領域の色を用いて色毎に領域を分離する。
追記位置算出モジュール３０５は、第１の実施の形態と同様に、色毎領域分離モジュール３０４によって分離された領域の位置を算出する。
【００５８】
前記実施の形態においては、アンケート用紙のデータ取得領域の設定を行う画像システムを主に説明したが、他の用途に用いてもよい。例えば、学生に対して行うテストであって、そのテスト用紙の解答欄の設定を行ってもよい。
【００５９】
なお、説明したプログラムについては、記録媒体に格納することも可能であり、その場合は、例えば以下の発明としても把握することができる。
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の色を判定する追記色判定機能と、
前記追記色判定機能によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離機能と、
前記色毎領域分離機能によって分離された領域の位置を算出する追記位置算出機能と、
前記追記位置算出機能によって算出された領域の位置から領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【００６０】
コンピュータに、
操作者によって追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像の原本画像に関するデータを入力する原本画像入力機能と、
前記画像入力機能によって入力された画像および前記原本画像入力機能によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記原本画像入力機能によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【００６１】
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記画像入力機能によって入力された画像および前記追記抽出機能によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成機能と、
原本画像生成機能によって生成された原本に関する画像からレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を実現させることを特徴とする画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
【００６２】
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去および書換可能な読出し専用メモリ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）等が含まれる。
そして、上記のプログラムまたはその一部は、上記記録媒体に記録して保存や流通等させることが可能である。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにはこれらの組合せ等の伝送媒体を用いて伝送することが可能であり、また、搬送波に乗せて搬送することも可能である。
さらに、上記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。
【図面の簡単な説明】
【００６３】
【図１】画像処理システムの構成例を示すブロック図である。
【図２】画像処理システムのハードウェア構成例について説明する図である。
【図３】アンケート用紙（原本）の例について説明する図である。
【図４】処理対象となるアンケート用紙に色付きペンでマーキングした例について説明する図である。
【図５】レイアウトの解析の例について説明する図である。
【図６】処理対象となるアンケート用紙に色付きペンでマーキングした例について説明する図である。
【図７】領域に関するデータ構造の例について説明する図である。
【図８】第２の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【図９】第２の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【図１０】第３の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【図１１】第３の実施の形態に係る画像処理システムの構成例を示すブロック図である。
【符号の説明】
【００６４】
１０…マーキング原稿
２０…原本原稿／ファイル
１０１…画像入力モジュール
１０２…追記抽出モジュール
１０３…追記色判定モジュール
１０４…色毎領域分離モジュール
１０５…追記位置算出モジュール
１０６…回答欄関連判定モジュール
２０１…第１画像入力モジュール
２０２…追記抽出モジュール
２０３…追記色判定モジュール
２０４…色毎領域分離モジュール
２０５…追記位置算出モジュール
２０６…第２画像入力モジュール
２０７…レイアウト解析モジュール
２０８…回答欄関連判定モジュール
３００…アンケート原本（画像）
３０１…画像入力モジュール
３０２…追記抽出モジュール
３０３…追記色判定モジュール
３０４…色毎領域分離モジュール
３０５…追記位置算出モジュール
３０６…原本画像生成モジュール
３０７…レイアウト解析モジュール
３０８…回答欄関連判定モジュール
【特許請求の範囲】
【請求項１】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記追記位置算出手段によって算出された領域の位置から領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項２】
操作者によって追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項３】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項４】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項５】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項６】
前記領域間関連判定手段は、前記追記色判定手段によって判定された領域の色をも用いて領域間の関連を判定する
ことを特徴とする請求項１、３または５記載の画像処理システム。
【請求項７】
前記追記抽出手段は、色、領域の形状、線幅のうちいずれか１つ以上を用いて追記された領域を抽出する
ことを特徴とする請求項１、２、３、４、５、６または７記載の画像処理システム。
【請求項８】
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の色を判定する追記色判定機能と、
前記追記色判定機能によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離機能と、
前記色毎領域分離機能によって分離された領域の位置を算出する追記位置算出機能と、
前記追記位置算出機能によって算出された領域の位置から領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【請求項９】
コンピュータに、
操作者によって追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像の原本画像に関するデータを入力する原本画像入力機能と、
前記画像入力機能によって入力された画像および前記原本画像入力機能によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記原本画像入力機能によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【請求項１０】
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記画像入力機能によって入力された画像および前記追記抽出機能によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成機能と、
原本画像生成機能によって生成された原本に関する画像からレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を実現させることを特徴とする画像処理プログラム。
【請求項１】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記追記位置算出手段によって算出された領域の位置から領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項２】
操作者によって追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項３】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像の原本画像に関するデータを入力する原本画像入力手段と、
前記画像入力手段によって入力された画像および前記原本画像入力手段によって入力された原本画像に関するデータから色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記原本画像入力手段によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項４】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項５】
色付きペンにて追記された画像を入力する画像入力手段と、
前記画像入力手段によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出手段と、
前記追記抽出手段によって抽出された領域の色を判定する追記色判定手段と、
前記追記色判定手段によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離手段と、
前記色毎領域分離手段によって分離された領域の位置を算出する追記位置算出手段と、
前記画像入力手段によって入力された画像および前記追記抽出手段によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成手段と、
原本画像生成手段によって生成された原本に関する画像からレイアウトを解析するレイアウト解析手段と、
前記追記位置算出手段によって算出された領域の位置および前記レイアウト解析手段によって解析されたレイアウトから領域間の関連を判定する領域間関連判定手段
を具備することを特徴とする画像処理システム。
【請求項６】
前記領域間関連判定手段は、前記追記色判定手段によって判定された領域の色をも用いて領域間の関連を判定する
ことを特徴とする請求項１、３または５記載の画像処理システム。
【請求項７】
前記追記抽出手段は、色、領域の形状、線幅のうちいずれか１つ以上を用いて追記された領域を抽出する
ことを特徴とする請求項１、２、３、４、５、６または７記載の画像処理システム。
【請求項８】
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の色を判定する追記色判定機能と、
前記追記色判定機能によって判定された領域の色を用いて色毎に領域を分離する色毎領域分離機能と、
前記色毎領域分離機能によって分離された領域の位置を算出する追記位置算出機能と、
前記追記位置算出機能によって算出された領域の位置から領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【請求項９】
コンピュータに、
操作者によって追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像の原本画像に関するデータを入力する原本画像入力機能と、
前記画像入力機能によって入力された画像および前記原本画像入力機能によって入力された原本画像に関するデータから追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記原本画像入力機能によって入力された原本画像に関するデータからレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を具備することを特徴とする画像処理プログラム。
【請求項１０】
コンピュータに、
色付きペンにて追記された画像を入力する画像入力機能と、
前記画像入力機能によって入力された画像から色付きペンにて追記された領域を抽出する追記抽出機能と、
前記追記抽出機能によって抽出された領域の位置を算出する追記位置算出機能と、
前記画像入力機能によって入力された画像および前記追記抽出機能によって抽出された領域に基づいて原本に関する画像を生成する原本画像生成機能と、
原本画像生成機能によって生成された原本に関する画像からレイアウトを解析するレイアウト解析機能と、
前記追記位置算出機能によって算出された領域の位置および前記レイアウト解析機能によって解析されたレイアウトから領域間の関連を判定する領域間関連判定機能
を実現させることを特徴とする画像処理プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２００８−９７８５（Ｐ２００８−９７８５Ａ）
【公開日】平成２０年１月１７日（２００８．１．１７）
【国際特許分類】
【出願番号】特願２００６−１８０５３４（Ｐ２００６−１８０５３４）
【出願日】平成１８年６月３０日（２００６．６．３０）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２０年１月１７日（２００８．１．１７）
【国際特許分類】
【出願日】平成１８年６月３０日（２００６．６．３０）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]