面画像生成装置
【課題】簡易な構成で、検査対象物の面の状態を表わす画像を生成することができるようにする。
【解決手段】駆動部１２によって、水平面上で板状の検査対象物を移動させる。また、レーザ照射部１４によって、検査対象物の移動方向と直交するする方向を長さ方向とするレーザスリット光を、検査対象物に対して照射し、エリアカメラ１８によって、検査対象物からのレーザスリット光の反射光を含む領域を撮像する。画像処理部３２によって、複数の撮像画像の各々から、反射光を表わす画素ラインを抽出し、画素ラインの抽出結果の各々を撮像順に並べて合成することにより、検査対象物の面状態を表わすプレーン画像を生成する。
【解決手段】駆動部１２によって、水平面上で板状の検査対象物を移動させる。また、レーザ照射部１４によって、検査対象物の移動方向と直交するする方向を長さ方向とするレーザスリット光を、検査対象物に対して照射し、エリアカメラ１８によって、検査対象物からのレーザスリット光の反射光を含む領域を撮像する。画像処理部３２によって、複数の撮像画像の各々から、反射光を表わす画素ラインを抽出し、画素ラインの抽出結果の各々を撮像順に並べて合成することにより、検査対象物の面状態を表わすプレーン画像を生成する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、面画像生成装置に係り、特に、検査対象物を撮像して、面の状態を表わす画像を生成する面画像生成装置に関する。
【背景技術】
【０００２】
従来より、短時間に且つ信頼性の高い測定をすることができるようにした３次元曲面形状の測定方法が知られている（特許文献１）。この測定方法では、複数の線状スリット光を被測定対象の全面に亘って同時に回転走査し、スリット光の回転走査角度を測定し、被測定対象表面を撮像して得られるビデオ信号の画面内の各画素に対応する被測定対象表面の各位置毎に、その点を一本乃至複数本のスリット光が通過した瞬間の回転走査角度又はそれに相当する値の中の１つをその画素の値とする画像を合成している。また、合成画像に基づいて被測定対象の３次元曲面形状を測定している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平７−２６０４４３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記特許文献１に記載の技術では、スリット光を回転走査する構成、及び回転走査角度を検出する構成が必要となるため、装置構成が複雑となってしまう、という問題がある。
【０００５】
本発明は、上記の問題点を解決するためになされたもので、簡易な構成で、検査対象物の面の状態を表わす画像を生成することができる面画像生成装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記の目的を達成するために本発明に係る面画像生成装置は、板状の検査対象物の厚み方向を法線とする平面上で前記検査対象物を移動させる駆動手段と、照射方向を前記厚み方向に対して傾斜させて、前記検査対象物の移動方向と交差する方向を長さ方向とする線状の光を、前記検査対象物に対して照射する光照射手段と、前記検査対象物からの前記線状の光の反射光を含む領域を撮像する撮像手段と、前記検査対象物の所定の移動量毎に前記撮像手段により撮像された複数の撮像画像の各々から、前記厚み方向と直交する方向に画素が配列され、かつ、前記反射光を表わす画素列を抽出し、前記画素列の抽出結果の各々を撮像順に並べて合成することにより、前記検査対象物の面状態を表わす面画像として生成する画像生成手段とを含んで構成されている。
【０００７】
本発明に係る面画像生成装置によれば、駆動手段によって、板状の検査対象物の厚み方向を法線とする平面上で検査対象物を移動させる。また、光照射手段によって、照射方向を前記厚み方向に対して傾斜させて、検査対象物の移動方向と交差する方向を長さ方向とする線状の光を、検査対象物に対して照射し、撮像手段によって、検査対象物からの線状の光の反射光を含む領域を撮像する。
【０００８】
そして、画像生成手段によって、検査対象物の所定の移動量毎に前記撮像手段により撮像された複数の撮像画像の各々から、厚み方向と直交する方向に画素が配列され、かつ、反射光を表わす画素列を抽出し、画素列の抽出結果の各々を撮像順に並べて合成することにより、検査対象物の面状態を表わす面画像を生成する。
【０００９】
このように、複数の撮像画像から線状の光の反射光を表わす画素列を抽出して、撮像順に並べて合成することにより、簡易な構成で、検査対象物の面状態を表わす面画像を生成することができる。
【００１０】
本発明の面画像生成装置は、画像生成手段によって生成された面画像から、所定輝度以下となる部分を、欠陥部分として検出する欠陥検出手段を更に含むことができる。これによって、簡易な構成で、検査対象物の面の欠陥を検出することができる。
【００１１】
本発明の画像生成手段は、複数の撮像画像の各々から、輝度が所定値以上となる画素列を、反射光を表わす画素列として抽出し、面画像を生成することができる。
【００１２】
上記の光照射手段は、直線性及び非拡散性を有する線状の光を検査対象物に対して照射することができる。
【００１３】
上記の検査対象物を、面で光を反射し、かつ、光透過性を有する部材とすることができる。また、上記の検査対象物は、部材で形成された複数の層を含むことができる。これによって、各層の面の状態を表わす画像を生成することができる。
【００１４】
上記の所定の移動量を、検査対象物が移動する平面と撮像手段による撮像方向とのなす角、及び画素サイズに基づいて定めることができる。
【００１５】
上記の検査対象物が移動する平面と線状の光の照射方向とのなす角、及び該平面と撮像手段による撮像方向とのなす角を、同一とすることができる。
【発明の効果】
【００１６】
以上説明したように、本発明の面画像生成装置によれば、複数の撮像画像から線状の光の反射光を表わす画素列を抽出して、撮像順に並べて合成することにより、簡易な構成で、検査対象物の面状態を表わす面画像を生成することができる、という効果が得られる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施の形態に係る面検査システムの構成を示すブロック図である。
【図２】検査対象物、エリアカメラ、及びレーザ照射部を配置した様子を示すイメージ図である。
【図３】エリアカメラによる撮像が行われる毎に、検査対象物を移動させる様子を示すイメージ図である。
【図４】フレーム間の移動量を説明するための図である。
【図５】レーザスリット光が反射する面の高さに応じて、エリアセンサへ入射する位置が変化する様子を示すイメージ図である。
【図６】（Ａ）複数フレームの撮像画像から各画素ラインを抽出する様子を示すイメージ、及び（Ｂ）同一の画素ラインを集めてプレーン画像を生成する様子を示すイメージ図である。
【図７】本発明の実施の形態に係る面検査システムにおける検査処理ルーチンの内容を示すフローチャートである。
【図８】本発明の実施の形態に係る面検査システムにおける撮像画像取得処理ルーチンの内容を示すフローチャートである。
【図９】レーザスリット光の反射光を撮像した撮像画像の例を示す図である。
【図１０】（Ａ）ガラス部の下面に対応する画素ラインのプレーン画像を示す図、及び（Ｂ）ガラス部の上面に対応する画素ラインのプレーン画像を示す図である。
【図１１】（Ａ）フィルム部の上面に対応する画素ラインのプレーン画像を示す図、及び（Ｂ）フィルム部の下面に対応する画素ラインのプレーン画像を示す図である。
【図１２】ガラス部の上面の状態を表わすプレーン画像を示す図である。
【発明を実施するための形態】
【００１８】
以下、図面を参照して本発明の実施の形態を詳細に説明する。なお、本実施の形態では、検査対象物の面の状態を検査する面検査システムに本発明を適用した場合を例に説明する。
【００１９】
図１に示すように、本実施の形態に係る面検査システム１０は、光透過性を有する板状の検査対象物を、駆動ステージに載せて水平面上（検査対象物の厚み方向（板状の検査対象物の面に対する法線方向）を法線とする平面上）で所定の移動方向に移動させる駆動部１２と、検査対象物に対して線状のレーザスリット光を、検査対象物の厚み方向に対して斜めから照射するレーザ照射部１４と、検査対象物からの線状のレーザスリット光の反射光を含む領域を撮像するエリアカメラ１８と、エリアカメラ１８により撮像された撮像画像に基づいて、検査対象物の面の状態を表わす面画像を生成して、欠陥候補を検出し、表示装置２２に表示させるコンピュータ２０とを備えている。
【００２０】
検査対象物は、面で光を反射し、かつ、光透過性を有する板状のほぼ透明な部材で形成された複数の層を厚み方向に積層したものである。したがって、検査対象物は、各層の双方の面（上面、下面）で、入射された光を反射させる。
【００２１】
図２に示すように、駆動ステージ１３上の面に対して、検査対象物の厚み方向（面の法線方向）に対して傾斜させて、移動方向と直交する方向を長さ方向とするレーザスリット光を照射するように、レーザ照射部１４が設置されている。また、駆動ステージ１３上の面（検査対象物が移動する平面）とレーザスリット光の照射方向とのなす角（入射角）と、駆動ステージ１３上の面とエリアカメラ１８の撮像方向とのなす角とが同一になるように（例えば、θ＝４５°）、レーザ照射部１４及びエリアカメラ１８が設置されている。すなわち、レーザ照射部１４からのレーザスリット光が検査対象物の面で正反射したときの反射光の方向と、エリアカメラ１８の撮像方向とが平行になるように、レーザ照射部１４及びエリアカメラ１８が設置されている。また、線状のレーザ光の反射光を含む領域が撮像されるようにエリアカメラ１８が配置されている。レーザ照射部１４及びエリアカメラ１８は固定され、また、検査対象物２４のみ移動させるように検査対象物２４が駆動部１２の駆動ステージ１３上に設置される。
【００２２】
なお、後述する処理を簡単にするために、上記のなす角θが４５°になるようにレーザ照射部１４及びエリアカメラ１８を設置しておくことが好ましいが、４５°に限定されるものではない。また、レーザスリット光の幅は、１ピクセル分であることが好ましい。
【００２３】
エリアカメラ１８は、２次元に配列された複数の画素の各々に入射された可視光に応じた信号を出力する複数の受光素子を備え、複数の受光素子から出力された信号をデジタル信号に変換して、カラー画像である撮像画像を生成する。
【００２４】
コンピュータ２０は、ＣＰＵ、後述する検査処理ルーチンのプログラムを記憶したＲＯＭ、データ等を記憶するＲＡＭ、及びこれらを接続するバスを含んで構成されている。このコンピュータ２０をハードウエアとソフトウエアとに基づいて定まる機能実現手段毎に分割した機能ブロックで説明すると、上記図１に示すように、コンピュータ２０は、駆動部１２による検査対象物２４の移動を制御する駆動制御部２８と、検査対象物２４の移動に応じてエリアカメラ１８による撮像を制御すると共にエリアカメラ１８から連続して出力される複数の撮像画像を取得する画像取得部３０と、複数の撮像画像に対して画像処理を行って、検査対象物の面の状態を表わす面画像（以下、プレーン画像とも称する。）を生成する画像処理部３２と、面画像から、検査対象物の欠陥候補を検出して表示装置２２に出力する欠陥検出部３４とを備えている。なお、画像処理部３２が、画像生成手段の一例である。
【００２５】
駆動制御部２８は、図３に示すように、エリアカメラ１８による撮像が行われる毎に、予め決定された移動量分だけ検査対象物を移動させるように駆動部１２を制御する。ここで、移動量は、以下のように予め決定される。
【００２６】
まず、以下の（１）式から、画素サイズ（ピクセルサイズ）が得られる。
画素サイズ ＝ カメラの技術仕様よる画素の大きさ ／ レンズの倍率 ・・・（１）
【００２７】
画素サイズ（例えば、１２μｍ／ｐｉｘｅｌ）が得られると、図４に示すように、以下の（２）式に従って、オーバーラップ無しに全領域撮像するための、撮像間における検査対象物の移動量ａを算出する。
移動量ａ ＝ 画素サイズ ＊ ｃｏｓθ ・・・（２）
【００２８】
例えば、移動量が８μｍ（＝１２μｍ＊ｃｏｓ４５°）に決定される。なお、このときの高さの分解能は、８μｍである。
【００２９】
画像取得部３０は、駆動部１２による駆動が停止している時に、エリアカメラ１８による撮像を行うように制御する。撮像すべきフレーム枚数は、撮像する検査対象物の長さ及び撮像間の移動量に基づいて、決定される。
【００３０】
また、画像取得部３０は、例えば、Ａ／Ｄコンバータや画像データを記憶する画像メモリ等を備え、エリアカメラ１８から出力される複数の撮像画像を取得して保存する。
【００３１】
次に、本発明に係る実施の形態の原理について説明する。
【００３２】
上述したようにレーザ照射部１４とエリアカメラ１８とを設置し、検査対象物が設置された駆動ステージ１３を一定距離移動させながら、連続的に画像を取る。
【００３３】
ここで、図５（Ａ）、図５（Ｂ）に示すように、検査する厚み方向に対して傾斜させたレーザ光を、光透過性を有する複数の層からなる検査対象物（例えば、フィルムとガラスからなるタッチパネル）に入射させると、入射されたレーザ光が反射する面（例えば、フィルムの上面、下面、及びガラスの上面、下面）の高さに応じて、正反射した反射光のエリアカメラに入る位置（検査対象物の厚み方向の位置）が変わる。
【００３４】
従って、得られた画像データの、検査対象物の厚み方向に直交する方向の各画素ラインに入った光は、正反射した位置の実際の高さの情報を示している。そこで、上述したように連続撮像した撮像画像から、同一の画素ラインのみ抽出し並べ、プレーン画像を作ることで、その画素ラインに対応する高さとなる位置（ｘ、ｙ）を示す画像データが得られる。これにより、検査対象となる面の高さに対応する画素ラインのプレーン画像を用いることにより、検査対象の面の状態を検査することができる。また、内部にある面の高さに対応する画素ラインのプレーン画像を用いることにより、検査対象物の内部にある面の状態も検査することができる。
【００３５】
以上より、本実施の形態では、画像処理部３２によって、以下に説明するように、複数の撮像画像に基づいてプレーン画像を生成する。
【００３６】
まず、例えば１００フレームの全撮像画像から、０フレーム目、１０フレーム目、２０フレーム目、３０フレーム目、・・・と所定フレーム間隔で複数枚選択し、選択された撮像画像の平均を取って、平均画像を生成する。
【００３７】
生成された平均画像において、検査対象物の厚み方向に直交する方向の複数の画素ラインから、平均輝度が所定輝度以上となる高輝度の画素ラインを、レーザスリット光の反射光を表わす画素ラインとして決定する。
【００３８】
次に、エリアカメラ１８を、複数のラインカメラの集合として考え、決定された高輝度の画素ラインに対応する各ラインカメラが撮像したスリット画像として、高輝度の画素ラインの画像データを抽出する。例えば、エリアカメラ１８から取り込んだ複数の撮像画像（ｘ列ｙ行ｚ枚）から、決定された高輝度の画素ライン毎に、図６（Ａ）に示すように同一画素ラインを抽出して集めて、図６（Ｂ）に示すようにフレーム順に並べて合成したプレーン画像（ｘ列ｚ行ｙ枚）を生成する。このプレーン画像が、対応する特定の高さの位置を表わした画像、すなわち、特定の高さの面の状態を表わす画像となる。
【００３９】
以上説明したように、画像処理部３２は、画像処理を行うことにより、検査対象物の面の状態を表わす面画像を生成する。
【００４０】
欠陥検出部３４は、生成された面画像から、輝度値が指定輝度（パラメータで調整可能な値）以下となる部分を欠陥候補として検出する。また、欠陥検出部３４は、検出された欠陥候補の各々について、明るさ、大きさ、及び形状に基づいて、欠陥を種別する。例えば、明るさが大きい場合には、汚れや指紋の可能性があると種別され、明るさが小さく、且つ、丸い形状である場合には、ダコンや気泡の可能性があると種別される。
【００４１】
次に、本実施の形態に係る面検査システム１０の作用について説明する。板状のほぼ透明な部材で形成された複数の層からなる検査対象物が（例えば、タッチパネル）が駆動ステージ１３上に設置される。また、コンピュータ２０に対して、画素サイズと、レーザスリット光の入射角及びエリアカメラ１８の撮像方向と水平面とのなす角である角度とがオペレータによって入力されると、上記（２）式に従って撮像毎の移動量が決定される。また、コンピュータ２０に対して、検査対象物の長さがオペレータによって入力されると、撮像すべきフレーム数が決定される。また、コンピュータ２０において、図７に示す検査処理ルーチンが実行される。
【００４２】
まず、ステップ１００において、複数の撮像画像を取得する。上記ステップ１００は、図８に示す撮像画像取得処理ルーチンによって実現される。
【００４３】
ステップ１２０において、撮像する画像のフレーム番号を識別するための変数ｎを初期値の１に設定し、ステップ１２２において、エリアカメラ１８による撮像を行うように制御すると共に、エリアカメラ１８から出力される撮像画像を取得する。例えば、図９に示すような、検査対象物であるタッチパネルの各層の上下面で反射されたレーザスリット光の反射光を撮像した撮像画像が得られる。
【００４４】
次のステップ１２４では、上記ステップ１２２で取得した撮像画像をビットマップ（ＢＭＰ）ファイルとしてメモリ（図示省略）に保存する。
【００４５】
そして、ステップ１２６において、予め決定された移動量分だけ検査対象物を移動させるように駆動部１２を制御して、検査対象物を移動量分だけ移動させる。次のステップ１２８では、変数ｎが、撮像すべきフレーム数を表わす定数Ｎ未満であるか否かを判定し、変数ｎが定数Ｎ未満である場合には、ステップ１３０で、変数ｎをインクリメントして、ステップ１２２へ戻る。一方、撮像すべきフレーム数分だけ撮像画像が撮像され、変数ｎが定数Ｎに到達した場合には、撮像画像取得処理ルーチンを終了する。
【００４６】
そして、検査処理ルーチンのステップ１０２において、上記ステップ１００で取得した複数の撮像画像から所定フレーム間隔で得られる撮像画像の平均画像に対して、画素ラインの平均輝度が所定輝度以上となる高輝度の画素ラインを、反射光を表わす画素ラインとして決定する。以下では、高輝度の画素ラインが複数決定された場合を例に説明する。
【００４７】
次のステップ１０４では、上記ステップ１００で取得した複数の撮像画像の各々から、高輝度の画素ラインの各々について、同一画素ラインを抽出して集め、フレーム順に並べて合成することにより、上記ステップ１０２で決定された高輝度画素ラインの各々に対応するプレーン画像を各々生成する。例えば、図１０（Ａ）に示すような、ガラス部の下面の高さに対応する画素ラインのプレーン画像や、図１０（Ｂ）に示すような、ガラス部の上面の高さに対応する画素ラインのプレーン画像が生成される。また、図１１（Ａ）に示すような、フィルム部の上面の高さに対応する画素ラインのプレーン画像や、図１１（Ｂ）に示すような、フィルム部の下面の高さに対応する画素ラインのプレーン画像が生成される。
【００４８】
そして、ステップ１０６では、上記ステップ１０４で生成されたプレーン画像から、輝度値が所定値以下である部分を欠陥候補として検出すると共に、欠陥候補の各々について欠陥を種別する。例えば、図１２に示すような、ガラス部の上面の状態を表わすプレーン画像から、キズやマーカー印などの欠陥が検出される。
【００４９】
次のステップ１０８では、上記ステップ１０４で生成されたプレーン画像と上記ステップ１０６で検出された欠陥候補とを表示装置２２に出力し、表示装置２２に表示させて、検査処理ルーチンを終了する。
【００５０】
以上説明したように、本実施の形態に係る面検査システムによれば、複数の撮像画像からレーザスリット光の反射光を表わす画素ラインを抽出し、同一の画素ラインの抽出結果を撮像順に並べて合成することにより、簡易な構成で、検査対象物の面状態を表わすプレーン画像を生成することができ、また、検査対象物の面の欠陥を検出することができる。
【００５１】
板状のほぼ透明な部材で形成された複数の層からなる検査対象物について、各層の上下面の各々の状態を表わすプレーン画像を各々生成することができる。
【００５２】
なお、上記の実施の形態では、検査対象物を一定量移動させる毎に、エリアカメラによる撮像を行う場合を例に説明したが、これに限定されるものではなく、例えば、駆動ステージを動かしながら連続的に撮像を行って、所定フレーム数分の撮像画像を得るようにしてもよい。この場合には、フレーム間の移動量から、駆動ステージの速度とエリアカメラのフレームレートとを算出し、算出された速度で検査対象物を移動させると共に、算出された所定のフレームレートで連続撮像を行う。そして、検査対象物の長さに応じたフレーム数分撮像されると、撮像を終了すると共に、移動を終了させ、得られた各撮像画像をビットマップファイルで保存する。
【００５３】
また、プレーン画像の輝度に応じて欠陥を検出する場合を例に説明したが、これに限定されるものではなく、欠陥検出部３４は、各面の材質に応じて異なる検査方法を行うようにしてもよい。例えば、検査対象の面がＰＥＴ材質のフィルム部の面（コート有）である場合には、テクスチャ処理を行って、異なる模様を欠陥候補として検出するようにしてもよい。また、検査対象の面がガラス部の面である場合には、ドットスペーサ（内部に接着されている電極）をマスクし、ドットスペーサ以外の領域から、欠陥候補を検出するようにしてもよい。
【００５４】
また、高輝度の画素ラインについてのみプレーン画像を生成する場合を例に説明したが、これに限定されるものではなく、全ての画素ラインについてプレーン画像を各々生成し、そのうち、高輝度の画素ラインに対応するプレーン画像を、検査対象物の面の状態を表わす画像として選択するようにしてもよい。
【００５５】
また、検査対象物を水平面上に移動させる場合を例に説明したが、これに限定されるものではなく、板状の検査対象物の厚み方向を法線とする平面上（板状の検査対象物の面と平行な平面上）で、検査対象物を所定方向に移動させるようにすればよい。この場合には、検査対象物が移動する平面とレーザスリット光の照射方向とのなす角、及び検査対象物が移動する平面とエリアカメラの撮像方向とのなす角が同一となるように構成すればよい。
【００５６】
また、レーザスリット光を照射する場合を例に説明したが、これに限定されるものではなく、直線性及び非拡散性を有するスリット光であれば、他の種類の光を照射するようにしてもよい。
【符号の説明】
【００５７】
１０ 面検査システム
１２ 駆動部
１４ レーザ照射部
１８ エリアカメラ
２０ コンピュータ
２４ 検査対象物
２８ 駆動制御部
３０ 画像取得部
３２ 画像処理部
３４ 欠陥検出部
【技術分野】
【０００１】
本発明は、面画像生成装置に係り、特に、検査対象物を撮像して、面の状態を表わす画像を生成する面画像生成装置に関する。
【背景技術】
【０００２】
従来より、短時間に且つ信頼性の高い測定をすることができるようにした３次元曲面形状の測定方法が知られている（特許文献１）。この測定方法では、複数の線状スリット光を被測定対象の全面に亘って同時に回転走査し、スリット光の回転走査角度を測定し、被測定対象表面を撮像して得られるビデオ信号の画面内の各画素に対応する被測定対象表面の各位置毎に、その点を一本乃至複数本のスリット光が通過した瞬間の回転走査角度又はそれに相当する値の中の１つをその画素の値とする画像を合成している。また、合成画像に基づいて被測定対象の３次元曲面形状を測定している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平７−２６０４４３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記特許文献１に記載の技術では、スリット光を回転走査する構成、及び回転走査角度を検出する構成が必要となるため、装置構成が複雑となってしまう、という問題がある。
【０００５】
本発明は、上記の問題点を解決するためになされたもので、簡易な構成で、検査対象物の面の状態を表わす画像を生成することができる面画像生成装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記の目的を達成するために本発明に係る面画像生成装置は、板状の検査対象物の厚み方向を法線とする平面上で前記検査対象物を移動させる駆動手段と、照射方向を前記厚み方向に対して傾斜させて、前記検査対象物の移動方向と交差する方向を長さ方向とする線状の光を、前記検査対象物に対して照射する光照射手段と、前記検査対象物からの前記線状の光の反射光を含む領域を撮像する撮像手段と、前記検査対象物の所定の移動量毎に前記撮像手段により撮像された複数の撮像画像の各々から、前記厚み方向と直交する方向に画素が配列され、かつ、前記反射光を表わす画素列を抽出し、前記画素列の抽出結果の各々を撮像順に並べて合成することにより、前記検査対象物の面状態を表わす面画像として生成する画像生成手段とを含んで構成されている。
【０００７】
本発明に係る面画像生成装置によれば、駆動手段によって、板状の検査対象物の厚み方向を法線とする平面上で検査対象物を移動させる。また、光照射手段によって、照射方向を前記厚み方向に対して傾斜させて、検査対象物の移動方向と交差する方向を長さ方向とする線状の光を、検査対象物に対して照射し、撮像手段によって、検査対象物からの線状の光の反射光を含む領域を撮像する。
【０００８】
そして、画像生成手段によって、検査対象物の所定の移動量毎に前記撮像手段により撮像された複数の撮像画像の各々から、厚み方向と直交する方向に画素が配列され、かつ、反射光を表わす画素列を抽出し、画素列の抽出結果の各々を撮像順に並べて合成することにより、検査対象物の面状態を表わす面画像を生成する。
【０００９】
このように、複数の撮像画像から線状の光の反射光を表わす画素列を抽出して、撮像順に並べて合成することにより、簡易な構成で、検査対象物の面状態を表わす面画像を生成することができる。
【００１０】
本発明の面画像生成装置は、画像生成手段によって生成された面画像から、所定輝度以下となる部分を、欠陥部分として検出する欠陥検出手段を更に含むことができる。これによって、簡易な構成で、検査対象物の面の欠陥を検出することができる。
【００１１】
本発明の画像生成手段は、複数の撮像画像の各々から、輝度が所定値以上となる画素列を、反射光を表わす画素列として抽出し、面画像を生成することができる。
【００１２】
上記の光照射手段は、直線性及び非拡散性を有する線状の光を検査対象物に対して照射することができる。
【００１３】
上記の検査対象物を、面で光を反射し、かつ、光透過性を有する部材とすることができる。また、上記の検査対象物は、部材で形成された複数の層を含むことができる。これによって、各層の面の状態を表わす画像を生成することができる。
【００１４】
上記の所定の移動量を、検査対象物が移動する平面と撮像手段による撮像方向とのなす角、及び画素サイズに基づいて定めることができる。
【００１５】
上記の検査対象物が移動する平面と線状の光の照射方向とのなす角、及び該平面と撮像手段による撮像方向とのなす角を、同一とすることができる。
【発明の効果】
【００１６】
以上説明したように、本発明の面画像生成装置によれば、複数の撮像画像から線状の光の反射光を表わす画素列を抽出して、撮像順に並べて合成することにより、簡易な構成で、検査対象物の面状態を表わす面画像を生成することができる、という効果が得られる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施の形態に係る面検査システムの構成を示すブロック図である。
【図２】検査対象物、エリアカメラ、及びレーザ照射部を配置した様子を示すイメージ図である。
【図３】エリアカメラによる撮像が行われる毎に、検査対象物を移動させる様子を示すイメージ図である。
【図４】フレーム間の移動量を説明するための図である。
【図５】レーザスリット光が反射する面の高さに応じて、エリアセンサへ入射する位置が変化する様子を示すイメージ図である。
【図６】（Ａ）複数フレームの撮像画像から各画素ラインを抽出する様子を示すイメージ、及び（Ｂ）同一の画素ラインを集めてプレーン画像を生成する様子を示すイメージ図である。
【図７】本発明の実施の形態に係る面検査システムにおける検査処理ルーチンの内容を示すフローチャートである。
【図８】本発明の実施の形態に係る面検査システムにおける撮像画像取得処理ルーチンの内容を示すフローチャートである。
【図９】レーザスリット光の反射光を撮像した撮像画像の例を示す図である。
【図１０】（Ａ）ガラス部の下面に対応する画素ラインのプレーン画像を示す図、及び（Ｂ）ガラス部の上面に対応する画素ラインのプレーン画像を示す図である。
【図１１】（Ａ）フィルム部の上面に対応する画素ラインのプレーン画像を示す図、及び（Ｂ）フィルム部の下面に対応する画素ラインのプレーン画像を示す図である。
【図１２】ガラス部の上面の状態を表わすプレーン画像を示す図である。
【発明を実施するための形態】
【００１８】
以下、図面を参照して本発明の実施の形態を詳細に説明する。なお、本実施の形態では、検査対象物の面の状態を検査する面検査システムに本発明を適用した場合を例に説明する。
【００１９】
図１に示すように、本実施の形態に係る面検査システム１０は、光透過性を有する板状の検査対象物を、駆動ステージに載せて水平面上（検査対象物の厚み方向（板状の検査対象物の面に対する法線方向）を法線とする平面上）で所定の移動方向に移動させる駆動部１２と、検査対象物に対して線状のレーザスリット光を、検査対象物の厚み方向に対して斜めから照射するレーザ照射部１４と、検査対象物からの線状のレーザスリット光の反射光を含む領域を撮像するエリアカメラ１８と、エリアカメラ１８により撮像された撮像画像に基づいて、検査対象物の面の状態を表わす面画像を生成して、欠陥候補を検出し、表示装置２２に表示させるコンピュータ２０とを備えている。
【００２０】
検査対象物は、面で光を反射し、かつ、光透過性を有する板状のほぼ透明な部材で形成された複数の層を厚み方向に積層したものである。したがって、検査対象物は、各層の双方の面（上面、下面）で、入射された光を反射させる。
【００２１】
図２に示すように、駆動ステージ１３上の面に対して、検査対象物の厚み方向（面の法線方向）に対して傾斜させて、移動方向と直交する方向を長さ方向とするレーザスリット光を照射するように、レーザ照射部１４が設置されている。また、駆動ステージ１３上の面（検査対象物が移動する平面）とレーザスリット光の照射方向とのなす角（入射角）と、駆動ステージ１３上の面とエリアカメラ１８の撮像方向とのなす角とが同一になるように（例えば、θ＝４５°）、レーザ照射部１４及びエリアカメラ１８が設置されている。すなわち、レーザ照射部１４からのレーザスリット光が検査対象物の面で正反射したときの反射光の方向と、エリアカメラ１８の撮像方向とが平行になるように、レーザ照射部１４及びエリアカメラ１８が設置されている。また、線状のレーザ光の反射光を含む領域が撮像されるようにエリアカメラ１８が配置されている。レーザ照射部１４及びエリアカメラ１８は固定され、また、検査対象物２４のみ移動させるように検査対象物２４が駆動部１２の駆動ステージ１３上に設置される。
【００２２】
なお、後述する処理を簡単にするために、上記のなす角θが４５°になるようにレーザ照射部１４及びエリアカメラ１８を設置しておくことが好ましいが、４５°に限定されるものではない。また、レーザスリット光の幅は、１ピクセル分であることが好ましい。
【００２３】
エリアカメラ１８は、２次元に配列された複数の画素の各々に入射された可視光に応じた信号を出力する複数の受光素子を備え、複数の受光素子から出力された信号をデジタル信号に変換して、カラー画像である撮像画像を生成する。
【００２４】
コンピュータ２０は、ＣＰＵ、後述する検査処理ルーチンのプログラムを記憶したＲＯＭ、データ等を記憶するＲＡＭ、及びこれらを接続するバスを含んで構成されている。このコンピュータ２０をハードウエアとソフトウエアとに基づいて定まる機能実現手段毎に分割した機能ブロックで説明すると、上記図１に示すように、コンピュータ２０は、駆動部１２による検査対象物２４の移動を制御する駆動制御部２８と、検査対象物２４の移動に応じてエリアカメラ１８による撮像を制御すると共にエリアカメラ１８から連続して出力される複数の撮像画像を取得する画像取得部３０と、複数の撮像画像に対して画像処理を行って、検査対象物の面の状態を表わす面画像（以下、プレーン画像とも称する。）を生成する画像処理部３２と、面画像から、検査対象物の欠陥候補を検出して表示装置２２に出力する欠陥検出部３４とを備えている。なお、画像処理部３２が、画像生成手段の一例である。
【００２５】
駆動制御部２８は、図３に示すように、エリアカメラ１８による撮像が行われる毎に、予め決定された移動量分だけ検査対象物を移動させるように駆動部１２を制御する。ここで、移動量は、以下のように予め決定される。
【００２６】
まず、以下の（１）式から、画素サイズ（ピクセルサイズ）が得られる。
画素サイズ ＝ カメラの技術仕様よる画素の大きさ ／ レンズの倍率 ・・・（１）
【００２７】
画素サイズ（例えば、１２μｍ／ｐｉｘｅｌ）が得られると、図４に示すように、以下の（２）式に従って、オーバーラップ無しに全領域撮像するための、撮像間における検査対象物の移動量ａを算出する。
移動量ａ ＝ 画素サイズ ＊ ｃｏｓθ ・・・（２）
【００２８】
例えば、移動量が８μｍ（＝１２μｍ＊ｃｏｓ４５°）に決定される。なお、このときの高さの分解能は、８μｍである。
【００２９】
画像取得部３０は、駆動部１２による駆動が停止している時に、エリアカメラ１８による撮像を行うように制御する。撮像すべきフレーム枚数は、撮像する検査対象物の長さ及び撮像間の移動量に基づいて、決定される。
【００３０】
また、画像取得部３０は、例えば、Ａ／Ｄコンバータや画像データを記憶する画像メモリ等を備え、エリアカメラ１８から出力される複数の撮像画像を取得して保存する。
【００３１】
次に、本発明に係る実施の形態の原理について説明する。
【００３２】
上述したようにレーザ照射部１４とエリアカメラ１８とを設置し、検査対象物が設置された駆動ステージ１３を一定距離移動させながら、連続的に画像を取る。
【００３３】
ここで、図５（Ａ）、図５（Ｂ）に示すように、検査する厚み方向に対して傾斜させたレーザ光を、光透過性を有する複数の層からなる検査対象物（例えば、フィルムとガラスからなるタッチパネル）に入射させると、入射されたレーザ光が反射する面（例えば、フィルムの上面、下面、及びガラスの上面、下面）の高さに応じて、正反射した反射光のエリアカメラに入る位置（検査対象物の厚み方向の位置）が変わる。
【００３４】
従って、得られた画像データの、検査対象物の厚み方向に直交する方向の各画素ラインに入った光は、正反射した位置の実際の高さの情報を示している。そこで、上述したように連続撮像した撮像画像から、同一の画素ラインのみ抽出し並べ、プレーン画像を作ることで、その画素ラインに対応する高さとなる位置（ｘ、ｙ）を示す画像データが得られる。これにより、検査対象となる面の高さに対応する画素ラインのプレーン画像を用いることにより、検査対象の面の状態を検査することができる。また、内部にある面の高さに対応する画素ラインのプレーン画像を用いることにより、検査対象物の内部にある面の状態も検査することができる。
【００３５】
以上より、本実施の形態では、画像処理部３２によって、以下に説明するように、複数の撮像画像に基づいてプレーン画像を生成する。
【００３６】
まず、例えば１００フレームの全撮像画像から、０フレーム目、１０フレーム目、２０フレーム目、３０フレーム目、・・・と所定フレーム間隔で複数枚選択し、選択された撮像画像の平均を取って、平均画像を生成する。
【００３７】
生成された平均画像において、検査対象物の厚み方向に直交する方向の複数の画素ラインから、平均輝度が所定輝度以上となる高輝度の画素ラインを、レーザスリット光の反射光を表わす画素ラインとして決定する。
【００３８】
次に、エリアカメラ１８を、複数のラインカメラの集合として考え、決定された高輝度の画素ラインに対応する各ラインカメラが撮像したスリット画像として、高輝度の画素ラインの画像データを抽出する。例えば、エリアカメラ１８から取り込んだ複数の撮像画像（ｘ列ｙ行ｚ枚）から、決定された高輝度の画素ライン毎に、図６（Ａ）に示すように同一画素ラインを抽出して集めて、図６（Ｂ）に示すようにフレーム順に並べて合成したプレーン画像（ｘ列ｚ行ｙ枚）を生成する。このプレーン画像が、対応する特定の高さの位置を表わした画像、すなわち、特定の高さの面の状態を表わす画像となる。
【００３９】
以上説明したように、画像処理部３２は、画像処理を行うことにより、検査対象物の面の状態を表わす面画像を生成する。
【００４０】
欠陥検出部３４は、生成された面画像から、輝度値が指定輝度（パラメータで調整可能な値）以下となる部分を欠陥候補として検出する。また、欠陥検出部３４は、検出された欠陥候補の各々について、明るさ、大きさ、及び形状に基づいて、欠陥を種別する。例えば、明るさが大きい場合には、汚れや指紋の可能性があると種別され、明るさが小さく、且つ、丸い形状である場合には、ダコンや気泡の可能性があると種別される。
【００４１】
次に、本実施の形態に係る面検査システム１０の作用について説明する。板状のほぼ透明な部材で形成された複数の層からなる検査対象物が（例えば、タッチパネル）が駆動ステージ１３上に設置される。また、コンピュータ２０に対して、画素サイズと、レーザスリット光の入射角及びエリアカメラ１８の撮像方向と水平面とのなす角である角度とがオペレータによって入力されると、上記（２）式に従って撮像毎の移動量が決定される。また、コンピュータ２０に対して、検査対象物の長さがオペレータによって入力されると、撮像すべきフレーム数が決定される。また、コンピュータ２０において、図７に示す検査処理ルーチンが実行される。
【００４２】
まず、ステップ１００において、複数の撮像画像を取得する。上記ステップ１００は、図８に示す撮像画像取得処理ルーチンによって実現される。
【００４３】
ステップ１２０において、撮像する画像のフレーム番号を識別するための変数ｎを初期値の１に設定し、ステップ１２２において、エリアカメラ１８による撮像を行うように制御すると共に、エリアカメラ１８から出力される撮像画像を取得する。例えば、図９に示すような、検査対象物であるタッチパネルの各層の上下面で反射されたレーザスリット光の反射光を撮像した撮像画像が得られる。
【００４４】
次のステップ１２４では、上記ステップ１２２で取得した撮像画像をビットマップ（ＢＭＰ）ファイルとしてメモリ（図示省略）に保存する。
【００４５】
そして、ステップ１２６において、予め決定された移動量分だけ検査対象物を移動させるように駆動部１２を制御して、検査対象物を移動量分だけ移動させる。次のステップ１２８では、変数ｎが、撮像すべきフレーム数を表わす定数Ｎ未満であるか否かを判定し、変数ｎが定数Ｎ未満である場合には、ステップ１３０で、変数ｎをインクリメントして、ステップ１２２へ戻る。一方、撮像すべきフレーム数分だけ撮像画像が撮像され、変数ｎが定数Ｎに到達した場合には、撮像画像取得処理ルーチンを終了する。
【００４６】
そして、検査処理ルーチンのステップ１０２において、上記ステップ１００で取得した複数の撮像画像から所定フレーム間隔で得られる撮像画像の平均画像に対して、画素ラインの平均輝度が所定輝度以上となる高輝度の画素ラインを、反射光を表わす画素ラインとして決定する。以下では、高輝度の画素ラインが複数決定された場合を例に説明する。
【００４７】
次のステップ１０４では、上記ステップ１００で取得した複数の撮像画像の各々から、高輝度の画素ラインの各々について、同一画素ラインを抽出して集め、フレーム順に並べて合成することにより、上記ステップ１０２で決定された高輝度画素ラインの各々に対応するプレーン画像を各々生成する。例えば、図１０（Ａ）に示すような、ガラス部の下面の高さに対応する画素ラインのプレーン画像や、図１０（Ｂ）に示すような、ガラス部の上面の高さに対応する画素ラインのプレーン画像が生成される。また、図１１（Ａ）に示すような、フィルム部の上面の高さに対応する画素ラインのプレーン画像や、図１１（Ｂ）に示すような、フィルム部の下面の高さに対応する画素ラインのプレーン画像が生成される。
【００４８】
そして、ステップ１０６では、上記ステップ１０４で生成されたプレーン画像から、輝度値が所定値以下である部分を欠陥候補として検出すると共に、欠陥候補の各々について欠陥を種別する。例えば、図１２に示すような、ガラス部の上面の状態を表わすプレーン画像から、キズやマーカー印などの欠陥が検出される。
【００４９】
次のステップ１０８では、上記ステップ１０４で生成されたプレーン画像と上記ステップ１０６で検出された欠陥候補とを表示装置２２に出力し、表示装置２２に表示させて、検査処理ルーチンを終了する。
【００５０】
以上説明したように、本実施の形態に係る面検査システムによれば、複数の撮像画像からレーザスリット光の反射光を表わす画素ラインを抽出し、同一の画素ラインの抽出結果を撮像順に並べて合成することにより、簡易な構成で、検査対象物の面状態を表わすプレーン画像を生成することができ、また、検査対象物の面の欠陥を検出することができる。
【００５１】
板状のほぼ透明な部材で形成された複数の層からなる検査対象物について、各層の上下面の各々の状態を表わすプレーン画像を各々生成することができる。
【００５２】
なお、上記の実施の形態では、検査対象物を一定量移動させる毎に、エリアカメラによる撮像を行う場合を例に説明したが、これに限定されるものではなく、例えば、駆動ステージを動かしながら連続的に撮像を行って、所定フレーム数分の撮像画像を得るようにしてもよい。この場合には、フレーム間の移動量から、駆動ステージの速度とエリアカメラのフレームレートとを算出し、算出された速度で検査対象物を移動させると共に、算出された所定のフレームレートで連続撮像を行う。そして、検査対象物の長さに応じたフレーム数分撮像されると、撮像を終了すると共に、移動を終了させ、得られた各撮像画像をビットマップファイルで保存する。
【００５３】
また、プレーン画像の輝度に応じて欠陥を検出する場合を例に説明したが、これに限定されるものではなく、欠陥検出部３４は、各面の材質に応じて異なる検査方法を行うようにしてもよい。例えば、検査対象の面がＰＥＴ材質のフィルム部の面（コート有）である場合には、テクスチャ処理を行って、異なる模様を欠陥候補として検出するようにしてもよい。また、検査対象の面がガラス部の面である場合には、ドットスペーサ（内部に接着されている電極）をマスクし、ドットスペーサ以外の領域から、欠陥候補を検出するようにしてもよい。
【００５４】
また、高輝度の画素ラインについてのみプレーン画像を生成する場合を例に説明したが、これに限定されるものではなく、全ての画素ラインについてプレーン画像を各々生成し、そのうち、高輝度の画素ラインに対応するプレーン画像を、検査対象物の面の状態を表わす画像として選択するようにしてもよい。
【００５５】
また、検査対象物を水平面上に移動させる場合を例に説明したが、これに限定されるものではなく、板状の検査対象物の厚み方向を法線とする平面上（板状の検査対象物の面と平行な平面上）で、検査対象物を所定方向に移動させるようにすればよい。この場合には、検査対象物が移動する平面とレーザスリット光の照射方向とのなす角、及び検査対象物が移動する平面とエリアカメラの撮像方向とのなす角が同一となるように構成すればよい。
【００５６】
また、レーザスリット光を照射する場合を例に説明したが、これに限定されるものではなく、直線性及び非拡散性を有するスリット光であれば、他の種類の光を照射するようにしてもよい。
【符号の説明】
【００５７】
１０ 面検査システム
１２ 駆動部
１４ レーザ照射部
１８ エリアカメラ
２０ コンピュータ
２４ 検査対象物
２８ 駆動制御部
３０ 画像取得部
３２ 画像処理部
３４ 欠陥検出部
【特許請求の範囲】
【請求項１】
板状の検査対象物の厚み方向を法線とする平面上で前記検査対象物を移動させる駆動手段と、
照射方向を前記厚み方向に対して傾斜させて、前記検査対象物の移動方向と交差する方向を長さ方向とする線状の光を、前記検査対象物に対して照射する光照射手段と、
前記検査対象物からの前記線状の光の反射光を含む領域を撮像する撮像手段と、
前記検査対象物の所定の移動量毎に前記撮像手段により撮像された複数の撮像画像の各々から、前記厚み方向と直交する方向に画素が配列され、かつ、前記反射光を表わす画素列を抽出し、前記画素列の抽出結果の各々を撮像順に並べて合成することにより、前記検査対象物の面の状態を表わす面画像を生成する画像生成手段と、
を含む面画像生成装置。
【請求項２】
前記画像生成手段によって生成された面画像から、所定輝度以下となる部分を、欠陥部分として検出する欠陥検出手段を更に含む請求項１記載の面画像生成装置。
【請求項３】
前記画像生成手段は、前記複数の撮像画像の各々から、輝度が所定値以上となる画素列を、前記反射光を表わす画素列として抽出し、前記面画像を生成する請求項１又は２記載の面画像生成装置。
【請求項４】
前記光照射手段は、直線性及び非拡散性を有する線状の光を前記検査対象物に対して照射する請求項１〜請求項３の何れか１項記載の面画像生成装置。
【請求項５】
前記検査対象物を、面で光を反射し、かつ、光透過性を有する部材とした請求項１〜請求項４の何れか１項記載の面画像生成装置。
【請求項６】
前記検査対象物は、前記部材で形成された複数の層を含む請求項５記載の面画像生成装置。
【請求項７】
前記所定の移動量を、前記検査対象物が移動する前記平面と前記撮像手段による撮像方向とのなす角、及び画素サイズに基づいて定めた請求項１〜請求項６の何れか１項記載の面画像生成装置。
【請求項８】
前記検査対象物が移動する前記平面と前記線状の光の照射方向とのなす角、及び該平面と前記撮像手段による撮像方向とのなす角を、同一とした請求項１〜請求項７の何れか１項記載の面画像生成装置。
【請求項１】
板状の検査対象物の厚み方向を法線とする平面上で前記検査対象物を移動させる駆動手段と、
照射方向を前記厚み方向に対して傾斜させて、前記検査対象物の移動方向と交差する方向を長さ方向とする線状の光を、前記検査対象物に対して照射する光照射手段と、
前記検査対象物からの前記線状の光の反射光を含む領域を撮像する撮像手段と、
前記検査対象物の所定の移動量毎に前記撮像手段により撮像された複数の撮像画像の各々から、前記厚み方向と直交する方向に画素が配列され、かつ、前記反射光を表わす画素列を抽出し、前記画素列の抽出結果の各々を撮像順に並べて合成することにより、前記検査対象物の面の状態を表わす面画像を生成する画像生成手段と、
を含む面画像生成装置。
【請求項２】
前記画像生成手段によって生成された面画像から、所定輝度以下となる部分を、欠陥部分として検出する欠陥検出手段を更に含む請求項１記載の面画像生成装置。
【請求項３】
前記画像生成手段は、前記複数の撮像画像の各々から、輝度が所定値以上となる画素列を、前記反射光を表わす画素列として抽出し、前記面画像を生成する請求項１又は２記載の面画像生成装置。
【請求項４】
前記光照射手段は、直線性及び非拡散性を有する線状の光を前記検査対象物に対して照射する請求項１〜請求項３の何れか１項記載の面画像生成装置。
【請求項５】
前記検査対象物を、面で光を反射し、かつ、光透過性を有する部材とした請求項１〜請求項４の何れか１項記載の面画像生成装置。
【請求項６】
前記検査対象物は、前記部材で形成された複数の層を含む請求項５記載の面画像生成装置。
【請求項７】
前記所定の移動量を、前記検査対象物が移動する前記平面と前記撮像手段による撮像方向とのなす角、及び画素サイズに基づいて定めた請求項１〜請求項６の何れか１項記載の面画像生成装置。
【請求項８】
前記検査対象物が移動する前記平面と前記線状の光の照射方向とのなす角、及び該平面と前記撮像手段による撮像方向とのなす角を、同一とした請求項１〜請求項７の何れか１項記載の面画像生成装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１０−１７５２８３（Ｐ２０１０−１７５２８３Ａ）
【公開日】平成２２年８月１２日（２０１０．８．１２）
【国際特許分類】
【出願番号】特願２００９−１５４３９（Ｐ２００９−１５４３９）
【出願日】平成２１年１月２７日（２００９．１．２７）
【出願人】（０００１７０５５４）国際技術開発株式会社 (34)
【Ｆターム（参考）】
【公開日】平成２２年８月１２日（２０１０．８．１２）
【国際特許分類】
【出願日】平成２１年１月２７日（２００９．１．２７）
【出願人】（０００１７０５５４）国際技術開発株式会社 (34)
【Ｆターム（参考）】
[ Back to top ]