人物認証装置およびコンピュータプログラム
【課題】本発明は、特徴点データが抽出されないエリアがある場合でも、適切に人物認証が可能な人物認証装置およびコンピュータプログラムの提供を目的とする。
【解決手段】本発明にかかる人物認証装置は、顔画像を複数のエリアに分割する処理を行う、分割手段３と、抽出が可能な全エリアに対して特徴点データを抽出する、第２抽出手段４と、登録顔画像の登録特徴点データを登録する登録手段６と、照合対象顔画像の照合対象特徴点データと、登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、照合対象顔画像と登録顔画像との照合を行う照合手段７とを備え、照合手段７は、照合対象特徴点データと、対応する登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、照合対象顔画像と登録顔画像との照合を行う。
【解決手段】本発明にかかる人物認証装置は、顔画像を複数のエリアに分割する処理を行う、分割手段３と、抽出が可能な全エリアに対して特徴点データを抽出する、第２抽出手段４と、登録顔画像の登録特徴点データを登録する登録手段６と、照合対象顔画像の照合対象特徴点データと、登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、照合対象顔画像と登録顔画像との照合を行う照合手段７とを備え、照合手段７は、照合対象特徴点データと、対応する登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、照合対象顔画像と登録顔画像との照合を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を利用した人物認証装置およびコンピュータプログラムに関する。特に、人物を認証対象とし、当該人物から取得した顔画像を、予め登録された顔画像と照合することにより、当該人物が予め登録された人物であるかを判定する人物認証装置およびコンピュータプログラムに関する。
【背景技術】
【０００２】
人物認証装置を用いて人物認証をする場合、まず、人物（例えば歩行者）から顔画像を取得するために、人物の動線に向けて撮像カメラを設置する。
【０００３】
次に、撮像カメラの撮影領域に侵入してきた人物の顔画像を単位時間あたり数コマで撮影して、画像中にある人物の顔画像を検出する。
【０００４】
検出した顔画像と、予め登録された顔画像とを照合することにより、その顔画像が、予め登録した人物と同一人物の顔画像であるかを判断する。このような動作をもって、人物の認証を行う。
【０００５】
ここで、検出した顔画像の顔幅が所定の大きさ以上である場合には、顔画像を同一人物あたり複数枚取得して、その後の顔照合処理に供給することができる。
【０００６】
また、取得した顔画像での認証精度の向上、認証スピードの向上のため、顔画像を任意のサイズに分割して、各々の分割単位ごとに照合させるものも開示されている（例えば、特許文献１参照）。
【０００７】
さらに、同様の目的で、顔画像を９つのエリアに分割して、各々のエリア毎に特徴抽出を行い、照合させるものも開示されている（例えば、特許文献２参照）。
【０００８】
また、顔の特徴点の定め方について、例えば特許文献３に開示されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００６−８５２４９号公報
【特許文献２】特開２００９−２１１４２５号公報
【特許文献３】特開昭６１−１７５５０９号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
しかし、特許文献１に示す場合では、顔画像を任意のサイズに分割する点で、顔画像には、眉毛・眼・鼻・口・ほおなどの部位があるにもかかわらず、任意に分割するために、眼や鼻等の部位が分割されるケースもあり、認証精度に影響を及ぼすケースができてしまうという問題があった。
【００１１】
また、特許文献２に示す場合では、顔画像を９つのエリアに分割して、各々のエリア毎に特徴点を抽出して、照合しようとしているが、各々のエリアでも、歩行者の顔が髪の毛で眉毛が見えなかったり、眼をふさいでいたり、照合用顔画像として利用できない場合、当該エリアは不整合扱いとなり、その他のエリアが合致しても認証されないケースが発生してしまうという問題があった。
【００１２】
本発明は、上記のような問題を解決すべくなされたものであり、特徴点が抽出されないエリアがある場合でも、適切に人物認証が可能な人物認証装置およびコンピュータプログラムの提供を目的とする。
【課題を解決するための手段】
【００１３】
本発明にかかる人物認証装置は、顔画像のデータに対し、前記顔画像を複数のエリアに分割する処理を行う、分割手段と、前記複数のエリア毎に特徴点データを抽出する処理を、当該抽出が可能な全エリアに対して行う、抽出手段と、照合の基準とすべき登録顔画像について前記抽出した前記特徴点データを、登録顔画像の登録特徴点データとして予め登録する登録手段と、照合の対象とすべき照合対象顔画像について前記抽出した前記特徴点データである、照合対象顔画像の照合対象特徴点データと、前記登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う照合手段とを備え、前記照合手段は、前記照合対象特徴点データと、対応する前記登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う。
【発明の効果】
【００１４】
本発明にかかる第１の人物認証装置によれば、顔画像を複数のエリアに分割する処理を行う、分割手段と、前記複数のエリア毎に特徴点データを抽出する処理を、当該抽出が可能な全エリアに対して行う、抽出手段と、照合の基準とすべき登録顔画像について前記抽出した前記特徴点データを、登録顔画像の登録特徴点データとして予め登録する登録手段と、照合対象顔画像の照合対象特徴点データと、前記登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う照合手段とを備え、前記照合手段は、前記照合対象特徴点データと、対応する前記登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、前記照合対象顔画像と前記登録顔画像との照合を行うことにより、特徴点データを抽出できないエリアを除いて顔画像の登録、照合を行うことができ、無駄な照合を減らし、照合での誤認証を減らすことができる。
【図面の簡単な説明】
【００１５】
【図１】実施の形態１にかかる人物認証装置の構成ブロック図である。
【図２】実施の形態１にかかる人物認証装置の、登録動作を示すフローチャートである。
【図３】実施の形態１にかかる人物認証装置の、照合動作を示すフローチャートである。
【図４】顔画像の分割の様子を示す図である。
【図５】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図６】特徴点抽出の具体例を示す図である。
【図７】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図８】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図９】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図１０】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図１１】顔画像の分割の様子を示す図である。
【発明を実施するための形態】
【００１６】
＜Ａ．実施の形態１＞
＜Ａ−１．構成＞
図１に、本発明にかかる人物認証装置の構成図を示す。なお、人物認証装置は、ソフトウェアで実現可能であり、当該ソフトウェアは、コンピュータにインストールされて実行されることにより、コンピュータを人物認証装置として機能させることができる。
【００１７】
図に示すように人物認証装置は、撮像領域内の画像を撮像する撮像手段１と、撮像手段１において取得した人物画像から、人物の顔画像（照合対象顔画像）を抽出する第１抽出手段２と、照合対象顔画像のデータに対し、複数のエリアに分割する処理を行う分割手段３とを備える。本発明では、分割手段３において分割できる顔画像のデータが取得できさえすればよく、人物画像を取得する手段や、人物画像から顔画像を抽出する手段は、必須の構成ではない。すなわち、撮像手段１、第１抽出手段２は、顔画像（照合対象顔画像および後述する登録顔画像）のデータが別途の手段から付与される場合には、必ずしも備えられなくともよい。ここで、分割手段３における分割エリアは、それぞれ任意に設定することができ、例えば、後述する特徴点データを抽出しやすいよう、顔における特徴となる部分（眼、鼻、口等）ごとに対応させて設定するのが望ましい。
【００１８】
さらに、照合対象顔画像の、分割した各エリアごとに特徴点を、特徴点データ（特に、照合対象顔画像について抽出した特徴点データを、照合対象特徴点データとする）として抽出する第２抽出手段４（抽出手段）を備える。当該抽出処理は、抽出が可能なエリア全てに行われるものである。ここで特徴点とは、顔の外形、眉毛、眼、鼻、耳、口等の位置、大きさ、太さ、角度等と、それらの相対関係を指す（例えば、特許文献３参照）。各々のエリア毎での特徴点データの抽出とは、顔のパーツ（顔の外形、眉毛、眼、鼻、耳、口等）の位置、大きさ、太さ、角度等を計測し、抽出することである。
【００１９】
第２抽出手段４において抽出された特徴点データは、チェック手段５において、画像（または撮像された人物）の状態によって特徴点データを抽出できなかったエリアがないかどうかがチェックされる。
【００２０】
照合動作の場合、照合手段７において、得られた照合対象顔画像の照合対象特徴点データと、登録手段６に予め登録されている登録顔画像の登録特徴点データとが、対応するエリアごとに照合される。このとき、チェック手段５において、特徴点データが抽出できなかったと判断されたエリアについては、照合対象から除外する。
【００２１】
ここで、登録手段６における登録顔画像とは、照合の基準とすべき顔画像であり、照合対象顔画像と同様に、取得された人物画像から顔画像が抽出されたものであり、登録手段６における登録特徴点データは、分割されたエリア毎に特徴点データが抽出されたものである。分割エリアは、照合対象特徴点データと登録特徴点データとで、対応するように設定されている。
【００２２】
照合結果に基づいて、照合対象顔画像と登録顔画像との照合を行い、照合対象顔画像に表示された顔の人物が予め登録しておいた人物と一致すると判断される場合には、通知手段８によって通知することができる。
【００２３】
＜Ａ−２．登録動作＞
図２は、登録顔画像および登録特徴点データの登録動作を示すフローチャートである。
【００２４】
まず、撮像手段１を用いて人物画像を取得、さらに第１抽出手段２において顔画像を抽出して、分割手段３に入力する（ステップＳ１１）。
【００２５】
分割手段３において、入力された顔画像の処理対象領域を終端構造・正規化を行う（ステップＳ１２）。さらに顔画像を５つのエリアに分割し（ステップＳ１３）、第２抽出手段４において、各エリア毎に特徴点データを抽出する（ステップＳ１４）。抽出の具体的内容としては、各エリアにおいて、顔のパーツ（例えば、顔の外形、眉毛、眼、鼻、耳、口等）の位置、大きさ、太さ、角度等を計測する。
【００２６】
図４に、顔画像の処理対象領域５つのエリア分割を示す。図４（ａ）は、顔画像入力後、処理対象領域を終端構造・正規化した画像である。これを、向かって左眉毛・右眉毛・左眼・右眼・眼の下の鼻／口／頬エリアに分割したものが図４（ｂ）である。さらに、それぞれのエリアに対して、Ａ領域（左眉毛）・Ｂ領域（右眉毛）・Ｃ領域（左眼）・Ｄ領域（右眼）・Ｅ領域（鼻／口／頬）と設定する（図４（ｃ））。
【００２７】
取得した顔画像には、髪の毛が眉毛に掛かっているものや、髪の毛が眼に掛かっているもの等がある。このようなケースでは、例えば、眉毛の位置・大きさ・太さ・角度等を計測する場合に、眉毛形状を把握できないために、眉毛の位置・大きさ・太さ・角度等の測定が不能となる。このため、各々のエリアに分割された顔画像にて、特徴点データを抽出できない場合がある。このように特徴点データが抽出できなかったエリアが存在するか否かを、チェック手段５においてチェックする（図２のステップＳ１５）。
【００２８】
図５に、特徴点データのデータ内容リストを示す。図５（ａ）は、図４（ｂ）（ｃ）に対応する、顔画像のエリアを示したものであり、図５（ｂ）は、顔画像に対応する特徴点データの、抽出されたパターンを示したものである。
【００２９】
図５（ｂ）に示すような、抽出されない特徴点データが存在するようなケースの具体例を、図６に示す。例えば、向かって左眉毛が髪の毛で掛かってしまった場合、図６（ａ）に示すように、眉毛の上の境目が見えなくなってしまい、特徴点データを抽出できないと判断される。
【００３０】
又、左眼に髪の毛が掛かってしまった場合、図６（ｂ）に示すように、眼の眼球部分が覆い隠されてしまい、まぶたや瞳・眼の輪郭を取得できず、特徴点データを抽出できないと判断される。
【００３１】
第２抽出手段４においては、このようなエリアを除外して、特徴点データが抽出可能なエリアで構成される顔画像全体の特徴点データを抽出する（ステップＳ１６）。顔画像全体に対して特徴点データを抽出するのは、エリア毎の特徴点データのみでは、顔の各パーツの計測ができるが、眼と眼との間や眼と鼻との間等の、各パーツ間の相対関係を計測できないからである。顔画像全体に対して特徴点データを抽出することで、顔の各パーツの計測とともに、パーツ内およびパーツ間の相対関係を計測することとしている。
【００３２】
図６（ｃ）は、例えば、向かって左眉毛が特徴点データを取れなかったケースのイメージ図となる。図６（ｄ）は、例えば、向かって右眉毛が特徴点データを取れなかったケースのイメージ図となる。
【００３３】
ここで、特徴点データが抽出されたエリアについての登録動作を示す。
【００３４】
登録顔画像の登録特徴点データが全エリアについて抽出されている場合に、対応する照合対象顔画像の照合対象特徴点データが、髪の毛が伸びていたり、眼に掛かってしまったりして、全エリアについては抽出されない場合がある。
【００３５】
このような場合に、照合に用いる特徴点データとしては、双方の顔画像で抽出がされたエリアのみ、すなわち、一方の顔画像でも、特徴点データが抽出されていないエリアについては、照合対象から除外する。
【００３６】
よって、登録顔画像の特徴点データとしては、様々な抽出パターンの照合対象顔画像に対応するため、予め特徴点データの除外パターンを作成しておく（ステップＳ１７）。すなわち、まず、抽出できた全てのエリアで特徴点データを登録（全エリアについて抽出できた場合は、全エリアについて登録）し、順次、各エリアの特徴点データが仮に抽出できなかったとして登録していく。登録は、登録手段６において行う（ステップＳ１８）。
【００３７】
登録時に、左眉毛エリアが髪の毛で隠れていた歩行者が、照合時にも、必ず左眉毛エリアが髪の毛で隠れた状態で歩行するとは限らない。風吹いていたり、髪の毛を短くしていたりすれば、特徴点データを抽出できなくなるエリアは変わってくる。
【００３８】
このような場合であっても対応できるようにするため、様々なエリアの特徴点データが抽出できなかった除外パターンを作成しておく。
【００３９】
このように登録しておくことで、図５（ｂ）に示すように、照合対象特徴点データの抽出パターンに応じて、登録特徴点データの抽出パターンを使い分けることができる。
【００４０】
＜Ａ−３．照合動作＞
図３は、照合対象顔画像および照合対象特徴点データの照合動作を示すフローチャートである。
【００４１】
まず、撮像手段１を用いて人物画像を取得、さらに第１抽出手段２において顔画像を抽出して、分割手段３に入力する（ステップＳ２１）。
【００４２】
分割手段３において、入力された照合対象顔画像の処理対象領域を終端構造・正規化を行う（ステップＳ２２）。さらに顔画像を５つのエリアに分割し（ステップＳ２３）、第２抽出手段４において、各エリア毎に特徴点データを抽出する（ステップＳ２４）。顔登録時と同様に、各エリアにおいて、顔のパーツ（例えば、顔の外形、眉毛、眼、鼻、耳、口等）の位置、大きさ、太さ、角度等を計測する。
【００４３】
特徴点データが抽出できなかったエリアが存在するか否かを、チェック手段５においてチェックする（ステップＳ２５）。第２抽出手段４において、このようなエリアを除外して、特徴点データが抽出可能なエリアで構成される顔画像全体の特徴点データを抽出する（ステップＳ２６）。
【００４４】
ここで、特徴点データが抽出されたエリアについての照合動作を示す。
【００４５】
登録時に特徴点データが抽出されていないエリアが、照合時には特徴点データが抽出できる場合も生じる。例えば、登録時は長髪（眉毛が眼に掛かっている）にしていたが、照合時は髪を切って丸刈り（眉毛が眼に掛からない）にしているような場合である。
【００４６】
このため、照合対象顔画像の照合対象特徴点データについても、様々な抽出パターンの登録顔画像に対応するため、特徴点データの除外パターンを作成する（ステップＳ２７）。すなわち、まず、抽出できた全エリアの特徴点データのうち、登録顔画像において特徴点データが抽出されたエリアの特徴点データを照合対象特徴点データとして抽出し、登録顔画像において特徴点データが抽出されなかったエリアの特徴点データは、仮に抽出できなかったとして照合から除外する。
【００４７】
照合対象となる特徴点データが定まったら、照合対象特徴点データと登録特徴点データとを照合手段７において照合する（ステップＳ２８）。
【００４８】
照合の結果、照合対象特徴点データと登録特徴点データとが一致し、すなわち、照合対象顔画像と登録顔画像とが一致すると判断できる場合には、一致の通知をする（ステップＳ３０）。また、不一致の場合には、非通知（ステップＳ３１）とすることができるが、不一致の通知をしてもよい。
【００４９】
登録特徴点データと照合対象特徴点データとの照合の例は、図７、８に示す。図７（ａ）は登録顔画像を正規化したものであり、登録特徴点データを抽出できないエリアがないケースである。図７（ｂ）は、顔画像に対応する特徴点データの、抽出されたパターンを示したものである。特徴点データが各エリアで全て抽出できた場合（ＮＯ．１）から、向かって左眉毛なしの場合（ＮＯ．２）、その他各種の抽出パターンを備えている。
【００５０】
図８（ａ）は照合対象顔画像を正規化したものであり、向かって左眉毛なしのパターン（ＮＯ．２）に相当する（図８（ｂ））。ただ前述の通り、照合対象特徴点データが抽出できていないエリアが、登録特徴点データ抽出できているパターンだけとは限らないため、それ以外のパターンについても、特徴点データを抽出し備えている（図８（ｂ））。
【００５１】
照合対象顔画像が左眉毛なしのパターン（ＮＯ．２）なので、図８（ｂ）のＮＯ．２と、図７（ｂ）のＮＯ．２（登録顔画像の特徴点データリスト）とを照合することになる。当該照合は、照合手段７において行われる（図３のステップＳ２８）。
【００５２】
このように、特徴点データが抽出できなかったエリアの特徴点データを除外することで、無駄な照合動作を減らすことができる。更に、特徴点データが抽出されておらず、照合に使用できないエリアを用いて照合することに伴って生じる、誤認証を減らすことができる。その結果、人物認証スピードの向上にも寄与することができる。
【００５３】
さらに、登録特徴点データと照合対象特徴点データとの照合の例は、図９、１０に示す。図９（ａ）は登録顔画像を正規化したものであり、左眉毛が髪の毛で隠れている。図９（ｂ）は、顔画像に対応する特徴点データの、抽出されたパターンを示したものである。左眉毛が髪の毛で隠れているため、特徴点データが各エリアで全て抽出できた場合（ＮＯ．１）が作成されない。
【００５４】
図１０（ａ）は照合対象顔画像を正規化したものであり、特徴点データを抽出できなかったエリアがないケースである。それ各種のパターンについても、特徴点データを抽出し備えている（図１０（ｂ））。
【００５５】
登録顔画像が左眉毛なしのパターン（ＮＯ．２）なので、図９（ｂ）のＮＯ．２と、図１０（ｂ）のＮＯ．２（照合対象顔画像の特徴点データリスト）とを照合することになる。当該照合は、照合手段７において行われる（図３のステップＳ２８）。
【００５６】
ここで、その他の顔画像（照合対象顔画像、登録顔画像）の分割パターンを図１１に示す。図１１（ａ）（ｂ）は、鼻／口／頬部分を３つに分割するパターンである。Ａ領域（左眉毛）・Ｂ領域（右眉毛）・Ｃ領域（左眼）・Ｄ領域（右眼）・Ｅ領域（左頬）・Ｆ領域（鼻／口）・Ｇ領域（右頬）と設定する（図１１（ｂ））。
【００５７】
図１１（ｃ）（ｄ）は、鼻／口／頬部分を４つに分割するパターンである。Ａ領域（左眉毛）・Ｂ領域（右眉毛）・Ｃ領域（左眼）・Ｄ領域（右眼）・Ｅ領域（左頬）・Ｆ領域（鼻）・Ｇ領域（口）・Ｈ領域（右頬）と設定する（図１１（ｄ））。
【００５８】
分割数が多くなる程、特徴点データを抽出できないエリアが増大することとなり、登録時・照合時の特徴点データリスト作成の負荷は増大する一方、照合の対象から除外するエリアを局所化できるため、認証精度向上につながる。
【００５９】
＜Ａ−４．効果＞
本発明にかかる実施の形態１によれば、人物認証装置において、顔画像を複数のエリアに分割する処理を行う、分割手段３と、抽出が可能な全エリアに対して特徴点データを抽出する、抽出手段としての第２抽出手段４と、登録顔画像の登録特徴点データを登録する登録手段６と、照合対象顔画像の照合対象特徴点データと、登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、照合対象顔画像と登録顔画像との照合を行う照合手段７とを備え、照合手段７は、照合対象特徴点データと、対応する登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、照合対象顔画像と登録顔画像との照合を行うことで、特徴点データを抽出できないエリアを除いて顔画像の登録、照合を行うことができ、無駄な照合を減らし、照合での誤認証を減らすことができる。また、認証スピードの向上を図ることができる。
【００６０】
さらに、照合不可能なエリアを照合対象から取り除くこととしているため、顔認証対象の歩行者等の、髪の毛の影響や表情の変化に、即時、臨機応変で対応することができるようになる。
【００６１】
また、分割数が多くなる程、対象除外するエリアを局所化できるため、認証精度向上につながる。
【００６２】
また、本発明にかかる実施の形態１によれば、人物認証装置において、照合手段７における照合の結果、照合対象顔画像と登録顔画像とが一致する場合にのみ通知する通知手段８をさらに備えることで、効率的に通知することができる。
【００６３】
本発明の実施の形態では、各構成要素の材質、材料、実施の条件等についても記載しているが、これらは例示であって記載したものに限られるものではない。
【符号の説明】
【００６４】
１ 撮像手段、２ 第１抽出手段、３ 分割手段、４ 第２抽出手段、５ チェック手段、６ 登録手段、７ 照合手段、８ 通知手段。
【技術分野】
【０００１】
本発明は、画像を利用した人物認証装置およびコンピュータプログラムに関する。特に、人物を認証対象とし、当該人物から取得した顔画像を、予め登録された顔画像と照合することにより、当該人物が予め登録された人物であるかを判定する人物認証装置およびコンピュータプログラムに関する。
【背景技術】
【０００２】
人物認証装置を用いて人物認証をする場合、まず、人物（例えば歩行者）から顔画像を取得するために、人物の動線に向けて撮像カメラを設置する。
【０００３】
次に、撮像カメラの撮影領域に侵入してきた人物の顔画像を単位時間あたり数コマで撮影して、画像中にある人物の顔画像を検出する。
【０００４】
検出した顔画像と、予め登録された顔画像とを照合することにより、その顔画像が、予め登録した人物と同一人物の顔画像であるかを判断する。このような動作をもって、人物の認証を行う。
【０００５】
ここで、検出した顔画像の顔幅が所定の大きさ以上である場合には、顔画像を同一人物あたり複数枚取得して、その後の顔照合処理に供給することができる。
【０００６】
また、取得した顔画像での認証精度の向上、認証スピードの向上のため、顔画像を任意のサイズに分割して、各々の分割単位ごとに照合させるものも開示されている（例えば、特許文献１参照）。
【０００７】
さらに、同様の目的で、顔画像を９つのエリアに分割して、各々のエリア毎に特徴抽出を行い、照合させるものも開示されている（例えば、特許文献２参照）。
【０００８】
また、顔の特徴点の定め方について、例えば特許文献３に開示されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００６−８５２４９号公報
【特許文献２】特開２００９−２１１４２５号公報
【特許文献３】特開昭６１−１７５５０９号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
しかし、特許文献１に示す場合では、顔画像を任意のサイズに分割する点で、顔画像には、眉毛・眼・鼻・口・ほおなどの部位があるにもかかわらず、任意に分割するために、眼や鼻等の部位が分割されるケースもあり、認証精度に影響を及ぼすケースができてしまうという問題があった。
【００１１】
また、特許文献２に示す場合では、顔画像を９つのエリアに分割して、各々のエリア毎に特徴点を抽出して、照合しようとしているが、各々のエリアでも、歩行者の顔が髪の毛で眉毛が見えなかったり、眼をふさいでいたり、照合用顔画像として利用できない場合、当該エリアは不整合扱いとなり、その他のエリアが合致しても認証されないケースが発生してしまうという問題があった。
【００１２】
本発明は、上記のような問題を解決すべくなされたものであり、特徴点が抽出されないエリアがある場合でも、適切に人物認証が可能な人物認証装置およびコンピュータプログラムの提供を目的とする。
【課題を解決するための手段】
【００１３】
本発明にかかる人物認証装置は、顔画像のデータに対し、前記顔画像を複数のエリアに分割する処理を行う、分割手段と、前記複数のエリア毎に特徴点データを抽出する処理を、当該抽出が可能な全エリアに対して行う、抽出手段と、照合の基準とすべき登録顔画像について前記抽出した前記特徴点データを、登録顔画像の登録特徴点データとして予め登録する登録手段と、照合の対象とすべき照合対象顔画像について前記抽出した前記特徴点データである、照合対象顔画像の照合対象特徴点データと、前記登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う照合手段とを備え、前記照合手段は、前記照合対象特徴点データと、対応する前記登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う。
【発明の効果】
【００１４】
本発明にかかる第１の人物認証装置によれば、顔画像を複数のエリアに分割する処理を行う、分割手段と、前記複数のエリア毎に特徴点データを抽出する処理を、当該抽出が可能な全エリアに対して行う、抽出手段と、照合の基準とすべき登録顔画像について前記抽出した前記特徴点データを、登録顔画像の登録特徴点データとして予め登録する登録手段と、照合対象顔画像の照合対象特徴点データと、前記登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う照合手段とを備え、前記照合手段は、前記照合対象特徴点データと、対応する前記登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、前記照合対象顔画像と前記登録顔画像との照合を行うことにより、特徴点データを抽出できないエリアを除いて顔画像の登録、照合を行うことができ、無駄な照合を減らし、照合での誤認証を減らすことができる。
【図面の簡単な説明】
【００１５】
【図１】実施の形態１にかかる人物認証装置の構成ブロック図である。
【図２】実施の形態１にかかる人物認証装置の、登録動作を示すフローチャートである。
【図３】実施の形態１にかかる人物認証装置の、照合動作を示すフローチャートである。
【図４】顔画像の分割の様子を示す図である。
【図５】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図６】特徴点抽出の具体例を示す図である。
【図７】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図８】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図９】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図１０】顔画像の分割と特徴点データのデータ内容リストを示す図である。
【図１１】顔画像の分割の様子を示す図である。
【発明を実施するための形態】
【００１６】
＜Ａ．実施の形態１＞
＜Ａ−１．構成＞
図１に、本発明にかかる人物認証装置の構成図を示す。なお、人物認証装置は、ソフトウェアで実現可能であり、当該ソフトウェアは、コンピュータにインストールされて実行されることにより、コンピュータを人物認証装置として機能させることができる。
【００１７】
図に示すように人物認証装置は、撮像領域内の画像を撮像する撮像手段１と、撮像手段１において取得した人物画像から、人物の顔画像（照合対象顔画像）を抽出する第１抽出手段２と、照合対象顔画像のデータに対し、複数のエリアに分割する処理を行う分割手段３とを備える。本発明では、分割手段３において分割できる顔画像のデータが取得できさえすればよく、人物画像を取得する手段や、人物画像から顔画像を抽出する手段は、必須の構成ではない。すなわち、撮像手段１、第１抽出手段２は、顔画像（照合対象顔画像および後述する登録顔画像）のデータが別途の手段から付与される場合には、必ずしも備えられなくともよい。ここで、分割手段３における分割エリアは、それぞれ任意に設定することができ、例えば、後述する特徴点データを抽出しやすいよう、顔における特徴となる部分（眼、鼻、口等）ごとに対応させて設定するのが望ましい。
【００１８】
さらに、照合対象顔画像の、分割した各エリアごとに特徴点を、特徴点データ（特に、照合対象顔画像について抽出した特徴点データを、照合対象特徴点データとする）として抽出する第２抽出手段４（抽出手段）を備える。当該抽出処理は、抽出が可能なエリア全てに行われるものである。ここで特徴点とは、顔の外形、眉毛、眼、鼻、耳、口等の位置、大きさ、太さ、角度等と、それらの相対関係を指す（例えば、特許文献３参照）。各々のエリア毎での特徴点データの抽出とは、顔のパーツ（顔の外形、眉毛、眼、鼻、耳、口等）の位置、大きさ、太さ、角度等を計測し、抽出することである。
【００１９】
第２抽出手段４において抽出された特徴点データは、チェック手段５において、画像（または撮像された人物）の状態によって特徴点データを抽出できなかったエリアがないかどうかがチェックされる。
【００２０】
照合動作の場合、照合手段７において、得られた照合対象顔画像の照合対象特徴点データと、登録手段６に予め登録されている登録顔画像の登録特徴点データとが、対応するエリアごとに照合される。このとき、チェック手段５において、特徴点データが抽出できなかったと判断されたエリアについては、照合対象から除外する。
【００２１】
ここで、登録手段６における登録顔画像とは、照合の基準とすべき顔画像であり、照合対象顔画像と同様に、取得された人物画像から顔画像が抽出されたものであり、登録手段６における登録特徴点データは、分割されたエリア毎に特徴点データが抽出されたものである。分割エリアは、照合対象特徴点データと登録特徴点データとで、対応するように設定されている。
【００２２】
照合結果に基づいて、照合対象顔画像と登録顔画像との照合を行い、照合対象顔画像に表示された顔の人物が予め登録しておいた人物と一致すると判断される場合には、通知手段８によって通知することができる。
【００２３】
＜Ａ−２．登録動作＞
図２は、登録顔画像および登録特徴点データの登録動作を示すフローチャートである。
【００２４】
まず、撮像手段１を用いて人物画像を取得、さらに第１抽出手段２において顔画像を抽出して、分割手段３に入力する（ステップＳ１１）。
【００２５】
分割手段３において、入力された顔画像の処理対象領域を終端構造・正規化を行う（ステップＳ１２）。さらに顔画像を５つのエリアに分割し（ステップＳ１３）、第２抽出手段４において、各エリア毎に特徴点データを抽出する（ステップＳ１４）。抽出の具体的内容としては、各エリアにおいて、顔のパーツ（例えば、顔の外形、眉毛、眼、鼻、耳、口等）の位置、大きさ、太さ、角度等を計測する。
【００２６】
図４に、顔画像の処理対象領域５つのエリア分割を示す。図４（ａ）は、顔画像入力後、処理対象領域を終端構造・正規化した画像である。これを、向かって左眉毛・右眉毛・左眼・右眼・眼の下の鼻／口／頬エリアに分割したものが図４（ｂ）である。さらに、それぞれのエリアに対して、Ａ領域（左眉毛）・Ｂ領域（右眉毛）・Ｃ領域（左眼）・Ｄ領域（右眼）・Ｅ領域（鼻／口／頬）と設定する（図４（ｃ））。
【００２７】
取得した顔画像には、髪の毛が眉毛に掛かっているものや、髪の毛が眼に掛かっているもの等がある。このようなケースでは、例えば、眉毛の位置・大きさ・太さ・角度等を計測する場合に、眉毛形状を把握できないために、眉毛の位置・大きさ・太さ・角度等の測定が不能となる。このため、各々のエリアに分割された顔画像にて、特徴点データを抽出できない場合がある。このように特徴点データが抽出できなかったエリアが存在するか否かを、チェック手段５においてチェックする（図２のステップＳ１５）。
【００２８】
図５に、特徴点データのデータ内容リストを示す。図５（ａ）は、図４（ｂ）（ｃ）に対応する、顔画像のエリアを示したものであり、図５（ｂ）は、顔画像に対応する特徴点データの、抽出されたパターンを示したものである。
【００２９】
図５（ｂ）に示すような、抽出されない特徴点データが存在するようなケースの具体例を、図６に示す。例えば、向かって左眉毛が髪の毛で掛かってしまった場合、図６（ａ）に示すように、眉毛の上の境目が見えなくなってしまい、特徴点データを抽出できないと判断される。
【００３０】
又、左眼に髪の毛が掛かってしまった場合、図６（ｂ）に示すように、眼の眼球部分が覆い隠されてしまい、まぶたや瞳・眼の輪郭を取得できず、特徴点データを抽出できないと判断される。
【００３１】
第２抽出手段４においては、このようなエリアを除外して、特徴点データが抽出可能なエリアで構成される顔画像全体の特徴点データを抽出する（ステップＳ１６）。顔画像全体に対して特徴点データを抽出するのは、エリア毎の特徴点データのみでは、顔の各パーツの計測ができるが、眼と眼との間や眼と鼻との間等の、各パーツ間の相対関係を計測できないからである。顔画像全体に対して特徴点データを抽出することで、顔の各パーツの計測とともに、パーツ内およびパーツ間の相対関係を計測することとしている。
【００３２】
図６（ｃ）は、例えば、向かって左眉毛が特徴点データを取れなかったケースのイメージ図となる。図６（ｄ）は、例えば、向かって右眉毛が特徴点データを取れなかったケースのイメージ図となる。
【００３３】
ここで、特徴点データが抽出されたエリアについての登録動作を示す。
【００３４】
登録顔画像の登録特徴点データが全エリアについて抽出されている場合に、対応する照合対象顔画像の照合対象特徴点データが、髪の毛が伸びていたり、眼に掛かってしまったりして、全エリアについては抽出されない場合がある。
【００３５】
このような場合に、照合に用いる特徴点データとしては、双方の顔画像で抽出がされたエリアのみ、すなわち、一方の顔画像でも、特徴点データが抽出されていないエリアについては、照合対象から除外する。
【００３６】
よって、登録顔画像の特徴点データとしては、様々な抽出パターンの照合対象顔画像に対応するため、予め特徴点データの除外パターンを作成しておく（ステップＳ１７）。すなわち、まず、抽出できた全てのエリアで特徴点データを登録（全エリアについて抽出できた場合は、全エリアについて登録）し、順次、各エリアの特徴点データが仮に抽出できなかったとして登録していく。登録は、登録手段６において行う（ステップＳ１８）。
【００３７】
登録時に、左眉毛エリアが髪の毛で隠れていた歩行者が、照合時にも、必ず左眉毛エリアが髪の毛で隠れた状態で歩行するとは限らない。風吹いていたり、髪の毛を短くしていたりすれば、特徴点データを抽出できなくなるエリアは変わってくる。
【００３８】
このような場合であっても対応できるようにするため、様々なエリアの特徴点データが抽出できなかった除外パターンを作成しておく。
【００３９】
このように登録しておくことで、図５（ｂ）に示すように、照合対象特徴点データの抽出パターンに応じて、登録特徴点データの抽出パターンを使い分けることができる。
【００４０】
＜Ａ−３．照合動作＞
図３は、照合対象顔画像および照合対象特徴点データの照合動作を示すフローチャートである。
【００４１】
まず、撮像手段１を用いて人物画像を取得、さらに第１抽出手段２において顔画像を抽出して、分割手段３に入力する（ステップＳ２１）。
【００４２】
分割手段３において、入力された照合対象顔画像の処理対象領域を終端構造・正規化を行う（ステップＳ２２）。さらに顔画像を５つのエリアに分割し（ステップＳ２３）、第２抽出手段４において、各エリア毎に特徴点データを抽出する（ステップＳ２４）。顔登録時と同様に、各エリアにおいて、顔のパーツ（例えば、顔の外形、眉毛、眼、鼻、耳、口等）の位置、大きさ、太さ、角度等を計測する。
【００４３】
特徴点データが抽出できなかったエリアが存在するか否かを、チェック手段５においてチェックする（ステップＳ２５）。第２抽出手段４において、このようなエリアを除外して、特徴点データが抽出可能なエリアで構成される顔画像全体の特徴点データを抽出する（ステップＳ２６）。
【００４４】
ここで、特徴点データが抽出されたエリアについての照合動作を示す。
【００４５】
登録時に特徴点データが抽出されていないエリアが、照合時には特徴点データが抽出できる場合も生じる。例えば、登録時は長髪（眉毛が眼に掛かっている）にしていたが、照合時は髪を切って丸刈り（眉毛が眼に掛からない）にしているような場合である。
【００４６】
このため、照合対象顔画像の照合対象特徴点データについても、様々な抽出パターンの登録顔画像に対応するため、特徴点データの除外パターンを作成する（ステップＳ２７）。すなわち、まず、抽出できた全エリアの特徴点データのうち、登録顔画像において特徴点データが抽出されたエリアの特徴点データを照合対象特徴点データとして抽出し、登録顔画像において特徴点データが抽出されなかったエリアの特徴点データは、仮に抽出できなかったとして照合から除外する。
【００４７】
照合対象となる特徴点データが定まったら、照合対象特徴点データと登録特徴点データとを照合手段７において照合する（ステップＳ２８）。
【００４８】
照合の結果、照合対象特徴点データと登録特徴点データとが一致し、すなわち、照合対象顔画像と登録顔画像とが一致すると判断できる場合には、一致の通知をする（ステップＳ３０）。また、不一致の場合には、非通知（ステップＳ３１）とすることができるが、不一致の通知をしてもよい。
【００４９】
登録特徴点データと照合対象特徴点データとの照合の例は、図７、８に示す。図７（ａ）は登録顔画像を正規化したものであり、登録特徴点データを抽出できないエリアがないケースである。図７（ｂ）は、顔画像に対応する特徴点データの、抽出されたパターンを示したものである。特徴点データが各エリアで全て抽出できた場合（ＮＯ．１）から、向かって左眉毛なしの場合（ＮＯ．２）、その他各種の抽出パターンを備えている。
【００５０】
図８（ａ）は照合対象顔画像を正規化したものであり、向かって左眉毛なしのパターン（ＮＯ．２）に相当する（図８（ｂ））。ただ前述の通り、照合対象特徴点データが抽出できていないエリアが、登録特徴点データ抽出できているパターンだけとは限らないため、それ以外のパターンについても、特徴点データを抽出し備えている（図８（ｂ））。
【００５１】
照合対象顔画像が左眉毛なしのパターン（ＮＯ．２）なので、図８（ｂ）のＮＯ．２と、図７（ｂ）のＮＯ．２（登録顔画像の特徴点データリスト）とを照合することになる。当該照合は、照合手段７において行われる（図３のステップＳ２８）。
【００５２】
このように、特徴点データが抽出できなかったエリアの特徴点データを除外することで、無駄な照合動作を減らすことができる。更に、特徴点データが抽出されておらず、照合に使用できないエリアを用いて照合することに伴って生じる、誤認証を減らすことができる。その結果、人物認証スピードの向上にも寄与することができる。
【００５３】
さらに、登録特徴点データと照合対象特徴点データとの照合の例は、図９、１０に示す。図９（ａ）は登録顔画像を正規化したものであり、左眉毛が髪の毛で隠れている。図９（ｂ）は、顔画像に対応する特徴点データの、抽出されたパターンを示したものである。左眉毛が髪の毛で隠れているため、特徴点データが各エリアで全て抽出できた場合（ＮＯ．１）が作成されない。
【００５４】
図１０（ａ）は照合対象顔画像を正規化したものであり、特徴点データを抽出できなかったエリアがないケースである。それ各種のパターンについても、特徴点データを抽出し備えている（図１０（ｂ））。
【００５５】
登録顔画像が左眉毛なしのパターン（ＮＯ．２）なので、図９（ｂ）のＮＯ．２と、図１０（ｂ）のＮＯ．２（照合対象顔画像の特徴点データリスト）とを照合することになる。当該照合は、照合手段７において行われる（図３のステップＳ２８）。
【００５６】
ここで、その他の顔画像（照合対象顔画像、登録顔画像）の分割パターンを図１１に示す。図１１（ａ）（ｂ）は、鼻／口／頬部分を３つに分割するパターンである。Ａ領域（左眉毛）・Ｂ領域（右眉毛）・Ｃ領域（左眼）・Ｄ領域（右眼）・Ｅ領域（左頬）・Ｆ領域（鼻／口）・Ｇ領域（右頬）と設定する（図１１（ｂ））。
【００５７】
図１１（ｃ）（ｄ）は、鼻／口／頬部分を４つに分割するパターンである。Ａ領域（左眉毛）・Ｂ領域（右眉毛）・Ｃ領域（左眼）・Ｄ領域（右眼）・Ｅ領域（左頬）・Ｆ領域（鼻）・Ｇ領域（口）・Ｈ領域（右頬）と設定する（図１１（ｄ））。
【００５８】
分割数が多くなる程、特徴点データを抽出できないエリアが増大することとなり、登録時・照合時の特徴点データリスト作成の負荷は増大する一方、照合の対象から除外するエリアを局所化できるため、認証精度向上につながる。
【００５９】
＜Ａ−４．効果＞
本発明にかかる実施の形態１によれば、人物認証装置において、顔画像を複数のエリアに分割する処理を行う、分割手段３と、抽出が可能な全エリアに対して特徴点データを抽出する、抽出手段としての第２抽出手段４と、登録顔画像の登録特徴点データを登録する登録手段６と、照合対象顔画像の照合対象特徴点データと、登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、照合対象顔画像と登録顔画像との照合を行う照合手段７とを備え、照合手段７は、照合対象特徴点データと、対応する登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、照合対象顔画像と登録顔画像との照合を行うことで、特徴点データを抽出できないエリアを除いて顔画像の登録、照合を行うことができ、無駄な照合を減らし、照合での誤認証を減らすことができる。また、認証スピードの向上を図ることができる。
【００６０】
さらに、照合不可能なエリアを照合対象から取り除くこととしているため、顔認証対象の歩行者等の、髪の毛の影響や表情の変化に、即時、臨機応変で対応することができるようになる。
【００６１】
また、分割数が多くなる程、対象除外するエリアを局所化できるため、認証精度向上につながる。
【００６２】
また、本発明にかかる実施の形態１によれば、人物認証装置において、照合手段７における照合の結果、照合対象顔画像と登録顔画像とが一致する場合にのみ通知する通知手段８をさらに備えることで、効率的に通知することができる。
【００６３】
本発明の実施の形態では、各構成要素の材質、材料、実施の条件等についても記載しているが、これらは例示であって記載したものに限られるものではない。
【符号の説明】
【００６４】
１ 撮像手段、２ 第１抽出手段、３ 分割手段、４ 第２抽出手段、５ チェック手段、６ 登録手段、７ 照合手段、８ 通知手段。
【特許請求の範囲】
【請求項１】
顔画像のデータに対し、前記顔画像を複数のエリアに分割する処理を行う、分割手段と、
前記複数のエリア毎に特徴点データを抽出する処理を、当該抽出が可能な全エリアに対して行う、抽出手段と、
照合の基準とすべき登録顔画像について前記抽出した前記特徴点データを、登録顔画像の登録特徴点データとして予め登録する登録手段と、
照合の対象とすべき照合対象顔画像について前記抽出した前記特徴点データである、照合対象顔画像の照合対象特徴点データと、前記登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う照合手段とを備え、
前記照合手段は、前記照合対象特徴点データと、対応する前記登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う、
人物認証装置。
【請求項２】
前記分割手段は、前記照合対象顔画像を正規化し、複数のエリアに分割する処理を行う、
請求項１に記載の人物認証装置。
【請求項３】
前記分割手段は、前記照合対象顔画像を、左眉毛、右眉毛、左眼、右眼、および鼻／口／頬の５つのエリアに分割する処理を行う、
請求項１または２記載の人物認証装置。
【請求項４】
前記分割手段は、前記照合対象顔画像を、左眉毛、右眉毛、左眼、右眼、左頬、右頬、鼻／口の７つのエリアに分割する処理を行う、
請求項１または２記載の人物認証装置。
【請求項５】
前記分割手段は、前記照合対象顔画像を、左眉毛、右眉毛、左眼、右眼、左頬、右頬、鼻、口の８つのエリアに分割する処理を行う、
請求項１または２記載の人物認証装置。
【請求項６】
前記照合手段における照合の結果、前記照合対象顔画像と前記登録顔画像とが一致する場合にのみ通知する通知手段をさらに備える、
請求項１〜５のいずれかに記載の人物認証装置。
【請求項７】
コンピュータにインストールされて実行されることにより、前記コンピュータを請求項１〜６のいずれかに記載の人物認証装置として機能させる、
コンピュータプログラム。
【請求項１】
顔画像のデータに対し、前記顔画像を複数のエリアに分割する処理を行う、分割手段と、
前記複数のエリア毎に特徴点データを抽出する処理を、当該抽出が可能な全エリアに対して行う、抽出手段と、
照合の基準とすべき登録顔画像について前記抽出した前記特徴点データを、登録顔画像の登録特徴点データとして予め登録する登録手段と、
照合の対象とすべき照合対象顔画像について前記抽出した前記特徴点データである、照合対象顔画像の照合対象特徴点データと、前記登録特徴点データとを、対応する各エリア毎に照合し、当該照合結果に基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う照合手段とを備え、
前記照合手段は、前記照合対象特徴点データと、対応する前記登録特徴点データとの双方が抽出されたエリアにおける照合結果のみに基づいて、前記照合対象顔画像と前記登録顔画像との照合を行う、
人物認証装置。
【請求項２】
前記分割手段は、前記照合対象顔画像を正規化し、複数のエリアに分割する処理を行う、
請求項１に記載の人物認証装置。
【請求項３】
前記分割手段は、前記照合対象顔画像を、左眉毛、右眉毛、左眼、右眼、および鼻／口／頬の５つのエリアに分割する処理を行う、
請求項１または２記載の人物認証装置。
【請求項４】
前記分割手段は、前記照合対象顔画像を、左眉毛、右眉毛、左眼、右眼、左頬、右頬、鼻／口の７つのエリアに分割する処理を行う、
請求項１または２記載の人物認証装置。
【請求項５】
前記分割手段は、前記照合対象顔画像を、左眉毛、右眉毛、左眼、右眼、左頬、右頬、鼻、口の８つのエリアに分割する処理を行う、
請求項１または２記載の人物認証装置。
【請求項６】
前記照合手段における照合の結果、前記照合対象顔画像と前記登録顔画像とが一致する場合にのみ通知する通知手段をさらに備える、
請求項１〜５のいずれかに記載の人物認証装置。
【請求項７】
コンピュータにインストールされて実行されることにより、前記コンピュータを請求項１〜６のいずれかに記載の人物認証装置として機能させる、
コンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１２８７９２（Ｐ２０１２−１２８７９２Ａ）
【公開日】平成２４年７月５日（２０１２．７．５）
【国際特許分類】
【出願番号】特願２０１０−２８１７６８（Ｐ２０１０−２８１７６８）
【出願日】平成２２年１２月１７日（２０１０．１２．１７）
【出願人】（０００００６０１３）三菱電機株式会社 (33,312)
【Ｆターム（参考）】
【公開日】平成２４年７月５日（２０１２．７．５）
【国際特許分類】
【出願日】平成２２年１２月１７日（２０１０．１２．１７）
【出願人】（０００００６０１３）三菱電機株式会社 (33,312)
【Ｆターム（参考）】
[ Back to top ]