出入管理システム及び個人識別データ読取装置
【課題】個人認証対象者の人物特定を精度高く行える出入管理システム及び個人識別データ読取装置を提供することを目的とする。
【解決手段】画像撮影装置と、個人識別情報に基づき個人認証対象者の出入時の個人認証処理を表す個人識別情報処理情報を生成し出力する認証管理装置と、個人識別情報媒体から個人識別情報を読取り認証管理装置に出力するデータ読取手段と、画像撮影装置からの複数の静止画像の内所定条件に合った静止画像を選択し認証管理装置からの個人識別情報処理情報と組み合わせた検出画像データとして送信するデータ関連付け手段とを有した個人識別データ読取装置と、認証管理装置から受信した個人識別情報処理情報に応じた内容を表示するとともに、データ関連付け手段から受信した検出画像データの個人識別情報処理情報に基づき静止画像を表示する出入管理装置とを備えたことを特徴とする。
【解決手段】画像撮影装置と、個人識別情報に基づき個人認証対象者の出入時の個人認証処理を表す個人識別情報処理情報を生成し出力する認証管理装置と、個人識別情報媒体から個人識別情報を読取り認証管理装置に出力するデータ読取手段と、画像撮影装置からの複数の静止画像の内所定条件に合った静止画像を選択し認証管理装置からの個人識別情報処理情報と組み合わせた検出画像データとして送信するデータ関連付け手段とを有した個人識別データ読取装置と、認証管理装置から受信した個人識別情報処理情報に応じた内容を表示するとともに、データ関連付け手段から受信した検出画像データの個人識別情報処理情報に基づき静止画像を表示する出入管理装置とを備えたことを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、人のフロアへの出入を管理する出入管理システム、及びこの出入管理システムなどに用いられる個人識別データ読取装置に係り、特に、個人認証結果と個人認証対象者の撮影画像とにより個人認証対象者の人物特定を行えるものに関するものである。
【背景技術】
【０００２】
この種出入管理システムは、指紋や瞳の虹彩等を利用した生体認証、あるいはＩＣカードを用いた個人認証を行う個人識別データ読取装置を備えている。当該システムにおいては個人識別データ読取装置が読み込んだ個人情報を蓄積された個人情報と比較し、認証の成功または失敗を表す個人認証結果信号を出力するものであり、この信号に基づいて部屋等への人（個人認証対象者）の出入が管理される。一方、出入管理システムは個人認証操作を行う個人認証対象者の人物特定をも可能にしている。すなわち、個人認証結果に加えて、その認証時刻における個人認証対象者の撮影画像をPC端末上に表示させる機能を有し、個人認証対象者の人物特定を行っている。このような機能を有することにより、個人認証結果が認証成功であった場合、個人認証対象者の氏名と顔の特定をも可能にしている。また、個人認証結果が認証失敗であった場合、個人認証対象者の氏名は特定できないが、個人認証対象者の撮影画像により、不審者としての顔を確認できる。その結果、セキュリティの向上が図れるものである（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−２７７９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の出入管理システムは、個人認証対象者の人物特定を認証時刻における撮影画像で行っているため、例えば、認証時刻にカメラの方向に顔を向けていない場合など、撮影画像から顔を認識できず人物特定を行えないという問題があった。
【０００５】
本発明はこのような問題点を解決するためになされたものであり、個人認証対象者の人物特定を精度高く行える出入管理システム及び個人識別データ読取装置を得ることを目的とする。
【課題を解決するための手段】
【０００６】
本発明に係る出入管理システムは、出入口扉近辺の特定エリアの出入口を撮影するように配置される画像撮影装置と、複数の個人識別情報が蓄積され、受信した個人識別情報と前記蓄積個人識別情報とを比較、照合し、認証の成功または失敗を表す個人認証結果信号を前記出入口扉の錠の開錠と施錠を制御する信号として出力するとともに、前記受信した個人識別情報に基づき個人認証対象者の前記出入口通行時の個人認証処理を表す個人識別情報処理情報を生成し、出力する認証管理装置と、前記出入口扉近辺の出入口に設置され、個人識別情報が記憶された個人識別情報媒体を感知すると当該個人識別情報媒体から個人識別情報を読み取り、この個人識別情報を前記認証管理装置に出力するデータ読取手段と、前記画像撮影装置からの複数の静止画像の内、所定の条件に合った静止画像を選択し、選択した静止画像と前記認証管理装置からの個人識別情報処理情報とを組み合わせた検出画像データとして送信するデータ関連付け手段とを有した個人識別データ読取装置と、前記認証管理装置からの個人識別情報処理情報を受信し、この個人識別情報処理情報に応じた内容を表示するとともに、前記個人識別データ読取装置のデータ関連付け手段からの検出画像データを受信し、この検出画像データの個人識別情報処理情報に基づいて静止画像を表示する出入管理装置とを備えたことを特徴とする。
【０００７】
また、本発明に係る個人識別データ読取装置は、個人識別情報が記憶された個人識別情報媒体から個人識別情報を感知すると当該個人識別情報媒体から個人識別情報を読み取るデータ読取手段と、複数の静止画像を記憶する撮影画像記憶手段と、記憶された複数の静止画像それぞれの顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して静止画像の評価値を算出する評価値算出手段と、前記評価値算出手段にて算出された評価値に基づき複数の静止画像から所定の静止画像を抽出する画像選択手段と、前記データ読取手段にて個人識別情報を読み取る毎に付される個人認証処理番号と前記個人識別情報とを有する個人識別情報処理情報を記憶する個人識別情報処理情報記憶手段と、前記画像選択手段にて抽出された前記所定の静止画像と前記個人識別情報処理情報記憶手段に記憶された個人識別情報処理情報とを組み合わせた検出画像データを生成し、出力する検出画像データ生成手段とを有するデータ関連付け手段とを備えたことを特徴とする。
【発明の効果】
【０００８】
本発明の出入管理システム及び個人識別データ読取装置は、個人認証対象者の人物特定を精度高く行えるという効果を奏する。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態１に係る出入管理システムを示す概念図。
【図２】本発明の実施の形態１に使用される通行イベント情報の一例を示す図。
【図３】本発明の実施の形態１に係る出入管理システムを示す構成図。
【図４】本発明の実施の形態１に使用されるスコア値を算出するための各項目の値の一例を示す図。
【図５】図３に示した表示手段６０３における表示内容の一例を示す図。
【図６】図３に示した表示手段６０３における表示内容の一例を示す図。
【図７】図３に示した表示手段６０３における表示内容の一例を示す図。
【図８】各装置間のデータのやり取りを示す図であって、(a)撮影途中で別の者による読取操作がない場合、(b)撮影途中で別の者による読取操作がある場合を示す図。
【図９】本発明の実施の形態１の動作を表すフロー図。
【図１０】本発明の実施の形態１における画像撮影装置４００の他の配置例を示す図。
【図１１】本発明の実施の形態２に係る出入管理システムを示す構成図。
【図１２】本発明の実施の形態２の動作を表すフロー図。
【発明を実施するための形態】
【００１０】
実施の形態１．
図１ないし図９は本発明の実施の形態１に係る出入管理システムを示す図である。
【００１１】
図１の概略図にて示すように、出入管理システムは個人識別データ読取装置１００と認証管理装置３００と画像撮影装置４００と出入管理装置６００とを備える。
【００１２】
個人識別データ読取装置１００は出入り口扉７００近辺の特定エリアの出入口に設置され、データ読取手段２００とデータ関連付手段５００とを備える。データ読取手段２００は個人識別情報が記憶された個人識別情報媒体の接触あるいは非接触状態を感知すると当該個人識別情報媒体から個人識別情報を取り込み、出力する。例えば、このデータ読取手段２００は個人識別情報媒体であるICカードから個人情報を読み取るICカード認証装置、あるいは個人識別情報媒体である指紋や瞳の虹彩等から個人情報を読み取る生体認証(指紋認証、虹彩認証)装置である。また、データ読取手段２００は個人識別情報媒体を感知すると撮影開始信号を送信する。
【００１３】
認証管理装置３００は複数の個人識別情報が蓄積され、個人識別データ読取装置１００のデータ読取手段２００からの個人識別情報を受け、受信した個人識別情報と蓄積個人識別情報とを比較・照合し、認証の成功または失敗を表す個人認証結果信号を出力する。この個人認証結果信号は出入り口扉７００の錠の開錠と施錠を制御する信号として利用される。また、データ読取手段２００からの個人識別情報に基づき通行イベント情報などの個人識別情報処理情報（以下、通行イベント情報と略称する）を生成し、個人識別データ読取装置１００のデータ関連付手段５００に送信する。したがって、認証管理装置３００は通行イベント情報を生成する個人識別情報処理情報生成手段（以下、通行イベント情報生成手段と略称する）としても機能する。
【００１４】
通行イベント情報はデータ読取手段２００からの個人識別情報に基づいて個人認証対象者のフロア通行時の個人認証処理を表す情報であり、図２に一例を示す。すなわち、通行イベント情報は個人認証処理毎に特定された数字あるいは記号などにて表されたイベント番号、データ読取手段２００からの個人識別情報（ＩＤ）、認証時刻、入室および退室などの種別、認証の成功または失敗を表す認証結果の情報を含んでいる。例えば、イベント番号は１日の中での始めの個人認証処理に対して０００１、次の個人認証処理に対して０００２と順次付され、個人認証処理毎に固有であり、異なる個人認証処理（イベント）に対して同一のイベント番号（個人認証処理番号）が付されることはない。図２に示された通行イベント情報は、イベント番号「０００１」（本日１番のイベントを示す）、個人識別情報（ＩＤ）「００１１１１」、認証時刻「１２時００分００秒」、種別「入室」、認証結果の情報「成功」を示している。
【００１５】
図１に戻り、画像撮影装置４００は出入り口扉７００近辺の特定エリアの出入口を撮影するように配置されたカメラ等の画像を撮影する装置である。画像撮影装置４００は、個人識別データ読取装置１００のデータ読取手段２００から撮影開始信号を受けると、所定間隔毎に撮影した個人認証対象者の静止画像を、撮影終了まで個人識別データ読取装置１００へ送信する。画像撮影装置４００は、内部にタイマーを保有し、撮影開始信号を受けてから予め設定された所定時間が経過すると、撮影を終了する。なお、内部タイマーを用いず、外部装置からの信号に基づいて撮影を終了するようにしてもよい。
【００１６】
なお、この例では撮影開始から撮影終了までの期間、複数の静止画像からなる撮影画像を送信するものとしたが、同期間、動画像からなる撮影画像を送信するものでも良い。動画像は複数の静止画像の集合体であり、本発明では複数の静止画像として表現した場合、動画像を含むものとする。また、撮影開始から撮影終了までの期間が1つの通行イベントに相当する。
【００１７】
個人識別データ読取装置１００のデータ関連付手段５００はこの画像撮影装置４００からの複数の静止画像と、上記した認証管理装置３００からの通行イベント情報とを記憶（保存）し、記憶された複数の静止画像から所定の条件に合った静止画像、つまり、この例においては適切な顔、認識しやすい顔が映っている静止画像（最適画像）を選択し、選択した静止画像と記憶された通行イベント情報とを組み合わせて検出画像データとして送信する。所定の条件は、詳細は後述するが、静止画像の顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して算出された評価値の値にて決定される。なお、検出画像データとして、適切な顔が映っている静止画像を検出する際に用いた静止画像毎に算出した評価値を含むものとしても良い。また、画像撮影装置４００からの撮像画像が動画像である場合、動画像から所定間隔毎に静止画像を取り出す機能をデータ関連付手段５００に追加すればよい。
【００１８】
出入管理装置６００は個人識別データ読取装置１００および認証管理装置３００とネットワークで接続され、管理者が個人認証対象者の出入を把握し管理するための管理情報を受信、記録および表示するPC端末等の装置である。この管理情報は認証管理装置３００から送信された通行イベント情報、および個人識別データ読取装置１００から送信された検出画像データである。このような管理情報を受けた出入管理装置６００はその表示手段６０３に例えば、図５ないし図７に示すように通行イベント情報と、この情報に関連付けられた撮影画像とを表示する。
【００１９】
次に、本発明の実施の形態１に係る出入管理システムを図３の構成図を用いてさらに詳しく説明する。
【００２０】
まず最初に、認証管理装置３００について説明する。認証管理装置３００はデータ照合手段３０１と登録情報記憶手段３０２と個人識別情報処理情報生成手段３０３（以下、通行イベント情報生成手段と略称する）とを有する。
【００２１】
登録情報記憶手段３０２には予め複数の個人識別情報が蓄積されている。データ照合手段３０１は個人識別データ読取装置１００のデータ読取手段２００からの個人識別情報を受信し、この受信した個人識別情報と登録情報記憶手段３０２に記憶されている個人識別情報とを比較・照合し、受信した個人識別情報が登録情報記憶手段３０２に一致する個人識別情報が記憶されていると認証の成功を、また一致する個人識別情報が記憶されていないと失敗を表す個人認証結果信号を出力する。この個人認証結果信号は出入り口扉７００の開錠と施錠を制御する錠制御信号として利用され、出入り口扉７００は個人認証結果信号が認証の成功を表す信号であると開錠される。
【００２２】
通行イベント情報生成手段３０３はデータ読取手段２００からの個人識別情報を受信し、個人識別情報にイベント番号を付加するとともに認証時刻、入室、退室などの種別を付加して、例えば、図２に示す通行イベント情報を生成し、個人識別データ読取装置１００のデータ関連付手段５００に送信する。
【００２３】
次に、個人識別データ読取装置１００のデータ関連付手段５００について説明する。データ関連付手段５００は第１の個人識別情報処理情報受信手段５０１（以下、第１の通行イベント情報受信手段と略称する）と第１の個人識別情報処理情報記憶手段５０２（以下、第１の通行イベント情報記憶手段と略称する）と撮影画像受信手段５０３と撮影画像記憶手段５０４と、撮影画像評価値算出手段５０５と画像選択（検出）手段５０６と検出画像データ生成手段５０７とを有する。
【００２４】
第１の通行イベント情報受信手段５０１は通行イベント情報生成手段３０３からの通行イベント情報をネットワーク５００を介して受け取り、第１の通行イベント情報記憶手段５０２に出力する。そして第１の通行イベント情報手段５０２には通行イベント情報が記憶される。撮影画像取得手段５０３は画像撮影装置４００からの静止画像を受信し、撮影画像記憶手段５０４に出力する。そして撮影画像記憶手段５０４には撮影された静止画像が記憶される。
【００２５】
撮影画像評価値算出手段５０５は撮影画像記憶手段５０４に記憶された静止画像を取り出し、その静止画像内から人の顔を検出し、その顔画像がどれだけ客観的にバランスの取れた顔画像であるのかを評価する。すなわち、静止画像における顔の認識のし易さ、適切さを評価値として算出し、その評価値を評価結果として取り込んだ静止画像および第１の通行イベント情報記憶手段５０２に記憶された通行イベント情報のイベント番号と関連付けた評価情報として撮影画像記憶手段５０４に出力する。
【００２６】
この撮影画像評価値算出手段５０５は取り込んだ静止画像における人物の顔領域を顔画像データとして検出する顔検出処理部と、検出された顔画像における顔の認識のし易さ、適切さを示す評価値を算出する評価値算出部と、この評価値算出部からの評価値と取り込んだ静止画像および第１の通行イベント情報記憶手段５０２に記憶された通行イベント情報のイベント番号とを関連付け、評価情報として撮影画像記憶手段５０４に出力する評価情報出力手段を有する。
【００２７】
顔検出処理部は顔画像と顔画像以外の対象画像を多数記憶している記憶部と、この記憶部に記憶された顔画像および対象画像と取り込んだ静止画像とを比較照合し、静止画像における顔領域と顔領域以外を区別し、顔画像データを出力する識別器とを有する。
【００２８】
評価値算出部は、顔検出処理部から出力された顔画像データの中から、顔の方向、大きさ、明るさ、目の位置（目検出）等の各項目の値を求め、これら各項目の値にそれぞれ重み係数を掛けて組み合わせる（加算する）ことにより算出してスコア値としての評価値を出力する。例えば、方向算出部、大きさ算出部、明るさ算出部、目の位置算出部を有し、各算出部に対して重み係数乗算部を有し、各重み係数乗算部からの乗算結果を加算し、評価値として出力する加算部とを有している。
【００２９】
方向算出部は円形フィルターを用いることにより顔画像データから検出した鼻の位置と目の位置との位置関係から方向に対する評価値を算出し、大きさ算出部は顔画像データの高さピクセルにより大きさに対する評価値を算出し、明るさ算出部は、顔画像データの各ピクセルのRGB値を平均した平均輝度値により明るさに対する評価値を算出し、目の位置算出部は顔画像データに対してテンプレートマッチングを行うことにより目の位置に対する評価値を算出する。
【００３０】
このスコア値の算出についてさらに図４を用いて説明する。図４はスコア値を算出するための各項目の値の一例を示すテーブルである。すなわち、評価する項目に対して状態に応じた評価値を与え、かつ、各項目に対して重み付けをしたものである。項目としては「顔の方向」、「顔の大きさ」、「顔の明るさ」、「目の位置（目検出）」であり、重み付け係数として、順に「６」、「６」、「４」、「４」としている。
【００３１】
項目「顔の方向」の状態別評価点は３段階評価とし、鼻の位置と目の位置との位置関係から状態が「正面」と判定されると５点、「３０度内回転」と判定されると３点、「それ以外」と判定されると１点と設定される。項目「顔の大きさ」の状態別評価点は５段階評価とし、高さピクセルが２００超え、２００以下１５０超え、１５０以下１００超え、１００以下５０超え、５０以下の順に４点、５点、３点、１点、０点と設定される。項目「顔の明るさ」の状態別評価点は５段階評価とし、各ピクセルのRGB値を平均した平均輝度値が２４０超え、２４０以下２００超え、２００以下１５０超え、１５０以下１００超え、１００以下の順に２点、５点、３点、１点、０点と設定される。項目「目検出」の状態別評価点は３段階評価とし、テンプレートマッチングにより「両目」と判定されると５点、「片目」と判定されると３点、「なし」と判定されると０点と設定される。
【００３２】
例えば、方向算出部が正面と判定すると５を出力し、その重み係数乗算部から３０（＝５×６）が出力される。大きさ算出部が高さピクセルとして１８０を検出すると５を出力し、その重み係数乗算部から３０（＝５×６）が出力される。明るさ算出部が各ピクセルのRGB値を平均した平均輝度値として１４０を検出すると１を出力し、その重み係数乗算部から４（＝１×４）が出力される。目の位置算出部が両目と判定すると５を出力し、その重み係数乗算部から２０（＝５×４）が出力される。そして、これら重み係数乗算部からの出力を受けた加算部は８４（＝３０＋３０＋４＋２０）を出力する。加算部からの８４は評価値算出部からの評価値（スコア値）となる。
【００３３】
この評価値算出部からの評価値を受けた評価情報出力手段は、取り込んだ静止画像に評価値を関連付け、評価情報として撮影画像記憶手段５０４に出力する。これらの動作は撮影開始から撮影終了までの期間、つまり、通行イベント情報のイベント番号が同じ期間に撮影画像受信手段５０３にて受信された複数の静止画像に対して行われ、これら複数の静止画像それぞれに対して評価値が算出されて評価情報として撮影画像記憶手段５０４に出力される。
【００３４】
なお、評価情報出力手段における評価値と静止画像との関連付けは画像のファイル名に評価値を追記したファイル名に変更（リネーム）する方法、画像ファイルのユーザ領域やメタ情報領域に評価値を挿入する方法などによって行われる。
【００３５】
画像選択手段５０６は、撮影画像評価値算出手段５０４で算出された評価値に基づいて、撮影画像記憶手段５０４に記憶された複数の静止画像から静止画像を選択する。例えば、最も評価値が高い評価情報を有する静止画像を選択し検出画像データ生成手段５０７に出力する。
【００３６】
検出画像データ生成手段５０７は画像選択手段５０６から受信した静止画像に第１の通行イベント情報記憶手段５０２から受け取った通行イベント情報を関連付けて（組み合わせて）検出画像データを生成し、ネットワーク５００を介して出入管理装置６００に送信する。
【００３７】
この検出画像データ生成手段５０７における静止画像と通行イベント情報との関連付けは上述した評価値と静止画像との関連付けと同様の方法、例えばファイル名を変更することにより関連付けを行う方法、つまり静止画像の画像ファイル名「画像０００１．ｊｐｇ」に通行イベント情報におけるイベント番号「０００１」を付加して「画像０００１−イベント０００１．ｊｐｇ」に変更することにより行い、検出画像データのファイル名として静止画像を送信する。
【００３８】
出入管理装置６００は、第２の個人識別情報処理情報受信手段６０１（以下、第２の通行イベント情報受信手段と略称する）と、第２の個人識別情報処理情報記憶手段６０２（以下、第２の通行イベント情報記憶手段と略称する）と、液晶モニタ等の表示手段６０３と、検出画像データ受信手段６０４と、検出画像データ記憶手段６０５とを有する。
【００３９】
第２の通行イベント情報受信手段６０１は通行イベント情報生成手段３０３からの通行イベント情報をネットワーク５００を介して受信し、第２の通行イベント情報記憶手段６０２に出力する検出画像データ受信手段６０４は検出画像データ生成手段５０７からの検出画像データをネットワーク５００を介して受信し、検出画像データ記憶手段６０５に出力する。
【００４０】
表示手段６０３は第２の通行イベント情報記憶手段６０２に記憶された通行イベント情報を表示し、また、検出画像データ記憶手段６０５に記憶された検出画像データ、つまり、適切な顔、認識しやすい顔が映っている静止画像をその通行イベント情報とともに表示する。例えば、イベント番号０００１を含む通行イベント情報に対応する最適な静止画像表示する場合、表示手段６０３は検出画像データにおけるファイル名の「イベント０００１」をキーとして画像を検索して表示させられることになる。
【００４１】
表示手段６０３に通行イベント情報が表示されることにより、管理者は個人認証対象者の出入を把握し管理できる。また、表示手段６０３に通行イベント情報とともにそれに対応した適切な顔、認識しやすい顔が映っている静止画像が表示されることにより、管理者は精度高く個人認証対象者の人物特定を行える。
【００４２】
次に、表示手段６０３における表示内容の一例を図５〜図７を用いて説明する。各図に示すように、表示手段６０３の左側は第２の通行イベント情報記憶手段６０２から受け取った通行イベント情報が表示される通行イベント情報表示領域、右側は検出画像データ記憶手段６０５から受け取った静止画像が表示される静止画像表示領域である。
【００４３】
図５は１日の中での始めの個人認証処理がなされた場合の通行イベント情報を表示した例を示したものであり、イベント番号０００１に対応して第２の通行イベント情報記憶手段６０２に記憶された通行イベント情報に基づいて最初の個人認証対象者である個人識別ＩＤ１２３４５６、認証時刻９時２０分３０秒、種別「入室」、認証結果「成功」が表示される。
【００４４】
図６は図５に示された状態において管理者がイベント番号０００１をクリックした場合の表示例を示したものであり、イベント番号０００１に対応した検出画像データ記憶手段６０５に記憶された静止画像データが表示される。この表示された静止画像は通行イベント情報期間における最も評価値が高かった個人識別ＩＤ１２３４５６を持つ個人認証対象者の顔画像である。
【００４５】
図７は５人の個人認証対象者が認証を行った後の通行イベント情報、および管理者がイベント番号０００５をクリックした場合の表示例を示したものである。通行イベント情報領域には個人認証対象者が個人認証処理を行う度にイベント番号に対応して第２の通行イベント情報記憶手段６０２に記憶された通行イベント情報に基づいて情報が表示される。画像表示領域にはイベント番号０００５に対応した検出画像データ記憶手段６０５に記憶された静止画像データが表示される。この表示された静止画像は５番目の個人認証対象者に対する通行イベント情報期間における最も評価値が高かった顔画像である。認証を失敗した個人認証対象者の顔画像であっても画像表示領域に表示できる。
【００４６】
こうすることにより管理者は、イベント番号０００５に対応する個人認証処理を行った個人認証対象者の人物名は確認することができないものの、画像表示領域に表示された客観的に認識しやすい顔画像を見ることにより、人物確認を行うことが可能となる。
【００４７】
次に、このように構成された本発明の実施の形態１の動作について図８(a)(b)及び図９を用いて説明する。図８(a)(b)は横軸を時間軸とした場合の各装置間のデータのやり取りを示し、図９はフロー図を示す。
【００４８】
まず、図８(a)及び図９を用いて、個人認証対象者Aが読取操作しその撮影の途中に別の者が読取操作を行わない場合について説明する。この場合、図９におけるステップＳ１１、ステップＳ１６の分岐は「Ｎｏ」となる。個人認証対象者Ａが、１２時００分００秒に個人識別データ読取装置１００のデータ読取手段２００に対しICカードなどの個人識別情報媒体により読取操作を行うと、データ読取手段２００が個人識別情報媒体から個人識別情報を読み取り、認証管理装置３００のデータ照合手段３０１に送信する（図８(a)のステップ００１、００２、図９のステップＳ１、Ｓ２）。
【００４９】
これを受けて、認証管理装置３００のデータ照合手段３０１は個人認証対象者Aについての個人認証処理を行う。すなわち、データ読取手段２００からの個人識別情報と登録情報記憶手段３０２に記憶されている個人識別情報とを比較・照合し、受信した個人識別情報が登録情報記憶手段３０２に一致する個人識別情報が記憶されていると認証の成功を、また一致する個人識別情報が記憶されていないと失敗を表す個人認証結果信号を出入り口扉７００に出力する（図８(a)のステップ００３、図９のステップＳ３、Ｓ４）。
【００５０】
データ照合手段３０１から「認証成功」を示す個人認証結果信号が出力されると出入り口扉７００の錠の開錠が行なわれる（図９のステップＳ５）。「認証失敗」を示す個人認証結果信号が出力された場合は出入り口扉７００の錠の開錠は行われない。
【００５１】
また、データ読取手段２００からの個人識別情報を受けた通行イベント情報生成手段３０３はその個人識別情報にイベント番号を付加するとともに認証時刻、入室、退室などの種別を付加して通行イベント情報（図２参照）を生成し、個人識別データ読取装置１００のデータ関連付手段５００へ送信するとともに、ネットワーク５００を介して出入管理装置６００に送信する（図８(a)のステップ００４、図９のステップＳ６）。
【００５２】
出入管理装置６００ではその第２の通行イベント情報受信手段６０１にて通行イベント情報をネットワーク５００を介して受信し、第２の通行イベント情報記憶手段６０２に記憶するとともに、図５に示すように表示手段６０２に通行イベント情報の内容を表示する（図８(a)の００５、図９のステップＳ７）。
【００５３】
一方、個人識別データ読取装置１００のデータ読取手段２００は個人識別情報媒体を感知すると画像撮影装置４００に対して撮影開始信号を送信する（図８(a)のステップ００６）。撮影開始信号を受けた画像撮影信号４００は所定間隔毎に出入り口扉７００近辺の特定エリアの出入口における画像撮影を開始し、個人識別データ読取装置１００の撮像画像受信手段５０３に撮影した静止画像Ａ１〜Ａ４を送信する（図８(a)のステップ００７、図９のステップＳ８）。
【００５４】
そして、データ読取手段２００から撮影開始信号を送信した時間から所定時間後（図８(a)の例では１０秒後）に、画像撮影装置４００は、内部に保有するタイマーにより所定時間の経過を感知し、撮影を終了する。
【００５５】
撮影画像受信手段５０３は、受信した静止画像Ａ１〜Ａ４を撮影画像記憶手段５０４に送り、撮影画像評価値算出手段５０５は撮影画像記憶手段５０４から取り出した画像に対して顔検出処理を行い、評価値を算出する（図８(a)の００８、図９のステップＳ９、Ｓ１０）
【００５６】
撮影時間が経過すると（図９のステップＳ１２）、画像選択手段５０６は、静止画像Ａ１〜Ａ４から最も評価値が高かった静止画像を選択する（図８(a)の００９、図９のステップＳ１３）。
【００５７】
検出画像データ生成手段５０７は、画像選択手段５０６で選択された静止画像と、認証管理装置３００の通行イベント情報生成手段３０３で生成された通行イベント情報とを組み合わせて検出画像データを生成し、出入管理装置６００に送信する（図８(a)の０１０、図９のステップＳ１４）。検出画像データは、検出画像データ記憶手段６０５に記憶される（図９のステップＳ１５）。そして、表示手段６０３が検出画像データ記憶手段６０５に記憶された検出画像データ、つまり、適切な顔、認識しやすい顔が映っている静止画像をその通行イベント情報とともに表示する。
【００５８】
次に、図８(b)及び図９を用いて、個人認証対象者Aが読取操作しその撮影の途中に別の者が読取操作を行った場合について説明する。この場合、図９におけるステップＳ１１、ステップＳ１６の分岐は「Ｙｅｓ」となる。図８(b)における００１から００８までの処理については、図８(a)と同様であるためその説明を省略する。
【００５９】
個人認証対象者Ａが撮影されている間に別の個人認証対象者Ｂが読取操作を行うと、個人識別データ読取装置１００は、人の顔の検出処理を途中であっても中止し、Ｂによる読取操作が行われるまでに撮影され評価値が算出された静止画像から、その評価値に基づいて最適の画像を選択する。そして、選択した静止画像と通行イベント情報とから検出画像データを生成し、出入管理装置６００に送信する。また、Ｂに対しては読取操作時から所定時間の間（図８(b)の例では１０秒間）、新たに画像を撮影する。
【００６０】
具体的には、別の個人認証対象者が読取操作を行うと、個人識別データ読取装置１００のデータ読取手段２００は撮影画像評価値算出手段５０５に対して顔検出処理を中止させる検出処理中止信号を送信するとともに、画像撮影装置４００に対して、内部タイマーをリセットし、新たに所定時間の間撮影を行うようにするリセット信号を送信する。リセット信号を受信した画像撮影装置４００は、リセット信号を受信した時から所定時間の間個人認証対象者Ｂの撮影を行う（図８(b)の００９）。こうすることにより、途中で読取操作を行った個人認証対象者Ｂに対しても所定時間撮影を行うことができる。
【００６１】
画像選択手段５０６は、個人認証対象者Ｂが読取操作を行うと、個人認証対象者Ｂによる読取操作がなされるまでに顔検出処理がなされた静止画像から、最も評価値が高い静止画像を選択する（図８(b)の０１０、図９のステップＳ１３）。図８(b)では、顔検出処理された画像Ａ１またはＡ２のいずれかの画像を選択する。
【００６２】
個人認証対象者Ａについては、選択された画像と通行イベント情報とが組み合わされて検出画像データとして出入管理装置６００に送信される（図８(b)の０１１、図９のステップＳ１４、Ｓ１５）。一方、個人認証対象者Ｂについては、Ｂにより別の読取操作が行われるので（図９のステップＳ１６−Ｙｅｓ）、上述したように、個人識別情報が読み取られて認証処理され、通行イベント情報と撮影された静止画像とから検出画像データが生成され出入管理装置６００に送信される（図８(b)の０１２〜０１８、図９のステップＳ２〜Ｓ１５）。なお、図８(b)に示す例では、所定時間（１０秒）の間別の個人認証対象者による読取操作がなかったので、１０秒の間に撮影された画像Ｂ１〜Ｂ４のいずれかから最適な画像が選択される。
【００６３】
以上のように、本発明の実施の形態１によれば、記憶された複数の静止画像から適切な顔が映っている静止画像を選択し、選択した静止画像と通行イベント情報とを表示することにより、個人認証対象者の人物特定を精度高く行うことが可能となる。
【００６４】
また、顔検出処理の結果に基づき選択された画像を、個人認証を行った時刻ではなく、個人認証対象者のフロア通行時の個人認証処理（イベント）を表す通行イベント情報と関連付けて保存することにより、管理者は、イベント毎に対応付けられた画像を表示・検索することができ、管理者の操作負担を軽減させることが可能となる。
【００６５】
例えば、ある時刻における個人認証が認証失敗であったとする。従来の出入管理システムにおいては、個人認証時刻に撮影された画像が表示されていたことから、その時刻において撮影された画像内の顔が不明確であった場合は、管理者はその時刻前後の画像をデータベースから探さなければならず、また表示画像が動画像形式の場合には、顔が認識できる瞬間を見つけるため常に動画を注意深く見ておかなければならない。
【００６６】
一方、本発明の実施の形態１においては、個人認証時刻に依存せず通行イベント情報に基づいて検索を行うことができる。すなわち、各通行イベントにおける最適な画像が通行イベント毎に対応付けられて保存されているので、上述したように、表示されている通行イベント情報におけるイベント番号をクリックするだけでその通行イベントに関して最も最適な画像を表示させることが可能となり、管理者はデータベースから適切な画像を１枚１枚検索する必要がなくなり、操作負担を軽減させることができる。
【００６７】
また、個人認証対象者の撮影・顔検出処理の途中で別の個人認証対象者による読み取り要求があった場合には、その前の個人認証対象者の顔検出処理を停止して画像の選択を行い、すぐに別の個人認証対象者に対する個人認証・撮影等の処理を行うので、別の個人認証対象者が撮影されないということを防止できる。そのため、複数の通行人が短い時間間隔で出入を行う場合においても、全ての通行人に対して漏れなく撮影を行うことができる。
【００６８】
なお、画像撮影装置４００のカメラの種別については、アナログカメラ、デジタルカメラ、ネットワークカメラ等、特に制限はない。また、画像撮影装置４００は必ずしも個人識別データ読取装置１００と別々である必要はなく、一体型であってもよい。また、画像撮影装置４００は、ネットワーク７００と接続され、ネットワーク経由で撮影画像を個人識別データ読取装置１００へ送信してもよい。
【００６９】
なお、図８(a)では画像撮影装置４００は１０秒間に４枚の静止画像を撮影するが、これに限るものではなく、撮影時間・撮影枚数ともに任意に設定できるものとする。
【００７０】
なお、画像撮影装置４００は、個人認証対象者による個人認証操作が行われる前から画像の撮影を開始するようにしてもよい。そうすることにより、個人認証対象者を撮影する回数が増え、より評価値の高い画像を得られる確率が増え、管理者が個人認証対象者をより容易に特定することができる。また、画像撮影装置４００に映像の中の動きを検知するモーションディテクト機能を持たせて、動きを検知したら撮影を開始するとしてもよい。そうすることにより、個人認証対象者が撮影範囲内にいる場合にのみ撮影を行うので、誰も人が写っていない無駄な画像の蓄積を抑えつつ、個人認証対象者を個人認証操作前から撮影することができる。
【００７１】
なお、図１に示した出入管理システムの装置構成については、説明を簡単にするため認証管理装置３００、画像撮影装置４００、出入管理装置６００をそれぞれ１台のみ示したが、それぞれの装置を適宜複数配置して出入を管理するようにしてもよい。
【００７２】
図１０は画像撮影装置４００を２台配置した構成を示す。図１０のように画像撮影装置４００a、４００bを２台配置することにより、撮影設定時間内でできるだけ長い間、個人認証対象者を撮影することができる。例えば個人認証対象者が個人認証処理を行って開錠された出入り口扉７００をすぐに通過した場合においても、画像撮影装置４００bにより出入り口扉７００通過後の個人認証対象者を撮影することができる。
【００７３】
なお、図１の個人識別データ読取装置１００の読み取り対象とする記録媒体は非接触型のＩＣカードに限らず、接触型の磁気ストライプカードでもよい。もしくは読み取り時に暗証番号の入力を求めることとしてもよい。
【００７４】
なお、認証管理装置３００は、個人認証が成功してもすぐには出入り口扉７００の錠を開錠せず、画像撮影装置４００の撮影時間が経過するまで個人認証対象者を通行させないようにしてもよい。そうすることにより、設定された撮影時間の間は必ず個人認証対象者の画像を撮影することができ、その画像から評価値が高く顔を認識しやすい画像を得られる確率が増すので、管理者が個人認証対象者をより容易に特定することができる。
【００７５】
なお、図２に示す通行イベント情報については、扉番号、カメラの固体番号等も通行イベント情報に含めてもよい。
【００７６】
なお、撮影画像評価値算出手段５０５は、上述したようにスコア値を計算せず、静止画像から検出された顔の大きさに基づいて評価を行ってもよいし、輝度値に基づく顔の明るさに基づいて評価を行ってもよい。また、顔検出を行ったときの検出された顔の数を評価値として算出し、画像選択手段５０６はその顔の数に基づいて撮影画像を選択するようにしてもよい。その場合、顔の数が複数であると評価値が大きくなるものとし、顔の数は、画像内の顔として識別された領域数を数えることにより容易に求めることができる。
【００７７】
検出した顔の数に基づいて評価を行う場合、撮影画像評価値算出手段５０５は検出した顔の数を評価結果として画像選択手段５０６に通知する。こうすることにより、管理者は複数人による通行を容易に検索・発見することができる。例えば、不正通行が考えられるが個人認証処理には問題がなかった場合等については、個人識別IDを持たない者による共連れ入室が考えられるが、上述したように検出した顔の数を評価値とすることにより複数の顔が検出された画像が優先的に表示され、管理者は画像を１枚１枚確認せずとも評価値の高い画像をすぐに検索して複数人の通行を容易に発見することが可能となる。
【００７８】
また、検出した顔の数を項目の１つに含めて上述のスコア値を計算してもよい。そのようにすることにより、検出した顔の数と、それら顔の把握しやすさとを調整して評価値を算出することができる。
【００７９】
さらに、撮影した画像の中から検出した顔の数が複数ある画像に絞り込み、その中でスコア値が高い画像を画像選択手段５０６に選択させるようにしてもよい。この場合、撮影画像評価値算出手段５０５は受け取った画像の顔検出処理を行い検出した顔の数が複数であれば撮影画像記憶手段５０４に記憶する。複数でなければ記憶しない、もしくは撮影画像記憶手段５０４の別の記憶領域に記憶する。
【００８０】
そして撮影時間が経過すると、撮影画像評価値算出手段５０５は撮影画像記憶手段５０４に記憶した画像（複数の顔が検出された画像）を受信して再度顔検出処理を行い、スコア値を算出する。そして、スコア値を算出した画像のうちスコア値が最も高い画像を選択するよう画像選択手段５０６に通知する。
【００８１】
そのようにすることにより、表示する画像には複数の顔が写っており、かつ、それらの顔が最も客観的にバランスが取れているので、管理者は、画像を１枚１枚確認することなく容易に複数人の通行を発見し、それら複数の顔を容易に把握することが可能となる。
【００８２】
なお、撮影画像評価値算出手段５０５は、画像撮影装置４００が動画像形式の場合において、最も評価値の高い画像が撮影された時間前後の動画像を撮影画像記憶手段５０４に保存することとしてもよい。そうすることにより、管理者は、最も評価値の高い静止画像と動画像を組み合わせて人物確認を行うことができ、より容易に不審者の把握が可能となる。
【００８３】
なお、撮影画像評価値算出手段５０５は、評価した画像を全て撮影画像記憶手段５０４に保存せず、最も評価値の高い画像のみ保存するようにしてもよい。また、評価値の比較的高い画像を保存、例えば一定の閾値を設定し、その閾値を超えた評価値を有する画像のみ保存するというようにしてもよい。そうすることにより、評価値が小さく顔が十分に検出されていない画像を保存する必要がなくなり、撮影画像記憶手段５０４に記憶するデータ容量を削減することが可能となる。
【００８４】
なお、画像選択手段５０６が選択する画像は必ずしも１枚である必要はなく、複数枚選択してもよい。評価値が高い順に複数の画像を選択してもよいし、一定の閾値を設け、撮影画像評価値算出手段５０５で評価値が算出された静止画像のうち、閾値を超えた評価値を有する画像のみ選択するとしてもよい。そうすることにより管理者は、複数の画像から個人認証対象者の顔を特定することができ、さらに容易に不審者を判別することができる。
【００８５】
なお、表示手段６０３に通行イベント情報を表示する場合において、認証が失敗したときには、通行イベント情報の認証項目での内容「失敗」を目立たせて表示させたり、エラー音を鳴らすようにしてもよい。そうすることにより、管理者はより容易に異常を発見しやすくなる。
【００８６】
実施の形態２．
図１１は、本発明の実施の形態２に係る出入管理システムの構成図を示す。本実施の形態は、撮影画像記憶手段５０４が第１の撮影画像記憶領域５０４−１と第２の撮影画像記憶領域５０４−２とを有する点において実施の形態１と異なる。実施の形態１に相当する部分には図３と同一符号を付してその説明を省略する。
【００８７】
第１の撮影画像記憶領域５０４−１には、撮影画像取得手段５０３が画像撮影装置４００から受信した撮影画像のうちの１枚が保存される。例えば、個人認証が行われた時刻とほぼ同時刻に撮影された１枚目の撮影画像が保存される。以下、第１の撮影画像記憶領域５０４−１には１枚目の撮影画像が保存されるとして説明をするが、これに限るものではなく、撮影時間中に撮影された画像のうちいずれの撮影画像であってもよい。
【００８８】
第２の撮影画像記憶領域５０４−２には、画像撮影装置４００によって撮影時間中に撮影された画像のうち、第１の撮影画像記憶領域５０４−２に保存された画像以外の撮影画像が保存される。
【００８９】
図１２は、本発明の実施の形態２に係る出入管理システムの動作を表すフロー図を示す。ステップS１〜S９までの処理は、実施の形態１における図９と同様であるため省略する。
【００９０】
受信した撮影画像が１枚目であれば（ステップS１０-Yes）、その画像は第１の画像記憶領域に保存される（ステップS１１）。受信した撮影画像が１枚目でなければ（ステップS１０-No）、すなわち２枚目以降の撮影画像であれば、第２の画像記憶領域に保存される（ステップS１２）。
【００９１】
撮影画像評価値算出手段５０５は、１枚目の撮影画像については第１の撮影画像記憶領域５０４−１から画像を受信して顔検出処理を行う。２枚目以降の撮影画像については第２の撮影画像記憶領域５０４−２から画像を受信して顔検出処理を行う（ステップS１３）。
【００９２】
そして、撮影時間中に別の読み取り操作がなく（ステップS１４−No）、撮影時間が経過し（ステップS１５−Yes）、顔検出が撮影画像のうちいずれか１枚でも成功すると（ステップS１６-Yes）、画像選択手段５０６は最も評価の高かった画像を選択する（ステップS１７）。
【００９３】
撮影画像のうちいずれも顔検出が成功しなかった場合は（ステップS１６−No）、撮影画像評価値算出手段５０５は、顔検出ができなかったという顔検出結果を画像選択手段５０６に通知するとともに、画像選択手段５０６は、第１の撮影画像記憶領域５０４−１から１枚目の画像を選択する（ステップS１８）。
【００９４】
検出画像データ生成手段５０７は、画像選択手段５０６から受信した１枚目の画像と通行イベント情報とを関連付けて検出画像データを生成する（ステップS１９）。またこのとき、顔検出ができなかったという結果を関連付ける。関連付けの方法については実施の形態１と同様の方法を用いることができる。関連付けられた検出画像データは、検出画像データ記憶手段６０５に保存され（ステップS２０）、必要に応じて表示手段６０３にて表示される。
【００９５】
顔検出ができなかったという結果が関連付けられた検出画像データが検出画像データ記憶手段６０５に保存されたとき、すなわち顔検出ができなかったという結果が出入管理装置６００に通知されたとき、出入管理装置６００は、表示手段６０３にて顔検出ができなかった旨とその通行イベントに対応するイベント番号等を表示するようにしてもよい。そうすることにより、管理者は、１枚１枚画像を確認せずとも顔が検出できなかった通行であったことを容易に検索・認識することができる。特に不審者による不正通行は、意図的に画像撮影装置に顔を向けなかったり、顔を覆い隠したりすることが多いので、そういった不正通行を検索等する場合に有効である。
【００９６】
以上のように、本発明の実施の形態２によれば、実施の形態１の効果を有することに加えて、撮影画像評価値算出手段５０５における顔検出ができなかった場合においても、撮影画像を通行イベント情報と関連付けて保存し表示可能とすることにより、管理者は、出入時の状況を画像で確認することができる。
【００９７】
また、上述したように顔検出ができなかったという結果と対応するイベント番号等とを表示装置６０３に表示することにより、管理者は、顔検出ができなかった通行を容易に検索等することが可能となる。
【符号の説明】
【００９８】
１００ 個人識別データ読取装置
２００ データ読取装置
３００ 認証管理装置
３０１ データ照合手段
３０２ 登録情報記憶手段
３０３ 通行イベント情報生成手段
４００ 画像撮影装置
５００ データ関連付手段
５０１ 通行イベント情報受信手段
５０２ 通行イベント情報記憶手段
５０３ 撮影画像取得手段
５０４ 撮影画像記憶手段
５０４−１ 第１の撮影画像記憶領域
５０４−２ 第２の撮影画像記憶領域
５０５ 撮影画像評価値算出手段
５０６ 画像選択手段
５０７ 検出画像データ生成手段
６００ 出入管理装置
６０１ 通行イベント情報受信手段
６０２ 通行イベント情報記憶手段
６０３ 表示手段
６０４ 検出画像データ受信手段
６０５ 検出画像データ記憶手段
【技術分野】
【０００１】
本発明は、人のフロアへの出入を管理する出入管理システム、及びこの出入管理システムなどに用いられる個人識別データ読取装置に係り、特に、個人認証結果と個人認証対象者の撮影画像とにより個人認証対象者の人物特定を行えるものに関するものである。
【背景技術】
【０００２】
この種出入管理システムは、指紋や瞳の虹彩等を利用した生体認証、あるいはＩＣカードを用いた個人認証を行う個人識別データ読取装置を備えている。当該システムにおいては個人識別データ読取装置が読み込んだ個人情報を蓄積された個人情報と比較し、認証の成功または失敗を表す個人認証結果信号を出力するものであり、この信号に基づいて部屋等への人（個人認証対象者）の出入が管理される。一方、出入管理システムは個人認証操作を行う個人認証対象者の人物特定をも可能にしている。すなわち、個人認証結果に加えて、その認証時刻における個人認証対象者の撮影画像をPC端末上に表示させる機能を有し、個人認証対象者の人物特定を行っている。このような機能を有することにより、個人認証結果が認証成功であった場合、個人認証対象者の氏名と顔の特定をも可能にしている。また、個人認証結果が認証失敗であった場合、個人認証対象者の氏名は特定できないが、個人認証対象者の撮影画像により、不審者としての顔を確認できる。その結果、セキュリティの向上が図れるものである（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−２７７９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の出入管理システムは、個人認証対象者の人物特定を認証時刻における撮影画像で行っているため、例えば、認証時刻にカメラの方向に顔を向けていない場合など、撮影画像から顔を認識できず人物特定を行えないという問題があった。
【０００５】
本発明はこのような問題点を解決するためになされたものであり、個人認証対象者の人物特定を精度高く行える出入管理システム及び個人識別データ読取装置を得ることを目的とする。
【課題を解決するための手段】
【０００６】
本発明に係る出入管理システムは、出入口扉近辺の特定エリアの出入口を撮影するように配置される画像撮影装置と、複数の個人識別情報が蓄積され、受信した個人識別情報と前記蓄積個人識別情報とを比較、照合し、認証の成功または失敗を表す個人認証結果信号を前記出入口扉の錠の開錠と施錠を制御する信号として出力するとともに、前記受信した個人識別情報に基づき個人認証対象者の前記出入口通行時の個人認証処理を表す個人識別情報処理情報を生成し、出力する認証管理装置と、前記出入口扉近辺の出入口に設置され、個人識別情報が記憶された個人識別情報媒体を感知すると当該個人識別情報媒体から個人識別情報を読み取り、この個人識別情報を前記認証管理装置に出力するデータ読取手段と、前記画像撮影装置からの複数の静止画像の内、所定の条件に合った静止画像を選択し、選択した静止画像と前記認証管理装置からの個人識別情報処理情報とを組み合わせた検出画像データとして送信するデータ関連付け手段とを有した個人識別データ読取装置と、前記認証管理装置からの個人識別情報処理情報を受信し、この個人識別情報処理情報に応じた内容を表示するとともに、前記個人識別データ読取装置のデータ関連付け手段からの検出画像データを受信し、この検出画像データの個人識別情報処理情報に基づいて静止画像を表示する出入管理装置とを備えたことを特徴とする。
【０００７】
また、本発明に係る個人識別データ読取装置は、個人識別情報が記憶された個人識別情報媒体から個人識別情報を感知すると当該個人識別情報媒体から個人識別情報を読み取るデータ読取手段と、複数の静止画像を記憶する撮影画像記憶手段と、記憶された複数の静止画像それぞれの顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して静止画像の評価値を算出する評価値算出手段と、前記評価値算出手段にて算出された評価値に基づき複数の静止画像から所定の静止画像を抽出する画像選択手段と、前記データ読取手段にて個人識別情報を読み取る毎に付される個人認証処理番号と前記個人識別情報とを有する個人識別情報処理情報を記憶する個人識別情報処理情報記憶手段と、前記画像選択手段にて抽出された前記所定の静止画像と前記個人識別情報処理情報記憶手段に記憶された個人識別情報処理情報とを組み合わせた検出画像データを生成し、出力する検出画像データ生成手段とを有するデータ関連付け手段とを備えたことを特徴とする。
【発明の効果】
【０００８】
本発明の出入管理システム及び個人識別データ読取装置は、個人認証対象者の人物特定を精度高く行えるという効果を奏する。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態１に係る出入管理システムを示す概念図。
【図２】本発明の実施の形態１に使用される通行イベント情報の一例を示す図。
【図３】本発明の実施の形態１に係る出入管理システムを示す構成図。
【図４】本発明の実施の形態１に使用されるスコア値を算出するための各項目の値の一例を示す図。
【図５】図３に示した表示手段６０３における表示内容の一例を示す図。
【図６】図３に示した表示手段６０３における表示内容の一例を示す図。
【図７】図３に示した表示手段６０３における表示内容の一例を示す図。
【図８】各装置間のデータのやり取りを示す図であって、(a)撮影途中で別の者による読取操作がない場合、(b)撮影途中で別の者による読取操作がある場合を示す図。
【図９】本発明の実施の形態１の動作を表すフロー図。
【図１０】本発明の実施の形態１における画像撮影装置４００の他の配置例を示す図。
【図１１】本発明の実施の形態２に係る出入管理システムを示す構成図。
【図１２】本発明の実施の形態２の動作を表すフロー図。
【発明を実施するための形態】
【００１０】
実施の形態１．
図１ないし図９は本発明の実施の形態１に係る出入管理システムを示す図である。
【００１１】
図１の概略図にて示すように、出入管理システムは個人識別データ読取装置１００と認証管理装置３００と画像撮影装置４００と出入管理装置６００とを備える。
【００１２】
個人識別データ読取装置１００は出入り口扉７００近辺の特定エリアの出入口に設置され、データ読取手段２００とデータ関連付手段５００とを備える。データ読取手段２００は個人識別情報が記憶された個人識別情報媒体の接触あるいは非接触状態を感知すると当該個人識別情報媒体から個人識別情報を取り込み、出力する。例えば、このデータ読取手段２００は個人識別情報媒体であるICカードから個人情報を読み取るICカード認証装置、あるいは個人識別情報媒体である指紋や瞳の虹彩等から個人情報を読み取る生体認証(指紋認証、虹彩認証)装置である。また、データ読取手段２００は個人識別情報媒体を感知すると撮影開始信号を送信する。
【００１３】
認証管理装置３００は複数の個人識別情報が蓄積され、個人識別データ読取装置１００のデータ読取手段２００からの個人識別情報を受け、受信した個人識別情報と蓄積個人識別情報とを比較・照合し、認証の成功または失敗を表す個人認証結果信号を出力する。この個人認証結果信号は出入り口扉７００の錠の開錠と施錠を制御する信号として利用される。また、データ読取手段２００からの個人識別情報に基づき通行イベント情報などの個人識別情報処理情報（以下、通行イベント情報と略称する）を生成し、個人識別データ読取装置１００のデータ関連付手段５００に送信する。したがって、認証管理装置３００は通行イベント情報を生成する個人識別情報処理情報生成手段（以下、通行イベント情報生成手段と略称する）としても機能する。
【００１４】
通行イベント情報はデータ読取手段２００からの個人識別情報に基づいて個人認証対象者のフロア通行時の個人認証処理を表す情報であり、図２に一例を示す。すなわち、通行イベント情報は個人認証処理毎に特定された数字あるいは記号などにて表されたイベント番号、データ読取手段２００からの個人識別情報（ＩＤ）、認証時刻、入室および退室などの種別、認証の成功または失敗を表す認証結果の情報を含んでいる。例えば、イベント番号は１日の中での始めの個人認証処理に対して０００１、次の個人認証処理に対して０００２と順次付され、個人認証処理毎に固有であり、異なる個人認証処理（イベント）に対して同一のイベント番号（個人認証処理番号）が付されることはない。図２に示された通行イベント情報は、イベント番号「０００１」（本日１番のイベントを示す）、個人識別情報（ＩＤ）「００１１１１」、認証時刻「１２時００分００秒」、種別「入室」、認証結果の情報「成功」を示している。
【００１５】
図１に戻り、画像撮影装置４００は出入り口扉７００近辺の特定エリアの出入口を撮影するように配置されたカメラ等の画像を撮影する装置である。画像撮影装置４００は、個人識別データ読取装置１００のデータ読取手段２００から撮影開始信号を受けると、所定間隔毎に撮影した個人認証対象者の静止画像を、撮影終了まで個人識別データ読取装置１００へ送信する。画像撮影装置４００は、内部にタイマーを保有し、撮影開始信号を受けてから予め設定された所定時間が経過すると、撮影を終了する。なお、内部タイマーを用いず、外部装置からの信号に基づいて撮影を終了するようにしてもよい。
【００１６】
なお、この例では撮影開始から撮影終了までの期間、複数の静止画像からなる撮影画像を送信するものとしたが、同期間、動画像からなる撮影画像を送信するものでも良い。動画像は複数の静止画像の集合体であり、本発明では複数の静止画像として表現した場合、動画像を含むものとする。また、撮影開始から撮影終了までの期間が1つの通行イベントに相当する。
【００１７】
個人識別データ読取装置１００のデータ関連付手段５００はこの画像撮影装置４００からの複数の静止画像と、上記した認証管理装置３００からの通行イベント情報とを記憶（保存）し、記憶された複数の静止画像から所定の条件に合った静止画像、つまり、この例においては適切な顔、認識しやすい顔が映っている静止画像（最適画像）を選択し、選択した静止画像と記憶された通行イベント情報とを組み合わせて検出画像データとして送信する。所定の条件は、詳細は後述するが、静止画像の顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して算出された評価値の値にて決定される。なお、検出画像データとして、適切な顔が映っている静止画像を検出する際に用いた静止画像毎に算出した評価値を含むものとしても良い。また、画像撮影装置４００からの撮像画像が動画像である場合、動画像から所定間隔毎に静止画像を取り出す機能をデータ関連付手段５００に追加すればよい。
【００１８】
出入管理装置６００は個人識別データ読取装置１００および認証管理装置３００とネットワークで接続され、管理者が個人認証対象者の出入を把握し管理するための管理情報を受信、記録および表示するPC端末等の装置である。この管理情報は認証管理装置３００から送信された通行イベント情報、および個人識別データ読取装置１００から送信された検出画像データである。このような管理情報を受けた出入管理装置６００はその表示手段６０３に例えば、図５ないし図７に示すように通行イベント情報と、この情報に関連付けられた撮影画像とを表示する。
【００１９】
次に、本発明の実施の形態１に係る出入管理システムを図３の構成図を用いてさらに詳しく説明する。
【００２０】
まず最初に、認証管理装置３００について説明する。認証管理装置３００はデータ照合手段３０１と登録情報記憶手段３０２と個人識別情報処理情報生成手段３０３（以下、通行イベント情報生成手段と略称する）とを有する。
【００２１】
登録情報記憶手段３０２には予め複数の個人識別情報が蓄積されている。データ照合手段３０１は個人識別データ読取装置１００のデータ読取手段２００からの個人識別情報を受信し、この受信した個人識別情報と登録情報記憶手段３０２に記憶されている個人識別情報とを比較・照合し、受信した個人識別情報が登録情報記憶手段３０２に一致する個人識別情報が記憶されていると認証の成功を、また一致する個人識別情報が記憶されていないと失敗を表す個人認証結果信号を出力する。この個人認証結果信号は出入り口扉７００の開錠と施錠を制御する錠制御信号として利用され、出入り口扉７００は個人認証結果信号が認証の成功を表す信号であると開錠される。
【００２２】
通行イベント情報生成手段３０３はデータ読取手段２００からの個人識別情報を受信し、個人識別情報にイベント番号を付加するとともに認証時刻、入室、退室などの種別を付加して、例えば、図２に示す通行イベント情報を生成し、個人識別データ読取装置１００のデータ関連付手段５００に送信する。
【００２３】
次に、個人識別データ読取装置１００のデータ関連付手段５００について説明する。データ関連付手段５００は第１の個人識別情報処理情報受信手段５０１（以下、第１の通行イベント情報受信手段と略称する）と第１の個人識別情報処理情報記憶手段５０２（以下、第１の通行イベント情報記憶手段と略称する）と撮影画像受信手段５０３と撮影画像記憶手段５０４と、撮影画像評価値算出手段５０５と画像選択（検出）手段５０６と検出画像データ生成手段５０７とを有する。
【００２４】
第１の通行イベント情報受信手段５０１は通行イベント情報生成手段３０３からの通行イベント情報をネットワーク５００を介して受け取り、第１の通行イベント情報記憶手段５０２に出力する。そして第１の通行イベント情報手段５０２には通行イベント情報が記憶される。撮影画像取得手段５０３は画像撮影装置４００からの静止画像を受信し、撮影画像記憶手段５０４に出力する。そして撮影画像記憶手段５０４には撮影された静止画像が記憶される。
【００２５】
撮影画像評価値算出手段５０５は撮影画像記憶手段５０４に記憶された静止画像を取り出し、その静止画像内から人の顔を検出し、その顔画像がどれだけ客観的にバランスの取れた顔画像であるのかを評価する。すなわち、静止画像における顔の認識のし易さ、適切さを評価値として算出し、その評価値を評価結果として取り込んだ静止画像および第１の通行イベント情報記憶手段５０２に記憶された通行イベント情報のイベント番号と関連付けた評価情報として撮影画像記憶手段５０４に出力する。
【００２６】
この撮影画像評価値算出手段５０５は取り込んだ静止画像における人物の顔領域を顔画像データとして検出する顔検出処理部と、検出された顔画像における顔の認識のし易さ、適切さを示す評価値を算出する評価値算出部と、この評価値算出部からの評価値と取り込んだ静止画像および第１の通行イベント情報記憶手段５０２に記憶された通行イベント情報のイベント番号とを関連付け、評価情報として撮影画像記憶手段５０４に出力する評価情報出力手段を有する。
【００２７】
顔検出処理部は顔画像と顔画像以外の対象画像を多数記憶している記憶部と、この記憶部に記憶された顔画像および対象画像と取り込んだ静止画像とを比較照合し、静止画像における顔領域と顔領域以外を区別し、顔画像データを出力する識別器とを有する。
【００２８】
評価値算出部は、顔検出処理部から出力された顔画像データの中から、顔の方向、大きさ、明るさ、目の位置（目検出）等の各項目の値を求め、これら各項目の値にそれぞれ重み係数を掛けて組み合わせる（加算する）ことにより算出してスコア値としての評価値を出力する。例えば、方向算出部、大きさ算出部、明るさ算出部、目の位置算出部を有し、各算出部に対して重み係数乗算部を有し、各重み係数乗算部からの乗算結果を加算し、評価値として出力する加算部とを有している。
【００２９】
方向算出部は円形フィルターを用いることにより顔画像データから検出した鼻の位置と目の位置との位置関係から方向に対する評価値を算出し、大きさ算出部は顔画像データの高さピクセルにより大きさに対する評価値を算出し、明るさ算出部は、顔画像データの各ピクセルのRGB値を平均した平均輝度値により明るさに対する評価値を算出し、目の位置算出部は顔画像データに対してテンプレートマッチングを行うことにより目の位置に対する評価値を算出する。
【００３０】
このスコア値の算出についてさらに図４を用いて説明する。図４はスコア値を算出するための各項目の値の一例を示すテーブルである。すなわち、評価する項目に対して状態に応じた評価値を与え、かつ、各項目に対して重み付けをしたものである。項目としては「顔の方向」、「顔の大きさ」、「顔の明るさ」、「目の位置（目検出）」であり、重み付け係数として、順に「６」、「６」、「４」、「４」としている。
【００３１】
項目「顔の方向」の状態別評価点は３段階評価とし、鼻の位置と目の位置との位置関係から状態が「正面」と判定されると５点、「３０度内回転」と判定されると３点、「それ以外」と判定されると１点と設定される。項目「顔の大きさ」の状態別評価点は５段階評価とし、高さピクセルが２００超え、２００以下１５０超え、１５０以下１００超え、１００以下５０超え、５０以下の順に４点、５点、３点、１点、０点と設定される。項目「顔の明るさ」の状態別評価点は５段階評価とし、各ピクセルのRGB値を平均した平均輝度値が２４０超え、２４０以下２００超え、２００以下１５０超え、１５０以下１００超え、１００以下の順に２点、５点、３点、１点、０点と設定される。項目「目検出」の状態別評価点は３段階評価とし、テンプレートマッチングにより「両目」と判定されると５点、「片目」と判定されると３点、「なし」と判定されると０点と設定される。
【００３２】
例えば、方向算出部が正面と判定すると５を出力し、その重み係数乗算部から３０（＝５×６）が出力される。大きさ算出部が高さピクセルとして１８０を検出すると５を出力し、その重み係数乗算部から３０（＝５×６）が出力される。明るさ算出部が各ピクセルのRGB値を平均した平均輝度値として１４０を検出すると１を出力し、その重み係数乗算部から４（＝１×４）が出力される。目の位置算出部が両目と判定すると５を出力し、その重み係数乗算部から２０（＝５×４）が出力される。そして、これら重み係数乗算部からの出力を受けた加算部は８４（＝３０＋３０＋４＋２０）を出力する。加算部からの８４は評価値算出部からの評価値（スコア値）となる。
【００３３】
この評価値算出部からの評価値を受けた評価情報出力手段は、取り込んだ静止画像に評価値を関連付け、評価情報として撮影画像記憶手段５０４に出力する。これらの動作は撮影開始から撮影終了までの期間、つまり、通行イベント情報のイベント番号が同じ期間に撮影画像受信手段５０３にて受信された複数の静止画像に対して行われ、これら複数の静止画像それぞれに対して評価値が算出されて評価情報として撮影画像記憶手段５０４に出力される。
【００３４】
なお、評価情報出力手段における評価値と静止画像との関連付けは画像のファイル名に評価値を追記したファイル名に変更（リネーム）する方法、画像ファイルのユーザ領域やメタ情報領域に評価値を挿入する方法などによって行われる。
【００３５】
画像選択手段５０６は、撮影画像評価値算出手段５０４で算出された評価値に基づいて、撮影画像記憶手段５０４に記憶された複数の静止画像から静止画像を選択する。例えば、最も評価値が高い評価情報を有する静止画像を選択し検出画像データ生成手段５０７に出力する。
【００３６】
検出画像データ生成手段５０７は画像選択手段５０６から受信した静止画像に第１の通行イベント情報記憶手段５０２から受け取った通行イベント情報を関連付けて（組み合わせて）検出画像データを生成し、ネットワーク５００を介して出入管理装置６００に送信する。
【００３７】
この検出画像データ生成手段５０７における静止画像と通行イベント情報との関連付けは上述した評価値と静止画像との関連付けと同様の方法、例えばファイル名を変更することにより関連付けを行う方法、つまり静止画像の画像ファイル名「画像０００１．ｊｐｇ」に通行イベント情報におけるイベント番号「０００１」を付加して「画像０００１−イベント０００１．ｊｐｇ」に変更することにより行い、検出画像データのファイル名として静止画像を送信する。
【００３８】
出入管理装置６００は、第２の個人識別情報処理情報受信手段６０１（以下、第２の通行イベント情報受信手段と略称する）と、第２の個人識別情報処理情報記憶手段６０２（以下、第２の通行イベント情報記憶手段と略称する）と、液晶モニタ等の表示手段６０３と、検出画像データ受信手段６０４と、検出画像データ記憶手段６０５とを有する。
【００３９】
第２の通行イベント情報受信手段６０１は通行イベント情報生成手段３０３からの通行イベント情報をネットワーク５００を介して受信し、第２の通行イベント情報記憶手段６０２に出力する検出画像データ受信手段６０４は検出画像データ生成手段５０７からの検出画像データをネットワーク５００を介して受信し、検出画像データ記憶手段６０５に出力する。
【００４０】
表示手段６０３は第２の通行イベント情報記憶手段６０２に記憶された通行イベント情報を表示し、また、検出画像データ記憶手段６０５に記憶された検出画像データ、つまり、適切な顔、認識しやすい顔が映っている静止画像をその通行イベント情報とともに表示する。例えば、イベント番号０００１を含む通行イベント情報に対応する最適な静止画像表示する場合、表示手段６０３は検出画像データにおけるファイル名の「イベント０００１」をキーとして画像を検索して表示させられることになる。
【００４１】
表示手段６０３に通行イベント情報が表示されることにより、管理者は個人認証対象者の出入を把握し管理できる。また、表示手段６０３に通行イベント情報とともにそれに対応した適切な顔、認識しやすい顔が映っている静止画像が表示されることにより、管理者は精度高く個人認証対象者の人物特定を行える。
【００４２】
次に、表示手段６０３における表示内容の一例を図５〜図７を用いて説明する。各図に示すように、表示手段６０３の左側は第２の通行イベント情報記憶手段６０２から受け取った通行イベント情報が表示される通行イベント情報表示領域、右側は検出画像データ記憶手段６０５から受け取った静止画像が表示される静止画像表示領域である。
【００４３】
図５は１日の中での始めの個人認証処理がなされた場合の通行イベント情報を表示した例を示したものであり、イベント番号０００１に対応して第２の通行イベント情報記憶手段６０２に記憶された通行イベント情報に基づいて最初の個人認証対象者である個人識別ＩＤ１２３４５６、認証時刻９時２０分３０秒、種別「入室」、認証結果「成功」が表示される。
【００４４】
図６は図５に示された状態において管理者がイベント番号０００１をクリックした場合の表示例を示したものであり、イベント番号０００１に対応した検出画像データ記憶手段６０５に記憶された静止画像データが表示される。この表示された静止画像は通行イベント情報期間における最も評価値が高かった個人識別ＩＤ１２３４５６を持つ個人認証対象者の顔画像である。
【００４５】
図７は５人の個人認証対象者が認証を行った後の通行イベント情報、および管理者がイベント番号０００５をクリックした場合の表示例を示したものである。通行イベント情報領域には個人認証対象者が個人認証処理を行う度にイベント番号に対応して第２の通行イベント情報記憶手段６０２に記憶された通行イベント情報に基づいて情報が表示される。画像表示領域にはイベント番号０００５に対応した検出画像データ記憶手段６０５に記憶された静止画像データが表示される。この表示された静止画像は５番目の個人認証対象者に対する通行イベント情報期間における最も評価値が高かった顔画像である。認証を失敗した個人認証対象者の顔画像であっても画像表示領域に表示できる。
【００４６】
こうすることにより管理者は、イベント番号０００５に対応する個人認証処理を行った個人認証対象者の人物名は確認することができないものの、画像表示領域に表示された客観的に認識しやすい顔画像を見ることにより、人物確認を行うことが可能となる。
【００４７】
次に、このように構成された本発明の実施の形態１の動作について図８(a)(b)及び図９を用いて説明する。図８(a)(b)は横軸を時間軸とした場合の各装置間のデータのやり取りを示し、図９はフロー図を示す。
【００４８】
まず、図８(a)及び図９を用いて、個人認証対象者Aが読取操作しその撮影の途中に別の者が読取操作を行わない場合について説明する。この場合、図９におけるステップＳ１１、ステップＳ１６の分岐は「Ｎｏ」となる。個人認証対象者Ａが、１２時００分００秒に個人識別データ読取装置１００のデータ読取手段２００に対しICカードなどの個人識別情報媒体により読取操作を行うと、データ読取手段２００が個人識別情報媒体から個人識別情報を読み取り、認証管理装置３００のデータ照合手段３０１に送信する（図８(a)のステップ００１、００２、図９のステップＳ１、Ｓ２）。
【００４９】
これを受けて、認証管理装置３００のデータ照合手段３０１は個人認証対象者Aについての個人認証処理を行う。すなわち、データ読取手段２００からの個人識別情報と登録情報記憶手段３０２に記憶されている個人識別情報とを比較・照合し、受信した個人識別情報が登録情報記憶手段３０２に一致する個人識別情報が記憶されていると認証の成功を、また一致する個人識別情報が記憶されていないと失敗を表す個人認証結果信号を出入り口扉７００に出力する（図８(a)のステップ００３、図９のステップＳ３、Ｓ４）。
【００５０】
データ照合手段３０１から「認証成功」を示す個人認証結果信号が出力されると出入り口扉７００の錠の開錠が行なわれる（図９のステップＳ５）。「認証失敗」を示す個人認証結果信号が出力された場合は出入り口扉７００の錠の開錠は行われない。
【００５１】
また、データ読取手段２００からの個人識別情報を受けた通行イベント情報生成手段３０３はその個人識別情報にイベント番号を付加するとともに認証時刻、入室、退室などの種別を付加して通行イベント情報（図２参照）を生成し、個人識別データ読取装置１００のデータ関連付手段５００へ送信するとともに、ネットワーク５００を介して出入管理装置６００に送信する（図８(a)のステップ００４、図９のステップＳ６）。
【００５２】
出入管理装置６００ではその第２の通行イベント情報受信手段６０１にて通行イベント情報をネットワーク５００を介して受信し、第２の通行イベント情報記憶手段６０２に記憶するとともに、図５に示すように表示手段６０２に通行イベント情報の内容を表示する（図８(a)の００５、図９のステップＳ７）。
【００５３】
一方、個人識別データ読取装置１００のデータ読取手段２００は個人識別情報媒体を感知すると画像撮影装置４００に対して撮影開始信号を送信する（図８(a)のステップ００６）。撮影開始信号を受けた画像撮影信号４００は所定間隔毎に出入り口扉７００近辺の特定エリアの出入口における画像撮影を開始し、個人識別データ読取装置１００の撮像画像受信手段５０３に撮影した静止画像Ａ１〜Ａ４を送信する（図８(a)のステップ００７、図９のステップＳ８）。
【００５４】
そして、データ読取手段２００から撮影開始信号を送信した時間から所定時間後（図８(a)の例では１０秒後）に、画像撮影装置４００は、内部に保有するタイマーにより所定時間の経過を感知し、撮影を終了する。
【００５５】
撮影画像受信手段５０３は、受信した静止画像Ａ１〜Ａ４を撮影画像記憶手段５０４に送り、撮影画像評価値算出手段５０５は撮影画像記憶手段５０４から取り出した画像に対して顔検出処理を行い、評価値を算出する（図８(a)の００８、図９のステップＳ９、Ｓ１０）
【００５６】
撮影時間が経過すると（図９のステップＳ１２）、画像選択手段５０６は、静止画像Ａ１〜Ａ４から最も評価値が高かった静止画像を選択する（図８(a)の００９、図９のステップＳ１３）。
【００５７】
検出画像データ生成手段５０７は、画像選択手段５０６で選択された静止画像と、認証管理装置３００の通行イベント情報生成手段３０３で生成された通行イベント情報とを組み合わせて検出画像データを生成し、出入管理装置６００に送信する（図８(a)の０１０、図９のステップＳ１４）。検出画像データは、検出画像データ記憶手段６０５に記憶される（図９のステップＳ１５）。そして、表示手段６０３が検出画像データ記憶手段６０５に記憶された検出画像データ、つまり、適切な顔、認識しやすい顔が映っている静止画像をその通行イベント情報とともに表示する。
【００５８】
次に、図８(b)及び図９を用いて、個人認証対象者Aが読取操作しその撮影の途中に別の者が読取操作を行った場合について説明する。この場合、図９におけるステップＳ１１、ステップＳ１６の分岐は「Ｙｅｓ」となる。図８(b)における００１から００８までの処理については、図８(a)と同様であるためその説明を省略する。
【００５９】
個人認証対象者Ａが撮影されている間に別の個人認証対象者Ｂが読取操作を行うと、個人識別データ読取装置１００は、人の顔の検出処理を途中であっても中止し、Ｂによる読取操作が行われるまでに撮影され評価値が算出された静止画像から、その評価値に基づいて最適の画像を選択する。そして、選択した静止画像と通行イベント情報とから検出画像データを生成し、出入管理装置６００に送信する。また、Ｂに対しては読取操作時から所定時間の間（図８(b)の例では１０秒間）、新たに画像を撮影する。
【００６０】
具体的には、別の個人認証対象者が読取操作を行うと、個人識別データ読取装置１００のデータ読取手段２００は撮影画像評価値算出手段５０５に対して顔検出処理を中止させる検出処理中止信号を送信するとともに、画像撮影装置４００に対して、内部タイマーをリセットし、新たに所定時間の間撮影を行うようにするリセット信号を送信する。リセット信号を受信した画像撮影装置４００は、リセット信号を受信した時から所定時間の間個人認証対象者Ｂの撮影を行う（図８(b)の００９）。こうすることにより、途中で読取操作を行った個人認証対象者Ｂに対しても所定時間撮影を行うことができる。
【００６１】
画像選択手段５０６は、個人認証対象者Ｂが読取操作を行うと、個人認証対象者Ｂによる読取操作がなされるまでに顔検出処理がなされた静止画像から、最も評価値が高い静止画像を選択する（図８(b)の０１０、図９のステップＳ１３）。図８(b)では、顔検出処理された画像Ａ１またはＡ２のいずれかの画像を選択する。
【００６２】
個人認証対象者Ａについては、選択された画像と通行イベント情報とが組み合わされて検出画像データとして出入管理装置６００に送信される（図８(b)の０１１、図９のステップＳ１４、Ｓ１５）。一方、個人認証対象者Ｂについては、Ｂにより別の読取操作が行われるので（図９のステップＳ１６−Ｙｅｓ）、上述したように、個人識別情報が読み取られて認証処理され、通行イベント情報と撮影された静止画像とから検出画像データが生成され出入管理装置６００に送信される（図８(b)の０１２〜０１８、図９のステップＳ２〜Ｓ１５）。なお、図８(b)に示す例では、所定時間（１０秒）の間別の個人認証対象者による読取操作がなかったので、１０秒の間に撮影された画像Ｂ１〜Ｂ４のいずれかから最適な画像が選択される。
【００６３】
以上のように、本発明の実施の形態１によれば、記憶された複数の静止画像から適切な顔が映っている静止画像を選択し、選択した静止画像と通行イベント情報とを表示することにより、個人認証対象者の人物特定を精度高く行うことが可能となる。
【００６４】
また、顔検出処理の結果に基づき選択された画像を、個人認証を行った時刻ではなく、個人認証対象者のフロア通行時の個人認証処理（イベント）を表す通行イベント情報と関連付けて保存することにより、管理者は、イベント毎に対応付けられた画像を表示・検索することができ、管理者の操作負担を軽減させることが可能となる。
【００６５】
例えば、ある時刻における個人認証が認証失敗であったとする。従来の出入管理システムにおいては、個人認証時刻に撮影された画像が表示されていたことから、その時刻において撮影された画像内の顔が不明確であった場合は、管理者はその時刻前後の画像をデータベースから探さなければならず、また表示画像が動画像形式の場合には、顔が認識できる瞬間を見つけるため常に動画を注意深く見ておかなければならない。
【００６６】
一方、本発明の実施の形態１においては、個人認証時刻に依存せず通行イベント情報に基づいて検索を行うことができる。すなわち、各通行イベントにおける最適な画像が通行イベント毎に対応付けられて保存されているので、上述したように、表示されている通行イベント情報におけるイベント番号をクリックするだけでその通行イベントに関して最も最適な画像を表示させることが可能となり、管理者はデータベースから適切な画像を１枚１枚検索する必要がなくなり、操作負担を軽減させることができる。
【００６７】
また、個人認証対象者の撮影・顔検出処理の途中で別の個人認証対象者による読み取り要求があった場合には、その前の個人認証対象者の顔検出処理を停止して画像の選択を行い、すぐに別の個人認証対象者に対する個人認証・撮影等の処理を行うので、別の個人認証対象者が撮影されないということを防止できる。そのため、複数の通行人が短い時間間隔で出入を行う場合においても、全ての通行人に対して漏れなく撮影を行うことができる。
【００６８】
なお、画像撮影装置４００のカメラの種別については、アナログカメラ、デジタルカメラ、ネットワークカメラ等、特に制限はない。また、画像撮影装置４００は必ずしも個人識別データ読取装置１００と別々である必要はなく、一体型であってもよい。また、画像撮影装置４００は、ネットワーク７００と接続され、ネットワーク経由で撮影画像を個人識別データ読取装置１００へ送信してもよい。
【００６９】
なお、図８(a)では画像撮影装置４００は１０秒間に４枚の静止画像を撮影するが、これに限るものではなく、撮影時間・撮影枚数ともに任意に設定できるものとする。
【００７０】
なお、画像撮影装置４００は、個人認証対象者による個人認証操作が行われる前から画像の撮影を開始するようにしてもよい。そうすることにより、個人認証対象者を撮影する回数が増え、より評価値の高い画像を得られる確率が増え、管理者が個人認証対象者をより容易に特定することができる。また、画像撮影装置４００に映像の中の動きを検知するモーションディテクト機能を持たせて、動きを検知したら撮影を開始するとしてもよい。そうすることにより、個人認証対象者が撮影範囲内にいる場合にのみ撮影を行うので、誰も人が写っていない無駄な画像の蓄積を抑えつつ、個人認証対象者を個人認証操作前から撮影することができる。
【００７１】
なお、図１に示した出入管理システムの装置構成については、説明を簡単にするため認証管理装置３００、画像撮影装置４００、出入管理装置６００をそれぞれ１台のみ示したが、それぞれの装置を適宜複数配置して出入を管理するようにしてもよい。
【００７２】
図１０は画像撮影装置４００を２台配置した構成を示す。図１０のように画像撮影装置４００a、４００bを２台配置することにより、撮影設定時間内でできるだけ長い間、個人認証対象者を撮影することができる。例えば個人認証対象者が個人認証処理を行って開錠された出入り口扉７００をすぐに通過した場合においても、画像撮影装置４００bにより出入り口扉７００通過後の個人認証対象者を撮影することができる。
【００７３】
なお、図１の個人識別データ読取装置１００の読み取り対象とする記録媒体は非接触型のＩＣカードに限らず、接触型の磁気ストライプカードでもよい。もしくは読み取り時に暗証番号の入力を求めることとしてもよい。
【００７４】
なお、認証管理装置３００は、個人認証が成功してもすぐには出入り口扉７００の錠を開錠せず、画像撮影装置４００の撮影時間が経過するまで個人認証対象者を通行させないようにしてもよい。そうすることにより、設定された撮影時間の間は必ず個人認証対象者の画像を撮影することができ、その画像から評価値が高く顔を認識しやすい画像を得られる確率が増すので、管理者が個人認証対象者をより容易に特定することができる。
【００７５】
なお、図２に示す通行イベント情報については、扉番号、カメラの固体番号等も通行イベント情報に含めてもよい。
【００７６】
なお、撮影画像評価値算出手段５０５は、上述したようにスコア値を計算せず、静止画像から検出された顔の大きさに基づいて評価を行ってもよいし、輝度値に基づく顔の明るさに基づいて評価を行ってもよい。また、顔検出を行ったときの検出された顔の数を評価値として算出し、画像選択手段５０６はその顔の数に基づいて撮影画像を選択するようにしてもよい。その場合、顔の数が複数であると評価値が大きくなるものとし、顔の数は、画像内の顔として識別された領域数を数えることにより容易に求めることができる。
【００７７】
検出した顔の数に基づいて評価を行う場合、撮影画像評価値算出手段５０５は検出した顔の数を評価結果として画像選択手段５０６に通知する。こうすることにより、管理者は複数人による通行を容易に検索・発見することができる。例えば、不正通行が考えられるが個人認証処理には問題がなかった場合等については、個人識別IDを持たない者による共連れ入室が考えられるが、上述したように検出した顔の数を評価値とすることにより複数の顔が検出された画像が優先的に表示され、管理者は画像を１枚１枚確認せずとも評価値の高い画像をすぐに検索して複数人の通行を容易に発見することが可能となる。
【００７８】
また、検出した顔の数を項目の１つに含めて上述のスコア値を計算してもよい。そのようにすることにより、検出した顔の数と、それら顔の把握しやすさとを調整して評価値を算出することができる。
【００７９】
さらに、撮影した画像の中から検出した顔の数が複数ある画像に絞り込み、その中でスコア値が高い画像を画像選択手段５０６に選択させるようにしてもよい。この場合、撮影画像評価値算出手段５０５は受け取った画像の顔検出処理を行い検出した顔の数が複数であれば撮影画像記憶手段５０４に記憶する。複数でなければ記憶しない、もしくは撮影画像記憶手段５０４の別の記憶領域に記憶する。
【００８０】
そして撮影時間が経過すると、撮影画像評価値算出手段５０５は撮影画像記憶手段５０４に記憶した画像（複数の顔が検出された画像）を受信して再度顔検出処理を行い、スコア値を算出する。そして、スコア値を算出した画像のうちスコア値が最も高い画像を選択するよう画像選択手段５０６に通知する。
【００８１】
そのようにすることにより、表示する画像には複数の顔が写っており、かつ、それらの顔が最も客観的にバランスが取れているので、管理者は、画像を１枚１枚確認することなく容易に複数人の通行を発見し、それら複数の顔を容易に把握することが可能となる。
【００８２】
なお、撮影画像評価値算出手段５０５は、画像撮影装置４００が動画像形式の場合において、最も評価値の高い画像が撮影された時間前後の動画像を撮影画像記憶手段５０４に保存することとしてもよい。そうすることにより、管理者は、最も評価値の高い静止画像と動画像を組み合わせて人物確認を行うことができ、より容易に不審者の把握が可能となる。
【００８３】
なお、撮影画像評価値算出手段５０５は、評価した画像を全て撮影画像記憶手段５０４に保存せず、最も評価値の高い画像のみ保存するようにしてもよい。また、評価値の比較的高い画像を保存、例えば一定の閾値を設定し、その閾値を超えた評価値を有する画像のみ保存するというようにしてもよい。そうすることにより、評価値が小さく顔が十分に検出されていない画像を保存する必要がなくなり、撮影画像記憶手段５０４に記憶するデータ容量を削減することが可能となる。
【００８４】
なお、画像選択手段５０６が選択する画像は必ずしも１枚である必要はなく、複数枚選択してもよい。評価値が高い順に複数の画像を選択してもよいし、一定の閾値を設け、撮影画像評価値算出手段５０５で評価値が算出された静止画像のうち、閾値を超えた評価値を有する画像のみ選択するとしてもよい。そうすることにより管理者は、複数の画像から個人認証対象者の顔を特定することができ、さらに容易に不審者を判別することができる。
【００８５】
なお、表示手段６０３に通行イベント情報を表示する場合において、認証が失敗したときには、通行イベント情報の認証項目での内容「失敗」を目立たせて表示させたり、エラー音を鳴らすようにしてもよい。そうすることにより、管理者はより容易に異常を発見しやすくなる。
【００８６】
実施の形態２．
図１１は、本発明の実施の形態２に係る出入管理システムの構成図を示す。本実施の形態は、撮影画像記憶手段５０４が第１の撮影画像記憶領域５０４−１と第２の撮影画像記憶領域５０４−２とを有する点において実施の形態１と異なる。実施の形態１に相当する部分には図３と同一符号を付してその説明を省略する。
【００８７】
第１の撮影画像記憶領域５０４−１には、撮影画像取得手段５０３が画像撮影装置４００から受信した撮影画像のうちの１枚が保存される。例えば、個人認証が行われた時刻とほぼ同時刻に撮影された１枚目の撮影画像が保存される。以下、第１の撮影画像記憶領域５０４−１には１枚目の撮影画像が保存されるとして説明をするが、これに限るものではなく、撮影時間中に撮影された画像のうちいずれの撮影画像であってもよい。
【００８８】
第２の撮影画像記憶領域５０４−２には、画像撮影装置４００によって撮影時間中に撮影された画像のうち、第１の撮影画像記憶領域５０４−２に保存された画像以外の撮影画像が保存される。
【００８９】
図１２は、本発明の実施の形態２に係る出入管理システムの動作を表すフロー図を示す。ステップS１〜S９までの処理は、実施の形態１における図９と同様であるため省略する。
【００９０】
受信した撮影画像が１枚目であれば（ステップS１０-Yes）、その画像は第１の画像記憶領域に保存される（ステップS１１）。受信した撮影画像が１枚目でなければ（ステップS１０-No）、すなわち２枚目以降の撮影画像であれば、第２の画像記憶領域に保存される（ステップS１２）。
【００９１】
撮影画像評価値算出手段５０５は、１枚目の撮影画像については第１の撮影画像記憶領域５０４−１から画像を受信して顔検出処理を行う。２枚目以降の撮影画像については第２の撮影画像記憶領域５０４−２から画像を受信して顔検出処理を行う（ステップS１３）。
【００９２】
そして、撮影時間中に別の読み取り操作がなく（ステップS１４−No）、撮影時間が経過し（ステップS１５−Yes）、顔検出が撮影画像のうちいずれか１枚でも成功すると（ステップS１６-Yes）、画像選択手段５０６は最も評価の高かった画像を選択する（ステップS１７）。
【００９３】
撮影画像のうちいずれも顔検出が成功しなかった場合は（ステップS１６−No）、撮影画像評価値算出手段５０５は、顔検出ができなかったという顔検出結果を画像選択手段５０６に通知するとともに、画像選択手段５０６は、第１の撮影画像記憶領域５０４−１から１枚目の画像を選択する（ステップS１８）。
【００９４】
検出画像データ生成手段５０７は、画像選択手段５０６から受信した１枚目の画像と通行イベント情報とを関連付けて検出画像データを生成する（ステップS１９）。またこのとき、顔検出ができなかったという結果を関連付ける。関連付けの方法については実施の形態１と同様の方法を用いることができる。関連付けられた検出画像データは、検出画像データ記憶手段６０５に保存され（ステップS２０）、必要に応じて表示手段６０３にて表示される。
【００９５】
顔検出ができなかったという結果が関連付けられた検出画像データが検出画像データ記憶手段６０５に保存されたとき、すなわち顔検出ができなかったという結果が出入管理装置６００に通知されたとき、出入管理装置６００は、表示手段６０３にて顔検出ができなかった旨とその通行イベントに対応するイベント番号等を表示するようにしてもよい。そうすることにより、管理者は、１枚１枚画像を確認せずとも顔が検出できなかった通行であったことを容易に検索・認識することができる。特に不審者による不正通行は、意図的に画像撮影装置に顔を向けなかったり、顔を覆い隠したりすることが多いので、そういった不正通行を検索等する場合に有効である。
【００９６】
以上のように、本発明の実施の形態２によれば、実施の形態１の効果を有することに加えて、撮影画像評価値算出手段５０５における顔検出ができなかった場合においても、撮影画像を通行イベント情報と関連付けて保存し表示可能とすることにより、管理者は、出入時の状況を画像で確認することができる。
【００９７】
また、上述したように顔検出ができなかったという結果と対応するイベント番号等とを表示装置６０３に表示することにより、管理者は、顔検出ができなかった通行を容易に検索等することが可能となる。
【符号の説明】
【００９８】
１００ 個人識別データ読取装置
２００ データ読取装置
３００ 認証管理装置
３０１ データ照合手段
３０２ 登録情報記憶手段
３０３ 通行イベント情報生成手段
４００ 画像撮影装置
５００ データ関連付手段
５０１ 通行イベント情報受信手段
５０２ 通行イベント情報記憶手段
５０３ 撮影画像取得手段
５０４ 撮影画像記憶手段
５０４−１ 第１の撮影画像記憶領域
５０４−２ 第２の撮影画像記憶領域
５０５ 撮影画像評価値算出手段
５０６ 画像選択手段
５０７ 検出画像データ生成手段
６００ 出入管理装置
６０１ 通行イベント情報受信手段
６０２ 通行イベント情報記憶手段
６０３ 表示手段
６０４ 検出画像データ受信手段
６０５ 検出画像データ記憶手段
【特許請求の範囲】
【請求項１】
出入口扉近辺の特定エリアの出入口を撮影するように配置される画像撮影装置と、
複数の個人識別情報が蓄積され、受信した個人識別情報と前記蓄積個人識別情報とを比較、照合し、認証の成功または失敗を表す個人認証結果信号を前記出入口扉の錠の開錠と施錠を制御する信号として出力するとともに、前記受信した個人識別情報に基づき個人認証対象者の前記出入口通行時の個人認証処理を表す個人識別情報処理情報を生成し、出力する認証管理装置と、
前記出入口扉近辺の出入口に設置され、個人識別情報が記憶された個人識別情報媒体を感知すると当該個人識別情報媒体から個人識別情報を読み取り、この個人識別情報を前記認証管理装置に出力するデータ読取手段と、前記画像撮影装置からの複数の静止画像の内、所定の条件に合った静止画像を選択し、選択した静止画像と前記認証管理装置からの個人識別情報処理情報とを組み合わせた検出画像データとして送信するデータ関連付け手段とを有した個人識別データ読取装置と、
前記認証管理装置からの個人識別情報処理情報を受信し、この個人識別情報処理情報に応じた内容を表示するとともに、前記個人識別データ読取装置のデータ関連付け手段からの検出画像データを受信し、この検出画像データの個人識別情報処理情報に基づいて静止画像を表示する出入管理装置と
を備えたことを特徴とする出入管理システム。
【請求項２】
前記所定の条件は、静止画像の顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して算出された評価値の値にて決定されることを特徴とする請求項１記載の出入管理システム。
【請求項３】
前記個人識別情報処理情報は、個人認証処理毎に付される個人認証処理番号と、個人識別情報と、認証時刻と、認証結果の情報とを有することを特徴とする請求項１または請求項２記載の出入管理システム。
【請求項４】
前記個人認証対象者の撮影途中に別の個人認証対象者による読取操作があると、
前記個人識別データ読取装置は、前記別の個人認証対象者による読取操作が行われるまでに撮影され評価値が算出された静止画像の内から所定の条件に合った静止画像を選択することを特徴とする請求項１〜３のいずれかに記載の出入管理システム。
【請求項５】
前記データ関連付け手段は、
前記画像撮影装置から受け取った前記静止画像を記憶する撮影画像記憶手段と、
前記静止画像の画像内から人の顔を検出し、前記評価値を算出する撮影画像評価値算出手段と、
算出された前記評価値に基づいて複数の前記静止画像から静止画像を選択する画像選択手段と、
前記認証管理装置から受け取った個人識別情報処理情報を記憶する第１の個人識別情報処理情報記憶手段と、
前記画像選択手段で選択された前記静止画像と前記第１の個人識別情報処理情報記憶手段に記憶される前記個人識別情報処理情報とを関連付けて検出画像データを生成する検出画像データ生成手段と
を備えることを特徴とする請求項１〜４のいずれかに記載の出入管理システム。
【請求項６】
前記画像選択手段は、前記評価値に対しての閾値を持っており、前記撮影画像評価値算出手段で評価値が算出された前記静止画像のうち、前記閾値を超えた評価値を持つ前記静止画像を選択することを特徴とする請求項５に記載の出入管理システム。
【請求項７】
前記撮影画像評価値算出手段は、前記静止画像内から人の顔を検出しその顔の数を評価値として算出し、
前記画像選択手段は前記撮影画像評価値算出手段で算出された顔の数に基づいて前記撮影画像を選択することを特徴とする請求項５または６に記載の出入管理システム。
【請求項８】
前記出入管理装置は、前記撮影画像評価値算出手段が前記静止画像から顔検出できない場合には顔検出ができなかった旨を表示することを特徴とする請求項５〜７のいずれかに記載の出入管理システム。
【請求項９】
個人識別情報が記憶された個人識別情報媒体から個人識別情報を感知すると当該個人識別情報媒体から個人識別情報を読み取るデータ読取手段と、
複数の静止画像を記憶する撮影画像記憶手段と、記憶された複数の静止画像それぞれの顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して静止画像の評価値を算出する評価値算出手段と、前記評価値算出手段にて算出された評価値に基づき複数の静止画像から所定の静止画像を抽出する画像選択手段と、前記データ読取手段にて個人識別情報を読み取る毎に付される個人認証処理番号と前記個人識別情報とを有する個人識別情報処理情報を記憶する個人識別情報処理情報記憶手段と、前記画像選択手段にて抽出された前記所定の静止画像と前記個人識別情報処理情報記憶手段に記憶された個人識別情報処理情報とを組み合わせた検出画像データを生成し、出力する検出画像データ生成手段とを有するデータ関連付け手段と
を備えたことを特徴とする個人識別データ読取装置。
【請求項１】
出入口扉近辺の特定エリアの出入口を撮影するように配置される画像撮影装置と、
複数の個人識別情報が蓄積され、受信した個人識別情報と前記蓄積個人識別情報とを比較、照合し、認証の成功または失敗を表す個人認証結果信号を前記出入口扉の錠の開錠と施錠を制御する信号として出力するとともに、前記受信した個人識別情報に基づき個人認証対象者の前記出入口通行時の個人認証処理を表す個人識別情報処理情報を生成し、出力する認証管理装置と、
前記出入口扉近辺の出入口に設置され、個人識別情報が記憶された個人識別情報媒体を感知すると当該個人識別情報媒体から個人識別情報を読み取り、この個人識別情報を前記認証管理装置に出力するデータ読取手段と、前記画像撮影装置からの複数の静止画像の内、所定の条件に合った静止画像を選択し、選択した静止画像と前記認証管理装置からの個人識別情報処理情報とを組み合わせた検出画像データとして送信するデータ関連付け手段とを有した個人識別データ読取装置と、
前記認証管理装置からの個人識別情報処理情報を受信し、この個人識別情報処理情報に応じた内容を表示するとともに、前記個人識別データ読取装置のデータ関連付け手段からの検出画像データを受信し、この検出画像データの個人識別情報処理情報に基づいて静止画像を表示する出入管理装置と
を備えたことを特徴とする出入管理システム。
【請求項２】
前記所定の条件は、静止画像の顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して算出された評価値の値にて決定されることを特徴とする請求項１記載の出入管理システム。
【請求項３】
前記個人識別情報処理情報は、個人認証処理毎に付される個人認証処理番号と、個人識別情報と、認証時刻と、認証結果の情報とを有することを特徴とする請求項１または請求項２記載の出入管理システム。
【請求項４】
前記個人認証対象者の撮影途中に別の個人認証対象者による読取操作があると、
前記個人識別データ読取装置は、前記別の個人認証対象者による読取操作が行われるまでに撮影され評価値が算出された静止画像の内から所定の条件に合った静止画像を選択することを特徴とする請求項１〜３のいずれかに記載の出入管理システム。
【請求項５】
前記データ関連付け手段は、
前記画像撮影装置から受け取った前記静止画像を記憶する撮影画像記憶手段と、
前記静止画像の画像内から人の顔を検出し、前記評価値を算出する撮影画像評価値算出手段と、
算出された前記評価値に基づいて複数の前記静止画像から静止画像を選択する画像選択手段と、
前記認証管理装置から受け取った個人識別情報処理情報を記憶する第１の個人識別情報処理情報記憶手段と、
前記画像選択手段で選択された前記静止画像と前記第１の個人識別情報処理情報記憶手段に記憶される前記個人識別情報処理情報とを関連付けて検出画像データを生成する検出画像データ生成手段と
を備えることを特徴とする請求項１〜４のいずれかに記載の出入管理システム。
【請求項６】
前記画像選択手段は、前記評価値に対しての閾値を持っており、前記撮影画像評価値算出手段で評価値が算出された前記静止画像のうち、前記閾値を超えた評価値を持つ前記静止画像を選択することを特徴とする請求項５に記載の出入管理システム。
【請求項７】
前記撮影画像評価値算出手段は、前記静止画像内から人の顔を検出しその顔の数を評価値として算出し、
前記画像選択手段は前記撮影画像評価値算出手段で算出された顔の数に基づいて前記撮影画像を選択することを特徴とする請求項５または６に記載の出入管理システム。
【請求項８】
前記出入管理装置は、前記撮影画像評価値算出手段が前記静止画像から顔検出できない場合には顔検出ができなかった旨を表示することを特徴とする請求項５〜７のいずれかに記載の出入管理システム。
【請求項９】
個人識別情報が記憶された個人識別情報媒体から個人識別情報を感知すると当該個人識別情報媒体から個人識別情報を読み取るデータ読取手段と、
複数の静止画像を記憶する撮影画像記憶手段と、記憶された複数の静止画像それぞれの顔画像における顔の方向、大きさ、明るさ、目の位置などを数値化して静止画像の評価値を算出する評価値算出手段と、前記評価値算出手段にて算出された評価値に基づき複数の静止画像から所定の静止画像を抽出する画像選択手段と、前記データ読取手段にて個人識別情報を読み取る毎に付される個人認証処理番号と前記個人識別情報とを有する個人識別情報処理情報を記憶する個人識別情報処理情報記憶手段と、前記画像選択手段にて抽出された前記所定の静止画像と前記個人識別情報処理情報記憶手段に記憶された個人識別情報処理情報とを組み合わせた検出画像データを生成し、出力する検出画像データ生成手段とを有するデータ関連付け手段と
を備えたことを特徴とする個人識別データ読取装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１２−１０８６４５（Ｐ２０１２−１０８６４５Ａ）
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願番号】特願２０１０−２５５８１７（Ｐ２０１０−２５５８１７）
【出願日】平成２２年１１月１６日（２０１０．１１．１６）
【出願人】（０００００６０１３）三菱電機株式会社 (33,312)
【Ｆターム（参考）】
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願日】平成２２年１１月１６日（２０１０．１１．１６）
【出願人】（０００００６０１３）三菱電機株式会社 (33,312)
【Ｆターム（参考）】
[ Back to top ]