情報処理装置および方法、並びにプログラム
【課題】顔画像を用いた認証処理における顔画像の誤検出を低減する。
【解決手段】顔画像信頼度算出部２２２は、取得された顔画像の信頼度を顔画像信頼度として算出する。顔器官抽出部２２３は、取得された顔画像より顔器官を抽出する。顔器官信頼度算出部２２４は、抽出された顔器官の信頼度を顔器官信頼度として算出する。顔画像判定部２２５は、顔画像信頼度、および顔器官信頼度のいずれもが、所定の閾値よりも高い場合、顔画像を照合部２２６に供給し、照合処理を実行させる。本発明は、監視システムに適用することができる。
【解決手段】顔画像信頼度算出部２２２は、取得された顔画像の信頼度を顔画像信頼度として算出する。顔器官抽出部２２３は、取得された顔画像より顔器官を抽出する。顔器官信頼度算出部２２４は、抽出された顔器官の信頼度を顔器官信頼度として算出する。顔画像判定部２２５は、顔画像信頼度、および顔器官信頼度のいずれもが、所定の閾値よりも高い場合、顔画像を照合部２２６に供給し、照合処理を実行させる。本発明は、監視システムに適用することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置および方法、並びにプログラムに関し、特に、顔画像を用いた認証処理における人物以外の物体を人物として認識するといった誤検出を低減できるようにした情報処理装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
現在、多くの店舗や公共施設では、不特定多数の来店客または来場者の情報を画像として撮像し、撮像された画像内における人物の顔画像を、例えば、指名手配犯などの予め登録された人物の顔画像と照合する技術が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−２７９５４０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１においては、出入口付近を撮像領域としているため、撮像領域内にポスタや立看板等に描かれているキャラクタ画像などの人物画像以外の顔画像が存在する場合、それらを実際の人物の顔画像として誤検出してしまうことがあった。
【０００５】
このような誤検出に対応するため、人物以外の顔画像を認識してしまう画像領域をマスキングして誤検出を低減する技術が提案されている（特願２００７−１５６６９３号公報参照）。
【０００６】
しかしながら、このようにマスキングするようにしても、人物以外の物体が移動するような場合、必ずしも有効に誤検出を低減させることができなかった。
【０００７】
本発明はこのような状況に鑑みてなされたものであり、顔画像の信頼度と、顔画像における顔を構成する各器官の信頼度とを求めて、それらが所定の値よりも高く信頼できるものであるときにのみ認証処理を実行させるようにして、顔画像を用いた認証処理における誤検出を低減させるものである。
【課題を解決するための手段】
【０００８】
本発明の一側面の情報処理装置は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む。
【０００９】
前記取得手段が前記画像より顔画像を取得する手法には、顔の輪郭形状に対応したテンプレートを用いたテンプレートマッチング、前記顔を構成する器官に基づいたテンプレートマッチング、クロマキー処理により顔を構成する頭部の頂点を検出した後、その頂点に基づいて顔画像を検出する手法、肌色領域の形状に基づいて検出する手法、またはニューラルネットワークに基づいて、教師信号による学習により顔らしい領域を検出する手法を含ませるようにすることができる。
【００１０】
前記顔画像信頼度算出手段には、前記顔画像に基づいて、前記顔の輪郭に対応したテンプレートを用いたテンプレートマッチングにより、前記テンプレートとの一致の程度を示す値を前記顔画像信頼度として算出させるようにすることができる。
【００１１】
前記器官抽出手段には、前記顔画像に基づいて、前記器官を構成する画素位置の情報を特徴点として抽出し、前記顔画像の輪郭を含む前記器官を構成する画素位置の情報からなる特徴点の配置を学習することにより得られるパターンを用いたパターンマッチング、または、前記顔画像の領域内における前記器官を構成する画素位置の情報からなる特徴点の配置パターンに基づいたパターンマッチングによりを抽出させるようにすることができる。
【００１２】
前記器官信頼度算出手段には、教師信号による学習により求められた前記顔画像における前記器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルと、前記器官抽出手段により抽出された器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルとのユークリッド空間における距離を前記器官信頼度として算出させるようにすることができる。
【００１３】
本発明の一側面の情報処理方法は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置の情報処理方法であって、前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップとを含む。
【００１４】
本発明の一側面のプログラムは、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置を制御するコンピュータに、前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップとを含む処理を実行させる。
【００１５】
本発明の一側面においては、顔画像が蓄積者の顔画像として蓄積者データベースに蓄積され、画像より照合対象者の顔画像が取得され、取得された照合対象者の顔画像と、蓄積された蓄積者の顔画像との類似度が計算されて、照合され、照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かが判定され、前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることが通知され、取得された顔画像の信頼度が顔画像信頼度として算出され、取得された顔画像より顔の器官が抽出され、抽出された器官の信頼度が器官信頼度として算出され、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合処理、および前記類似判定処理が実行されるように制御される。
【００１６】
本発明の一側面の情報処理装置における、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段とは、例えば、生体情報データベースであり、画像より照合対象者の顔画像を取得する取得手段とは、例えば、顔画像取得部であり、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段とは、例えば、類似度計算部であり、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段とは、例えば、類似度判定部であり、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段とは、例えば、通信部であり、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段とは、例えば、顔画像信頼度算出部であり、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段とは、例えば、顔器官抽出部であり、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段とは、例えば、顔器官信頼度算出部であり、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とは、例えば、顔画像判定部である。
【００１７】
すなわち、顔画像判定部が、顔画像信頼度算出部により算出される顔画像信頼度と、器官信頼度算出部により算出される器官信頼度が、いずれも所定の閾値よりも高く、顔画像としての信頼度がある程度保証される状況においてのみ、類似度計算部による類似度の計算と、類似度と所定の閾値との比較により照合対象者と蓄積者との顔画像が一致するか否かを判定するようにした。
【００１８】
結果として、顔画像信頼度が低い、または、器官信頼度が低い顔画像については、類似度計算部により照合処理が行われず、照合対象者と蓄積者とが一致するか否かが判定されることさえもなくなるので、本来顔画像における認証処理の必要がない顔画像の処理を省くことが可能となり、誤検出を低減させると共に、不要な処理をなくすことで処理負荷を低減させることが可能となる。
【発明の効果】
【００１９】
本発明によれば、顔画像を用いた認証処理における誤検出を低減させることが可能となる。
【図面の簡単な説明】
【００２０】
【図１】本発明を適用した監視システムの一実施の形態の構成を示す図である。
【図２】図１のカメラの設置例を示す図である。
【図３】図１のカメラの設置例を示す図である。
【図４】図１のカメラの設置例を示す図である。
【図５】図１のカメラの設置例を示す図である。
【図６】図１のカメラの設置例を示す図である。
【図７】図１のカメラの設置例を示す図である。
【図８】図１の入口カメラおよび店内カメラの設置例を示す図である。
【図９】図１の画像処理ユニットの構成例を説明する図である。
【図１０】図１の生体情報認識装置の構成例を説明する図である。
【図１１】登録遊技者来店監視処理を説明するフローチャートである。
【図１２】信頼度算出処理を説明するフローチャートである。
【図１３】類似度計算処理を説明するフローチャートである。
【図１４】汎用のパーソナルコンピュータの構成例を説明する図である。
【発明を実施するための最良の形態】
【００２１】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、発明の詳細な説明に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、発明の詳細な説明に記載されていることを確認するためのものである。従って、発明の詳細な説明中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
【００２２】
すなわち、本発明の一側面の情報処理装置は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段（例えば、図１０の生体情報DB２２）と、画像より照合対象者の顔画像を取得する取得手段（例えば、図１０の顔画像取得部２２１）と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段（例えば、図１０の類似度計算部２３２）と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段（例えば、図１０の類似度判定部２３５）と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段（例えば、図１０の通信部２２８）と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段（例えば、図１０の顔画像信頼度算出部２２２）と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段（例えば、図１０の顔器官抽出部２２３）と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段（例えば、図１０の顔器官信頼度算出部２２４）と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段（例えば、図１０の顔画像判定部２２５）とを含む。
【００２３】
本発明の一側面の情報処理方法は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置の情報処理方法であって、前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップ（例えば、図１１のステップＳ２１）と、前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップ（例えば、図１３のステップＳ７３）と、前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップ（例えば、図１１のステップＳ３２）と、前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップ（例えば、図１１のステップＳ３５）と、前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップ（例えば、図１２のステップＳ５１）と、前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップ（例えば、図１２のステップＳ５２）と、前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップ（例えば、図１２のステップＳ５３）と、前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップ（例えば、図１１のステップＳ２４）とを含む。
【００２４】
［監視システムの構成例］
図１は、本発明に係る遊技店の監視システムの一実施の形態の構成を示す図である。
【００２５】
遊技店１−１乃至１−ｎは、いわゆるパチンコ店、パチスロ店、または、カジノ店である。また、これらの遊技店１−１乃至１−ｎは、系列店舗または生体情報管理センタや第３者遊技店管理センタの加盟店であって、複数の店舗を統括的に管理する必要のある店舗である。各遊技店１−１乃至１−ｎは、生体情報管理バス６および第３者遊技店管理バス７により接続されており、それらのバスおよびインターネット等に代表される公衆通信回線網８，９を介して、相互にそれぞれ生体情報、および第３者遊技店管理情報を授受している。尚、以降において、遊技店１−１乃至１−ｎのそれぞれについて、特に区別する必要がない場合、単に、遊技店１と称するものとし、その他の構成についても同様に称するものとする。
【００２６】
生体情報管理バス６は、主に各遊技店１の生体情報認識装置２１により管理される生体情報を流通させるための伝送路として機能する。また、第３者遊技店管理バス７は、主に各遊技店１の媒体貸出管理装置２７により管理される媒体貸出管理情報を流通させるための伝送路として機能する。
【００２７】
生体情報管理センタ２は、生体情報管理センタを管理運営する事業者により使用されるサーバであり、生体情報管理データベース（以降、DBとも称するものとする）３で管理されている登録遊技者DBを各遊技店１により生成される未登録遊技者DBに基づいて更新すると供に、更新した最新の登録遊技者DBを各遊技店１の生体情報認識装置２１に対して配信する。
【００２８】
第３者遊技店管理センタ４は、第３者遊技店管理センタを管理運営する事業者により使用されるサーバであり、第３者遊技店管理データベース（DB）５で管理されている媒体貸出管理情報からなるDBを各遊技店１より供給されてくる情報に基づいて更新すると供に、更新した最新の媒体貸出管理情報を各遊技店１の媒体貸出管理装置２７に対して配信する。
【００２９】
生体情報認識装置２１は、カメラ３８−１乃至３８−ｍ、入口カメラ４０−１乃至４０−ｐ、および店内カメラ４１−１乃至４１−ｑにより撮像された画像より画像処理ユニット３９−１乃至３９−（ｍ＋ｐ＋ｑ）により抽出されて、生体情報バス３１を介して供給されてくる顔画像の情報に基づいて、生体情報データベース２２に予め登録されている顔画像と照合し、一致する場合、登録遊技者の来店を携帯端末２０に通知したり、LCD（Liquid Crystal Display）または有機EL（Electronic Luminescent）などからなる表示部２３に表示する。また、生体情報データベース２２に予め登録されている顔画像と照合し、一致しない場合、生体情報認識装置２１は、生体情報管理データベース３にアクセスし、未登録者として未登録遊技者DBに登録する。
【００３０】
遊技店管理装置２４は、いわゆるホールコンピュータと呼ばれるものであり、遊技店管理情報バス３０を介して遊技台３６−１乃至３６−ｍの動作を監視している。遊技店管理装置２４は、遊技台３６の出玉もしくはメダルの払い出しの情報、各遊技台３６−１乃至３６−ｍの遊技者の呼び出し情報、またはエラーの発生などの監視状況に応じて、所定の処理を実行し、実行結果をLCDや有機ELなどからなる表示部２５に表示する。遊技店管理装置２４は、計数機３５、遊技台３６−１乃至３６−ｍ、および遊技台周辺端末３７−１乃至３７−ｍのそれぞれより供給されてくる情報を、それぞれを識別する識別情報（例えば、遊技台番号）とを対応付けて遊技台管理データベース２６により管理する。
【００３１】
媒体貸出管理装置２７は、精算販売機３３、および貸出機３４からの情報に基づいて、貸し出される遊技媒体の媒体貸出管理情報を媒体貸出管理データベース２９を用いて管理すると供に、媒体貸出管理データベース２９に登録されている媒体貸出管理情報を更新する際、その更新情報を、第３者遊技店管理バス７および公衆通信回線網９を介して第３者遊技店管理センタ４に送る。さらに、媒体貸出管理装置２７は、第３者遊技店管理バス７および公衆通信回線網９を介して第３者遊技店管理センタ４により供給されてくる媒体貸出管理情報を取得し、媒体貸出管理データベース２９に蓄積させる。
【００３２】
貸出機３４は、遊技者が遊技台３６で遊技する際、現金やプリペイドカードなどにより所定の金額を受け付けると、金額に応じた個数の遊技媒体を貸し出す。この際、貸出機３４は、受け付けた現金やプリペイドカードの残数などの情報と供に、貸し出した遊技媒体の個数の情報を媒体貸出管理装置２７に供給する。これにより、媒体貸出管理装置２７は、受け付けた現金やプリペイドカードの残数などの情報と供に、貸し出した遊技媒体の個数の情報を媒体貸出管理情報データベース２９に登録する。
【００３３】
精算販売機３３は、貸球を借りるための度数をつけてプリペイドカードを販売する。このとき、精算販売機３３は、販売したプリペイドカードの度数を払いうけた金額を媒体貸出管理装置２７に供給する。また、精算販売機３３は、プリペイドカードなどの度数として貸し出した遊技媒体の残数に基づいて現金を精算して払い出す。このとき、精算販売機３３は、プリペイドカードの残数と払い戻した現金の金額を媒体貸出管理装置２７に供給する。
【００３４】
計数機３５は、遊技者が遊技台３６により遊技することにより獲得した遊技媒体の数を、計数し、計数結果を磁気カードやレシートなどとして出力する。
【００３５】
遊技台３６−１乃至３６−ｍは、遊技者により所定の操作がなされることにより、遊技を実行し、いわゆる小当たりや大当たりに応じて、遊技球、または、メダルを払い出す。
【００３６】
遊技台周辺端末３７−１乃至３７−ｍは、各遊技台３６−１乃至３６−ｍに対応して設けられている、いわゆる台間機であり、台間球貸機（原理的には、貸出機３４と同様のもの）などが設けられている。また、遊技台周辺端末３７は、遊技台３６を遊技する遊技者の顔画像などの生体情報を取得し、遊技台識別情報（遊技台番号）と共に生体情報認識装置２１に送信する。尚、図１においては、生体情報を取得する機能として、遊技者の顔画像を取得するカメラ３８−１乃至３８−ｍが設けられている例が示されている。
【００３７】
カメラ３８−１乃至３８−ｍは、例えば、図２で示されるように、各遊技台３６−１乃至３６−４のそれぞれの上部に設けられた台表示ランプ６１−１乃至６１−４の下部に図３で示されるように、読取範囲δ内に遊技者が撮像できるように設け、顔画像を撮像するようにしてもよく、このようにすることにより、各カメラIDは、同時に遊技台IDとして使用することが可能となる。
【００３８】
また、カメラ３８−１乃至３８−ｍは、例えば、図４で示されるように、遊技台周辺端末３７−１乃至３７−４に凸部７１−１乃至７１−４を設け、図５で示されるように読取範囲θ内に遊技者の顔画像が撮像できるように設けるようにしてもよい。
【００３９】
さらに、カメラ３８−１乃至３８−ｍは、例えば、図６で示されるように、遊技台３６の中央部（遊技台３６の盤面上）に設けるようにして、撮像するようにしてもよい。すなわち、図６の設置部８１にカメラ３８が設置されることにより、図７で示されるように、読取範囲φ内に遊技者を撮像する。
【００４０】
入口カメラ４０−１乃至４０−ｐおよび店内カメラ４１−１乃至４１−ｑは、遊技店１の店内における出入口および所定の場所に設置され、撮像した画像をそれぞれ画像処理ユニット３９−（ｍ＋１）乃至３９−（ｍ＋ｐ＋ｑ）に供給する。
【００４１】
入口カメラ４０−１乃至４０−ｐおよび店内カメラ４１−１乃至４１−ｑは、例えば、図８で示されるように設定される。図８は、遊技店１内の入口カメラ４０−１乃至４０−ｐおよび店内カメラ４１−１乃至４１−ｑの設置例を示している。
【００４２】
すなわち、図８においては、出入口１１２−１乃至１１２−３が設けられており、入口カメラ４０−１乃至４０−３は、それぞれの出入口１１２より入店してくる遊技者を撮像する。また、店内カメラ４１−１乃至４１−１０は、島設備１１１−１乃至１１１−５のそれぞれ両面をそれぞれ一列に渡って撮像できる位置に設定されている。島設備１１１は、両面に遊技台３６が設置されており、すなわち、図中の島設備１１１を上下方向に挟むように設置されている。カメラ３８、入口カメラ４０および店内カメラ４１は、いずれにおいてもパンチルトズーム機能を備えているため、図８で示されるように、店内カメラ４１−１乃至４１−１０が配置されることにより、遊技台３６で遊技する全遊技者が、店内カメラ４１−１乃至４１−１０のいずれかで撮像できる。
【００４３】
さらに、店内カメラ４１−ａは、貸出機３４の前に設けられており、店内カメラ４１−ｂは、精算販売機３３の前に設けられており、店内カメラ４１−ｃは、計数機３５の前に設けられており、それぞれ、貸出機３４、精算販売機３３、および計数機３５を利用する遊技者を撮像することができる。
【００４４】
すなわち、図８で示されるように、遊技店１においては、来店する遊技者、遊技台３６で遊技する遊技者、並びに、貸出機３４、精算販売機３３、および計数機３５を利用する遊技者といった、遊技店１において遊技者が取るであろうことが想定される行動のほぼ全てを監視できるように、カメラ３８、入口カメラ４０、および店内カメラ４１が設置されている。
【００４５】
［画像処理ユニットの構成例］
次に、図９を参照して、画像処理ユニット３９の構成例について説明する。
【００４６】
画像取得部２０１は、カメラ３８（または、入口カメラ４０もしくは店内カメラ４１）により撮像された画像を取得し、顔画像抽出部２０２に供給する。顔画像抽出部２０２は、画像取得部２０１より供給されてきた画像内に、顔を構成する部位の配置などのパターンからなる顔全体の輪郭に対応した基準テンプレートを用いたテンプレートマッチングにより顔画像からなる矩形画像を抽出して送信部２０３に供給する。送信部２０３は、顔画像抽出部２０２より連続的に供給されてくる顔画像をバッファ２０３ａに蓄積させ、顔画像の供給が停止した状態になったとき、バッファ２０３ａに蓄積された顔画像を顔画像群として生体情報認識装置２１に送信する。尚、バッファ２０３ａの容量には制限があるので、送信部２０３は、バッファ２０３ａで蓄積できる容量が一杯になったところで一連の連続的に供給される複数の顔画像を顔画像群として送信するようにしても良いし、予め所定枚数を決めておき、所定枚数が蓄積された場合、その所定枚数の顔画像を顔画像群として送信するようにしても良い。
【００４７】
［生体情報認識装置の構成例］
次に、図１０を参照して、生体情報認識装置２１の構成例について説明する。
【００４８】
顔画像取得部２２１は、画像処理ユニット３９より供給される複数の顔画像からなる顔画像群を取得し、顔画像信頼度算出部２２２に供給する。顔画像信頼度算出部２２２は、顔画像取得部２２１より供給されてくる顔画像群に含まれる複数の顔画像の信頼度を顔画像信頼度として算出し、顔画像と共に顔器官抽出部２２３に供給する。ここで、顔画像信頼度は、取得された顔画像を構成する領域の信頼度を表す値であり、顔画像信頼度が高い値であるほど、顔画像を構成する領域内に、現実に顔が存在する確率が高いことを示す。
【００４９】
顔器官抽出部２２３は、顔画像取得部２２１により取得された顔画像を構成する領域から各器官を構成する特徴点を顔器官として抽出し、顔画像信頼度、および顔画像群と共に顔器官信頼度算出部２２４に供給する。ここで、顔器官を構成する特徴点とは、口の両端、目尻、目頭、鼻先などのような、口、目、および鼻の各器官を構成する画素の中でも特に特徴的な位置の画素である。
【００５０】
顔器官信頼度算出部２２４は、顔器官抽出部２２３により抽出された特徴点の画素位置の情報からなる顔器官の情報の信頼度を表す値を顔器官信頼度として算出し、顔器官信頼度、顔画像信頼度、および顔画像群と共に顔画像判定部２２５に供給する。ここで、顔器官信頼度とは、顔器官抽出部２２３により抽出された器官の信頼度を示す値であり、顔器官信頼度が高いほど、抽出された顔器官で特定される特徴点が、現実の器官を構成する特徴的な位置の画素である確率が高いことを示す。
【００５１】
顔画像判定部２２５は、顔器官信頼度算出部２２４より供給されてくる顔画像群を構成する各顔画像の顔画像信頼度、および顔器官信頼度が、いずれも所定の閾値よりも高く、取得された顔画像、および抽出された顔器官がいずれも信頼できるものである場合にのみ、顔画像群と共に照合部２２６に供給する。このため、顔画像判定部２２５は、顔画像信頼度が所定の閾値よりも低く、取得された顔画像そのものの信頼性が低いとみなした場合、または、顔器官信頼度が所定の閾値よりも低く、抽出された顔器官の信頼性が低く、仮に顔画像が取得されていたとしても、キャラクタのような顔画像である可能性があるような場合、照合部２２６に対して顔画像を供給しない。
【００５２】
すなわち、顔画像とみなせない場合や、顔画像であるが、キャラクタなどの現実の人物の顔画像とみなせない場合については、顔画像が、照合部２２６に供給されない。この結果、照合に適さない顔画像については、照合そのものがなされないことになるため、誤検出を低減させることが可能となる。尚、顔画像判定部２２５は、顔画像群を構成する複数の顔画像の中で、顔画像信頼度、および顔器官信頼度が、いずれも所定の閾値を超えるものと、超えないものとを含む場合、超えたものだけを照合部２２６に供給するようにしてもよいし、いずれか超えないものが含まれた場合、顔画像群の全ての顔画像を照合部２２６に供給しないようにしてもよい。
【００５３】
照合部２２６は、顔画像判定部２２５より供給されてくる顔画像群の各顔画像と、生体情報DB２２に予め登録されている登録遊技者の顔画像とを照合し、類似度の高い候補となる顔画像があれば、第３候補までの顔画像を照合結果として表示部２３に表示させる。また、照合部２２６は、類似度の高い候補となる顔画像が存在しない場合、供給されてきた顔画像を未登録遊技者データベース登録部２２７に供給する。
【００５４】
より詳細には、照合部２２６の特徴量抽出部２３１は、顔画像群の各顔画像について、それらを識別するための特徴量を抽出して、各顔画像と共に類似度計算部２３２に供給する。類似度計算部２３２は、生体情報DB２２に登録されている登録遊技者の顔画像の特徴量を抽出すると供に、特徴量抽出部２３１より供給されてくる顔画像群の各顔画像の特徴量とを順次用いて、生体情報DB２２に登録されている全ての登録遊技者の顔画像との類似度を求め、顔画像取得部２２１より供給されてきた顔画像と供に類似度計算結果蓄積部２３３に蓄積させる。より具体的には、類似度計算部２３２は、例えば、目と目の間隔、あごから額までの長さと、あごから鼻までの長さの比率などの各種の顔の特徴量に基づいて、それぞれの差分和、平均比率、または比率和などを類似度として求める。
【００５５】
類似度計算結果集計部２３４は、類似度計算結果蓄積部２３３に蓄積された顔画像群の各顔画像についての登録された顔画像との類似度の計算結果を集計して、顔画像群としての類似度を求めて、類似度判定部２３５に供給する。より具体的には、例えば、類似度計算結果蓄積部２３３は、例えば、顔画像群のうち、類似度の最も高い顔画像を基準とした類似度を顔画像群の類似度としたり、または、顔画像群の全ての顔画像に対する登録顔画像との類似度の平均値などを顔画像群の類似度として類似度判定部２３５のバッファ２３５ａに供給する。
【００５６】
類似度判定部２３５は、類似度計算結果集計部２３４より供給されてくる類似度を順次バッファ２３５ａに蓄積し、上位３位となる顔画像群のそれぞれの類似度のうち、１位となる顔画像群との類似度と、所定の閾値とを比較し、比較結果に基づいて、１位となる登録顔画像が、顔画像判定部２２５より供給されてきた顔画像群に対して類似している場合（類似度が高い程類似していることを示す類似度の場合、所定の閾値よりも高いとき、また、類似度が低い程類似していることを示す類似度の場合、所定の閾値よりも低いとき）、上位３位となる顔画像群のうち、最も類似度の高い類似度の顔画像の情報を表示部２３に供給して、表示させると供に、通信部２２８に供給する。また、類似度判定部２３５は、１位となる顔画像群との類似度と、所定の閾値とを比較し、比較結果に基づいて、１位となる登録顔画像が、顔画像判定部２２５より供給されてきた顔画像に対して類似していない場合、顔画像判定部２２５より供給されてきた顔画像群のうち、最も類似度の高い顔画像を未登録遊技者データベース登録部２２７に供給する。
【００５７】
未登録遊技者データベース登録部２２７は、照合部２２６より未登録であるとみなされて供給されてきた、顔画像を生体情報管理データベース３の未登録遊技者DBに登録する。
【００５８】
操作部２２９は、ボタン、マウス、または、キーボードなどから構成され、上述した類似度が上位３位となる、表示部２３に表示された顔画像のいずれかが選択されるとき操作され、操作結果を通信部２２８に供給する。通信部２２８は、イーサネットボードなどから構成され、操作部２２９からの操作信号に基づいて、選択された顔画像を携帯端末２０に配信する。
【００５９】
尚、ここでは、類似度は、例えば、比率和で示されるような登録遊技者として登録されている顔画像に近いほど高い値を示すものであるとし、類似度が所定の閾値よりも高い値であるとき、その類似度に対応する登録遊技者の顔画像であるものとして判定する例について説明する。しかしながら、例えば、類似度が撮像された顔画像と登録遊技者として登録されている顔画像とのそれぞれの特徴量における差分和として表現されている場合、類似度判定部２３５は、類似度が閾値よりも小さければ、撮像された顔画像群が登録遊技者の顔画像であるとみなすことになり、または、平均比率などの場合、０乃至１の範囲で所定の値以上であって、１に近い値であれば、同一の人物であるとみなすことができる。
【００６０】
データベース管理部２３０は、生体情報管理センタ２より新たな登録遊技者データベースが配信されてくると、新たな登録遊技者データベースに基づいて、生体情報DB２２を更新する。
【００６１】
［登録遊技者来店監視処理］
次に、図１１のフローチャートを参照して、登録遊技者来店監視処理について説明する。
【００６２】
ステップＳ１において、入口カメラ４０は、撮像している画像の情報、または、出入口の扉からの信号に基づいて、出入口の扉が開いたか否かを判定し、所定の時間が経過するまで、その処理を繰り返す。
【００６３】
ステップＳ１において、扉が開いたと判定された場合、ステップＳ２において、入口カメラ４０は、設置されている範囲の画像を撮像し、撮像した画像を画像処理ユニット３９に供給する。画像処理ユニット３９の画像取得部２０１は、供給された画像を取得し、顔画像抽出部２０２に供給する。
【００６４】
ステップＳ３において、顔画像抽出部２０２は、供給された画像より遊技者の顔画像を抽出し、送信部２０３に供給する。より具体的には、顔画像抽出部２０２は、撮像された画像のうち顔画像の輪郭に対応した基準テンプレートを用いたテンプレートマッチングにより矩形状の顔画像を抽出して、送信部２０３に供給する。送信部２０３は、供給されてきた顔画像をバッファ２０３ａに一時的に蓄積する。尚、顔画像抽出部２０２は、撮像された画像のうち、配色などから肌が露出した部分であって、目や鼻といった特徴的な部位の配置などから矩形状の顔画像を抽出するようにしてもよいし、顔の器官（目、鼻、耳など）に基づいてテンプレートマッチング、または、クロマキー処理によって頭部などの頂点を検出し、ニューラルネットワークを使って教師信号による学習を行い、顔らしい領域を顔画像として検出するといった手法により顔画像を抽出するようにしてもよい。
【００６５】
ステップＳ４において、顔画像抽出部２０２は、供給されてくる画像より顔画像が存在するか否か、すなわち、例えば、入口カメラ４０により撮像される画像より直前の処理で抽出した顔画像と同一人物の顔画像が抽出できるか否かを判定し、抽出できると判定された場合、処理は、ステップＳ２に戻り、ステップＳ２乃至Ｓ４の処理が繰り返される。すなわち、顔画像が連続的に抽出できる状態である限り、ステップＳ２乃至Ｓ４の処理が繰り返される。尚、上述したように、バッファ２０３ａには容量の制限があるため、バッファ２０３ａに蓄積される顔画像が一杯になったところで、顔画像が抽出できない、すなわち、顔画像が存在しないと判定するようにしても良いし、所定枚数蓄積したところで、顔画像が抽出できないと判定するようにしても良い。尚、以降の説明においては、所定枚数として６枚の顔画像が抽出されたところで、顔画像が抽出できないと判定するものとする。
【００６６】
したがって、ステップＳ４において、例えば、それまでに、ステップＳ２乃至Ｓ４の処理が６回繰り返され、それぞれの画像より顔画像が抽出されていた場合、それ以降の画像に顔画像が存在していても、存在しない状態でも、顔画像が存在しないとみなし、その処理は、ステップＳ５に進む。
【００６７】
ステップＳ５において、送信部２０３は、顔画像抽出部２０２より供給されてきた顔画像を蓄積しているバッファ２０３ａより複数の顔画像を読み出し、顔画像群として生体情報認識装置２１に送信する。この際、送信部２０３は、カメラ３８、入口カメラ４０、または店内カメラ４１のそれぞれを識別するカメラIDや、送信時刻の情報などの情報を顔画像群に付加して生体情報認識装置２１に送信する。
【００６８】
ステップＳ２１において、生体情報認識装置２１の顔画像取得部２２１は、顔画像群を取得する。ステップＳ２２において、顔画像取得部２２１は、供給された顔画像群のうち、いずれか未処理の１つの顔画像群を抽出し、顔画像信頼度算出部２２２に供給する。
【００６９】
ステップＳ２３において、顔画像信頼度算出部２２２乃至顔器官信頼度算出部２２４は、信頼度算出処理を実行して、顔画像信頼度、および顔器官信頼度を算出する。
【００７０】
［信頼度算出処理］
ここで、図１２のフローチャートを参照して、信頼度算出処理について説明する。
【００７１】
ステップＳ５１において、顔画像信頼度算出部２２２は、顔画像取得部２２１より供給されてくる顔画像群に含まれる複数の顔画像の信頼度を顔画像信頼度ｔｒ１として算出し、顔画像と共に顔器官抽出部２２３に供給する。顔画像信頼度算出部２２２は、例えば、顔画像における顔の輪郭に対応した基準テンプレートを用いたテンプレートマッチングによって顔を検出する場合、検出した顔画像と基準テンプレートとで一致した画素数の割合を顔検出信頼度として算出する。
【００７２】
ステップＳ５２において、顔器官抽出部２２３は、顔画像取得部２２１により取得された顔画像を構成する領域から各器官を構成する特徴点を、顔器官として抽出し、顔器官、顔画像信頼度、および顔画像群を顔器官信頼度算出部２２４に供給する。顔器官抽出部２２３は、例えば、顔器官を構成する画素のうち特徴点となる画素の位置からなるパターンを学習し、その学習データを使用したマッチングにより特徴点を検出する、または取得された顔画像の内側において、パターンマッチングにより特徴点を検出する。
【００７３】
ステップＳ５３において、顔器官信頼度算出部２２４は、顔器官抽出部２２３により抽出された特徴点の画素位置の情報からなる顔器官の情報の信頼度を表す値を顔器官信頼度ｔｒ２として算出し、顔器官信頼度、顔画像信頼度、および顔画像群を顔画像判定部２２５に供給する。より具体的には、顔器官信頼度算出部２２４は、パターンマッチングにより特徴点を検出する方法を用いた場合、予め学習した各特徴点の輝度値ベクトルと、顔器官として抽出した特徴点付近の領域から得られる輝度値ベクトルとのユークリッド距離を顔器官信頼度として算出する。
【００７４】
以上の処理により、顔画像が取得されると共に、顔画像信頼度ｔｒ１、および顔器官信頼度ｔｒ２が求められて、顔画像判定部２２５に供給される。
【００７５】
ここで、図１１のフローチャートの説明に戻る。
【００７６】
ステップＳ２４において、顔画像判定部２２５は、顔画像信頼度ｔｒ１、および顔器官信頼度ｔｒ２に基づいて、併せて供給されてきた顔画像が誤検出された顔画像であるか否かを判定する。より具体的には、顔画像判定部２２５は、顔画像信頼度ｔｒ１が所定の閾値よりも低いか、または、顔器官信頼度ｔｒ２が所定の閾値よりも低いとき、顔画像としての信頼度が低く誤検出であると判定する。従って、ステップＳ２４において、例えば、顔画像がポスタなどに描かれているキャラクタの顔画像などであって、顔画像信頼度が低い、または、顔器官信頼度が低い場合、誤検出であるとみなし、処理は、ステップＳ３８に進む。
【００７７】
ステップＳ３８において、顔画像判定部２２５は、供給されてきた顔画像群を破棄して、処理は、ステップＳ３６に進む。
【００７８】
一方、ステップＳ２４において、正しい人物の顔画像が取得されて、顔画像信頼度が所定の閾値よりも高く、かつ、顔器官信頼度も所定の閾値よりも高い場合、顔画像判定部２２５は、誤検出ではないとみなし、処理は、ステップＳ２５に進む。
【００７９】
ステップＳ２５において、顔画像判定部２２５は、取得した顔画像を照合部２２６に供給する。
【００８０】
すなわち、顔画像判定部２２５が、顔画像信頼度、および顔器官信頼度に基づいて、顔画像として信頼できるもの以外は、後段の照合部２２６に供給しないようにしている。このような処理により、そもそも顔画像としての信頼度が低いものについては、照合部２２６における照合処理がなされないため、誤検出を抑制することが可能となる。
【００８１】
ステップＳ２６において、照合部２２６の特徴量抽出部２３１は、供給されてきた顔画像群のうち、未処理の１つの顔画像を抽出し、ステップＳ２７において、特徴量を抽出して、顔画像と供に類似度計算部２３２に供給する。
【００８２】
ステップ２８において、類似度計算部２３２は、類似度計算処理を実行する。
【００８３】
ここで、図１３のフローチャートを参照して、類似度計算処理について説明する。
【００８４】
ステップＳ７１において、類似度計算部２３２は、生体情報DB２２に登録されている顔画像のうち、未処理の１つの登録遊技者の顔画像を抽出し、処理対象に設定する。
【００８５】
ステップＳ７２において、類似度計算部２３２は、処理対象として設定した生体情報DB２２に登録されている顔画像より、特徴量抽出部２３１より供給されてきた特徴量と同様の特徴量を抽出する。
【００８６】
ステップＳ７３において、類似度計算部２３２は、特徴量抽出部２３１より供給された顔画像についての、目と目の間隔、あごから額までの長さと、あごから鼻のまでの長さの比率などの各種の顔の特徴量と、生体情報DB２２に登録されている顔画像における同様の特徴量とを用いて、それぞれの差分和、平均比率、または比率和などを類似度として計算し、ステップＳ７４において、計算結果である生体情報DB２２に登録されている顔画像との類似度を類似度判定部２３５に供給し、バッファ２３３ａに登録させる。
【００８７】
ステップＳ７５において、類似度計算部２３２は、生体情報DB２２に未処理の登録遊技者の顔画像が存在するか否かを判定し、未処理の登録遊技者の顔画像が存在する場合、処理は、ステップＳ７１に戻る。すなわち、生体情報DB２２の全ての登録遊技者の顔画像との類似度が計算されるまで、ステップＳ７１乃至Ｓ７５の処理が繰り返される。そして、ステップＳ７５において、生体情報DB２２に未処理の登録遊技者の顔画像が存在しないと判定された場合、類似度計算処理は終了する。
【００８８】
ここで、図１１のフローチャートの説明に戻る。
【００８９】
ステップＳ２９において、類似度判定部２３５は、バッファ２３３ａに登録されている類似度の計算結果に基づいて順位を求め、生体情報DB２２に登録されている顔画像のうちの上位３位までの顔画像と類似度の情報を、抽出する。そして、ステップＳ３０において、類似度計算部２３２は、選択された顔画像群のうち未処理の顔画像が存在するか否かを判定し、未処理の顔画像が存在する場合、処理は、ステップＳ２６に戻る。すなわち、選択された顔画像群のうち、未処理の顔画像が存在しない状態まで、ステップＳ２６乃至Ｓ３０の処理が繰り返される。
【００９０】
ステップＳ３０において、未処理の顔画像が存在しない、すなわち、選択された顔画像群の全ての顔画像について、登録遊技者の顔画像との類似度が求められたと判定された場合、ステップＳ３１において、類似度計算結果集計部２３４は、類似度計算結果蓄積部２３３に蓄積された顔画像毎の類似度の計算結果を集計し、集計結果を類似度判定部２３５のバッファ２３５ａに登録する。
【００９１】
ステップＳ３２において、類似度判定部２３５は、バッファ２３５ａに登録されている類似度計算結果集計部２３４より供給されてくる顔画像群としての上位３位までの候補となる顔画像と類似度の情報に基づいて、最上位の類似度が所定の閾値よりも大きいか否かを判定する。すなわち、類似度判定部２３５は、最も類似している登録遊技者（生体情報DB２２に登録されている顔画像のうち、顔画像取得部２２１により取得された顔画像群と最も類似している登録遊技者：ここでは、類似度の最も高い登録遊技者）の類似度を所定の閾値と比較する。
【００９２】
尚、上述のように、類似度の定義により、撮像された顔画像と最も類似している登録遊技者の顔画像との類似度は、その値そのものが最も高いとは限らないため、類似度と閾値との大小関係はこの例の場合とは異なることがある。
【００９３】
ステップＳ３２において、最上位の類似度が所定の閾値よりも大きいと判定された場合、ステップＳ３３において、類似度判定部２３５は、類似度計算部２３２より供給されてきた上位３位の顔画像が登録遊技者の顔画像の候補であることを示す報知画面を表示部２３を制御して表示させる。
【００９４】
ステップＳ３４において、通信部２２８は、操作部２２９が操作されて、候補となる顔画像の何れかが選択されたか否かを判定する。
【００９５】
ステップＳ３４において、例えば、操作部２２９が操作されて、候補となる顔画像の何れかが選択された場合、候補となる顔画像が選択されたとみなされ、ステップＳ３２において、通信部２２８は、選択された候補となる顔画像および入口カメラ４０により撮像されたカメラ画像を携帯端末２０に送信し、該当する登録遊技者が来店したことを通知する。
【００９６】
以上の処理により、遊技店１内の係員は、携帯端末２０を所持していると、登録遊技者の来店を認識することが可能となる。
【００９７】
また、ステップＳ３６において、顔画像取得部２２１は、供給された顔画像の全てについて処理を行なったか否かを判定し、未処理の顔画像がある場合、処理は、ステップＳ２２に戻る。すなわち、全ての顔画像について処理が行なわれるまで、ステップＳ２２乃至Ｓ３６の処理が繰り返される。そして、全ての顔画像について処理が終了したと判定された場合、処理は、ステップＳ２１に戻る。
【００９８】
一方、ステップＳ３４において、いずれの候補となる顔画像も選択されない場合、または、ステップＳ３２において、類似度計算部２３２より供給されてくる上位３位までの顔画像と類似度の情報に基づいて、最上位の類似度が所定の閾値よりも大きくない場合、すなわち、最も類似している登録遊技者の顔画像であっても類似度が、所定の閾値未満である場合、ステップＳ３７において、類似度判定部２３５は、画像処理ユニット３９より供給されてきた顔画像群のうちの最上位の類似度の顔画像を未登録遊技者データベース登録部２２７に供給する。未登録遊技者データベース登録部２２７は、供給されてきた顔画像を生体管理情報バス６及び公衆通信回線網８を介して生体情報管理データベース３にアクセスし登録する。尚、未登録遊技者データベース登録部２２７に供給される顔画像は、顔画像群のうちのいずれの顔画像であってもよく、必ずしも、最上位の類似度の顔画像でなくてもよい。
【００９９】
以上の処理により、生体情報認識装置２１により画像処理ユニット３９より供給されてきた顔画像群により複数の顔画像を用いて類似度が求められることになるので、顔画像の認識をより正確に実行することが可能となる。また、画像処理ユニット３９より供給されてきた顔画像群が、生体情報DB２２に登録されていない顔画像の顔画像群であるとみなされると、生体情報管理センタ２により管理されている生体情報管理DB３内に未登録遊技者の顔画像として登録される。
【０１００】
また、顔画像の信頼度を示す、顔画像信頼度、および顔器官信頼度に基づいて、顔画像として信頼性の低いとみなされるものについては、照合部２２６に対して供給されることがなく、信頼性の高い顔画像のみが照合部２２６に供給されるので、ポスタや人形などのキャラクタの顔の領域が顔画像として抽出されても、誤検出されないようにすることが可能となる。
【０１０１】
ところで、上述した一連の監視処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【０１０２】
図１４は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)１００１を内蔵している。CPU１００１にはバス１００４を介して、入出力インタフェース１００５が接続されている。バス１００４には、ROM(Read Only Memory)３０２およびRAM(Random Access Memory)１００３が接続されている。
【０１０３】
入出力インタフェース１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、LAN（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどのリムーバブルメディア１０１１に対してデータを読み書きするドライブ１０１０が接続されている。
【０１０４】
CPU１００１は、ROM１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブルメディア１０１１から読み出されて記憶部１００８にインストールされ、記憶部１００８からRAM３０３にロードされたプログラムに従って各種の処理を実行する。RAM１００３にはまた、CPU１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１０５】
尚、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。
【０１０６】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【符号の説明】
【０１０７】
１，１−１乃至１−ｎ 遊技店
２ 生体情報管理センタ
３ 生体情報管理データベース
４ 第３者遊技店管理センタ
５ 第３者遊技店管理データベース
６ 生体情報管理バス
７ 第３者遊技店管理バス
８，９ 公衆通信回線網
２１ 生体情報認識装置
２２ 生体情報データベース
２４ 遊技店管理装置
２６ 遊技台管理データベース
２７ 媒体貸出管理装置
２９ 媒体貸出管理データベース
３０ 遊技店管理情報バス
３１ 生体情報バス
３３ 精算機
３４ 貸出機
３５ 計数機
３６，３６−１乃至３６−ｍ 遊技台
３７，３７−１乃至３７−ｍ 遊技台周辺端末
３８，３８−１乃至３８−ｍ カメラ
３９，３９−１乃至３９−（ｍ＋ｐ＋ｑ） 画像処理ユニット
４０，４０−１乃至４０−ｐ 入口カメラ
４１，４１−１乃至４１−ｑ 店内カメラ
【技術分野】
【０００１】
本発明は、情報処理装置および方法、並びにプログラムに関し、特に、顔画像を用いた認証処理における人物以外の物体を人物として認識するといった誤検出を低減できるようにした情報処理装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
現在、多くの店舗や公共施設では、不特定多数の来店客または来場者の情報を画像として撮像し、撮像された画像内における人物の顔画像を、例えば、指名手配犯などの予め登録された人物の顔画像と照合する技術が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−２７９５４０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１においては、出入口付近を撮像領域としているため、撮像領域内にポスタや立看板等に描かれているキャラクタ画像などの人物画像以外の顔画像が存在する場合、それらを実際の人物の顔画像として誤検出してしまうことがあった。
【０００５】
このような誤検出に対応するため、人物以外の顔画像を認識してしまう画像領域をマスキングして誤検出を低減する技術が提案されている（特願２００７−１５６６９３号公報参照）。
【０００６】
しかしながら、このようにマスキングするようにしても、人物以外の物体が移動するような場合、必ずしも有効に誤検出を低減させることができなかった。
【０００７】
本発明はこのような状況に鑑みてなされたものであり、顔画像の信頼度と、顔画像における顔を構成する各器官の信頼度とを求めて、それらが所定の値よりも高く信頼できるものであるときにのみ認証処理を実行させるようにして、顔画像を用いた認証処理における誤検出を低減させるものである。
【課題を解決するための手段】
【０００８】
本発明の一側面の情報処理装置は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む。
【０００９】
前記取得手段が前記画像より顔画像を取得する手法には、顔の輪郭形状に対応したテンプレートを用いたテンプレートマッチング、前記顔を構成する器官に基づいたテンプレートマッチング、クロマキー処理により顔を構成する頭部の頂点を検出した後、その頂点に基づいて顔画像を検出する手法、肌色領域の形状に基づいて検出する手法、またはニューラルネットワークに基づいて、教師信号による学習により顔らしい領域を検出する手法を含ませるようにすることができる。
【００１０】
前記顔画像信頼度算出手段には、前記顔画像に基づいて、前記顔の輪郭に対応したテンプレートを用いたテンプレートマッチングにより、前記テンプレートとの一致の程度を示す値を前記顔画像信頼度として算出させるようにすることができる。
【００１１】
前記器官抽出手段には、前記顔画像に基づいて、前記器官を構成する画素位置の情報を特徴点として抽出し、前記顔画像の輪郭を含む前記器官を構成する画素位置の情報からなる特徴点の配置を学習することにより得られるパターンを用いたパターンマッチング、または、前記顔画像の領域内における前記器官を構成する画素位置の情報からなる特徴点の配置パターンに基づいたパターンマッチングによりを抽出させるようにすることができる。
【００１２】
前記器官信頼度算出手段には、教師信号による学習により求められた前記顔画像における前記器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルと、前記器官抽出手段により抽出された器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルとのユークリッド空間における距離を前記器官信頼度として算出させるようにすることができる。
【００１３】
本発明の一側面の情報処理方法は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置の情報処理方法であって、前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップとを含む。
【００１４】
本発明の一側面のプログラムは、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置を制御するコンピュータに、前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップとを含む処理を実行させる。
【００１５】
本発明の一側面においては、顔画像が蓄積者の顔画像として蓄積者データベースに蓄積され、画像より照合対象者の顔画像が取得され、取得された照合対象者の顔画像と、蓄積された蓄積者の顔画像との類似度が計算されて、照合され、照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かが判定され、前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることが通知され、取得された顔画像の信頼度が顔画像信頼度として算出され、取得された顔画像より顔の器官が抽出され、抽出された器官の信頼度が器官信頼度として算出され、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合処理、および前記類似判定処理が実行されるように制御される。
【００１６】
本発明の一側面の情報処理装置における、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段とは、例えば、生体情報データベースであり、画像より照合対象者の顔画像を取得する取得手段とは、例えば、顔画像取得部であり、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段とは、例えば、類似度計算部であり、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段とは、例えば、類似度判定部であり、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段とは、例えば、通信部であり、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段とは、例えば、顔画像信頼度算出部であり、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段とは、例えば、顔器官抽出部であり、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段とは、例えば、顔器官信頼度算出部であり、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とは、例えば、顔画像判定部である。
【００１７】
すなわち、顔画像判定部が、顔画像信頼度算出部により算出される顔画像信頼度と、器官信頼度算出部により算出される器官信頼度が、いずれも所定の閾値よりも高く、顔画像としての信頼度がある程度保証される状況においてのみ、類似度計算部による類似度の計算と、類似度と所定の閾値との比較により照合対象者と蓄積者との顔画像が一致するか否かを判定するようにした。
【００１８】
結果として、顔画像信頼度が低い、または、器官信頼度が低い顔画像については、類似度計算部により照合処理が行われず、照合対象者と蓄積者とが一致するか否かが判定されることさえもなくなるので、本来顔画像における認証処理の必要がない顔画像の処理を省くことが可能となり、誤検出を低減させると共に、不要な処理をなくすことで処理負荷を低減させることが可能となる。
【発明の効果】
【００１９】
本発明によれば、顔画像を用いた認証処理における誤検出を低減させることが可能となる。
【図面の簡単な説明】
【００２０】
【図１】本発明を適用した監視システムの一実施の形態の構成を示す図である。
【図２】図１のカメラの設置例を示す図である。
【図３】図１のカメラの設置例を示す図である。
【図４】図１のカメラの設置例を示す図である。
【図５】図１のカメラの設置例を示す図である。
【図６】図１のカメラの設置例を示す図である。
【図７】図１のカメラの設置例を示す図である。
【図８】図１の入口カメラおよび店内カメラの設置例を示す図である。
【図９】図１の画像処理ユニットの構成例を説明する図である。
【図１０】図１の生体情報認識装置の構成例を説明する図である。
【図１１】登録遊技者来店監視処理を説明するフローチャートである。
【図１２】信頼度算出処理を説明するフローチャートである。
【図１３】類似度計算処理を説明するフローチャートである。
【図１４】汎用のパーソナルコンピュータの構成例を説明する図である。
【発明を実施するための最良の形態】
【００２１】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、発明の詳細な説明に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、発明の詳細な説明に記載されていることを確認するためのものである。従って、発明の詳細な説明中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
【００２２】
すなわち、本発明の一側面の情報処理装置は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段（例えば、図１０の生体情報DB２２）と、画像より照合対象者の顔画像を取得する取得手段（例えば、図１０の顔画像取得部２２１）と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段（例えば、図１０の類似度計算部２３２）と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段（例えば、図１０の類似度判定部２３５）と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段（例えば、図１０の通信部２２８）と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段（例えば、図１０の顔画像信頼度算出部２２２）と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段（例えば、図１０の顔器官抽出部２２３）と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段（例えば、図１０の顔器官信頼度算出部２２４）と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段（例えば、図１０の顔画像判定部２２５）とを含む。
【００２３】
本発明の一側面の情報処理方法は、顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、画像より照合対象者の顔画像を取得する取得手段と、前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置の情報処理方法であって、前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップ（例えば、図１１のステップＳ２１）と、前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップ（例えば、図１３のステップＳ７３）と、前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップ（例えば、図１１のステップＳ３２）と、前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップ（例えば、図１１のステップＳ３５）と、前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップ（例えば、図１２のステップＳ５１）と、前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップ（例えば、図１２のステップＳ５２）と、前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップ（例えば、図１２のステップＳ５３）と、前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップ（例えば、図１１のステップＳ２４）とを含む。
【００２４】
［監視システムの構成例］
図１は、本発明に係る遊技店の監視システムの一実施の形態の構成を示す図である。
【００２５】
遊技店１−１乃至１−ｎは、いわゆるパチンコ店、パチスロ店、または、カジノ店である。また、これらの遊技店１−１乃至１−ｎは、系列店舗または生体情報管理センタや第３者遊技店管理センタの加盟店であって、複数の店舗を統括的に管理する必要のある店舗である。各遊技店１−１乃至１−ｎは、生体情報管理バス６および第３者遊技店管理バス７により接続されており、それらのバスおよびインターネット等に代表される公衆通信回線網８，９を介して、相互にそれぞれ生体情報、および第３者遊技店管理情報を授受している。尚、以降において、遊技店１−１乃至１−ｎのそれぞれについて、特に区別する必要がない場合、単に、遊技店１と称するものとし、その他の構成についても同様に称するものとする。
【００２６】
生体情報管理バス６は、主に各遊技店１の生体情報認識装置２１により管理される生体情報を流通させるための伝送路として機能する。また、第３者遊技店管理バス７は、主に各遊技店１の媒体貸出管理装置２７により管理される媒体貸出管理情報を流通させるための伝送路として機能する。
【００２７】
生体情報管理センタ２は、生体情報管理センタを管理運営する事業者により使用されるサーバであり、生体情報管理データベース（以降、DBとも称するものとする）３で管理されている登録遊技者DBを各遊技店１により生成される未登録遊技者DBに基づいて更新すると供に、更新した最新の登録遊技者DBを各遊技店１の生体情報認識装置２１に対して配信する。
【００２８】
第３者遊技店管理センタ４は、第３者遊技店管理センタを管理運営する事業者により使用されるサーバであり、第３者遊技店管理データベース（DB）５で管理されている媒体貸出管理情報からなるDBを各遊技店１より供給されてくる情報に基づいて更新すると供に、更新した最新の媒体貸出管理情報を各遊技店１の媒体貸出管理装置２７に対して配信する。
【００２９】
生体情報認識装置２１は、カメラ３８−１乃至３８−ｍ、入口カメラ４０−１乃至４０−ｐ、および店内カメラ４１−１乃至４１−ｑにより撮像された画像より画像処理ユニット３９−１乃至３９−（ｍ＋ｐ＋ｑ）により抽出されて、生体情報バス３１を介して供給されてくる顔画像の情報に基づいて、生体情報データベース２２に予め登録されている顔画像と照合し、一致する場合、登録遊技者の来店を携帯端末２０に通知したり、LCD（Liquid Crystal Display）または有機EL（Electronic Luminescent）などからなる表示部２３に表示する。また、生体情報データベース２２に予め登録されている顔画像と照合し、一致しない場合、生体情報認識装置２１は、生体情報管理データベース３にアクセスし、未登録者として未登録遊技者DBに登録する。
【００３０】
遊技店管理装置２４は、いわゆるホールコンピュータと呼ばれるものであり、遊技店管理情報バス３０を介して遊技台３６−１乃至３６−ｍの動作を監視している。遊技店管理装置２４は、遊技台３６の出玉もしくはメダルの払い出しの情報、各遊技台３６−１乃至３６−ｍの遊技者の呼び出し情報、またはエラーの発生などの監視状況に応じて、所定の処理を実行し、実行結果をLCDや有機ELなどからなる表示部２５に表示する。遊技店管理装置２４は、計数機３５、遊技台３６−１乃至３６−ｍ、および遊技台周辺端末３７−１乃至３７−ｍのそれぞれより供給されてくる情報を、それぞれを識別する識別情報（例えば、遊技台番号）とを対応付けて遊技台管理データベース２６により管理する。
【００３１】
媒体貸出管理装置２７は、精算販売機３３、および貸出機３４からの情報に基づいて、貸し出される遊技媒体の媒体貸出管理情報を媒体貸出管理データベース２９を用いて管理すると供に、媒体貸出管理データベース２９に登録されている媒体貸出管理情報を更新する際、その更新情報を、第３者遊技店管理バス７および公衆通信回線網９を介して第３者遊技店管理センタ４に送る。さらに、媒体貸出管理装置２７は、第３者遊技店管理バス７および公衆通信回線網９を介して第３者遊技店管理センタ４により供給されてくる媒体貸出管理情報を取得し、媒体貸出管理データベース２９に蓄積させる。
【００３２】
貸出機３４は、遊技者が遊技台３６で遊技する際、現金やプリペイドカードなどにより所定の金額を受け付けると、金額に応じた個数の遊技媒体を貸し出す。この際、貸出機３４は、受け付けた現金やプリペイドカードの残数などの情報と供に、貸し出した遊技媒体の個数の情報を媒体貸出管理装置２７に供給する。これにより、媒体貸出管理装置２７は、受け付けた現金やプリペイドカードの残数などの情報と供に、貸し出した遊技媒体の個数の情報を媒体貸出管理情報データベース２９に登録する。
【００３３】
精算販売機３３は、貸球を借りるための度数をつけてプリペイドカードを販売する。このとき、精算販売機３３は、販売したプリペイドカードの度数を払いうけた金額を媒体貸出管理装置２７に供給する。また、精算販売機３３は、プリペイドカードなどの度数として貸し出した遊技媒体の残数に基づいて現金を精算して払い出す。このとき、精算販売機３３は、プリペイドカードの残数と払い戻した現金の金額を媒体貸出管理装置２７に供給する。
【００３４】
計数機３５は、遊技者が遊技台３６により遊技することにより獲得した遊技媒体の数を、計数し、計数結果を磁気カードやレシートなどとして出力する。
【００３５】
遊技台３６−１乃至３６−ｍは、遊技者により所定の操作がなされることにより、遊技を実行し、いわゆる小当たりや大当たりに応じて、遊技球、または、メダルを払い出す。
【００３６】
遊技台周辺端末３７−１乃至３７−ｍは、各遊技台３６−１乃至３６−ｍに対応して設けられている、いわゆる台間機であり、台間球貸機（原理的には、貸出機３４と同様のもの）などが設けられている。また、遊技台周辺端末３７は、遊技台３６を遊技する遊技者の顔画像などの生体情報を取得し、遊技台識別情報（遊技台番号）と共に生体情報認識装置２１に送信する。尚、図１においては、生体情報を取得する機能として、遊技者の顔画像を取得するカメラ３８−１乃至３８−ｍが設けられている例が示されている。
【００３７】
カメラ３８−１乃至３８−ｍは、例えば、図２で示されるように、各遊技台３６−１乃至３６−４のそれぞれの上部に設けられた台表示ランプ６１−１乃至６１−４の下部に図３で示されるように、読取範囲δ内に遊技者が撮像できるように設け、顔画像を撮像するようにしてもよく、このようにすることにより、各カメラIDは、同時に遊技台IDとして使用することが可能となる。
【００３８】
また、カメラ３８−１乃至３８−ｍは、例えば、図４で示されるように、遊技台周辺端末３７−１乃至３７−４に凸部７１−１乃至７１−４を設け、図５で示されるように読取範囲θ内に遊技者の顔画像が撮像できるように設けるようにしてもよい。
【００３９】
さらに、カメラ３８−１乃至３８−ｍは、例えば、図６で示されるように、遊技台３６の中央部（遊技台３６の盤面上）に設けるようにして、撮像するようにしてもよい。すなわち、図６の設置部８１にカメラ３８が設置されることにより、図７で示されるように、読取範囲φ内に遊技者を撮像する。
【００４０】
入口カメラ４０−１乃至４０−ｐおよび店内カメラ４１−１乃至４１−ｑは、遊技店１の店内における出入口および所定の場所に設置され、撮像した画像をそれぞれ画像処理ユニット３９−（ｍ＋１）乃至３９−（ｍ＋ｐ＋ｑ）に供給する。
【００４１】
入口カメラ４０−１乃至４０−ｐおよび店内カメラ４１−１乃至４１−ｑは、例えば、図８で示されるように設定される。図８は、遊技店１内の入口カメラ４０−１乃至４０−ｐおよび店内カメラ４１−１乃至４１−ｑの設置例を示している。
【００４２】
すなわち、図８においては、出入口１１２−１乃至１１２−３が設けられており、入口カメラ４０−１乃至４０−３は、それぞれの出入口１１２より入店してくる遊技者を撮像する。また、店内カメラ４１−１乃至４１−１０は、島設備１１１−１乃至１１１−５のそれぞれ両面をそれぞれ一列に渡って撮像できる位置に設定されている。島設備１１１は、両面に遊技台３６が設置されており、すなわち、図中の島設備１１１を上下方向に挟むように設置されている。カメラ３８、入口カメラ４０および店内カメラ４１は、いずれにおいてもパンチルトズーム機能を備えているため、図８で示されるように、店内カメラ４１−１乃至４１−１０が配置されることにより、遊技台３６で遊技する全遊技者が、店内カメラ４１−１乃至４１−１０のいずれかで撮像できる。
【００４３】
さらに、店内カメラ４１−ａは、貸出機３４の前に設けられており、店内カメラ４１−ｂは、精算販売機３３の前に設けられており、店内カメラ４１−ｃは、計数機３５の前に設けられており、それぞれ、貸出機３４、精算販売機３３、および計数機３５を利用する遊技者を撮像することができる。
【００４４】
すなわち、図８で示されるように、遊技店１においては、来店する遊技者、遊技台３６で遊技する遊技者、並びに、貸出機３４、精算販売機３３、および計数機３５を利用する遊技者といった、遊技店１において遊技者が取るであろうことが想定される行動のほぼ全てを監視できるように、カメラ３８、入口カメラ４０、および店内カメラ４１が設置されている。
【００４５】
［画像処理ユニットの構成例］
次に、図９を参照して、画像処理ユニット３９の構成例について説明する。
【００４６】
画像取得部２０１は、カメラ３８（または、入口カメラ４０もしくは店内カメラ４１）により撮像された画像を取得し、顔画像抽出部２０２に供給する。顔画像抽出部２０２は、画像取得部２０１より供給されてきた画像内に、顔を構成する部位の配置などのパターンからなる顔全体の輪郭に対応した基準テンプレートを用いたテンプレートマッチングにより顔画像からなる矩形画像を抽出して送信部２０３に供給する。送信部２０３は、顔画像抽出部２０２より連続的に供給されてくる顔画像をバッファ２０３ａに蓄積させ、顔画像の供給が停止した状態になったとき、バッファ２０３ａに蓄積された顔画像を顔画像群として生体情報認識装置２１に送信する。尚、バッファ２０３ａの容量には制限があるので、送信部２０３は、バッファ２０３ａで蓄積できる容量が一杯になったところで一連の連続的に供給される複数の顔画像を顔画像群として送信するようにしても良いし、予め所定枚数を決めておき、所定枚数が蓄積された場合、その所定枚数の顔画像を顔画像群として送信するようにしても良い。
【００４７】
［生体情報認識装置の構成例］
次に、図１０を参照して、生体情報認識装置２１の構成例について説明する。
【００４８】
顔画像取得部２２１は、画像処理ユニット３９より供給される複数の顔画像からなる顔画像群を取得し、顔画像信頼度算出部２２２に供給する。顔画像信頼度算出部２２２は、顔画像取得部２２１より供給されてくる顔画像群に含まれる複数の顔画像の信頼度を顔画像信頼度として算出し、顔画像と共に顔器官抽出部２２３に供給する。ここで、顔画像信頼度は、取得された顔画像を構成する領域の信頼度を表す値であり、顔画像信頼度が高い値であるほど、顔画像を構成する領域内に、現実に顔が存在する確率が高いことを示す。
【００４９】
顔器官抽出部２２３は、顔画像取得部２２１により取得された顔画像を構成する領域から各器官を構成する特徴点を顔器官として抽出し、顔画像信頼度、および顔画像群と共に顔器官信頼度算出部２２４に供給する。ここで、顔器官を構成する特徴点とは、口の両端、目尻、目頭、鼻先などのような、口、目、および鼻の各器官を構成する画素の中でも特に特徴的な位置の画素である。
【００５０】
顔器官信頼度算出部２２４は、顔器官抽出部２２３により抽出された特徴点の画素位置の情報からなる顔器官の情報の信頼度を表す値を顔器官信頼度として算出し、顔器官信頼度、顔画像信頼度、および顔画像群と共に顔画像判定部２２５に供給する。ここで、顔器官信頼度とは、顔器官抽出部２２３により抽出された器官の信頼度を示す値であり、顔器官信頼度が高いほど、抽出された顔器官で特定される特徴点が、現実の器官を構成する特徴的な位置の画素である確率が高いことを示す。
【００５１】
顔画像判定部２２５は、顔器官信頼度算出部２２４より供給されてくる顔画像群を構成する各顔画像の顔画像信頼度、および顔器官信頼度が、いずれも所定の閾値よりも高く、取得された顔画像、および抽出された顔器官がいずれも信頼できるものである場合にのみ、顔画像群と共に照合部２２６に供給する。このため、顔画像判定部２２５は、顔画像信頼度が所定の閾値よりも低く、取得された顔画像そのものの信頼性が低いとみなした場合、または、顔器官信頼度が所定の閾値よりも低く、抽出された顔器官の信頼性が低く、仮に顔画像が取得されていたとしても、キャラクタのような顔画像である可能性があるような場合、照合部２２６に対して顔画像を供給しない。
【００５２】
すなわち、顔画像とみなせない場合や、顔画像であるが、キャラクタなどの現実の人物の顔画像とみなせない場合については、顔画像が、照合部２２６に供給されない。この結果、照合に適さない顔画像については、照合そのものがなされないことになるため、誤検出を低減させることが可能となる。尚、顔画像判定部２２５は、顔画像群を構成する複数の顔画像の中で、顔画像信頼度、および顔器官信頼度が、いずれも所定の閾値を超えるものと、超えないものとを含む場合、超えたものだけを照合部２２６に供給するようにしてもよいし、いずれか超えないものが含まれた場合、顔画像群の全ての顔画像を照合部２２６に供給しないようにしてもよい。
【００５３】
照合部２２６は、顔画像判定部２２５より供給されてくる顔画像群の各顔画像と、生体情報DB２２に予め登録されている登録遊技者の顔画像とを照合し、類似度の高い候補となる顔画像があれば、第３候補までの顔画像を照合結果として表示部２３に表示させる。また、照合部２２６は、類似度の高い候補となる顔画像が存在しない場合、供給されてきた顔画像を未登録遊技者データベース登録部２２７に供給する。
【００５４】
より詳細には、照合部２２６の特徴量抽出部２３１は、顔画像群の各顔画像について、それらを識別するための特徴量を抽出して、各顔画像と共に類似度計算部２３２に供給する。類似度計算部２３２は、生体情報DB２２に登録されている登録遊技者の顔画像の特徴量を抽出すると供に、特徴量抽出部２３１より供給されてくる顔画像群の各顔画像の特徴量とを順次用いて、生体情報DB２２に登録されている全ての登録遊技者の顔画像との類似度を求め、顔画像取得部２２１より供給されてきた顔画像と供に類似度計算結果蓄積部２３３に蓄積させる。より具体的には、類似度計算部２３２は、例えば、目と目の間隔、あごから額までの長さと、あごから鼻までの長さの比率などの各種の顔の特徴量に基づいて、それぞれの差分和、平均比率、または比率和などを類似度として求める。
【００５５】
類似度計算結果集計部２３４は、類似度計算結果蓄積部２３３に蓄積された顔画像群の各顔画像についての登録された顔画像との類似度の計算結果を集計して、顔画像群としての類似度を求めて、類似度判定部２３５に供給する。より具体的には、例えば、類似度計算結果蓄積部２３３は、例えば、顔画像群のうち、類似度の最も高い顔画像を基準とした類似度を顔画像群の類似度としたり、または、顔画像群の全ての顔画像に対する登録顔画像との類似度の平均値などを顔画像群の類似度として類似度判定部２３５のバッファ２３５ａに供給する。
【００５６】
類似度判定部２３５は、類似度計算結果集計部２３４より供給されてくる類似度を順次バッファ２３５ａに蓄積し、上位３位となる顔画像群のそれぞれの類似度のうち、１位となる顔画像群との類似度と、所定の閾値とを比較し、比較結果に基づいて、１位となる登録顔画像が、顔画像判定部２２５より供給されてきた顔画像群に対して類似している場合（類似度が高い程類似していることを示す類似度の場合、所定の閾値よりも高いとき、また、類似度が低い程類似していることを示す類似度の場合、所定の閾値よりも低いとき）、上位３位となる顔画像群のうち、最も類似度の高い類似度の顔画像の情報を表示部２３に供給して、表示させると供に、通信部２２８に供給する。また、類似度判定部２３５は、１位となる顔画像群との類似度と、所定の閾値とを比較し、比較結果に基づいて、１位となる登録顔画像が、顔画像判定部２２５より供給されてきた顔画像に対して類似していない場合、顔画像判定部２２５より供給されてきた顔画像群のうち、最も類似度の高い顔画像を未登録遊技者データベース登録部２２７に供給する。
【００５７】
未登録遊技者データベース登録部２２７は、照合部２２６より未登録であるとみなされて供給されてきた、顔画像を生体情報管理データベース３の未登録遊技者DBに登録する。
【００５８】
操作部２２９は、ボタン、マウス、または、キーボードなどから構成され、上述した類似度が上位３位となる、表示部２３に表示された顔画像のいずれかが選択されるとき操作され、操作結果を通信部２２８に供給する。通信部２２８は、イーサネットボードなどから構成され、操作部２２９からの操作信号に基づいて、選択された顔画像を携帯端末２０に配信する。
【００５９】
尚、ここでは、類似度は、例えば、比率和で示されるような登録遊技者として登録されている顔画像に近いほど高い値を示すものであるとし、類似度が所定の閾値よりも高い値であるとき、その類似度に対応する登録遊技者の顔画像であるものとして判定する例について説明する。しかしながら、例えば、類似度が撮像された顔画像と登録遊技者として登録されている顔画像とのそれぞれの特徴量における差分和として表現されている場合、類似度判定部２３５は、類似度が閾値よりも小さければ、撮像された顔画像群が登録遊技者の顔画像であるとみなすことになり、または、平均比率などの場合、０乃至１の範囲で所定の値以上であって、１に近い値であれば、同一の人物であるとみなすことができる。
【００６０】
データベース管理部２３０は、生体情報管理センタ２より新たな登録遊技者データベースが配信されてくると、新たな登録遊技者データベースに基づいて、生体情報DB２２を更新する。
【００６１】
［登録遊技者来店監視処理］
次に、図１１のフローチャートを参照して、登録遊技者来店監視処理について説明する。
【００６２】
ステップＳ１において、入口カメラ４０は、撮像している画像の情報、または、出入口の扉からの信号に基づいて、出入口の扉が開いたか否かを判定し、所定の時間が経過するまで、その処理を繰り返す。
【００６３】
ステップＳ１において、扉が開いたと判定された場合、ステップＳ２において、入口カメラ４０は、設置されている範囲の画像を撮像し、撮像した画像を画像処理ユニット３９に供給する。画像処理ユニット３９の画像取得部２０１は、供給された画像を取得し、顔画像抽出部２０２に供給する。
【００６４】
ステップＳ３において、顔画像抽出部２０２は、供給された画像より遊技者の顔画像を抽出し、送信部２０３に供給する。より具体的には、顔画像抽出部２０２は、撮像された画像のうち顔画像の輪郭に対応した基準テンプレートを用いたテンプレートマッチングにより矩形状の顔画像を抽出して、送信部２０３に供給する。送信部２０３は、供給されてきた顔画像をバッファ２０３ａに一時的に蓄積する。尚、顔画像抽出部２０２は、撮像された画像のうち、配色などから肌が露出した部分であって、目や鼻といった特徴的な部位の配置などから矩形状の顔画像を抽出するようにしてもよいし、顔の器官（目、鼻、耳など）に基づいてテンプレートマッチング、または、クロマキー処理によって頭部などの頂点を検出し、ニューラルネットワークを使って教師信号による学習を行い、顔らしい領域を顔画像として検出するといった手法により顔画像を抽出するようにしてもよい。
【００６５】
ステップＳ４において、顔画像抽出部２０２は、供給されてくる画像より顔画像が存在するか否か、すなわち、例えば、入口カメラ４０により撮像される画像より直前の処理で抽出した顔画像と同一人物の顔画像が抽出できるか否かを判定し、抽出できると判定された場合、処理は、ステップＳ２に戻り、ステップＳ２乃至Ｓ４の処理が繰り返される。すなわち、顔画像が連続的に抽出できる状態である限り、ステップＳ２乃至Ｓ４の処理が繰り返される。尚、上述したように、バッファ２０３ａには容量の制限があるため、バッファ２０３ａに蓄積される顔画像が一杯になったところで、顔画像が抽出できない、すなわち、顔画像が存在しないと判定するようにしても良いし、所定枚数蓄積したところで、顔画像が抽出できないと判定するようにしても良い。尚、以降の説明においては、所定枚数として６枚の顔画像が抽出されたところで、顔画像が抽出できないと判定するものとする。
【００６６】
したがって、ステップＳ４において、例えば、それまでに、ステップＳ２乃至Ｓ４の処理が６回繰り返され、それぞれの画像より顔画像が抽出されていた場合、それ以降の画像に顔画像が存在していても、存在しない状態でも、顔画像が存在しないとみなし、その処理は、ステップＳ５に進む。
【００６７】
ステップＳ５において、送信部２０３は、顔画像抽出部２０２より供給されてきた顔画像を蓄積しているバッファ２０３ａより複数の顔画像を読み出し、顔画像群として生体情報認識装置２１に送信する。この際、送信部２０３は、カメラ３８、入口カメラ４０、または店内カメラ４１のそれぞれを識別するカメラIDや、送信時刻の情報などの情報を顔画像群に付加して生体情報認識装置２１に送信する。
【００６８】
ステップＳ２１において、生体情報認識装置２１の顔画像取得部２２１は、顔画像群を取得する。ステップＳ２２において、顔画像取得部２２１は、供給された顔画像群のうち、いずれか未処理の１つの顔画像群を抽出し、顔画像信頼度算出部２２２に供給する。
【００６９】
ステップＳ２３において、顔画像信頼度算出部２２２乃至顔器官信頼度算出部２２４は、信頼度算出処理を実行して、顔画像信頼度、および顔器官信頼度を算出する。
【００７０】
［信頼度算出処理］
ここで、図１２のフローチャートを参照して、信頼度算出処理について説明する。
【００７１】
ステップＳ５１において、顔画像信頼度算出部２２２は、顔画像取得部２２１より供給されてくる顔画像群に含まれる複数の顔画像の信頼度を顔画像信頼度ｔｒ１として算出し、顔画像と共に顔器官抽出部２２３に供給する。顔画像信頼度算出部２２２は、例えば、顔画像における顔の輪郭に対応した基準テンプレートを用いたテンプレートマッチングによって顔を検出する場合、検出した顔画像と基準テンプレートとで一致した画素数の割合を顔検出信頼度として算出する。
【００７２】
ステップＳ５２において、顔器官抽出部２２３は、顔画像取得部２２１により取得された顔画像を構成する領域から各器官を構成する特徴点を、顔器官として抽出し、顔器官、顔画像信頼度、および顔画像群を顔器官信頼度算出部２２４に供給する。顔器官抽出部２２３は、例えば、顔器官を構成する画素のうち特徴点となる画素の位置からなるパターンを学習し、その学習データを使用したマッチングにより特徴点を検出する、または取得された顔画像の内側において、パターンマッチングにより特徴点を検出する。
【００７３】
ステップＳ５３において、顔器官信頼度算出部２２４は、顔器官抽出部２２３により抽出された特徴点の画素位置の情報からなる顔器官の情報の信頼度を表す値を顔器官信頼度ｔｒ２として算出し、顔器官信頼度、顔画像信頼度、および顔画像群を顔画像判定部２２５に供給する。より具体的には、顔器官信頼度算出部２２４は、パターンマッチングにより特徴点を検出する方法を用いた場合、予め学習した各特徴点の輝度値ベクトルと、顔器官として抽出した特徴点付近の領域から得られる輝度値ベクトルとのユークリッド距離を顔器官信頼度として算出する。
【００７４】
以上の処理により、顔画像が取得されると共に、顔画像信頼度ｔｒ１、および顔器官信頼度ｔｒ２が求められて、顔画像判定部２２５に供給される。
【００７５】
ここで、図１１のフローチャートの説明に戻る。
【００７６】
ステップＳ２４において、顔画像判定部２２５は、顔画像信頼度ｔｒ１、および顔器官信頼度ｔｒ２に基づいて、併せて供給されてきた顔画像が誤検出された顔画像であるか否かを判定する。より具体的には、顔画像判定部２２５は、顔画像信頼度ｔｒ１が所定の閾値よりも低いか、または、顔器官信頼度ｔｒ２が所定の閾値よりも低いとき、顔画像としての信頼度が低く誤検出であると判定する。従って、ステップＳ２４において、例えば、顔画像がポスタなどに描かれているキャラクタの顔画像などであって、顔画像信頼度が低い、または、顔器官信頼度が低い場合、誤検出であるとみなし、処理は、ステップＳ３８に進む。
【００７７】
ステップＳ３８において、顔画像判定部２２５は、供給されてきた顔画像群を破棄して、処理は、ステップＳ３６に進む。
【００７８】
一方、ステップＳ２４において、正しい人物の顔画像が取得されて、顔画像信頼度が所定の閾値よりも高く、かつ、顔器官信頼度も所定の閾値よりも高い場合、顔画像判定部２２５は、誤検出ではないとみなし、処理は、ステップＳ２５に進む。
【００７９】
ステップＳ２５において、顔画像判定部２２５は、取得した顔画像を照合部２２６に供給する。
【００８０】
すなわち、顔画像判定部２２５が、顔画像信頼度、および顔器官信頼度に基づいて、顔画像として信頼できるもの以外は、後段の照合部２２６に供給しないようにしている。このような処理により、そもそも顔画像としての信頼度が低いものについては、照合部２２６における照合処理がなされないため、誤検出を抑制することが可能となる。
【００８１】
ステップＳ２６において、照合部２２６の特徴量抽出部２３１は、供給されてきた顔画像群のうち、未処理の１つの顔画像を抽出し、ステップＳ２７において、特徴量を抽出して、顔画像と供に類似度計算部２３２に供給する。
【００８２】
ステップ２８において、類似度計算部２３２は、類似度計算処理を実行する。
【００８３】
ここで、図１３のフローチャートを参照して、類似度計算処理について説明する。
【００８４】
ステップＳ７１において、類似度計算部２３２は、生体情報DB２２に登録されている顔画像のうち、未処理の１つの登録遊技者の顔画像を抽出し、処理対象に設定する。
【００８５】
ステップＳ７２において、類似度計算部２３２は、処理対象として設定した生体情報DB２２に登録されている顔画像より、特徴量抽出部２３１より供給されてきた特徴量と同様の特徴量を抽出する。
【００８６】
ステップＳ７３において、類似度計算部２３２は、特徴量抽出部２３１より供給された顔画像についての、目と目の間隔、あごから額までの長さと、あごから鼻のまでの長さの比率などの各種の顔の特徴量と、生体情報DB２２に登録されている顔画像における同様の特徴量とを用いて、それぞれの差分和、平均比率、または比率和などを類似度として計算し、ステップＳ７４において、計算結果である生体情報DB２２に登録されている顔画像との類似度を類似度判定部２３５に供給し、バッファ２３３ａに登録させる。
【００８７】
ステップＳ７５において、類似度計算部２３２は、生体情報DB２２に未処理の登録遊技者の顔画像が存在するか否かを判定し、未処理の登録遊技者の顔画像が存在する場合、処理は、ステップＳ７１に戻る。すなわち、生体情報DB２２の全ての登録遊技者の顔画像との類似度が計算されるまで、ステップＳ７１乃至Ｓ７５の処理が繰り返される。そして、ステップＳ７５において、生体情報DB２２に未処理の登録遊技者の顔画像が存在しないと判定された場合、類似度計算処理は終了する。
【００８８】
ここで、図１１のフローチャートの説明に戻る。
【００８９】
ステップＳ２９において、類似度判定部２３５は、バッファ２３３ａに登録されている類似度の計算結果に基づいて順位を求め、生体情報DB２２に登録されている顔画像のうちの上位３位までの顔画像と類似度の情報を、抽出する。そして、ステップＳ３０において、類似度計算部２３２は、選択された顔画像群のうち未処理の顔画像が存在するか否かを判定し、未処理の顔画像が存在する場合、処理は、ステップＳ２６に戻る。すなわち、選択された顔画像群のうち、未処理の顔画像が存在しない状態まで、ステップＳ２６乃至Ｓ３０の処理が繰り返される。
【００９０】
ステップＳ３０において、未処理の顔画像が存在しない、すなわち、選択された顔画像群の全ての顔画像について、登録遊技者の顔画像との類似度が求められたと判定された場合、ステップＳ３１において、類似度計算結果集計部２３４は、類似度計算結果蓄積部２３３に蓄積された顔画像毎の類似度の計算結果を集計し、集計結果を類似度判定部２３５のバッファ２３５ａに登録する。
【００９１】
ステップＳ３２において、類似度判定部２３５は、バッファ２３５ａに登録されている類似度計算結果集計部２３４より供給されてくる顔画像群としての上位３位までの候補となる顔画像と類似度の情報に基づいて、最上位の類似度が所定の閾値よりも大きいか否かを判定する。すなわち、類似度判定部２３５は、最も類似している登録遊技者（生体情報DB２２に登録されている顔画像のうち、顔画像取得部２２１により取得された顔画像群と最も類似している登録遊技者：ここでは、類似度の最も高い登録遊技者）の類似度を所定の閾値と比較する。
【００９２】
尚、上述のように、類似度の定義により、撮像された顔画像と最も類似している登録遊技者の顔画像との類似度は、その値そのものが最も高いとは限らないため、類似度と閾値との大小関係はこの例の場合とは異なることがある。
【００９３】
ステップＳ３２において、最上位の類似度が所定の閾値よりも大きいと判定された場合、ステップＳ３３において、類似度判定部２３５は、類似度計算部２３２より供給されてきた上位３位の顔画像が登録遊技者の顔画像の候補であることを示す報知画面を表示部２３を制御して表示させる。
【００９４】
ステップＳ３４において、通信部２２８は、操作部２２９が操作されて、候補となる顔画像の何れかが選択されたか否かを判定する。
【００９５】
ステップＳ３４において、例えば、操作部２２９が操作されて、候補となる顔画像の何れかが選択された場合、候補となる顔画像が選択されたとみなされ、ステップＳ３２において、通信部２２８は、選択された候補となる顔画像および入口カメラ４０により撮像されたカメラ画像を携帯端末２０に送信し、該当する登録遊技者が来店したことを通知する。
【００９６】
以上の処理により、遊技店１内の係員は、携帯端末２０を所持していると、登録遊技者の来店を認識することが可能となる。
【００９７】
また、ステップＳ３６において、顔画像取得部２２１は、供給された顔画像の全てについて処理を行なったか否かを判定し、未処理の顔画像がある場合、処理は、ステップＳ２２に戻る。すなわち、全ての顔画像について処理が行なわれるまで、ステップＳ２２乃至Ｓ３６の処理が繰り返される。そして、全ての顔画像について処理が終了したと判定された場合、処理は、ステップＳ２１に戻る。
【００９８】
一方、ステップＳ３４において、いずれの候補となる顔画像も選択されない場合、または、ステップＳ３２において、類似度計算部２３２より供給されてくる上位３位までの顔画像と類似度の情報に基づいて、最上位の類似度が所定の閾値よりも大きくない場合、すなわち、最も類似している登録遊技者の顔画像であっても類似度が、所定の閾値未満である場合、ステップＳ３７において、類似度判定部２３５は、画像処理ユニット３９より供給されてきた顔画像群のうちの最上位の類似度の顔画像を未登録遊技者データベース登録部２２７に供給する。未登録遊技者データベース登録部２２７は、供給されてきた顔画像を生体管理情報バス６及び公衆通信回線網８を介して生体情報管理データベース３にアクセスし登録する。尚、未登録遊技者データベース登録部２２７に供給される顔画像は、顔画像群のうちのいずれの顔画像であってもよく、必ずしも、最上位の類似度の顔画像でなくてもよい。
【００９９】
以上の処理により、生体情報認識装置２１により画像処理ユニット３９より供給されてきた顔画像群により複数の顔画像を用いて類似度が求められることになるので、顔画像の認識をより正確に実行することが可能となる。また、画像処理ユニット３９より供給されてきた顔画像群が、生体情報DB２２に登録されていない顔画像の顔画像群であるとみなされると、生体情報管理センタ２により管理されている生体情報管理DB３内に未登録遊技者の顔画像として登録される。
【０１００】
また、顔画像の信頼度を示す、顔画像信頼度、および顔器官信頼度に基づいて、顔画像として信頼性の低いとみなされるものについては、照合部２２６に対して供給されることがなく、信頼性の高い顔画像のみが照合部２２６に供給されるので、ポスタや人形などのキャラクタの顔の領域が顔画像として抽出されても、誤検出されないようにすることが可能となる。
【０１０１】
ところで、上述した一連の監視処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【０１０２】
図１４は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)１００１を内蔵している。CPU１００１にはバス１００４を介して、入出力インタフェース１００５が接続されている。バス１００４には、ROM(Read Only Memory)３０２およびRAM(Random Access Memory)１００３が接続されている。
【０１０３】
入出力インタフェース１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、LAN（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどのリムーバブルメディア１０１１に対してデータを読み書きするドライブ１０１０が接続されている。
【０１０４】
CPU１００１は、ROM１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブルメディア１０１１から読み出されて記憶部１００８にインストールされ、記憶部１００８からRAM３０３にロードされたプログラムに従って各種の処理を実行する。RAM１００３にはまた、CPU１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１０５】
尚、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。
【０１０６】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【符号の説明】
【０１０７】
１，１−１乃至１−ｎ 遊技店
２ 生体情報管理センタ
３ 生体情報管理データベース
４ 第３者遊技店管理センタ
５ 第３者遊技店管理データベース
６ 生体情報管理バス
７ 第３者遊技店管理バス
８，９ 公衆通信回線網
２１ 生体情報認識装置
２２ 生体情報データベース
２４ 遊技店管理装置
２６ 遊技台管理データベース
２７ 媒体貸出管理装置
２９ 媒体貸出管理データベース
３０ 遊技店管理情報バス
３１ 生体情報バス
３３ 精算機
３４ 貸出機
３５ 計数機
３６，３６−１乃至３６−ｍ 遊技台
３７，３７−１乃至３７−ｍ 遊技台周辺端末
３８，３８−１乃至３８−ｍ カメラ
３９，３９−１乃至３９−（ｍ＋ｐ＋ｑ） 画像処理ユニット
４０，４０−１乃至４０−ｐ 入口カメラ
４１，４１−１乃至４１−ｑ 店内カメラ
【特許請求の範囲】
【請求項１】
顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、
画像より照合対象者の顔画像を取得する取得手段と、
前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、
前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、
前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、
前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、
前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、
前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、
前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段と
を含む情報処理装置。
【請求項２】
前記取得手段が前記画像より顔画像を取得する手法は、顔の輪郭形状に対応したテンプレートを用いたテンプレートマッチング、前記顔を構成する器官に基づいたテンプレートマッチング、クロマキー処理により顔を構成する頭部の頂点を検出した後、その頂点に基づいて顔画像を検出する手法、肌色領域の形状に基づいて検出する手法、またはニューラルネットワークに基づいて、教師信号による学習により顔らしい領域を検出する手法を含む
請求項１に記載の情報処理装置。
【請求項３】
前記顔画像信頼度算出手段は、前記顔画像に基づいて、前記顔の輪郭に対応したテンプレートを用いたテンプレートマッチングにより、前記テンプレートとの一致の程度を示す値を前記顔画像信頼度として算出する
請求項１に記載の情報処理装置。
【請求項４】
前記器官抽出手段は、前記顔画像に基づいて、前記器官を構成する画素位置の情報を特徴点として抽出し、前記顔画像の輪郭を含む前記器官を構成する画素位置の情報からなる特徴点の配置を学習することにより得られるパターンを用いたパターンマッチング、または、前記顔画像の領域内における前記器官を構成する画素位置の情報からなる特徴点の配置パターンに基づいたパターンマッチングによりを抽出する
請求項１に記載の情報処理装置。
【請求項５】
前記器官信頼度算出手段は、教師信号による学習により求められた前記顔画像における前記器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルと、前記器官抽出手段により抽出された器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルとのユークリッド空間における距離を前記器官信頼度として算出する
請求項１に記載の情報処理装置。
【請求項６】
顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、
画像より照合対象者の顔画像を取得する取得手段と、
前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、
前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、
前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、
前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、
前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、
前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、
前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置の情報処理方法であって、
前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、
前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、
前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、
前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、
前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、
前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、
前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、
前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップと
を含む情報処理方法。
【請求項７】
顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、
画像より照合対象者の顔画像を取得する取得手段と、
前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、
前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、
前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、
前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、
前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、
前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、
前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置を制御するコンピュータに、
前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、
前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、
前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、
前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、
前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、
前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、
前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、
前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップと
を含む処理を実行させるプログラム。
【請求項１】
顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、
画像より照合対象者の顔画像を取得する取得手段と、
前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、
前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、
前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、
前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、
前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、
前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、
前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段と
を含む情報処理装置。
【請求項２】
前記取得手段が前記画像より顔画像を取得する手法は、顔の輪郭形状に対応したテンプレートを用いたテンプレートマッチング、前記顔を構成する器官に基づいたテンプレートマッチング、クロマキー処理により顔を構成する頭部の頂点を検出した後、その頂点に基づいて顔画像を検出する手法、肌色領域の形状に基づいて検出する手法、またはニューラルネットワークに基づいて、教師信号による学習により顔らしい領域を検出する手法を含む
請求項１に記載の情報処理装置。
【請求項３】
前記顔画像信頼度算出手段は、前記顔画像に基づいて、前記顔の輪郭に対応したテンプレートを用いたテンプレートマッチングにより、前記テンプレートとの一致の程度を示す値を前記顔画像信頼度として算出する
請求項１に記載の情報処理装置。
【請求項４】
前記器官抽出手段は、前記顔画像に基づいて、前記器官を構成する画素位置の情報を特徴点として抽出し、前記顔画像の輪郭を含む前記器官を構成する画素位置の情報からなる特徴点の配置を学習することにより得られるパターンを用いたパターンマッチング、または、前記顔画像の領域内における前記器官を構成する画素位置の情報からなる特徴点の配置パターンに基づいたパターンマッチングによりを抽出する
請求項１に記載の情報処理装置。
【請求項５】
前記器官信頼度算出手段は、教師信号による学習により求められた前記顔画像における前記器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルと、前記器官抽出手段により抽出された器官を構成する特徴点のパターンとなる画素位置の画素の輝度値のベクトルとのユークリッド空間における距離を前記器官信頼度として算出する
請求項１に記載の情報処理装置。
【請求項６】
顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、
画像より照合対象者の顔画像を取得する取得手段と、
前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、
前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、
前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、
前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、
前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、
前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、
前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置の情報処理方法であって、
前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、
前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、
前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、
前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、
前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、
前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、
前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、
前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップと
を含む情報処理方法。
【請求項７】
顔画像を蓄積者の顔画像として蓄積者データベースに蓄積する蓄積手段と、
画像より照合対象者の顔画像を取得する取得手段と、
前記取得手段により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合手段と、
前記照合手段の照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定手段と、
前記類似度判定手段により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知手段と、
前記取得手段により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出手段と、
前記取得手段により取得された顔画像より顔の器官を抽出する器官抽出手段と、
前記器官抽出手段により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出手段と、
前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合手段、および前記類似判定手段に、処理を実行させるように制御する信頼度判定手段とを含む情報処理装置を制御するコンピュータに、
前記取得手段における、画像より照合対象者の顔画像を取得する取得ステップと、
前記照合手段における、前記取得ステップの処理により取得された照合対象者の顔画像と、前記蓄積手段に蓄積された蓄積者の顔画像との類似度を計算し、照合する照合ステップと、
前記類似度判定手段における、前記照合ステップの処理での照合結果である類似度と所定の閾値との比較により、前記照合対象者の顔画像が前記蓄積者の顔画像であるか否かを判定する類似度判定ステップと、
前記通知手段における、前記類似度判定ステップの処理により前記照合対象者の顔画像が前記蓄積者の顔画像であると判定された場合、前記照合対象者が前記蓄積者であることを通知する通知ステップと、
前記顔画像信頼度算出手段における、前記取得ステップの処理により取得された顔画像の信頼度を顔画像信頼度として算出する顔画像信頼度算出ステップと、
前記器官抽出手段における、前記取得ステップの処理により取得された顔画像より顔の器官を抽出する器官抽出ステップと、
前記器官信頼度算出手段における、前記器官抽出ステップの処理により抽出された器官の信頼度を器官信頼度として算出する器官信頼度算出ステップと、
前記信頼度判定手段における、前記顔画像信頼度、および前記器官信頼度のいずれもが、所定の閾値よりも高い場合、前記照合ステップ、および前記類似判定ステップでの、処理を実行させるように制御する信頼度判定ステップと
を含む処理を実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１２−１８５９３（Ｐ２０１２−１８５９３Ａ）
【公開日】平成２４年１月２６日（２０１２．１．２６）
【国際特許分類】
【出願番号】特願２０１０−１５６３５７（Ｐ２０１０−１５６３５７）
【出願日】平成２２年７月９日（２０１０．７．９）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．イーサネット
【出願人】（０００００２９４５）オムロン株式会社 (3,542)
【Ｆターム（参考）】
【公開日】平成２４年１月２６日（２０１２．１．２６）
【国際特許分類】
【出願日】平成２２年７月９日（２０１０．７．９）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．イーサネット
【出願人】（０００００２９４５）オムロン株式会社 (3,542)
【Ｆターム（参考）】
[ Back to top ]