制御システム、およびこれに用いる顔認証システム、携帯端末
【課題】 簡易な操作で効率良く顔認証技術に用いるための基準画像情報を更新することができ、精度の高い顔認証を行うことが可能な制御システム、およびこれに用いる顔認証システム、携帯端末を提供する。
【解決手段】 制御システムの携帯端末は、顔画像撮影部と、基準画像送信部と、辞書データ取得部とを有する。顔画像撮影部は、在室者の顔画像を撮影する。基準画像送信部は、撮影された顔画像情報を基準画像情報として、携帯端末が充電器に装着された状態で、ＰＬＣを利用して接続された認証情報管理装置に送信する。辞書データ取得部は、充電器に装着された状態で、顔画像情報を送信したことにより認証情報管理装置において顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、ＰＬＣを利用して取得する。
【解決手段】 制御システムの携帯端末は、顔画像撮影部と、基準画像送信部と、辞書データ取得部とを有する。顔画像撮影部は、在室者の顔画像を撮影する。基準画像送信部は、撮影された顔画像情報を基準画像情報として、携帯端末が充電器に装着された状態で、ＰＬＣを利用して接続された認証情報管理装置に送信する。辞書データ取得部は、充電器に装着された状態で、顔画像情報を送信したことにより認証情報管理装置において顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、ＰＬＣを利用して取得する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、制御システム、およびこれに用いる顔認証システム、携帯端末に関する。
【背景技術】
【０００２】
従来、個人認証技術の一つとして、カメラ装置により撮影された人の顔画像を解析することにより個人の特定を行う顔認証技術がある。
【０００３】
この顔認証技術では、特定対象の人の顔画像を予め基準画像として撮影し、この基準画像から抽出された特徴量を当該人物の辞書データとして記憶しておく。そしてこの辞書データに基づいて、カメラ装置で撮影された認証対象の人の顔画像と基準画像との類似度が算出され、この類似度が所定値以上であれば当該特定対象の人であると判断される。
【０００４】
このような顔認証技術を例えば空調制御システムに組み込んで用いることにより、空調制御対象の室内の在室者を撮影して個人を特定し、この在室者に適した空調制御を行うことが可能になり、在室者にとって快適性の高い空調制御を行うことができる。
【０００５】
また、この顔認証技術では、成長期の子供やお年寄りなど顔の形状の変化が著しい人などは長期間にわたって同じ基準画像の辞書データを用いることができないため、新たに撮影した顔画像を基準画像として、適宜辞書データを更新する技術がある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−３４８７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかし、上述したように基準画像から特徴量を抽出して辞書データを生成する処理は、膨大なデータ処理を必要とする。このため、家電機器に内蔵したＭＣＵ（Micro-Control Unit）レベルで実行するには負荷が大きく、実行しようとすると画像データのレベルによっては数時間から数日かかってしまう可能性があり現実的でない。
【０００８】
そのため辞書データの生成を、家電機器とは別に設置した処理速度の速い中央サーバ等で実行することが考えられるが、撮影した顔画像の中央サーバへの送信や、中央サーバで生成された辞書データの家電機器への送信などを行う必要があり、辞書データを更新する際のユーザの操作が煩雑になるという問題があった。
【０００９】
本発明は上記事情に鑑みてなされたものであり、簡易な操作で効率良く顔認証技術に用いるための基準画像情報を更新することができ、精度の高い顔認証を行うことが可能な制御システム、およびこれに用いる顔認証システム、携帯端末を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するための本発明の制御システムは、制御システムの携帯端末は、顔画像撮影部と、基準画像送信部と、辞書データ取得部とを有する。顔画像撮影部は、在室者の顔画像を撮影する。基準画像送信部は、充電器に装着された状態で、撮影された顔画像情報を基準画像情報としてＰＬＣ（Power Line Communications：電力線通信）を利用して接続された認証情報管理装置に送信する。辞書データ取得部は、充電器に装着された状態で、顔画像情報を送信したことにより認証情報管理装置において顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、ＰＬＣを利用して取得する。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１実施形態による空調制御システムの構成を示すブロック図である。
【図２】本発明の第１実施形態および第２実施形態による携帯端末の操作面の一例を示す正面図である。
【図３】本発明の第１実施形態による空調制御システムの動作を示すシーケンス図である。
【図４】本発明の第１実施形態および第２実施形態による携帯端末において実行される撮影処理の動作を示すフローチャートである。
【図５】本発明の第１実施形態および第２実施形態による携帯端末から認証情報管理装置に基準画像情報が送信されるときの動作を示すフローチャートである。
【図６】本発明の第１実施形態および第２実施形態による携帯端末において、登録した基準画像情報を削除するときの動作を示すフローチャートである。
【図７】本発明の第２実施形態による空調制御システムの構成を示すブロック図である。
【図８】本発明の第２実施形態による空調制御システムの動作を示すシーケンス図である。
【発明を実施するための形態】
【００１２】
《第１実施形態》
〈第１実施形態による空調制御システムの構成〉
本発明の第１実施形態として、顔認証システムを利用した空調制御システム１Ａの構成について、図１を参照して説明する。
【００１３】
本実施形態による空調制御システム１Ａは、空調制御機の室内機１０Ａと、在室者の操作によりこの室内機１０Ａの動作指示を送信する携帯端末であるリモートコントローラ２０Ａと、ＰＬＣモデム４０を介して、商用電源に電力線通信（ＰＬＣ）を利用可能な状態で接続されたリモートコントローラ２０Ａの充電器３０と、ＰＬＣを利用してインターネット等のネットワーク５０を介して充電器３０に接続された認証情報管理装置６０とを有する。
【００１４】
電力線通信（ＰＬＣ）とは、商用の電力線（ＡＣ100〜120V／200〜240V）に高周波信号を重畳し、電力線を伝送路として双方向通信を行う既存の技術を利用したものである。なお、図示省略しているが、商用電源ラインとネットワーク５０との間にもＰＬＣモデムが設けられ、このＰＬＣモデムとＰＬＣモデム４０によって、リモートコントローラ２０Ａと認証情報管理装置６０とが相互に電力線通信（ＰＬＣ）を介して情報のやり取りを可能としている。 室内機１０Ａは、冷暖房を行なう通常の空調機としての機能を担う空調制御部１３の他に室内撮影部１１と、認証処理部１２とを有する。
【００１５】
室内撮影部１１は、ＣＭＯＳカメラ等であり、室内機１０Ａの上方に１０ｃｍ程度の距離を話して設置された２眼レンズ１１１を利用して、空調制御対象の室内を撮影する。
【００１６】
認証処理部１２は、室内撮影部１１で撮影された画像を用いて在室者の人数、位置を検出するとともに、室内撮影部１１で撮影された画像とリモートコントローラ２０Ａから送信される辞書データとを照合して在室者の認証処理を行うことにより当該在室者の特定を行う。
【００１７】
空調制御部１３は、認証処理部１２で検出された在室者の人数、位置、および在室者を特定する情報とに基づいて、認証された在室者に対応する自動空調制御を行うかまたは、リモートコントローラ２０Ａから送信された指示に応じた手動による空調制御を行う。
【００１８】
リモートコントローラ２０Ａは、入力部２１と、顔画像撮影部２２と、基準画像記録部２３と、基準画像送信部２４と、辞書データ取得部２５と、無線送信部２６と、削除処理部２７とを有する。
【００１９】
入力部２１はリモートコントローラ２０Ａの操作面に設けられた操作ボタンで構成され、在室者により操作されるものである。この入力部２１としての操作ボタン等を含む操作面の一例を、図２に示す。
【００２０】
図２に示すようにリモートコントローラ２０Ａの操作面には、顔画像撮影部２２による撮影に利用するレンズ部２１−１と、このレンズ部２１−１を利用して顔画像撮影部２２により撮影処理を実行させるための「撮影」ボタン２１−２と、「撮影」ボタン２１−２が押下されたことにより撮影された顔画像情報を基準画像情報として基準画像記録部２３に記録させるための「登録」ボタン２１−３と、基準画像記録部２３に記録された基準画像情報を削除するための「削除」ボタン２１−４と、これらの撮影処理、登録処理、または削除処理を実行する在室者を識別するための識別ボタン２１−５と、これらの撮影処理、登録処理、または削除処理を実行する際の対象画像や通知情報、設定情報等を表示する液晶モニタ２１−６と、当該リモートコントローラ２０Ａが充電器３０に装着され充電中であるときに点灯するＬＥＤランプ２１−７と、室内機１０への運転開始指示を入力するための「運転」ボタン２１−８と、運転停止指示を入力するための「停止」ボタン２１−９と、除湿制御指示を入力するための「除湿」ボタン２１−１０と、風除制御指示を入力するための「風除」ボタン２１−１１と、冷房制御指示を入力するための「冷房」ボタン２１−１２と、暖房制御指示を入力するための「暖房」ボタン２１−１３と、設定温度を現在よりも高くする指示を入力するための「プラス（＋）」ボタン２１−１４と、設定温度を現在よりも低くする指示を入力するための「マイナス（−）」ボタン２１−１５とが設けられている。図２の例では、在室者を識別するための識別ボタン２１−５は、家族や従業員などの在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥの５人に対して設けられている。以上の操作面において、室内機１０への運転開始指示を入力するための「運転」ボタン２１−８〜「マイナス（−）」ボタン２１−１５までが、一般的な空調機の制御に用いられ、個人の顔認証のために用いられるのが、「撮影」ボタン２１−２〜識別ボタン２１−５となっている。
【００２１】
顔画像撮影部２２は、レンズ部２１−１を利用して、当該リモートコントローラ２０Ａを操作する在室者の顔画像を撮影するカメラ装置である。
【００２２】
基準画像記録部２３は、顔画像撮影部２２で撮影された顔画像情報を取得して、顔認証処理に利用する辞書データ生成のための基準画像情報として在室者ごとに記録する。
【００２３】
以上の顔画像撮影部２２で撮影は、リモートコントローラ２０Ａが充電器３０に装着した状態でも、装着前のリモートコントローラ２０Ａ単独の状態でもいずれでも可能である。
【００２４】
リモートコントローラ２０Ａが充電器３０に装着されると、基準画像送信部２４は、基準画像記録部２３に既に記録されている基準画像情報を、ＰＬＣを利用しネットワーク５０を介して認証情報管理装置６０に送信する。なお、リモートコントローラ２０Ａが充電器３０に装着された状態で、顔画像撮影部２２で顔画像を撮影した場合は、撮影し、基準画像記録部２３に記録したばかりの基準画像情報を、ＰＬＣを利用しネットワーク５０を介して認証情報管理装置６０に送信する。
【００２５】
辞書データ取得部２５は、充電器３０に装着された状態で、基準画像送信部２４から認証情報管理装置６０に基準画像情報を送信したことにより、認証情報管理装置６０において生成された辞書データを、ネットワーク５０を介しＰＬＣを利用して取得する。
【００２６】
無線送信部２６は、辞書データ取得部２５で取得された辞書データ、および入力部２１で入力された室内機１０Ａの操作に関する指示を示す信号を、室内機１０Ａの認証処理部１２に無線により送信する。
【００２７】
削除処理部２７は、基準画像記録部２３に記録された基準画像情報のうち、指定された画像情報を削除する処理を行う。
【００２８】
認証情報管理装置６０は、辞書データ生成部６１と、辞書データ送信部６２とを有する。
【００２９】
辞書データ生成部６１は、リモートコントローラ２０Ａから送信された基準画像情報の特徴量を抽出することにより顔認証処理に利用するための辞書データを生成する。認証情報管理装置６０は、高速かつ高度な処理が可能な電子計算機が用いられ、基準画像情報から辞書データを短時間で生成することができる。
【００３０】
辞書データ送信部６２は、辞書データ生成部６１で生成された辞書データを、ネットワーク５０を介しＰＬＣを利用して充電器３０に装着されたリモートコントローラ２０Ａに送信する。
【００３１】
〈第１実施形態による空調制御システムの動作〉
次に、本実施形態による空調制御システム１Ａの動作について説明する。
【００３２】
空調制御システム１Ａの稼働が開始すると、リモートコントローラ２０Ａの入力部２１から適宜在室者により室内機１０Ａの動作を手動で制御するための指示、例えば「運転」ボタン２１−８による運転指示、「除湿」ボタン２１−１０による除湿制御指示、「風除」ボタン２１−１１による風除制御指示、「冷房」ボタン２１−１２による冷房制御指示、「暖房」ボタン２１−１３による暖房制御指示、「プラス（＋）」ボタン２１−１４による設定温度を現在よりも高くする指示、「マイナス（−）」ボタン２１−１５による設定温度を現在よりも低くする指示、「停止」ボタン２１−９による運転停止指示が操作面のボタンを用いて入力されることにより、無線通信を用いた無線送信部２６からこれらの指示が室内機１０Ａに送信され、室内機１０Ａの空調制御部１３でこの指示に対応した動作が行われる。
【００３３】
また、この在室者の手動の操作による空調制御とは別に、図３のシーケンス図に示すように、室内機１０Ａにおいて在室者を自動識別することによりこの在室者に適した自動空調制御も行われる。以下、この自動空調制御動作について説明する。
【００３４】
本実施形態においては、予め５人の在室する可能性の高い家族などの個人（以下、在室者という）Ａ、Ｂ、Ｃ、Ｄ、およびＥに適した空調制御内容情報がそれぞれ生成され、室内機１０Ａの空調制御部１３に記憶されているものとする。この空調制御内容情報は、例えば各在室者の好みの温度等である。この在室者に適した空調制御内容情報とは、各在室者がリモートコントローラ２０Ａを操作することで設定・記憶させておいて良いし、リモートコントローラ２０Ａまたは室内機１０Ａにおいて、過去の各在室者のリモートコントローラ２０Ａを用いた設定内容等を在室者別にデータ記憶させ、過去のデータを自動的に統計処理することで自動的に得るようにしても良い。
【００３５】
本実施形態においては、室内機１０Ａにおける在室者の自動識別処理として、在室者の顔の特徴に基づいて識別を行う顔認証処理が用いられる。顔認証処理において利用される、各在室者の顔画像の特徴に関する辞書データを室内機１０Ａで取得する処理について図３〜図６を用いて説明する。
【００３６】
まず、在室者にリモートコントローラ２０Ａの入力部２１が操作されることにより、在室者の所望の時点で顔画像撮影部２２において顔画像が撮影され、この撮影画像情報が顔認証処理を行う際に利用される辞書データ生成のための基準画像情報として基準画像記録部２３に登録される（図３のＳ１）。
【００３７】
顔画像撮影部２２における顔画像の撮影処理および基準画像記録部２３への基準画像情報の登録処理について、図４のフローチャートを参照して詳細に説明する。
【００３８】
まずリモートコントローラ２０Ａにおいて、在室者によりいずれかの識別ボタン２１−５が押下されたか否かが監視される（Ｓ１１）。いずれかの識別ボタン２１−５、例えば操作者である在室者Ａの識別ボタン２１−５が押下されたことが検知されると（Ｓ１１の「YES」）「撮影モード」に移行され、レンズ部２１−１によりカメラ装置である顔画像撮影部２２でとらえられた在室者Ａの顔画像が液晶モニタ２１−６に表示される（Ｓ１２）。顔画像撮影部２２では、適当な短い時間例えば１秒毎に画像を撮像し、更新する。したがって、液晶モニタ２１−６に表示される顔画像は、逐次変更されていく。
【００３９】
この識別ボタン２１−５が押下されると、リモートコントローラ２０Ａ内の、ボタン押下待ち時間が予め設定された上限、例えば３０秒を超えたか否かを計測するボタン押下待ち時間計測タイマー（図示せず）が初期化される（Ｓ１３）。
【００４０】
次に、「撮影」ボタン２１−２が押下されたか否かが監視され（Ｓ１４）、「撮影」ボタン２１−２が押下されたことが検知されると（Ｓ１４の「YES」）、押下されたときに液晶モニタ２１−６に表示されていた在室者Ａの顔画像情報が一時記憶される（Ｓ１５）とともに、再度ボタン押下待ち時間計測タイマーが初期化される（Ｓ１６）。
【００４１】
ここでステップＳ１４において、「撮影」ボタン２１−２が押下されていないと判断されたときには（Ｓ１４の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ１７）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ１８の「NO」）ステップＳ１４に戻って「撮影」ボタン２１−２の押下の監視が継続して行われる。したがって、在室者Ａは、液晶モニタ２１−６に表示され、逐次変更される顔画像を見ながら、その顔画像が自ら明瞭と思うタイミングで「撮影」ボタン２１−２の押下を行うことで、その時に液晶モニタ２１−６に表示された顔画像情報が辞書データ生成（または更新）のために一時記憶される。 次に、ステップＳ１６においてボタン押下待ち時間計測タイマーが初期化された後、「登録」ボタン２１−３が押下されたか否かが監視され（Ｓ１９）、「登録」ボタン２１−３が押下されたことが検知されると（Ｓ１９の「YES」）、ステップＳ１５において一時記憶された顔画像情報が、顔認証処理を行う際に利用する辞書データ生成のための基準画像情報として、基準画像記録部２３の在室者ごとに分類されたフォルダに記録される（Ｓ２０）。
【００４２】
このとき、基準画像情報とともに当該記録時の時刻情報も記録される。なお、リモートコントローラ２０Ａは、図示しない時計手段を内蔵しており、記録時の時刻情報は、この時計手段で計時する時刻を用いる。また、既に該当フォルダに基準画像情報が記録されているときには、この記録されている基準画像情報とは異なるファイル名で新たな基準画像情報が記録される。
【００４３】
ここでステップＳ１９において、「登録」ボタン２１−３が押下されていないと判断されたときには（Ｓ１９の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ２１）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ２２の「NO」）、ステップＳ１９に戻って「登録」ボタン２１−３の押下の監視が継続して行われる。また、ステップＳ２２において次ボタン押下待ち時間が設定された上限を超えたと判断されたときには（Ｓ２２の「YES」）、ステップＳ１５において一時記憶した顔画像が削除される（Ｓ２３）。
【００４４】
上述した処理において、ステップＳ１８において次ボタン押下待ち時間が設定された上限を超えたと判断されたとき（Ｓ１８の「YES」）、またはステップＳ２２において次ボタン押下待ち時間が設定された上限を超えたと判断され（Ｓ２２の「YES」）一時記憶した顔画像が削除されたとき（Ｓ２３）には、「撮影モード」が解除され（Ｓ２４）、顔画像の撮影処理および基準画像情報の登録処理が終了する。
【００４５】
図３のシーケンス図に戻り、リモートコントローラ２０Ａにおける顔画像の撮影処理および基準画像情報の登録処理が終了後に、リモートコントローラ２０Ａが充電器３０に装着されると、基準画像送信部２４により登録された基準画像情報が認証情報管理装置６０に送信される（Ｓ２）。
【００４６】
この基準画像送信部２４における基準画像情報の認証情報管理装置６０への送信処理について、図５のフローチャートを参照して説明する。
【００４７】
基準画像情報を送信するにあたり、まず基準画像情報が登録されたリモートコントローラ２０Ａが充電器３０に装着され、充電が開始される。充電が開始されると、リモートコントローラのＬＥＤランプ２１−７が点灯する。
【００４８】
そして、一定量の充電が完了したか否かが監視され（Ｓ３１）、完了したことが検知されＬＥＤランプ２１−７が消灯すると（Ｓ３１の「YES」）基準画像記録部２３に記録されている最新の基準画像情報（NewDate）が読み出され（Ｓ３２）、この読み出された基準画像情報（NewDate）の記録時刻情報と、前回辞書データの生成のために認証情報管理装置６０に送信した基準画像情報（OldDate）の記録時刻情報とが比較される（Ｓ３３）。ここで、記録時刻情報が比較される最新の基準画像情報（NewDate）と基準画像情報（OldDate）は、すべての在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥの各々を対象とする。
【００４９】
在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥのいずれか1人でも比較された結果、読み出された基準画像情報（NewDate）の記録時刻情報が、前回送信した基準画像情報（OldDate）の記録時刻情報よりも新しく、基準画像情報が更新されていると判断されたときには（Ｓ３３の「Yes」）、読み出された基準画像情報（NewDate）が、充電器３０、ＰＬＣモデム４０からＰＬＣによりネットワーク５０を介して認証情報管理装置６０に送信される（Ｓ３４）。この送信された基準画像情報（NewDate）および当該記録時刻情報は基準画像送信部２４に保持され、次回の基準画像送信処理時に、「前回送信した基準画像情報（OldDate）および当該記録時刻情報」として用いられる。
【００５０】
ステップＳ３３において、基準画像情報が更新されていないと判断されたときには（Ｓ３３の「NO」）、基準画像情報の認証情報管理装置６０への送信は行われず処理が終了する。
【００５１】
図３のシーケンス図に戻り、基準画像情報が認証情報管理装置６０に送信されると、認証情報管理装置６０の辞書データ生成部６１において顔認証処理に利用するための辞書データの生成処理が行われる（Ｓ３）。
【００５２】
この辞書データは既存の技術を用いて生成されるものであり、基準画像情報から濃淡分布などに基づいて顔の輪郭、目、鼻、口の位置等により個人を特定するための特徴量が抽出されることにより生成される。辞書データを生成する既存の技術、例えばオープンソースとして公開されているＯｐｅｎＣＶの機械学習では、認識したい情報が含まれる画像と、含まれない画像とを準備して、これを学習することで辞書データが生成される。この技術では、認識したいものの種類や複雑さ、用意した画像の数等によって、辞書データの生成に要する処理負荷が異なる。
【００５３】
そして、辞書データ生成部６１で生成された辞書データは、辞書データ送信部６２からネットワーク５０を介してＰＬＣによりＰＬＣモデム４０、充電器３０からリモートコントローラ２０Ａに送信される（Ｓ４）。
【００５４】
リモートコントローラ２０Ａでは、認証情報管理装置６０から送信された辞書データが辞書データ取得部２５で取得され、続いて取得した辞書データを無線送信部２６から室内機１０Ａに送信する（Ｓ５）。なお、送信される辞書データは、在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥのいずれのものであるかを識別するデータが付されたものとなっている。 室内機１０Ａでは、リモートコントローラ２０Ａから送信された辞書データが認証処理部１２で取得され、その内部の不揮発性メモリ等に記録される（Ｓ６）。ここで、認証処理部１２では、在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥのそれぞれに対応した辞書データの記憶領域を備えている。新たにリモートコントローラ２０Ａから送信されてきた辞書データは、該当する在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥに対応した領域に記録される。すでに認証処理部１２において、対応する在室者の辞書データが保存されている場合は、新たな辞書データが上書きされ、いままで記憶されていなかった在室者に対応する辞書データであれば、新規に記録される。
【００５５】
また、認証処理部１２では、在室者のリモートコントローラ２０Ａの操作により、既に登録された在室者Ａ、Ｂ、Ｃ、Ｄ、またはＥの基準画像情報の削除処理が削除処理部２７で行われた後に適宜上記ステップＳ１１〜Ｓ２４において当該在室者の撮影処理が再度実行され基準画像情報の再登録が行われることにより、新たな辞書データが生成されると、この新たな辞書データで不揮発性メモリ内の当該在室者に対する辞書データが新規に登録される。
【００５６】
リモートコントローラ２０Ａ内に登録された基準画像情報が削除されるときの削除処理部２７で実行される処理について、図６のフローチャートを参照して説明する。
【００５７】
まずリモートコントローラ２０Ａにおいて、在室者により「登録」ボタン２１−３が押下されたか否かが監視される（Ｓ４１）。「登録」ボタン２１−３が押下されたことが検知されると（Ｓ４１の「YES」）、リモートコントローラ２０Ａ内のボタン押下待ち時間計測タイマーが初期化される（Ｓ４２）。
【００５８】
次に、いずれかの識別ボタン２１−５が押下されたか否かが監視され（Ｓ４３）、いずれかの識別ボタン２１−５、例えば在室者Ａの識別ボタン２１−５が押下されたことが検知されると（Ｓ４３の「YES」）「記録画像表示モード」に移行される（Ｓ４４）。
【００５９】
「記録画像表示モード」に移行されると、指定された識別ボタン２１−５に対応するフォルダの中の最新の基準画像情報が基準画像記録部２３から読み出されて液晶モニタ２１−６に表示される（Ｓ４５）とともに、再度ボタン押下待ち時間計測タイマーが初期化される（Ｓ４６）。
【００６０】
ここでステップＳ４３において、いずれかの識別ボタン２１−５が押下されていないと判断されたときには（Ｓ４３の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ４７）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ４８の「NO」）ステップＳ４３に戻っていずれかの識別ボタン２１−５の押下の監視が継続して行われる。また、ステップＳ４８において次ボタン押下待ち時間が設定された上限を超えたと判断されたときには（Ｓ４８の「YES」）、基準画像削除処理が終了する。
【００６１】
次に、ステップＳ４６においてボタン押下待ち時間計測タイマーが初期化された後、「削除」ボタン２１−４が押下されたか否かが監視され（Ｓ４９）、「削除」ボタン２１−４が押下されたことが検知されると（Ｓ４９の「YES」）、該当する基準画像情報（液晶モニタ２１−６に表示されている基準画像情報）が、基準画像記録部２３から削除される（Ｓ５０）。
【００６２】
ここでステップＳ４９において、「削除」ボタン２１−４が押下されていないと判断されたときには（Ｓ４９の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ５１）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ５２の「NO」）、ステップＳ４９に戻って「削除」ボタン２１−４の押下の監視が継続して行われる。
【００６３】
また、ステップＳ５２において次ボタン押下待ち時間が設定された上限を超えたと判断されたとき（Ｓ５２の「YES」）には、「記録画像表示モード」が解除され（Ｓ５３）て液晶モニタ２１−６に表示されていた基準画像情報が消去され、基準画像情報の削除処理が終了する。同時に、室内機１０Ａに対して、当該在室者の辞書データの削除指示がだされ、室内機１０Ａの認証処理部１２では、当該在室者の辞書データが削除される。
【００６４】
一方室内機１０Ａでは、室内撮影部１１により、２眼レンズ１１１が利用されて空調制御対象の室内が撮影される（図３中のＳ７）。
【００６５】
２眼レンズ１１１によりステレオ計測で在室者等の被写体が捉えられることにより、立体的な検出が可能になり、また在室者の位置についても精度の高い検出を行うことが可能になる。
【００６６】
室内撮影部１１において撮影された室内画像情報は認証処理部１２で取得され、この室内画像情報から在室者の人数、位置が検出されるとともに在室者の顔部分の領域が抽出され、この領域の特徴量が抽出される。
【００６７】
そして、この室内画像情報から抽出された在室者の顔部分の領域の特徴量と、ステップＳ６で記録された各在室者Ａ、Ｂ、Ｃ、Ｄ、及びＥの辞書データとの類似度が算出される。
【００６８】
そして各在室者Ａ、Ｂ、Ｃ、Ｄ、及びＥのいずれかの辞書データとの類似度が所定値以上であるときに、当該辞書データに対応する在室者であることが特定されることで、顔認証処理が行われる（Ｓ８）。
【００６９】
そして空調制御部１３により、予め記憶された在室者ごとの空調制御内容情報と、認証処理部１２で検出された在室者の人数、位置、および在室者を特定する情報とに基づいて、認証された在室者に対応する自動空調制御が実行される（Ｓ９）。
【００７０】
以上の第１実施形態によれば、在室者により簡易な撮影操作で基準画像情報を再登録することができ、さらに基準画像情報が再登録された後に在室者によりリモートコントローラが充電のために充電器に装着されると自動的に認証情報管理装置に再登録された基準画像情報が送信されて新たな辞書データが生成されるため、在室者の手間をとることなく、簡易な操作で辞書データの更新が可能になり、これにより在室者の最新の顔画像情報を用いて精度の高い顔認証処理を行うことができる。
【００７１】
また上記第１実施形態においては、基準画像情報の撮影をリモートコントローラ（携帯端末）の操作面に設けられた顔画像撮影部で行うようにしたため、顔画像を正面から撮影し易く、在室者が容易に撮影、登録操作をすることができる。
【００７２】
また上記第１実施形態においては、辞書データの生成を、空調機等の家電機器とは別個に設置された処理能力の高い認証情報管理装置で実行するように構成したため、家電機器内のＭＣＵで実行するよりも精度の高い辞書データを短時間で生成することが可能になる。
【００７３】
また、リモートコントローラと認証情報管理装置との間の基準画像情報や辞書データの送受信処理はＰＬＣを利用して実行するため、通信条件の悪い環境であっても容量の大きい情報を確実かつ高速に送受信を行うことができ、簡易で堅牢なシステムを構築することができる。
【００７４】
《第２実施形態》
〈第２実施形態による空調制御システムの構成〉
本発明の第２実施形態として、顔認証システムを利用した空調制御システム１Ｂの構成について、図７を参照して説明する。
【００７５】
本実施形態による空調制御システム１Ｂは、空調機の室内機１０Ｂと、リモートコントローラ２０Ｂと、ＰＬＣモデム４０を介して、商用電源に電力線通信（ＰＬＣ）を利用可能な状態で接続されたリモートコントローラ２０Ｂの充電器３０と、ＰＬＣを利用してインターネット等のネットワーク５０を介して充電器３０に接続された認証情報管理装置６０とを有する。
【００７６】
これらの構成において、第１実施形態における空調制御システム１Ａと同様の機能を有する部分については、詳細な説明は省略する。
【００７７】
本実施形態における室内機１０Ｂは、室内機１０Ａの室内撮影部１１および認証処理部１２に替えて在室者検出部１４が設けられている。在室者検出部１４は、赤外線等を用いた人感センサにより、在室者の人数、位置を検出する。また、空調制御部１３は、在室者検出部１４で検出された在室者の人数、位置と、リモートコントローラ２０Ｂから送信される在室者を特定する情報とに応じて、当該在室者に適切な空調制御を行う。例えば、認識された在室者が室内機１０Ａからの風が直接当たることを嫌う場合には、その在室者の方向を避けた方向に風を吹出すように風向を制御する。なお、在室者が風が直接当たることを嫌うか否かの判断は、過去の当該在室者によるリモートコントローラ２０Ｂの操作において、「風除」ボタン２１−１１の操作頻度が所定値を超えているか否かによって空調制御部１３またはリモートコントローラ２０Ｂにて判断される。
【００７８】
また、本実施形態におけるリモートコントローラ２０Ｂは、リモートコントローラ２０Ａの構成に加え、認証処理部２８が設けられている。認証処理部２８は、辞書データ取得部２５で取得された辞書データと、顔画像撮影部２２で撮影された在室者の顔画像情報とを用いて、在室者の認証処理を行うことにより当該在室者の特定を行う。本実施形態では、室内機１０Ａ本体の撮像データで認識する場合に比べて、手元にあるリモートコントローラ２０Ｂを用いて操作者の顔を撮影するため、操作者の正面顔画像を撮影できる確率が高まり、操作者の認識精度を高めることができる。
【００７９】
また、無線送信部２６は、認証処理部２８で生成された在室者を特定する情報、および入力部２１で力された室内機１０Ｂの操作に関する指示を示す信号を、室内機１０Ｂの空調制御部１３に無線通信により送信する。
【００８０】
〈第２実施形態による空調制御システムの動作〉
次に、本実施形態による空調制御システム１Ｂで実行される在室者に適した自動制御動作について、図８のシーケンス図を参照して説明する。
【００８１】
本実施形態において、図８のステップＳ６１〜Ｓ６４の処理は、第１実施形態における空調制御システム１Ａで説明した図３のステップＳ１〜ステップＳ４の処理と同様であるため、詳細な説明は省略する。
【００８２】
リモートコントローラ２０Ｂでは、認証情報管理装置６０から送信された辞書データが辞書データ取得部２５で取得されると、認証処理部２８で取得され不揮発性メモリ等に記録される（Ｓ６５）。
【００８３】
通常の運転中において、リモートコントローラ２０Ｂでは、何らかの操作がされる度にレンズ部２１−１と顔画像撮影部２２とで操作者を撮影する（Ｓ６６）。リモートコントローラ２０Ｂは、空調機を操作するための各種操作ボタン２１−８〜２１−１４とレンズ部２１−１とが同一面にあるため、リモートコントローラ２０Ｂの操作時には、丁度、操作者の顔がレンズ部２１−１に対面し、顔画像撮影部２２では操作者の顔を適切に撮影することができる。
【００８４】
認証処理部２８では、取得された辞書データと顔画像撮影部２２で撮影された在室者の顔画像情報とが用いられて、在室者の認証処理が行われることにより当該在室者の特定が行われる（Ｓ６７）。
【００８５】
このステップＳ６７により生成された在室者を特定する情報は、無線送信部２６から室内機１０Ｂに送信される（Ｓ６８）。
【００８６】
一方室内機１０Ｂでは、在室者検出部１４により、在室者の人数、位置が検出される（Ｓ６９）。
【００８７】
そして空調制御部１３により、予め記憶された在室者ごとの空調制御内容情報と、在室者検出部１４で検出された在室者の人数、位置と、リモートコントローラ２０Ｂから送信された在室者を特定する情報とに基づいて、認証された在室者に対応する自動空調制御が実行される（Ｓ７０）。
【００８８】
以上の第２実施形態によれば、第１実施形態と同様の効果が得られることに加え、室内機１０Ａには在室者の人数、位置を検出するだけの安価な赤外線センサ等を設置するのみで、在室者に適した空調制御を行うことができる。
【００８９】
また上記第１実施形態および第２実施形態においてはこのＰＬＣ通信に利用するＰＬＣモデムをリモートコントローラの充電器に接続する場合について説明したが、充電器にＰＬＣモデムを内蔵するようにしてもよい。
【００９０】
また上記第１実施形態および第２実施形態において、空調機の室内撮影部で撮影される室内画像情報を解析することにより在室者の着衣量を判断し、この判断結果を空調制御内容に反映させてさらに精度の高い空量制御を行うようにしてもよい。
【００９１】
また上記第１実施形態および第２実施形態においては、空調機において、認証された在室者に対応した空調制御を行う場合について説明したがこれには限定されず、他の家電機器、例えば照明機器において、認証された在室者に対応した照明制御を行うようにしたり、テレビ受像機において、認証された在室者の過去の操作履歴に基づくチャンネル選択制御を行うようにしてもよい。
【００９２】
照明機器において照明制御を行う場合、撮影された室内画像情報から室内の明暗状態を判断し、この判断結果を照明制御に反映させるようにしてもよい。例えば、室内が所定の明度以下になったと判断されたときに、照明機器をON状態にするように制御するようにしてもよい。
【００９３】
また上記第１実施形態および第２実施形態においては、リモートコントローラと認証情報管理装置との間で、基準画像情報および辞書データが送信される場合について説明したが、これらの情報を送信する際に、リモートコントローラおよび認証情報管理装置に電子メール送受信機能を搭載し、この電子メール送受信機能を利用して電子メールに基準画像情報または辞書データを添付ファイルとして添付して送受信するようにしてもよい。
【００９４】
このように電子メール送受信機能を利用することにより、例えば基準画像情報中の顔画像が下を向いている等により精度が低く辞書データの生成に利用できないときに、再度の撮影操作を促す指示を電子メール本文として加えることができる。
【００９５】
本発明の実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これらの新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００９６】
１Ａ、１Ｂ…空調制御システム
１０Ａ１０Ｂ…室内機
１１…室内撮影部
１２…認証処理部
１３…空調制御部
１４…在室者検出部
２０Ａ、２０Ｂ…リモートコントローラ
２１…入力部
２２…顔画像撮影部
２３…基準画像記録部
２４…基準画像送信部
２５…辞書データ取得部
２６…無線送信部
２７…削除処理部
２８…認証処理部
３０…充電器
４０…ＰＬＣモデム
５０…ネットワーク
６０…認証情報管理装置
６１…辞書データ生成部
６２…辞書データ送信部
１１１…２眼レンズ
【技術分野】
【０００１】
本発明の実施形態は、制御システム、およびこれに用いる顔認証システム、携帯端末に関する。
【背景技術】
【０００２】
従来、個人認証技術の一つとして、カメラ装置により撮影された人の顔画像を解析することにより個人の特定を行う顔認証技術がある。
【０００３】
この顔認証技術では、特定対象の人の顔画像を予め基準画像として撮影し、この基準画像から抽出された特徴量を当該人物の辞書データとして記憶しておく。そしてこの辞書データに基づいて、カメラ装置で撮影された認証対象の人の顔画像と基準画像との類似度が算出され、この類似度が所定値以上であれば当該特定対象の人であると判断される。
【０００４】
このような顔認証技術を例えば空調制御システムに組み込んで用いることにより、空調制御対象の室内の在室者を撮影して個人を特定し、この在室者に適した空調制御を行うことが可能になり、在室者にとって快適性の高い空調制御を行うことができる。
【０００５】
また、この顔認証技術では、成長期の子供やお年寄りなど顔の形状の変化が著しい人などは長期間にわたって同じ基準画像の辞書データを用いることができないため、新たに撮影した顔画像を基準画像として、適宜辞書データを更新する技術がある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−３４８７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかし、上述したように基準画像から特徴量を抽出して辞書データを生成する処理は、膨大なデータ処理を必要とする。このため、家電機器に内蔵したＭＣＵ（Micro-Control Unit）レベルで実行するには負荷が大きく、実行しようとすると画像データのレベルによっては数時間から数日かかってしまう可能性があり現実的でない。
【０００８】
そのため辞書データの生成を、家電機器とは別に設置した処理速度の速い中央サーバ等で実行することが考えられるが、撮影した顔画像の中央サーバへの送信や、中央サーバで生成された辞書データの家電機器への送信などを行う必要があり、辞書データを更新する際のユーザの操作が煩雑になるという問題があった。
【０００９】
本発明は上記事情に鑑みてなされたものであり、簡易な操作で効率良く顔認証技術に用いるための基準画像情報を更新することができ、精度の高い顔認証を行うことが可能な制御システム、およびこれに用いる顔認証システム、携帯端末を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するための本発明の制御システムは、制御システムの携帯端末は、顔画像撮影部と、基準画像送信部と、辞書データ取得部とを有する。顔画像撮影部は、在室者の顔画像を撮影する。基準画像送信部は、充電器に装着された状態で、撮影された顔画像情報を基準画像情報としてＰＬＣ（Power Line Communications：電力線通信）を利用して接続された認証情報管理装置に送信する。辞書データ取得部は、充電器に装着された状態で、顔画像情報を送信したことにより認証情報管理装置において顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、ＰＬＣを利用して取得する。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１実施形態による空調制御システムの構成を示すブロック図である。
【図２】本発明の第１実施形態および第２実施形態による携帯端末の操作面の一例を示す正面図である。
【図３】本発明の第１実施形態による空調制御システムの動作を示すシーケンス図である。
【図４】本発明の第１実施形態および第２実施形態による携帯端末において実行される撮影処理の動作を示すフローチャートである。
【図５】本発明の第１実施形態および第２実施形態による携帯端末から認証情報管理装置に基準画像情報が送信されるときの動作を示すフローチャートである。
【図６】本発明の第１実施形態および第２実施形態による携帯端末において、登録した基準画像情報を削除するときの動作を示すフローチャートである。
【図７】本発明の第２実施形態による空調制御システムの構成を示すブロック図である。
【図８】本発明の第２実施形態による空調制御システムの動作を示すシーケンス図である。
【発明を実施するための形態】
【００１２】
《第１実施形態》
〈第１実施形態による空調制御システムの構成〉
本発明の第１実施形態として、顔認証システムを利用した空調制御システム１Ａの構成について、図１を参照して説明する。
【００１３】
本実施形態による空調制御システム１Ａは、空調制御機の室内機１０Ａと、在室者の操作によりこの室内機１０Ａの動作指示を送信する携帯端末であるリモートコントローラ２０Ａと、ＰＬＣモデム４０を介して、商用電源に電力線通信（ＰＬＣ）を利用可能な状態で接続されたリモートコントローラ２０Ａの充電器３０と、ＰＬＣを利用してインターネット等のネットワーク５０を介して充電器３０に接続された認証情報管理装置６０とを有する。
【００１４】
電力線通信（ＰＬＣ）とは、商用の電力線（ＡＣ100〜120V／200〜240V）に高周波信号を重畳し、電力線を伝送路として双方向通信を行う既存の技術を利用したものである。なお、図示省略しているが、商用電源ラインとネットワーク５０との間にもＰＬＣモデムが設けられ、このＰＬＣモデムとＰＬＣモデム４０によって、リモートコントローラ２０Ａと認証情報管理装置６０とが相互に電力線通信（ＰＬＣ）を介して情報のやり取りを可能としている。 室内機１０Ａは、冷暖房を行なう通常の空調機としての機能を担う空調制御部１３の他に室内撮影部１１と、認証処理部１２とを有する。
【００１５】
室内撮影部１１は、ＣＭＯＳカメラ等であり、室内機１０Ａの上方に１０ｃｍ程度の距離を話して設置された２眼レンズ１１１を利用して、空調制御対象の室内を撮影する。
【００１６】
認証処理部１２は、室内撮影部１１で撮影された画像を用いて在室者の人数、位置を検出するとともに、室内撮影部１１で撮影された画像とリモートコントローラ２０Ａから送信される辞書データとを照合して在室者の認証処理を行うことにより当該在室者の特定を行う。
【００１７】
空調制御部１３は、認証処理部１２で検出された在室者の人数、位置、および在室者を特定する情報とに基づいて、認証された在室者に対応する自動空調制御を行うかまたは、リモートコントローラ２０Ａから送信された指示に応じた手動による空調制御を行う。
【００１８】
リモートコントローラ２０Ａは、入力部２１と、顔画像撮影部２２と、基準画像記録部２３と、基準画像送信部２４と、辞書データ取得部２５と、無線送信部２６と、削除処理部２７とを有する。
【００１９】
入力部２１はリモートコントローラ２０Ａの操作面に設けられた操作ボタンで構成され、在室者により操作されるものである。この入力部２１としての操作ボタン等を含む操作面の一例を、図２に示す。
【００２０】
図２に示すようにリモートコントローラ２０Ａの操作面には、顔画像撮影部２２による撮影に利用するレンズ部２１−１と、このレンズ部２１−１を利用して顔画像撮影部２２により撮影処理を実行させるための「撮影」ボタン２１−２と、「撮影」ボタン２１−２が押下されたことにより撮影された顔画像情報を基準画像情報として基準画像記録部２３に記録させるための「登録」ボタン２１−３と、基準画像記録部２３に記録された基準画像情報を削除するための「削除」ボタン２１−４と、これらの撮影処理、登録処理、または削除処理を実行する在室者を識別するための識別ボタン２１−５と、これらの撮影処理、登録処理、または削除処理を実行する際の対象画像や通知情報、設定情報等を表示する液晶モニタ２１−６と、当該リモートコントローラ２０Ａが充電器３０に装着され充電中であるときに点灯するＬＥＤランプ２１−７と、室内機１０への運転開始指示を入力するための「運転」ボタン２１−８と、運転停止指示を入力するための「停止」ボタン２１−９と、除湿制御指示を入力するための「除湿」ボタン２１−１０と、風除制御指示を入力するための「風除」ボタン２１−１１と、冷房制御指示を入力するための「冷房」ボタン２１−１２と、暖房制御指示を入力するための「暖房」ボタン２１−１３と、設定温度を現在よりも高くする指示を入力するための「プラス（＋）」ボタン２１−１４と、設定温度を現在よりも低くする指示を入力するための「マイナス（−）」ボタン２１−１５とが設けられている。図２の例では、在室者を識別するための識別ボタン２１−５は、家族や従業員などの在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥの５人に対して設けられている。以上の操作面において、室内機１０への運転開始指示を入力するための「運転」ボタン２１−８〜「マイナス（−）」ボタン２１−１５までが、一般的な空調機の制御に用いられ、個人の顔認証のために用いられるのが、「撮影」ボタン２１−２〜識別ボタン２１−５となっている。
【００２１】
顔画像撮影部２２は、レンズ部２１−１を利用して、当該リモートコントローラ２０Ａを操作する在室者の顔画像を撮影するカメラ装置である。
【００２２】
基準画像記録部２３は、顔画像撮影部２２で撮影された顔画像情報を取得して、顔認証処理に利用する辞書データ生成のための基準画像情報として在室者ごとに記録する。
【００２３】
以上の顔画像撮影部２２で撮影は、リモートコントローラ２０Ａが充電器３０に装着した状態でも、装着前のリモートコントローラ２０Ａ単独の状態でもいずれでも可能である。
【００２４】
リモートコントローラ２０Ａが充電器３０に装着されると、基準画像送信部２４は、基準画像記録部２３に既に記録されている基準画像情報を、ＰＬＣを利用しネットワーク５０を介して認証情報管理装置６０に送信する。なお、リモートコントローラ２０Ａが充電器３０に装着された状態で、顔画像撮影部２２で顔画像を撮影した場合は、撮影し、基準画像記録部２３に記録したばかりの基準画像情報を、ＰＬＣを利用しネットワーク５０を介して認証情報管理装置６０に送信する。
【００２５】
辞書データ取得部２５は、充電器３０に装着された状態で、基準画像送信部２４から認証情報管理装置６０に基準画像情報を送信したことにより、認証情報管理装置６０において生成された辞書データを、ネットワーク５０を介しＰＬＣを利用して取得する。
【００２６】
無線送信部２６は、辞書データ取得部２５で取得された辞書データ、および入力部２１で入力された室内機１０Ａの操作に関する指示を示す信号を、室内機１０Ａの認証処理部１２に無線により送信する。
【００２７】
削除処理部２７は、基準画像記録部２３に記録された基準画像情報のうち、指定された画像情報を削除する処理を行う。
【００２８】
認証情報管理装置６０は、辞書データ生成部６１と、辞書データ送信部６２とを有する。
【００２９】
辞書データ生成部６１は、リモートコントローラ２０Ａから送信された基準画像情報の特徴量を抽出することにより顔認証処理に利用するための辞書データを生成する。認証情報管理装置６０は、高速かつ高度な処理が可能な電子計算機が用いられ、基準画像情報から辞書データを短時間で生成することができる。
【００３０】
辞書データ送信部６２は、辞書データ生成部６１で生成された辞書データを、ネットワーク５０を介しＰＬＣを利用して充電器３０に装着されたリモートコントローラ２０Ａに送信する。
【００３１】
〈第１実施形態による空調制御システムの動作〉
次に、本実施形態による空調制御システム１Ａの動作について説明する。
【００３２】
空調制御システム１Ａの稼働が開始すると、リモートコントローラ２０Ａの入力部２１から適宜在室者により室内機１０Ａの動作を手動で制御するための指示、例えば「運転」ボタン２１−８による運転指示、「除湿」ボタン２１−１０による除湿制御指示、「風除」ボタン２１−１１による風除制御指示、「冷房」ボタン２１−１２による冷房制御指示、「暖房」ボタン２１−１３による暖房制御指示、「プラス（＋）」ボタン２１−１４による設定温度を現在よりも高くする指示、「マイナス（−）」ボタン２１−１５による設定温度を現在よりも低くする指示、「停止」ボタン２１−９による運転停止指示が操作面のボタンを用いて入力されることにより、無線通信を用いた無線送信部２６からこれらの指示が室内機１０Ａに送信され、室内機１０Ａの空調制御部１３でこの指示に対応した動作が行われる。
【００３３】
また、この在室者の手動の操作による空調制御とは別に、図３のシーケンス図に示すように、室内機１０Ａにおいて在室者を自動識別することによりこの在室者に適した自動空調制御も行われる。以下、この自動空調制御動作について説明する。
【００３４】
本実施形態においては、予め５人の在室する可能性の高い家族などの個人（以下、在室者という）Ａ、Ｂ、Ｃ、Ｄ、およびＥに適した空調制御内容情報がそれぞれ生成され、室内機１０Ａの空調制御部１３に記憶されているものとする。この空調制御内容情報は、例えば各在室者の好みの温度等である。この在室者に適した空調制御内容情報とは、各在室者がリモートコントローラ２０Ａを操作することで設定・記憶させておいて良いし、リモートコントローラ２０Ａまたは室内機１０Ａにおいて、過去の各在室者のリモートコントローラ２０Ａを用いた設定内容等を在室者別にデータ記憶させ、過去のデータを自動的に統計処理することで自動的に得るようにしても良い。
【００３５】
本実施形態においては、室内機１０Ａにおける在室者の自動識別処理として、在室者の顔の特徴に基づいて識別を行う顔認証処理が用いられる。顔認証処理において利用される、各在室者の顔画像の特徴に関する辞書データを室内機１０Ａで取得する処理について図３〜図６を用いて説明する。
【００３６】
まず、在室者にリモートコントローラ２０Ａの入力部２１が操作されることにより、在室者の所望の時点で顔画像撮影部２２において顔画像が撮影され、この撮影画像情報が顔認証処理を行う際に利用される辞書データ生成のための基準画像情報として基準画像記録部２３に登録される（図３のＳ１）。
【００３７】
顔画像撮影部２２における顔画像の撮影処理および基準画像記録部２３への基準画像情報の登録処理について、図４のフローチャートを参照して詳細に説明する。
【００３８】
まずリモートコントローラ２０Ａにおいて、在室者によりいずれかの識別ボタン２１−５が押下されたか否かが監視される（Ｓ１１）。いずれかの識別ボタン２１−５、例えば操作者である在室者Ａの識別ボタン２１−５が押下されたことが検知されると（Ｓ１１の「YES」）「撮影モード」に移行され、レンズ部２１−１によりカメラ装置である顔画像撮影部２２でとらえられた在室者Ａの顔画像が液晶モニタ２１−６に表示される（Ｓ１２）。顔画像撮影部２２では、適当な短い時間例えば１秒毎に画像を撮像し、更新する。したがって、液晶モニタ２１−６に表示される顔画像は、逐次変更されていく。
【００３９】
この識別ボタン２１−５が押下されると、リモートコントローラ２０Ａ内の、ボタン押下待ち時間が予め設定された上限、例えば３０秒を超えたか否かを計測するボタン押下待ち時間計測タイマー（図示せず）が初期化される（Ｓ１３）。
【００４０】
次に、「撮影」ボタン２１−２が押下されたか否かが監視され（Ｓ１４）、「撮影」ボタン２１−２が押下されたことが検知されると（Ｓ１４の「YES」）、押下されたときに液晶モニタ２１−６に表示されていた在室者Ａの顔画像情報が一時記憶される（Ｓ１５）とともに、再度ボタン押下待ち時間計測タイマーが初期化される（Ｓ１６）。
【００４１】
ここでステップＳ１４において、「撮影」ボタン２１−２が押下されていないと判断されたときには（Ｓ１４の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ１７）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ１８の「NO」）ステップＳ１４に戻って「撮影」ボタン２１−２の押下の監視が継続して行われる。したがって、在室者Ａは、液晶モニタ２１−６に表示され、逐次変更される顔画像を見ながら、その顔画像が自ら明瞭と思うタイミングで「撮影」ボタン２１−２の押下を行うことで、その時に液晶モニタ２１−６に表示された顔画像情報が辞書データ生成（または更新）のために一時記憶される。 次に、ステップＳ１６においてボタン押下待ち時間計測タイマーが初期化された後、「登録」ボタン２１−３が押下されたか否かが監視され（Ｓ１９）、「登録」ボタン２１−３が押下されたことが検知されると（Ｓ１９の「YES」）、ステップＳ１５において一時記憶された顔画像情報が、顔認証処理を行う際に利用する辞書データ生成のための基準画像情報として、基準画像記録部２３の在室者ごとに分類されたフォルダに記録される（Ｓ２０）。
【００４２】
このとき、基準画像情報とともに当該記録時の時刻情報も記録される。なお、リモートコントローラ２０Ａは、図示しない時計手段を内蔵しており、記録時の時刻情報は、この時計手段で計時する時刻を用いる。また、既に該当フォルダに基準画像情報が記録されているときには、この記録されている基準画像情報とは異なるファイル名で新たな基準画像情報が記録される。
【００４３】
ここでステップＳ１９において、「登録」ボタン２１−３が押下されていないと判断されたときには（Ｓ１９の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ２１）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ２２の「NO」）、ステップＳ１９に戻って「登録」ボタン２１−３の押下の監視が継続して行われる。また、ステップＳ２２において次ボタン押下待ち時間が設定された上限を超えたと判断されたときには（Ｓ２２の「YES」）、ステップＳ１５において一時記憶した顔画像が削除される（Ｓ２３）。
【００４４】
上述した処理において、ステップＳ１８において次ボタン押下待ち時間が設定された上限を超えたと判断されたとき（Ｓ１８の「YES」）、またはステップＳ２２において次ボタン押下待ち時間が設定された上限を超えたと判断され（Ｓ２２の「YES」）一時記憶した顔画像が削除されたとき（Ｓ２３）には、「撮影モード」が解除され（Ｓ２４）、顔画像の撮影処理および基準画像情報の登録処理が終了する。
【００４５】
図３のシーケンス図に戻り、リモートコントローラ２０Ａにおける顔画像の撮影処理および基準画像情報の登録処理が終了後に、リモートコントローラ２０Ａが充電器３０に装着されると、基準画像送信部２４により登録された基準画像情報が認証情報管理装置６０に送信される（Ｓ２）。
【００４６】
この基準画像送信部２４における基準画像情報の認証情報管理装置６０への送信処理について、図５のフローチャートを参照して説明する。
【００４７】
基準画像情報を送信するにあたり、まず基準画像情報が登録されたリモートコントローラ２０Ａが充電器３０に装着され、充電が開始される。充電が開始されると、リモートコントローラのＬＥＤランプ２１−７が点灯する。
【００４８】
そして、一定量の充電が完了したか否かが監視され（Ｓ３１）、完了したことが検知されＬＥＤランプ２１−７が消灯すると（Ｓ３１の「YES」）基準画像記録部２３に記録されている最新の基準画像情報（NewDate）が読み出され（Ｓ３２）、この読み出された基準画像情報（NewDate）の記録時刻情報と、前回辞書データの生成のために認証情報管理装置６０に送信した基準画像情報（OldDate）の記録時刻情報とが比較される（Ｓ３３）。ここで、記録時刻情報が比較される最新の基準画像情報（NewDate）と基準画像情報（OldDate）は、すべての在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥの各々を対象とする。
【００４９】
在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥのいずれか1人でも比較された結果、読み出された基準画像情報（NewDate）の記録時刻情報が、前回送信した基準画像情報（OldDate）の記録時刻情報よりも新しく、基準画像情報が更新されていると判断されたときには（Ｓ３３の「Yes」）、読み出された基準画像情報（NewDate）が、充電器３０、ＰＬＣモデム４０からＰＬＣによりネットワーク５０を介して認証情報管理装置６０に送信される（Ｓ３４）。この送信された基準画像情報（NewDate）および当該記録時刻情報は基準画像送信部２４に保持され、次回の基準画像送信処理時に、「前回送信した基準画像情報（OldDate）および当該記録時刻情報」として用いられる。
【００５０】
ステップＳ３３において、基準画像情報が更新されていないと判断されたときには（Ｓ３３の「NO」）、基準画像情報の認証情報管理装置６０への送信は行われず処理が終了する。
【００５１】
図３のシーケンス図に戻り、基準画像情報が認証情報管理装置６０に送信されると、認証情報管理装置６０の辞書データ生成部６１において顔認証処理に利用するための辞書データの生成処理が行われる（Ｓ３）。
【００５２】
この辞書データは既存の技術を用いて生成されるものであり、基準画像情報から濃淡分布などに基づいて顔の輪郭、目、鼻、口の位置等により個人を特定するための特徴量が抽出されることにより生成される。辞書データを生成する既存の技術、例えばオープンソースとして公開されているＯｐｅｎＣＶの機械学習では、認識したい情報が含まれる画像と、含まれない画像とを準備して、これを学習することで辞書データが生成される。この技術では、認識したいものの種類や複雑さ、用意した画像の数等によって、辞書データの生成に要する処理負荷が異なる。
【００５３】
そして、辞書データ生成部６１で生成された辞書データは、辞書データ送信部６２からネットワーク５０を介してＰＬＣによりＰＬＣモデム４０、充電器３０からリモートコントローラ２０Ａに送信される（Ｓ４）。
【００５４】
リモートコントローラ２０Ａでは、認証情報管理装置６０から送信された辞書データが辞書データ取得部２５で取得され、続いて取得した辞書データを無線送信部２６から室内機１０Ａに送信する（Ｓ５）。なお、送信される辞書データは、在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥのいずれのものであるかを識別するデータが付されたものとなっている。 室内機１０Ａでは、リモートコントローラ２０Ａから送信された辞書データが認証処理部１２で取得され、その内部の不揮発性メモリ等に記録される（Ｓ６）。ここで、認証処理部１２では、在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥのそれぞれに対応した辞書データの記憶領域を備えている。新たにリモートコントローラ２０Ａから送信されてきた辞書データは、該当する在室者Ａ、Ｂ、Ｃ、Ｄ、およびＥに対応した領域に記録される。すでに認証処理部１２において、対応する在室者の辞書データが保存されている場合は、新たな辞書データが上書きされ、いままで記憶されていなかった在室者に対応する辞書データであれば、新規に記録される。
【００５５】
また、認証処理部１２では、在室者のリモートコントローラ２０Ａの操作により、既に登録された在室者Ａ、Ｂ、Ｃ、Ｄ、またはＥの基準画像情報の削除処理が削除処理部２７で行われた後に適宜上記ステップＳ１１〜Ｓ２４において当該在室者の撮影処理が再度実行され基準画像情報の再登録が行われることにより、新たな辞書データが生成されると、この新たな辞書データで不揮発性メモリ内の当該在室者に対する辞書データが新規に登録される。
【００５６】
リモートコントローラ２０Ａ内に登録された基準画像情報が削除されるときの削除処理部２７で実行される処理について、図６のフローチャートを参照して説明する。
【００５７】
まずリモートコントローラ２０Ａにおいて、在室者により「登録」ボタン２１−３が押下されたか否かが監視される（Ｓ４１）。「登録」ボタン２１−３が押下されたことが検知されると（Ｓ４１の「YES」）、リモートコントローラ２０Ａ内のボタン押下待ち時間計測タイマーが初期化される（Ｓ４２）。
【００５８】
次に、いずれかの識別ボタン２１−５が押下されたか否かが監視され（Ｓ４３）、いずれかの識別ボタン２１−５、例えば在室者Ａの識別ボタン２１−５が押下されたことが検知されると（Ｓ４３の「YES」）「記録画像表示モード」に移行される（Ｓ４４）。
【００５９】
「記録画像表示モード」に移行されると、指定された識別ボタン２１−５に対応するフォルダの中の最新の基準画像情報が基準画像記録部２３から読み出されて液晶モニタ２１−６に表示される（Ｓ４５）とともに、再度ボタン押下待ち時間計測タイマーが初期化される（Ｓ４６）。
【００６０】
ここでステップＳ４３において、いずれかの識別ボタン２１−５が押下されていないと判断されたときには（Ｓ４３の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ４７）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ４８の「NO」）ステップＳ４３に戻っていずれかの識別ボタン２１−５の押下の監視が継続して行われる。また、ステップＳ４８において次ボタン押下待ち時間が設定された上限を超えたと判断されたときには（Ｓ４８の「YES」）、基準画像削除処理が終了する。
【００６１】
次に、ステップＳ４６においてボタン押下待ち時間計測タイマーが初期化された後、「削除」ボタン２１−４が押下されたか否かが監視され（Ｓ４９）、「削除」ボタン２１−４が押下されたことが検知されると（Ｓ４９の「YES」）、該当する基準画像情報（液晶モニタ２１−６に表示されている基準画像情報）が、基準画像記録部２３から削除される（Ｓ５０）。
【００６２】
ここでステップＳ４９において、「削除」ボタン２１−４が押下されていないと判断されたときには（Ｓ４９の「NO」）、ボタン押下待ち時間計測タイマーにおける次ボタン押下待ち時間が更新される（Ｓ５１）。更新後、この次ボタン押下待ち時間が設定された上限を超えていないときには（Ｓ５２の「NO」）、ステップＳ４９に戻って「削除」ボタン２１−４の押下の監視が継続して行われる。
【００６３】
また、ステップＳ５２において次ボタン押下待ち時間が設定された上限を超えたと判断されたとき（Ｓ５２の「YES」）には、「記録画像表示モード」が解除され（Ｓ５３）て液晶モニタ２１−６に表示されていた基準画像情報が消去され、基準画像情報の削除処理が終了する。同時に、室内機１０Ａに対して、当該在室者の辞書データの削除指示がだされ、室内機１０Ａの認証処理部１２では、当該在室者の辞書データが削除される。
【００６４】
一方室内機１０Ａでは、室内撮影部１１により、２眼レンズ１１１が利用されて空調制御対象の室内が撮影される（図３中のＳ７）。
【００６５】
２眼レンズ１１１によりステレオ計測で在室者等の被写体が捉えられることにより、立体的な検出が可能になり、また在室者の位置についても精度の高い検出を行うことが可能になる。
【００６６】
室内撮影部１１において撮影された室内画像情報は認証処理部１２で取得され、この室内画像情報から在室者の人数、位置が検出されるとともに在室者の顔部分の領域が抽出され、この領域の特徴量が抽出される。
【００６７】
そして、この室内画像情報から抽出された在室者の顔部分の領域の特徴量と、ステップＳ６で記録された各在室者Ａ、Ｂ、Ｃ、Ｄ、及びＥの辞書データとの類似度が算出される。
【００６８】
そして各在室者Ａ、Ｂ、Ｃ、Ｄ、及びＥのいずれかの辞書データとの類似度が所定値以上であるときに、当該辞書データに対応する在室者であることが特定されることで、顔認証処理が行われる（Ｓ８）。
【００６９】
そして空調制御部１３により、予め記憶された在室者ごとの空調制御内容情報と、認証処理部１２で検出された在室者の人数、位置、および在室者を特定する情報とに基づいて、認証された在室者に対応する自動空調制御が実行される（Ｓ９）。
【００７０】
以上の第１実施形態によれば、在室者により簡易な撮影操作で基準画像情報を再登録することができ、さらに基準画像情報が再登録された後に在室者によりリモートコントローラが充電のために充電器に装着されると自動的に認証情報管理装置に再登録された基準画像情報が送信されて新たな辞書データが生成されるため、在室者の手間をとることなく、簡易な操作で辞書データの更新が可能になり、これにより在室者の最新の顔画像情報を用いて精度の高い顔認証処理を行うことができる。
【００７１】
また上記第１実施形態においては、基準画像情報の撮影をリモートコントローラ（携帯端末）の操作面に設けられた顔画像撮影部で行うようにしたため、顔画像を正面から撮影し易く、在室者が容易に撮影、登録操作をすることができる。
【００７２】
また上記第１実施形態においては、辞書データの生成を、空調機等の家電機器とは別個に設置された処理能力の高い認証情報管理装置で実行するように構成したため、家電機器内のＭＣＵで実行するよりも精度の高い辞書データを短時間で生成することが可能になる。
【００７３】
また、リモートコントローラと認証情報管理装置との間の基準画像情報や辞書データの送受信処理はＰＬＣを利用して実行するため、通信条件の悪い環境であっても容量の大きい情報を確実かつ高速に送受信を行うことができ、簡易で堅牢なシステムを構築することができる。
【００７４】
《第２実施形態》
〈第２実施形態による空調制御システムの構成〉
本発明の第２実施形態として、顔認証システムを利用した空調制御システム１Ｂの構成について、図７を参照して説明する。
【００７５】
本実施形態による空調制御システム１Ｂは、空調機の室内機１０Ｂと、リモートコントローラ２０Ｂと、ＰＬＣモデム４０を介して、商用電源に電力線通信（ＰＬＣ）を利用可能な状態で接続されたリモートコントローラ２０Ｂの充電器３０と、ＰＬＣを利用してインターネット等のネットワーク５０を介して充電器３０に接続された認証情報管理装置６０とを有する。
【００７６】
これらの構成において、第１実施形態における空調制御システム１Ａと同様の機能を有する部分については、詳細な説明は省略する。
【００７７】
本実施形態における室内機１０Ｂは、室内機１０Ａの室内撮影部１１および認証処理部１２に替えて在室者検出部１４が設けられている。在室者検出部１４は、赤外線等を用いた人感センサにより、在室者の人数、位置を検出する。また、空調制御部１３は、在室者検出部１４で検出された在室者の人数、位置と、リモートコントローラ２０Ｂから送信される在室者を特定する情報とに応じて、当該在室者に適切な空調制御を行う。例えば、認識された在室者が室内機１０Ａからの風が直接当たることを嫌う場合には、その在室者の方向を避けた方向に風を吹出すように風向を制御する。なお、在室者が風が直接当たることを嫌うか否かの判断は、過去の当該在室者によるリモートコントローラ２０Ｂの操作において、「風除」ボタン２１−１１の操作頻度が所定値を超えているか否かによって空調制御部１３またはリモートコントローラ２０Ｂにて判断される。
【００７８】
また、本実施形態におけるリモートコントローラ２０Ｂは、リモートコントローラ２０Ａの構成に加え、認証処理部２８が設けられている。認証処理部２８は、辞書データ取得部２５で取得された辞書データと、顔画像撮影部２２で撮影された在室者の顔画像情報とを用いて、在室者の認証処理を行うことにより当該在室者の特定を行う。本実施形態では、室内機１０Ａ本体の撮像データで認識する場合に比べて、手元にあるリモートコントローラ２０Ｂを用いて操作者の顔を撮影するため、操作者の正面顔画像を撮影できる確率が高まり、操作者の認識精度を高めることができる。
【００７９】
また、無線送信部２６は、認証処理部２８で生成された在室者を特定する情報、および入力部２１で力された室内機１０Ｂの操作に関する指示を示す信号を、室内機１０Ｂの空調制御部１３に無線通信により送信する。
【００８０】
〈第２実施形態による空調制御システムの動作〉
次に、本実施形態による空調制御システム１Ｂで実行される在室者に適した自動制御動作について、図８のシーケンス図を参照して説明する。
【００８１】
本実施形態において、図８のステップＳ６１〜Ｓ６４の処理は、第１実施形態における空調制御システム１Ａで説明した図３のステップＳ１〜ステップＳ４の処理と同様であるため、詳細な説明は省略する。
【００８２】
リモートコントローラ２０Ｂでは、認証情報管理装置６０から送信された辞書データが辞書データ取得部２５で取得されると、認証処理部２８で取得され不揮発性メモリ等に記録される（Ｓ６５）。
【００８３】
通常の運転中において、リモートコントローラ２０Ｂでは、何らかの操作がされる度にレンズ部２１−１と顔画像撮影部２２とで操作者を撮影する（Ｓ６６）。リモートコントローラ２０Ｂは、空調機を操作するための各種操作ボタン２１−８〜２１−１４とレンズ部２１−１とが同一面にあるため、リモートコントローラ２０Ｂの操作時には、丁度、操作者の顔がレンズ部２１−１に対面し、顔画像撮影部２２では操作者の顔を適切に撮影することができる。
【００８４】
認証処理部２８では、取得された辞書データと顔画像撮影部２２で撮影された在室者の顔画像情報とが用いられて、在室者の認証処理が行われることにより当該在室者の特定が行われる（Ｓ６７）。
【００８５】
このステップＳ６７により生成された在室者を特定する情報は、無線送信部２６から室内機１０Ｂに送信される（Ｓ６８）。
【００８６】
一方室内機１０Ｂでは、在室者検出部１４により、在室者の人数、位置が検出される（Ｓ６９）。
【００８７】
そして空調制御部１３により、予め記憶された在室者ごとの空調制御内容情報と、在室者検出部１４で検出された在室者の人数、位置と、リモートコントローラ２０Ｂから送信された在室者を特定する情報とに基づいて、認証された在室者に対応する自動空調制御が実行される（Ｓ７０）。
【００８８】
以上の第２実施形態によれば、第１実施形態と同様の効果が得られることに加え、室内機１０Ａには在室者の人数、位置を検出するだけの安価な赤外線センサ等を設置するのみで、在室者に適した空調制御を行うことができる。
【００８９】
また上記第１実施形態および第２実施形態においてはこのＰＬＣ通信に利用するＰＬＣモデムをリモートコントローラの充電器に接続する場合について説明したが、充電器にＰＬＣモデムを内蔵するようにしてもよい。
【００９０】
また上記第１実施形態および第２実施形態において、空調機の室内撮影部で撮影される室内画像情報を解析することにより在室者の着衣量を判断し、この判断結果を空調制御内容に反映させてさらに精度の高い空量制御を行うようにしてもよい。
【００９１】
また上記第１実施形態および第２実施形態においては、空調機において、認証された在室者に対応した空調制御を行う場合について説明したがこれには限定されず、他の家電機器、例えば照明機器において、認証された在室者に対応した照明制御を行うようにしたり、テレビ受像機において、認証された在室者の過去の操作履歴に基づくチャンネル選択制御を行うようにしてもよい。
【００９２】
照明機器において照明制御を行う場合、撮影された室内画像情報から室内の明暗状態を判断し、この判断結果を照明制御に反映させるようにしてもよい。例えば、室内が所定の明度以下になったと判断されたときに、照明機器をON状態にするように制御するようにしてもよい。
【００９３】
また上記第１実施形態および第２実施形態においては、リモートコントローラと認証情報管理装置との間で、基準画像情報および辞書データが送信される場合について説明したが、これらの情報を送信する際に、リモートコントローラおよび認証情報管理装置に電子メール送受信機能を搭載し、この電子メール送受信機能を利用して電子メールに基準画像情報または辞書データを添付ファイルとして添付して送受信するようにしてもよい。
【００９４】
このように電子メール送受信機能を利用することにより、例えば基準画像情報中の顔画像が下を向いている等により精度が低く辞書データの生成に利用できないときに、再度の撮影操作を促す指示を電子メール本文として加えることができる。
【００９５】
本発明の実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これらの新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００９６】
１Ａ、１Ｂ…空調制御システム
１０Ａ１０Ｂ…室内機
１１…室内撮影部
１２…認証処理部
１３…空調制御部
１４…在室者検出部
２０Ａ、２０Ｂ…リモートコントローラ
２１…入力部
２２…顔画像撮影部
２３…基準画像記録部
２４…基準画像送信部
２５…辞書データ取得部
２６…無線送信部
２７…削除処理部
２８…認証処理部
３０…充電器
４０…ＰＬＣモデム
５０…ネットワーク
６０…認証情報管理装置
６１…辞書データ生成部
６２…辞書データ送信部
１１１…２眼レンズ
【特許請求の範囲】
【請求項１】
在室者により操作される携帯端末と、電源に電力線通信可能な状態で接続された前記携帯端末の充電器と、前記電力線通信を利用して前記充電器に接続された認証情報管理装置と、前記携帯端末と無線通信可能な制御機器とを備えた制御システムにおいて、
前記携帯端末は、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
を有し、
前記認証情報管理装置は、
前記携帯端末から送信された顔画像情報から前記辞書データを生成する辞書データ管理部と、
前記辞書データ管理部に記憶された辞書データを、前記電力線通信を利用して前記充電器に装着された前記携帯端末に送信する辞書データ送信部と
を有し、
前記制御機器は、
前記携帯端末の辞書データ取得部から前記辞書データを取得し、この辞書データを利用して顔認証処理を行って在室者を特定する認証処理部と、
前記在室者ごとの制御内容を予め記憶し、前記顔認証処理で特定された在室者に対応する制御を行う制御部と
を有することを特徴とする制御システム。
【請求項２】
前記制御装置は、室内撮影部をさらに有し、
前記室内撮影部は、制御対象のエリアを撮影し、
前記認証処理部は、前記室内撮影部で撮影された画像を用いて在室者の人数、位置、着衣量、および室内の明暗状態の少なくともいずれかを検出するとともに、前記室内撮影部で撮影された画像と前記携帯端末から取得した辞書データとを用いて在室者の認証処理を行って在室者を特定し、
前記制御部は、前記認証処理部で検出された在室者の人数、位置、着衣量、室内の明暗状態の少なくともいずれか、および前記在室者を特定する情報とに基づいて、特定された在室者に対応する制御を行う
ことを特徴とする請求項１に記載の制御システム。
【請求項３】
在室者により操作される携帯端末と、電源に電力線通信可能な状態で接続された前記携帯端末の充電器と、前記電力線通信を利用して前記充電器に接続された認証情報管理装置と、前記携帯端末と無線通信可能な制御機器とを備えた制御システムにおいて、
前記携帯端末は、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
前記辞書データ取得部で取得された辞書データを利用して顔認証処理を行って在室者を特定する認証処理部と、
を有し、
前記認証情報管理装置は、
前記携帯端末から送信された顔画像情報から前記辞書データを生成する辞書データ管理部と、
前記辞書データ管理部に記憶された辞書データを、前記電力線通信を利用して前記充電器に装着された前記携帯端末に送信する辞書データ送信部と
を有し、
前記制御機器は、
前記携帯端末の認証処理部から前記特定された在室者の情報を取得し、この在室者に対応する制御を行う制御部
を有することを特徴とする制御システム。
【請求項４】
前記制御装置は、在室者検出部をさらに有し、
前記在室者検出部は、在室者の人数、位置、着衣量、および室内の明暗状態の少なくともいずれかを検出し、
前記制御部は、前記在室者検出部で検出された在室者の人数、位置、着衣量、および室内の明暗状態の少なくともいずれかと、前記携帯端末で特定された在室者の情報とに基づいて、特定された在室者に対応する制御を行う
ことを特徴とする請求項３に記載の制御システム。
【請求項５】
前記携帯端末および前記認証情報管理装置は、電子メール送受信機能を搭載し、
前記携帯端末と前記認証情報管理装置との間で送受信される情報は、電子メールに添付された情報として送受信される
ことを特徴とする請求項１〜４いずれか１項に記載の制御システム。
【請求項６】
在室者により操作される携帯端末と、電源に電力線通信可能な状態で接続された前記携帯端末の充電器と、前記電力線通信を利用して前記充電器に接続された認証情報管理装置とを備えた顔認証システムにおいて、
前記携帯端末は、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
を有し、
前記認証情報管理装置は、
前記携帯端末から送信された顔画像情報から前記辞書データを生成する辞書データ管理部と、
前記辞書データ管理部に記憶された辞書データを、前記電力線通信を利用して前記充電器に装着された前記携帯端末に送信する辞書データ送信部と
を有することを特徴とする顔認証システム。
【請求項７】
在室者により操作され、認証情報管理装置に電力線通信により接続された充電器に装着可能な携帯端末において、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
を備えることを特徴とする携帯端末。
【請求項１】
在室者により操作される携帯端末と、電源に電力線通信可能な状態で接続された前記携帯端末の充電器と、前記電力線通信を利用して前記充電器に接続された認証情報管理装置と、前記携帯端末と無線通信可能な制御機器とを備えた制御システムにおいて、
前記携帯端末は、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
を有し、
前記認証情報管理装置は、
前記携帯端末から送信された顔画像情報から前記辞書データを生成する辞書データ管理部と、
前記辞書データ管理部に記憶された辞書データを、前記電力線通信を利用して前記充電器に装着された前記携帯端末に送信する辞書データ送信部と
を有し、
前記制御機器は、
前記携帯端末の辞書データ取得部から前記辞書データを取得し、この辞書データを利用して顔認証処理を行って在室者を特定する認証処理部と、
前記在室者ごとの制御内容を予め記憶し、前記顔認証処理で特定された在室者に対応する制御を行う制御部と
を有することを特徴とする制御システム。
【請求項２】
前記制御装置は、室内撮影部をさらに有し、
前記室内撮影部は、制御対象のエリアを撮影し、
前記認証処理部は、前記室内撮影部で撮影された画像を用いて在室者の人数、位置、着衣量、および室内の明暗状態の少なくともいずれかを検出するとともに、前記室内撮影部で撮影された画像と前記携帯端末から取得した辞書データとを用いて在室者の認証処理を行って在室者を特定し、
前記制御部は、前記認証処理部で検出された在室者の人数、位置、着衣量、室内の明暗状態の少なくともいずれか、および前記在室者を特定する情報とに基づいて、特定された在室者に対応する制御を行う
ことを特徴とする請求項１に記載の制御システム。
【請求項３】
在室者により操作される携帯端末と、電源に電力線通信可能な状態で接続された前記携帯端末の充電器と、前記電力線通信を利用して前記充電器に接続された認証情報管理装置と、前記携帯端末と無線通信可能な制御機器とを備えた制御システムにおいて、
前記携帯端末は、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
前記辞書データ取得部で取得された辞書データを利用して顔認証処理を行って在室者を特定する認証処理部と、
を有し、
前記認証情報管理装置は、
前記携帯端末から送信された顔画像情報から前記辞書データを生成する辞書データ管理部と、
前記辞書データ管理部に記憶された辞書データを、前記電力線通信を利用して前記充電器に装着された前記携帯端末に送信する辞書データ送信部と
を有し、
前記制御機器は、
前記携帯端末の認証処理部から前記特定された在室者の情報を取得し、この在室者に対応する制御を行う制御部
を有することを特徴とする制御システム。
【請求項４】
前記制御装置は、在室者検出部をさらに有し、
前記在室者検出部は、在室者の人数、位置、着衣量、および室内の明暗状態の少なくともいずれかを検出し、
前記制御部は、前記在室者検出部で検出された在室者の人数、位置、着衣量、および室内の明暗状態の少なくともいずれかと、前記携帯端末で特定された在室者の情報とに基づいて、特定された在室者に対応する制御を行う
ことを特徴とする請求項３に記載の制御システム。
【請求項５】
前記携帯端末および前記認証情報管理装置は、電子メール送受信機能を搭載し、
前記携帯端末と前記認証情報管理装置との間で送受信される情報は、電子メールに添付された情報として送受信される
ことを特徴とする請求項１〜４いずれか１項に記載の制御システム。
【請求項６】
在室者により操作される携帯端末と、電源に電力線通信可能な状態で接続された前記携帯端末の充電器と、前記電力線通信を利用して前記充電器に接続された認証情報管理装置とを備えた顔認証システムにおいて、
前記携帯端末は、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
を有し、
前記認証情報管理装置は、
前記携帯端末から送信された顔画像情報から前記辞書データを生成する辞書データ管理部と、
前記辞書データ管理部に記憶された辞書データを、前記電力線通信を利用して前記充電器に装着された前記携帯端末に送信する辞書データ送信部と
を有することを特徴とする顔認証システム。
【請求項７】
在室者により操作され、認証情報管理装置に電力線通信により接続された充電器に装着可能な携帯端末において、
前記在室者の顔画像を撮影する顔画像撮影部と、
前記顔画像撮影部で撮影された顔画像情報を、前記充電器に装着された状態で、前記電力線通信を利用して前記認証情報管理装置に送信する顔画像送信部と、
前記充電器に装着された状態で、前記顔画像送信部から前記認証情報管理装置に前記顔画像情報を送信したことにより、前記認証情報管理装置において前記顔画像情報の特徴量に基づいて生成された、顔認証処理に利用する辞書データを、前記電力線通信を利用して取得する辞書データ取得部と、
を備えることを特徴とする携帯端末。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１２−１６１００１（Ｐ２０１２−１６１００１Ａ）
【公開日】平成２４年８月２３日（２０１２．８．２３）
【国際特許分類】
【出願番号】特願２０１１−２０５１７（Ｐ２０１１−２０５１７）
【出願日】平成２３年２月２日（２０１１．２．２）
【出願人】（５０５４６１０７２）東芝キヤリア株式会社 (477)
【Ｆターム（参考）】
【公開日】平成２４年８月２３日（２０１２．８．２３）
【国際特許分類】
【出願日】平成２３年２月２日（２０１１．２．２）
【出願人】（５０５４６１０７２）東芝キヤリア株式会社 (477)
【Ｆターム（参考）】
[ Back to top ]