撮影装置および監視システム
【課題】 多数の監視カメラがネットワーク接続されたシステムであっても、見逃すことなく即時に不審者を検出し、監視者に提示する監視システムを提供する。
【解決手段】 撮影装置10の内部に動的に更新可能な不審者リスト１５を保持し、画像から抽出される特徴量１３に基づいて不審者検出を行う。
【解決手段】 撮影装置10の内部に動的に更新可能な不審者リスト１５を保持し、画像から抽出される特徴量１３に基づいて不審者検出を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視映像中から不審者の顔画像を検知する撮影装置及び監視システムに関する。
【背景技術】
【０００２】
監視カメラの映像から不審者を発見する際、予め登録した不審者に関するデータ（以下、不審者リストと呼ぶ）に基づいて、監視映像中の不審者を自動検知し、監視者に提示することで監視業務の効率向上を図っている。
【０００３】
例えば特許文献１には、監視映像中から検知した顔画像と不審者リストに登録された不審者顔画像とを照合することで不審者を検出し、さらに不審者リストと照合しない場合でも、不審行動を検出した際は該当顔画像を不審者リストに登録する防犯システムが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−５９２２２
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に記載された防犯システムは、監視カメラと、不審者の検出および登録を行う機能が独立したシステム構成となっており、対象とする監視カメラの台数が比較的少ない場合は問題ないが、多数の監視カメラを対象とする場合、映像を伝送する際のネットワーク負荷が大きくなり、伝送する映像フレームレートが小さくなる、伝送遅延を生じる、などの現象が発生する可能性が高い。これにより、不審者の映った監視映像を適切なタイミングで取得することができず、見逃してしまうといった問題が発生する。本発明は、前記した問題を解決すべく創案されたものであり、多数の監視カメラがネットワーク接続されたシステムであっても、見逃すことなく即時に不審者を検出し、監視者に提示する監視システムを提供することを課題とする。
【課題を解決するための手段】
【０００６】
前記課題を解決するため、本発明の監視システムにおける撮影装置は、撮影される監視画像をリアルタイムに取得する監視画像取得部と、監視映像中の顔画像を検知する顔画像検知部と、当該顔画像の特徴量を生成する特徴量生成部と、予め取得した不審者の顔画像から生成した特徴量が登録された不審者リストと、不審者リストへの更新処理やアクセス管理を行うデータ管理部と、前記特徴量生成部にて生成した特徴量と前記不審者リストに登録された特徴量との類似の度合い（以下、類似度と呼ぶ）から該当顔画像が不審者か否かを判定する不審者判定部と、ネットワークを介して監視映像の記憶や配信を行う監視サーバや他の撮影装置とデータのやり取りを行うデータ入出力部と、を備える構成とした。即ち、撮影装置の内部に動的に更新可能な不審者リストを保持し、画像から抽出される特徴量に基づいて不審者検出を行うことに最大の特徴がある。
【発明の効果】
【０００７】
本発明によれば、撮影装置において検知した全ての人物の中から即時に不審者を検出し、監視者に提示することが可能となる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施形態に係る撮影装置を備える監視システムを模式的に示す図である。
【図２】本発明の実施形態に係る監視サーバの監視画像一覧表示部を模式的に示す図である。
【図３】本発明の実施形態に係る監視サーバの不審者リスト更新部を模式的に示す図である。
【図４】本発明の実施形態に係る監視サーバの人物検索部を模式的に示す図である。
【図５】実施例で用いられる式を示す図である。
【図６】本発明の実施形態に係る撮影装置の動作例を説明するためのフローチャートである。
【図７】本発明の実施形態に係る撮影装置の動作の説明をする図である。
【図８】本発明の実施形態に係る撮影装置の動作例を説明するためのフローチャートである。
【図９】本発明の実施形態に係る撮影装置の動作の説明をする図である。
【図１０】本発明の実施形態に係る撮影装置の動作例を説明するためのフローチャートである。
【図１１】本発明の実施形態に係る撮影装置の動作の説明をする図である。
【図１２】撮影装置における不審者リストのデータ構造を示す図である。
【図１３】撮影装置における監視データのデータ構造を示す図である。
【図１４】制御データのデータ構造を示す図である。
【図１５】監視サーバにおける不審者リストのデータ構造を示す図である。
【図１６】画面データ生成部による画面例を示す図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について、適宜図面を参照しながら説明する。同様の部分には同一符号を付し、重複する説明を省略する。図１は、本発明の実施形態に係る撮影装置を備える監視システムを模式的に示す図である。
【００１０】
図１に示すように、本発明の実施形態に係る検視システム１は、所定の監視領域を撮影した監視映像をユーザ（監視者）に提示するシステムであり、複数の撮影装置１０、１０、・・・と、監視者用装置２０と、監視サーバ３０と、を備えている。複数の撮影装置１０、１０、・・・、監視者用装置２０及び監視サーバ３０は、ネットワークＮＷによって互いに通信可能に接続されている。
【００１１】
＜撮影装置１０＞
撮影装置１０は、所定の監視領域を撮影し、撮影した監視画像中の不審者を検出するための装置であり、監視画像取得部１１と、顔画像検知部１２と、特徴量生成部１３と、不審者判定部１４と、不審者リスト１５と、監視データ１７と、データ管理部１６と、データ入出力部１８と、制御部１９と、制御データ１９ａと、を備えている。
【００１２】
監視画像取得部１１は、リアルタイムに監視画像をデジタルデータとして取り込むことができるものであり、例えば、カラーＣＣＤ（Charge-Couple device）である。取り込まれた監視画像はユニークな監視画像ＩＤと関連付けられ、顔画像検知部１２及び監視データ１７に出力される。監視データ１７へは、前記監視画像及び監視画像ＩＤに加えて、該当監視画像の撮影時刻及び撮影装置ＩＤが関連付けられ、出力される。
【００１３】
顔画像検知部１２は、監視画像取得部１１から出力された監視画像中の人物顔を抽出し顔画像を生成する。即ち、監視画像内の肌色の部分の大きさ、形状等から顔の位置を認識し、認識された顔の位置から顔画像を生成する。生成した顔画像はユニークな顔ＩＤと関連付けられ、さらに前記監視画像ＩＤとも関連付けられ、特徴量生成部１３及び監視データ１７に出力される。
【００１４】
特徴量生成部１３は、顔画像検知部１２から出力された顔画像の特徴量を生成するものである。前記特徴量の算出には公知の手法が挙げられる。例えば、特許文献２では、画像データの対象画素とその周辺領域内の各画素との輝度勾配と勾配方向を求め、既定の方向毎にヒストグラム化し、そのピーク値をとる方向を対象画素の特徴量としている。前記周辺領域は、単純に対象画素の８近傍としても構わない。
【００１５】
【特許文献２】特開２００８−２５７６４９生成した特徴量は、前記監視画像ＩＤ及び前記顔ＩＤと関連付けられ、不審者判定部１４及び監視データ１７に出力される。
【００１６】
不審者判定部１４は、データ管理部１６を介して予め保持していた不審者リスト１５の特徴量を取得し、前記不審者リスト１５内の特徴量と、特徴量生成部１３から出力された特徴量との類似度を算出し、類似性の高い特徴量が存在するか否かによって対象顔画像が不審者か否かを判定する。本発明において、類似度は、二つの特徴量が類似しているほど小さくなるパラメータである。類似度の算出には公知の手法が挙げられる。例えば、特徴量に前記輝度勾配を用いた場合、二つの顔画像にて求められる特徴量間の平均２乗距離を用いることができる。ここで、二つの特徴量をｆ（ｘ１，ｙ１）、ｆ（ｘ２，ｙ２）とする時、その平均２乗距離dは図５の式に示す通り、√（ｘ２−ｘ１）２＋（ｙ２−ｙ１）２となる。そして、前記類似度が予め設定した閾値よりも小さい場合、二つの顔画像は同一人物の画像と判定する。即ち、対象顔画像は不審者であると判定する。また、ここで、閾値は、該当撮影装置において、同一人物と判定されるべき顔画像における平均類似度によって定められる。前記判定結果は、前記監視画像ＩＤ及び前記顔ＩＤと関連付けられ、データ入出力部１８に出力される。
【００１７】
データ入出力部１８は、不審者判定部１４から出力された情報に基づいて、監視データ１７から該当データを取得し、出力データを生成する。ここで、監視データ１７には、監視画像取得部１１から出力された監視画像、監視画像ＩＤ、撮影時刻、撮影装置ＩＤ、また顔画像検知部１２から出力された顔画像、顔ＩＤ、そして特徴量生成部１３から出力された特徴量が記憶されている。そして、前記出力データは、ネットワークＮＷを介して監視サーバ３０、監視者用装置２０、あるいは他の撮影装置１０に出力される。ここで、監視サーバ３０、及び監視者用装置２０への出力データは、優先度、不審者ＩＤ、そして前記監視データ１７となる。前記優先度は、不審者判定部１４から出力される情報に基づくものであり、対象顔画像が不審者であると判定した場合は優先度を高く設定する。そして、前記不審者ＩＤは、不審者を特定するために設定されたユニークな番号であり、監視システム全体で共通化され、不審者リスト１５内の各特徴量と関連付けられ保持されている。また、他の撮影装置１０への出力データは、優先度、不審者ＩＤ、撮影時刻、撮影装置ＩＤ、顔画像、特徴量となる。ただし、システムの仕様によって、前記出力データの内容は変更可能である。データ入出力部１８は、前記優先度の高い監視データについては、即時に必ず伝送するように制御される。一方、データ入出力部１８は、監視サーバ３０、監視者用装置２０、及び他の撮影装置１０からデータを受信すると、データ管理部１６へ出力する。データ管理部１６は、データ入出力部１８から出力されたデータに基づいて、不審者リスト１５のデータ更新、制御データ１９ａのデータ更新、あるいは制御部１９へ撮影時刻、撮影装置ＩＤを出力する。制御部１９は、データ管理部１６から出力された前記データに基づいて、制御データ１９ａから撮影装置１０の制御方法を取得し、それに従って制御を行う。
【００１８】
＜監視者用装置２０＞
監視者用装置２０は、例えばパーソナルコンピュータであり、入力部２１と、出力部２３と、制御部２２と、を備えている。
【００１９】
入力部２１は、マウス、キーボード等であり、監視者の操作に基づく入力データを制御部２２に出力する。
【００２０】
制御部２２は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、入出力回路等を備えて構成されており、入力部２１及び出力部２３の動作を制御したり、ネットワークＮＷを介してデータを送受信したりする。本実施形態において、制御部２２は、監視者による入力部２２の入力操作に基づいて、顔画像データや、顔画像選択データを生成してネットワークＮＷを介して監視サーバ３０、あるいは撮影装置１０に出力する。
【００２１】
出力部２３は、ディスプレイであり、監視サーバ３０から出力された監視画面、または撮影装置１０から出力された不審者に関するデータ等を表示する。
【００２２】
＜監視サーバ３０＞
監視サーバ３０は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、入出力回路等を備えて構成されており、機能部として、監視画像一覧表示部３１と、不審者リスト更新部３２と、人物検索部３３と、顔画像検知部３４と、特徴量生成部３５と、不審者リスト３６と、監視データ記憶部３７と、画面データ生成部３８と、を備えている。
【００２３】
図２は、監視画像一覧表示部３１の模式図であり、図３は、不審者リスト更新部３２の模式図、そして図４は人物検索部３３の模式図である。
【００２４】
図２に示すように、監視画像一覧表示部３１は、複数の撮影装置１０からネットワークＮＷを介して取得した最新の監視画像を一覧表示し、監視者に提示する機能であり、監視データ取得部３１ａと、提示優先度選択部３１ｂと、不審者判定部３１ｃと、を備えている。
【００２５】
監視データ取得部３１ａは、ネットワークＮＷを介して、複数の撮影装置１０から出力された監視データ１７、及び優先度、不審者ＩＤを取得し、提示優先度選択部３１ｂ、及び監視データ記憶部３７に出力する。ここで、監視データ取得部３１にて取得したデータに、顔画像情報や特徴量が含まれていない場合、あるいは新たに顔画像の特徴量を生成する場合は、顔画像検知部３４に対象監視画像を出力し、特徴量生成部３５、不審者判定部３１ｃを経て得た画像データが提示優先度選択部３１ｂに出力される。顔画像検知部３４での処理内容は、前記顔画像検知部１２と同じであり、監視画像ＩＤと、ユニークな顔ＩＤが関連付けられた顔画像が生成される。ただし、顔検知方法は同じでなくても構わない。同様に、特徴量生成部３５の処理内容は、前記特徴量生成部１３と同じであり、また、不審者判定部３１ｃの処理内容は、前記不審者判定部１４と同じである。また、監視データ記憶部３７には、過去の監視データが保持されており、その保持期間は監視業務で規定された期間、あるいは記憶領域がなくなるまでとなる。
【００２６】
提示優先度選択部３１ｂは、監視データ取得部３１ａ、あるいは不審者判定部３１ｃから出力された監視データのうち優先度、撮影時刻、撮影装置から、提示する監視画像を選択し、画面データ生成部３８に出力する。選択する際のルールは、監視者用装置２０によって異なり、監視者用装置２０から設定することができる。
【００２７】
画面データ生成部３８は、提示優先度選択部３１ｂの結果を出力する監視画像の一覧出力の一例であり、不審者の映っている監視画像以外にも、複数の撮影装置からの監視画像を表示するための画面データを生成する。図１６に、前記画面データ生成部３８の画面例を示す。図１６の上図は、監視映像一覧画面であり、各撮影装置の監視画像４１ａ〜４１ｊが表示されている。不審者を検出すると、図１６の下図のように監視画像一覧画面とは別の画面４３が表示され、不審者の映った監視画像４３ｂ、不審者の顔画像４３ａ、そして撮影時刻や撮影装置の情報が表示される。
【００２８】
図３に示すように、不審者リスト更新部３２は、監視装置１０、あるいは監視者用装置２０からネットワークＮＷを介して取得したコマンドに従って、不審者リスト３６を更新する機能であり、不審者データ取得部３２ａと、データ管理部３２ｂと、更新完了通知部３２ｃと、を備えている。ここで、図１５に、不審者リスト３６のデータ構造を示す。また、図１７に、不審者リスト１５のデータ構造を示す。不審者リスト３６は、撮影装置の不審者リスト１５のデータ項目に加え、撮影装置ＩＤが関連付けられており、各撮影装置の不審者リスト１５が纏められた形となっている。ただし、各項目の値は監視サーバ独自の値であり、不審者リスト１５と同じではない。また、不審者リスト１５のデータ全てが不審者リスト３６に含まれている必要もない。
【００２９】
不審者データ取得部３２ａは、ネットワークＮＷを介して、撮影装置１０、および監視者用装置２０から出力された処理コマンド、撮影装置ＩＤ、優先度、不審者ＩＤ、顔画像、特徴量といったデータを取得し、データ管理部３２ｂに出力する。ここで、不審者データ取得部３２ａにて取得したデータに、監視データ記憶部３７の監視画像ＩＤが含まれておらず、かつ顔画像情報や特徴量が含まれていない場合、あるいは新たに顔画像の特徴量を生成する場合は、顔画像検知部３４にも対象監視画像を出力し、特徴量生成部３５を経て顔画像、および特徴量を取得し、データ管理部３２ｂに出力される。
【００３０】
データ管理部３２ｂは、不審者データ取得部３２ａ、あるいは特徴量生成部３５から出力された処理コマンドに従って不審者リストの更新を行う。処理コマンドが「追加」あるいは「更新」であった場合は、不審者データ取得部３２ａ、あるいは特徴量生成部３５から出力された撮影装置ＩＤ、優先度、不審者ＩＤ、顔画像、特徴量といったデータを不審者リスト３６に登録あるいは更新する。また、前記処理コマンドが「削除」であった場合は、不審者データ取得部３２ａ、あるいは特徴量生成部３５から出力された不審者リスト登録ＩＤに該当するデータを不審者リストから削除する。また、不審者データ取得部３２ａから出力するデータに、監視データ記憶部３７に記憶されたデータを示す監視データ登録ＩＤが含まれている場合は、監視データ記憶部３７に記憶された特徴量を不審者リストに登録することができる。
【００３１】
更新完了通知部３２ｃ、データ管理部３２ｂから処理完了情報を取得し、不審者リスト更新の要求元である撮影装置１０、あるいは監視者用装置２０に、前記処理完了情報を送信する。
【００３２】
図４に示すように、人物検索部３３は、監視者用装置２０からネットワークＮＷを介して取得した検索クエリ顔画像の特徴量を用いた類似画像検索により、監視データ記憶部３７から前記検索クエリ顔画像と同一人物を検索する機能であり、検索クエリ取得部３３ａと、類似度算出部３３ｂと、ソート部３３ｃと、を備えている。
【００３３】
検索クエリ取得部３３ａは、ネットワークＮＷを介して、監視者用装置２０から出力された検索クエリを取得し、類似度算出部３３ｂに出力する。ここで、検索クエリが監視画像であった場合、あるいは新たに顔画像の特徴量を生成する場合は、顔画像検知部３４に対象監視画像を出力し、特徴量生成部３５を経て顔画像、および特徴量を取得し、類似度算出３３ｂに出力される。
【００３４】
類似度算出部３３ｂは、検索クエリ取得部３３ａ、あるいは特徴量生成部３５から出力された特徴量と、監視データ記憶部３７に記憶された特徴量の類似度を算出する。本発明において、類似度は、二つの特徴量が類似しているほど小さくなるパラメータである。類似度の算出には公知の手法が挙げられる。例えば、特徴量に前記輝度勾配を用いた場合、２つの顔画像にて求められる特徴量間の平均２乗距離を用いることができる。ここで、２つの特徴量をｆ（ｘ１，ｙ１）、 ｆ（ｘ２，ｙ２）とする時、その平均２乗距離dは図５の式に示す通り、√（ｘ２−ｘ１）２＋（ｙ２−ｙ１）２となる。算出された類似度は、ソート部３３ｃに出力される。ここで、検索クエリには、監視データ記憶部３７の監視データ登録ＩＤを用いることも出来る。その場合は、監視データ記憶部３７から該当する前記ＩＤの特徴量を取得し、この特徴量と監視データ記憶部３７に記憶された、他の特徴量との類似度を算出することになる。
【００３５】
ソート部３３ｃは、類似度算出部３３ｂから出力される全類似度を小さい順に並べる。即ち、検索クエリの顔画像に似ている順に、監視データ記憶部３７にある特徴量を並べる。そして、類似度の小さい順に並べた特徴量のうち、予め設定された上位件数分を画面データ生成部３８に出力する。
【００３６】
画面データ生成部３８は、人物検索部３３の結果を出力する検索結果出力部の一例であり、ソート部３３ｃからの出力結果に基づいて、監視データ記憶部３７の監視画像を表示するための検索結果表示画面データを生成する。
【００３７】
また、画面データ生成部３８は、監視データ記憶部に記憶された監視画像、あるいは監視者用装置２０に保持された顔画像に基づいて、監視者に人物検索に用いるクエリ画像を監視者用装置２０の出力部２３に表示させるためのクエリ顔画像指定用画面データを生成することもできる。生成された検索結果表示画面データ、及びクエリ顔画像指定用画面データは、ネットワークＮＷを介して監視者用装置２０に出力される。
【００３８】
続いて、本発明の実施形態に係る撮影装置１０の第一の動作例について、図６、図７を参照して説明する（適宜図１参照）。図６は、本発明の実施形態に係る撮影装置１０の動作例を説明するためのフローチャートであり、図７にて前記動作時におけるデータの流れを示している。また、図１２に、不審者リスト１５のデータ構造、図１３に、監視データ１７のデータ構造、そして図１４に、制御データ１９ａのデータ構造を示す。
【００３９】
図６、及び図７に示すように、まず、撮影装置１０の監視画像取得部１１が、監視領域を撮影し監視画像を取得し（ステップＳ６０１）、ユニークな監視画像ＩＤと共に顔画像検知部１２、及び監視データ１７に出力する。監視データ１７には、前記監視画像、監視画像ＩＤの他に撮影装置ＩＤ、撮影時刻も出力され、保持される。顔画像検知部１２は、監視画像中の顔領域を検知し切り出すことで顔画像を生成し（ステップＳ６０３）、ユニークな顔ＩＤと共に特徴量生成部１３、及び監視データ１７に出力する。ここで、監視画像から顔領域を検知しなかった場合は、その監視画像への処理は終了する。また、監視画像から複数の顔領域が検知された場合は、顔画像毎に顔ＩＤを割振り、順次特徴量生成部１３に出力する。特徴量生成部１３は、顔画像の特徴量を生成し（ステップＳ６０４）、顔ＩＤと特徴量を不審者判定部１４、及び監視データ１７に出力する。不審者判定部１４は、特徴量生成部１３から取得した特徴量と、データ管理部１６を介して取得した不審者リストに登録された特徴量との類似度を算出する（ステップＳ６０５）。そして、類似度について予め設定した閾値を比較することで、対象特徴量の優先度を決定し（ステップＳ６０６）、データ入出力部１８に出力する。データ入出力部１８は、不審者判定部１４から取得した優先度に基づいて監視サーバ３０への出力制御を行う。優先度が高い場合は、即時にネットワークＮＷを介して、監視データ１７と優先度を監視サーバ３０へ出力する（ステップＳ６０８）。優先度が高くない場合は、対象監視システムのルールに基づいて、監視サーバ３０への出力に対する可否判断を行う（ステップＳ６０９）。ルールとしては、例えば優先度が閾値より大きく、かつ一定時間内に監視サーバ３０へ出力した特徴量と類似している場合は出力しない、といったものが考えられる。また、同時に、制御部19は、図１４の制御データ19aのデータ構造に従って、撮影装置のパンやチルトの制御を行う。
【００４０】
続いて、本発明の実施形態に係る撮影装置１０の第二の動作例について、図８、図９を参照して説明する（適宜図１参照）。図８は、本発明の実施形態に係る撮影装置１０の動作例を説明するためのフローチャートであり、図９にて前記動作時におけるデータの流れを示している。
【００４１】
図８、図９に示すように、ネットワークＮＷを介して、データ入出力部１８は、監視サーバ３０、あるいは他の撮影装置１０から、不審者リスト１５に対する処理コマンドと処理データを取得し（ステップＳ８０１）、データ管理部１６に出力する。データ管理部１６は、前記処理コマンドに従って、不審者リスト１５の更新を行う。処理コマンドが「追加」であった場合、処理データは不審者ＩＤと特徴量であり、これらのデータを不審者リスト１５に追加登録する（ステップＳ８０３）。また、処理コマンドが「特徴量更新」であった場合、処理データは不審者リスト登録ＩＤと不審者ＩＤと特徴量であり、不審者リスト１５中の前記不審者リスト登録ＩＤに関連付けられている不審者ＩＤと特徴量を更新する（ステップＳ８０５）。そして、処理コマンドが「削除」であった場合、処理データは不審者リスト登録ＩＤであり、不審者リスト１５中の前記不審者登録ＩＤに該当するデータを削除する（ステップＳ８０７）。前記処理コマンドによる不審者リスト１５の変更を行ったら、その処理完了通知をデータ入出力部１８に出力する。データ入出力部１８は、前記処理完了通知を、前記処理コマンドの要求元である監視サーバ３０、あるいは他の撮影装置１０に出力する（ステップＳ８０８）。
【００４２】
続いて、本発明の実施形態に係る撮影装置１０の第三の動作例について、図１０、図１１を参照して説明する（適宜図１参照）。図１０は、本発明の実施形態に係る撮影装置１０の動作例を説明するためのフローチャートであり、図１１にて前記動作時におけるデータの流れを示している。
【００４３】
図１０、図１１に示すように、ネットワークＮＷを介して、データ入出力部１８は、監視サーバ３０、あるいは他の撮影装置１０から、制御部１９に対する処理コマンドと制御データ登録ＩＤを取得し（ステップＳ１００１）、データ管理部１６に出力する。処理コマンドが「撮影装置制御」である場合、データ管理部１６は、制御データ登録ＩＤを制御部１９へ出力する（ステップＳ１００２）。制御部１９は、制御データ登録ＩＤを制御データ１９ａに出力し、制御データ１９ａから該当する制御方法を取得する（ステップＳ１００３）。そして、制御方法に従って、撮影装置を制御する（ステップＳ１００４）。制御部１９は、前記制御方法に基づく制御が終了すると、制御完了通知をデータ管理部１６、データ入出力部１８を介して、前記処理コマンドの要求元である監視サーバ３０、あるいは他の撮影装置１０に出力する（ステップＳ１００５）。
【符号の説明】
【００４４】
１ 監視システム
１０ 撮影装置
１１ 監視画像取得部
１２ 顔画像検知部
１３ 特徴量生成部
１４ 不審者判定部
１５ 不審者リスト
１６ データ管理部
１７ 監視データ
１８ データ入出力部
１９ 制御部
１９ａ 制御データ
２０ 監視者用装置
３０ 監視サーバ
【技術分野】
【０００１】
本発明は、監視映像中から不審者の顔画像を検知する撮影装置及び監視システムに関する。
【背景技術】
【０００２】
監視カメラの映像から不審者を発見する際、予め登録した不審者に関するデータ（以下、不審者リストと呼ぶ）に基づいて、監視映像中の不審者を自動検知し、監視者に提示することで監視業務の効率向上を図っている。
【０００３】
例えば特許文献１には、監視映像中から検知した顔画像と不審者リストに登録された不審者顔画像とを照合することで不審者を検出し、さらに不審者リストと照合しない場合でも、不審行動を検出した際は該当顔画像を不審者リストに登録する防犯システムが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−５９２２２
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に記載された防犯システムは、監視カメラと、不審者の検出および登録を行う機能が独立したシステム構成となっており、対象とする監視カメラの台数が比較的少ない場合は問題ないが、多数の監視カメラを対象とする場合、映像を伝送する際のネットワーク負荷が大きくなり、伝送する映像フレームレートが小さくなる、伝送遅延を生じる、などの現象が発生する可能性が高い。これにより、不審者の映った監視映像を適切なタイミングで取得することができず、見逃してしまうといった問題が発生する。本発明は、前記した問題を解決すべく創案されたものであり、多数の監視カメラがネットワーク接続されたシステムであっても、見逃すことなく即時に不審者を検出し、監視者に提示する監視システムを提供することを課題とする。
【課題を解決するための手段】
【０００６】
前記課題を解決するため、本発明の監視システムにおける撮影装置は、撮影される監視画像をリアルタイムに取得する監視画像取得部と、監視映像中の顔画像を検知する顔画像検知部と、当該顔画像の特徴量を生成する特徴量生成部と、予め取得した不審者の顔画像から生成した特徴量が登録された不審者リストと、不審者リストへの更新処理やアクセス管理を行うデータ管理部と、前記特徴量生成部にて生成した特徴量と前記不審者リストに登録された特徴量との類似の度合い（以下、類似度と呼ぶ）から該当顔画像が不審者か否かを判定する不審者判定部と、ネットワークを介して監視映像の記憶や配信を行う監視サーバや他の撮影装置とデータのやり取りを行うデータ入出力部と、を備える構成とした。即ち、撮影装置の内部に動的に更新可能な不審者リストを保持し、画像から抽出される特徴量に基づいて不審者検出を行うことに最大の特徴がある。
【発明の効果】
【０００７】
本発明によれば、撮影装置において検知した全ての人物の中から即時に不審者を検出し、監視者に提示することが可能となる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施形態に係る撮影装置を備える監視システムを模式的に示す図である。
【図２】本発明の実施形態に係る監視サーバの監視画像一覧表示部を模式的に示す図である。
【図３】本発明の実施形態に係る監視サーバの不審者リスト更新部を模式的に示す図である。
【図４】本発明の実施形態に係る監視サーバの人物検索部を模式的に示す図である。
【図５】実施例で用いられる式を示す図である。
【図６】本発明の実施形態に係る撮影装置の動作例を説明するためのフローチャートである。
【図７】本発明の実施形態に係る撮影装置の動作の説明をする図である。
【図８】本発明の実施形態に係る撮影装置の動作例を説明するためのフローチャートである。
【図９】本発明の実施形態に係る撮影装置の動作の説明をする図である。
【図１０】本発明の実施形態に係る撮影装置の動作例を説明するためのフローチャートである。
【図１１】本発明の実施形態に係る撮影装置の動作の説明をする図である。
【図１２】撮影装置における不審者リストのデータ構造を示す図である。
【図１３】撮影装置における監視データのデータ構造を示す図である。
【図１４】制御データのデータ構造を示す図である。
【図１５】監視サーバにおける不審者リストのデータ構造を示す図である。
【図１６】画面データ生成部による画面例を示す図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について、適宜図面を参照しながら説明する。同様の部分には同一符号を付し、重複する説明を省略する。図１は、本発明の実施形態に係る撮影装置を備える監視システムを模式的に示す図である。
【００１０】
図１に示すように、本発明の実施形態に係る検視システム１は、所定の監視領域を撮影した監視映像をユーザ（監視者）に提示するシステムであり、複数の撮影装置１０、１０、・・・と、監視者用装置２０と、監視サーバ３０と、を備えている。複数の撮影装置１０、１０、・・・、監視者用装置２０及び監視サーバ３０は、ネットワークＮＷによって互いに通信可能に接続されている。
【００１１】
＜撮影装置１０＞
撮影装置１０は、所定の監視領域を撮影し、撮影した監視画像中の不審者を検出するための装置であり、監視画像取得部１１と、顔画像検知部１２と、特徴量生成部１３と、不審者判定部１４と、不審者リスト１５と、監視データ１７と、データ管理部１６と、データ入出力部１８と、制御部１９と、制御データ１９ａと、を備えている。
【００１２】
監視画像取得部１１は、リアルタイムに監視画像をデジタルデータとして取り込むことができるものであり、例えば、カラーＣＣＤ（Charge-Couple device）である。取り込まれた監視画像はユニークな監視画像ＩＤと関連付けられ、顔画像検知部１２及び監視データ１７に出力される。監視データ１７へは、前記監視画像及び監視画像ＩＤに加えて、該当監視画像の撮影時刻及び撮影装置ＩＤが関連付けられ、出力される。
【００１３】
顔画像検知部１２は、監視画像取得部１１から出力された監視画像中の人物顔を抽出し顔画像を生成する。即ち、監視画像内の肌色の部分の大きさ、形状等から顔の位置を認識し、認識された顔の位置から顔画像を生成する。生成した顔画像はユニークな顔ＩＤと関連付けられ、さらに前記監視画像ＩＤとも関連付けられ、特徴量生成部１３及び監視データ１７に出力される。
【００１４】
特徴量生成部１３は、顔画像検知部１２から出力された顔画像の特徴量を生成するものである。前記特徴量の算出には公知の手法が挙げられる。例えば、特許文献２では、画像データの対象画素とその周辺領域内の各画素との輝度勾配と勾配方向を求め、既定の方向毎にヒストグラム化し、そのピーク値をとる方向を対象画素の特徴量としている。前記周辺領域は、単純に対象画素の８近傍としても構わない。
【００１５】
【特許文献２】特開２００８−２５７６４９生成した特徴量は、前記監視画像ＩＤ及び前記顔ＩＤと関連付けられ、不審者判定部１４及び監視データ１７に出力される。
【００１６】
不審者判定部１４は、データ管理部１６を介して予め保持していた不審者リスト１５の特徴量を取得し、前記不審者リスト１５内の特徴量と、特徴量生成部１３から出力された特徴量との類似度を算出し、類似性の高い特徴量が存在するか否かによって対象顔画像が不審者か否かを判定する。本発明において、類似度は、二つの特徴量が類似しているほど小さくなるパラメータである。類似度の算出には公知の手法が挙げられる。例えば、特徴量に前記輝度勾配を用いた場合、二つの顔画像にて求められる特徴量間の平均２乗距離を用いることができる。ここで、二つの特徴量をｆ（ｘ１，ｙ１）、ｆ（ｘ２，ｙ２）とする時、その平均２乗距離dは図５の式に示す通り、√（ｘ２−ｘ１）２＋（ｙ２−ｙ１）２となる。そして、前記類似度が予め設定した閾値よりも小さい場合、二つの顔画像は同一人物の画像と判定する。即ち、対象顔画像は不審者であると判定する。また、ここで、閾値は、該当撮影装置において、同一人物と判定されるべき顔画像における平均類似度によって定められる。前記判定結果は、前記監視画像ＩＤ及び前記顔ＩＤと関連付けられ、データ入出力部１８に出力される。
【００１７】
データ入出力部１８は、不審者判定部１４から出力された情報に基づいて、監視データ１７から該当データを取得し、出力データを生成する。ここで、監視データ１７には、監視画像取得部１１から出力された監視画像、監視画像ＩＤ、撮影時刻、撮影装置ＩＤ、また顔画像検知部１２から出力された顔画像、顔ＩＤ、そして特徴量生成部１３から出力された特徴量が記憶されている。そして、前記出力データは、ネットワークＮＷを介して監視サーバ３０、監視者用装置２０、あるいは他の撮影装置１０に出力される。ここで、監視サーバ３０、及び監視者用装置２０への出力データは、優先度、不審者ＩＤ、そして前記監視データ１７となる。前記優先度は、不審者判定部１４から出力される情報に基づくものであり、対象顔画像が不審者であると判定した場合は優先度を高く設定する。そして、前記不審者ＩＤは、不審者を特定するために設定されたユニークな番号であり、監視システム全体で共通化され、不審者リスト１５内の各特徴量と関連付けられ保持されている。また、他の撮影装置１０への出力データは、優先度、不審者ＩＤ、撮影時刻、撮影装置ＩＤ、顔画像、特徴量となる。ただし、システムの仕様によって、前記出力データの内容は変更可能である。データ入出力部１８は、前記優先度の高い監視データについては、即時に必ず伝送するように制御される。一方、データ入出力部１８は、監視サーバ３０、監視者用装置２０、及び他の撮影装置１０からデータを受信すると、データ管理部１６へ出力する。データ管理部１６は、データ入出力部１８から出力されたデータに基づいて、不審者リスト１５のデータ更新、制御データ１９ａのデータ更新、あるいは制御部１９へ撮影時刻、撮影装置ＩＤを出力する。制御部１９は、データ管理部１６から出力された前記データに基づいて、制御データ１９ａから撮影装置１０の制御方法を取得し、それに従って制御を行う。
【００１８】
＜監視者用装置２０＞
監視者用装置２０は、例えばパーソナルコンピュータであり、入力部２１と、出力部２３と、制御部２２と、を備えている。
【００１９】
入力部２１は、マウス、キーボード等であり、監視者の操作に基づく入力データを制御部２２に出力する。
【００２０】
制御部２２は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、入出力回路等を備えて構成されており、入力部２１及び出力部２３の動作を制御したり、ネットワークＮＷを介してデータを送受信したりする。本実施形態において、制御部２２は、監視者による入力部２２の入力操作に基づいて、顔画像データや、顔画像選択データを生成してネットワークＮＷを介して監視サーバ３０、あるいは撮影装置１０に出力する。
【００２１】
出力部２３は、ディスプレイであり、監視サーバ３０から出力された監視画面、または撮影装置１０から出力された不審者に関するデータ等を表示する。
【００２２】
＜監視サーバ３０＞
監視サーバ３０は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ＨＤＤ（Hard Disk Drive）、入出力回路等を備えて構成されており、機能部として、監視画像一覧表示部３１と、不審者リスト更新部３２と、人物検索部３３と、顔画像検知部３４と、特徴量生成部３５と、不審者リスト３６と、監視データ記憶部３７と、画面データ生成部３８と、を備えている。
【００２３】
図２は、監視画像一覧表示部３１の模式図であり、図３は、不審者リスト更新部３２の模式図、そして図４は人物検索部３３の模式図である。
【００２４】
図２に示すように、監視画像一覧表示部３１は、複数の撮影装置１０からネットワークＮＷを介して取得した最新の監視画像を一覧表示し、監視者に提示する機能であり、監視データ取得部３１ａと、提示優先度選択部３１ｂと、不審者判定部３１ｃと、を備えている。
【００２５】
監視データ取得部３１ａは、ネットワークＮＷを介して、複数の撮影装置１０から出力された監視データ１７、及び優先度、不審者ＩＤを取得し、提示優先度選択部３１ｂ、及び監視データ記憶部３７に出力する。ここで、監視データ取得部３１にて取得したデータに、顔画像情報や特徴量が含まれていない場合、あるいは新たに顔画像の特徴量を生成する場合は、顔画像検知部３４に対象監視画像を出力し、特徴量生成部３５、不審者判定部３１ｃを経て得た画像データが提示優先度選択部３１ｂに出力される。顔画像検知部３４での処理内容は、前記顔画像検知部１２と同じであり、監視画像ＩＤと、ユニークな顔ＩＤが関連付けられた顔画像が生成される。ただし、顔検知方法は同じでなくても構わない。同様に、特徴量生成部３５の処理内容は、前記特徴量生成部１３と同じであり、また、不審者判定部３１ｃの処理内容は、前記不審者判定部１４と同じである。また、監視データ記憶部３７には、過去の監視データが保持されており、その保持期間は監視業務で規定された期間、あるいは記憶領域がなくなるまでとなる。
【００２６】
提示優先度選択部３１ｂは、監視データ取得部３１ａ、あるいは不審者判定部３１ｃから出力された監視データのうち優先度、撮影時刻、撮影装置から、提示する監視画像を選択し、画面データ生成部３８に出力する。選択する際のルールは、監視者用装置２０によって異なり、監視者用装置２０から設定することができる。
【００２７】
画面データ生成部３８は、提示優先度選択部３１ｂの結果を出力する監視画像の一覧出力の一例であり、不審者の映っている監視画像以外にも、複数の撮影装置からの監視画像を表示するための画面データを生成する。図１６に、前記画面データ生成部３８の画面例を示す。図１６の上図は、監視映像一覧画面であり、各撮影装置の監視画像４１ａ〜４１ｊが表示されている。不審者を検出すると、図１６の下図のように監視画像一覧画面とは別の画面４３が表示され、不審者の映った監視画像４３ｂ、不審者の顔画像４３ａ、そして撮影時刻や撮影装置の情報が表示される。
【００２８】
図３に示すように、不審者リスト更新部３２は、監視装置１０、あるいは監視者用装置２０からネットワークＮＷを介して取得したコマンドに従って、不審者リスト３６を更新する機能であり、不審者データ取得部３２ａと、データ管理部３２ｂと、更新完了通知部３２ｃと、を備えている。ここで、図１５に、不審者リスト３６のデータ構造を示す。また、図１７に、不審者リスト１５のデータ構造を示す。不審者リスト３６は、撮影装置の不審者リスト１５のデータ項目に加え、撮影装置ＩＤが関連付けられており、各撮影装置の不審者リスト１５が纏められた形となっている。ただし、各項目の値は監視サーバ独自の値であり、不審者リスト１５と同じではない。また、不審者リスト１５のデータ全てが不審者リスト３６に含まれている必要もない。
【００２９】
不審者データ取得部３２ａは、ネットワークＮＷを介して、撮影装置１０、および監視者用装置２０から出力された処理コマンド、撮影装置ＩＤ、優先度、不審者ＩＤ、顔画像、特徴量といったデータを取得し、データ管理部３２ｂに出力する。ここで、不審者データ取得部３２ａにて取得したデータに、監視データ記憶部３７の監視画像ＩＤが含まれておらず、かつ顔画像情報や特徴量が含まれていない場合、あるいは新たに顔画像の特徴量を生成する場合は、顔画像検知部３４にも対象監視画像を出力し、特徴量生成部３５を経て顔画像、および特徴量を取得し、データ管理部３２ｂに出力される。
【００３０】
データ管理部３２ｂは、不審者データ取得部３２ａ、あるいは特徴量生成部３５から出力された処理コマンドに従って不審者リストの更新を行う。処理コマンドが「追加」あるいは「更新」であった場合は、不審者データ取得部３２ａ、あるいは特徴量生成部３５から出力された撮影装置ＩＤ、優先度、不審者ＩＤ、顔画像、特徴量といったデータを不審者リスト３６に登録あるいは更新する。また、前記処理コマンドが「削除」であった場合は、不審者データ取得部３２ａ、あるいは特徴量生成部３５から出力された不審者リスト登録ＩＤに該当するデータを不審者リストから削除する。また、不審者データ取得部３２ａから出力するデータに、監視データ記憶部３７に記憶されたデータを示す監視データ登録ＩＤが含まれている場合は、監視データ記憶部３７に記憶された特徴量を不審者リストに登録することができる。
【００３１】
更新完了通知部３２ｃ、データ管理部３２ｂから処理完了情報を取得し、不審者リスト更新の要求元である撮影装置１０、あるいは監視者用装置２０に、前記処理完了情報を送信する。
【００３２】
図４に示すように、人物検索部３３は、監視者用装置２０からネットワークＮＷを介して取得した検索クエリ顔画像の特徴量を用いた類似画像検索により、監視データ記憶部３７から前記検索クエリ顔画像と同一人物を検索する機能であり、検索クエリ取得部３３ａと、類似度算出部３３ｂと、ソート部３３ｃと、を備えている。
【００３３】
検索クエリ取得部３３ａは、ネットワークＮＷを介して、監視者用装置２０から出力された検索クエリを取得し、類似度算出部３３ｂに出力する。ここで、検索クエリが監視画像であった場合、あるいは新たに顔画像の特徴量を生成する場合は、顔画像検知部３４に対象監視画像を出力し、特徴量生成部３５を経て顔画像、および特徴量を取得し、類似度算出３３ｂに出力される。
【００３４】
類似度算出部３３ｂは、検索クエリ取得部３３ａ、あるいは特徴量生成部３５から出力された特徴量と、監視データ記憶部３７に記憶された特徴量の類似度を算出する。本発明において、類似度は、二つの特徴量が類似しているほど小さくなるパラメータである。類似度の算出には公知の手法が挙げられる。例えば、特徴量に前記輝度勾配を用いた場合、２つの顔画像にて求められる特徴量間の平均２乗距離を用いることができる。ここで、２つの特徴量をｆ（ｘ１，ｙ１）、 ｆ（ｘ２，ｙ２）とする時、その平均２乗距離dは図５の式に示す通り、√（ｘ２−ｘ１）２＋（ｙ２−ｙ１）２となる。算出された類似度は、ソート部３３ｃに出力される。ここで、検索クエリには、監視データ記憶部３７の監視データ登録ＩＤを用いることも出来る。その場合は、監視データ記憶部３７から該当する前記ＩＤの特徴量を取得し、この特徴量と監視データ記憶部３７に記憶された、他の特徴量との類似度を算出することになる。
【００３５】
ソート部３３ｃは、類似度算出部３３ｂから出力される全類似度を小さい順に並べる。即ち、検索クエリの顔画像に似ている順に、監視データ記憶部３７にある特徴量を並べる。そして、類似度の小さい順に並べた特徴量のうち、予め設定された上位件数分を画面データ生成部３８に出力する。
【００３６】
画面データ生成部３８は、人物検索部３３の結果を出力する検索結果出力部の一例であり、ソート部３３ｃからの出力結果に基づいて、監視データ記憶部３７の監視画像を表示するための検索結果表示画面データを生成する。
【００３７】
また、画面データ生成部３８は、監視データ記憶部に記憶された監視画像、あるいは監視者用装置２０に保持された顔画像に基づいて、監視者に人物検索に用いるクエリ画像を監視者用装置２０の出力部２３に表示させるためのクエリ顔画像指定用画面データを生成することもできる。生成された検索結果表示画面データ、及びクエリ顔画像指定用画面データは、ネットワークＮＷを介して監視者用装置２０に出力される。
【００３８】
続いて、本発明の実施形態に係る撮影装置１０の第一の動作例について、図６、図７を参照して説明する（適宜図１参照）。図６は、本発明の実施形態に係る撮影装置１０の動作例を説明するためのフローチャートであり、図７にて前記動作時におけるデータの流れを示している。また、図１２に、不審者リスト１５のデータ構造、図１３に、監視データ１７のデータ構造、そして図１４に、制御データ１９ａのデータ構造を示す。
【００３９】
図６、及び図７に示すように、まず、撮影装置１０の監視画像取得部１１が、監視領域を撮影し監視画像を取得し（ステップＳ６０１）、ユニークな監視画像ＩＤと共に顔画像検知部１２、及び監視データ１７に出力する。監視データ１７には、前記監視画像、監視画像ＩＤの他に撮影装置ＩＤ、撮影時刻も出力され、保持される。顔画像検知部１２は、監視画像中の顔領域を検知し切り出すことで顔画像を生成し（ステップＳ６０３）、ユニークな顔ＩＤと共に特徴量生成部１３、及び監視データ１７に出力する。ここで、監視画像から顔領域を検知しなかった場合は、その監視画像への処理は終了する。また、監視画像から複数の顔領域が検知された場合は、顔画像毎に顔ＩＤを割振り、順次特徴量生成部１３に出力する。特徴量生成部１３は、顔画像の特徴量を生成し（ステップＳ６０４）、顔ＩＤと特徴量を不審者判定部１４、及び監視データ１７に出力する。不審者判定部１４は、特徴量生成部１３から取得した特徴量と、データ管理部１６を介して取得した不審者リストに登録された特徴量との類似度を算出する（ステップＳ６０５）。そして、類似度について予め設定した閾値を比較することで、対象特徴量の優先度を決定し（ステップＳ６０６）、データ入出力部１８に出力する。データ入出力部１８は、不審者判定部１４から取得した優先度に基づいて監視サーバ３０への出力制御を行う。優先度が高い場合は、即時にネットワークＮＷを介して、監視データ１７と優先度を監視サーバ３０へ出力する（ステップＳ６０８）。優先度が高くない場合は、対象監視システムのルールに基づいて、監視サーバ３０への出力に対する可否判断を行う（ステップＳ６０９）。ルールとしては、例えば優先度が閾値より大きく、かつ一定時間内に監視サーバ３０へ出力した特徴量と類似している場合は出力しない、といったものが考えられる。また、同時に、制御部19は、図１４の制御データ19aのデータ構造に従って、撮影装置のパンやチルトの制御を行う。
【００４０】
続いて、本発明の実施形態に係る撮影装置１０の第二の動作例について、図８、図９を参照して説明する（適宜図１参照）。図８は、本発明の実施形態に係る撮影装置１０の動作例を説明するためのフローチャートであり、図９にて前記動作時におけるデータの流れを示している。
【００４１】
図８、図９に示すように、ネットワークＮＷを介して、データ入出力部１８は、監視サーバ３０、あるいは他の撮影装置１０から、不審者リスト１５に対する処理コマンドと処理データを取得し（ステップＳ８０１）、データ管理部１６に出力する。データ管理部１６は、前記処理コマンドに従って、不審者リスト１５の更新を行う。処理コマンドが「追加」であった場合、処理データは不審者ＩＤと特徴量であり、これらのデータを不審者リスト１５に追加登録する（ステップＳ８０３）。また、処理コマンドが「特徴量更新」であった場合、処理データは不審者リスト登録ＩＤと不審者ＩＤと特徴量であり、不審者リスト１５中の前記不審者リスト登録ＩＤに関連付けられている不審者ＩＤと特徴量を更新する（ステップＳ８０５）。そして、処理コマンドが「削除」であった場合、処理データは不審者リスト登録ＩＤであり、不審者リスト１５中の前記不審者登録ＩＤに該当するデータを削除する（ステップＳ８０７）。前記処理コマンドによる不審者リスト１５の変更を行ったら、その処理完了通知をデータ入出力部１８に出力する。データ入出力部１８は、前記処理完了通知を、前記処理コマンドの要求元である監視サーバ３０、あるいは他の撮影装置１０に出力する（ステップＳ８０８）。
【００４２】
続いて、本発明の実施形態に係る撮影装置１０の第三の動作例について、図１０、図１１を参照して説明する（適宜図１参照）。図１０は、本発明の実施形態に係る撮影装置１０の動作例を説明するためのフローチャートであり、図１１にて前記動作時におけるデータの流れを示している。
【００４３】
図１０、図１１に示すように、ネットワークＮＷを介して、データ入出力部１８は、監視サーバ３０、あるいは他の撮影装置１０から、制御部１９に対する処理コマンドと制御データ登録ＩＤを取得し（ステップＳ１００１）、データ管理部１６に出力する。処理コマンドが「撮影装置制御」である場合、データ管理部１６は、制御データ登録ＩＤを制御部１９へ出力する（ステップＳ１００２）。制御部１９は、制御データ登録ＩＤを制御データ１９ａに出力し、制御データ１９ａから該当する制御方法を取得する（ステップＳ１００３）。そして、制御方法に従って、撮影装置を制御する（ステップＳ１００４）。制御部１９は、前記制御方法に基づく制御が終了すると、制御完了通知をデータ管理部１６、データ入出力部１８を介して、前記処理コマンドの要求元である監視サーバ３０、あるいは他の撮影装置１０に出力する（ステップＳ１００５）。
【符号の説明】
【００４４】
１ 監視システム
１０ 撮影装置
１１ 監視画像取得部
１２ 顔画像検知部
１３ 特徴量生成部
１４ 不審者判定部
１５ 不審者リスト
１６ データ管理部
１７ 監視データ
１８ データ入出力部
１９ 制御部
１９ａ 制御データ
２０ 監視者用装置
３０ 監視サーバ
【特許請求の範囲】
【請求項１】
監視領域を撮影し監視画像を取得する監視画像取得部と、
監視画像中の顔画像を検知する顔画像検知部と、
当該顔画像の特徴量を生成する特徴量生成部と、
不審者の顔画像の特徴量を記憶する不審者リストと、
前記監視画像中の特徴量と前記不審者リスト中の特徴量の類似の度合いを算出し、前記監視画像中の顔画像が不審者か否かを判定する不審者判定部と、
を備えることを特徴とする撮影装置。
【請求項２】
更に、外部装置から送信されるデータを取得するデータ入力部を備え、
前記送信されるデータは、前記不審者リストの更新情報であることを特徴とする請求項１記載の撮影装置。
【請求項３】
前記更新情報は、前記不審者リストへのデータの追加、特徴量の更新、データの削除の少なくともいずれかであることを特徴とする請求項２記載の撮影装置。
【請求項４】
更に、前記撮影装置のパン及びチルト制御を行う制御部と、
前記制御部への動作指示手順を記憶した制御データと、を備え、
外部装置からの指示により、前記制御データ内の動作指示手順を選択することによって前記撮影装置を制御することを特徴とする請求項１記載の撮影装置。
【請求項５】
更に、前記不審者判定部は、前記類似の度合いから優先度を決定する手段と、
監視サーバへデータを送信するためのデータ出力部を備え、
前記優先度に基づいて、前記監視サーバへの送信順序を制御することを特徴とする請求項１記載の撮影装置。
【請求項６】
監視領域を撮影し監視画像を取得する監視画像取得部と、
監視画像中の顔画像を検知する顔画像検知部と、
当該顔画像の特徴量を生成する特徴量生成部と、
不審者の顔画像の特徴量を記憶する不審者リストと、
前記監視画像中の特徴量と前記不審者リスト中の特徴量の類似の度合いを算出し、前記監視画像中の顔画像が不審者か否かを判定する不審者判定部と、
外部装置から送信されるデータを取得するデータ入力部と
を備えた撮影装置と、
不審者リストを記憶したデータベースと、
前記不審者リストを更新する不審者リスト更新部と、
を備えた監視サーバとを有し、
前記監視サーバの更新された不審者情報を、前記撮影装置の前記データ入力部に送信し、前記撮影装置内の前記不審者リストを更新することを特徴とする監視システム。
【請求項１】
監視領域を撮影し監視画像を取得する監視画像取得部と、
監視画像中の顔画像を検知する顔画像検知部と、
当該顔画像の特徴量を生成する特徴量生成部と、
不審者の顔画像の特徴量を記憶する不審者リストと、
前記監視画像中の特徴量と前記不審者リスト中の特徴量の類似の度合いを算出し、前記監視画像中の顔画像が不審者か否かを判定する不審者判定部と、
を備えることを特徴とする撮影装置。
【請求項２】
更に、外部装置から送信されるデータを取得するデータ入力部を備え、
前記送信されるデータは、前記不審者リストの更新情報であることを特徴とする請求項１記載の撮影装置。
【請求項３】
前記更新情報は、前記不審者リストへのデータの追加、特徴量の更新、データの削除の少なくともいずれかであることを特徴とする請求項２記載の撮影装置。
【請求項４】
更に、前記撮影装置のパン及びチルト制御を行う制御部と、
前記制御部への動作指示手順を記憶した制御データと、を備え、
外部装置からの指示により、前記制御データ内の動作指示手順を選択することによって前記撮影装置を制御することを特徴とする請求項１記載の撮影装置。
【請求項５】
更に、前記不審者判定部は、前記類似の度合いから優先度を決定する手段と、
監視サーバへデータを送信するためのデータ出力部を備え、
前記優先度に基づいて、前記監視サーバへの送信順序を制御することを特徴とする請求項１記載の撮影装置。
【請求項６】
監視領域を撮影し監視画像を取得する監視画像取得部と、
監視画像中の顔画像を検知する顔画像検知部と、
当該顔画像の特徴量を生成する特徴量生成部と、
不審者の顔画像の特徴量を記憶する不審者リストと、
前記監視画像中の特徴量と前記不審者リスト中の特徴量の類似の度合いを算出し、前記監視画像中の顔画像が不審者か否かを判定する不審者判定部と、
外部装置から送信されるデータを取得するデータ入力部と
を備えた撮影装置と、
不審者リストを記憶したデータベースと、
前記不審者リストを更新する不審者リスト更新部と、
を備えた監視サーバとを有し、
前記監視サーバの更新された不審者情報を、前記撮影装置の前記データ入力部に送信し、前記撮影装置内の前記不審者リストを更新することを特徴とする監視システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【公開番号】特開２０１１−６００５８（Ｐ２０１１−６００５８Ａ）
【公開日】平成２３年３月２４日（２０１１．３．２４）
【国際特許分類】
【出願番号】特願２００９−２０９９５６（Ｐ２００９−２０９９５６）
【出願日】平成２１年９月１１日（２００９．９．１１）
【出願人】（０００００１１２２）株式会社日立国際電気 (5,007)
【Ｆターム（参考）】
【公開日】平成２３年３月２４日（２０１１．３．２４）
【国際特許分類】
【出願日】平成２１年９月１１日（２００９．９．１１）
【出願人】（０００００１１２２）株式会社日立国際電気 (5,007)
【Ｆターム（参考）】
[ Back to top ]