監視記録装置
【課題】 従来のものよりも容易に監視対象を特定できる映像を記録することができる監視記録装置を提供すること。
【解決手段】 監視記録装置１０は、映像信号を所定時間間隔で入力するフレーム制御部１１と、映像信号のデータを圧縮伸張する圧縮伸張部１２と、圧縮された映像データを記録するストレージ１４と、監視領域に出入りする人物の映像を含む領域を検出する動領域検出部１５と、検出された領域から人物の顔映像の領域を抽出する人領域抽出部１６と、抽出された顔映像のうちベストショットを判別するベストショット判別部１７と、ベストショットのデータに付加するヘッダ情報を生成するＰｉｎＰ用ヘッダ生成部１８と、ヘッダ情報に基づいてベストショットのデータと圧縮伸張部１２からの映像データとを合成するＰｉｎＰ合成部２０と、合成された映像を描画処理する描画部２１とを備える。
【解決手段】 監視記録装置１０は、映像信号を所定時間間隔で入力するフレーム制御部１１と、映像信号のデータを圧縮伸張する圧縮伸張部１２と、圧縮された映像データを記録するストレージ１４と、監視領域に出入りする人物の映像を含む領域を検出する動領域検出部１５と、検出された領域から人物の顔映像の領域を抽出する人領域抽出部１６と、抽出された顔映像のうちベストショットを判別するベストショット判別部１７と、ベストショットのデータに付加するヘッダ情報を生成するＰｉｎＰ用ヘッダ生成部１８と、ヘッダ情報に基づいてベストショットのデータと圧縮伸張部１２からの映像データとを合成するＰｉｎＰ合成部２０と、合成された映像を描画処理する描画部２１とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば監視領域に出入りする人物の映像データを記録する監視記録装置に関する。
【背景技術】
【０００２】
従来の監視記録装置は、カメラから送信された映像信号を磁気テープに間欠的に記録する磁気ヘッドと、磁気ヘッドが装着されたヘッドドラムと、記録終了時毎にヘッドドラムの回転数を強制的に引き上げる強制加速手段とを備え、間欠記録のインターバルが短いときでも、強制加速手段がヘッドドラムの回転数を規定回転数に迅速に復帰させることにより、間欠記録を正常に継続して監視記録のデータ量の低減化を図ることができるようになっている（例えば、特許文献１参照。）。
【特許文献１】特開平７−１３１７５６号公報（第４頁、第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来の監視記録装置では、監視記録のデータ量の低減化のため、カメラから送信された映像信号を所定の時間間隔で間引いて間欠的に磁気テープに記録する構成なので、監視者が監視対象を容易に特定できる映像データ、例えば侵入者の顔が最も鮮明に撮影された顔映像データが、間引かれた映像信号に含まれて監視記録データから欠落することがあり、侵入者の特定が困難となるという問題があった。
【０００４】
本発明は、このような問題を解決するためになされたものであり、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる監視記録装置を提供するものである。
【課題を解決するための手段】
【０００５】
本発明の監視記録装置は、監視領域の映像から動き物体の映像をフレーム毎に検出する動き物体検出手段と、前記動き物体の映像のうち所定の基準に最も適合する映像を最良映像として判別する最良映像判別手段と、前記最良映像のデータを記録する記録手段とを備えた構成を有している。
【０００６】
この構成により、本発明の監視記録装置は、監視領域の映像データを間欠的に記録する場合でも、監視領域内の動き物体の最良映像データを記録できるので、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる。
【０００７】
また、本発明の監視記録装置は、前記記録手段は、前記最良映像が撮影された時刻情報を含む撮影情報のデータを前記最良映像のデータに関連付けて記録する構成を有している。
【０００８】
この構成により、本発明の監視記録装置は、最良映像のデータに関連付けて撮影情報を記録するので、最良映像に係る動き物体の記録を撮影情報に基づいて検索することができる。
【０００９】
さらに、本発明の監視記録装置は、前記監視領域の映像信号を所定時間間隔で間欠的に出力する映像信号出力手段と、間欠的に出力された前記映像信号に基づく映像と前記最良映像とを合成する映像合成手段とを備えた構成を有している。
【００１０】
この構成により、本発明の監視記録装置は、監視領域の映像データを間欠的に記録しながら、監視領域の映像と監視領域内の動き物体の最良映像とを合成することができるので、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる。
【００１１】
さらに、本発明の監視記録装置は、前記映像を前記フレーム毎に複数の分割領域に分割する領域分割手段を備え、前記領域分割手段は、前記動き物体が検出された第１分割領域と、この第１分割領域とは異なる第２分割領域とに前記映像を分割し、前記映像合成手段は、前記第１分割領域に最も近い第２分割領域の映像と前記最良映像とを合成する構成を有している。
【００１２】
この構成により、本発明の監視記録装置は、動き物体が検出された領域に最も近い分割領域に最良映像が合成されるので、監視領域の映像に複数の人物像が含まれている場合でも、各人物の顔の最良映像をわかりやすく表示することができる。
【００１３】
さらに、本発明の監視記録装置は、最良映像抽出手段によって抽出された前記最良映像のデータと一致するデータを前記保存手段によって保存されたデータから検索する検索手段を備え、前記映像合成手段は、前記最良映像のデータと一致するデータが検索されたとき、前記間欠的に出力された映像信号に基づく映像と、前記最良映像と、前記最良映像が撮影された時刻情報を含む撮影情報とを合成する構成を有している。
【００１４】
この構成により、本発明の監視記録装置は、映像合成手段が、監視領域の映像と、動き物体の最良映像と、撮影情報とを合成するので、監視領域内の人物が過去に撮影されたときの撮影情報を把握することができる。
【００１５】
さらに、本発明の監視記録装置は、前記動き物体の映像は人物の映像を含み、前記最良映像は前記人物の顔映像を含み、前記所定の基準は前記顔映像のサイズ、コントラスト、輝度、ガンマ値及び顔方向情報のうちの少なくとも１つの基準を含む構成を有している。
【００１６】
この構成により、本発明の監視記録装置は、監視領域の映像データを間欠的に記録しながら監視領域内の人物の顔映像の最良映像をサイズ、コントラスト、輝度、ガンマ値及び顔方向情報のうちの少なくとも１つの基準で記録することができるので、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる。
【発明の効果】
【００１７】
本発明は、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができるという効果を有する監視記録装置を提供することができるものである。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の実施の形態について図面を用いて説明する。
【００１９】
（第１の実施の形態）
まず、本発明の第１の実施の形態の監視記録装置の構成について説明する。なお、本発明の監視記録装置が所定の監視領域に出入りする人物の映像データを記録する例を挙げて説明する。
【００２０】
図１に示すように、本実施の形態の監視記録装置１０は、監視領域を撮影するカメラ３０から送信される映像信号を所定時間間隔で入力するフレーム制御部１１と、映像信号のデータを圧縮伸張する圧縮伸張部１２と、ストレージ１４の動作を制御する記録制御部１３と、圧縮された映像データを記録するストレージ１４と、カメラ３０から送信される映像信号に基づく映像から監視領域に出入りする人物の映像を含む領域を検出する動領域検出部１５と、検出された領域から人物の顔映像の領域を抽出する人領域抽出部１６と、抽出された顔映像のうち最も鮮明に撮像された顔映像（以下「ベストショット」という。）を判別するベストショット判別部１７と、ベストショットのデータに付加するヘッダ情報を生成するＰｉｎＰ（Ｐｉｃｔｕｒｅ ｉｎ Ｐｉｃｔｕｒｅ）用ヘッダ生成部１８と、ヘッダ情報を処理するＰｉｎＰ用ヘッダ処理部１９と、ヘッダ情報に基づいてベストショットのデータと圧縮伸張部１２からの映像データとを合成するＰｉｎＰ合成部２０と、合成された映像をモニタ４０に描画する処理を行う描画部２１とを備えている。
【００２１】
なお、以下の説明において、カメラ３０は、ＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｔａｎｄａｒｄｓ Ｃｏｍｍｉｔｔｅｅ）方式の映像信号を出力するアナログカメラとし、水平方向７２０画素、垂直方向２４０画素の映像データを毎秒６０フレーム出力するものとする。また、水平方向Ｈ画素、垂直方向Ｖ画素の構成をＨ×Ｖ画素と表記し、水平方向の座標及び垂直方向の座標をそれぞれＸ座標及びＹ座標とする。
【００２２】
フレーム制御部１１は、カメラ３０から毎秒６０フレーム出力される映像データを入力して所定のフレーム数の映像データを間引きし、例えば毎秒１フレームの映像データを一定の時間間隔で出力するようになっている。なお、フレーム制御部１１は、本発明の映像信号出力手段を構成している。
【００２３】
圧縮伸張部１２は、フレーム制御部１１から出力される映像データを所定の圧縮方式で圧縮して記録制御部１３に出力するようになっている。また、圧縮伸張部１２は、ストレージ１４に記録された圧縮映像データを記録制御部１３経由で入力し、所定の伸張方式で伸張してＰｉｎＰ合成部２０に出力するようになっている。ここで、所定の圧縮方式及び伸張方式としては、例えばＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式等が用いられる。
【００２４】
記録制御部１３は、ストレージ１４に対する映像データの記録処理及び読み出し処理を制御するようになっている。
【００２５】
ストレージ１４は、例えばハードディスクドライブ装置によって構成され、圧縮伸張部１２によって圧縮された圧縮映像データを記録するようになっている。なお、ストレージ１４は、本発明の記録手段を構成している。
【００２６】
動領域検出部１５は、例えば周知の差分法や動きベクトル法等によって、カメラ３０から毎秒６０フレーム出力される映像データに基づく映像から人物の映像を検出し、監視領域の座標に対して人物の映像が含まれる領域（以下「動き領域」という。）の座標情報を取得するようになっている。具体的には、監視領域の座標は、Ｘ座標０〜７１９及びＹ座標０〜２３９で表され、動き領域は、例えば監視領域の中の矩形領域として表される。
【００２７】
また、動領域検出部１５は、カメラ３０から出力される７２０×２４０画素の映像データを例えば１８０×６０画素からなる１６個のブロックに分割し、人物の映像が検出されている期間において、人物の映像が存在するブロック（以下「動ブロック」という。）と、人物の映像が存在しないブロック（以下「静ブロック」という。）とを検出するようになっている。なお、動領域検出部１５は、本発明の動き物体検出手段及び領域分割手段を構成している。
【００２８】
人領域抽出部１６は、動領域検出部１５によって検出された動き領域の映像から、例えば楕円ハフアルゴリズムによって人物の顔映像の領域を抽出し、顔映像の領域を例えば矩形領域として表すためのＸ座標及びＹ座標を算出するようになっている。この顔映像の領域を矩形領域として表す場合の座標情報は、顔領域の開始位置のＸ座標及びＹ座標と、顔領域の終了位置のＸ座標及びＹ座標とで定義される。
【００２９】
ベストショット判別部１７は、人領域抽出部１６によって抽出された人物の顔映像のデータや、顔映像を判別するために予め定められた判別基準のデータ等を記憶するメモリ（図示省略）を備え、判別基準のデータに基づき、抽出された顔映像の中からベストショットを判別するようになっている。なお、ベストショット判別部１７は、本発明の最良映像抽出手段を構成している。
【００３０】
例えば、ベストショット判別部１７は、ある人物が監視領域に進入してから退出するまでの期間において、現在のフレームで取得されたその人物の顔映像と、その人物の顔映像が検出されたフレームから現在のフレームの１つ前までのフレーム（以下「過去のフレーム」という。）で取得されたその人物の顔映像とを、例えば顔映像のサイズ、コントラスト、輝度、ガンマ値及び顔方向情報等を判別基準として、フレーム毎に順次比較し、最も鮮明に撮像された顔映像をベストショットとして決定するようになっている。ここで、鮮明に撮像された顔映像とは、顔映像の色や形などが鮮やかであり、明確であることに加えて、人物を特定しやすいものをいう。
【００３１】
具体的には、例えば、顔映像のコントラスト、顔映像サイズ及び顔方向情報の３つの要素をベストショットの判別基準とした場合、抽出された顔映像を要素毎にスコア化し、スコア化したものに所定の重み係数を乗じて顔映像の総合スコアを算出する。現在のフレームから抽出した顔映像と、過去のフレームで抽出した顔映像とを総合スコアでフレーム毎に順次比較し、総合スコアが最も大きいものをベストショットとする。例えば、横向きの顔映像よりも正面向きの顔映像のスコアを大きく設定したり、顔映像サイズが大きいほどスコアを大きくしたりすることによって、ベストショットを判定することができる。
【００３２】
ＰｉｎＰ用ヘッダ生成部１８は、図２に示されたＰｉｎＰ用ヘッダ情報を生成し、このＰｉｎＰ用ヘッダを顔映像のデータに付加して記録制御部１３に出力するようになっている。図２に示されたＰｉｎＰ用ヘッダ情報は、顔映像のデータ識別のためのインデックスと、ベストショットが撮像されたベストショット撮像時刻と、顔映像の領域を表すＸ座標及びＹ座標と、人物が存在しない静ブロックを示すデータとで構成されている。
【００３３】
ＰｉｎＰ用ヘッダ処理部１９は、ＰｉｎＰ用ヘッダ情報から、現在のフレームにおける顔映像の領域に最も近い静ブロックの位置を決定するようになっている。
【００３４】
ＰｉｎＰ合成部２０は、圧縮伸張部１２によって伸張された映像信号のデータを入力し、ＰｉｎＰ用ヘッダ処理部１９によって決定された静ブロックに含まれる監視領域の映像と、ベストショットとを合成するようになっている。なお、ＰｉｎＰ合成部２０は、本発明の映像合成手段を構成している。
【００３５】
描画部２１は、ＰｉｎＰ合成部２０によって合成された合成影像の映像信号をモニタ４０に出力するようになっている。
【００３６】
次に、本実施の形態の監視記録装置１０の動作について説明する。
【００３７】
最初に、監視領域内に人物が現れた場合、監視領域の映像データがベストショットデータと共に記録されるステップについて、図３を用いて説明する。
【００３８】
まず、フレーム制御部１１及び動領域検出部１５によって、７２０×２４０画素で構成されたＮＴＳＣ方式の映像データが入力される（ステップＳ１１）。次いで、フレーム制御部１１によって、毎秒６０フレームの映像データから、毎秒１フレームの映像データが出力される（ステップＳ１２）。したがって、フレーム制御部１１は、６０フレーム分の映像データから５９フレーム分の映像データを毎秒間引き、１秒間隔で１フレーム分の映像データを出力する。
【００３９】
さらに、圧縮伸張部１２によって、例えばＭＰＥＧ方式に基づいて映像データが圧縮され（ステップＳ１３）、圧縮映像データとして記録制御部１３に出力された後、圧縮映像データがストレージ１４に記録される（ステップＳ１４）。
【００４０】
一方、動領域検出部１５によって、１フレーム分の映像データが入力され（ステップＳ２１）、差分法や動きベクトル法等を用いて動き領域が検出される（ステップＳ２２）。例えば、差分法を用いる場合、動領域検出部１５は、現在のフレームの映像と、現在のフレームの１つ前のフレームの映像との差分を求めて、監視領域の映像から動き領域を検出する。この動き領域は、監視領域のＸ座標０〜７１９及びＹ座標０〜２３９における矩形領域として表され、矩形領域の座標のデータが動領域検出部１５によって取得される。
【００４１】
さらに、動領域検出部１５によって、監視領域の映像が所定数のブロックに分割され、動き物体が検出されている期間において、動き物体が存在する動ブロックと、動き物体が存在しない静ブロックとが検出される（ステップＳ２３）。
【００４２】
具体的には、例えば図４に示すように、７２０×２４０画素で構成された監視領域の映像が、Ｘ座標方向及びＹ座標方向にそれぞれ４分割され、１８０×６０画素の１６個のブロックに分割され、ステップＳ２２において検出された動き領域の座標データから、動ブロック及び静ブロックが検出される。
【００４３】
引き続き、人領域抽出部１６によって、例えば楕円ハフアルゴリズムに基づいて動き物体の映像から顔映像の領域が抽出される（ステップＳ２４）。この顔映像の領域は、監視領域のＸ座標０〜７１９及びＹ座標０〜２３９における矩形領域の座標データとして表される。
【００４４】
次いで、ベストショット判別部１７によって、人領域抽出部１６が現在のフレームから抽出した顔映像と、過去のフレームで抽出した顔映像とが所定の判別基準に基づいて比較され、現在のフレームから抽出された顔映像がベストショットか否かが判断される（ステップＳ２５）。
【００４５】
例えば、顔映像のコントラスト、顔映像サイズ及び顔方向情報の３つの要素をベストショットの判別基準とした場合、抽出された顔映像を要素毎にスコア化し、スコア化したものに所定の重み係数を乗じて顔映像の総合スコアを算出する。現在のフレームから抽出した顔映像と、過去のフレームで抽出した顔映像とを総合スコアでフレーム毎に順次比較し、総合スコアが最も大きいものをベストショットとする。
【００４６】
ステップＳ２５において、現在のフレームから抽出された顔映像がベストショットと判断されなかった場合は、ステップＳ２１に戻り、次フレームの映像データが入力され、ベストショットの判別が実行される。
【００４７】
一方、ステップＳ２５において、ベストショットと判断された場合は、ＰｉｎＰ用ヘッダ生成部１８によって、図２に示すようなＰｉｎＰ用ヘッダ情報が生成される（ステップＳ２６）。
【００４８】
図２に示すように、インデックスのデータとしては、顔映像や監視領域等を識別するための予め定められた管理データが生成される。また、ベストショットの撮影情報のデータとしては、顔映像が撮影された西暦年月及び時刻のデータを表したベストショット撮像時刻のデータが生成される。また、顔領域の座標データとしては、Ｘ座標は０〜７１９、Ｙ座標は０〜２３９の数値で表された矩形領域のデータが生成される。また、動きがない静ブロックの領域データとしては、Ｘ座標方向及びＹ座標方向におけるＸブロック及びＹブロックがそれぞれ０〜３の数値で表されたデータが生成される。なお、撮影情報のデータは、顔映像が撮影された時刻情報のみに限定されるものではない。
【００４９】
さらに、ＰｉｎＰ用ヘッダ生成部１８によって、ＰｉｎＰ用ヘッダ情報がベストショットデータに付加される（ステップＳ２７）。
【００５０】
そして、記録制御部１３によって、ＰｉｎＰ用ヘッダ情報が付加されたベストショットデータがストレージ１４に記録される（ステップＳ２８）。
【００５１】
次に、監視領域の映像データをベストショットデータと共に表示するステップについて、図５を用いて説明する。
【００５２】
まず、記録制御部１３によって、ストレージ１４から圧縮映像データが読み出され（ステップＳ３１）、ＰｉｎＰ用ヘッダ情報に基づいて圧縮映像データの映像が撮影された時刻のベストショットデータが読み出される（ステップＳ３２）。ここで、圧縮映像データは圧縮伸張部１２に送信され、ベストショットデータはＰｉｎＰ用ヘッダ処理部１９に送信される。
【００５３】
次いで、圧縮伸張部１２によって、圧縮映像データが例えばＭＰＥＧ方式により伸張される（ステップＳ３３）。
【００５４】
さらに、ＰｉｎＰ用ヘッダ処理部１９によって、ＰｉｎＰ用ヘッダ情報に含まれる顔映像のＸ座標及びＹ座標のデータと、静ブロックの位置情報とから顔映像の位置に最も近い静ブロックの位置が算出され、この静ブロックがベストショットを合成するブロックとして決定される（ステップＳ３４）。
【００５５】
引き続き、ＰｉｎＰ合成部２０によって、ステップＳ３４において決定された静ブロックの映像とベストショットとが合成される（ステップＳ３５）。
【００５６】
そして、描画部２１によって、合成映像がモニタ４０に描画され、例えば図４に示すような合成映像がモニタ４０に表示される（ステップＳ３６）。図４は、監視領域としてのホールに出入りした女性及び男性のベストショットが、それぞれ、Ｘブロック０及びＹブロック１の位置と、Ｘブロック２及びＹブロック０の位置とに表示されている。
【００５７】
以上のように、本実施の形態の監視記録装置１０によれば、ベストショット判別部１７は、人領域抽出部１６が抽出した顔映像のうち判別基準に最も適合するベストショットを判別し、ストレージ１４は、間欠的に撮像された監視領域の映像データと、撮影情報が付加されたベストショットとを記録する構成としたので、監視領域の映像にベストショットを埋め込んで鮮明に撮影された人物の顔映像を表示することができ、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に人物を特定できる映像データを記録することができる。
【００５８】
なお、前述の実施の形態において、７２０×２４０画素で構成された監視領域の映像を１８０×６０画素の１６個のブロックに分割して人物の映像が存在するブロックを検出する例に挙げて説明したが、本発明はこれに限定されるものではない。
【００５９】
また、前述の実施の形態において、監視対象として人物を例に挙げて説明したが、本発明はこれに限定されるものではなく、例えば駐車場に出入りする車両や、監視領域に出入りする動物等を監視する構成としても同様の効果が得られる。
【００６０】
（第２の実施の形態）
まず、本発明の第２の実施の形態の監視記録装置の構成について説明する。
【００６１】
図６に示すように、本実施の形態の監視記録装置５０は、監視領域を撮影するカメラ３０から送信される映像信号を所定時間間隔で入力するフレーム制御部５１と、映像信号のデータを圧縮伸張する圧縮伸張部５２と、ストレージ５４の動作を制御する記録制御部５３と、圧縮された映像データを記録するストレージ５４と、カメラ３０から送信される映像信号に基づく映像から監視領域に出入りする人物の映像を含む領域を検出する動領域検出部５５と、検出された領域から人物の顔映像の領域を抽出する人領域抽出部５６と、抽出された顔映像のうちベストショットを判別するベストショット判別部５７と、ベストショットのデータに付加するヘッダ情報を生成するＰｉｎＰ用ヘッダ生成部５８と、ヘッダ情報を処理するＰｉｎＰ用ヘッダ処理部５９と、ヘッダ情報に基づいてベストショットのデータと圧縮伸張部５２からの映像データとを合成するＰｉｎＰ合成部６０と、合成された映像をモニタ４０に描画する処理を行う描画部６１と、ストレージ５４に記録された顔映像データを検索する顔検索部６２とを備えている。
【００６２】
なお、本実施の形態の監視記録装置５０は、本発明の第１の実施の形態の監視記録装置１０（図１参照）に顔検索部６２を追加した構成なので、顔検索部６２以外の構成の説明は省略する。
【００６３】
顔検索部６２は、ＰｉｎＰ用ヘッダ処理部５９から送信された顔映像データに係る人物の映像データをストレージ５４から検索するようになっている。なお、顔検索部６２は、本発明の検索手段を構成している。
【００６４】
次に、本実施の形態の監視記録装置５０の動作について説明する。なお、監視領域の映像データがベストショットデータと共に記録されるステップは、図３に示されたステップと同様であるので説明を省略し、監視領域の映像データをベストショットデータと共に表示するステップについて、図７を用いて説明する。
【００６５】
まず、記録制御部５３によって、ストレージ５４から圧縮映像データが読み出され（ステップＳ４１）、ＰｉｎＰ用ヘッダ情報に基づいて圧縮映像データの映像が撮影された時刻のベストショットデータが読み出される（ステップＳ４２）。ここで、圧縮映像データは圧縮伸張部５２に送信され、ベストショットデータはＰｉｎＰ用ヘッダ処理部５９に送信される。
【００６６】
次いで、圧縮伸張部５２によって、圧縮映像データが例えばＭＰＥＧ方式により伸張される（ステップＳ４３）。
【００６７】
さらに、ＰｉｎＰ用ヘッダ処理部５９によって、ＰｉｎＰ用ヘッダ情報に含まれる顔映像のＸ座標及びＹ座標のデータと、静ブロックの位置情報とから顔映像の位置に最も近い静ブロックの位置が算出され、この静ブロックがベストショットを合成するブロックとして決定される（ステップＳ４４）。
【００６８】
また、ＰｉｎＰ用ヘッダ処理部５９によって、ステップＳ４２において読み出されたベストショットデータと、このベストショットデータよりも過去に記録されたベストショットデータの検索を指示する検索指示信号とが顔検索部６２に出力される（ステップＳ４５）。
【００６９】
次いで、顔検索部６２によって、検索指示されたベストショットデータが検索される（ステップＳ４６）。ここで、顔検索部６２は、周知の顔認証アルゴリズムを用いて、検索指示されたベストショットデータに係る人物と同一人物のベストショットデータ（以下「同一人物ベストショットデータ」という。）をストレージ５４から検索する。
【００７０】
そして、顔検索部６２によって、同一人物ベストショットデータがストレージ５４にあるか否かが判断される（ステップＳ４７）。同一人物ベストショットデータがストレージ５４にあると判断された場合は、顔検索部６２によって、同一人物ベストショットデータに付加された撮影情報のデータがＰｉｎＰ合成部６０に送信される（ステップＳ４８）。
【００７１】
引き続き、ＰｉｎＰ合成部６０によって、ステップＳ４４において決定された静ブロックの映像と、ベストショットデータと、ステップＳ４８において取得された撮影情報データとが合成される（ステップＳ４９）。
【００７２】
一方、ステップＳ４７において、同一人物ベストショットデータがストレージ５４にあると判断されなかった場合は、ＰｉｎＰ合成部６０によって、ステップＳ４４において決定された静ブロックの映像と、ベストショットデータとが合成される（ステップＳ５０）。
【００７３】
そして、描画部６１によって、合成映像がモニタ４０に描画され、同一人物ベストショットデータがストレージ５４にある場合は、例えば図８に示すような合成映像がモニタ４０に表示される（ステップＳ５１）。図８は、監視領域としてのホールに出入りする人物の撮像例を示したものであり、ホールに出入りした女性及び男性のベストショットが、それぞれ、Ｘブロック０及びＹブロック５の位置と、Ｘブロック２及びＹブロック０の位置とに表示され、男性のベストショットと共にこの男性が以前撮影された時刻情報が表示されている。なお、ベストショットと共に表示される撮影情報は、時刻情報に限定されるものではなく、例えば管理領域に出入りした回数のデータと時刻情報とを表示する構成としてもよい。
【００７４】
以上のように、本実施の形態の監視記録装置５０によれば、顔検索部６２は、同一人物ベストショットデータをストレージ５４から検索し、同一人物ベストショットデータがストレージ５４にある場合は、ＰｉｎＰ合成部６０は、間欠的に撮像された監視領域の静ブロックの映像と、ベストショットデータと、過去に撮影された同一人物の撮影情報データとを合成する構成としたので、監視領域の映像にベストショットと、そのベストショットに係る人物の過去の撮影情報とを表示することができる。
【００７５】
また、従来の監視記録装置では、間引いた影像信号を記録する構成なので、検索に有効な映像データが取得できない可能性があったが、本実施の形態の監視記録装置５０では、ストレージ５４が間引き処理とは無関係にベストショットを記録する構成としたので、検索に有効な映像データを従来のものよりも多く記録することができ、検索の精度を向上させることができる。
【産業上の利用可能性】
【００７６】
以上のように、本発明に係る監視記録装置は、従来のものよりも容易に監視対象を特定できる映像データを記録することができるという効果を有し、監視領域に出入りする人物の行動を記録する監視記録装置等として有用である。
【図面の簡単な説明】
【００７７】
【図１】本発明の第１の実施の形態の監視記録装置のブロック図
【図２】本発明の第１の実施の形態の監視記録装置に係るＰｉｎＰ用ヘッダの構成例を示す図
【図３】本発明の第１の実施の形態の監視記録装置において、映像データを記録する各ステップのフロー図
【図４】本発明の第１の実施の形態の監視記録装置に係る監視領域の表示映像の一例を示す図
【図５】本発明の第１の実施の形態の監視記録装置において、映像データを読み出す各ステップのフロー図
【図６】本発明の第２の実施の形態の監視記録装置のブロック図
【図７】本発明の第２の実施の形態の監視記録装置において、映像データを読み出す各ステップのフロー図
【図８】本発明の第２の実施の形態の監視記録装置に係る監視領域の表示映像の一例を示す図
【符号の説明】
【００７８】
１０、５０ 監視記録装置
１１、５１ フレーム制御部（映像信号出力手段）
１２、５２ 圧縮伸張部
１３、５３ 記録制御部
１４、５４ ストレージ（記録手段）
１５、５５ 動領域検出部（動き物体検出手段、領域分割手段）
１６、５６ 人領域抽出部
１７、５７ ベストショット判別部（最良映像抽出手段）
１８、５８ ＰｉｎＰ用ヘッダ生成部
１９、５９ ＰｉｎＰ用ヘッダ処理部
２０、６０ ＰｉｎＰ合成部（映像合成手段）
２１、６１ 描画部
３０ カメラ
４０ モニタ
６２ 顔検索部（検索手段）
【技術分野】
【０００１】
本発明は、例えば監視領域に出入りする人物の映像データを記録する監視記録装置に関する。
【背景技術】
【０００２】
従来の監視記録装置は、カメラから送信された映像信号を磁気テープに間欠的に記録する磁気ヘッドと、磁気ヘッドが装着されたヘッドドラムと、記録終了時毎にヘッドドラムの回転数を強制的に引き上げる強制加速手段とを備え、間欠記録のインターバルが短いときでも、強制加速手段がヘッドドラムの回転数を規定回転数に迅速に復帰させることにより、間欠記録を正常に継続して監視記録のデータ量の低減化を図ることができるようになっている（例えば、特許文献１参照。）。
【特許文献１】特開平７−１３１７５６号公報（第４頁、第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来の監視記録装置では、監視記録のデータ量の低減化のため、カメラから送信された映像信号を所定の時間間隔で間引いて間欠的に磁気テープに記録する構成なので、監視者が監視対象を容易に特定できる映像データ、例えば侵入者の顔が最も鮮明に撮影された顔映像データが、間引かれた映像信号に含まれて監視記録データから欠落することがあり、侵入者の特定が困難となるという問題があった。
【０００４】
本発明は、このような問題を解決するためになされたものであり、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる監視記録装置を提供するものである。
【課題を解決するための手段】
【０００５】
本発明の監視記録装置は、監視領域の映像から動き物体の映像をフレーム毎に検出する動き物体検出手段と、前記動き物体の映像のうち所定の基準に最も適合する映像を最良映像として判別する最良映像判別手段と、前記最良映像のデータを記録する記録手段とを備えた構成を有している。
【０００６】
この構成により、本発明の監視記録装置は、監視領域の映像データを間欠的に記録する場合でも、監視領域内の動き物体の最良映像データを記録できるので、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる。
【０００７】
また、本発明の監視記録装置は、前記記録手段は、前記最良映像が撮影された時刻情報を含む撮影情報のデータを前記最良映像のデータに関連付けて記録する構成を有している。
【０００８】
この構成により、本発明の監視記録装置は、最良映像のデータに関連付けて撮影情報を記録するので、最良映像に係る動き物体の記録を撮影情報に基づいて検索することができる。
【０００９】
さらに、本発明の監視記録装置は、前記監視領域の映像信号を所定時間間隔で間欠的に出力する映像信号出力手段と、間欠的に出力された前記映像信号に基づく映像と前記最良映像とを合成する映像合成手段とを備えた構成を有している。
【００１０】
この構成により、本発明の監視記録装置は、監視領域の映像データを間欠的に記録しながら、監視領域の映像と監視領域内の動き物体の最良映像とを合成することができるので、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる。
【００１１】
さらに、本発明の監視記録装置は、前記映像を前記フレーム毎に複数の分割領域に分割する領域分割手段を備え、前記領域分割手段は、前記動き物体が検出された第１分割領域と、この第１分割領域とは異なる第２分割領域とに前記映像を分割し、前記映像合成手段は、前記第１分割領域に最も近い第２分割領域の映像と前記最良映像とを合成する構成を有している。
【００１２】
この構成により、本発明の監視記録装置は、動き物体が検出された領域に最も近い分割領域に最良映像が合成されるので、監視領域の映像に複数の人物像が含まれている場合でも、各人物の顔の最良映像をわかりやすく表示することができる。
【００１３】
さらに、本発明の監視記録装置は、最良映像抽出手段によって抽出された前記最良映像のデータと一致するデータを前記保存手段によって保存されたデータから検索する検索手段を備え、前記映像合成手段は、前記最良映像のデータと一致するデータが検索されたとき、前記間欠的に出力された映像信号に基づく映像と、前記最良映像と、前記最良映像が撮影された時刻情報を含む撮影情報とを合成する構成を有している。
【００１４】
この構成により、本発明の監視記録装置は、映像合成手段が、監視領域の映像と、動き物体の最良映像と、撮影情報とを合成するので、監視領域内の人物が過去に撮影されたときの撮影情報を把握することができる。
【００１５】
さらに、本発明の監視記録装置は、前記動き物体の映像は人物の映像を含み、前記最良映像は前記人物の顔映像を含み、前記所定の基準は前記顔映像のサイズ、コントラスト、輝度、ガンマ値及び顔方向情報のうちの少なくとも１つの基準を含む構成を有している。
【００１６】
この構成により、本発明の監視記録装置は、監視領域の映像データを間欠的に記録しながら監視領域内の人物の顔映像の最良映像をサイズ、コントラスト、輝度、ガンマ値及び顔方向情報のうちの少なくとも１つの基準で記録することができるので、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができる。
【発明の効果】
【００１７】
本発明は、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に監視対象を特定できる映像データを記録することができるという効果を有する監視記録装置を提供することができるものである。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の実施の形態について図面を用いて説明する。
【００１９】
（第１の実施の形態）
まず、本発明の第１の実施の形態の監視記録装置の構成について説明する。なお、本発明の監視記録装置が所定の監視領域に出入りする人物の映像データを記録する例を挙げて説明する。
【００２０】
図１に示すように、本実施の形態の監視記録装置１０は、監視領域を撮影するカメラ３０から送信される映像信号を所定時間間隔で入力するフレーム制御部１１と、映像信号のデータを圧縮伸張する圧縮伸張部１２と、ストレージ１４の動作を制御する記録制御部１３と、圧縮された映像データを記録するストレージ１４と、カメラ３０から送信される映像信号に基づく映像から監視領域に出入りする人物の映像を含む領域を検出する動領域検出部１５と、検出された領域から人物の顔映像の領域を抽出する人領域抽出部１６と、抽出された顔映像のうち最も鮮明に撮像された顔映像（以下「ベストショット」という。）を判別するベストショット判別部１７と、ベストショットのデータに付加するヘッダ情報を生成するＰｉｎＰ（Ｐｉｃｔｕｒｅ ｉｎ Ｐｉｃｔｕｒｅ）用ヘッダ生成部１８と、ヘッダ情報を処理するＰｉｎＰ用ヘッダ処理部１９と、ヘッダ情報に基づいてベストショットのデータと圧縮伸張部１２からの映像データとを合成するＰｉｎＰ合成部２０と、合成された映像をモニタ４０に描画する処理を行う描画部２１とを備えている。
【００２１】
なお、以下の説明において、カメラ３０は、ＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｔａｎｄａｒｄｓ Ｃｏｍｍｉｔｔｅｅ）方式の映像信号を出力するアナログカメラとし、水平方向７２０画素、垂直方向２４０画素の映像データを毎秒６０フレーム出力するものとする。また、水平方向Ｈ画素、垂直方向Ｖ画素の構成をＨ×Ｖ画素と表記し、水平方向の座標及び垂直方向の座標をそれぞれＸ座標及びＹ座標とする。
【００２２】
フレーム制御部１１は、カメラ３０から毎秒６０フレーム出力される映像データを入力して所定のフレーム数の映像データを間引きし、例えば毎秒１フレームの映像データを一定の時間間隔で出力するようになっている。なお、フレーム制御部１１は、本発明の映像信号出力手段を構成している。
【００２３】
圧縮伸張部１２は、フレーム制御部１１から出力される映像データを所定の圧縮方式で圧縮して記録制御部１３に出力するようになっている。また、圧縮伸張部１２は、ストレージ１４に記録された圧縮映像データを記録制御部１３経由で入力し、所定の伸張方式で伸張してＰｉｎＰ合成部２０に出力するようになっている。ここで、所定の圧縮方式及び伸張方式としては、例えばＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式等が用いられる。
【００２４】
記録制御部１３は、ストレージ１４に対する映像データの記録処理及び読み出し処理を制御するようになっている。
【００２５】
ストレージ１４は、例えばハードディスクドライブ装置によって構成され、圧縮伸張部１２によって圧縮された圧縮映像データを記録するようになっている。なお、ストレージ１４は、本発明の記録手段を構成している。
【００２６】
動領域検出部１５は、例えば周知の差分法や動きベクトル法等によって、カメラ３０から毎秒６０フレーム出力される映像データに基づく映像から人物の映像を検出し、監視領域の座標に対して人物の映像が含まれる領域（以下「動き領域」という。）の座標情報を取得するようになっている。具体的には、監視領域の座標は、Ｘ座標０〜７１９及びＹ座標０〜２３９で表され、動き領域は、例えば監視領域の中の矩形領域として表される。
【００２７】
また、動領域検出部１５は、カメラ３０から出力される７２０×２４０画素の映像データを例えば１８０×６０画素からなる１６個のブロックに分割し、人物の映像が検出されている期間において、人物の映像が存在するブロック（以下「動ブロック」という。）と、人物の映像が存在しないブロック（以下「静ブロック」という。）とを検出するようになっている。なお、動領域検出部１５は、本発明の動き物体検出手段及び領域分割手段を構成している。
【００２８】
人領域抽出部１６は、動領域検出部１５によって検出された動き領域の映像から、例えば楕円ハフアルゴリズムによって人物の顔映像の領域を抽出し、顔映像の領域を例えば矩形領域として表すためのＸ座標及びＹ座標を算出するようになっている。この顔映像の領域を矩形領域として表す場合の座標情報は、顔領域の開始位置のＸ座標及びＹ座標と、顔領域の終了位置のＸ座標及びＹ座標とで定義される。
【００２９】
ベストショット判別部１７は、人領域抽出部１６によって抽出された人物の顔映像のデータや、顔映像を判別するために予め定められた判別基準のデータ等を記憶するメモリ（図示省略）を備え、判別基準のデータに基づき、抽出された顔映像の中からベストショットを判別するようになっている。なお、ベストショット判別部１７は、本発明の最良映像抽出手段を構成している。
【００３０】
例えば、ベストショット判別部１７は、ある人物が監視領域に進入してから退出するまでの期間において、現在のフレームで取得されたその人物の顔映像と、その人物の顔映像が検出されたフレームから現在のフレームの１つ前までのフレーム（以下「過去のフレーム」という。）で取得されたその人物の顔映像とを、例えば顔映像のサイズ、コントラスト、輝度、ガンマ値及び顔方向情報等を判別基準として、フレーム毎に順次比較し、最も鮮明に撮像された顔映像をベストショットとして決定するようになっている。ここで、鮮明に撮像された顔映像とは、顔映像の色や形などが鮮やかであり、明確であることに加えて、人物を特定しやすいものをいう。
【００３１】
具体的には、例えば、顔映像のコントラスト、顔映像サイズ及び顔方向情報の３つの要素をベストショットの判別基準とした場合、抽出された顔映像を要素毎にスコア化し、スコア化したものに所定の重み係数を乗じて顔映像の総合スコアを算出する。現在のフレームから抽出した顔映像と、過去のフレームで抽出した顔映像とを総合スコアでフレーム毎に順次比較し、総合スコアが最も大きいものをベストショットとする。例えば、横向きの顔映像よりも正面向きの顔映像のスコアを大きく設定したり、顔映像サイズが大きいほどスコアを大きくしたりすることによって、ベストショットを判定することができる。
【００３２】
ＰｉｎＰ用ヘッダ生成部１８は、図２に示されたＰｉｎＰ用ヘッダ情報を生成し、このＰｉｎＰ用ヘッダを顔映像のデータに付加して記録制御部１３に出力するようになっている。図２に示されたＰｉｎＰ用ヘッダ情報は、顔映像のデータ識別のためのインデックスと、ベストショットが撮像されたベストショット撮像時刻と、顔映像の領域を表すＸ座標及びＹ座標と、人物が存在しない静ブロックを示すデータとで構成されている。
【００３３】
ＰｉｎＰ用ヘッダ処理部１９は、ＰｉｎＰ用ヘッダ情報から、現在のフレームにおける顔映像の領域に最も近い静ブロックの位置を決定するようになっている。
【００３４】
ＰｉｎＰ合成部２０は、圧縮伸張部１２によって伸張された映像信号のデータを入力し、ＰｉｎＰ用ヘッダ処理部１９によって決定された静ブロックに含まれる監視領域の映像と、ベストショットとを合成するようになっている。なお、ＰｉｎＰ合成部２０は、本発明の映像合成手段を構成している。
【００３５】
描画部２１は、ＰｉｎＰ合成部２０によって合成された合成影像の映像信号をモニタ４０に出力するようになっている。
【００３６】
次に、本実施の形態の監視記録装置１０の動作について説明する。
【００３７】
最初に、監視領域内に人物が現れた場合、監視領域の映像データがベストショットデータと共に記録されるステップについて、図３を用いて説明する。
【００３８】
まず、フレーム制御部１１及び動領域検出部１５によって、７２０×２４０画素で構成されたＮＴＳＣ方式の映像データが入力される（ステップＳ１１）。次いで、フレーム制御部１１によって、毎秒６０フレームの映像データから、毎秒１フレームの映像データが出力される（ステップＳ１２）。したがって、フレーム制御部１１は、６０フレーム分の映像データから５９フレーム分の映像データを毎秒間引き、１秒間隔で１フレーム分の映像データを出力する。
【００３９】
さらに、圧縮伸張部１２によって、例えばＭＰＥＧ方式に基づいて映像データが圧縮され（ステップＳ１３）、圧縮映像データとして記録制御部１３に出力された後、圧縮映像データがストレージ１４に記録される（ステップＳ１４）。
【００４０】
一方、動領域検出部１５によって、１フレーム分の映像データが入力され（ステップＳ２１）、差分法や動きベクトル法等を用いて動き領域が検出される（ステップＳ２２）。例えば、差分法を用いる場合、動領域検出部１５は、現在のフレームの映像と、現在のフレームの１つ前のフレームの映像との差分を求めて、監視領域の映像から動き領域を検出する。この動き領域は、監視領域のＸ座標０〜７１９及びＹ座標０〜２３９における矩形領域として表され、矩形領域の座標のデータが動領域検出部１５によって取得される。
【００４１】
さらに、動領域検出部１５によって、監視領域の映像が所定数のブロックに分割され、動き物体が検出されている期間において、動き物体が存在する動ブロックと、動き物体が存在しない静ブロックとが検出される（ステップＳ２３）。
【００４２】
具体的には、例えば図４に示すように、７２０×２４０画素で構成された監視領域の映像が、Ｘ座標方向及びＹ座標方向にそれぞれ４分割され、１８０×６０画素の１６個のブロックに分割され、ステップＳ２２において検出された動き領域の座標データから、動ブロック及び静ブロックが検出される。
【００４３】
引き続き、人領域抽出部１６によって、例えば楕円ハフアルゴリズムに基づいて動き物体の映像から顔映像の領域が抽出される（ステップＳ２４）。この顔映像の領域は、監視領域のＸ座標０〜７１９及びＹ座標０〜２３９における矩形領域の座標データとして表される。
【００４４】
次いで、ベストショット判別部１７によって、人領域抽出部１６が現在のフレームから抽出した顔映像と、過去のフレームで抽出した顔映像とが所定の判別基準に基づいて比較され、現在のフレームから抽出された顔映像がベストショットか否かが判断される（ステップＳ２５）。
【００４５】
例えば、顔映像のコントラスト、顔映像サイズ及び顔方向情報の３つの要素をベストショットの判別基準とした場合、抽出された顔映像を要素毎にスコア化し、スコア化したものに所定の重み係数を乗じて顔映像の総合スコアを算出する。現在のフレームから抽出した顔映像と、過去のフレームで抽出した顔映像とを総合スコアでフレーム毎に順次比較し、総合スコアが最も大きいものをベストショットとする。
【００４６】
ステップＳ２５において、現在のフレームから抽出された顔映像がベストショットと判断されなかった場合は、ステップＳ２１に戻り、次フレームの映像データが入力され、ベストショットの判別が実行される。
【００４７】
一方、ステップＳ２５において、ベストショットと判断された場合は、ＰｉｎＰ用ヘッダ生成部１８によって、図２に示すようなＰｉｎＰ用ヘッダ情報が生成される（ステップＳ２６）。
【００４８】
図２に示すように、インデックスのデータとしては、顔映像や監視領域等を識別するための予め定められた管理データが生成される。また、ベストショットの撮影情報のデータとしては、顔映像が撮影された西暦年月及び時刻のデータを表したベストショット撮像時刻のデータが生成される。また、顔領域の座標データとしては、Ｘ座標は０〜７１９、Ｙ座標は０〜２３９の数値で表された矩形領域のデータが生成される。また、動きがない静ブロックの領域データとしては、Ｘ座標方向及びＹ座標方向におけるＸブロック及びＹブロックがそれぞれ０〜３の数値で表されたデータが生成される。なお、撮影情報のデータは、顔映像が撮影された時刻情報のみに限定されるものではない。
【００４９】
さらに、ＰｉｎＰ用ヘッダ生成部１８によって、ＰｉｎＰ用ヘッダ情報がベストショットデータに付加される（ステップＳ２７）。
【００５０】
そして、記録制御部１３によって、ＰｉｎＰ用ヘッダ情報が付加されたベストショットデータがストレージ１４に記録される（ステップＳ２８）。
【００５１】
次に、監視領域の映像データをベストショットデータと共に表示するステップについて、図５を用いて説明する。
【００５２】
まず、記録制御部１３によって、ストレージ１４から圧縮映像データが読み出され（ステップＳ３１）、ＰｉｎＰ用ヘッダ情報に基づいて圧縮映像データの映像が撮影された時刻のベストショットデータが読み出される（ステップＳ３２）。ここで、圧縮映像データは圧縮伸張部１２に送信され、ベストショットデータはＰｉｎＰ用ヘッダ処理部１９に送信される。
【００５３】
次いで、圧縮伸張部１２によって、圧縮映像データが例えばＭＰＥＧ方式により伸張される（ステップＳ３３）。
【００５４】
さらに、ＰｉｎＰ用ヘッダ処理部１９によって、ＰｉｎＰ用ヘッダ情報に含まれる顔映像のＸ座標及びＹ座標のデータと、静ブロックの位置情報とから顔映像の位置に最も近い静ブロックの位置が算出され、この静ブロックがベストショットを合成するブロックとして決定される（ステップＳ３４）。
【００５５】
引き続き、ＰｉｎＰ合成部２０によって、ステップＳ３４において決定された静ブロックの映像とベストショットとが合成される（ステップＳ３５）。
【００５６】
そして、描画部２１によって、合成映像がモニタ４０に描画され、例えば図４に示すような合成映像がモニタ４０に表示される（ステップＳ３６）。図４は、監視領域としてのホールに出入りした女性及び男性のベストショットが、それぞれ、Ｘブロック０及びＹブロック１の位置と、Ｘブロック２及びＹブロック０の位置とに表示されている。
【００５７】
以上のように、本実施の形態の監視記録装置１０によれば、ベストショット判別部１７は、人領域抽出部１６が抽出した顔映像のうち判別基準に最も適合するベストショットを判別し、ストレージ１４は、間欠的に撮像された監視領域の映像データと、撮影情報が付加されたベストショットとを記録する構成としたので、監視領域の映像にベストショットを埋め込んで鮮明に撮影された人物の顔映像を表示することができ、監視記録のデータ量の低減化を図りながら、従来のものよりも容易に人物を特定できる映像データを記録することができる。
【００５８】
なお、前述の実施の形態において、７２０×２４０画素で構成された監視領域の映像を１８０×６０画素の１６個のブロックに分割して人物の映像が存在するブロックを検出する例に挙げて説明したが、本発明はこれに限定されるものではない。
【００５９】
また、前述の実施の形態において、監視対象として人物を例に挙げて説明したが、本発明はこれに限定されるものではなく、例えば駐車場に出入りする車両や、監視領域に出入りする動物等を監視する構成としても同様の効果が得られる。
【００６０】
（第２の実施の形態）
まず、本発明の第２の実施の形態の監視記録装置の構成について説明する。
【００６１】
図６に示すように、本実施の形態の監視記録装置５０は、監視領域を撮影するカメラ３０から送信される映像信号を所定時間間隔で入力するフレーム制御部５１と、映像信号のデータを圧縮伸張する圧縮伸張部５２と、ストレージ５４の動作を制御する記録制御部５３と、圧縮された映像データを記録するストレージ５４と、カメラ３０から送信される映像信号に基づく映像から監視領域に出入りする人物の映像を含む領域を検出する動領域検出部５５と、検出された領域から人物の顔映像の領域を抽出する人領域抽出部５６と、抽出された顔映像のうちベストショットを判別するベストショット判別部５７と、ベストショットのデータに付加するヘッダ情報を生成するＰｉｎＰ用ヘッダ生成部５８と、ヘッダ情報を処理するＰｉｎＰ用ヘッダ処理部５９と、ヘッダ情報に基づいてベストショットのデータと圧縮伸張部５２からの映像データとを合成するＰｉｎＰ合成部６０と、合成された映像をモニタ４０に描画する処理を行う描画部６１と、ストレージ５４に記録された顔映像データを検索する顔検索部６２とを備えている。
【００６２】
なお、本実施の形態の監視記録装置５０は、本発明の第１の実施の形態の監視記録装置１０（図１参照）に顔検索部６２を追加した構成なので、顔検索部６２以外の構成の説明は省略する。
【００６３】
顔検索部６２は、ＰｉｎＰ用ヘッダ処理部５９から送信された顔映像データに係る人物の映像データをストレージ５４から検索するようになっている。なお、顔検索部６２は、本発明の検索手段を構成している。
【００６４】
次に、本実施の形態の監視記録装置５０の動作について説明する。なお、監視領域の映像データがベストショットデータと共に記録されるステップは、図３に示されたステップと同様であるので説明を省略し、監視領域の映像データをベストショットデータと共に表示するステップについて、図７を用いて説明する。
【００６５】
まず、記録制御部５３によって、ストレージ５４から圧縮映像データが読み出され（ステップＳ４１）、ＰｉｎＰ用ヘッダ情報に基づいて圧縮映像データの映像が撮影された時刻のベストショットデータが読み出される（ステップＳ４２）。ここで、圧縮映像データは圧縮伸張部５２に送信され、ベストショットデータはＰｉｎＰ用ヘッダ処理部５９に送信される。
【００６６】
次いで、圧縮伸張部５２によって、圧縮映像データが例えばＭＰＥＧ方式により伸張される（ステップＳ４３）。
【００６７】
さらに、ＰｉｎＰ用ヘッダ処理部５９によって、ＰｉｎＰ用ヘッダ情報に含まれる顔映像のＸ座標及びＹ座標のデータと、静ブロックの位置情報とから顔映像の位置に最も近い静ブロックの位置が算出され、この静ブロックがベストショットを合成するブロックとして決定される（ステップＳ４４）。
【００６８】
また、ＰｉｎＰ用ヘッダ処理部５９によって、ステップＳ４２において読み出されたベストショットデータと、このベストショットデータよりも過去に記録されたベストショットデータの検索を指示する検索指示信号とが顔検索部６２に出力される（ステップＳ４５）。
【００６９】
次いで、顔検索部６２によって、検索指示されたベストショットデータが検索される（ステップＳ４６）。ここで、顔検索部６２は、周知の顔認証アルゴリズムを用いて、検索指示されたベストショットデータに係る人物と同一人物のベストショットデータ（以下「同一人物ベストショットデータ」という。）をストレージ５４から検索する。
【００７０】
そして、顔検索部６２によって、同一人物ベストショットデータがストレージ５４にあるか否かが判断される（ステップＳ４７）。同一人物ベストショットデータがストレージ５４にあると判断された場合は、顔検索部６２によって、同一人物ベストショットデータに付加された撮影情報のデータがＰｉｎＰ合成部６０に送信される（ステップＳ４８）。
【００７１】
引き続き、ＰｉｎＰ合成部６０によって、ステップＳ４４において決定された静ブロックの映像と、ベストショットデータと、ステップＳ４８において取得された撮影情報データとが合成される（ステップＳ４９）。
【００７２】
一方、ステップＳ４７において、同一人物ベストショットデータがストレージ５４にあると判断されなかった場合は、ＰｉｎＰ合成部６０によって、ステップＳ４４において決定された静ブロックの映像と、ベストショットデータとが合成される（ステップＳ５０）。
【００７３】
そして、描画部６１によって、合成映像がモニタ４０に描画され、同一人物ベストショットデータがストレージ５４にある場合は、例えば図８に示すような合成映像がモニタ４０に表示される（ステップＳ５１）。図８は、監視領域としてのホールに出入りする人物の撮像例を示したものであり、ホールに出入りした女性及び男性のベストショットが、それぞれ、Ｘブロック０及びＹブロック５の位置と、Ｘブロック２及びＹブロック０の位置とに表示され、男性のベストショットと共にこの男性が以前撮影された時刻情報が表示されている。なお、ベストショットと共に表示される撮影情報は、時刻情報に限定されるものではなく、例えば管理領域に出入りした回数のデータと時刻情報とを表示する構成としてもよい。
【００７４】
以上のように、本実施の形態の監視記録装置５０によれば、顔検索部６２は、同一人物ベストショットデータをストレージ５４から検索し、同一人物ベストショットデータがストレージ５４にある場合は、ＰｉｎＰ合成部６０は、間欠的に撮像された監視領域の静ブロックの映像と、ベストショットデータと、過去に撮影された同一人物の撮影情報データとを合成する構成としたので、監視領域の映像にベストショットと、そのベストショットに係る人物の過去の撮影情報とを表示することができる。
【００７５】
また、従来の監視記録装置では、間引いた影像信号を記録する構成なので、検索に有効な映像データが取得できない可能性があったが、本実施の形態の監視記録装置５０では、ストレージ５４が間引き処理とは無関係にベストショットを記録する構成としたので、検索に有効な映像データを従来のものよりも多く記録することができ、検索の精度を向上させることができる。
【産業上の利用可能性】
【００７６】
以上のように、本発明に係る監視記録装置は、従来のものよりも容易に監視対象を特定できる映像データを記録することができるという効果を有し、監視領域に出入りする人物の行動を記録する監視記録装置等として有用である。
【図面の簡単な説明】
【００７７】
【図１】本発明の第１の実施の形態の監視記録装置のブロック図
【図２】本発明の第１の実施の形態の監視記録装置に係るＰｉｎＰ用ヘッダの構成例を示す図
【図３】本発明の第１の実施の形態の監視記録装置において、映像データを記録する各ステップのフロー図
【図４】本発明の第１の実施の形態の監視記録装置に係る監視領域の表示映像の一例を示す図
【図５】本発明の第１の実施の形態の監視記録装置において、映像データを読み出す各ステップのフロー図
【図６】本発明の第２の実施の形態の監視記録装置のブロック図
【図７】本発明の第２の実施の形態の監視記録装置において、映像データを読み出す各ステップのフロー図
【図８】本発明の第２の実施の形態の監視記録装置に係る監視領域の表示映像の一例を示す図
【符号の説明】
【００７８】
１０、５０ 監視記録装置
１１、５１ フレーム制御部（映像信号出力手段）
１２、５２ 圧縮伸張部
１３、５３ 記録制御部
１４、５４ ストレージ（記録手段）
１５、５５ 動領域検出部（動き物体検出手段、領域分割手段）
１６、５６ 人領域抽出部
１７、５７ ベストショット判別部（最良映像抽出手段）
１８、５８ ＰｉｎＰ用ヘッダ生成部
１９、５９ ＰｉｎＰ用ヘッダ処理部
２０、６０ ＰｉｎＰ合成部（映像合成手段）
２１、６１ 描画部
３０ カメラ
４０ モニタ
６２ 顔検索部（検索手段）
【特許請求の範囲】
【請求項１】
監視領域の映像から動き物体の映像をフレーム毎に検出する動き物体検出手段と、前記動き物体の映像のうち所定の基準に最も適合する映像を最良映像として判別する最良映像判別手段と、前記最良映像のデータを記録する記録手段とを備えたことを特徴とする監視記録装置。
【請求項２】
前記記録手段は、前記最良映像が撮影された時刻情報を含む撮影情報のデータを前記最良映像のデータに関連付けて記録することを特徴とする請求項１に記載の監視記録装置。
【請求項３】
前記監視領域の映像信号を所定時間間隔で間欠的に出力する映像信号出力手段と、間欠的に出力された前記映像信号に基づく映像と前記最良映像とを合成する映像合成手段とを備えたことを特徴とする請求項１又は請求項２に記載の監視記録装置。
【請求項４】
前記映像を前記フレーム毎に複数の分割領域に分割する領域分割手段を備え、
前記領域分割手段は、前記動き物体が検出された第１分割領域と、この第１分割領域とは異なる第２分割領域とに前記映像を分割し、
前記映像合成手段は、前記第１分割領域に最も近い第２分割領域の映像と前記最良映像とを合成することを特徴とする請求項３に記載の監視記録装置。
【請求項５】
最良映像抽出手段によって抽出された前記最良映像のデータと一致するデータを前記保存手段によって保存されたデータから検索する検索手段を備え、
前記映像合成手段は、前記最良映像のデータと一致するデータが検索されたとき、前記間欠的に出力された映像信号に基づく映像と、前記最良映像と、前記最良映像が撮影された時刻情報を含む撮影情報とを合成することを特徴とする請求項３又は請求項４に記載の監視記録装置。
【請求項６】
前記動き物体の映像は人物の映像を含み、前記最良映像は前記人物の顔映像を含み、前記所定の基準は前記顔映像のサイズ、コントラスト、輝度、ガンマ値及び顔方向情報のうちの少なくとも１つの基準を含むことを特徴とする請求項１から請求項５までのいずれかに記載の監視記録装置。
【請求項１】
監視領域の映像から動き物体の映像をフレーム毎に検出する動き物体検出手段と、前記動き物体の映像のうち所定の基準に最も適合する映像を最良映像として判別する最良映像判別手段と、前記最良映像のデータを記録する記録手段とを備えたことを特徴とする監視記録装置。
【請求項２】
前記記録手段は、前記最良映像が撮影された時刻情報を含む撮影情報のデータを前記最良映像のデータに関連付けて記録することを特徴とする請求項１に記載の監視記録装置。
【請求項３】
前記監視領域の映像信号を所定時間間隔で間欠的に出力する映像信号出力手段と、間欠的に出力された前記映像信号に基づく映像と前記最良映像とを合成する映像合成手段とを備えたことを特徴とする請求項１又は請求項２に記載の監視記録装置。
【請求項４】
前記映像を前記フレーム毎に複数の分割領域に分割する領域分割手段を備え、
前記領域分割手段は、前記動き物体が検出された第１分割領域と、この第１分割領域とは異なる第２分割領域とに前記映像を分割し、
前記映像合成手段は、前記第１分割領域に最も近い第２分割領域の映像と前記最良映像とを合成することを特徴とする請求項３に記載の監視記録装置。
【請求項５】
最良映像抽出手段によって抽出された前記最良映像のデータと一致するデータを前記保存手段によって保存されたデータから検索する検索手段を備え、
前記映像合成手段は、前記最良映像のデータと一致するデータが検索されたとき、前記間欠的に出力された映像信号に基づく映像と、前記最良映像と、前記最良映像が撮影された時刻情報を含む撮影情報とを合成することを特徴とする請求項３又は請求項４に記載の監視記録装置。
【請求項６】
前記動き物体の映像は人物の映像を含み、前記最良映像は前記人物の顔映像を含み、前記所定の基準は前記顔映像のサイズ、コントラスト、輝度、ガンマ値及び顔方向情報のうちの少なくとも１つの基準を含むことを特徴とする請求項１から請求項５までのいずれかに記載の監視記録装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２００６−２１７０７０（Ｐ２００６−２１７０７０Ａ）
【公開日】平成１８年８月１７日（２００６．８．１７）
【国際特許分類】
【出願番号】特願２００５−２５４９１（Ｐ２００５−２５４９１）
【出願日】平成１７年２月１日（２００５．２．１）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成１８年８月１７日（２００６．８．１７）
【国際特許分類】
【出願日】平成１７年２月１日（２００５．２．１）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]