監視装置、監視方法及び監視プログラム
【課題】誤検出を低減し、高精度に不審対象を監視することができる監視装置を提供する。
【解決手段】対象検出部21は、撮像部1により撮像された動画像から監視する対象を検出する。動線情報作成部22は、対象検出部21により検出された対象の移動ベクトルから動線情報を作成する。不審行動判定部24と、動線情報から、予め設定された不審行動パターン31に基づいて、対象検出部21により検出された対象が不審対象候補か否かを判定する。複合行動判定部26は、不審対象候補の動線情報と、不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターン32に基づいて、不審対象候補が不審対象か否かを判定する。
【解決手段】対象検出部21は、撮像部1により撮像された動画像から監視する対象を検出する。動線情報作成部22は、対象検出部21により検出された対象の移動ベクトルから動線情報を作成する。不審行動判定部24と、動線情報から、予め設定された不審行動パターン31に基づいて、対象検出部21により検出された対象が不審対象候補か否かを判定する。複合行動判定部26は、不審対象候補の動線情報と、不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターン32に基づいて、不審対象候補が不審対象か否かを判定する。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、高精度に不審対象を検出できる監視装置、監視方法及び監視プログラムに関する。
【背景技術】
【0002】
従来の監視装置は、無人の敷地、建物等に侵入者が侵入した後に、侵入者を検知して通報したり、事件発生後に、記録した映像から犯人を確認したりする事後処理がほとんどであった。このような監視装置は、多くの人が行き来する場所や状況において、あまり効果が得られず、また犯罪、事故の未然防止にはつながらない。犯罪、事故を未然に防ぐためには、監視する対象である人物等の行動を認識し、犯罪、事故につながる虞のある不審な対象の行動を前もって検出して対処することが必要と考えられる。
【0003】
例えば、特許文献1では、画像解析により、検出した人物(対象)の位置と時刻との関係から、対象の移動と停止の状態を認識し、それを行動情報として用い、予め定められた特異な行動パターン(常識外の停止時間、移動時間、停止と移動の繰り返しなど)に合致する状態を抽出することで、不審行動を検出するという技術が提案されている。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2010−272958号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、特許文献1の技術では、監視する対象が複数存在する状況においても、それぞれの対象について、それぞれの対象の行動情報のみで判断を行っているため、周囲の対象の影響が考慮されておらず、誤った判断をしかねない。
【0006】
例えば駅のホームにおいて、蛇行するようなある対象の移動の軌跡(動線)が検出された場合に、泥酔していて線路に落ちる危険性があるのか、逆行する他の多数の乗客を避けながら歩いているだけなのかは、他の人物の存在や移動の状態がわからないと区別できない。よって、単に他の人物を避けながら歩いている対象に対して、不審対象と誤検出してしまう可能性がある。
本発明は、誤検出を低減し、高精度に不審対象を検出できる監視装置、監視方法及び監視プログラムを提供することを目的とする。
【課題を解決するための手段】
【0007】
上記目的を達成するために、本発明の第1の態様は、動画像を撮像する撮像部(1)と、前記撮像部により撮像された動画像から監視する対象を検出する対象検出部(21)と、前記対象検出部により検出された対象の移動ベクトルから動線情報を作成する動線情報作成部(22)と、前記動線情報作成部(22)により作成された動線情報から、予め設定された不審行動パターン(31)に基づいて、前記対象検出部(21)により検出された対象が不審対象候補か否かを判定する不審行動判定部(24)と、前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターン(31)に基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定部(26)とを備える監視装置であることを要旨とする。
【0008】
また、本発明の第1の対象に係る監視装置においては、前記複合行動判定部(26)は、前記不審対象候補の動線情報と前記周辺対象の動線情報との関係を前記複合行動パターンと比較することにより、前記不審行動判定部による不審対象候補の判定が前記周辺対象の影響であると判定した場合は、前記不審対象候補を不審対象でないと判定する。
【0009】
また、本発明の第1の対象に係る監視装置においては、前記動線情報作成部(22)の作成する動線情報は、少なくとも対象の移動ベクトルの変化点と前記変化点が生じたときの時刻情報とを含む。
【0010】
また、本発明の第1の対象に係る監視装置においては、前記不審行動判定部(24)は、前記動線情報から算出される、所定時間内の対象の移動距離、所定時間内の対象の移動ベクトルの変化頻度、所定時間内の対象の同一位置通過頻度の内、少なくとも1つの情報から、前記不審行動パターン(31)に基づいて、対象が不審対象候補か否かを判定する。
【0011】
また、本発明の第1の対象に係る監視装置においては、前記複合行動判定部(26)が前記不審対象候補を不審対象と判定した場合において、外部に報知信号を出力する出力部(5)を更に備える。
【0012】
本発明の第2の態様は、動画像を撮像する撮像ステップと、前記撮像ステップにおいて撮像された動画像から監視する対象を検出する対象検出ステップと、前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップとを含む監視方法であることを要旨とする。
【0013】
本発明の第3の態様は、動画像から監視する対象を検出する対象検出ステップと、前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップとを含む処理をコンピュータに実行させる監視プログラムであることを要旨とする。
【発明の効果】
【0014】
本発明によれば、誤検出を低減し、高精度に不審対象を監視することができる監視装置、監視方法及び監視プログラムを提供することができる。
【図面の簡単な説明】
【0015】
【図1】本発明の実施の形態に係る監視装置の基本的な構成を説明する模式的なブロック図である。
【図2】本発明の実施の形態に係る監視方法を説明するフローチャートである。
【図3】本発明の実施の形態に係る監視装置に用いる動線情報の一例を説明する表である。
【図4】本発明の実施の形態に係る監視装置に用いる行動情報の一例を説明する表である。
【図5】本発明の実施の形態に係る監視装置に用いる不審行動パターンの一例を説明する表である。
【図6】本発明の実施の形態に係る監視装置に用いる複合行動パターンの第1パターンの一例を説明する表である。
【図7】本発明の実施の形態に係る監視装置に用いる複合行動パターンの第2パターンの一例を説明する表である。
【図8】本発明の実施の形態に係る監視装置に用いる複合行動判定部による判定結果の一例を説明する表である。
【図9】本発明の実施の形態に係る監視装置の他の動作例に用いる不審行動パターンを説明する表である。
【図10】本発明の実施の形態に係る監視装置の他の動作例に用いる複合行動パターンを説明する表である。
【発明を実施するための形態】
【0016】
次に、図面を参照して、本発明の実施の形態を説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。但し、以下に示す実施の形態は、本発明の技術的思想を具体化するための装置や方法、及びこれらの装置に用いられるプログラムを例示するものであって、本発明の技術的思想は、下記の実施の形態に例示した装置や方法、及びこれらの装置に用いられるプログラムに特定するものでない。本発明の技術的思想は、特許請求の範囲に記載された技術的範囲内において、種々の変更を加えることができる。
【0017】
(監視装置)
本発明の形態に係る監視装置は、図1に示すように、動画像を撮像する撮像部1と、本発明の実施の形態に係る監視装置が行う種々の演算を処理する処理部2と、プログラムデータ、動画像データ等の種々のデータを記憶する記憶部3と、ユーザの操作に応じた信号や外部からのデータ等を処理部2に入力する入力部4と、警告、通報等の報知信号を出力する出力部5とを備える。
撮像部1は、ビデオカメラ、赤外線カメラ等の撮像装置からなり、監視する対象を含む動画像を撮像する。
【0018】
記憶部3は、監視する対象に対して不審対象候補であるか判定する条件のデータである不審行動パターン31と、不審対象候補に対して不審対象であるか判定する条件のデータである複合行動パターン32とを記憶する。記憶部3は、例えば、磁気ディスク、半導体メモリ等の記憶装置から構成できる。図1に示す記憶部3に記憶される不審行動パターン31、複合行動パターン32は、それぞれ論理構造としての表示であり、不審行動パターン31、複合行動パターン32、記憶部3に記憶される他のデータ等は、それぞれ同一の記憶装置に記憶されて良く、別個の記憶装置に記憶されても良い。
【0019】
処理部2は、対象検出部21と、動線情報作成部22と、行動情報作成部23と、不審行動判定部24と、周辺対象判定部25と、複合行動判定部26と、報知処理部27とを論理構造として有する。処理部2は、例えばマイクロコンピュータ等の演算処理装置からなる。図1に示す処理部2を構成する各部は、論理構造としての表示であり、それぞれ同一のハードウェアである演算処理装置により構成されて良く、別個のハードウェアにより構成されても構わない。
対象検出部21は、撮像部1により撮像された動画像から、監視する対象を検出する。
【0020】
対象検出部21は、動画像を構成する静止画であるフレームを画像処理することにより、対象を検出する。対象検出部21が行う画像処理として、例えば輝度勾配情報から、フレーム上の輪郭、形状を検出することができるHOG(Histograms of Oriented Gradients)を用いた画像処理を採用することができる。
【0021】
動線情報作成部22は、図3に示すように、対象検出部21により動画像から検出された全ての対象について、対象の移動ベクトルの変化点(位置座標)と、変化点における時刻とを検出し、動線情報として作成する。動線情報作成部22により作成された動線情報は、動線情報作成部22が記憶しても良く、記憶部3に記憶させても良い。動線情報作成部22は、各対象について単位時間毎のフレーム上の位置を取得し、取得した位置の時系列の変化から移動ベクトルを生成する。移動ベクトルの変化点は、例えば、対象が所定以上の角度を有して曲がった点、対象の速度が所定以上の加速度を有して変化した点等を採用可能である。即ち、動線情報は、おおよそ直線をおおよそ等速で対象が進んだ領域と時間を表すことができる。停止している対象が移動する場合、または移動している対象が停止する場合は、対象の移動ベクトルの変化点となり、動線情報において位置の変化していない時間の区間は、対象が停止状態であることを示す。
【0022】
行動情報作成部23は、図4に示すように、動線情報作成部22により作成されたそれぞれの動線情報から、所定時間内における対象の移動距離(領域)、移動方向変化頻度、同一位置通過頻度、同一位置停止時間等を算出し、行動情報として作成する。行動情報作成部23により作成された行動情報は、行動情報作成部23が記憶しても良く、記憶部3に記憶させても良い。
【0023】
不審行動判定部24は、不審行動パターン31に基づいて、行動情報作成部23により作成された各対象の所定時間分の行動情報から、各対象が不審対象候補か否かを判定する。不審行動判定部24は、不審行動パターン31に設定された条件に合致する行動情報を有する対象を、不審対象候補として設定する。
【0024】
周辺対象判定部25は、不審行動判定部24により設定された不審対象候補の周辺に存在する他の対象である周辺対象が検出されたか否かを判定する。周辺対象判定部25は、不審対象候補の移動方向の変化点における時刻、不審対象候補が一点に長時間停止している間の時刻等、不審対象候補の動線情報の時刻について、不審対象候補以外の対象の動線情報から各対象の位置を算出し、不審対象候補から所定の範囲内の位置にある対象を不審対象候補の周辺対象として検出する。
【0025】
複合行動判定部26は、複合行動パターン32に基づいて、不審対象候補の動線情報と周辺対象の動線情報とから、不審行動判定部24により設定された不審対象候補を不審対象と確定するか否かを判定する。複合行動判定部26は、不審対象と判定しない対象を不審対象候補から除外する。複合行動判定部26は、不審対象候補の動線情報と周辺対象の動線情報との関係を複合パターン32と比較することにより、不審対象行動判定部24による不審対象候補の判定が、周辺対象の影響であると判定した場合は、不審対象候補を不審対象でないと判定する。
報知処理部27は、警告、通報等の報知信号を出力部5に出力させる。
【0026】
入力部4は、例えば、キーボード、マウス、タッチパネル等の入力装置や、外部装置と接続するコネクタ等で構成される。入力部4は、ユーザの操作により、不審行動パターン31、複合行動パターン32の内容を設定、変更することができる。
出力部5は、例えば、ネットワークを介して管理者、警察等へ通報したり、不審対象及び周辺対象に対して警告したりするための報知信号を外部に出力する。
【0027】
(監視方法)
図2のフローチャートを用いて、本発明の実施の形態に係る監視装置を用いた監視方法の一例について説明する。
先ず、ステップS1において、処理部2は、撮像部1が撮像した動画像を撮像部1から入力する。
ステップS2において、対象検出部21は、撮像部1から入力した動画像から、監視する人物等の対象をすべて検出する。
【0028】
ステップS3において、動線情報作成部22は、図3に示すように、対象検出部21が検出した各対象について、移動ベクトルを生成し、移動ベクトルの変化点毎に動線情報を作成する。
【0029】
ステップS4において、行動情報作成部23は、図4に示すように、動線情報作成部22が作成した動線情報について、それぞれ所定時間内の行動情報を作成する。図4に示す最下行(移動距離「108」の行)の行動情報は、図3に示す動線情報の時刻22:00:02〜22:01:55の間のものである。この最下行の行動情報は、時刻22:00:02〜22:01:55の間、対象の移動距離108、移動方向変化頻度8回、同一位置通過頻度0回、同一位置停止時間10秒であったことを示している。
【0030】
ステップS5において、不審行動判定部24は、行動情報作成部23が作成した行動情報について、予め設定された不審行動パターン31に基づいて、不審対象候補となる対象があるか否かを判定する。不審行動判定部24は、不審行動パターン31に合致する行動情報を検出すると、検出された行動情報を有する対象を、不審対象候補と判定する。不審対象候補と判定される対象がある場合、ステップS6において、不審対象候補と判定された対象を不審対象候補に設定する。
【0031】
例えば、泥酔している虞のある者を不審対象として検出するための不審行動パターン31は、図5に示すように、移動距離Am以内且つ移動方向(移動ベクトル)変化頻度B回以上と設定されることができる。泥酔時の歩行者は、ふらつきながら歩き、通常の歩行者と比べて速度が遅く、所定時間内の移動距離が短いと考えられる。図4に示す行動情報が、図5に示す不審行動パターン31に合致する場合、不審行動判定部24は、不審行動パターン31と合致する行動情報を有する対象を不審対象候補と判定する。
【0032】
ステップS7において、周辺対象判定部25は、ステップS6において設定された不審対象候補に対する周辺対象を検出し、周辺対象が検出されたか否か判定する。周辺対象が検出された場合ステップS8に進み、周辺対象が検出されない場合、ステップS10に進む。
【0033】
ステップS8において、複合行動判定部26は、不審対象候補の動線情報と周辺対象の動線情報とから、予め設定された複合行動パターン32に基づいて、ステップS6において設定された不審対象候補に対して、不審対象か否かを判定する。
【0034】
例えば、泥酔している虞のある者を不審対象として検出するための複合行動パターン32は、図6に示すように、不審対象候補の移動方向の各変化点の前後の時刻における、不審対象候補と各周辺対象との移動ベクトルの差違等の条件式とすることができる。不審対象候補と周辺対象とが互いに接近し、不審対象候補のみが移動方向を変化させ、移動方向変化点の直後の時刻において不審対象候補と周辺対象とが互いに離れていく場合、不審対象候補が移動する周辺対象を避けるという行動をとったと考えられる。対象の移動ベクトルは、動線情報作成部22により作成される。
【0035】
図6に示す複合行動パターン32は、不審対象候補の移動方向変化点の直前の時刻における条件式が、不審対象候補の移動ベクトルをV_target、周辺対象の移動ベクトルをV_arroundとすると、V_target=−(V_arround)であり、不審対象候補と周辺対象とが同一線上で互いに接近する場合を示している。或いは、不審対象候補の移動方向変化点の直前の時刻において、単に不審対象候補と周辺対象との間の距離dが減少する場合としても良い。
【0036】
不審対象候補の移動方向変化点の前後の時刻における条件式は、移動方向変化点直前の周辺対象の移動ベクトルをV_arround1、移動方向変化点直後の周辺対象の移動ベクトルをV_arround2とすると、V_arround1=V_arround2であり、周辺対象の移動ベクトルが変化していないことを示している。
【0037】
不審対象候補の移動方向変化点の直後の時刻における条件式は、V_target≠V_arroundであり、不審対象候補と周辺対象とが互いに異なる移動ベクトルを有する場合を示している。或いは、不審対象候補の移動方向変化点の直後の時刻において、単に不審対象候補と周辺対象との間の距離dが増加し、不審対象候補と周辺対象とが互いに離れていく場合としても良い。
【0038】
行動情報単位の所定時間内の各移動方向変化点の時刻の前後において、複合行動判定部26が複合行動パターン32の条件と合致する不審対象候補を検出した場合、不審対象候補は泥酔状態でなく、逆行する人々を避けながら歩いている状態として、不審対象でないと判定することができる。
【0039】
また、複合行動判定部26は、図6に示す複合行動パターン32を第1パターンとする場合、複合行動パターン32の第2パターンとして、図7に示すような条件式に基づいて、第1パターンに基づく判定の後、不審対象候補に対して不審対象か否かを再判定するようにしても良い。
【0040】
図7に示す複合行動パターン32の第2パターンでは、行動情報単位の所定時間内において不審対象候補と周辺対象とが概ね同じ方向に移動し、不審対象候補が移動方向変化点で周辺対象に接近し方向を変えている場合を想定している。或いは、周辺対象が停止状態であり、不審対象候補が各周辺対象に接近するようなパターンとしても良い。このような場合、複合行動判定部26は、不審対象候補に対して、周辺対象と会話をするなどの集団行動をとっているものとして不審対象でないと再判定し、不審者対象候補から除外することができる。
【0041】
また、複合行動判定部26は、図8に示すように、行動情報毎の各不審対象候補の移動方向変化点について、周辺対象の数、複合行動パターン32の第1パターン及び第2パターンに基づく判定結果を集計し、各判定結果に基づいて不審対象候補が不審対象か否かを判定するようにしても良い。例えば複合行動判定部26は、図6に示す判定結果において、第1パターン又は第2パターンと合致する不審対象候補の移動方向変化点(180,200)及び(150,400)の動線情報を除外し、残された動線情報に対して、再度ステップS4〜ステップS8の処理を行うようにしても良い。或いは、複合行動判定部26は、図8に示す判定結果全体の移動方向変化点に対して、第1パターン又は第2パターンと合致する移動方向変化点の数が所定の閾値に満たないか否かにより、不審対象候補が不審対象か否かを判定するようにしても良い。
【0042】
上述のように複合行動判定部26は、周辺対象判定部25により検出された周辺対象の影響を受けることにより、不審行動パターン31と合致する行動情報を有した不審対象候補に対して、不審対象でないと判定することができる。
【0043】
ステップS8において不審対象候補が不審対象でないと判定された場合、ステップS9において、複合行動判定部26は、不審対象候補に設定され、不審対象でないと判定された対象を不審対象候補から除外する。
【0044】
ステップS7において周辺対象が検出されなかった場合及びステップS8において不審対象候補が不審対象と判定された場合、ステップS10において、不審行動判定部24は、不審対象候補を不審対象と確定する。
【0045】
不審対象候補が不審対象と確定されると、ステップS11において、報知処理部27は、警告、通報等の報知信号を出力部5に出力させる報知処理を行う。出力部5は、報知処理部27の報知処理により、ネットワークを介して管理者、警察等に対して通報を行う報知信号を出力する。或いは、出力部5は、報知信号として不審対象及び周辺対象に対して光、音声等により警告を行うようにしても良い。
【0046】
<他の動作例>
本発明の実施の形態に係る監視装置は、不審行動パターン31及び複合行動パターン32として図9及び図10に示す条件を用いることにより、スーパーマーケット、本屋等の店舗における万引き等を行う虞のある対象を不審対象として検出できる。以下、図2のフローチャートを用いて、本発明の実施の形態に係る監視装置の他の動作例として、万引き等を行う虞のある対象を不審対象として検出する場合について説明する。図2に示すステップS1〜S4、S9〜S11の処理は、上述の泥酔している虞のある者を不審対象として検出する場合の説明と実質的に同様であるので重複する説明を省略する。
【0047】
ステップS5において、不審行動判定部24は、図9に示す不審行動パターン31に合致する行動情報を有する対象を不審対象候補と判定し、ステップS6において、不審対象候補に設定する。
【0048】
例えば、万引き等を行う虞のある者を不審対象として検出するための不審行動パターン31は、図9に示すように、それぞれ所定の閾値を設定された同一位置通過頻度、同一位置停止時間、移動距離等の条件とすることができる。万引きの事前行動として、機会を狙って店内を周回、往復等しながら複数回同じ場所に戻ってきたり、その場付近で停止したりすることが考えられる。図9に示す不審行動パターン31は、所定の範囲内を通過する頻度である同一位置通過頻度がC回以上、所定の範囲内に停留する時間である同一位置停止時間がD秒以上、所定時間内の移動距離Em以内となる場合を示している。
【0049】
ステップS7において、周辺対象判定部25は、ステップS6において設定された不審対象候補に対する周辺対象を検出し、周辺対象が検出されたか否かを判定する。周辺対象が検出された場合、ステップS8に進み、周辺対象が検出されない場合、ステップS10に進む。
【0050】
ステップS8において、複合行動判定部26は、不審対象候補の動線情報と周辺対象の動線情報とから、図10に示す複合行動パターン32に基づいて、不審対象候補が不審対象か否かを判定する。複合行動判定部26は、図10に示す複合行動パターン32に合致する対象に対して、不審対象でないと判定する。
【0051】
例えば、万引き等を行う虞のある者を不審対象として検出するための複合行動パターン32は、図10に示すように、不審対象候補が所定の範囲に停止している時間において、V_arround=0、即ち周辺対象が停止状態であり、停止状態の周辺対象の数がF人以上の場合を示している。この場合、不審対象候補は、複数の停止している周辺対象によって商品までの経路が妨げられ、商品取得のため周辺対象がなくなるのを待っている状況であると考えることができる。
【0052】
また、複合行動判定部26は、上述の泥酔している虞のある者を不審対象として検出する場合の説明と同様に、種々の判定結果に基づいて、不審対象候補に対して不審対象か否かを再判定するようにしても良い。
【0053】
本発明の実施の形態に係る監視装置によれば、個々の対象の動線情報から不審対象候補を検出することに加え、周辺対象の影響により不審対象候補と判定された対象を不審対象候補から除外することにより、誤検出を低減し、高精度に不審対象を検出できる。
【0054】
(その他の実施の形態)
上記のように本発明の実施の形態を記載したが、この開示の一部をなす論述及び図面は本発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
【0055】
既に述べた実施の形態においては、行動情報パターン31、複合行動パターン32として、不審対象候補、周辺対象等の各対象の移動ベクトルを用いた他の種々の条件式を設定することができる。また、既に述べた実施の形態において、不審対象候補、周辺対象等の各対象の移動ベクトルについて、同一方向、逆方向、停止状態等との表現をしているが、所定の範囲内で実質的に同一方向、逆方向、停止状態であればよい。
【0056】
このように、本発明はここでは記載していない様々な実施の形態等を含むことは勿論である。したがって、本発明の技術的範囲は上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。
また、本発明は上記した装置の機能をコンピュータに実現させるためのプログラムを含むものである。これらのプログラムは、記録媒体から読み取られコンピュータに取り込まれてもよいし、通信ネットワークを介して伝送されてコンピュータに取り込まれてもよい。
【符号の説明】
【0057】
1…撮像部
2…処理部
3…記憶部
4…入力部
5…出力部
21…対象検出部
22…動線情報作成部
23…行動情報作成部
24…不審行動判定部
25…周辺対象判定部
26…複合行動判定部
27…報知処理部
31…不審行動パターン
32…複合行動パターン
【技術分野】
【0001】
本発明は、高精度に不審対象を検出できる監視装置、監視方法及び監視プログラムに関する。
【背景技術】
【0002】
従来の監視装置は、無人の敷地、建物等に侵入者が侵入した後に、侵入者を検知して通報したり、事件発生後に、記録した映像から犯人を確認したりする事後処理がほとんどであった。このような監視装置は、多くの人が行き来する場所や状況において、あまり効果が得られず、また犯罪、事故の未然防止にはつながらない。犯罪、事故を未然に防ぐためには、監視する対象である人物等の行動を認識し、犯罪、事故につながる虞のある不審な対象の行動を前もって検出して対処することが必要と考えられる。
【0003】
例えば、特許文献1では、画像解析により、検出した人物(対象)の位置と時刻との関係から、対象の移動と停止の状態を認識し、それを行動情報として用い、予め定められた特異な行動パターン(常識外の停止時間、移動時間、停止と移動の繰り返しなど)に合致する状態を抽出することで、不審行動を検出するという技術が提案されている。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2010−272958号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、特許文献1の技術では、監視する対象が複数存在する状況においても、それぞれの対象について、それぞれの対象の行動情報のみで判断を行っているため、周囲の対象の影響が考慮されておらず、誤った判断をしかねない。
【0006】
例えば駅のホームにおいて、蛇行するようなある対象の移動の軌跡(動線)が検出された場合に、泥酔していて線路に落ちる危険性があるのか、逆行する他の多数の乗客を避けながら歩いているだけなのかは、他の人物の存在や移動の状態がわからないと区別できない。よって、単に他の人物を避けながら歩いている対象に対して、不審対象と誤検出してしまう可能性がある。
本発明は、誤検出を低減し、高精度に不審対象を検出できる監視装置、監視方法及び監視プログラムを提供することを目的とする。
【課題を解決するための手段】
【0007】
上記目的を達成するために、本発明の第1の態様は、動画像を撮像する撮像部(1)と、前記撮像部により撮像された動画像から監視する対象を検出する対象検出部(21)と、前記対象検出部により検出された対象の移動ベクトルから動線情報を作成する動線情報作成部(22)と、前記動線情報作成部(22)により作成された動線情報から、予め設定された不審行動パターン(31)に基づいて、前記対象検出部(21)により検出された対象が不審対象候補か否かを判定する不審行動判定部(24)と、前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターン(31)に基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定部(26)とを備える監視装置であることを要旨とする。
【0008】
また、本発明の第1の対象に係る監視装置においては、前記複合行動判定部(26)は、前記不審対象候補の動線情報と前記周辺対象の動線情報との関係を前記複合行動パターンと比較することにより、前記不審行動判定部による不審対象候補の判定が前記周辺対象の影響であると判定した場合は、前記不審対象候補を不審対象でないと判定する。
【0009】
また、本発明の第1の対象に係る監視装置においては、前記動線情報作成部(22)の作成する動線情報は、少なくとも対象の移動ベクトルの変化点と前記変化点が生じたときの時刻情報とを含む。
【0010】
また、本発明の第1の対象に係る監視装置においては、前記不審行動判定部(24)は、前記動線情報から算出される、所定時間内の対象の移動距離、所定時間内の対象の移動ベクトルの変化頻度、所定時間内の対象の同一位置通過頻度の内、少なくとも1つの情報から、前記不審行動パターン(31)に基づいて、対象が不審対象候補か否かを判定する。
【0011】
また、本発明の第1の対象に係る監視装置においては、前記複合行動判定部(26)が前記不審対象候補を不審対象と判定した場合において、外部に報知信号を出力する出力部(5)を更に備える。
【0012】
本発明の第2の態様は、動画像を撮像する撮像ステップと、前記撮像ステップにおいて撮像された動画像から監視する対象を検出する対象検出ステップと、前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップとを含む監視方法であることを要旨とする。
【0013】
本発明の第3の態様は、動画像から監視する対象を検出する対象検出ステップと、前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップとを含む処理をコンピュータに実行させる監視プログラムであることを要旨とする。
【発明の効果】
【0014】
本発明によれば、誤検出を低減し、高精度に不審対象を監視することができる監視装置、監視方法及び監視プログラムを提供することができる。
【図面の簡単な説明】
【0015】
【図1】本発明の実施の形態に係る監視装置の基本的な構成を説明する模式的なブロック図である。
【図2】本発明の実施の形態に係る監視方法を説明するフローチャートである。
【図3】本発明の実施の形態に係る監視装置に用いる動線情報の一例を説明する表である。
【図4】本発明の実施の形態に係る監視装置に用いる行動情報の一例を説明する表である。
【図5】本発明の実施の形態に係る監視装置に用いる不審行動パターンの一例を説明する表である。
【図6】本発明の実施の形態に係る監視装置に用いる複合行動パターンの第1パターンの一例を説明する表である。
【図7】本発明の実施の形態に係る監視装置に用いる複合行動パターンの第2パターンの一例を説明する表である。
【図8】本発明の実施の形態に係る監視装置に用いる複合行動判定部による判定結果の一例を説明する表である。
【図9】本発明の実施の形態に係る監視装置の他の動作例に用いる不審行動パターンを説明する表である。
【図10】本発明の実施の形態に係る監視装置の他の動作例に用いる複合行動パターンを説明する表である。
【発明を実施するための形態】
【0016】
次に、図面を参照して、本発明の実施の形態を説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。但し、以下に示す実施の形態は、本発明の技術的思想を具体化するための装置や方法、及びこれらの装置に用いられるプログラムを例示するものであって、本発明の技術的思想は、下記の実施の形態に例示した装置や方法、及びこれらの装置に用いられるプログラムに特定するものでない。本発明の技術的思想は、特許請求の範囲に記載された技術的範囲内において、種々の変更を加えることができる。
【0017】
(監視装置)
本発明の形態に係る監視装置は、図1に示すように、動画像を撮像する撮像部1と、本発明の実施の形態に係る監視装置が行う種々の演算を処理する処理部2と、プログラムデータ、動画像データ等の種々のデータを記憶する記憶部3と、ユーザの操作に応じた信号や外部からのデータ等を処理部2に入力する入力部4と、警告、通報等の報知信号を出力する出力部5とを備える。
撮像部1は、ビデオカメラ、赤外線カメラ等の撮像装置からなり、監視する対象を含む動画像を撮像する。
【0018】
記憶部3は、監視する対象に対して不審対象候補であるか判定する条件のデータである不審行動パターン31と、不審対象候補に対して不審対象であるか判定する条件のデータである複合行動パターン32とを記憶する。記憶部3は、例えば、磁気ディスク、半導体メモリ等の記憶装置から構成できる。図1に示す記憶部3に記憶される不審行動パターン31、複合行動パターン32は、それぞれ論理構造としての表示であり、不審行動パターン31、複合行動パターン32、記憶部3に記憶される他のデータ等は、それぞれ同一の記憶装置に記憶されて良く、別個の記憶装置に記憶されても良い。
【0019】
処理部2は、対象検出部21と、動線情報作成部22と、行動情報作成部23と、不審行動判定部24と、周辺対象判定部25と、複合行動判定部26と、報知処理部27とを論理構造として有する。処理部2は、例えばマイクロコンピュータ等の演算処理装置からなる。図1に示す処理部2を構成する各部は、論理構造としての表示であり、それぞれ同一のハードウェアである演算処理装置により構成されて良く、別個のハードウェアにより構成されても構わない。
対象検出部21は、撮像部1により撮像された動画像から、監視する対象を検出する。
【0020】
対象検出部21は、動画像を構成する静止画であるフレームを画像処理することにより、対象を検出する。対象検出部21が行う画像処理として、例えば輝度勾配情報から、フレーム上の輪郭、形状を検出することができるHOG(Histograms of Oriented Gradients)を用いた画像処理を採用することができる。
【0021】
動線情報作成部22は、図3に示すように、対象検出部21により動画像から検出された全ての対象について、対象の移動ベクトルの変化点(位置座標)と、変化点における時刻とを検出し、動線情報として作成する。動線情報作成部22により作成された動線情報は、動線情報作成部22が記憶しても良く、記憶部3に記憶させても良い。動線情報作成部22は、各対象について単位時間毎のフレーム上の位置を取得し、取得した位置の時系列の変化から移動ベクトルを生成する。移動ベクトルの変化点は、例えば、対象が所定以上の角度を有して曲がった点、対象の速度が所定以上の加速度を有して変化した点等を採用可能である。即ち、動線情報は、おおよそ直線をおおよそ等速で対象が進んだ領域と時間を表すことができる。停止している対象が移動する場合、または移動している対象が停止する場合は、対象の移動ベクトルの変化点となり、動線情報において位置の変化していない時間の区間は、対象が停止状態であることを示す。
【0022】
行動情報作成部23は、図4に示すように、動線情報作成部22により作成されたそれぞれの動線情報から、所定時間内における対象の移動距離(領域)、移動方向変化頻度、同一位置通過頻度、同一位置停止時間等を算出し、行動情報として作成する。行動情報作成部23により作成された行動情報は、行動情報作成部23が記憶しても良く、記憶部3に記憶させても良い。
【0023】
不審行動判定部24は、不審行動パターン31に基づいて、行動情報作成部23により作成された各対象の所定時間分の行動情報から、各対象が不審対象候補か否かを判定する。不審行動判定部24は、不審行動パターン31に設定された条件に合致する行動情報を有する対象を、不審対象候補として設定する。
【0024】
周辺対象判定部25は、不審行動判定部24により設定された不審対象候補の周辺に存在する他の対象である周辺対象が検出されたか否かを判定する。周辺対象判定部25は、不審対象候補の移動方向の変化点における時刻、不審対象候補が一点に長時間停止している間の時刻等、不審対象候補の動線情報の時刻について、不審対象候補以外の対象の動線情報から各対象の位置を算出し、不審対象候補から所定の範囲内の位置にある対象を不審対象候補の周辺対象として検出する。
【0025】
複合行動判定部26は、複合行動パターン32に基づいて、不審対象候補の動線情報と周辺対象の動線情報とから、不審行動判定部24により設定された不審対象候補を不審対象と確定するか否かを判定する。複合行動判定部26は、不審対象と判定しない対象を不審対象候補から除外する。複合行動判定部26は、不審対象候補の動線情報と周辺対象の動線情報との関係を複合パターン32と比較することにより、不審対象行動判定部24による不審対象候補の判定が、周辺対象の影響であると判定した場合は、不審対象候補を不審対象でないと判定する。
報知処理部27は、警告、通報等の報知信号を出力部5に出力させる。
【0026】
入力部4は、例えば、キーボード、マウス、タッチパネル等の入力装置や、外部装置と接続するコネクタ等で構成される。入力部4は、ユーザの操作により、不審行動パターン31、複合行動パターン32の内容を設定、変更することができる。
出力部5は、例えば、ネットワークを介して管理者、警察等へ通報したり、不審対象及び周辺対象に対して警告したりするための報知信号を外部に出力する。
【0027】
(監視方法)
図2のフローチャートを用いて、本発明の実施の形態に係る監視装置を用いた監視方法の一例について説明する。
先ず、ステップS1において、処理部2は、撮像部1が撮像した動画像を撮像部1から入力する。
ステップS2において、対象検出部21は、撮像部1から入力した動画像から、監視する人物等の対象をすべて検出する。
【0028】
ステップS3において、動線情報作成部22は、図3に示すように、対象検出部21が検出した各対象について、移動ベクトルを生成し、移動ベクトルの変化点毎に動線情報を作成する。
【0029】
ステップS4において、行動情報作成部23は、図4に示すように、動線情報作成部22が作成した動線情報について、それぞれ所定時間内の行動情報を作成する。図4に示す最下行(移動距離「108」の行)の行動情報は、図3に示す動線情報の時刻22:00:02〜22:01:55の間のものである。この最下行の行動情報は、時刻22:00:02〜22:01:55の間、対象の移動距離108、移動方向変化頻度8回、同一位置通過頻度0回、同一位置停止時間10秒であったことを示している。
【0030】
ステップS5において、不審行動判定部24は、行動情報作成部23が作成した行動情報について、予め設定された不審行動パターン31に基づいて、不審対象候補となる対象があるか否かを判定する。不審行動判定部24は、不審行動パターン31に合致する行動情報を検出すると、検出された行動情報を有する対象を、不審対象候補と判定する。不審対象候補と判定される対象がある場合、ステップS6において、不審対象候補と判定された対象を不審対象候補に設定する。
【0031】
例えば、泥酔している虞のある者を不審対象として検出するための不審行動パターン31は、図5に示すように、移動距離Am以内且つ移動方向(移動ベクトル)変化頻度B回以上と設定されることができる。泥酔時の歩行者は、ふらつきながら歩き、通常の歩行者と比べて速度が遅く、所定時間内の移動距離が短いと考えられる。図4に示す行動情報が、図5に示す不審行動パターン31に合致する場合、不審行動判定部24は、不審行動パターン31と合致する行動情報を有する対象を不審対象候補と判定する。
【0032】
ステップS7において、周辺対象判定部25は、ステップS6において設定された不審対象候補に対する周辺対象を検出し、周辺対象が検出されたか否か判定する。周辺対象が検出された場合ステップS8に進み、周辺対象が検出されない場合、ステップS10に進む。
【0033】
ステップS8において、複合行動判定部26は、不審対象候補の動線情報と周辺対象の動線情報とから、予め設定された複合行動パターン32に基づいて、ステップS6において設定された不審対象候補に対して、不審対象か否かを判定する。
【0034】
例えば、泥酔している虞のある者を不審対象として検出するための複合行動パターン32は、図6に示すように、不審対象候補の移動方向の各変化点の前後の時刻における、不審対象候補と各周辺対象との移動ベクトルの差違等の条件式とすることができる。不審対象候補と周辺対象とが互いに接近し、不審対象候補のみが移動方向を変化させ、移動方向変化点の直後の時刻において不審対象候補と周辺対象とが互いに離れていく場合、不審対象候補が移動する周辺対象を避けるという行動をとったと考えられる。対象の移動ベクトルは、動線情報作成部22により作成される。
【0035】
図6に示す複合行動パターン32は、不審対象候補の移動方向変化点の直前の時刻における条件式が、不審対象候補の移動ベクトルをV_target、周辺対象の移動ベクトルをV_arroundとすると、V_target=−(V_arround)であり、不審対象候補と周辺対象とが同一線上で互いに接近する場合を示している。或いは、不審対象候補の移動方向変化点の直前の時刻において、単に不審対象候補と周辺対象との間の距離dが減少する場合としても良い。
【0036】
不審対象候補の移動方向変化点の前後の時刻における条件式は、移動方向変化点直前の周辺対象の移動ベクトルをV_arround1、移動方向変化点直後の周辺対象の移動ベクトルをV_arround2とすると、V_arround1=V_arround2であり、周辺対象の移動ベクトルが変化していないことを示している。
【0037】
不審対象候補の移動方向変化点の直後の時刻における条件式は、V_target≠V_arroundであり、不審対象候補と周辺対象とが互いに異なる移動ベクトルを有する場合を示している。或いは、不審対象候補の移動方向変化点の直後の時刻において、単に不審対象候補と周辺対象との間の距離dが増加し、不審対象候補と周辺対象とが互いに離れていく場合としても良い。
【0038】
行動情報単位の所定時間内の各移動方向変化点の時刻の前後において、複合行動判定部26が複合行動パターン32の条件と合致する不審対象候補を検出した場合、不審対象候補は泥酔状態でなく、逆行する人々を避けながら歩いている状態として、不審対象でないと判定することができる。
【0039】
また、複合行動判定部26は、図6に示す複合行動パターン32を第1パターンとする場合、複合行動パターン32の第2パターンとして、図7に示すような条件式に基づいて、第1パターンに基づく判定の後、不審対象候補に対して不審対象か否かを再判定するようにしても良い。
【0040】
図7に示す複合行動パターン32の第2パターンでは、行動情報単位の所定時間内において不審対象候補と周辺対象とが概ね同じ方向に移動し、不審対象候補が移動方向変化点で周辺対象に接近し方向を変えている場合を想定している。或いは、周辺対象が停止状態であり、不審対象候補が各周辺対象に接近するようなパターンとしても良い。このような場合、複合行動判定部26は、不審対象候補に対して、周辺対象と会話をするなどの集団行動をとっているものとして不審対象でないと再判定し、不審者対象候補から除外することができる。
【0041】
また、複合行動判定部26は、図8に示すように、行動情報毎の各不審対象候補の移動方向変化点について、周辺対象の数、複合行動パターン32の第1パターン及び第2パターンに基づく判定結果を集計し、各判定結果に基づいて不審対象候補が不審対象か否かを判定するようにしても良い。例えば複合行動判定部26は、図6に示す判定結果において、第1パターン又は第2パターンと合致する不審対象候補の移動方向変化点(180,200)及び(150,400)の動線情報を除外し、残された動線情報に対して、再度ステップS4〜ステップS8の処理を行うようにしても良い。或いは、複合行動判定部26は、図8に示す判定結果全体の移動方向変化点に対して、第1パターン又は第2パターンと合致する移動方向変化点の数が所定の閾値に満たないか否かにより、不審対象候補が不審対象か否かを判定するようにしても良い。
【0042】
上述のように複合行動判定部26は、周辺対象判定部25により検出された周辺対象の影響を受けることにより、不審行動パターン31と合致する行動情報を有した不審対象候補に対して、不審対象でないと判定することができる。
【0043】
ステップS8において不審対象候補が不審対象でないと判定された場合、ステップS9において、複合行動判定部26は、不審対象候補に設定され、不審対象でないと判定された対象を不審対象候補から除外する。
【0044】
ステップS7において周辺対象が検出されなかった場合及びステップS8において不審対象候補が不審対象と判定された場合、ステップS10において、不審行動判定部24は、不審対象候補を不審対象と確定する。
【0045】
不審対象候補が不審対象と確定されると、ステップS11において、報知処理部27は、警告、通報等の報知信号を出力部5に出力させる報知処理を行う。出力部5は、報知処理部27の報知処理により、ネットワークを介して管理者、警察等に対して通報を行う報知信号を出力する。或いは、出力部5は、報知信号として不審対象及び周辺対象に対して光、音声等により警告を行うようにしても良い。
【0046】
<他の動作例>
本発明の実施の形態に係る監視装置は、不審行動パターン31及び複合行動パターン32として図9及び図10に示す条件を用いることにより、スーパーマーケット、本屋等の店舗における万引き等を行う虞のある対象を不審対象として検出できる。以下、図2のフローチャートを用いて、本発明の実施の形態に係る監視装置の他の動作例として、万引き等を行う虞のある対象を不審対象として検出する場合について説明する。図2に示すステップS1〜S4、S9〜S11の処理は、上述の泥酔している虞のある者を不審対象として検出する場合の説明と実質的に同様であるので重複する説明を省略する。
【0047】
ステップS5において、不審行動判定部24は、図9に示す不審行動パターン31に合致する行動情報を有する対象を不審対象候補と判定し、ステップS6において、不審対象候補に設定する。
【0048】
例えば、万引き等を行う虞のある者を不審対象として検出するための不審行動パターン31は、図9に示すように、それぞれ所定の閾値を設定された同一位置通過頻度、同一位置停止時間、移動距離等の条件とすることができる。万引きの事前行動として、機会を狙って店内を周回、往復等しながら複数回同じ場所に戻ってきたり、その場付近で停止したりすることが考えられる。図9に示す不審行動パターン31は、所定の範囲内を通過する頻度である同一位置通過頻度がC回以上、所定の範囲内に停留する時間である同一位置停止時間がD秒以上、所定時間内の移動距離Em以内となる場合を示している。
【0049】
ステップS7において、周辺対象判定部25は、ステップS6において設定された不審対象候補に対する周辺対象を検出し、周辺対象が検出されたか否かを判定する。周辺対象が検出された場合、ステップS8に進み、周辺対象が検出されない場合、ステップS10に進む。
【0050】
ステップS8において、複合行動判定部26は、不審対象候補の動線情報と周辺対象の動線情報とから、図10に示す複合行動パターン32に基づいて、不審対象候補が不審対象か否かを判定する。複合行動判定部26は、図10に示す複合行動パターン32に合致する対象に対して、不審対象でないと判定する。
【0051】
例えば、万引き等を行う虞のある者を不審対象として検出するための複合行動パターン32は、図10に示すように、不審対象候補が所定の範囲に停止している時間において、V_arround=0、即ち周辺対象が停止状態であり、停止状態の周辺対象の数がF人以上の場合を示している。この場合、不審対象候補は、複数の停止している周辺対象によって商品までの経路が妨げられ、商品取得のため周辺対象がなくなるのを待っている状況であると考えることができる。
【0052】
また、複合行動判定部26は、上述の泥酔している虞のある者を不審対象として検出する場合の説明と同様に、種々の判定結果に基づいて、不審対象候補に対して不審対象か否かを再判定するようにしても良い。
【0053】
本発明の実施の形態に係る監視装置によれば、個々の対象の動線情報から不審対象候補を検出することに加え、周辺対象の影響により不審対象候補と判定された対象を不審対象候補から除外することにより、誤検出を低減し、高精度に不審対象を検出できる。
【0054】
(その他の実施の形態)
上記のように本発明の実施の形態を記載したが、この開示の一部をなす論述及び図面は本発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
【0055】
既に述べた実施の形態においては、行動情報パターン31、複合行動パターン32として、不審対象候補、周辺対象等の各対象の移動ベクトルを用いた他の種々の条件式を設定することができる。また、既に述べた実施の形態において、不審対象候補、周辺対象等の各対象の移動ベクトルについて、同一方向、逆方向、停止状態等との表現をしているが、所定の範囲内で実質的に同一方向、逆方向、停止状態であればよい。
【0056】
このように、本発明はここでは記載していない様々な実施の形態等を含むことは勿論である。したがって、本発明の技術的範囲は上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。
また、本発明は上記した装置の機能をコンピュータに実現させるためのプログラムを含むものである。これらのプログラムは、記録媒体から読み取られコンピュータに取り込まれてもよいし、通信ネットワークを介して伝送されてコンピュータに取り込まれてもよい。
【符号の説明】
【0057】
1…撮像部
2…処理部
3…記憶部
4…入力部
5…出力部
21…対象検出部
22…動線情報作成部
23…行動情報作成部
24…不審行動判定部
25…周辺対象判定部
26…複合行動判定部
27…報知処理部
31…不審行動パターン
32…複合行動パターン
【特許請求の範囲】
【請求項1】
動画像を撮像する撮像部と、
前記撮像部により撮像された動画像から監視する対象を検出する対象検出部と、
前記対象検出部により検出された対象の移動ベクトルから動線情報を作成する動線情報作成部と、
前記動線情報作成部により作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出部により検出された対象が不審対象候補か否かを判定する不審行動判定部と、
前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定部と
を備えることを特徴とする監視装置。
【請求項2】
前記複合行動判定部は、前記不審対象候補の動線情報と前記周辺対象の動線情報との関係を前記複合パターンと比較することにより、前記不審対象行動判定部による不審対象候補の判定が前記周辺対象の影響であると判定した場合は、前記不審対象候補を不審対象でないと判定することを特徴とする請求項1に記載の監視装置。
【請求項3】
前記動線情報作成部の作成する動線情報は、少なくとも対象の移動ベクトルの変化点と前記変化点が生じたときの時刻情報とを含むことを特徴とする請求項1又は2に記載の監視装置。
【請求項4】
前記不審行動判定部は、前記動線情報から算出される、所定時間内の対象の移動距離、所定時間内の対象の移動ベクトルの変化頻度、所定時間内の対象の同一位置通過頻度の内、少なくとも1つの情報から、前記不審行動パターンに基づいて、対象が不審対象候補か否かを判定することを特徴とする請求項1〜3のいずれか1項に記載の監視装置。
【請求項5】
前記複合行動判定部が前記不審対象候補を不審対象と判定した場合において、外部に報知信号を出力する出力部を更に備えることを特徴とする請求項1〜4のいずれか1項に記載の監視装置。
【請求項6】
動画像を撮像する撮像ステップと、
前記撮像ステップにおいて撮像された動画像から監視する対象を検出する対象検出ステップと、
前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、
前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、
前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップと
を含むことを特徴とする監視方法。
【請求項7】
動画像から監視する対象を検出する対象検出ステップと、
前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、
前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、
前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップと
を含む処理をコンピュータに実行させることを特徴とする監視プログラム。
【請求項1】
動画像を撮像する撮像部と、
前記撮像部により撮像された動画像から監視する対象を検出する対象検出部と、
前記対象検出部により検出された対象の移動ベクトルから動線情報を作成する動線情報作成部と、
前記動線情報作成部により作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出部により検出された対象が不審対象候補か否かを判定する不審行動判定部と、
前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定部と
を備えることを特徴とする監視装置。
【請求項2】
前記複合行動判定部は、前記不審対象候補の動線情報と前記周辺対象の動線情報との関係を前記複合パターンと比較することにより、前記不審対象行動判定部による不審対象候補の判定が前記周辺対象の影響であると判定した場合は、前記不審対象候補を不審対象でないと判定することを特徴とする請求項1に記載の監視装置。
【請求項3】
前記動線情報作成部の作成する動線情報は、少なくとも対象の移動ベクトルの変化点と前記変化点が生じたときの時刻情報とを含むことを特徴とする請求項1又は2に記載の監視装置。
【請求項4】
前記不審行動判定部は、前記動線情報から算出される、所定時間内の対象の移動距離、所定時間内の対象の移動ベクトルの変化頻度、所定時間内の対象の同一位置通過頻度の内、少なくとも1つの情報から、前記不審行動パターンに基づいて、対象が不審対象候補か否かを判定することを特徴とする請求項1〜3のいずれか1項に記載の監視装置。
【請求項5】
前記複合行動判定部が前記不審対象候補を不審対象と判定した場合において、外部に報知信号を出力する出力部を更に備えることを特徴とする請求項1〜4のいずれか1項に記載の監視装置。
【請求項6】
動画像を撮像する撮像ステップと、
前記撮像ステップにおいて撮像された動画像から監視する対象を検出する対象検出ステップと、
前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、
前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、
前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップと
を含むことを特徴とする監視方法。
【請求項7】
動画像から監視する対象を検出する対象検出ステップと、
前記対象検出ステップにおいて検出された対象の移動ベクトルから動線情報を作成する動線情報作成ステップと、
前記動線情報作成ステップにおいて作成された動線情報から、予め設定された不審行動パターンに基づいて、前記対象検出ステップにおいて検出された対象が不審対象候補か否かを判定する不審行動判定ステップと、
前記不審対象候補の動線情報と、前記不審対象候補の周辺に存在する周辺対象の動線情報とから、予め設定された条件である複合行動パターンに基づいて、前記不審対象候補が不審対象か否かを判定する複合行動判定ステップと
を含む処理をコンピュータに実行させることを特徴とする監視プログラム。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【公開番号】特開2012−243128(P2012−243128A)
【公開日】平成24年12月10日(2012.12.10)
【国際特許分類】
【出願番号】特願2011−113473(P2011−113473)
【出願日】平成23年5月20日(2011.5.20)
【出願人】(308036402)株式会社JVCケンウッド (1,152)
【Fターム(参考)】
【公開日】平成24年12月10日(2012.12.10)
【国際特許分類】
【出願日】平成23年5月20日(2011.5.20)
【出願人】(308036402)株式会社JVCケンウッド (1,152)
【Fターム(参考)】
[ Back to top ]