侵入監視装置及び侵入監視方法
【課題】カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害検知が可能な侵入監視装置を提供する。
【解決手段】動物体検知部２２の検知結果を基に小領域ごとに単位時間当たりの検知数を測定して人通りの多少を推定する動物体存在領域推定部２３と、基準画像生成部２１で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部２４とを備え、撮像部１への妨害検知判定領域を動的に選定するようにした。これにより、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができる。
【解決手段】動物体検知部２２の検知結果を基に小領域ごとに単位時間当たりの検知数を測定して人通りの多少を推定する動物体存在領域推定部２３と、基準画像生成部２１で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部２４とを備え、撮像部１への妨害検知判定領域を動的に選定するようにした。これにより、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影画像から動物体を検知すると同時に、カメラの映像に対する妨害を検知する侵入監視装置及び侵入監視方法に関する。
【背景技術】
【０００２】
従来の侵入監視に関する提案として、特許文献１に記載されている「カメラ妨害検知方式」が知られている。この特許文献１に記載されたカメラ妨害検知方式は、撮影画像から得られる画像と、予め生成しておいた動物体の映っていない基準画像との輝度差分処理を行い、画素単位での差分値が第１の閾値以上の画素数を計測し、その数が第２の閾値以上であった場合にカメラへの妨害として検知するものである。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−０７７５１７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した従来の技術では、入力画像と基準画像との間で一定の差分がある画素数の量のみを利用してカメラ妨害を検知しているため、人の混雑やカメラの絞り制御等でカメラ映像内の大半に輝度変化が発生した場合にもカメラへの妨害と判定する閾値を超過し、誤判定してしまうという課題がある。例えば、図４は、従来技術の課題を示す図である。同図に示すように、入力画像である現画像１００には多数の人物１０１と車両１０２が存在していることから、カメラ映像内の大半に輝度変化が発生することになる。このため、基準画像１１０のとの比較において、カメラへの妨害と判定する閾値を超過し、誤判定することがある。
【０００５】
本発明は、係る事情に鑑みてなされたものであり、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害検知が可能な侵入監視装置及び侵入監視方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の侵入監視装置は、監視対象領域を撮影する撮像部と、前記撮像部から得られた画像データから動物体の映っていない基準画像を生成する基準画像生成部と、前記基準画像生成部で生成された基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知する動物体検知部と、前記動物体検知部の検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定する動物体存在領域推定部と、前記基準画像生成部で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部と、前記動物体存在領域推定部の推定結果と前記特徴量有効領域選定部の選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定する判定領域優先度設定部と、前記判定領域優先度設定部で選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像生成部で生成された基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するカメラ妨害検知部と、を備えた。
【０００７】
上記構成によれば、動物体が存在し得る領域を推定でき、また、撮像部で得られた画像と基準画像とのマッチング処理に適した特徴量の有効領域を選定できる。更に、双方の情報を利用することで、マッチングに適した領域の優先度を選定することができるため、人通りの多い路地や、外乱（木の葉の揺れが定常的に続く領域）からの影響を低減することができ、精度良くカメラ妨害検知が可能となる。
【０００８】
上記構成において、前記動物体存在領域推定部は、画像をブロックに区切り、定期的に検知された動物体の移動軌跡座標が属するブロックについて存在確率を算出及び更新する。
【０００９】
上記構成によれば、刻々と人通りの量が変化する繁華街での誤報や日照変動などの影響を更に軽減することができる。
【００１０】
上記構成において、前記動物体存在領域推定部は、ブロック単位で時間帯ごとに存在確率を算出、記録及び更新する。
【００１１】
上記構成によれば、時間帯によって人通りの激しくなる繁華街での誤報や日照変動などの影響を更に軽減することができる。
【００１２】
上記構成において、前記動物体存在領域推定部は、算出した存在確率が、対象領域内で一様である場合、対象領域内で動物体が検出されていないブロックをランダム又は固定で選出する。
【００１３】
上記構成によれば、動物体の動きにつられて、カメラ揺れが発生したと誤検知する割合を軽減することができる。
【００１４】
上記構成において、前記特徴量有効領域選定部は、基準画像における特徴量をブロック毎に算出し、その数や評価値を測定する。
【００１５】
上記構成によれば、日照変動や車両のヘッドライトに照射された際の輝度変動に起因する誤検知を抑制することができる。
【００１６】
上記構成において、前記特徴量有効領域選定部は、画像上で空に位置する領域を計算対象外とする。
【００１７】
上記構成によれば、余分な計算処理負荷を軽減でき、後のマッチング精度向上にも繋がる。
【００１８】
上記構成において、前記判定領域優先度設定部は、マッチング処理を行う領域の優先度として、動物体の存在しない領域に対して、動物体の存在しない確率と有効な特徴量領域を考慮して決定する。
【００１９】
上記構成によれば、動物体の動きに左右されやすい領域や、マッチングに不向きな領域をマッチング対象から除外することができ、カメラ妨害検知の精度を向上することができる。
【００２０】
上記構成において、前記カメラ妨害検知部は、前記判定領域優先度設定部で選定された優先度の高い判定領域において、前記特徴量有効領域選定部が利用した特徴量を用いたマッチング処理を行う。
【００２１】
上記構成によれば、明度変化に頑健な特徴量が少ない場合でも、マッチング処理を実行することができ、検知漏れを抑制することができる。
【００２２】
上記構成において、前記カメラ妨害検知部は、マッチング処理において、マッチング対象のブロックを毎フレーム変化する優先度に応じて動的に変更する。
【００２３】
上記構成によれば、刻々と変化するカメラ設置環境に応じて精度よくカメラ妨害検知処理を行うことができる。
【００２４】
本発明の侵入監視方法は、監視対象領域を撮影する撮像部から得られた画像データから動物体の映っていない基準画像を生成するステップと、前記基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知するステップと、動物体検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定するステップと、前記基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定するステップと、動物体存在領域推定結果と特徴量有効領域選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定するステップと、判定領域の優先度が選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するステップと、を備えた。
【００２５】
上記方法によれば、動物体が存在し得る領域を推定でき、また、撮像部で得られた画像と基準画像とのマッチング処理に適した特徴量の有効領域を選定できる。更に、双方の情報を利用することで、マッチングに適した領域の優先度を選定することができるため、人通りの多い路地や、外乱（木の葉の揺れが定常的に続く領域）からの影響を低減することができ、精度良くカメラ妨害検知が可能となる。
【発明の効果】
【００２６】
本発明によれば、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができる。
【図面の簡単な説明】
【００２７】
【図１】本発明の一実施の形態に係る侵入監視装置の概略構成を示すブロック図
【図２】図１の侵入監視装置の動作を説明するための図
【図３】図１の侵入監視装置の動作を説明するためのフローチャート
【図４】従来の侵入監視技術を説明するための図
【発明を実施するための形態】
【００２８】
以下、本発明を実施するための好適な実施の形態について、図面を参照して詳細に説明する。
【００２９】
図１は、本発明の一実施の形態に係る侵入監視装置の概略構成を示すブロック図である。同図において、本実施の形態の侵入監視装置２は、基準画像生成部２１と、動物体検知部２２と、動物体存在領域推定部２３と、特徴量有効領域選定部２４と、判定領域優先度設定部２５と、カメラ妨害検知部２６とを備える。
【００３０】
基準画像生成部２１は、監視対象領域を撮影する撮像部（カメラ）１から得られる画像データから動物体の映っていない基準画像を生成する。動物体検知部２２は、基準画像生成部２１で生成された基準画像と撮像部１から得られた画像との比較処理によって物体の存在する領域を検知する。動物体存在領域推定部２３は、動物体検知部２２の検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定する。すなわち、動物体存在領域推定部２３は、画像を８×８画素程度のブロックに区切り、定期的（例えば毎フレーム）に、動物体検知部２２から出力された物体の存在する位置データを基に、動物体の移動軌跡座標（例えば、検知領域の中心下端点）が属するブロックについて存在確率を算出するとともに更新する。このようにすることで、刻々と人通りの量が変化する繁華街での誤報や日照変動などの影響を更に軽減することができる。また、存在確率は、ブロック単位で時間帯ごとに学習（算出、記録及び更新）する。このようにすることで、時間帯によって人通りの激しくなる繁華街での誤報や日照変動などの影響を更に軽減することができる。更に、存在確率が対象領域内で一様である場合には、対象領域内で動物体が検出されていないブロックからランダム（又は固定）で選出する。このようにすることで、動物体の動きにつられて、カメラ揺れが発生したと誤検知する割合を軽減することができる。
【００３１】
特徴量有効領域選定部２４は、基準画像生成部２１で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する。すなわち、基準画像生成部２１で生成された基準画像において、特徴量を８×８画素程度のブロック毎に算出し、その数や評価値を測定し、特徴量の数が多く、評価値の高い領域を特徴量有効領域として選定する。ここで、特徴量は、色情報や、明度変化に頑健なもの（ＳＩＦＴ：Scale Invariant Feature Transform、ＨＯＧ：Histograms of Oriented Gradients、ＲＲＣ：Radial Reach Correlation等）を利用することで、日照変動や車両のヘッドライトに照射された際の輝度変動に起因する誤検知を抑制することができる。また、画像上で空に位置する領域は計算対象外とし、余分な計算処理負荷を削減し、後のマッチング精度の向上にも繋がる。
【００３２】
判定領域優先度設定部２５は、動物体存在領域推定部２３の推定結果と特徴量有効領域選定部２４の選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定する。判定領域優先度設定部２５は、マッチング処理を行う領域の優先度として、動物体の存在しない領域に対して、動物体の存在しない確率と有効な特徴量領域を考慮して決定する。優先度は、人が通らず（存在確率が低く）、特徴量の多い領域（特徴量の有効度が高い領域）で高く設定し、人通りが多く（存在確率が高く）、特徴量の少ない領域（特徴量の有効度が低い領域）で低く設定する。このように、判定領域優先度を設定することで、動物体の動きに左右されやすい領域や、マッチングに不向きな領域をマッチング対象から除外することができ、カメラ妨害検知の精度を向上することができる。
【００３３】
カメラ妨害検知部２６は、判定領域優先度設定部２５で選定された妨害検知判定領域において撮像部１から得られた画像と基準画像生成部２１で生成された基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定する。この場合、判定領域優先度設定部２５で選定された優先度の高いブロックにおいて、特徴量有効領域選定部２４が利用した特徴量を用いたマッチング処理を行う。但し、特徴量の少ないブロックが高い優先度で選定された場合は、輝度情報や色情報を用いたブロックマッチングを行うことで、明度変化に頑健な特徴量が少ない場合でも、マッチング処理を実行することができ、検知漏れを抑制することができる。また、マッチングを行うブロックは、毎フレーム変化する優先度に応じて、動的に変更しながら行うことで、刻々と変化するカメラ設置環境に応じて精度良く検知処理を行うことができる。カメラ妨害検知部２６は、カメラ妨害と判定した場合、カメラ妨害検知信号を出力する。
【００３４】
次に、図２に示す動作説明図及び図３に示すフローチャートを参照して、本実施の形態の侵入監視装置２の動作について説明する。
【００３５】
まず、基準画像生成部２１が、撮像部１で得られた画像データを入力し（ステップＳ１）、次いで、入力した画像データを輝度値やカラーの平滑化等で学習・更新し、動物体（人物１０１や車両１０２等）の映っていない画像（すなわち、基準画像１１０）を生成する（ステップＳ２）。そして、この基準画像データを撮像部１で得られた画像データ（すなわち、現画像１００）と共に動物体検知部２２に入力する。
【００３６】
次に、動物体検知部２２が、現画像１００と基準画像１１０を輝度差分等によって画素単位で比較することによって現画像１００内に存在する動物体を検知し、動物体の画像上の位置を出力する（ステップＳ３）。次に、動物体存在領域推定部２３が、画像を８×８画素程度のブロックに区切り、フレーム毎に動物体検知部２２から出力された動物体の存在する位置データを基に移動軌跡座標（検知領域の中心下端点）が属するブロックについて存在確率を算出するとともに更新し、動物体の存在確率をブロック毎に算出する。また、存在確率をブロック単位で時間帯ごとに学習（算出、記録及び更新）する。更に、存在確率が対象領域内で一様である場合には、対象領域内で動物体が検出されていないブロックからランダム(又は固定)で選出する（ステップＳ４）。このように、人通りの多い領域を学習する（図２の（Ａ））。
【００３７】
次に、特徴量有効領域選定部２４が、基準画像生成部２１で生成された基準画像１１０において、特徴量を８×８画素程度のブロックごとに算出し、その数や評価値を測定し、特徴量の数が多く、評価値の高い領域を特徴量有効領域として選定する（ステップＳ５）。このように、基準画像１１０から特徴量の多い領域を抽出する（図２の（Ｂ））。
【００３８】
次に、判定領域優先度設定部２５が、動物体検知部２２で検知された動物体の存在する領域以外を対象とし、動物体存在領域推定部２３で推定された動物体の存在しない確率と特徴量有効領域選定部２４で抽出された特徴量有効領域を考慮してマッチングを行う領域の優先度を設定する（ステップＳ６）。
【００３９】
次に、カメラ妨害検知部２６が、撮像部１で得られた現画像１００と基準画像生成部２１で生成された基準画像１１０とのマッチングを、判定領域優先度設定部２５で設定された優先度の高い領域で行い（ステップＳ７）、カメラ妨害の有無を判定する（ステップＳ８）。ただし、特徴量の少ないブロックが高い優先度で選定された場合は、輝度情報や色情報を用いたブロックマッチングを行う。また、マッチングを行うブロックは毎フレーム変化する優先度に応じて、動的に変更しながら行うことで、刻々と変化するカメラ設置環境に応じて精度良く検知処理を行うことができる。
【００４０】
カメラ妨害検知部２６が、カメラ妨害を検知した場合、カメラ妨害検知信号を出力する（ステップＳ９）。カメラ妨害検知信号が出力されると、報知部３１がカメラ妨害を報知する。また、表示部３２には、カメラ妨害が検知された旨を報知するためのメッセージ等が表示される。
【００４１】
このように本実施の形態の侵入監視装置２によれば、動物体検知部２２の検知結果を基に小領域ごとに単位時間当たりの検知数を測定して人通りの多少を推定する動物体存在領域推定部２３と、基準画像生成部２１で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部２４とを備え、撮像部１への妨害検知判定領域を動的に選定するようにしたので、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができる。
【産業上の利用可能性】
【００４２】
本発明は、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができるといった効果を有し、監視カメラへの妨害行為検知の用途に有用である。
【符号の説明】
【００４３】
１ 撮像部
２ 侵入監視装置
２１ 基準画像生成部
２２ 動物体検知部
２３ 動物体存在領域推定部
２４ 特徴量有効領域選定部
２５ 判定領域優先度設定部
２６ カメラ妨害検知部
３１ 報知部
３２ 表示部
１００ 現画像
１０１ 人物
１０２ 車両
１１０ 基準画像
【技術分野】
【０００１】
本発明は、撮影画像から動物体を検知すると同時に、カメラの映像に対する妨害を検知する侵入監視装置及び侵入監視方法に関する。
【背景技術】
【０００２】
従来の侵入監視に関する提案として、特許文献１に記載されている「カメラ妨害検知方式」が知られている。この特許文献１に記載されたカメラ妨害検知方式は、撮影画像から得られる画像と、予め生成しておいた動物体の映っていない基準画像との輝度差分処理を行い、画素単位での差分値が第１の閾値以上の画素数を計測し、その数が第２の閾値以上であった場合にカメラへの妨害として検知するものである。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−０７７５１７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した従来の技術では、入力画像と基準画像との間で一定の差分がある画素数の量のみを利用してカメラ妨害を検知しているため、人の混雑やカメラの絞り制御等でカメラ映像内の大半に輝度変化が発生した場合にもカメラへの妨害と判定する閾値を超過し、誤判定してしまうという課題がある。例えば、図４は、従来技術の課題を示す図である。同図に示すように、入力画像である現画像１００には多数の人物１０１と車両１０２が存在していることから、カメラ映像内の大半に輝度変化が発生することになる。このため、基準画像１１０のとの比較において、カメラへの妨害と判定する閾値を超過し、誤判定することがある。
【０００５】
本発明は、係る事情に鑑みてなされたものであり、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害検知が可能な侵入監視装置及び侵入監視方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の侵入監視装置は、監視対象領域を撮影する撮像部と、前記撮像部から得られた画像データから動物体の映っていない基準画像を生成する基準画像生成部と、前記基準画像生成部で生成された基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知する動物体検知部と、前記動物体検知部の検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定する動物体存在領域推定部と、前記基準画像生成部で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部と、前記動物体存在領域推定部の推定結果と前記特徴量有効領域選定部の選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定する判定領域優先度設定部と、前記判定領域優先度設定部で選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像生成部で生成された基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するカメラ妨害検知部と、を備えた。
【０００７】
上記構成によれば、動物体が存在し得る領域を推定でき、また、撮像部で得られた画像と基準画像とのマッチング処理に適した特徴量の有効領域を選定できる。更に、双方の情報を利用することで、マッチングに適した領域の優先度を選定することができるため、人通りの多い路地や、外乱（木の葉の揺れが定常的に続く領域）からの影響を低減することができ、精度良くカメラ妨害検知が可能となる。
【０００８】
上記構成において、前記動物体存在領域推定部は、画像をブロックに区切り、定期的に検知された動物体の移動軌跡座標が属するブロックについて存在確率を算出及び更新する。
【０００９】
上記構成によれば、刻々と人通りの量が変化する繁華街での誤報や日照変動などの影響を更に軽減することができる。
【００１０】
上記構成において、前記動物体存在領域推定部は、ブロック単位で時間帯ごとに存在確率を算出、記録及び更新する。
【００１１】
上記構成によれば、時間帯によって人通りの激しくなる繁華街での誤報や日照変動などの影響を更に軽減することができる。
【００１２】
上記構成において、前記動物体存在領域推定部は、算出した存在確率が、対象領域内で一様である場合、対象領域内で動物体が検出されていないブロックをランダム又は固定で選出する。
【００１３】
上記構成によれば、動物体の動きにつられて、カメラ揺れが発生したと誤検知する割合を軽減することができる。
【００１４】
上記構成において、前記特徴量有効領域選定部は、基準画像における特徴量をブロック毎に算出し、その数や評価値を測定する。
【００１５】
上記構成によれば、日照変動や車両のヘッドライトに照射された際の輝度変動に起因する誤検知を抑制することができる。
【００１６】
上記構成において、前記特徴量有効領域選定部は、画像上で空に位置する領域を計算対象外とする。
【００１７】
上記構成によれば、余分な計算処理負荷を軽減でき、後のマッチング精度向上にも繋がる。
【００１８】
上記構成において、前記判定領域優先度設定部は、マッチング処理を行う領域の優先度として、動物体の存在しない領域に対して、動物体の存在しない確率と有効な特徴量領域を考慮して決定する。
【００１９】
上記構成によれば、動物体の動きに左右されやすい領域や、マッチングに不向きな領域をマッチング対象から除外することができ、カメラ妨害検知の精度を向上することができる。
【００２０】
上記構成において、前記カメラ妨害検知部は、前記判定領域優先度設定部で選定された優先度の高い判定領域において、前記特徴量有効領域選定部が利用した特徴量を用いたマッチング処理を行う。
【００２１】
上記構成によれば、明度変化に頑健な特徴量が少ない場合でも、マッチング処理を実行することができ、検知漏れを抑制することができる。
【００２２】
上記構成において、前記カメラ妨害検知部は、マッチング処理において、マッチング対象のブロックを毎フレーム変化する優先度に応じて動的に変更する。
【００２３】
上記構成によれば、刻々と変化するカメラ設置環境に応じて精度よくカメラ妨害検知処理を行うことができる。
【００２４】
本発明の侵入監視方法は、監視対象領域を撮影する撮像部から得られた画像データから動物体の映っていない基準画像を生成するステップと、前記基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知するステップと、動物体検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定するステップと、前記基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定するステップと、動物体存在領域推定結果と特徴量有効領域選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定するステップと、判定領域の優先度が選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するステップと、を備えた。
【００２５】
上記方法によれば、動物体が存在し得る領域を推定でき、また、撮像部で得られた画像と基準画像とのマッチング処理に適した特徴量の有効領域を選定できる。更に、双方の情報を利用することで、マッチングに適した領域の優先度を選定することができるため、人通りの多い路地や、外乱（木の葉の揺れが定常的に続く領域）からの影響を低減することができ、精度良くカメラ妨害検知が可能となる。
【発明の効果】
【００２６】
本発明によれば、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができる。
【図面の簡単な説明】
【００２７】
【図１】本発明の一実施の形態に係る侵入監視装置の概略構成を示すブロック図
【図２】図１の侵入監視装置の動作を説明するための図
【図３】図１の侵入監視装置の動作を説明するためのフローチャート
【図４】従来の侵入監視技術を説明するための図
【発明を実施するための形態】
【００２８】
以下、本発明を実施するための好適な実施の形態について、図面を参照して詳細に説明する。
【００２９】
図１は、本発明の一実施の形態に係る侵入監視装置の概略構成を示すブロック図である。同図において、本実施の形態の侵入監視装置２は、基準画像生成部２１と、動物体検知部２２と、動物体存在領域推定部２３と、特徴量有効領域選定部２４と、判定領域優先度設定部２５と、カメラ妨害検知部２６とを備える。
【００３０】
基準画像生成部２１は、監視対象領域を撮影する撮像部（カメラ）１から得られる画像データから動物体の映っていない基準画像を生成する。動物体検知部２２は、基準画像生成部２１で生成された基準画像と撮像部１から得られた画像との比較処理によって物体の存在する領域を検知する。動物体存在領域推定部２３は、動物体検知部２２の検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定する。すなわち、動物体存在領域推定部２３は、画像を８×８画素程度のブロックに区切り、定期的（例えば毎フレーム）に、動物体検知部２２から出力された物体の存在する位置データを基に、動物体の移動軌跡座標（例えば、検知領域の中心下端点）が属するブロックについて存在確率を算出するとともに更新する。このようにすることで、刻々と人通りの量が変化する繁華街での誤報や日照変動などの影響を更に軽減することができる。また、存在確率は、ブロック単位で時間帯ごとに学習（算出、記録及び更新）する。このようにすることで、時間帯によって人通りの激しくなる繁華街での誤報や日照変動などの影響を更に軽減することができる。更に、存在確率が対象領域内で一様である場合には、対象領域内で動物体が検出されていないブロックからランダム（又は固定）で選出する。このようにすることで、動物体の動きにつられて、カメラ揺れが発生したと誤検知する割合を軽減することができる。
【００３１】
特徴量有効領域選定部２４は、基準画像生成部２１で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する。すなわち、基準画像生成部２１で生成された基準画像において、特徴量を８×８画素程度のブロック毎に算出し、その数や評価値を測定し、特徴量の数が多く、評価値の高い領域を特徴量有効領域として選定する。ここで、特徴量は、色情報や、明度変化に頑健なもの（ＳＩＦＴ：Scale Invariant Feature Transform、ＨＯＧ：Histograms of Oriented Gradients、ＲＲＣ：Radial Reach Correlation等）を利用することで、日照変動や車両のヘッドライトに照射された際の輝度変動に起因する誤検知を抑制することができる。また、画像上で空に位置する領域は計算対象外とし、余分な計算処理負荷を削減し、後のマッチング精度の向上にも繋がる。
【００３２】
判定領域優先度設定部２５は、動物体存在領域推定部２３の推定結果と特徴量有効領域選定部２４の選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定する。判定領域優先度設定部２５は、マッチング処理を行う領域の優先度として、動物体の存在しない領域に対して、動物体の存在しない確率と有効な特徴量領域を考慮して決定する。優先度は、人が通らず（存在確率が低く）、特徴量の多い領域（特徴量の有効度が高い領域）で高く設定し、人通りが多く（存在確率が高く）、特徴量の少ない領域（特徴量の有効度が低い領域）で低く設定する。このように、判定領域優先度を設定することで、動物体の動きに左右されやすい領域や、マッチングに不向きな領域をマッチング対象から除外することができ、カメラ妨害検知の精度を向上することができる。
【００３３】
カメラ妨害検知部２６は、判定領域優先度設定部２５で選定された妨害検知判定領域において撮像部１から得られた画像と基準画像生成部２１で生成された基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定する。この場合、判定領域優先度設定部２５で選定された優先度の高いブロックにおいて、特徴量有効領域選定部２４が利用した特徴量を用いたマッチング処理を行う。但し、特徴量の少ないブロックが高い優先度で選定された場合は、輝度情報や色情報を用いたブロックマッチングを行うことで、明度変化に頑健な特徴量が少ない場合でも、マッチング処理を実行することができ、検知漏れを抑制することができる。また、マッチングを行うブロックは、毎フレーム変化する優先度に応じて、動的に変更しながら行うことで、刻々と変化するカメラ設置環境に応じて精度良く検知処理を行うことができる。カメラ妨害検知部２６は、カメラ妨害と判定した場合、カメラ妨害検知信号を出力する。
【００３４】
次に、図２に示す動作説明図及び図３に示すフローチャートを参照して、本実施の形態の侵入監視装置２の動作について説明する。
【００３５】
まず、基準画像生成部２１が、撮像部１で得られた画像データを入力し（ステップＳ１）、次いで、入力した画像データを輝度値やカラーの平滑化等で学習・更新し、動物体（人物１０１や車両１０２等）の映っていない画像（すなわち、基準画像１１０）を生成する（ステップＳ２）。そして、この基準画像データを撮像部１で得られた画像データ（すなわち、現画像１００）と共に動物体検知部２２に入力する。
【００３６】
次に、動物体検知部２２が、現画像１００と基準画像１１０を輝度差分等によって画素単位で比較することによって現画像１００内に存在する動物体を検知し、動物体の画像上の位置を出力する（ステップＳ３）。次に、動物体存在領域推定部２３が、画像を８×８画素程度のブロックに区切り、フレーム毎に動物体検知部２２から出力された動物体の存在する位置データを基に移動軌跡座標（検知領域の中心下端点）が属するブロックについて存在確率を算出するとともに更新し、動物体の存在確率をブロック毎に算出する。また、存在確率をブロック単位で時間帯ごとに学習（算出、記録及び更新）する。更に、存在確率が対象領域内で一様である場合には、対象領域内で動物体が検出されていないブロックからランダム(又は固定)で選出する（ステップＳ４）。このように、人通りの多い領域を学習する（図２の（Ａ））。
【００３７】
次に、特徴量有効領域選定部２４が、基準画像生成部２１で生成された基準画像１１０において、特徴量を８×８画素程度のブロックごとに算出し、その数や評価値を測定し、特徴量の数が多く、評価値の高い領域を特徴量有効領域として選定する（ステップＳ５）。このように、基準画像１１０から特徴量の多い領域を抽出する（図２の（Ｂ））。
【００３８】
次に、判定領域優先度設定部２５が、動物体検知部２２で検知された動物体の存在する領域以外を対象とし、動物体存在領域推定部２３で推定された動物体の存在しない確率と特徴量有効領域選定部２４で抽出された特徴量有効領域を考慮してマッチングを行う領域の優先度を設定する（ステップＳ６）。
【００３９】
次に、カメラ妨害検知部２６が、撮像部１で得られた現画像１００と基準画像生成部２１で生成された基準画像１１０とのマッチングを、判定領域優先度設定部２５で設定された優先度の高い領域で行い（ステップＳ７）、カメラ妨害の有無を判定する（ステップＳ８）。ただし、特徴量の少ないブロックが高い優先度で選定された場合は、輝度情報や色情報を用いたブロックマッチングを行う。また、マッチングを行うブロックは毎フレーム変化する優先度に応じて、動的に変更しながら行うことで、刻々と変化するカメラ設置環境に応じて精度良く検知処理を行うことができる。
【００４０】
カメラ妨害検知部２６が、カメラ妨害を検知した場合、カメラ妨害検知信号を出力する（ステップＳ９）。カメラ妨害検知信号が出力されると、報知部３１がカメラ妨害を報知する。また、表示部３２には、カメラ妨害が検知された旨を報知するためのメッセージ等が表示される。
【００４１】
このように本実施の形態の侵入監視装置２によれば、動物体検知部２２の検知結果を基に小領域ごとに単位時間当たりの検知数を測定して人通りの多少を推定する動物体存在領域推定部２３と、基準画像生成部２１で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部２４とを備え、撮像部１への妨害検知判定領域を動的に選定するようにしたので、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができる。
【産業上の利用可能性】
【００４２】
本発明は、カメラに映った人や車両の混雑をカメラへの監視妨害などの事象として誤検知することなく、精度良くカメラ妨害を検知することができるといった効果を有し、監視カメラへの妨害行為検知の用途に有用である。
【符号の説明】
【００４３】
１ 撮像部
２ 侵入監視装置
２１ 基準画像生成部
２２ 動物体検知部
２３ 動物体存在領域推定部
２４ 特徴量有効領域選定部
２５ 判定領域優先度設定部
２６ カメラ妨害検知部
３１ 報知部
３２ 表示部
１００ 現画像
１０１ 人物
１０２ 車両
１１０ 基準画像
【特許請求の範囲】
【請求項１】
監視対象領域を撮影する撮像部と、
前記撮像部から得られた画像データから動物体の映っていない基準画像を生成する基準画像生成部と、
前記基準画像生成部で生成された基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知する動物体検知部と、
前記動物体検知部の検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定する動物体存在領域推定部と、
前記基準画像生成部で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部と、
前記動物体存在領域推定部の推定結果と前記特徴量有効領域選定部の選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定する判定領域優先度設定部と、
前記判定領域優先度設定部で選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像生成部で生成された基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するカメラ妨害検知部と、
を備えた侵入監視装置。
【請求項２】
前記動物体存在領域推定部は、画像をブロックに区切り、定期的に検知された動物体の移動軌跡座標が属するブロックについて存在確率を算出及び更新する請求項１に記載の侵入監視装置。
【請求項３】
前記動物体存在領域推定部は、ブロック単位で時間帯ごとに存在確率を算出、記録及び更新する請求項２に記載の侵入監視装置。
【請求項４】
前記動物体存在領域推定部は、算出した存在確率が、対象領域内で一様である場合、対象領域内で動物体が検出されていないブロックをランダム又は固定で選出する請求項２又は請求項３に記載の侵入監視装置。
【請求項５】
前記特徴量有効領域選定部は、基準画像における特徴量をブロック毎に算出し、その数や評価値を測定する請求項１乃至請求項４のいずれか一項に記載の侵入監視装置。
【請求項６】
前記特徴量有効領域選定部は、画像上で空に位置する領域を計算対象外とする請求項１乃至請求項５のいずれか一項に記載の侵入監視装置。
【請求項７】
前記判定領域優先度設定部は、マッチング処理を行う領域の優先度として、動物体の存在しない領域に対して、動物体の存在しない確率と有効な特徴量領域を考慮して決定する請求項１乃至請求項６のいずれか一項に記載の侵入監視装置。
【請求項８】
前記カメラ妨害検知部は、前記判定領域優先度設定部で選定された優先度の高い判定領域において、前記特徴量有効領域選定部が利用した特徴量を用いたマッチング処理を行う請求項５乃至請求項７のいずれか一項に記載の侵入監視装置。
【請求項９】
前記カメラ妨害検知部は、マッチング処理において、マッチング対象のブロックを毎フレーム変化する優先度に応じて動的に変更する請求項１乃至請求項８のいずれか一項に記載の侵入監視装置。
【請求項１０】
監視対象領域を撮影する撮像部から得られた画像データから動物体の映っていない基準画像を生成するステップと、
前記基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知するステップと、
動物体検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定するステップと、
前記基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定するステップと、
動物体存在領域推定結果と特徴量有効領域選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定するステップと、
判定領域の優先度が選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するステップと、
を備えた侵入監視方法。
【請求項１】
監視対象領域を撮影する撮像部と、
前記撮像部から得られた画像データから動物体の映っていない基準画像を生成する基準画像生成部と、
前記基準画像生成部で生成された基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知する動物体検知部と、
前記動物体検知部の検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定する動物体存在領域推定部と、
前記基準画像生成部で生成された基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定する特徴量有効領域選定部と、
前記動物体存在領域推定部の推定結果と前記特徴量有効領域選定部の選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定する判定領域優先度設定部と、
前記判定領域優先度設定部で選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像生成部で生成された基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するカメラ妨害検知部と、
を備えた侵入監視装置。
【請求項２】
前記動物体存在領域推定部は、画像をブロックに区切り、定期的に検知された動物体の移動軌跡座標が属するブロックについて存在確率を算出及び更新する請求項１に記載の侵入監視装置。
【請求項３】
前記動物体存在領域推定部は、ブロック単位で時間帯ごとに存在確率を算出、記録及び更新する請求項２に記載の侵入監視装置。
【請求項４】
前記動物体存在領域推定部は、算出した存在確率が、対象領域内で一様である場合、対象領域内で動物体が検出されていないブロックをランダム又は固定で選出する請求項２又は請求項３に記載の侵入監視装置。
【請求項５】
前記特徴量有効領域選定部は、基準画像における特徴量をブロック毎に算出し、その数や評価値を測定する請求項１乃至請求項４のいずれか一項に記載の侵入監視装置。
【請求項６】
前記特徴量有効領域選定部は、画像上で空に位置する領域を計算対象外とする請求項１乃至請求項５のいずれか一項に記載の侵入監視装置。
【請求項７】
前記判定領域優先度設定部は、マッチング処理を行う領域の優先度として、動物体の存在しない領域に対して、動物体の存在しない確率と有効な特徴量領域を考慮して決定する請求項１乃至請求項６のいずれか一項に記載の侵入監視装置。
【請求項８】
前記カメラ妨害検知部は、前記判定領域優先度設定部で選定された優先度の高い判定領域において、前記特徴量有効領域選定部が利用した特徴量を用いたマッチング処理を行う請求項５乃至請求項７のいずれか一項に記載の侵入監視装置。
【請求項９】
前記カメラ妨害検知部は、マッチング処理において、マッチング対象のブロックを毎フレーム変化する優先度に応じて動的に変更する請求項１乃至請求項８のいずれか一項に記載の侵入監視装置。
【請求項１０】
監視対象領域を撮影する撮像部から得られた画像データから動物体の映っていない基準画像を生成するステップと、
前記基準画像と前記撮像部から得られた画像との比較処理によって物体の存在する領域を検知するステップと、
動物体検知結果を基に小領域ごとに単位時間当たりの検知数を測定し、人通りの多少を推定するステップと、
前記基準画像を基に明るさ変動に頑健な特徴点が多く存在する領域を選定するステップと、
動物体存在領域推定結果と特徴量有効領域選定結果とを基にカメラ妨害検知を行う際の判定領域に優先度をつけて選定するステップと、
判定領域の優先度が選定された妨害検知判定領域において前記撮像部から得られた画像と前記基準画像とのマッチングを行い、マッチングの評価値に応じてカメラの妨害か否かを判定するステップと、
を備えた侵入監視方法。
【図１】
【図２】
【図３】
【図４】
【図２】
【図３】
【図４】
【公開番号】特開２０１２−１２８５０８（Ｐ２０１２−１２８５０８Ａ）
【公開日】平成２４年７月５日（２０１２．７．５）
【国際特許分類】
【出願番号】特願２０１０−２７７１６９（Ｐ２０１０−２７７１６９）
【出願日】平成２２年１２月１３日（２０１０．１２．１３）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２４年７月５日（２０１２．７．５）
【国際特許分類】
【出願日】平成２２年１２月１３日（２０１０．１２．１３）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]