軌跡表示装置
【課題】監視者が複数の移動物体の行動を視認しやすい軌跡表示ができる軌跡表示装置を提供する。
【解決手段】軌跡表示装置において、記憶部３は移動物体を追跡して得られた時系列の物体位置を当該移動物体ごとに記憶し、軌跡画像生成部４１は物体位置それぞれと対応する対応座標の周辺領域に所定数の粒状図像を分散配置して軌跡画像を生成し、表示部５は生成された軌跡画像を表示する。前記所定数は、周辺領域において粒状図像間に隙間が形成される程度の多数に設定されており、軌跡同士が交差している部分でも一方軌跡の隙間に他方軌跡の粒状図像が視認可能に表示される。
【解決手段】軌跡表示装置において、記憶部３は移動物体を追跡して得られた時系列の物体位置を当該移動物体ごとに記憶し、軌跡画像生成部４１は物体位置それぞれと対応する対応座標の周辺領域に所定数の粒状図像を分散配置して軌跡画像を生成し、表示部５は生成された軌跡画像を表示する。前記所定数は、周辺領域において粒状図像間に隙間が形成される程度の多数に設定されており、軌跡同士が交差している部分でも一方軌跡の隙間に他方軌跡の粒状図像が視認可能に表示される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、移動物体の軌跡を表示する軌跡表示装置に関する。
【背景技術】
【０００２】
従来、監視員が不審者等の行動を把握するために、監視画像を処理して移動物体を追跡し、その軌跡を表示する画像監視システムが提案されている。
特許文献１には、検知した複数個の目標物体画像を同一画面に重ね合わせて同時表示するとともに、これらの目標物体画像を結んだ移動軌跡を表示する画像監視システムが記載されている。
また特許文献２には、移動する人物のマークを、軌跡として一定時間ずつ残しながら表示するシステムが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平９−２２４２３７号公報
【特許文献２】特開２００５−１８２３９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
不審者の行動には、他人をつけまわすストーカー行為、他人との接触など当該不審者以外との関係により把握可能となる行動がある。監視員がこのような行動を把握するには、複数人の軌跡を同時に表示する必要がある。
【０００５】
しかしながら、従来技術により複数人の軌跡を表示すると、複数人の線同士が絡み合った表示、或いは複数人のマーク同士が交錯し合い重なり合った表示となり、複数人に関する行動を監視員が瞬時に視認することが困難であった。
また、これらの表示において軌跡が交差した箇所だけを見ても時間の流れを把握しにくく、監視員が複数人に関する行動を把握するには、各線の先端からの長さを比較する、各マークの先頭からの数を数えて比較する、或いはプレイバックするなどしなくてはならなかった。
【０００６】
本発明は、上記課題を鑑みてなされたものであり、監視者が複数の移動物体の行動を視認しやすい軌跡表示ができる軌跡表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
かかる課題を解決するために、本発明は、移動物体の軌跡を表示する軌跡表示装置であって、移動物体を追跡して得られた時系列の物体位置を記憶する記憶部と、物体位置それぞれと対応する対応座標の周辺領域に所定数の粒状図像を分散配置して軌跡画像を生成する軌跡画像生成部と、軌跡画像を表示する表示部と、を備え、所定数は、周辺領域において粒状図像間に隙間が形成される程度の多数に設定される軌跡表示装置を提供する。
【０００８】
かかる軌跡表示装置において、軌跡画像生成部は、乱数に基づいて分散配置を行なうことが好ましい。
【０００９】
かかる軌跡表示装置において、軌跡画像生成部は、時系列中の時刻ごとに粒状図像の大きさを異ならせることが好ましい。
【００１０】
かかる軌跡表示装置において、軌跡画像生成部は、時刻が古いほど粒状図像の大きさを小さく設定することが好ましい。
【００１１】
かかる軌跡表示装置において、軌跡画像生成部は、粒状図像それぞれを対応座標から当該粒状図像の配置位置までの近さに応じた透過度にて合成することが好ましい。
【発明の効果】
【００１２】
本発明によれば、監視者が複数の移動物体の行動を視認しやすい軌跡表示が可能となる。特に、複数の移動物体同士が交錯しあっても、監視者がそれぞれの軌跡を区別して認識しやすい軌跡表示が可能となる。
【図面の簡単な説明】
【００１３】
【図１】画像監視装置１の構成を示す図である。
【図２】粒サイズ３２の設定を例示した図である。
【図３】基準色３３の設定を例示した図である。
【図４】画像監視処理全体のフローチャートを示す図である。
【図５】軌跡画像生成処理のフローチャートを示す図である。
【図６】位置履歴３１とその各物体位置に設定される描画単位領域の関係を例示した図である。
【図７】図６の位置履歴３１に対して生成された軌跡画像の例である。
【図８】移動物体が交錯したときの軌跡画像の例である。
【発明を実施するための形態】
【００１４】
以下、本発明に係る軌跡表示装置を用いた画像監視装置について図を参照しつつ説明する。
【００１５】
軌跡表示装置は、人等の移動物体を追跡した結果として得られる時系列の物体位置に対応した軌跡画像を表示する。特に、この軌跡表示装置は、各物体位置と対応する対応座標の周辺領域それぞれに多数の粒状図像を分散配置して軌跡画像を生成し、当該軌跡画像を表示する。
【００１６】
［画像監視装置１の構成］
図１に画像監視装置１の全体構成を示す。画像監視装置１は、撮像部２、記憶部３及び表示部５が制御部４に接続されてなる。
【００１７】
撮像部２は、いわゆる監視カメラであり、複数の人物が通行するビルのエントランス等の監視空間を所定時間おきに撮像して監視画像を制御部４に順次出力する。監視画像が撮像される時間間隔は例えば１／５秒である。以下、この時間間隔で刻まれる時間の単位を時刻と称する。
【００１８】
記憶部３は、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等のメモリ装置である。記憶部３は、各種プログラムや各種データを記憶し、制御部４との間でこれらの情報を入出力する。各種データには、追跡用情報３０、位置履歴３１、粒サイズ３２、基準色３３が含まれる。
【００１９】
追跡用情報３０は、移動物体の位置を追跡するために生成され、参照される画像情報である。具体的には、追跡用情報３０は、監視空間の背景が撮像された背景画像、及び各移動物体の物体像から抽出された特徴量である。特徴量としては輝度ヒストグラム、テクスチャ情報等を用いることができる。追跡は、前後する時刻における物体像のうち特徴量が類似するものを同一移動物体として同定することにより各時刻における移動物体の位置を求める処理である。同定された移動物体には共通の識別子（物体ＩＤ）が付与され、特徴量は同定された移動物体の物体ＩＤと対応付けて記憶される。
【００２０】
位置履歴３１は、各移動物体の位置（物体位置）の履歴であり、追跡結果として生成され、記憶される。移動物体ごとにその物体ＩＤと対応付けた時系列の物体位置が記憶される。
【００２１】
画像監視装置１は、現時刻及び過去１０時刻の合計１１時刻の間の移動軌跡を表示する。この１１時刻が表示対象期間として予め設定されている。
【００２２】
粒サイズ３２は、軌跡画像に描画される粒状図像の大きさを規定する情報である。表示対象期間内の各時刻に対応して１１種類の大きさが設定されている。
【００２３】
粒状図像は円形であり、粒サイズ３２は半径で規定される。具体的には、現時刻用の半径が８画素、１時刻前用の半径が４画素、２時刻前用の半径が３．７画素、以下順に３〜８時刻前用の半径が３．３画素、３画素、２．７画素、２．３画素、２画素、１．６画素、１．３画素、１画素と設定されている。図２のテーブル３２０は、粒サイズ３２の上記設定を図示したものである。
【００２４】
各粒サイズ３２はその適用時刻が古くなるほど小さく設定されていることが特徴である。過去用の粒サイズ３２は比例関係に設定されているが、現時刻用の１６画素は過去用に比して特に大きな倍率で設定されている。これは現時刻の物体位置を特に強調するためである。尚、半径が小数の粒状図像は描画或いは表示の際に量子化される。
【００２５】
画像監視装置１は、移動物体ごとに異なる色にて軌跡を表示する。基準色３３は、これに対応して軌跡表示用の複数の基準色が列挙された色コード群である。監視空間を同時に通行する移動物体の数と比べて十分多い個数の色コードが予め設定され、各色コードには通し番号が付与されている。図３のテーブル３３０は、ＲＧＢ表色系の色コードとして定められた基準色３３の設定を例示したものである。
【００２６】
制御部４は、ＣＰＵ(Central Processing Unit)、ＤＳＰ(Digital Signal Processor)、ＭＣＵ(Micro Control
Unit)等の演算装置である。制御部４は、追跡部４０、軌跡画像生成部４１等の動作を記述したプログラムを記憶部３から読み出して実行することによりこれら各部として機能する。
【００２７】
追跡部４０は、追跡用情報３０を用いて監視画像内の移動物体を追跡し、各移動物体の位置履歴３１を記憶部３に記憶させる。そのために追跡部４０は、各時刻において監視画像を背景画像と比較して移動物体の物体像を抽出する物体像抽出処理と、前後する時刻に抽出された物体像の中から特徴量が一致する移動物体を同定する同定処理を繰り返し、同定された移動物体ごとにその重心位置を時系列に位置履歴３１として記憶させる。
【００２８】
このとき同定が得られなかった物体像があると、追跡部４０は新規移動物体が出現したとして当該物体像の特徴量に新規の物体ＩＤを付与して追跡用情報３０に追記する。新規の物体ＩＤの付与に伴って追跡部４０は当該物体ＩＤと対応する位置履歴３１を新たに作成する。
【００２９】
また同定が得られなかった物体ＩＤがあると、追跡部４０は当該物体ＩＤが表す移動物体が消失したとして当該物体ＩＤと対応する特徴量を記憶部３から削除する。
【００３０】
軌跡画像生成部４１は、記憶部３から位置履歴３１を読み出して、各位置履歴３１を構成する物体位置それぞれと対応する対応座標に多数の粒状図像を分散配置して軌跡画像を生成し、生成した軌跡画像を表示部５に出力する。生成処理の詳細は後述する。
【００３１】
表示部５は、液晶ディスプレイ、ＣＲＴ等のモニタ装置であり、入力された軌跡画像を表示する。表示された軌跡画像はストーカー行為や他人との接触を繰り返す行為などの不審行動の監視するために監視員等により視認される。
【００３２】
［画像監視装置１の動作］
図４のフローチャートを参照して、画像監視装置１の動作を説明する。
【００３３】
監視空間が無人であることを確認した監視員が画像監視装置１を起動すると各部は動作を開始し、撮像部２が監視画像を順次制御部４に入力し始める。制御部４の追跡部４０は起動直後に撮像された監視画像を用いて背景画像を初期化し、追跡用情報３０として記憶部３に記憶させる。初期化が終わると画像監視処理がスタートし、撮像部２から制御部４へ新たな監視画像が入力されるたびにステップＳ１〜Ｓ４の処理が繰り返される。
【００３４】
新たな監視画像が入力されると（Ｓ１）、まず、追跡部４０は当該監視画像と追跡用情報３０を比較して監視画像中の移動物体の追跡処理を一時刻分進捗させる（Ｓ２）。移動物体が監視空間内を通行すると、ステップＳ２の追跡処理により当該移動物体の位置履歴３１が生成されて、記憶部３に蓄積される。
【００３５】
追跡処理が進捗すると、制御部４の軌跡画像生成部４１は位置履歴３１を基に軌跡画像の生成を行う（Ｓ３）。
【００３６】
図５のフローチャートを参照して軌跡画像生成処理を説明する。
【００３７】
まず、軌跡画像生成部４１は、軌跡画像を初期化する（Ｓ３０）。軌跡画像生成部４１は、監視画像と同サイズの軌跡画像を用意し、軌跡画像全体を黒で塗りつぶすことで初期化を行う。
【００３８】
軌跡画像生成部４１は、記憶部３を参照して表示対象期間内の位置履歴３１が記憶されている移動物体を抽出する（Ｓ３１）。
【００３９】
該当する移動物体が抽出されなければ（Ｓ３２にてＮＯ）、処理は図４のステップ４へ進められる。この場合、初期化された軌跡画像がそのまま表示されることになる。
【００４０】
他方、該当する移動物体が抽出された場合（Ｓ３２にてＹＥＳ）、軌跡画像生成部４１は抽出された移動物体を順次注目物体に設定して（Ｓ３３）、抽出された全移動物体に対してステップＳ３３〜Ｓ４３のループ処理を実行する。
【００４１】
注目物体のループ処理において軌跡画像生成部４１は、注目物体の基準色３３を決定するとともに（Ｓ３４）、注目物体の位置履歴３１を読み出し（Ｓ３５）、読み出した位置履歴３１を構成する物体位置を新しいものから順次注目位置に設定して（Ｓ３６）、ステップＳ３６〜Ｓ４２のループ処理を実行する。
【００４２】
ここで、軌跡画像生成部４１は、ステップＳ３１にて抽出された移動物体間で互いに異なる基準色３３を決定するとともに、注目物体の物体ＩＤと基準色３３の対応関係を記憶部３に保持して一度設定した物体ＩＤと基準色３３の対応関係を次時刻以降も維持するよう決定する。こうすることで各移動物体の軌跡を区別して視認しやすくなる。
【００４３】
注目位置のループにおいて軌跡画像生成部４１は、まず注目位置を中心とする描画単位領域（本発明における対応座標の周辺領域）を設定し（Ｓ３７）、設定された描画単位領域内に予め設定された配置個数だけ粒状図像の配置位置をランダムに設定する（Ｓ３８）。
【００４４】
描画単位領域は、ひとつの物体位置に対して粒状図像を描画する領域であり、半径２３画素の円形領域として予め設定される。粒状図像の最大半径が８画素であることを考慮し、軌跡画像生成部４１は、注目位置を中心とする半径１５画素の円内に配置位置を乱数に基づき生成する。こうすることにより各粒状図像は半径２３画素の描画単位領域内に収まる。
【００４５】
上述した描画単位領域の大きさは監視画像に撮像される移動物体程度の大きさでもある。描画単位領域を移動物体程度の大きさとすることで、軌跡画像を視認した監視員が移動物体間の関係を把握しやすくなる。
【００４６】
図６の画像１００は、ひとつの移動物体の位置履歴３１と、当該位置履歴３１を構成する各物体位置に対して設定される描画単位領域の関係を例示したものである。図中の×印が各物体位置を表し、各物体位置を中心とする円が当該物体位置に対応する描画単位領域をそれぞれ表している。
【００４７】
配置個数は描画単位領域において過去用の粒状図像間に隙間が形成される程度の多数に予め設定される（現時刻用の粒状図像の大きさは前述したように目立たせることを優先して設定されている）。粒状図像間の隙間を形成することで軌跡同士が交差しても一方の軌跡の図形の隙間から他方の軌跡の図形の一部が重なりなく視認できるので、交差した軌跡を監視員が識別しやすくなる。配置個数は例えば１０〜２０個の間で設定され、本例では１３個と設定した。
【００４８】
描画単位領域の面積は約１６６２画素（半径２３画素）、過去用の粒状図像の最大面積は約５０画素（半径４画素）であるから、上記配置個数の上限２０個なる設定は、１６６２＞５０×２０なる関係を満たし、描画単位領域において過去用の粒状図像間に必ず隙間が形成される設定となっている。また、隙間が形成される範囲の多数とすることで視認性が高まる。仮に少数に設定すると隙間は増えるが視認が困難となる。
【００４９】
続いて軌跡画像生成部４１は、注目位置を平均値とし描画単位領域の半径の３分の１を標準偏差とする２次元正規分布関数を設定して、当該関数にステップＳ３６で設定された各配置位置の座標を代入して関数の出力値が大きいほど低く出力値が小さいほど高い透過度を各配置位置に対して設定する（Ｓ３９）。配置位置が注目位置に近いほど低い透過度が設定され、配置位置が注目位置から遠いほど高い透過度が設定されることになる。
【００５０】
具体的には、描画単位領域の半径をＲ、物体位置を（ｘ０，ｙ０）配置位置を（ｘ，ｙ）としたときに透過度α（値域；０〜１）は数式１にて算出される。
【００５１】
【数１】
【００５２】
続いて軌跡画像生成部４１は、注目位置の時刻と対応する粒サイズ３２を読み出し（Ｓ４０）、軌跡画像の各配置位置に、ステップＳ４０で読み出した当該配置位置と対応する粒サイズ３２を有し、ステップＳ３４にて決定した注目物体の基準色で塗りつぶした粒状図像を、ステップＳ３９にて設定された当該配置位置と対応する透過度にて透過合成する（Ｓ４１）。透過合成は、粒状図像の色と軌跡画像の色とをα：（１−α）の割合で混合することを意味する。
【００５３】
こうして注目物体の位置履歴３１に含まれる物体位置のうち表示対象期間内の物体位置全てに対してステップＳ３６〜Ｓ４２の処理が行われ（Ｓ４２にてＹＥＳ）、且つステップＳ３１にて抽出された全ての移動物体に対してステップＳ３３〜Ｓ４３の処理が行われると（Ｓ４３にてＹＥＳ）、現時刻における軌跡画像生成処理は終了し、処理は図４のステップＳ４へと進められる。
【００５４】
図４に戻り、軌跡画像生成部４１は、ステップＳ３にて生成した軌跡画像を表示部５に出力する（Ｓ４）。軌跡画像が入力された表示部５は、当該軌跡画像を視認可能に表示する。現時刻の軌跡画像を表示すると、処理はステップＳ１へ戻され、次時刻の監視画像に対する処理が始まる。
【００５５】
図７は、図６で例示した物体位置３１に対して生成された軌跡画像２００を例示したものである。各物体位置には複数の粒状図像からなる粒状図群像が描画されている。
【００５６】
各粒状図群像における粒状図像の粒サイズ３２は、最も新しい現時刻の物体位置で最大、最も古い１０時刻前の物体位置で最小であり、これらの間で時刻が古くなるに従って順次小さく設定される。これにより時間の経過や移動方向が視認しやすくなっている。
【００５７】
また、各粒状図群像における粒状図像は、上述した透過度の設定により、中心すなわち物体位置に近いほど濃く物体位置から遠いほど淡く描画されている。これにより移動軌跡の芯線が視認しやすくなっている。
【００５８】
また図８は、交錯した２つの移動物体について生成された軌跡画像３００を例示したものである。ただし、モノクロで分かりやすいように下地を白にしている。
【００５９】
各物体位置にて複数の粒状図像が隙間を有して描画されているので、２つの軌跡が交錯している部分においても一方移動物体の粒状図群像の隙間に混色することなく描画された他方移動物体の粒状図像の少なくとも一部を視認できる。そのため交錯する２つの軌跡の存在を容易に識別できる。
【００６０】
またこれらの粒状図像は乱数に基づいて配置されているので一方の粒状図群像の隙間に他方の粒状図像が配置されやすくなっている。仮に規則的に配置されると、隙間同士が重なって隙間が活かされない機会が増加する。
【００６１】
また時刻ごとに粒状図像の大きさを異ならせて描画されているので、２つの軌跡が交錯している部分においても一方移動物体の粒状図群像と他方移動物体の粒状図群像とを容易に識別でき、２つの軌跡を容易に識別できる。図８はモノクロであるが実際には２つの軌跡が互いに異なる基準色で描画されているので、交錯する２つの粒状図群像の識別はさらに容易であり、２つの軌跡を容易に識別できる。
【００６２】
以上のように、多数の粒状図像を分散配置して生成された軌跡画像は、マクロで見ても時間の経過、移動方向、移動軌跡の芯線が視認しやすく監視員が複数人に関する行動を把握するのに好適であり、ミクロで見ても交差部分に各移動物体が存在していた時刻の違いを認識しやすく監視員が複数人に関する行動を把握するのに好適である。
【００６３】
上記実施形態において軌跡画像生成部４１は、円形の粒状図像を用いて軌跡画像を生成したが粒状図像の形状は円形に限定されない。別の実施形態において粒状図像は、菱形、星形などとされる。
【００６４】
上記実施形態においては下地を全面黒色とした。別の実施形態において、下地は背景画像或いは背景の模式図などとすることもできる。背景画像とする場合、軌跡画像生成部４１は図５のステップＳ３０において、追跡用情報３０として記憶されている背景画像を軌跡画像に複写して初期化を行う。背景の模式図とする場合、当該模式図は予め記憶部３に記憶され、軌跡画像生成部４１は図５のステップＳ３０において、記憶部３の模式図を軌跡画像に複写して初期化を行う。
【００６５】
また上記実施形態において、軌跡画像生成部４１は監視画像と同サイズの軌跡画像を生成した。別の実施形態において軌跡画像生成部４１は、監視画像を拡大或いは縮小したスケールの軌跡画像を生成する。この場合、軌跡画像生成部４１はスケールに応じた倍率で物体位置、描画単位領域、粒サイズを拡大又は縮小して軌跡画像の対応座標にそれぞれを配置する。或いは、軌跡画像生成部４１は、監視画像と同サイズの軌跡画像を生成してからスケールに応じた倍率で軌跡画像を拡大又は縮小して表示部５に出力する。
【００６６】
また上記実施形態においては予め設定された粒サイズ３２にて粒状図像の大きさが設定された。別の実施形態においては、表示対象期間は可変とされ、表示対象期間に応じた時刻数の粒サイズ３２が動的に設定される。この場合、画像監視装置１はキーボードやマウス等で構成された設定部を備えて表示対象期間の設定の入力を受け付け、入力された期間に応じた段階数の粒サイズ３２を半径４画素から１画素の間で動的に設定する。
【符号の説明】
【００６７】
１・・・画像監視装置
２・・・撮像部
３・・・記憶部
３０・・・追跡用情報
３１・・・位置履歴
３２・・・粒サイズ
３３・・・基準色
４・・・制御部
４０・・・追跡部
４１・・・軌跡画像生成部
５・・・表示部
【技術分野】
【０００１】
本発明は、移動物体の軌跡を表示する軌跡表示装置に関する。
【背景技術】
【０００２】
従来、監視員が不審者等の行動を把握するために、監視画像を処理して移動物体を追跡し、その軌跡を表示する画像監視システムが提案されている。
特許文献１には、検知した複数個の目標物体画像を同一画面に重ね合わせて同時表示するとともに、これらの目標物体画像を結んだ移動軌跡を表示する画像監視システムが記載されている。
また特許文献２には、移動する人物のマークを、軌跡として一定時間ずつ残しながら表示するシステムが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平９−２２４２３７号公報
【特許文献２】特開２００５−１８２３９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
不審者の行動には、他人をつけまわすストーカー行為、他人との接触など当該不審者以外との関係により把握可能となる行動がある。監視員がこのような行動を把握するには、複数人の軌跡を同時に表示する必要がある。
【０００５】
しかしながら、従来技術により複数人の軌跡を表示すると、複数人の線同士が絡み合った表示、或いは複数人のマーク同士が交錯し合い重なり合った表示となり、複数人に関する行動を監視員が瞬時に視認することが困難であった。
また、これらの表示において軌跡が交差した箇所だけを見ても時間の流れを把握しにくく、監視員が複数人に関する行動を把握するには、各線の先端からの長さを比較する、各マークの先頭からの数を数えて比較する、或いはプレイバックするなどしなくてはならなかった。
【０００６】
本発明は、上記課題を鑑みてなされたものであり、監視者が複数の移動物体の行動を視認しやすい軌跡表示ができる軌跡表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
かかる課題を解決するために、本発明は、移動物体の軌跡を表示する軌跡表示装置であって、移動物体を追跡して得られた時系列の物体位置を記憶する記憶部と、物体位置それぞれと対応する対応座標の周辺領域に所定数の粒状図像を分散配置して軌跡画像を生成する軌跡画像生成部と、軌跡画像を表示する表示部と、を備え、所定数は、周辺領域において粒状図像間に隙間が形成される程度の多数に設定される軌跡表示装置を提供する。
【０００８】
かかる軌跡表示装置において、軌跡画像生成部は、乱数に基づいて分散配置を行なうことが好ましい。
【０００９】
かかる軌跡表示装置において、軌跡画像生成部は、時系列中の時刻ごとに粒状図像の大きさを異ならせることが好ましい。
【００１０】
かかる軌跡表示装置において、軌跡画像生成部は、時刻が古いほど粒状図像の大きさを小さく設定することが好ましい。
【００１１】
かかる軌跡表示装置において、軌跡画像生成部は、粒状図像それぞれを対応座標から当該粒状図像の配置位置までの近さに応じた透過度にて合成することが好ましい。
【発明の効果】
【００１２】
本発明によれば、監視者が複数の移動物体の行動を視認しやすい軌跡表示が可能となる。特に、複数の移動物体同士が交錯しあっても、監視者がそれぞれの軌跡を区別して認識しやすい軌跡表示が可能となる。
【図面の簡単な説明】
【００１３】
【図１】画像監視装置１の構成を示す図である。
【図２】粒サイズ３２の設定を例示した図である。
【図３】基準色３３の設定を例示した図である。
【図４】画像監視処理全体のフローチャートを示す図である。
【図５】軌跡画像生成処理のフローチャートを示す図である。
【図６】位置履歴３１とその各物体位置に設定される描画単位領域の関係を例示した図である。
【図７】図６の位置履歴３１に対して生成された軌跡画像の例である。
【図８】移動物体が交錯したときの軌跡画像の例である。
【発明を実施するための形態】
【００１４】
以下、本発明に係る軌跡表示装置を用いた画像監視装置について図を参照しつつ説明する。
【００１５】
軌跡表示装置は、人等の移動物体を追跡した結果として得られる時系列の物体位置に対応した軌跡画像を表示する。特に、この軌跡表示装置は、各物体位置と対応する対応座標の周辺領域それぞれに多数の粒状図像を分散配置して軌跡画像を生成し、当該軌跡画像を表示する。
【００１６】
［画像監視装置１の構成］
図１に画像監視装置１の全体構成を示す。画像監視装置１は、撮像部２、記憶部３及び表示部５が制御部４に接続されてなる。
【００１７】
撮像部２は、いわゆる監視カメラであり、複数の人物が通行するビルのエントランス等の監視空間を所定時間おきに撮像して監視画像を制御部４に順次出力する。監視画像が撮像される時間間隔は例えば１／５秒である。以下、この時間間隔で刻まれる時間の単位を時刻と称する。
【００１８】
記憶部３は、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等のメモリ装置である。記憶部３は、各種プログラムや各種データを記憶し、制御部４との間でこれらの情報を入出力する。各種データには、追跡用情報３０、位置履歴３１、粒サイズ３２、基準色３３が含まれる。
【００１９】
追跡用情報３０は、移動物体の位置を追跡するために生成され、参照される画像情報である。具体的には、追跡用情報３０は、監視空間の背景が撮像された背景画像、及び各移動物体の物体像から抽出された特徴量である。特徴量としては輝度ヒストグラム、テクスチャ情報等を用いることができる。追跡は、前後する時刻における物体像のうち特徴量が類似するものを同一移動物体として同定することにより各時刻における移動物体の位置を求める処理である。同定された移動物体には共通の識別子（物体ＩＤ）が付与され、特徴量は同定された移動物体の物体ＩＤと対応付けて記憶される。
【００２０】
位置履歴３１は、各移動物体の位置（物体位置）の履歴であり、追跡結果として生成され、記憶される。移動物体ごとにその物体ＩＤと対応付けた時系列の物体位置が記憶される。
【００２１】
画像監視装置１は、現時刻及び過去１０時刻の合計１１時刻の間の移動軌跡を表示する。この１１時刻が表示対象期間として予め設定されている。
【００２２】
粒サイズ３２は、軌跡画像に描画される粒状図像の大きさを規定する情報である。表示対象期間内の各時刻に対応して１１種類の大きさが設定されている。
【００２３】
粒状図像は円形であり、粒サイズ３２は半径で規定される。具体的には、現時刻用の半径が８画素、１時刻前用の半径が４画素、２時刻前用の半径が３．７画素、以下順に３〜８時刻前用の半径が３．３画素、３画素、２．７画素、２．３画素、２画素、１．６画素、１．３画素、１画素と設定されている。図２のテーブル３２０は、粒サイズ３２の上記設定を図示したものである。
【００２４】
各粒サイズ３２はその適用時刻が古くなるほど小さく設定されていることが特徴である。過去用の粒サイズ３２は比例関係に設定されているが、現時刻用の１６画素は過去用に比して特に大きな倍率で設定されている。これは現時刻の物体位置を特に強調するためである。尚、半径が小数の粒状図像は描画或いは表示の際に量子化される。
【００２５】
画像監視装置１は、移動物体ごとに異なる色にて軌跡を表示する。基準色３３は、これに対応して軌跡表示用の複数の基準色が列挙された色コード群である。監視空間を同時に通行する移動物体の数と比べて十分多い個数の色コードが予め設定され、各色コードには通し番号が付与されている。図３のテーブル３３０は、ＲＧＢ表色系の色コードとして定められた基準色３３の設定を例示したものである。
【００２６】
制御部４は、ＣＰＵ(Central Processing Unit)、ＤＳＰ(Digital Signal Processor)、ＭＣＵ(Micro Control
Unit)等の演算装置である。制御部４は、追跡部４０、軌跡画像生成部４１等の動作を記述したプログラムを記憶部３から読み出して実行することによりこれら各部として機能する。
【００２７】
追跡部４０は、追跡用情報３０を用いて監視画像内の移動物体を追跡し、各移動物体の位置履歴３１を記憶部３に記憶させる。そのために追跡部４０は、各時刻において監視画像を背景画像と比較して移動物体の物体像を抽出する物体像抽出処理と、前後する時刻に抽出された物体像の中から特徴量が一致する移動物体を同定する同定処理を繰り返し、同定された移動物体ごとにその重心位置を時系列に位置履歴３１として記憶させる。
【００２８】
このとき同定が得られなかった物体像があると、追跡部４０は新規移動物体が出現したとして当該物体像の特徴量に新規の物体ＩＤを付与して追跡用情報３０に追記する。新規の物体ＩＤの付与に伴って追跡部４０は当該物体ＩＤと対応する位置履歴３１を新たに作成する。
【００２９】
また同定が得られなかった物体ＩＤがあると、追跡部４０は当該物体ＩＤが表す移動物体が消失したとして当該物体ＩＤと対応する特徴量を記憶部３から削除する。
【００３０】
軌跡画像生成部４１は、記憶部３から位置履歴３１を読み出して、各位置履歴３１を構成する物体位置それぞれと対応する対応座標に多数の粒状図像を分散配置して軌跡画像を生成し、生成した軌跡画像を表示部５に出力する。生成処理の詳細は後述する。
【００３１】
表示部５は、液晶ディスプレイ、ＣＲＴ等のモニタ装置であり、入力された軌跡画像を表示する。表示された軌跡画像はストーカー行為や他人との接触を繰り返す行為などの不審行動の監視するために監視員等により視認される。
【００３２】
［画像監視装置１の動作］
図４のフローチャートを参照して、画像監視装置１の動作を説明する。
【００３３】
監視空間が無人であることを確認した監視員が画像監視装置１を起動すると各部は動作を開始し、撮像部２が監視画像を順次制御部４に入力し始める。制御部４の追跡部４０は起動直後に撮像された監視画像を用いて背景画像を初期化し、追跡用情報３０として記憶部３に記憶させる。初期化が終わると画像監視処理がスタートし、撮像部２から制御部４へ新たな監視画像が入力されるたびにステップＳ１〜Ｓ４の処理が繰り返される。
【００３４】
新たな監視画像が入力されると（Ｓ１）、まず、追跡部４０は当該監視画像と追跡用情報３０を比較して監視画像中の移動物体の追跡処理を一時刻分進捗させる（Ｓ２）。移動物体が監視空間内を通行すると、ステップＳ２の追跡処理により当該移動物体の位置履歴３１が生成されて、記憶部３に蓄積される。
【００３５】
追跡処理が進捗すると、制御部４の軌跡画像生成部４１は位置履歴３１を基に軌跡画像の生成を行う（Ｓ３）。
【００３６】
図５のフローチャートを参照して軌跡画像生成処理を説明する。
【００３７】
まず、軌跡画像生成部４１は、軌跡画像を初期化する（Ｓ３０）。軌跡画像生成部４１は、監視画像と同サイズの軌跡画像を用意し、軌跡画像全体を黒で塗りつぶすことで初期化を行う。
【００３８】
軌跡画像生成部４１は、記憶部３を参照して表示対象期間内の位置履歴３１が記憶されている移動物体を抽出する（Ｓ３１）。
【００３９】
該当する移動物体が抽出されなければ（Ｓ３２にてＮＯ）、処理は図４のステップ４へ進められる。この場合、初期化された軌跡画像がそのまま表示されることになる。
【００４０】
他方、該当する移動物体が抽出された場合（Ｓ３２にてＹＥＳ）、軌跡画像生成部４１は抽出された移動物体を順次注目物体に設定して（Ｓ３３）、抽出された全移動物体に対してステップＳ３３〜Ｓ４３のループ処理を実行する。
【００４１】
注目物体のループ処理において軌跡画像生成部４１は、注目物体の基準色３３を決定するとともに（Ｓ３４）、注目物体の位置履歴３１を読み出し（Ｓ３５）、読み出した位置履歴３１を構成する物体位置を新しいものから順次注目位置に設定して（Ｓ３６）、ステップＳ３６〜Ｓ４２のループ処理を実行する。
【００４２】
ここで、軌跡画像生成部４１は、ステップＳ３１にて抽出された移動物体間で互いに異なる基準色３３を決定するとともに、注目物体の物体ＩＤと基準色３３の対応関係を記憶部３に保持して一度設定した物体ＩＤと基準色３３の対応関係を次時刻以降も維持するよう決定する。こうすることで各移動物体の軌跡を区別して視認しやすくなる。
【００４３】
注目位置のループにおいて軌跡画像生成部４１は、まず注目位置を中心とする描画単位領域（本発明における対応座標の周辺領域）を設定し（Ｓ３７）、設定された描画単位領域内に予め設定された配置個数だけ粒状図像の配置位置をランダムに設定する（Ｓ３８）。
【００４４】
描画単位領域は、ひとつの物体位置に対して粒状図像を描画する領域であり、半径２３画素の円形領域として予め設定される。粒状図像の最大半径が８画素であることを考慮し、軌跡画像生成部４１は、注目位置を中心とする半径１５画素の円内に配置位置を乱数に基づき生成する。こうすることにより各粒状図像は半径２３画素の描画単位領域内に収まる。
【００４５】
上述した描画単位領域の大きさは監視画像に撮像される移動物体程度の大きさでもある。描画単位領域を移動物体程度の大きさとすることで、軌跡画像を視認した監視員が移動物体間の関係を把握しやすくなる。
【００４６】
図６の画像１００は、ひとつの移動物体の位置履歴３１と、当該位置履歴３１を構成する各物体位置に対して設定される描画単位領域の関係を例示したものである。図中の×印が各物体位置を表し、各物体位置を中心とする円が当該物体位置に対応する描画単位領域をそれぞれ表している。
【００４７】
配置個数は描画単位領域において過去用の粒状図像間に隙間が形成される程度の多数に予め設定される（現時刻用の粒状図像の大きさは前述したように目立たせることを優先して設定されている）。粒状図像間の隙間を形成することで軌跡同士が交差しても一方の軌跡の図形の隙間から他方の軌跡の図形の一部が重なりなく視認できるので、交差した軌跡を監視員が識別しやすくなる。配置個数は例えば１０〜２０個の間で設定され、本例では１３個と設定した。
【００４８】
描画単位領域の面積は約１６６２画素（半径２３画素）、過去用の粒状図像の最大面積は約５０画素（半径４画素）であるから、上記配置個数の上限２０個なる設定は、１６６２＞５０×２０なる関係を満たし、描画単位領域において過去用の粒状図像間に必ず隙間が形成される設定となっている。また、隙間が形成される範囲の多数とすることで視認性が高まる。仮に少数に設定すると隙間は増えるが視認が困難となる。
【００４９】
続いて軌跡画像生成部４１は、注目位置を平均値とし描画単位領域の半径の３分の１を標準偏差とする２次元正規分布関数を設定して、当該関数にステップＳ３６で設定された各配置位置の座標を代入して関数の出力値が大きいほど低く出力値が小さいほど高い透過度を各配置位置に対して設定する（Ｓ３９）。配置位置が注目位置に近いほど低い透過度が設定され、配置位置が注目位置から遠いほど高い透過度が設定されることになる。
【００５０】
具体的には、描画単位領域の半径をＲ、物体位置を（ｘ０，ｙ０）配置位置を（ｘ，ｙ）としたときに透過度α（値域；０〜１）は数式１にて算出される。
【００５１】
【数１】
【００５２】
続いて軌跡画像生成部４１は、注目位置の時刻と対応する粒サイズ３２を読み出し（Ｓ４０）、軌跡画像の各配置位置に、ステップＳ４０で読み出した当該配置位置と対応する粒サイズ３２を有し、ステップＳ３４にて決定した注目物体の基準色で塗りつぶした粒状図像を、ステップＳ３９にて設定された当該配置位置と対応する透過度にて透過合成する（Ｓ４１）。透過合成は、粒状図像の色と軌跡画像の色とをα：（１−α）の割合で混合することを意味する。
【００５３】
こうして注目物体の位置履歴３１に含まれる物体位置のうち表示対象期間内の物体位置全てに対してステップＳ３６〜Ｓ４２の処理が行われ（Ｓ４２にてＹＥＳ）、且つステップＳ３１にて抽出された全ての移動物体に対してステップＳ３３〜Ｓ４３の処理が行われると（Ｓ４３にてＹＥＳ）、現時刻における軌跡画像生成処理は終了し、処理は図４のステップＳ４へと進められる。
【００５４】
図４に戻り、軌跡画像生成部４１は、ステップＳ３にて生成した軌跡画像を表示部５に出力する（Ｓ４）。軌跡画像が入力された表示部５は、当該軌跡画像を視認可能に表示する。現時刻の軌跡画像を表示すると、処理はステップＳ１へ戻され、次時刻の監視画像に対する処理が始まる。
【００５５】
図７は、図６で例示した物体位置３１に対して生成された軌跡画像２００を例示したものである。各物体位置には複数の粒状図像からなる粒状図群像が描画されている。
【００５６】
各粒状図群像における粒状図像の粒サイズ３２は、最も新しい現時刻の物体位置で最大、最も古い１０時刻前の物体位置で最小であり、これらの間で時刻が古くなるに従って順次小さく設定される。これにより時間の経過や移動方向が視認しやすくなっている。
【００５７】
また、各粒状図群像における粒状図像は、上述した透過度の設定により、中心すなわち物体位置に近いほど濃く物体位置から遠いほど淡く描画されている。これにより移動軌跡の芯線が視認しやすくなっている。
【００５８】
また図８は、交錯した２つの移動物体について生成された軌跡画像３００を例示したものである。ただし、モノクロで分かりやすいように下地を白にしている。
【００５９】
各物体位置にて複数の粒状図像が隙間を有して描画されているので、２つの軌跡が交錯している部分においても一方移動物体の粒状図群像の隙間に混色することなく描画された他方移動物体の粒状図像の少なくとも一部を視認できる。そのため交錯する２つの軌跡の存在を容易に識別できる。
【００６０】
またこれらの粒状図像は乱数に基づいて配置されているので一方の粒状図群像の隙間に他方の粒状図像が配置されやすくなっている。仮に規則的に配置されると、隙間同士が重なって隙間が活かされない機会が増加する。
【００６１】
また時刻ごとに粒状図像の大きさを異ならせて描画されているので、２つの軌跡が交錯している部分においても一方移動物体の粒状図群像と他方移動物体の粒状図群像とを容易に識別でき、２つの軌跡を容易に識別できる。図８はモノクロであるが実際には２つの軌跡が互いに異なる基準色で描画されているので、交錯する２つの粒状図群像の識別はさらに容易であり、２つの軌跡を容易に識別できる。
【００６２】
以上のように、多数の粒状図像を分散配置して生成された軌跡画像は、マクロで見ても時間の経過、移動方向、移動軌跡の芯線が視認しやすく監視員が複数人に関する行動を把握するのに好適であり、ミクロで見ても交差部分に各移動物体が存在していた時刻の違いを認識しやすく監視員が複数人に関する行動を把握するのに好適である。
【００６３】
上記実施形態において軌跡画像生成部４１は、円形の粒状図像を用いて軌跡画像を生成したが粒状図像の形状は円形に限定されない。別の実施形態において粒状図像は、菱形、星形などとされる。
【００６４】
上記実施形態においては下地を全面黒色とした。別の実施形態において、下地は背景画像或いは背景の模式図などとすることもできる。背景画像とする場合、軌跡画像生成部４１は図５のステップＳ３０において、追跡用情報３０として記憶されている背景画像を軌跡画像に複写して初期化を行う。背景の模式図とする場合、当該模式図は予め記憶部３に記憶され、軌跡画像生成部４１は図５のステップＳ３０において、記憶部３の模式図を軌跡画像に複写して初期化を行う。
【００６５】
また上記実施形態において、軌跡画像生成部４１は監視画像と同サイズの軌跡画像を生成した。別の実施形態において軌跡画像生成部４１は、監視画像を拡大或いは縮小したスケールの軌跡画像を生成する。この場合、軌跡画像生成部４１はスケールに応じた倍率で物体位置、描画単位領域、粒サイズを拡大又は縮小して軌跡画像の対応座標にそれぞれを配置する。或いは、軌跡画像生成部４１は、監視画像と同サイズの軌跡画像を生成してからスケールに応じた倍率で軌跡画像を拡大又は縮小して表示部５に出力する。
【００６６】
また上記実施形態においては予め設定された粒サイズ３２にて粒状図像の大きさが設定された。別の実施形態においては、表示対象期間は可変とされ、表示対象期間に応じた時刻数の粒サイズ３２が動的に設定される。この場合、画像監視装置１はキーボードやマウス等で構成された設定部を備えて表示対象期間の設定の入力を受け付け、入力された期間に応じた段階数の粒サイズ３２を半径４画素から１画素の間で動的に設定する。
【符号の説明】
【００６７】
１・・・画像監視装置
２・・・撮像部
３・・・記憶部
３０・・・追跡用情報
３１・・・位置履歴
３２・・・粒サイズ
３３・・・基準色
４・・・制御部
４０・・・追跡部
４１・・・軌跡画像生成部
５・・・表示部
【特許請求の範囲】
【請求項１】
移動物体の軌跡を表示する軌跡表示装置であって、
前記移動物体を追跡して得られた時系列の物体位置を記憶する記憶部と、
前記物体位置それぞれと対応する対応座標の周辺領域に所定数の粒状図像を分散配置して軌跡画像を生成する軌跡画像生成部と、
前記軌跡画像を表示する表示部と、
を備え、
前記所定数は、前記周辺領域において前記粒状図像間に隙間が形成される程度の多数に設定されたこと、を特徴とする軌跡表示装置。
【請求項２】
請求項１に記載の軌跡表示装置において、
前記軌跡画像生成部は、乱数に基づいて前記分散配置を行なうことを特徴とする軌跡表示装置。
【請求項３】
請求項２に記載の軌跡表示装置において、
前記軌跡画像生成部は、前記時系列中の時刻ごとに前記粒状図像の大きさを異ならせること、を特徴とする軌跡表示装置。
【請求項４】
請求項３に記載の軌跡表示装置において、
前記軌跡画像生成部は、前記時刻が古いほど前記粒状図像の大きさを小さく設定すること、を特徴とする軌跡表示装置。
【請求項５】
請求項２から請求項４のいずれかひとつに記載の軌跡表示装置において、
前記軌跡画像生成部は、前記粒状図像それぞれを前記対応座標から当該粒状図像の配置位置までの近さに応じた透過度にて合成すること、を特徴とする軌跡表示装置。
【請求項１】
移動物体の軌跡を表示する軌跡表示装置であって、
前記移動物体を追跡して得られた時系列の物体位置を記憶する記憶部と、
前記物体位置それぞれと対応する対応座標の周辺領域に所定数の粒状図像を分散配置して軌跡画像を生成する軌跡画像生成部と、
前記軌跡画像を表示する表示部と、
を備え、
前記所定数は、前記周辺領域において前記粒状図像間に隙間が形成される程度の多数に設定されたこと、を特徴とする軌跡表示装置。
【請求項２】
請求項１に記載の軌跡表示装置において、
前記軌跡画像生成部は、乱数に基づいて前記分散配置を行なうことを特徴とする軌跡表示装置。
【請求項３】
請求項２に記載の軌跡表示装置において、
前記軌跡画像生成部は、前記時系列中の時刻ごとに前記粒状図像の大きさを異ならせること、を特徴とする軌跡表示装置。
【請求項４】
請求項３に記載の軌跡表示装置において、
前記軌跡画像生成部は、前記時刻が古いほど前記粒状図像の大きさを小さく設定すること、を特徴とする軌跡表示装置。
【請求項５】
請求項２から請求項４のいずれかひとつに記載の軌跡表示装置において、
前記軌跡画像生成部は、前記粒状図像それぞれを前記対応座標から当該粒状図像の配置位置までの近さに応じた透過度にて合成すること、を特徴とする軌跡表示装置。
【図１】
【図２】
【図４】
【図３】
【図５】
【図６】
【図７】
【図８】
【図２】
【図４】
【図３】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１１−２２８８８５（Ｐ２０１１−２２８８８５Ａ）
【公開日】平成２３年１１月１０日（２０１１．１１．１０）
【国際特許分類】
【出願番号】特願２０１０−９５８７０（Ｐ２０１０−９５８７０）
【出願日】平成２２年４月１９日（２０１０．４．１９）
【出願人】（０００１０８０８５）セコム株式会社 (596)
【Ｆターム（参考）】
【公開日】平成２３年１１月１０日（２０１１．１１．１０）
【国際特許分類】
【出願日】平成２２年４月１９日（２０１０．４．１９）
【出願人】（０００１０８０８５）セコム株式会社 (596)
【Ｆターム（参考）】
[ Back to top ]