JPWO2018198373A1 - 映像監視システム - Google Patents

Abstract

放置物を放置した人物を特定してその人物の移動を追跡する作業のユーザ負担を軽減することが可能な映像監視システムを提供する。放置物検知部２０２が、複数の撮像装置１００のいずれかで撮影された画像に映った放置物を検知し、人物特定部２０３が、放置物が検知された場合に、放置物が現れる直前又は直後の画像を放置時画像として特定し、放置時画像に映った少なくとも一人の人物を対象人物として特定し、人物検索部２０５が、複数の撮像装置１００の各々で撮影された画像の中から、対象人物が映った画像を検索し、結果表示部２０６が、対象人物が映った各画像を撮影した撮像装置及び撮像時刻に基づいて、対象人物の移動を示す表示をユーザ端末３００に画面出力させる。

Description

本発明は、撮像装置により撮影された映像を監視する映像監視システムに関し、特に、放置物を放置した人物を特定してその人物の移動を追跡するシステムに関する。

近年、空港、駅構内、ショッピングモール等のような不特定多数の人物が訪れる施設には、犯罪抑止や事故防止等の目的で、映像監視システムが配備されている。このような映像監視システムとしては、映像を監視して放置物を検知する放置物検知システム（例えば、特許文献１）や、指定された人物を映像内から検索する人物検索システム（例えば、特許文献２）などがある。

特開２０１１−６１６５１号公報 特開２００９−１９９３２２号公報

従来、放置物検知システムと人物検索システムは、個別のシステムとして運用されており、それぞれ独立して動作していた。このため、例えば、放置物を放置した人物の特定及びその人物の移動の追跡を行うには、ユーザは以下のような手順の作業を行う必要があった。
（１）放置物検知システムからの発報（放置物の検知を知らせるメッセージ）を確認
（２）放置物を映した映像を逆再生
（３）放置物が放置された時点の映像を目視して、放置した人物を特定
（４）放置した人物を指定した人物検索を人物検索システムで実行
（５）人物検索システムによる人物検索の結果表示を確認

このように、従来技術では、ユーザが映像の目視確認や手入力の検索作業が必要であったため、ユーザにとって使い勝手が悪く不便であり、リアルタイム性にも欠けていた。
本発明は、上記のような従来の事情に鑑みて為されたものであり、放置物を放置した人物を特定してその人物の移動を追跡する作業のユーザ負担を軽減することが可能な映像監視システムを提供することを目的とする。

上記の目的を達成するために、本発明に係る映像監視システム又は映像監視方法は以下のように構成される。
（１） 複数の撮像装置を備えた映像監視システムにおいて、前記複数の撮像装置のいずれかで撮影された画像に映った放置物を検知する放置物検知部と、前記放置物が検知された場合に、前記放置物が現れる直前又は直後の画像を特定し、当該画像に映った少なくとも一人の人物を対象人物に特定する人物特定部と、前記複数の撮像装置の各々で撮影された画像の中から、前記対象人物が映った画像を検索する人物検索部と、前記対象人物が映った各画像を撮影した撮像装置及び撮像時刻に基づいて、前記対象人物の移動を示す情報を画面に表示させる結果表示部と、を備えたことを特徴とする。

（２） 上記（１）に記載の映像監視システムにおいて、前記特定された画像に基づいて、前記対象人物の顔特徴量及び着衣特徴量を含む人物特徴量を取得する人物特徴量取得部を更に備え、前記人物検索部は、前記人物特徴量に基づいて、前記対象人物が映った画像を検索することを特徴とする。

（３） 上記（１）又は（２）に記載の映像監視システムにおいて、前記結果表示部は、前記対象人物の移動を示す表示として、前記対象人物が移動した経路を地図上で示す表示、又は、前記対象人物が映った各画像を撮像装置別に時系列順に並べて示す表示を画面出力させることを特徴とする。

（４） 上記（１）乃至（３）のいずれかに記載の映像監視システムにおいて、前記人物特定部は、前記特定した画像から複数の人物が検出された場合、前記放置物からの距離が最も近い人物を前記対象人物に特定することを特徴とする。

（５） 上記（１）乃至（３）のいずれかに記載の映像監視システムにおいて、前記人物特定部は、前記特定した画像から複数の人物が検出された場合、前記放置物からの距離が所定の閾値以下の人物、又は、前記距離が短い方から上位数名を前記対象人物に特定することを特徴とする。

（６） 複数の撮像装置を用いて行われる映像監視方法において、前記複数の撮像装置のいずれかで撮影された画像に映った放置物を検知する工程と、前記放置物が検知された場合に、前記放置物が現れる直前又は直後の画像を特定し、当該画像に映った少なくとも一人の人物を対象人物に特定する工程と、前記複数の撮像装置の各々で撮影された画像の中から、前記対象人物が映った画像を検索する工程と、前記対象人物が映った各画像を撮影した撮像装置及び撮像時刻に基づいて、前記対象人物の移動を示す表示を画面出力させる工程と、を含むことを特徴とする。

本発明によれば、放置物を放置した人物を特定してその人物の移動を追跡する作業のユーザ負担を軽減することが可能な映像監視システムを提供することができる。

本発明の一実施形態に係る映像監視システムの構成例を示す図である。 図１に示した監視サーバのハードウェア構成の例を示す図である。 図１に示した監視サーバによる対象人物追跡の処理フローの例を示す図である。 対象人物追跡の結果の表示例を示す図である。 対象人物追跡の結果の別の表示例を示す図である。

以下、本発明の一実施形態に係る映像監視システムについて、図面を用いて説明する。
図１には、本発明の一実施形態に係る映像監視システムの構成例を示してある。本例の映像監視システムは、複数であるＮ台の撮像装置１００（１）〜１００（Ｎ）と、監視サーバ２００と、ユーザ端末３００とを備え、これら装置間の通信はネットワーク４００を介して行われる。映像監視システムは、空港、駅構内、ショッピングモール等のような不特定多数の人物が訪れる施設に配備される。

ネットワーク４００は、各装置間での信号やデータのやりとりに使用される。ネットワーク４００としては、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）、インターネット等、任意のネットワーク形態を用いることができる。映像監視システムの各装置は、有線回線、無線回線、又はそれらの組み合わせを用いて、ネットワーク４００を介して他の装置と通信することができる。

撮像装置１００（１）〜１００（Ｎ）は、映像監視システムを配備する施設内の各所に設置されたＩＰカメラ（ネットワークカメラ）等の装置である。撮像装置１００の各々は、ＣＣＤ（Charge Coupled Devices）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を備え、撮影した画像をデジタル変換して、ネットワーク４００を介して監視サーバ２００へ送信する。

ユーザ端末３００は、本システムのユーザ（監視者）に使用される装置である。ユーザ端末３００は、ユーザから操作入力を受け付けて入力データを監視サーバ２００に送信する機能や、監視サーバ２００から送信された提供データを受信して画面表示する機能を有する。ユーザ端末３００は、据置型の装置であってもよく、スマートホンやタブレット端末などの携帯可能な装置であってもよく、種々の装置を使用することができる。

監視サーバ２００は、複数の撮像装置１００の各々で撮影された映像（画像）に基づいて、放置物を放置した人物（例えば、不審人物）を対象人物として特定してその対象人物の移動の追跡する対象人物追跡機能を備えたサーバである。監視サーバ２００は、対象人物追跡機能に関する処理部として、画像蓄積部２０１と、放置物検知部２０２と、人物特定部２０３と、人物特徴量取得部２０４と、人物検索部２０５と、結果表示部２０６とを有する。

画像蓄積部２０１は、複数の撮像装置１００の各々から送信された画像の蓄積処理を行う。画像蓄積部２０１は、例えば、ＨＤＤ（Hard Disk Drive）等のランダムアクセス可能な記憶媒体に、撮像装置１００から受信した画像を蓄積する。また、撮像装置１００から受信した画像には、画像を撮影した撮像装置１００を識別する撮像装置番号、画像の撮像時刻などの属性データが付与されており、これら属性データも記憶媒体に記憶される。

放置物検知部２０２は、複数の撮像装置１００のいずれかで撮影された画像に映った放置物を検知する放置物検知処理を行う。放置物検知処理では、例えば、撮影画像と予め用意した基準画像との比較により、放置物の検知を行う。具体的に説明すると、撮影画像と基準画像をそれぞれ２値化し、２値化した画像間で画素毎の差分をとる。次いで、差分値が所定の閾値以上の画素領域を抽出し、抽出した画素領域が所定サイズ以上のかたまりであった場合に、その画素領域に放置物があると推定する。そして、同じ撮像装置１００による以降の撮影画像についても同様の処理を繰り返し、所定の時間が経過しても、放置物と推定される画素領域に変動が無い場合に、放置物があると判断する。すなわち、該当する画素領域に映されているものを放置物として検知する。

ここで、放置物を検知する精度を高めるには、抽出した画素領域について、膨張収縮処理、ナンバリング、ノイズ成分除去処理等を行ってから、所定サイズ以上のかたまりを持つ画素領域を放置物として検知することが好ましい。また、明るさの異なる複数の基準画像を予め用意しておき、撮影画像の明るさに最も近い明るさの基準画像を選択して撮影画像と比較することが好ましい。

人物特定部２０３は、放置物検知部２０２で放置物が検知された場合に、放置物が置かれた瞬間の画像を放置時画像として特定する放置時画像特定処理と、放置時画像に映った少なくとも一人の人物を対象人物として特定する人物特定処理とを行う。

放置時画像特定処理では、放置物が検知された画像を撮影した撮像装置１００から受信した一連の画像を時系列順又はその逆順に処理することで、放置時画像を特定する。
一例として、放置物検知処理のログを辿って放置物の発見時点（放置物があると推定された時点）の画像を特定し、その時点から逆再生方向に（過去に向かって）画像を処理していく。そして、放置物が消えて元々の背景画像が現れた瞬間の画像、すなわち、放置物が置かれる直前の画像を放置時画像として特定する。
また、別の例として、ある特定の時間を遡った過去の時点には放置物が存在しないことが判明している場合に、その時点から順再生方向に（未来に向かって）画像を処理していく。そして、元々の背景画像が消えて放置物が現れた瞬間の画像、すなわち、放置物が置かれた直後の画像を放置時画像として特定する。

人物特定処理では、まず、放置時画像に対して人物検出処理を行い、放置時画像に映った人物を検出する。人物検出処理は、任意の手法を用いて行うことができ、例えば、公知の顔認識技術を用いることができる。そして、検出された人物が一人の場合には、その人物を対象人物として特定する。一方、検出された人物が複数の場合には、放置時画像における放置物の位置と各人物の位置との距離を算出し、算出距離が最も短い人物を対象人物として特定する。あるいは、算出距離が所定の閾値以下の人物又は算出距離が短い方から上位数名を対象人物として特定する。

放置物の位置は、放置時画像における放置物の画像領域を代表する位置であり、例えば、放置物の画像領域の中心座標などを用いることができる。人物の位置は、放置時画像における人物の画像領域を代表する位置であり、例えば、人物全体の画像領域の中心座標、頭部又は顔の画像領域の中心座標、放置物に近い方の手の画像領域の中心座標などを用いることができる。

ここで、放置時画像特定処理において、放置物が置かれた瞬間を捉えることができず、放置時画像を特定できない場合がある。このような状況は、画像における人物同士の重なりが増える混雑時などにおいて、例えば、放置物と撮像装置の間に別の人物が入り込んで放置物が置かれた場面を映せない等の理由で発生する。このような状況に対応するために、人物特定処理では、放置時画像を特定できなかった場合には、放置物と一緒に映っている時間が長い人物を対象人物として特定する。具体的には、放置物が検知される以前の画像から、放置物と一緒に映った人物毎に、放置物と一緒に映っていた時間を算出し、算出時間が最も長い人物を対象人物として特定する。あるいは、算出時間が所定の閾値以上の人物又は算出時間が長い方から上位数名を対象人物として特定する。

人物特徴量取得部２０４は、人物が映った画像に基づいて人物特徴量を取得する人物特徴量取得処理を行う。本例では、撮像装置１００から画像を受信する毎に、受信した画像に映った人物に関する人物特徴量を取得する。人物特徴量取得部２０４は、取得した人物特徴量を、取得元の画像に対応付けて画像蓄積部２０１に記憶させる。複数の人物が映った画像には、複数の人物特徴量が対応付けられることになる。また、人物特徴量取得部２０４は、人物特定部２０３で特定された放置時画像に基づいて、対象人物の人物特徴量を取得する。対象人物の人物特徴量は、人物検索部２０５における人物検索の検索キーとして使用される。

人物特徴量は、画像に含まれる人物の特徴を表す値であり、本例では、顔の特徴を示す顔特徴量、又は、着衣（帽子、持ち物、身飾品などを含む）の特徴を示す着衣特徴量を少なくとも含んでいる。顔特徴量は、例えば、顔の輪郭の形状や方向、皮膚の色、顔の主要構成要素（目、鼻、口など）の大きさや形状や配置関係などを数値化することで、取得できる。着衣特徴量は、例えば、人物の頭部、上半身、下半身などの位置を推定し、人物が身に着けている着衣等（例えば、帽子、上着、ズボン、持ち物、身飾品）の色や形状などを数値化することで、取得できる。顔特徴量や着衣特徴量は、任意の手法を用いて取得することができ、例えば、特許文献１に開示された手法を用いて取得することができる。

人物検索部２０５は、人物特定部２０３で特定された放置時画像に基づいて取得された対象人物の人物特徴量に基づいて、複数の撮像装置１００の各々で撮影された画像の中から、対象人物が映った画像を検索する人物検索処理を行う。人物検索処理では、例えば、対象人物について取得した人物特徴量を、他の画像から取得した人物特徴量と比較して類似度を算出し、類似度が所定の閾値以上である場合に、対象人物が映った画像であると判断する。本例では、人物検索処理として、画像蓄積部２０１内の画像に対して現在時刻から遡って検索処理を行う過去検索と、その後に撮像装置１００から送信される画像に対して検索処理を行うリアルタイム検索とを行う。

結果表示部２０６は、人物検索部２０５による検索結果に基づいて、対象人物の移動を示す表示をユーザ端末３００に画面出力させる追跡結果表示処理を行う。対象人物の移動は、検索結果の各画像に対応付けられた撮像装置番号及び撮像時刻に基づいて追跡できる。例えば、検索結果の各画像を撮像時刻順にソートした場合の撮像装置番号の並び順を特定することで、撮像装置番号に対応する撮像装置１００の撮影エリアの順に対象人物が移動したことを追跡できる。対象人物の移動を示す情報（対象人物追跡の結果）の表示例については後述する。

図２には、監視サーバ２００のハードウェア構成の例を示してある。監視サーバ２００は、例えば、ＣＰＵ（Central Processing Unit）２２１と、主記憶部２２２と、補助記憶部２２３と、ネットワークインタフェース（Ｉ／Ｆ）２２４とを、バス２２５で結合して構成される。

ＣＰＵ２２１は、監視サーバ２００の各部の制御や、本発明に係る各種の機能を実現するためのプログラムの実行を行う。主記憶部２２２は、ＤＲＡＭ（Dynamic Random Access Memory）などの半導体装置で実現され、ＣＰＵ２２１で実行するプログラムなどをロードして格納するための中間的なメモリである。補助記憶部２２３は、ＨＤＤやフラッシュメモリなどで実現され、主記憶部２２２より大容量のメモリであり、各種のデータやプログラムを格納する。ネットワークＩ／Ｆ２２４は、ネットワーク４００を介して、撮像装置１００から送信された画像の受信、ユーザ端末３００から送信された各種の入力データの受信、ユーザ端末３００に対する各種の提供データの送信などを行うためのインタフェースである。

本例の監視サーバ２００は、上述した各処理部２０１〜２０６の動作を規定したプログラムを補助記憶部２２３に記憶しており、主記憶部２２２にロードしてＣＰＵ２２１で実行することで、各処理部２０１〜２０６を実現するように構成されている。なお、処理部２０１〜２０６の一部又は全てを、上記のようなソフトウェアで実現するのではなく、専用のハードウェア回路で実現してもよい。

図３には、監視サーバ２００による対象人物追跡の処理フローの例を示す図である。
監視サーバ２００は、放置物検知部２０２により放置物検知処理を行う（ステップＳ１０１）。放置物検知処理は、撮像装置１００から画像を受信する毎、あるいは受信した画像を画像蓄積部２０１に格納する毎に行われる。
監視サーバ２００は、放置物を検知すると、その旨のメッセージをユーザ端末３００に発報して、ユーザ端末３００のユーザに放置物の検知を知らせる。また、監視サーバ２００は、人物特定部２０３により放置時画像特定処理を行うことで、放置物が置かれた瞬間の画像を放置時画像として特定する（ステップＳ１０２）。次いで、監視サーバ２００は、人物特定部２０３により人物特定処理を行うことで、放置時画像に映った少なくとも一人の人物を対象人物として特定する（ステップＳ１０３）。

次いで、監視サーバ２００は、人物特徴量取得部２０４により人物特徴量取得処理を行うことで、対象人物に関する人物特徴量を取得する（ステップＳ１０４）。次いで、監視サーバ２００は、対象人物に関する人物特徴量に基づいて、人物検索部２０５により人物検索処理を行うことで、対象人物が映った画像を検索する（ステップＳ１０５）。次いで、監視サーバ２００は、結果表示部２０６により追跡結果表示処理を行うことで、対象人物の移動を示す情報をユーザ端末３００の画面に表示させる（ステップＳ１０６）。

ここで、ステップＳ１０２〜ステップＳ１０６の各処理は、放置物を検知した旨のメッセージを確認したユーザからの指示を待って行ってもよく、放置物の検知後に直ちに行ってもよい。
また、ステップＳ１０３で複数の対象人物が特定された場合には、各々の対象人物についてステップＳ１０４〜Ｓ１０６を繰り返してもよいし、いずれかの対象人物についてステップＳ１０４〜Ｓ１０６を行ってもよい。なお、いずれかの対象人物について処理を行う場合には、特定された複数の対象人物をユーザ端末３００のユーザに提示し、その中から対象人物をユーザに選択させればよい。

次に、対象人物追跡の結果の表示例（結果表示部２０６による表示例）について説明する。
図４には、対象人物追跡の結果の表示例を示してある。図４の表示例は、対象人物が移動した経路を地図上で示す地図表示領域２４１と、対象人物が映った各画像を時系列順に並べて示すタイムライン表示領域２４６とを有している。
地図表示領域２４１には、対象人物を撮影した撮像装置の配置場所Ｃ１〜Ｃ４を含むエリアの地図上に、撮像装置の配置場所Ｃ１〜Ｃ４と、対象人物が映った地点Ｔ１〜Ｔ６とを示してある。このような地図表示を実現するには、本システムを配備した施設内の地図と、施設内の各所に設置された撮像装置の配置場所（Ｃ１〜Ｃ４）とを予め記憶しておけばよい。これにより、対象人物が映った画像に付与された撮像装置番号から、対象人物を撮影した撮像装置の配置場所を特定して、地図上に表示することができる。
また、タイムライン表示領域２４６には、各地点（Ｔ１〜Ｔ６）で撮影された画像が、時系列順に並べて表示される。

更に、地図表示領域２４１の地図上には、対象人物の移動経路２４２を重ねて表示してある。移動経路２４２は、各地点（Ｔ１〜Ｔ６）の座標、各地点を対象人物が通過した時刻（画像の撮影時刻）、予め設定した一般的な歩行速度などに基づいて推定することができる。移動経路２４２の推定は、本例では結果表示部２０６が行っている。移動経路２４２は、人物検索部２０５における過去検索による検索結果に基づいて推定された経路であり、その後のリアルタイム検索による検索結果に基づいて、その後の対象人物の移動経路２４３を追加してもよい。更に、過去又は現在の移動経路２４２、２４３に基づいて、対象人物が今後通過する可能性の高い移動経路を予測し、未来の移動経路として表示する機能を備えてもよい。

図５には、対象人物追跡の結果の別の表示例を示してある。図５の表示例は、対象人物が映った各画像を撮像装置別に時系列順に並べて示すタイムライン詳細表示領域２５１を有している。タイムライン詳細表示領域２５１は、第１の表示例（図４）におけるタイムライン表示領域２４６を撮像装置別に分けたものである。
本例では、図４の表示又は図５の表示のどちらを用いるかを予め設定してあるが、ユーザ端末３００のユーザが選択できるようにしてもよいし、ユーザの指定により表示の切り替えができるようにしてもよい。また、図４のタイムライン表示領域２４６に代えて、図５のタイムライン詳細表示領域２５１を用いるようにしてもよい。

以上説明したように、本例の映像監視システムでは、放置物検知部２０２が、複数の撮像装置１００のいずれかで撮影された画像に映った放置物を検知し、人物特定部２０３が、放置物が検知された場合に、放置物が現れる直前又は直後の画像を放置時画像として特定し、放置時画像に映った少なくとも一人の人物を対象人物として特定し、人物検索部２０５が、複数の撮像装置１００の各々で撮影された画像の中から、対象人物が映った画像を検索し、結果表示部２０６が、対象人物が映った各画像を撮影した撮像装置及び撮像時刻に基づいて、対象人物の移動を示す表示をユーザ端末３００に画面出力させるように構成されている。したがって、本例の映像監視システムによれば、放置物の検知から対象人物の移動追跡までを自動化できるので、施設内の監視におけるユーザ負担が軽減されると共に、リアルタイムに効率よく対象人物の追跡を行うことができる。

また、本例の映像監視システムでは、放置時画像に基づいて、対象人物の顔特徴量及び着衣特徴量を含む人物特徴量を取得する人物特徴量取得部２０４を更に備え、人物検索部２０５が、対象人物の人物特徴量に基づいて、対象人物が映った画像を検索するように構成されている。したがって、本例の映像監視システムによれば、対象人物の顔特徴量だけでなく着衣特徴量も用いて検索を行うので、放置時画像に対象人物の顔が十分に映っていない場合でも、その人物の着衣等から、対象人物を映した他の画像を検索することができる。

また、本例の映像監視システムでは、結果表示部２０６が、対象人物の移動を示す表示として、対象人物が移動した経路を地図上で示す表示、又は、対象人物が映った各画像を撮像装置別に時系列順に並べて示す表示を画面出力させるように構成されている。したがって、本例の映像監視システムによれば、ユーザ端末３００のユーザは、放置物を放置した対象人物（意図して放置した不審人物又は意図せず遺失した人物を含む）及びその人物の移動状況について容易に確認することができる。

また、本例の映像監視システムでは、人物特定部２０３が、放置時画像を特定できない場合に、放置物と一緒に映っている時間の長さに基づいて対象人物を特定するように構成されている。したがって、本例の映像監視システムによれば、放置時画像を特定できない場合にも、放置物を放置した可能性が高い人物を対象人物として特定することができる。

なお、上述した各処理部２０１〜２０６による処理内容は単なる例示であり、他の手法を用いて本発明に係る各種の機能を実現してもよい。
例えば、人物検索の結果には、対象人物が映った画像だけではなく別人が映った画像も含まれることがあるが、別人の画像が多い場合は、人物検索に用いる人物特徴量が適切でないと考えられる。つまり、検索結果に別人が多い場合には、特徴量空間上で対象人物本人と別人とを区別する特徴が表れていないことが想定される。そこで、着衣特徴量の各要素（帽子、上着、ズボン、持ち物、身飾品など）のそれぞれに与える重みを異ならせた幾つかの重みパターンを用意しておき、各重みパターンをそれぞれ適用して人物検索を試行し、結果の本人と別人が区別しやすい重みパターンを自動的に選択するようにしてもよい。このパターン選択方法として、例えば次のような方法を適用することができる。各重みパターンをそれぞれ適用して人物検索を試行し、人物毎に各試行で検索された回数を記録する。ここで、検索された回数が多い人物は本人である確度が高いと言える。次に、検索された回数の多い人物を、検索回数順に所定人数選択する。この人物を本人候補人物と呼ぶ。次に各重みパターンの検索結果の中で本人候補人物が最も多く検索された重みパターンを選択する。この重みパターンは、本人が多く含まれる確率が高く、本人と別人の区別に寄与する特徴量に対して大きな重みを与え、寄与しない特徴量には小さな重みを与えるような重みパターンとなる。この重みパターンを使用することにより、人物検索の精度を高めることができる。また、一つの重みパターンを用いて対象人物を最終判定するのではなく、対象人物を特定する前段階において、前記本人候補人物が多く含まれる重みパターンを使用して、明らかに別人と思われる人物を除外することもできる。すなわち、例えば検索結果の論理積処理により、対象人物が含まれる確率を高めることで、検索結果のごみ取りによる対象人物の絞り込みを行うこともできる。

例えば、放置時画像に対象人物の顔が十分に映っていない場合に、同じ撮像装置で撮影された放置時画像の前後数フレームの画像の中から、顔の映りが良好な同一人物の画像を選定し、その画像から顔特徴量（及び着衣特徴量）を取得するようにしてもよい。なお、画像中の人物が同一人物か否かは、画像（フレーム）間における人物の画像領域の位置関係や、各画像における人物の着衣特徴量の同一性などから判断することができる。

なお、本発明に係るシステムや装置などの構成としては、必ずしも以上に示したものに限られず、種々な構成が用いられてもよい。
また、本発明は、例えば、本発明に係る処理を実行する方法や方式、そのような方法や方式を実現するためのプログラム、そのプログラムを記憶する記憶媒体などとして提供することも可能である。

本発明は、撮像装置により撮影された映像を監視する映像監視システムに利用することができる。

１００：撮像装置、 ２００：監視サーバ、 ３００：ユーザ端末、 ４００：ネットワーク、
２０１：画像蓄積部、 ２０２：放置物検知部、 ２０３：人物特定部、 ２０４：人物特徴量取得部、 ２０５：人物検索部、 ２０６：結果表示部、
２２１：ＣＰＵ、 ２２２：主記憶部、 ２２３：補助記憶部、 ２２４：ネットワークＩ／Ｆ

Claims (6)

1. 複数の撮像装置を備えた映像監視システムにおいて、
   前記複数の撮像装置のいずれかで撮影された画像に映った放置物を検知する放置物検知部と、
   前記放置物が検知された場合に、前記放置物が現れる直前又は直後の画像を特定し、当該画像に映った少なくとも一人の人物を対象人物に特定する人物特定部と、
   前記複数の撮像装置の各々で撮影された画像の中から、前記対象人物が映った画像を検索する人物検索部と、
   前記対象人物が映った各画像を撮影した撮像装置及び撮像時刻に基づいて、前記対象人物の移動を示す表示を画面出力させる結果表示部と、
   を備えたことを特徴とする映像監視システム。
2. 請求項１に記載の映像監視システムにおいて、
   前記特定された画像に基づいて、前記対象人物の顔特徴量及び着衣特徴量を含む人物特徴量を取得する人物特徴量取得部を更に備え、
   前記人物検索部は、前記人物特徴量に基づいて、前記対象人物が映った画像を検索することを特徴とする映像監視システム。
3. 請求項１又は請求項２に記載の映像監視システムにおいて、
   前記結果表示部は、前記対象人物の移動を示す表示として、前記対象人物が移動した経路を地図上で示す表示、又は、前記対象人物が映った各画像を撮像装置別に時系列順に並べて示す表示を画面出力させることを特徴とする映像監視システム。
4. 請求項１乃至請求項３のいずれかに記載の映像監視システムにおいて、
   前記人物特定部は、前記特定した画像から複数の人物が検出された場合、前記放置物からの距離が最も近い人物を前記対象人物に特定することを特徴とする映像監視システム。
5. 請求項１乃至請求項３のいずれかに記載の映像監視システムにおいて、
   前記人物特定部は、前記特定した画像から複数の人物が検出された場合、前記放置物からの距離が所定の閾値以下の人物、又は、前記距離が短い方から上位数名を前記対象人物に特定することを特徴とする映像監視システム。
6. 複数の撮像装置のいずれかで撮影された画像に映った放置物を検知する工程と、
   前記放置物が検知された場合に、前記放置物が現れる直前又は直後の画像を特定し、当該画像に映った少なくとも一人の人物を対象人物に特定する工程と、
   前記複数の撮像装置の各々で撮影された画像の中から、前記対象人物が映った画像を検索する工程と、
   前記対象人物が映った各画像を撮影した撮像装置及び撮像時刻に基づいて、前記対象人物の移動を示す表示を画面出力させる工程と、
   を含むことを特徴とする映像監視方法。

Images