JP3999561B2 - 監視システムと監視カメラ - Google Patents
監視システムと監視カメラ Download PDFInfo
- Publication number
- JP3999561B2 JP3999561B2 JP2002131308A JP2002131308A JP3999561B2 JP 3999561 B2 JP3999561 B2 JP 3999561B2 JP 2002131308 A JP2002131308 A JP 2002131308A JP 2002131308 A JP2002131308 A JP 2002131308A JP 3999561 B2 JP3999561 B2 JP 3999561B2
- Authority
- JP
- Japan
- Prior art keywords
- feature information
- camera device
- monitoring
- information
- monitoring camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/009—Signalling of the alarm condition to a substation whose identity is signalled to a central station, e.g. relaying alarm signals in order to extend communication range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19608—Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19641—Multiple cameras having overlapping views on a single scene
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
- G08B13/19656—Network used to communicate with a camera, e.g. WAN, LAN, Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
- Burglar Alarm Systems (AREA)
- Studio Devices (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、複数の監視カメラを備える監視システムと、このシステムで使用する監視カメラに関し、特に、複数のカメラを連携させて、移動する人物などの監視を実現するものである。
【０００２】
【従来の技術】
従来から、建物などに出入りする人の監視を、監視カメラを用いて自動化するシステムが種々開発されている。
【０００３】
特開２０００−１６３６００号公報には、監視カメラに映る画像から顔の特徴を抽出し、データベースに登録されている顔マスクと一致するかどうかを比較する監視システムが記載されている。このシステムでは、監視カメラの画像信号を解析する制御手段が、監視カメラに映る人物の顔の位置を確認し、顔が画面の中央に位置するように、監視カメラのパン、チルト及びズームを制御して顔の動きを追跡する。そして、顔の停止画像から目、鼻、口、眉毛の輪郭線を抽出し、この輪郭線を基準として顔の特徴点を抽出し、データベースに登録されている顔マスクと比較する。
【０００４】
また、特開平６−３２５１８０号公報には、複数のカメラを用いて移動体を追跡監視するシステムが記載されている。このシステムは、図１３に示すように、複数の監視カメラ装置１と、監視カメラ装置１の映像を表示するモニター装置６と、監視カメラ装置１を切り替えてモニター装置６への映像出力を変更するカメラ切り替え装置２とを備えており、カメラ切り替え装置２では、動き認識手段４が、移動体を映したモニター装置６の画像から移動体の動きを検出し、カメラ切り替え手段３が、カメラ設置情報５を参照して、移動体の移動先の位置に設置された監視カメラ装置１の映像をモニター装置６に出力するように、監視カメラ装置１の切り替えを行う。
【０００５】
【発明が解決しようとする課題】
しかし、屋内や屋外で不審者などの移動を追跡監視する場合には、パン、チルト及びズームの制御が可能な監視カメラを使用しても、一台のカメラで追跡できる範囲は限られる。また、複数のカメラを用いるときでも、移動体の動きを検出して切り替え先のカメラを決定する方式では、死角が発生したときに、移動体の位置・動き情報が途絶えるので、それ以降、追跡が続けられなくなると言う問題がある。
【０００６】
そのため、広い場所や入り組んだ場所など、カメラを網羅的に設置することが困難な環境では、移動体の追跡は不可能である。また、カメラが故障したときも、同様に死角が発生するので、追跡が続けられなくなる。
また、この方式では、監視カメラの位置関係を設定して、切り替え先のカメラを決定する必要があるため、監視カメラの移動や追加が容易ではないと言う問題がある。
【０００７】
本発明は、こうした従来の問題点を解決するものであり、複数のカメラが連携して、移動体を追跡監視することができる監視システムを提供し、また、その監視カメラを提供することを目的としている。
【０００８】
【課題を解決するための手段】
本発明は、複数の監視カメラ装置が連携して追跡対象の移動体の映像を捕捉する監視システムの監視カメラ装置であって、映像を撮影してデジタル映像データを出力する画像撮影手段と、前記デジタル映像データの中の移動体の特徴を示す特徴情報の抽出結果である入力情報を出力する特徴情報抽出手段と、追跡対象の移動体の特徴情報を、他の監視カメラ装置と交換する特徴情報交換手段と、前記特徴情報交換手段が他の監視カメラ装置と追跡対象の移動体の特徴情報を交換するとき、前記他の監視カメラ装置と画像認識機能に関する能力交換を行うことで、伝送する特徴情報の種類を決定する特徴情報調停手段と、を備えることを特徴とする。
【００１０】
この監視システムでは、複数の監視カメラが相互間で追跡対象の特徴情報を受け渡し、その特徴情報を用いて各監視カメラが追跡対象を追跡するので、死角が多い空間でも、追跡対象を追跡し続けることができる。
【００１１】
【発明の実施の形態】
（第１の実施形態）
本発明の第１の実施形態における監視システムの監視カメラ装置は、撮影した画像から移動体（人物）を認識する機能と、認識した人物の情報を監視カメラ装置間で交換する機能とを備えている。
この監視システムは、図１に示すように、複数の監視カメラ装置10と、監視カメラ装置10から送られて来る追跡中の人物の映像を表示するモニター装置50とを備えており、監視カメラ装置10の間、及び、監視カメラ装置10とモニター装置50との間ではネットワーク80を介して、必要なデータの伝送が行われる。
【００１２】
各監視カメラ装置10（ここでは、監視カメラ装置Ａ、監視カメラ装置Ｂとする）は、映像を撮影しデジタル映像データを出力する画像撮影手段11と、撮影された画像の特徴情報を抽出する特徴情報抽出手段12と、特徴情報抽出手段12が抽出した特徴情報と追跡中の人物の特徴情報とを比較する特徴情報比較手段13と、追跡中の人物の特徴情報が含まれる映像を、ネットワーク80を介してモニター装置50に伝送する映像伝送手段14と、追跡中の人物の特徴情報を、ネットワーク80を介して他の監視カメラ装置10との間で交換する特徴情報交換手段15とを備えている。
また、モニター装置50は、監視カメラ装置10から送られて来る映像信号を受信する映像受信手段51と、この映像を表示する表示手段52とを備えている。なお、モニター装置50は、表示手段52に代えて、あるいは表示手段52とともに、映像信号を記録する記録手段53を備えていても良い。
【００１３】
監視カメラ装置10の特徴情報抽出手段12が抽出する特徴情報は、例えば、画像から切り出した移動体の画像データであり、あるいは、形状、色、大きさなどにより移動体を特定する情報であり、あるいは、顔の目や鼻や口の形状、位置などを特定する情報である。
これらの特徴情報の抽出方法は、広く知られている。図２は、画像から移動体の画像データを切り出す方法を模式的に示している。この場合、フレームメモリに通常時の画像（図２（ａ））を蓄積し、移動体を含む画像（図２（ｂ））との差分を取り、差分が存在する部分のオブジェクトを抽出して、移動体だけを抽出する（図２（ｃ））。
【００１４】
また、図３は、抽出した移動体の画像から、移動体を特定する形状、色、大きさなどの情報を作る作り方について模式的に示している。この場合、画面をブロックに分割し（図３（ａ））、各ブロックの代表的な色などを抽出して、移動体の情報を抽象化する。
また、図４は、顔の特徴情報の作り方を模式的に示しており、顔の構成要素の形や位置の情報を抽出し、目、鼻、口などの大きさや位置、形状の情報を取得する。この方法は、前述する特開２０００−１６３６００号公報や、特開２００１−２５６４９６号公報などに詳述されている。
【００１５】
次に、この監視システムの動作について説明する。
監視カメラ装置10の画像撮影手段11は、規定の周期で画像データをデジタルデータに変換して、特徴情報抽出手段12へ入力する。
図５のフロー図は、特徴情報抽出手段12の処理手順を示している。
ステップ１：特徴情報抽出手段12は、画像撮影手段11から画像データが入力すると、
ステップ２：画像に移動体が含まれているか否かを識別し、移動体がある場合には、
ステップ３：特徴情報を抽出し、
ステップ４：この特徴情報を特徴情報比較手段13に出力する。
ステップ５：ステップ２において、画像に移動体が含まれていないときは、“移動体なし”を特徴情報比較手段13に通知する。
【００１６】
特徴情報比較手段13は、図６に示すように、追跡対象の特徴情報を示す追跡対象情報と、追跡を継続する有効期限と、映像伝送手段14の伝送状態（映像を伝送しているか否か）を示す情報とをメモリ130で保持している。
特徴情報比較手段13には、特徴情報抽出手段12から特徴情報または“移動体なし”の情報が入力し、また、特徴情報交換手段15が他の監視カメラ装置10から受信した移動体の特徴情報が入力する。他の監視カメラ装置10から送られた移動体の特徴情報は、メモリ130に追跡対象情報として登録され、また、メモリ130に追跡対象情報が登録されていないときに、特徴情報抽出手段12から特徴情報が入力すると、この特徴情報が追跡対象情報として登録される。
【００１７】
図７のフロー図は、特徴情報比較手段13の処理手順を示している。
ステップ10：特徴情報比較手段13は、情報が入力すると、
ステップ11：メモリ130の有効期限が有効か否かを識別する。有効期限が切れているときは、
ステップ12：メモリ130の記録をすべて消去し、
ステップ13：映像伝送手段14が映像を伝送中であれば、
ステップ14：映像伝送の停止を指示する。
【００１８】
ステップ15：メモリ130の有効期限が有効である場合、あるいは、メモリ130に何も記録されていない場合（ステップ12でメモリを消去した場合を含む）は、ステップ10で入力した情報の入力元を識別する。特徴情報交換手段15から入力した情報であるときは、
ステップ16：この監視カメラ装置10での追跡対象が存在していない場合に、
ステップ17：メモリ130に、追跡対象情報として特徴情報を登録し、有効期限を現在時間＋規定値に設定する。
【００１９】
また、ステップ15において、情報入力元が特徴情報抽出手段12であるときは、
ステップ18：入力情報の種類を識別する。入力情報が特徴情報のときは、
ステップ20：この監視カメラ装置10での追跡対象が存在していない場合に、
ステップ17：メモリ130に、追跡対象情報として、入力した特徴情報を登録し、有効期限を現在時間＋規定値に設定する。
また、ステップ20において、追跡対象が存在（メモリ130に追跡対象情報が存在）するときは、
ステップ21：入力した特徴情報と追跡対象の特徴情報とを比較し、それらが同一か否かを識別する。
【００２０】
なお、画像を比較して同一性を判断する手法は、良く知られている。簡単な方法では、例えば、特徴情報が移動体の画像データやその抽象化したデータである場合、
１．画像データの大きさと向きを、拡縮及び回転処理等で補正する
２．画像データの差分を計算する
３．計算結果が規定の範囲以内であれば、同一と判定する
と言った手順で判断が可能である。
【００２１】
また、その他の特徴情報も、多次元の数値で表現できる情報へ変換できるので、各次元要素の差分値の重み付き２乗和を利用すれば、同一性を判定できる。
即ち、特徴情報（x1,y1,z1）と（x2,y2,z2）との同一性は、
a1*(x1-x2)2＋a2*(y1-y2)2＋a3*(z1-z2)2
（但し、a1，a2，a3は特徴情報の種類により決定される）
が一定値より小さければ、同一であると判定する。
【００２２】
また、より厳密な方法に関しては、下記の文献
安居院 猛、長尾 智晴 共著「画像の処理と認識」株式会社 昭晃堂
第６章「特徴空間とクラスタリング」
第７章「パターンマッチング」
などに示されている。
【００２３】
さて、ステップ21において、入力した特徴情報と追跡対象の特徴情報とが同一であるときは、
ステップ22：追跡対象情報を、入力した特徴情報に更新し、有効期限を現在時間＋規定値に更新する。
ステップ23：映像伝送手段14が映像を伝送中でなければ、
ステップ24：映像伝送手段14に、画像撮影手段11が撮影した映像の伝送を開始させる。
【００２４】
また、ステップ18において、入力情報が“移動体なし”のときは、
ステップ19：この監視カメラ装置10が追跡対象を捉えていたか否かを識別し、捉えていたとき（即ち、いままで監視カメラ装置10の映像に映っていた追跡対象の移動体が画面から消えたとき）は、
ステップ26：映像伝送手段14が映像伝送中であれば、
ステップ27：映像伝送手段14に映像伝送を停止させ、
ステップ28：メモリ13に登録した追跡対象情報を特徴情報交換手段15へ通知する。
また、ステップ21において、入力した特徴情報が追跡対象の特徴情報と異なる場合も、追跡対象の移動体は画面から消えたと見られるので、ステップ26〜28の手順を行う。
特徴情報交換手段15は、特徴情報比較手段13より通知された特徴情報を他の監視カメラ装置10の特徴情報交換手段15へ伝送する。
【００２５】
こうして、この監視システムでは、監視カメラ装置Ａが追跡目標を見失うと、特徴情報抽出手段12が抽出した特徴情報を、特徴情報交換手段15を用いて他の監視カメラ装置に伝送し、他の監視カメラ装置Ｂは、特徴情報交換手段15から受信した特徴情報と特徴情報抽出手段12が抽出した特徴情報とを特徴情報比較手段13で比較し、一致した場合に映像の伝送を開始する。こうして特徴情報交換手段15が、追跡対象を特定できる特徴情報を受け渡すことで、複数の監視カメラ装置を用いて同じ対象物を追跡することが可能になる。
【００２６】
図８は、建物内に監視カメラ装置Ａ及び監視カメラ装置Ｂが設置され、不審者が矢印の方向に移動したときに（図８（ａ））、モニター装置50の表示画面に映る映像（図８（ｂ））を模式的に示している。監視カメラ装置Ａの映像から不審者が消えると、監視カメラ装置Ａから不審者の特徴情報を受け渡された監視カメラ装置Ｂが不審者を捉えて、その映像をモニター装置50に伝送する。
【００２７】
このように、この監視システムでは、死角が多い空間でも、複数の監視カメラ装置が相互に情報交換しながら同じ対象物を追跡することができる。
【００２８】
（第２の実施形態）
第２の実施形態では、モニター装置の側で追跡対象を指定できる監視システムについて説明する。
このシステムのモニター装置は、図９に示すように、監視カメラ装置10との間で特徴情報を交換する特徴情報交換手段54と、監視者が追跡対象を指示する追跡対象指示手段55とを備えている。その他の構成は第１の実施形態（図１）と変わりがない。
【００２９】
この監視システムの動作を図１０を使って説明する。
移動体の特徴情報を抽出した図１０（ａ）の監視カメラ装置Ａは、画像撮影手段11で撮影した映像（図１０（ａ’））を映像伝送手段14からモニター装置50に送信する。モニター装置50は、この映像を映像受信手段51で受信して表示手段52に表示する。
【００３０】
モニター装置50の監視者は、表示された画像から不審者を発見すると、追跡対象指示手段55から追跡対象の不審者を指示する。モニター装置50の特徴情報交換手段54は、この画像を送信した監視カメラ装置Ａの特徴情報交換手段15と通信して、追跡対象指示手段55が指示した追跡対象の特徴情報を取得する（図９の▲１▼の手順）。
次に、モニター装置50の特徴情報交換手段54は、監視カメラ装置Ａから取得した追跡対象の特徴情報を各監視カメラ装置Ａ、Ｂ、Ｃ、Ｄにブロードキャスト送信する（図９の▲２▼の手順）。各監視カメラ装置Ａ、Ｂ、Ｃ、Ｄの特徴情報交換手段54は、この特徴情報を受信して特徴情報比較手段13に出力し、この特徴情報が特徴情報比較手段13のメモリ130に追跡対象情報として登録される。
【００３１】
その後の動作は、第１の実施形態と変わりがない。即ち、追跡対象を画面に捉えている監視カメラ装置Ａは、追跡対象情報の有効期限を更新しながら、追跡対象が撮影範囲から外れるまで、映像をモニター装置50に送信し続け、追跡対象が撮影範囲から外れると、追跡対象情報を他の監視カメラ装置Ｂ、Ｃ、Ｄに送信して、モニター装置50への映像の送信を停止する。
【００３２】
また、監視カメラ装置Ｂ、Ｃ、Ｄは、モニター装置50から送られた特徴情報を有効期限が切れるまでメモリ130に保持し、その間に追跡対象を画面で捉えたときは、その映像をモニター装置50に送信する。モニター装置50から送られた特徴情報の有効期限が切れた後は、第１の実施形態と同様に、他の監視カメラ装置Ａから受信した特徴情報をメモリ130で保持することになる。
【００３３】
図１０（ｂ）において、監視カメラ装置Ｂ、Ｃ、Ｄは、それぞれ移動体を検出するが、特徴情報と一致する不審者を検出した監視カメラ装置Ｄだけが、その映像（図１０（ｂ’））をモニター装置50に送信する。
【００３４】
このように、この監視システムでは、監視者が追跡対象を指示し、この指示に応じて各監視カメラ装置が自動的に追跡対象を追跡することができる。そのため、人通りが多い場所等でも、追跡対象を明示的に指定することができ、有効な追跡監視が可能になる。
【００３５】
（第３の実施形態）
第３の実施形態では、予め登録された人物以外の不審者だけを追跡する監視システムについて説明する。
このシステムは、図１１に示すように、登録されたユーザの特徴情報が蓄積されたユーザ特徴情報データベース70を備えている。その他の構成は第１の実施形態（図１）と変わりがない。
【００３６】
このユーザ特徴情報データベース70には、ユーザの特徴情報として、顔画像や、目、鼻、口などの位置、形などの顔の特徴に関する情報、あるいは、虹彩情報など、ユーザを一意に特定可能な情報を記述した登録ユーザリストが格納されている。
また、監視カメラ装置10の特徴情報抽出手段12は、画像撮影手段11が撮影した画像から、これらの特徴情報を抽出する。特徴情報比較手段13は、特徴情報抽出手段12から特徴情報が入力されると、特徴情報交換手段15を介して、ユーザ特徴情報データベース70から登録ユーザリストを取得し（図１１の▲１▼の手順）、特徴情報抽出手段12から入力した特徴情報が登録ユーザリストに載っているか否かを判定する。そして、この特徴情報が登録ユーザリストに載っていない場合にのみ、メモリ130にその特徴情報を追跡対象情報として記録する。
【００３７】
その後の動作は、第１の実施形態と変わりがない。即ち、追跡対象を画面に捉えている監視カメラ装置Ａは、追跡対象が撮影範囲から外れるまで、映像をモニター装置50に送信し続け、追跡対象が撮影範囲から外れると、追跡対象情報を他の監視カメラ装置に送信して、モニター装置50への映像の送信を停止する。
また、他の監視カメラ装置10は、監視カメラ装置Ａから受信した特徴情報をメモリ130で保持し、追跡対象を画面に捉えたときに、その映像をモニター装置50に送信する。
【００３８】
このように、この監視システムでは、登録ユーザリストに載っていない不審者のみが追跡対象とされ、その不審者が映る監視カメラ装置10の映像だけがモニター装置50に送られて表示または記録される。
また、逆に、登録ユーザリスト（所謂ブラックリスト）に載っている人物のみを追跡対象とし、その人物が映る監視カメラ装置10の映像だけをモニター装置50に送って表示または記録することも可能である。
【００３９】
なお、虹彩認証の技術は、日本自動認識システム協会編、瀬戸洋一他著「これでわかったバイオメトリクス」（オーム社）などに記載されている。
【００４０】
（第４の実施形態）
第４の実施形態では、認証機能を異にする複数の監視カメラ装置が連携して追跡対象を追跡する監視システムについて説明する。
このシステムでは、図１２に示すように、複数の認証機能を備えた高機能監視カメラ装置20と、一つの認証機能を備えた単機能監視カメラ装置30、40とがネットワーク80を介して接続している。
【００４１】
高機能監視カメラ装置20は、画像撮影手段11、映像伝送手段14、特徴情報交換手段15の他に、特徴情報を他の監視カメラ装置との間で交換する際に、認識能力についての能力交換を行う特徴情報調停手段16を備え、また、特徴情報抽出手段及び特徴情報比較手段として、例えば、追跡対象の顔に関する認識機能を有する特徴情報抽出手段ａ（32）及び特徴情報比較手段ａ(33）と、追跡対象の全体形状に関する認識機能を有する特徴情報抽出手段ｂ（42）及び特徴情報比較手段ｂ(43）とを備えている。
また、単機能監視カメラ装置30は、画像撮影手段11、映像伝送手段14、特徴情報交換手段15、及び、特徴情報調停手段16と、追跡対象の顔に関する認識機能を有する特徴情報抽出手段ａ（32）と特徴情報比較手段ａ(33）とを備えている。
【００４２】
一方、単機能監視カメラ装置40は、画像撮影手段11、映像伝送手段14、特徴情報交換手段15、及び、特徴情報調停手段16と、追跡対象の全体形状に関する認識機能を有する特徴情報抽出手段ｂ（42）と特徴情報比較手段ｂ(43）とを備えている。
【００４３】
次に、この監視システムの動作について説明する。
高機能監視カメラ装置20は、特徴情報交換手段15を通じて、単機能監視カメラ装置30、40に特徴情報を送信する場合、まず、特徴情報調停手段16により、認識能力についての能力交換を行う（図１２の▲１▼の手順）。
能力交換は、Ｈ．３２３やＳＩＰ（Session Initiation Protocol）などのマルチメディア情報通信プロトコルに搭載される機能であり、相手と共通の通信方式を決定するため、通信の始めに、自分が扱える情報を交換する。
【００４４】
例えば、高機能監視カメラ装置20は、通信開始時に、通信開始要求と、高機能監視カメラ装置20が自分で伝送できる特徴情報を列挙した特徴情報形式（顔認識、物体認識）とを単機能監視カメラ装置30、40に送信する。
単機能監視カメラ装置30は、列挙された情報の中から自分が利用できる情報を選択し、通信要求受理と、特徴情報形式（顔認識）とを高機能監視カメラ装置20に返信する。
これを受けて、高機能監視カメラ装置20は、単機能監視カメラ装置30に対しては、特徴情報抽出手段ａ（32）が抽出した顔認識の特徴情報を単機能監視カメラ装置30に送信する（図１２の▲２▼の手順）。
【００４５】
一方、単機能監視カメラ装置30は、列挙された情報の中から自分が利用できる情報を選択し、通信要求受理と、特徴情報形式（物体認識）とを高機能監視カメラ装置20に返信する。
これを受けて、高機能監視カメラ装置20は、単機能監視カメラ装置40に対しては、特徴情報抽出手段ｂ（42）が抽出した物体認識の特徴情報を単機能監視カメラ装置40に送信する。
【００４６】
このように、この監視システムでは、認証機能を異にする複数の監視カメラ装置が、相互の間で共通して扱うことができる特徴情報を交換しながら、連携して追跡対象を追跡することが可能になる。
【００４７】
施設や特定地域を監視する場合には、次のような形態でこの監視システムを適用することにより、効率的な監視を行うことができる。
施設や地域の入口に顔特徴情報（顔認証など特定の部位の高精度な特徴情報）と全体特徴情報（体の形状や色情報などの低精度だが適用範囲の広い特徴情報）とを取得可能な高機能監視カメラ装置を配置し、その他の場所には、全体特徴情報のみが取得可能な単機能監視カメラ装置を配置する。また、第３の実施形態で説明した登録ユーザリストに、施設の利用が許可された会員や地域住民の顔特徴情報を登録する。
【００４８】
入口に配置した高機能監視カメラ装置は、入口を通過する人物の顔特徴情報を取得して、登録ユーザリストの顔特徴情報と比較し、登録ユーザリストに載っていない不審者を認識すると、その映像をモニター装置に送信するとともに、各単機能監視カメラ装置に不審者の全体特徴情報を送信する。各単機能監視カメラ装置は、撮影画像の中で不審者の全体特徴情報を捉えた場合に、その映像をモニター装置に送信する。
【００４９】
このように、各設置場所に、その場所に合った機能の監視カメラを配置して、各監視カメラを連携させることにより、高度な監視が実現できる。また、高機能カメラを一台だけ使用し、他は低機能カメラを使用することにより、コストが削減できる。
また、同様に、人がよく通る廊下やホールに高機能カメラを一台配置し、人が通らない場所や各部屋には単機能カメラを配置するような応用も可能である。
【００５０】
【発明の効果】
以上の説明から明らかなように、本発明の監視システムでは、知能化した複数の監視カメラ装置が連携を取りながら、自律的に追跡対象を追跡し、その映像をモニター装置に伝送する。従って、監視者は、特別の操作を行わなくても、不審者などをモニター上で容易に追跡監視することができる。
【００５１】
また、この監視システムでは、不審者が監視カメラの死角に入ったときでも、その後、監視カメラが追跡対象者を映像に捉えた段階で、自動的に不審者の追跡が再開される。そのため、死角が多い空間においても、同じ対象物を追跡し続けることができる。また、監視カメラの設置個数を減らすことも可能である。
【図面の簡単な説明】
【図１】本発明の第１の実施形態における監視システムの構成を示すブロック図
【図２】第１の実施形態における監視カメラ装置の物体切り出しによる画像認識方法を示す説明図
【図３】第１の実施形態における監視カメラ装置の物体情報を抽象化する画像認識方法を示す説明図
【図４】第１の実施形態における監視カメラ装置の顔の特徴情報を抽出する画像認識方法を示す説明図
【図５】第１の実施形態における特徴情報抽出手段の動作を示すフロー図
【図６】第１の実施形態における特徴情報比較手段のメモリ構成を示す図
【図７】第１の実施形態における特徴情報比較手段の動作を示すフロー図
【図８】第１の実施形態における監視システムのモニター表示を説明する図
【図９】本発明の第２の実施形態における監視システムの構成を示すブロック図
【図１０】第２の実施形態における監視システムのモニター表示を説明する図
【図１１】本発明の第３の実施形態における監視システムの構成を示すブロック図
【図１２】本発明の第４の実施形態における監視システムの構成を示すブロック図
【図１３】従来の監視システムの構成を示すブロック図
【符号の説明】
１ 監視カメラ装置
２ カメラ切り替え装置
３ カメラ切り替え手段
４ 動き認識手段
５ カメラ設置情報
６ モニター装置
10 監視カメラ装置
11 画像撮影手段
12 特徴情報抽出手段
13 特徴情報比較手段
14 映像伝送手段
15 特徴情報交換手段
16 特徴情報調停手段
20 高機能監視カメラ装置
30 単機能監視カメラ装置
32 特徴情報抽出手段ａ
33 特徴情報比較手段ａ
40 単機能監視カメラ装置
42 特徴情報抽出手段ｂ
43 特徴情報比較手段ｂ
50 モニター装置
51 映像受信手段
52 表示手段
53 記録手段
54 特徴情報交換手段
55 追跡対象指示手段
70 ユーザ特徴情報データベース
80 ネットワーク
130 メモリ
【発明の属する技術分野】
本発明は、複数の監視カメラを備える監視システムと、このシステムで使用する監視カメラに関し、特に、複数のカメラを連携させて、移動する人物などの監視を実現するものである。
【０００２】
【従来の技術】
従来から、建物などに出入りする人の監視を、監視カメラを用いて自動化するシステムが種々開発されている。
【０００３】
特開２０００−１６３６００号公報には、監視カメラに映る画像から顔の特徴を抽出し、データベースに登録されている顔マスクと一致するかどうかを比較する監視システムが記載されている。このシステムでは、監視カメラの画像信号を解析する制御手段が、監視カメラに映る人物の顔の位置を確認し、顔が画面の中央に位置するように、監視カメラのパン、チルト及びズームを制御して顔の動きを追跡する。そして、顔の停止画像から目、鼻、口、眉毛の輪郭線を抽出し、この輪郭線を基準として顔の特徴点を抽出し、データベースに登録されている顔マスクと比較する。
【０００４】
また、特開平６−３２５１８０号公報には、複数のカメラを用いて移動体を追跡監視するシステムが記載されている。このシステムは、図１３に示すように、複数の監視カメラ装置１と、監視カメラ装置１の映像を表示するモニター装置６と、監視カメラ装置１を切り替えてモニター装置６への映像出力を変更するカメラ切り替え装置２とを備えており、カメラ切り替え装置２では、動き認識手段４が、移動体を映したモニター装置６の画像から移動体の動きを検出し、カメラ切り替え手段３が、カメラ設置情報５を参照して、移動体の移動先の位置に設置された監視カメラ装置１の映像をモニター装置６に出力するように、監視カメラ装置１の切り替えを行う。
【０００５】
【発明が解決しようとする課題】
しかし、屋内や屋外で不審者などの移動を追跡監視する場合には、パン、チルト及びズームの制御が可能な監視カメラを使用しても、一台のカメラで追跡できる範囲は限られる。また、複数のカメラを用いるときでも、移動体の動きを検出して切り替え先のカメラを決定する方式では、死角が発生したときに、移動体の位置・動き情報が途絶えるので、それ以降、追跡が続けられなくなると言う問題がある。
【０００６】
そのため、広い場所や入り組んだ場所など、カメラを網羅的に設置することが困難な環境では、移動体の追跡は不可能である。また、カメラが故障したときも、同様に死角が発生するので、追跡が続けられなくなる。
また、この方式では、監視カメラの位置関係を設定して、切り替え先のカメラを決定する必要があるため、監視カメラの移動や追加が容易ではないと言う問題がある。
【０００７】
本発明は、こうした従来の問題点を解決するものであり、複数のカメラが連携して、移動体を追跡監視することができる監視システムを提供し、また、その監視カメラを提供することを目的としている。
【０００８】
【課題を解決するための手段】
本発明は、複数の監視カメラ装置が連携して追跡対象の移動体の映像を捕捉する監視システムの監視カメラ装置であって、映像を撮影してデジタル映像データを出力する画像撮影手段と、前記デジタル映像データの中の移動体の特徴を示す特徴情報の抽出結果である入力情報を出力する特徴情報抽出手段と、追跡対象の移動体の特徴情報を、他の監視カメラ装置と交換する特徴情報交換手段と、前記特徴情報交換手段が他の監視カメラ装置と追跡対象の移動体の特徴情報を交換するとき、前記他の監視カメラ装置と画像認識機能に関する能力交換を行うことで、伝送する特徴情報の種類を決定する特徴情報調停手段と、を備えることを特徴とする。
【００１０】
この監視システムでは、複数の監視カメラが相互間で追跡対象の特徴情報を受け渡し、その特徴情報を用いて各監視カメラが追跡対象を追跡するので、死角が多い空間でも、追跡対象を追跡し続けることができる。
【００１１】
【発明の実施の形態】
（第１の実施形態）
本発明の第１の実施形態における監視システムの監視カメラ装置は、撮影した画像から移動体（人物）を認識する機能と、認識した人物の情報を監視カメラ装置間で交換する機能とを備えている。
この監視システムは、図１に示すように、複数の監視カメラ装置10と、監視カメラ装置10から送られて来る追跡中の人物の映像を表示するモニター装置50とを備えており、監視カメラ装置10の間、及び、監視カメラ装置10とモニター装置50との間ではネットワーク80を介して、必要なデータの伝送が行われる。
【００１２】
各監視カメラ装置10（ここでは、監視カメラ装置Ａ、監視カメラ装置Ｂとする）は、映像を撮影しデジタル映像データを出力する画像撮影手段11と、撮影された画像の特徴情報を抽出する特徴情報抽出手段12と、特徴情報抽出手段12が抽出した特徴情報と追跡中の人物の特徴情報とを比較する特徴情報比較手段13と、追跡中の人物の特徴情報が含まれる映像を、ネットワーク80を介してモニター装置50に伝送する映像伝送手段14と、追跡中の人物の特徴情報を、ネットワーク80を介して他の監視カメラ装置10との間で交換する特徴情報交換手段15とを備えている。
また、モニター装置50は、監視カメラ装置10から送られて来る映像信号を受信する映像受信手段51と、この映像を表示する表示手段52とを備えている。なお、モニター装置50は、表示手段52に代えて、あるいは表示手段52とともに、映像信号を記録する記録手段53を備えていても良い。
【００１３】
監視カメラ装置10の特徴情報抽出手段12が抽出する特徴情報は、例えば、画像から切り出した移動体の画像データであり、あるいは、形状、色、大きさなどにより移動体を特定する情報であり、あるいは、顔の目や鼻や口の形状、位置などを特定する情報である。
これらの特徴情報の抽出方法は、広く知られている。図２は、画像から移動体の画像データを切り出す方法を模式的に示している。この場合、フレームメモリに通常時の画像（図２（ａ））を蓄積し、移動体を含む画像（図２（ｂ））との差分を取り、差分が存在する部分のオブジェクトを抽出して、移動体だけを抽出する（図２（ｃ））。
【００１４】
また、図３は、抽出した移動体の画像から、移動体を特定する形状、色、大きさなどの情報を作る作り方について模式的に示している。この場合、画面をブロックに分割し（図３（ａ））、各ブロックの代表的な色などを抽出して、移動体の情報を抽象化する。
また、図４は、顔の特徴情報の作り方を模式的に示しており、顔の構成要素の形や位置の情報を抽出し、目、鼻、口などの大きさや位置、形状の情報を取得する。この方法は、前述する特開２０００−１６３６００号公報や、特開２００１−２５６４９６号公報などに詳述されている。
【００１５】
次に、この監視システムの動作について説明する。
監視カメラ装置10の画像撮影手段11は、規定の周期で画像データをデジタルデータに変換して、特徴情報抽出手段12へ入力する。
図５のフロー図は、特徴情報抽出手段12の処理手順を示している。
ステップ１：特徴情報抽出手段12は、画像撮影手段11から画像データが入力すると、
ステップ２：画像に移動体が含まれているか否かを識別し、移動体がある場合には、
ステップ３：特徴情報を抽出し、
ステップ４：この特徴情報を特徴情報比較手段13に出力する。
ステップ５：ステップ２において、画像に移動体が含まれていないときは、“移動体なし”を特徴情報比較手段13に通知する。
【００１６】
特徴情報比較手段13は、図６に示すように、追跡対象の特徴情報を示す追跡対象情報と、追跡を継続する有効期限と、映像伝送手段14の伝送状態（映像を伝送しているか否か）を示す情報とをメモリ130で保持している。
特徴情報比較手段13には、特徴情報抽出手段12から特徴情報または“移動体なし”の情報が入力し、また、特徴情報交換手段15が他の監視カメラ装置10から受信した移動体の特徴情報が入力する。他の監視カメラ装置10から送られた移動体の特徴情報は、メモリ130に追跡対象情報として登録され、また、メモリ130に追跡対象情報が登録されていないときに、特徴情報抽出手段12から特徴情報が入力すると、この特徴情報が追跡対象情報として登録される。
【００１７】
図７のフロー図は、特徴情報比較手段13の処理手順を示している。
ステップ10：特徴情報比較手段13は、情報が入力すると、
ステップ11：メモリ130の有効期限が有効か否かを識別する。有効期限が切れているときは、
ステップ12：メモリ130の記録をすべて消去し、
ステップ13：映像伝送手段14が映像を伝送中であれば、
ステップ14：映像伝送の停止を指示する。
【００１８】
ステップ15：メモリ130の有効期限が有効である場合、あるいは、メモリ130に何も記録されていない場合（ステップ12でメモリを消去した場合を含む）は、ステップ10で入力した情報の入力元を識別する。特徴情報交換手段15から入力した情報であるときは、
ステップ16：この監視カメラ装置10での追跡対象が存在していない場合に、
ステップ17：メモリ130に、追跡対象情報として特徴情報を登録し、有効期限を現在時間＋規定値に設定する。
【００１９】
また、ステップ15において、情報入力元が特徴情報抽出手段12であるときは、
ステップ18：入力情報の種類を識別する。入力情報が特徴情報のときは、
ステップ20：この監視カメラ装置10での追跡対象が存在していない場合に、
ステップ17：メモリ130に、追跡対象情報として、入力した特徴情報を登録し、有効期限を現在時間＋規定値に設定する。
また、ステップ20において、追跡対象が存在（メモリ130に追跡対象情報が存在）するときは、
ステップ21：入力した特徴情報と追跡対象の特徴情報とを比較し、それらが同一か否かを識別する。
【００２０】
なお、画像を比較して同一性を判断する手法は、良く知られている。簡単な方法では、例えば、特徴情報が移動体の画像データやその抽象化したデータである場合、
１．画像データの大きさと向きを、拡縮及び回転処理等で補正する
２．画像データの差分を計算する
３．計算結果が規定の範囲以内であれば、同一と判定する
と言った手順で判断が可能である。
【００２１】
また、その他の特徴情報も、多次元の数値で表現できる情報へ変換できるので、各次元要素の差分値の重み付き２乗和を利用すれば、同一性を判定できる。
即ち、特徴情報（x1,y1,z1）と（x2,y2,z2）との同一性は、
a1*(x1-x2)2＋a2*(y1-y2)2＋a3*(z1-z2)2
（但し、a1，a2，a3は特徴情報の種類により決定される）
が一定値より小さければ、同一であると判定する。
【００２２】
また、より厳密な方法に関しては、下記の文献
安居院 猛、長尾 智晴 共著「画像の処理と認識」株式会社 昭晃堂
第６章「特徴空間とクラスタリング」
第７章「パターンマッチング」
などに示されている。
【００２３】
さて、ステップ21において、入力した特徴情報と追跡対象の特徴情報とが同一であるときは、
ステップ22：追跡対象情報を、入力した特徴情報に更新し、有効期限を現在時間＋規定値に更新する。
ステップ23：映像伝送手段14が映像を伝送中でなければ、
ステップ24：映像伝送手段14に、画像撮影手段11が撮影した映像の伝送を開始させる。
【００２４】
また、ステップ18において、入力情報が“移動体なし”のときは、
ステップ19：この監視カメラ装置10が追跡対象を捉えていたか否かを識別し、捉えていたとき（即ち、いままで監視カメラ装置10の映像に映っていた追跡対象の移動体が画面から消えたとき）は、
ステップ26：映像伝送手段14が映像伝送中であれば、
ステップ27：映像伝送手段14に映像伝送を停止させ、
ステップ28：メモリ13に登録した追跡対象情報を特徴情報交換手段15へ通知する。
また、ステップ21において、入力した特徴情報が追跡対象の特徴情報と異なる場合も、追跡対象の移動体は画面から消えたと見られるので、ステップ26〜28の手順を行う。
特徴情報交換手段15は、特徴情報比較手段13より通知された特徴情報を他の監視カメラ装置10の特徴情報交換手段15へ伝送する。
【００２５】
こうして、この監視システムでは、監視カメラ装置Ａが追跡目標を見失うと、特徴情報抽出手段12が抽出した特徴情報を、特徴情報交換手段15を用いて他の監視カメラ装置に伝送し、他の監視カメラ装置Ｂは、特徴情報交換手段15から受信した特徴情報と特徴情報抽出手段12が抽出した特徴情報とを特徴情報比較手段13で比較し、一致した場合に映像の伝送を開始する。こうして特徴情報交換手段15が、追跡対象を特定できる特徴情報を受け渡すことで、複数の監視カメラ装置を用いて同じ対象物を追跡することが可能になる。
【００２６】
図８は、建物内に監視カメラ装置Ａ及び監視カメラ装置Ｂが設置され、不審者が矢印の方向に移動したときに（図８（ａ））、モニター装置50の表示画面に映る映像（図８（ｂ））を模式的に示している。監視カメラ装置Ａの映像から不審者が消えると、監視カメラ装置Ａから不審者の特徴情報を受け渡された監視カメラ装置Ｂが不審者を捉えて、その映像をモニター装置50に伝送する。
【００２７】
このように、この監視システムでは、死角が多い空間でも、複数の監視カメラ装置が相互に情報交換しながら同じ対象物を追跡することができる。
【００２８】
（第２の実施形態）
第２の実施形態では、モニター装置の側で追跡対象を指定できる監視システムについて説明する。
このシステムのモニター装置は、図９に示すように、監視カメラ装置10との間で特徴情報を交換する特徴情報交換手段54と、監視者が追跡対象を指示する追跡対象指示手段55とを備えている。その他の構成は第１の実施形態（図１）と変わりがない。
【００２９】
この監視システムの動作を図１０を使って説明する。
移動体の特徴情報を抽出した図１０（ａ）の監視カメラ装置Ａは、画像撮影手段11で撮影した映像（図１０（ａ’））を映像伝送手段14からモニター装置50に送信する。モニター装置50は、この映像を映像受信手段51で受信して表示手段52に表示する。
【００３０】
モニター装置50の監視者は、表示された画像から不審者を発見すると、追跡対象指示手段55から追跡対象の不審者を指示する。モニター装置50の特徴情報交換手段54は、この画像を送信した監視カメラ装置Ａの特徴情報交換手段15と通信して、追跡対象指示手段55が指示した追跡対象の特徴情報を取得する（図９の▲１▼の手順）。
次に、モニター装置50の特徴情報交換手段54は、監視カメラ装置Ａから取得した追跡対象の特徴情報を各監視カメラ装置Ａ、Ｂ、Ｃ、Ｄにブロードキャスト送信する（図９の▲２▼の手順）。各監視カメラ装置Ａ、Ｂ、Ｃ、Ｄの特徴情報交換手段54は、この特徴情報を受信して特徴情報比較手段13に出力し、この特徴情報が特徴情報比較手段13のメモリ130に追跡対象情報として登録される。
【００３１】
その後の動作は、第１の実施形態と変わりがない。即ち、追跡対象を画面に捉えている監視カメラ装置Ａは、追跡対象情報の有効期限を更新しながら、追跡対象が撮影範囲から外れるまで、映像をモニター装置50に送信し続け、追跡対象が撮影範囲から外れると、追跡対象情報を他の監視カメラ装置Ｂ、Ｃ、Ｄに送信して、モニター装置50への映像の送信を停止する。
【００３２】
また、監視カメラ装置Ｂ、Ｃ、Ｄは、モニター装置50から送られた特徴情報を有効期限が切れるまでメモリ130に保持し、その間に追跡対象を画面で捉えたときは、その映像をモニター装置50に送信する。モニター装置50から送られた特徴情報の有効期限が切れた後は、第１の実施形態と同様に、他の監視カメラ装置Ａから受信した特徴情報をメモリ130で保持することになる。
【００３３】
図１０（ｂ）において、監視カメラ装置Ｂ、Ｃ、Ｄは、それぞれ移動体を検出するが、特徴情報と一致する不審者を検出した監視カメラ装置Ｄだけが、その映像（図１０（ｂ’））をモニター装置50に送信する。
【００３４】
このように、この監視システムでは、監視者が追跡対象を指示し、この指示に応じて各監視カメラ装置が自動的に追跡対象を追跡することができる。そのため、人通りが多い場所等でも、追跡対象を明示的に指定することができ、有効な追跡監視が可能になる。
【００３５】
（第３の実施形態）
第３の実施形態では、予め登録された人物以外の不審者だけを追跡する監視システムについて説明する。
このシステムは、図１１に示すように、登録されたユーザの特徴情報が蓄積されたユーザ特徴情報データベース70を備えている。その他の構成は第１の実施形態（図１）と変わりがない。
【００３６】
このユーザ特徴情報データベース70には、ユーザの特徴情報として、顔画像や、目、鼻、口などの位置、形などの顔の特徴に関する情報、あるいは、虹彩情報など、ユーザを一意に特定可能な情報を記述した登録ユーザリストが格納されている。
また、監視カメラ装置10の特徴情報抽出手段12は、画像撮影手段11が撮影した画像から、これらの特徴情報を抽出する。特徴情報比較手段13は、特徴情報抽出手段12から特徴情報が入力されると、特徴情報交換手段15を介して、ユーザ特徴情報データベース70から登録ユーザリストを取得し（図１１の▲１▼の手順）、特徴情報抽出手段12から入力した特徴情報が登録ユーザリストに載っているか否かを判定する。そして、この特徴情報が登録ユーザリストに載っていない場合にのみ、メモリ130にその特徴情報を追跡対象情報として記録する。
【００３７】
その後の動作は、第１の実施形態と変わりがない。即ち、追跡対象を画面に捉えている監視カメラ装置Ａは、追跡対象が撮影範囲から外れるまで、映像をモニター装置50に送信し続け、追跡対象が撮影範囲から外れると、追跡対象情報を他の監視カメラ装置に送信して、モニター装置50への映像の送信を停止する。
また、他の監視カメラ装置10は、監視カメラ装置Ａから受信した特徴情報をメモリ130で保持し、追跡対象を画面に捉えたときに、その映像をモニター装置50に送信する。
【００３８】
このように、この監視システムでは、登録ユーザリストに載っていない不審者のみが追跡対象とされ、その不審者が映る監視カメラ装置10の映像だけがモニター装置50に送られて表示または記録される。
また、逆に、登録ユーザリスト（所謂ブラックリスト）に載っている人物のみを追跡対象とし、その人物が映る監視カメラ装置10の映像だけをモニター装置50に送って表示または記録することも可能である。
【００３９】
なお、虹彩認証の技術は、日本自動認識システム協会編、瀬戸洋一他著「これでわかったバイオメトリクス」（オーム社）などに記載されている。
【００４０】
（第４の実施形態）
第４の実施形態では、認証機能を異にする複数の監視カメラ装置が連携して追跡対象を追跡する監視システムについて説明する。
このシステムでは、図１２に示すように、複数の認証機能を備えた高機能監視カメラ装置20と、一つの認証機能を備えた単機能監視カメラ装置30、40とがネットワーク80を介して接続している。
【００４１】
高機能監視カメラ装置20は、画像撮影手段11、映像伝送手段14、特徴情報交換手段15の他に、特徴情報を他の監視カメラ装置との間で交換する際に、認識能力についての能力交換を行う特徴情報調停手段16を備え、また、特徴情報抽出手段及び特徴情報比較手段として、例えば、追跡対象の顔に関する認識機能を有する特徴情報抽出手段ａ（32）及び特徴情報比較手段ａ(33）と、追跡対象の全体形状に関する認識機能を有する特徴情報抽出手段ｂ（42）及び特徴情報比較手段ｂ(43）とを備えている。
また、単機能監視カメラ装置30は、画像撮影手段11、映像伝送手段14、特徴情報交換手段15、及び、特徴情報調停手段16と、追跡対象の顔に関する認識機能を有する特徴情報抽出手段ａ（32）と特徴情報比較手段ａ(33）とを備えている。
【００４２】
一方、単機能監視カメラ装置40は、画像撮影手段11、映像伝送手段14、特徴情報交換手段15、及び、特徴情報調停手段16と、追跡対象の全体形状に関する認識機能を有する特徴情報抽出手段ｂ（42）と特徴情報比較手段ｂ(43）とを備えている。
【００４３】
次に、この監視システムの動作について説明する。
高機能監視カメラ装置20は、特徴情報交換手段15を通じて、単機能監視カメラ装置30、40に特徴情報を送信する場合、まず、特徴情報調停手段16により、認識能力についての能力交換を行う（図１２の▲１▼の手順）。
能力交換は、Ｈ．３２３やＳＩＰ（Session Initiation Protocol）などのマルチメディア情報通信プロトコルに搭載される機能であり、相手と共通の通信方式を決定するため、通信の始めに、自分が扱える情報を交換する。
【００４４】
例えば、高機能監視カメラ装置20は、通信開始時に、通信開始要求と、高機能監視カメラ装置20が自分で伝送できる特徴情報を列挙した特徴情報形式（顔認識、物体認識）とを単機能監視カメラ装置30、40に送信する。
単機能監視カメラ装置30は、列挙された情報の中から自分が利用できる情報を選択し、通信要求受理と、特徴情報形式（顔認識）とを高機能監視カメラ装置20に返信する。
これを受けて、高機能監視カメラ装置20は、単機能監視カメラ装置30に対しては、特徴情報抽出手段ａ（32）が抽出した顔認識の特徴情報を単機能監視カメラ装置30に送信する（図１２の▲２▼の手順）。
【００４５】
一方、単機能監視カメラ装置30は、列挙された情報の中から自分が利用できる情報を選択し、通信要求受理と、特徴情報形式（物体認識）とを高機能監視カメラ装置20に返信する。
これを受けて、高機能監視カメラ装置20は、単機能監視カメラ装置40に対しては、特徴情報抽出手段ｂ（42）が抽出した物体認識の特徴情報を単機能監視カメラ装置40に送信する。
【００４６】
このように、この監視システムでは、認証機能を異にする複数の監視カメラ装置が、相互の間で共通して扱うことができる特徴情報を交換しながら、連携して追跡対象を追跡することが可能になる。
【００４７】
施設や特定地域を監視する場合には、次のような形態でこの監視システムを適用することにより、効率的な監視を行うことができる。
施設や地域の入口に顔特徴情報（顔認証など特定の部位の高精度な特徴情報）と全体特徴情報（体の形状や色情報などの低精度だが適用範囲の広い特徴情報）とを取得可能な高機能監視カメラ装置を配置し、その他の場所には、全体特徴情報のみが取得可能な単機能監視カメラ装置を配置する。また、第３の実施形態で説明した登録ユーザリストに、施設の利用が許可された会員や地域住民の顔特徴情報を登録する。
【００４８】
入口に配置した高機能監視カメラ装置は、入口を通過する人物の顔特徴情報を取得して、登録ユーザリストの顔特徴情報と比較し、登録ユーザリストに載っていない不審者を認識すると、その映像をモニター装置に送信するとともに、各単機能監視カメラ装置に不審者の全体特徴情報を送信する。各単機能監視カメラ装置は、撮影画像の中で不審者の全体特徴情報を捉えた場合に、その映像をモニター装置に送信する。
【００４９】
このように、各設置場所に、その場所に合った機能の監視カメラを配置して、各監視カメラを連携させることにより、高度な監視が実現できる。また、高機能カメラを一台だけ使用し、他は低機能カメラを使用することにより、コストが削減できる。
また、同様に、人がよく通る廊下やホールに高機能カメラを一台配置し、人が通らない場所や各部屋には単機能カメラを配置するような応用も可能である。
【００５０】
【発明の効果】
以上の説明から明らかなように、本発明の監視システムでは、知能化した複数の監視カメラ装置が連携を取りながら、自律的に追跡対象を追跡し、その映像をモニター装置に伝送する。従って、監視者は、特別の操作を行わなくても、不審者などをモニター上で容易に追跡監視することができる。
【００５１】
また、この監視システムでは、不審者が監視カメラの死角に入ったときでも、その後、監視カメラが追跡対象者を映像に捉えた段階で、自動的に不審者の追跡が再開される。そのため、死角が多い空間においても、同じ対象物を追跡し続けることができる。また、監視カメラの設置個数を減らすことも可能である。
【図面の簡単な説明】
【図１】本発明の第１の実施形態における監視システムの構成を示すブロック図
【図２】第１の実施形態における監視カメラ装置の物体切り出しによる画像認識方法を示す説明図
【図３】第１の実施形態における監視カメラ装置の物体情報を抽象化する画像認識方法を示す説明図
【図４】第１の実施形態における監視カメラ装置の顔の特徴情報を抽出する画像認識方法を示す説明図
【図５】第１の実施形態における特徴情報抽出手段の動作を示すフロー図
【図６】第１の実施形態における特徴情報比較手段のメモリ構成を示す図
【図７】第１の実施形態における特徴情報比較手段の動作を示すフロー図
【図８】第１の実施形態における監視システムのモニター表示を説明する図
【図９】本発明の第２の実施形態における監視システムの構成を示すブロック図
【図１０】第２の実施形態における監視システムのモニター表示を説明する図
【図１１】本発明の第３の実施形態における監視システムの構成を示すブロック図
【図１２】本発明の第４の実施形態における監視システムの構成を示すブロック図
【図１３】従来の監視システムの構成を示すブロック図
【符号の説明】
１ 監視カメラ装置
２ カメラ切り替え装置
３ カメラ切り替え手段
４ 動き認識手段
５ カメラ設置情報
６ モニター装置
10 監視カメラ装置
11 画像撮影手段
12 特徴情報抽出手段
13 特徴情報比較手段
14 映像伝送手段
15 特徴情報交換手段
16 特徴情報調停手段
20 高機能監視カメラ装置
30 単機能監視カメラ装置
32 特徴情報抽出手段ａ
33 特徴情報比較手段ａ
40 単機能監視カメラ装置
42 特徴情報抽出手段ｂ
43 特徴情報比較手段ｂ
50 モニター装置
51 映像受信手段
52 表示手段
53 記録手段
54 特徴情報交換手段
55 追跡対象指示手段
70 ユーザ特徴情報データベース
80 ネットワーク
130 メモリ
Claims (1)
- 複数の監視カメラ装置が連携して追跡対象の移動体の映像を捕捉する監視システムの監視カメラ装置であって、
映像を撮影してデジタル映像データを出力する画像撮影手段と、
前記デジタル映像データの中の移動体の特徴を示す特徴情報の抽出結果である入力情報を出力する特徴情報抽出手段と、
追跡対象の移動体の特徴情報を、他の監視カメラ装置と交換する特徴情報交換手段と、
前記特徴情報交換手段が他の監視カメラ装置と追跡対象の移動体の特徴情報を交換するとき、前記他の監視カメラ装置と画像認識機能に関する能力交換を行うことで、伝送する特徴情報の種類を決定する特徴情報調停手段と、を備える監視カメラ装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002131308A JP3999561B2 (ja) | 2002-05-07 | 2002-05-07 | 監視システムと監視カメラ |
| US10/430,492 US7227569B2 (en) | 2002-05-07 | 2003-05-06 | Surveillance system and a surveillance camera |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002131308A JP3999561B2 (ja) | 2002-05-07 | 2002-05-07 | 監視システムと監視カメラ |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2003324720A JP2003324720A (ja) | 2003-11-14 |
| JP2003324720A5 JP2003324720A5 (ja) | 2005-09-15 |
| JP3999561B2 true JP3999561B2 (ja) | 2007-10-31 |
Family
ID=29543989
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002131308A Expired - Lifetime JP3999561B2 (ja) | 2002-05-07 | 2002-05-07 | 監視システムと監視カメラ |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US7227569B2 (ja) |
| JP (1) | JP3999561B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010238188A (ja) * | 2009-03-31 | 2010-10-21 | Sogo Keibi Hosho Co Ltd | 警備システムおよび警備方法 |
| JP2010238187A (ja) * | 2009-03-31 | 2010-10-21 | Sogo Keibi Hosho Co Ltd | 警備システムおよび警備方法 |
| WO2011010490A1 (ja) | 2009-07-22 | 2011-01-27 | オムロン株式会社 | 監視カメラ端末 |
| JP2018133639A (ja) * | 2017-02-14 | 2018-08-23 | 三菱電機株式会社 | サイバーフィジカルセキュリティシステム |
Families Citing this family (144)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7292723B2 (en) * | 2003-02-26 | 2007-11-06 | Walker Digital, Llc | System for image analysis in a network that is structured with multiple layers and differentially weighted neurons |
| JP4339762B2 (ja) * | 2003-09-02 | 2009-10-07 | 富士フイルム株式会社 | 認証システム、及びプログラム |
| JP4476744B2 (ja) * | 2003-09-02 | 2010-06-09 | 富士フイルム株式会社 | 撮像システム、及びプログラム |
| US20050084179A1 (en) * | 2003-09-04 | 2005-04-21 | Keith Hanna | Method and apparatus for performing iris recognition from an image |
| JP2005159691A (ja) * | 2003-11-26 | 2005-06-16 | Hitachi Ltd | 監視システム |
| US7924323B2 (en) | 2003-12-24 | 2011-04-12 | Walker Digital, Llc | Method and apparatus for automatically capturing and managing images |
| JP4536401B2 (ja) * | 2004-03-04 | 2010-09-01 | パナソニック株式会社 | 監視装置、監視装置の状態把握方法 |
| JP4369326B2 (ja) * | 2004-08-19 | 2009-11-18 | 株式会社日立製作所 | 施設内情報提供システム及び施設内情報提供方法 |
| JP4587166B2 (ja) * | 2004-09-14 | 2010-11-24 | キヤノン株式会社 | 移動体追跡システム、撮影装置及び撮影方法 |
| ITMN20050003A1 (it) * | 2005-01-14 | 2006-07-15 | Renato Grassi | Telecamera antirapina |
| US7876357B2 (en) | 2005-01-31 | 2011-01-25 | The Invention Science Fund I, Llc | Estimating shared image device operational capabilities or resources |
| US8902320B2 (en) * | 2005-01-31 | 2014-12-02 | The Invention Science Fund I, Llc | Shared image device synchronization or designation |
| US8606383B2 (en) * | 2005-01-31 | 2013-12-10 | The Invention Science Fund I, Llc | Audio sharing |
| US20060174203A1 (en) | 2005-01-31 | 2006-08-03 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Viewfinder for shared image device |
| US9910341B2 (en) | 2005-01-31 | 2018-03-06 | The Invention Science Fund I, Llc | Shared image device designation |
| US9124729B2 (en) | 2005-01-31 | 2015-09-01 | The Invention Science Fund I, Llc | Shared image device synchronization or designation |
| US20060221197A1 (en) * | 2005-03-30 | 2006-10-05 | Jung Edward K | Image transformation estimator of an imaging device |
| US7920169B2 (en) | 2005-01-31 | 2011-04-05 | Invention Science Fund I, Llc | Proximity of shared image devices |
| JP2006209585A (ja) * | 2005-01-31 | 2006-08-10 | Mitsubishi Electric Corp | 防犯システム |
| US9082456B2 (en) | 2005-01-31 | 2015-07-14 | The Invention Science Fund I Llc | Shared image device designation |
| US9325781B2 (en) | 2005-01-31 | 2016-04-26 | Invention Science Fund I, Llc | Audio sharing |
| US9489717B2 (en) | 2005-01-31 | 2016-11-08 | Invention Science Fund I, Llc | Shared image device |
| US20060170956A1 (en) | 2005-01-31 | 2006-08-03 | Jung Edward K | Shared image devices |
| JP4559874B2 (ja) * | 2005-03-01 | 2010-10-13 | ティーオーエー株式会社 | 動体追跡装置 |
| US7760908B2 (en) * | 2005-03-31 | 2010-07-20 | Honeywell International Inc. | Event packaged video sequence |
| US7801328B2 (en) * | 2005-03-31 | 2010-09-21 | Honeywell International Inc. | Methods for defining, detecting, analyzing, indexing and retrieving events using video image processing |
| US9819490B2 (en) | 2005-05-04 | 2017-11-14 | Invention Science Fund I, Llc | Regional proximity for shared image device(s) |
| US9001215B2 (en) | 2005-06-02 | 2015-04-07 | The Invention Science Fund I, Llc | Estimating shared image device operational capabilities or resources |
| US8253821B2 (en) * | 2005-10-31 | 2012-08-28 | The Invention Science Fund I, Llc | Degradation/preservation management of captured data |
| US10003762B2 (en) | 2005-04-26 | 2018-06-19 | Invention Science Fund I, Llc | Shared image devices |
| US9093121B2 (en) | 2006-02-28 | 2015-07-28 | The Invention Science Fund I, Llc | Data management of an audio data stream |
| US7872675B2 (en) * | 2005-06-02 | 2011-01-18 | The Invention Science Fund I, Llc | Saved-image management |
| US9451200B2 (en) | 2005-06-02 | 2016-09-20 | Invention Science Fund I, Llc | Storage access technique for captured data |
| US9942511B2 (en) | 2005-10-31 | 2018-04-10 | Invention Science Fund I, Llc | Preservation/degradation of video/audio aspects of a data stream |
| US9621749B2 (en) | 2005-06-02 | 2017-04-11 | Invention Science Fund I, Llc | Capturing selected image objects |
| US9967424B2 (en) | 2005-06-02 | 2018-05-08 | Invention Science Fund I, Llc | Data storage usage protocol |
| US9191611B2 (en) | 2005-06-02 | 2015-11-17 | Invention Science Fund I, Llc | Conditional alteration of a saved image |
| US8233042B2 (en) * | 2005-10-31 | 2012-07-31 | The Invention Science Fund I, Llc | Preservation and/or degradation of a video/audio data stream |
| US9167195B2 (en) | 2005-10-31 | 2015-10-20 | Invention Science Fund I, Llc | Preservation/degradation of video/audio aspects of a data stream |
| US20070222865A1 (en) | 2006-03-15 | 2007-09-27 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Enhanced video/still image correlation |
| US8072501B2 (en) * | 2005-10-31 | 2011-12-06 | The Invention Science Fund I, Llc | Preservation and/or degradation of a video/audio data stream |
| US8681225B2 (en) | 2005-06-02 | 2014-03-25 | Royce A. Levien | Storage access technique for captured data |
| US7782365B2 (en) | 2005-06-02 | 2010-08-24 | Searete Llc | Enhanced video/still image correlation |
| US9076208B2 (en) | 2006-02-28 | 2015-07-07 | The Invention Science Fund I, Llc | Imagery processing |
| US8964054B2 (en) | 2006-08-18 | 2015-02-24 | The Invention Science Fund I, Llc | Capturing selected image objects |
| US20060269090A1 (en) * | 2005-05-27 | 2006-11-30 | Roman Sapiejewski | Supra-aural headphone noise reducing |
| JP4947936B2 (ja) * | 2005-08-11 | 2012-06-06 | ソニー株式会社 | モニタリングシステムおよび管理装置 |
| EP1762994B1 (de) * | 2005-09-07 | 2008-12-10 | Siemens Building Technologies Fire & Security Products GmbH & Co. oHG | Intelligente Überwachungskamera |
| US20070071404A1 (en) * | 2005-09-29 | 2007-03-29 | Honeywell International Inc. | Controlled video event presentation |
| US20070120980A1 (en) | 2005-10-31 | 2007-05-31 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Preservation/degradation of video/audio aspects of a data stream |
| JP4700477B2 (ja) * | 2005-11-15 | 2011-06-15 | 株式会社日立製作所 | 移動体監視システムおよび移動体特徴量算出装置 |
| JP2007158421A (ja) * | 2005-11-30 | 2007-06-21 | Matsushita Electric Ind Co Ltd | 監視カメラシステム及び顔画像追跡記録方法 |
| KR100744668B1 (ko) | 2006-01-27 | 2007-08-02 | 덕성여자대학교 산학협력단 | 네트워크 카메라를 이용한 다중 사람추적 시스템 |
| DE102006010955B3 (de) * | 2006-03-03 | 2007-10-04 | Siemens Ag | Verfahren zur visuellen Überwachung eines Raumbereiches |
| JP2007241377A (ja) * | 2006-03-06 | 2007-09-20 | Sony Corp | 検索システム、撮像装置、データ保存装置、情報処理装置、撮像画像処理方法、情報処理方法、プログラム |
| WO2007119355A1 (ja) | 2006-03-15 | 2007-10-25 | Omron Corporation | 追尾装置、追尾方法、追尾装置の制御プログラム、およびコンピュータ読み取り可能な記録媒体 |
| JP2007336035A (ja) * | 2006-06-13 | 2007-12-27 | Matsushita Electric Ind Co Ltd | ネットワークカメラ及びネットワークカメラシステム |
| WO2007147171A2 (en) * | 2006-06-16 | 2007-12-21 | Verificon Corporation | Scalable clustered camera system and method for multiple object tracking |
| JP2008035095A (ja) * | 2006-07-27 | 2008-02-14 | Sony Corp | 監視装置、監視システム、監視方法及びプログラム |
| JP4148285B2 (ja) * | 2006-07-27 | 2008-09-10 | ソニー株式会社 | 監視装置、フィルタ較正方法及びフィルタ較正プログラム |
| US8121356B2 (en) * | 2006-09-15 | 2012-02-21 | Identix Incorporated | Long distance multimodal biometric system and method |
| CN101652999B (zh) * | 2007-02-02 | 2016-12-28 | 霍尼韦尔国际公司 | 用于管理实况视频数据的***和方法 |
| US8760519B2 (en) * | 2007-02-16 | 2014-06-24 | Panasonic Corporation | Threat-detection in a distributed multi-camera surveillance system |
| KR101187901B1 (ko) * | 2007-07-03 | 2012-10-05 | 삼성테크윈 주식회사 | 지능형 감시 시스템 및 그의 제어방법 |
| US8576281B2 (en) * | 2007-09-12 | 2013-11-05 | Its-7 Pty Ltd | Smart network camera system-on-a-chip |
| JP4959535B2 (ja) * | 2007-12-13 | 2012-06-27 | 株式会社日立製作所 | 撮像装置 |
| US8693738B2 (en) * | 2008-01-29 | 2014-04-08 | Canon Kabushiki Kaisha | Imaging processing system and method and management apparatus |
| WO2009111499A2 (en) | 2008-03-03 | 2009-09-11 | Videoiq, Inc. | Dynamic object classification |
| JP2009296331A (ja) * | 2008-06-05 | 2009-12-17 | Hitachi Ltd | セキュリティシステム |
| KR100964726B1 (ko) | 2008-07-14 | 2010-06-21 | 한국산업기술대학교산학협력단 | 영상 카메라 시스템에서 이동 물체 특성을 이용한 이동물체 추적 방법 |
| TW201006230A (en) * | 2008-07-24 | 2010-02-01 | Novatek Microelectronics Corp | Static image presentation method |
| KR101324221B1 (ko) * | 2008-08-27 | 2013-11-06 | 삼성테크윈 주식회사 | 영상 촬영을 통한 물체 추적 시스템 및 그 방법 |
| JP5294801B2 (ja) * | 2008-10-30 | 2013-09-18 | 三菱電機株式会社 | 空気調和機 |
| US9299231B2 (en) * | 2009-02-26 | 2016-03-29 | Tko Enterprises, Inc. | Image processing sensor systems |
| US9740921B2 (en) | 2009-02-26 | 2017-08-22 | Tko Enterprises, Inc. | Image processing sensor systems |
| US9277878B2 (en) * | 2009-02-26 | 2016-03-08 | Tko Enterprises, Inc. | Image processing sensor systems |
| WO2010099575A1 (en) | 2009-03-04 | 2010-09-10 | Honeywell International Inc. | Systems and methods for managing video data |
| US8320617B2 (en) * | 2009-03-27 | 2012-11-27 | Utc Fire & Security Americas Corporation, Inc. | System, method and program product for camera-based discovery of social networks |
| JP5227911B2 (ja) * | 2009-07-22 | 2013-07-03 | 株式会社日立国際電気 | 監視映像検索装置及び監視システム |
| US8908033B2 (en) * | 2009-09-29 | 2014-12-09 | Avaya Inc. | Utilizing presence information for the purpose of enhanced surveillance |
| KR101136366B1 (ko) * | 2010-02-26 | 2012-04-18 | 주식회사 비츠로시스 | 객체 자동 추적 시스템 |
| KR101155184B1 (ko) | 2010-04-01 | 2012-06-13 | 대덕대학산학협력단 | 복수의 촬영수단간 협업을 이용한 영상추적 시스템 |
| KR101130034B1 (ko) | 2010-04-14 | 2012-03-28 | 부산대학교 산학협력단 | 다중 카메라 시스템 |
| TW201138466A (en) * | 2010-04-23 | 2011-11-01 | Hon Hai Prec Ind Co Ltd | Video camera and method for monitoring videos of a person or an object |
| JP5721345B2 (ja) * | 2010-05-17 | 2015-05-20 | キヤノン株式会社 | 画像検出システム、画像検出方法および画像制御プログラム |
| JP5334326B2 (ja) * | 2010-06-30 | 2013-11-06 | パナソニック株式会社 | プレ録画データ保存装置及びプレ録画データ保存方法 |
| KR101224017B1 (ko) * | 2011-04-21 | 2013-01-21 | 강원대학교산학협력단 | 지능형 영상 감시 시스템 |
| CZ2011285A3 (cs) * | 2011-05-16 | 2013-05-29 | Vysoké ucení technické v Brne | Decentralizovaná dohledová sít umoznující dotazování a analýzu dohledových dat |
| US20130136298A1 (en) * | 2011-11-29 | 2013-05-30 | General Electric Company | System and method for tracking and recognizing people |
| JP5861420B2 (ja) * | 2011-12-05 | 2016-02-16 | 株式会社ニコン | 電子カメラ |
| JP5766625B2 (ja) * | 2012-01-16 | 2015-08-19 | 株式会社東芝 | カメラ装置 |
| JP5894807B2 (ja) * | 2012-01-25 | 2016-03-30 | 株式会社日立国際電気 | 監視装置及び監視カメラシステム並びに映像送信方法 |
| US9615015B2 (en) * | 2012-01-27 | 2017-04-04 | Disney Enterprises, Inc. | Systems methods for camera control using historical or predicted event data |
| KR101332820B1 (ko) | 2012-02-22 | 2013-11-27 | 주식회사 티앤이에스 | 객체 추적 시스템 및 방법, 객체관리장치 및 그 장치의 구동방법, 촬영장치 및 그 장치의 구동방법 |
| JP2013192154A (ja) * | 2012-03-15 | 2013-09-26 | Omron Corp | 監視装置、信頼度算出プログラム、および信頼度算出方法 |
| JP2012128877A (ja) * | 2012-03-19 | 2012-07-05 | Toshiba Corp | 不審行動検知システム及び方法 |
| JP6141079B2 (ja) | 2013-04-08 | 2017-06-07 | キヤノン株式会社 | 画像処理システム、画像処理装置、それらの制御方法、及びプログラム |
| JP2015088095A (ja) * | 2013-11-01 | 2015-05-07 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置および情報処理方法 |
| KR20150071504A (ko) * | 2013-12-18 | 2015-06-26 | 한국전자통신연구원 | 카메라 추적 제어권 자동 전환 시스템 및 이의 카메라 추적 제어권 자동 전환 방법 |
| JP6403784B2 (ja) * | 2014-08-25 | 2018-10-10 | 株式会社日立国際電気 | 監視カメラシステム |
| EP3198572B1 (en) * | 2014-09-25 | 2020-11-11 | Guerzoni, Filippo | Surveillance method, device and system |
| CN104320623B (zh) * | 2014-11-03 | 2017-09-15 | 四川理工学院 | 一种智能监控***记录异常目标移动路线的方法 |
| JP6572535B2 (ja) * | 2014-12-10 | 2019-09-11 | 株式会社リコー | 画像認識システム、サーバ装置及び画像認識方法 |
| CN104853150A (zh) * | 2015-02-11 | 2015-08-19 | 居锦武 | 一种多摄像机目标协同跟踪技术 |
| WO2016132769A1 (ja) * | 2015-02-19 | 2016-08-25 | シャープ株式会社 | 撮影装置、撮影装置の制御方法、および制御プログラム |
| WO2016151932A1 (ja) * | 2015-03-20 | 2016-09-29 | 日本電気株式会社 | 監視システム、監視方法および監視プログラム |
| JP6627365B2 (ja) * | 2015-09-24 | 2020-01-08 | 富士通株式会社 | 情報処理方法、情報処理装置、及びプログラム |
| JP6176306B2 (ja) * | 2015-10-30 | 2017-08-09 | 株式会社ニコン | 電子カメラおよびプログラム |
| US10043058B2 (en) * | 2016-03-09 | 2018-08-07 | International Business Machines Corporation | Face detection, representation, and recognition |
| US10764539B2 (en) | 2016-03-22 | 2020-09-01 | Sensormatic Electronics, LLC | System and method for using mobile device of zone and correlated motion detection |
| US10475315B2 (en) | 2016-03-22 | 2019-11-12 | Sensormatic Electronics, LLC | System and method for configuring surveillance cameras using mobile computing devices |
| US11216847B2 (en) | 2016-03-22 | 2022-01-04 | Sensormatic Electronics, LLC | System and method for retail customer tracking in surveillance camera network |
| US10192414B2 (en) | 2016-03-22 | 2019-01-29 | Sensormatic Electronics, LLC | System and method for overlap detection in surveillance camera network |
| US10733231B2 (en) | 2016-03-22 | 2020-08-04 | Sensormatic Electronics, LLC | Method and system for modeling image of interest to users |
| US9965680B2 (en) | 2016-03-22 | 2018-05-08 | Sensormatic Electronics, LLC | Method and system for conveying data from monitored scene via surveillance cameras |
| US10665071B2 (en) * | 2016-03-22 | 2020-05-26 | Sensormatic Electronics, LLC | System and method for deadzone detection in surveillance camera network |
| US10347102B2 (en) | 2016-03-22 | 2019-07-09 | Sensormatic Electronics, LLC | Method and system for surveillance camera arbitration of uplink consumption |
| US10318836B2 (en) | 2016-03-22 | 2019-06-11 | Sensormatic Electronics, LLC | System and method for designating surveillance camera regions of interest |
| US11601583B2 (en) | 2016-03-22 | 2023-03-07 | Johnson Controls Tyco IP Holdings LLP | System and method for controlling surveillance cameras |
| JP6688975B2 (ja) | 2016-03-25 | 2020-04-28 | パナソニックＩｐマネジメント株式会社 | 監視装置及び監視システム |
| US10380429B2 (en) | 2016-07-11 | 2019-08-13 | Google Llc | Methods and systems for person detection in a video feed |
| US10957171B2 (en) | 2016-07-11 | 2021-03-23 | Google Llc | Methods and systems for providing event alerts |
| JP6885682B2 (ja) * | 2016-07-15 | 2021-06-16 | パナソニックｉ−ＰＲＯセンシングソリューションズ株式会社 | 監視システム、管理装置、及び監視方法 |
| US11615566B2 (en) | 2017-05-10 | 2023-03-28 | Fotonation Limited | Multi-camera vehicle vision system and method |
| US10331960B2 (en) | 2017-05-10 | 2019-06-25 | Fotonation Limited | Methods for detecting, identifying and displaying object information with a multi-camera vision system |
| US10740627B2 (en) | 2017-05-10 | 2020-08-11 | Fotonation Limited | Multi-camera vision system and method of monitoring |
| US10250812B2 (en) | 2017-05-17 | 2019-04-02 | Caterpillar Inc. | Display system for machine |
| US10599950B2 (en) | 2017-05-30 | 2020-03-24 | Google Llc | Systems and methods for person recognition data management |
| US11783010B2 (en) | 2017-05-30 | 2023-10-10 | Google Llc | Systems and methods of person recognition in video streams |
| US10810414B2 (en) | 2017-07-06 | 2020-10-20 | Wisconsin Alumni Research Foundation | Movement monitoring system |
| US10482613B2 (en) | 2017-07-06 | 2019-11-19 | Wisconsin Alumni Research Foundation | Movement monitoring system |
| US11450148B2 (en) | 2017-07-06 | 2022-09-20 | Wisconsin Alumni Research Foundation | Movement monitoring system |
| AU2018312581B2 (en) | 2017-08-02 | 2023-05-18 | Objectvideo Labs, Llc | Supervising property access with portable camera |
| US11134227B2 (en) | 2017-09-20 | 2021-09-28 | Google Llc | Systems and methods of presenting appropriate actions for responding to a visitor to a smart home environment |
| US10664688B2 (en) * | 2017-09-20 | 2020-05-26 | Google Llc | Systems and methods of detecting and responding to a visitor to a smart home environment |
| JP7149063B2 (ja) * | 2017-11-02 | 2022-10-06 | 日本信号株式会社 | 監視システム |
| TWI663580B (zh) * | 2017-12-01 | 2019-06-21 | Getac Technology Corporation | 監視系統的控制方法 |
| US10909826B1 (en) * | 2018-05-01 | 2021-02-02 | Amazon Technologies, Inc. | Suppression of video streaming based on trajectory data |
| CN111291585B (zh) * | 2018-12-06 | 2023-12-08 | 杭州海康威视数字技术股份有限公司 | 一种基于gps的目标跟踪***、方法、装置及球机 |
| JP7285536B2 (ja) * | 2018-12-28 | 2023-06-02 | 国立大学法人佐賀大学 | 分類器生成装置、対象者推定装置及びそれらのプログラム、並びに対象者推定システム |
| US11803245B2 (en) | 2019-01-09 | 2023-10-31 | Harman International Industries, Incorporated | Scalable distributed data architecture |
| US11587361B2 (en) | 2019-11-08 | 2023-02-21 | Wisconsin Alumni Research Foundation | Movement monitoring system |
| US11893795B2 (en) | 2019-12-09 | 2024-02-06 | Google Llc | Interacting with visitors of a connected home environment |
| CN116309442B (zh) * | 2023-03-13 | 2023-10-24 | 北京百度网讯科技有限公司 | 挑拣信息的确定方法及目标对象的挑拣方法 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06325180A (ja) | 1993-05-14 | 1994-11-25 | Matsushita Electric Ind Co Ltd | 移動体自動追跡装置 |
| US5497430A (en) * | 1994-11-07 | 1996-03-05 | Physical Optics Corporation | Method and apparatus for image recognition using invariant feature signals |
| US5886738A (en) * | 1996-11-21 | 1999-03-23 | Detection Dynamics Inc. | Apparatus within a street lamp for remote surveillance |
| US6292098B1 (en) * | 1998-08-31 | 2001-09-18 | Hitachi, Ltd. | Surveillance system and network system |
| GB2343945B (en) | 1998-11-18 | 2001-02-28 | Sintec Company Ltd | Method and apparatus for photographing/recognizing a face |
| US6792144B1 (en) * | 2000-03-03 | 2004-09-14 | Koninklijke Philips Electronics N.V. | System and method for locating an object in an image using models |
| US7035434B2 (en) * | 2000-12-11 | 2006-04-25 | Texas Instruments Incorporated | Hough transform based motion detection image recording system and method |
-
2002
- 2002-05-07 JP JP2002131308A patent/JP3999561B2/ja not_active Expired - Lifetime
-
2003
- 2003-05-06 US US10/430,492 patent/US7227569B2/en active Active
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010238188A (ja) * | 2009-03-31 | 2010-10-21 | Sogo Keibi Hosho Co Ltd | 警備システムおよび警備方法 |
| JP2010238187A (ja) * | 2009-03-31 | 2010-10-21 | Sogo Keibi Hosho Co Ltd | 警備システムおよび警備方法 |
| WO2011010490A1 (ja) | 2009-07-22 | 2011-01-27 | オムロン株式会社 | 監視カメラ端末 |
| JP2018133639A (ja) * | 2017-02-14 | 2018-08-23 | 三菱電機株式会社 | サイバーフィジカルセキュリティシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| US20050057653A1 (en) | 2005-03-17 |
| US7227569B2 (en) | 2007-06-05 |
| JP2003324720A (ja) | 2003-11-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3999561B2 (ja) | 監視システムと監視カメラ | |
| US8044990B2 (en) | Camera controller and teleconferencing system | |
| WO2020057355A1 (zh) | 一种三维建模的方法及其装置 | |
| JP4378785B2 (ja) | 画像処理機能を備えた画像入力装置 | |
| JP2007158421A (ja) | 監視カメラシステム及び顔画像追跡記録方法 | |
| KR101425505B1 (ko) | 객체인식기술을 이용한 지능형 경계 시스템의 감시 방법 | |
| KR102014285B1 (ko) | 다중 카메라를 이용하여 객체의 이동을 추적하는 객체 추적 시스템 및 객체 추적 방법 | |
| JP6730236B2 (ja) | 人識別システム及び人識別方法 | |
| JP2007158860A (ja) | 撮影システム、撮影装置、画像切替装置、およびデータ保持装置 | |
| KR102237086B1 (ko) | 안면인식 기능에 기초하여 5g 이동통신망의 이용이 가능한 통신 단말기를 통해 영상감시가 가능한 로비폰 제어 장치 및 방법 | |
| JP2006197505A (ja) | カメラ制御装置、カメラシステム、電子会議システムおよびカメラ制御方法 | |
| JP2016100696A (ja) | 画像処理装置、画像処理方法、及び画像処理システム | |
| RU2268497C2 (ru) | Система и способ автоматизированного видеонаблюдения и распознавания объектов и ситуаций | |
| JP2005323046A (ja) | 監視システム、および監視カメラ | |
| JP5088463B2 (ja) | 監視システム | |
| WO2016060312A1 (ko) | 실내위치인식기반 보안관리장치 및 방법 | |
| KR102077632B1 (ko) | 로컬 영상분석과 클라우드 서비스를 활용하는 하이브리드 지능형 침입감시 시스템 | |
| KR101420006B1 (ko) | 분산처리 기반 카메라 영상 서비스 시스템 및 방법 | |
| JP4985742B2 (ja) | 撮影システム、方法及びプログラム | |
| JP4574509B2 (ja) | システム用カメラ、監視システム及び監視方法 | |
| KR102108391B1 (ko) | 다수개의 카메라를 활용한 이동물체 연계추적시스템 및 방법 | |
| KR101926510B1 (ko) | 광각카메라를 이용한 안면인식 기반의 광역 감시 시스템 | |
| KR102596695B1 (ko) | 무인 매장 운영 시스템 및 무인 매장 관리 방법 | |
| KR20200010691A (ko) | 이종 카메라를 활용한 인물인식 및 교통통제시스템 | |
| JP4088060B2 (ja) | 人物監視システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050324 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050324 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070116 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070123 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070316 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070410 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070509 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070628 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070717 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070809 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 3999561 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100817 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110817 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110817 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120817 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130817 Year of fee payment: 6 |
|
| EXPY | Cancellation because of completion of term |