JP2008020981A - Monitoring system - Google Patents
Monitoring system Download PDFInfo
- Publication number
- JP2008020981A JP2008020981A JP2006190154A JP2006190154A JP2008020981A JP 2008020981 A JP2008020981 A JP 2008020981A JP 2006190154 A JP2006190154 A JP 2006190154A JP 2006190154 A JP2006190154 A JP 2006190154A JP 2008020981 A JP2008020981 A JP 2008020981A
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- monitoring
- monitoring area
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
- Alarm Systems (AREA)
Abstract
Description
本発明はカメラを用いた監視システムに関わり、特に侵人物体検出及び侵入物体追尾に関するものである。 The present invention relates to a monitoring system using a camera, and more particularly to intruder detection and tracking of an intruding object.
従来から、カメラ等の撮像装置によって監視エリア内に侵入した物体を検出して、検出した物体を追尾する監視システムがある。しかし、物体追尾において、スピーカの警報音出力との連動はしていることがあるが、関しエリア内で検出された物体に対しての警告を出力するようなことは行われていない（例えば、特許文献１参照。）。
そのため、撮像装置が、監視エリア内の物体を追尾している状態でも、物体は撮像装置で監視されていることが気づかず、目標に向けて進む場合がある。
Therefore, even when the imaging apparatus is tracking an object in the monitoring area, the object may not be noticed being monitored by the imaging apparatus, and may proceed toward the target.
従来の監視システムでは、監視エリア内に入ってきた侵入者等の移動物体に、監視エリアであること、カメラで見られていること、入ってはいけないこと、等を認識させる処理は実施していなかった。このため、監視エリア内に入ってきた侵入者等の物体は、その場所が監視エリアであること、カメラで見られていること、入ってはいけないこと、等の情報が分からず、例えば、そのまま留まったり、更に、別の行動をとったりすることがあった。また、物体が人間ではなく、動物等であった場合には監視エリアであることを認識できないことでそのままい続けることがあった。
本発明の目的は、上記のような問題を解決し、監視エリア内に入ってきた、または監視エリア内で検出された物体に、その場所が監視エリアであることを知らしめること、あるいは、入ってはいけないことを伝えることが可能な監視システムを提供することにある。
In a conventional monitoring system, a process for recognizing that a moving object such as an intruder entering the monitoring area is a monitoring area, that it is viewed by a camera, and that it should not be entered is performed. There wasn't. For this reason, objects such as intruders that have entered the surveillance area do not know information such as that the location is the surveillance area, that they are being seen by the camera, and that they should not be entered. I sometimes stayed or took another action. In addition, when the object is not a human but an animal or the like, it may remain as it is because the object cannot be recognized as a monitoring area.
The object of the present invention is to solve the above-mentioned problems and to notify an object that has entered or is detected within the monitoring area that the place is the monitoring area. The purpose is to provide a monitoring system that can communicate what must not be done.
上記の目的を達成するために、本発明の監視システムは、通常とは異なる色を発光する照明源、または、通常とは異なる音を出力する音源を設け、監視エリア内に入ってきた、または監視エリア内で検出された物体に、その場所が監視エリアであることを知らしめることを可能としたものである。
即ち、本発明の監視システムは、監視エリアを撮像する撮像装置と、撮像装置が取得した画像から物体を検出する画像処理装置と、画像処理装置が物体を検出した場合に、照明灯の色を不快色に変更し、スピーカの警報音を不快音に変化させる。
In order to achieve the above object, the monitoring system of the present invention is provided with an illumination source that emits an unusual color, or a sound source that outputs an unusual sound, and enters the surveillance area, or The object detected in the monitoring area can be informed that the place is the monitoring area.
That is, the monitoring system of the present invention has an imaging device that captures an image of a monitoring area, an image processing device that detects an object from an image acquired by the imaging device, and a color of an illumination lamp when the image processing device detects an object. Change to an unpleasant color and change the alarm sound of the speaker to an unpleasant sound.
また、本発明の監視システムは、監視エリアを撮像する撮像装置と、撮像装置が取得した画像から物体を検出する画像処理装置と、画像処理装置が物体を検出した場合に、登録されたポジションに物体が存在した時に、照明灯の色を不快色に変更し、スピーカの警報音を不快音に変化させる。 In addition, the monitoring system of the present invention has an imaging device that images a monitoring area, an image processing device that detects an object from an image acquired by the imaging device, and a registered position when the image processing device detects an object. When an object is present, the color of the illumination lamp is changed to an unpleasant color, and the alarm sound of the speaker is changed to an unpleasant sound.
また、本発明の監視システムは、複数のサブエリアに分割された監視エリアを撮像する撮像装置と、撮像装置が取得した画像から物体を検出する画像処理装置と、画像処理装置が物体を検出した場合に、複数のサブエリアのどこに物体が存在するかによって照明灯の色またはスピーカの警報音の種類を変更する。 The monitoring system of the present invention includes an imaging device that captures a monitoring area divided into a plurality of subareas, an image processing device that detects an object from an image acquired by the imaging device, and the image processing device that detects the object. In this case, the color of the illumination lamp or the type of the alarm sound of the speaker is changed depending on where the object is present in the plurality of sub-areas.
本発明によれば、監視エリア内に入ってきた、または監視エリア内で検出された物体に、その場所が監視エリアであることを知らしめることができ、監視エリア内に入ってきた、または監視エリア内で検出された物体が、自分の判断で監視エリア内から出て行く監視システムを実現できる。 According to the present invention, an object that has entered or is detected in the monitoring area can be informed that the location is the monitoring area, and has entered the monitoring area or has been monitored. It is possible to realize a monitoring system in which an object detected in the area goes out of the monitoring area by own judgment.
本発明の監視システムを以下に説明する。
本発明の監視システムは、例えば、特開２００５−１００３８８号公報に開示した物体検出処理を用いて実施する。
本発明の監視システムを、図１を参照して説明する。図１は本発明の監視システムに適用する画像監視システムのハードウエアの構成の一実施例を示すブロック図である。101 は撮像装置、102 は処理装置、103 は操作装置、104 は外部記憶装置、105 はモニタ、106 は警告灯である。
The monitoring system of the present invention will be described below.
The monitoring system of the present invention is implemented using, for example, an object detection process disclosed in Japanese Patent Application Laid-Open No. 2005-1000038.
The monitoring system of the present invention will be described with reference to FIG. FIG. 1 is a block diagram showing an embodiment of the hardware configuration of an image monitoring system applied to the monitoring system of the present invention. Reference numeral 101 denotes an imaging device, 102 denotes a processing device, 103 denotes an operation device, 104 denotes an external storage device, 105 denotes a monitor, and 106 denotes a warning light.
撮像装置 101 は、TV カメラ 101a と、例えばズームレンズから構成された撮像レンズ 101b と、例えば旋回台から構成されたカメラ雲台 101c と、照明灯等の照明発光部 101d とスピーカ等の音源出力部 101e から構成されている。
なお、図１の実施例では、撮像装置 101 は１台しか無い。しかし、撮像装置は複数台あるのが通常である。図１では、煩雑となるため、１台だけで説明している。
The imaging device 101 includes a TV camera 101a, an imaging lens 101b composed of, for example, a zoom lens, a camera platform 101c composed of a swivel base, an illumination light emitting unit 101d such as an illumination lamp, and a sound source output unit such as a speaker. Consists of 101e.
In the embodiment of FIG. 1, there is only one imaging device 101. However, there are usually a plurality of imaging devices. In FIG. 1, since it becomes complicated, only one unit is described.
処理装置 102 は、画像入力部 102a と、雲台制御部 102b と、レンズ制御部 102c と、操作入力部 102d と、画像メモリ 102e と、MPU 102f と、ワークメモリ 102g と、外部入出力部 102h と、画像出力部 102i と、警報出力部 102j と、データバス 102k と、照明制御部 102m と、音源制御部 102n から構成されている。
操作装置 103 は、ジョイスティック 103a と、第１のボタン 103b と、第２のボタン 103c から構成されている。
なお、図１の実施例では、撮像装置 101 に対して、照明発光部 101d と音源出力部 101e をそれぞれ１つで説明しているが、それぞれ複数あっても良く、制御部もそれらの台数を制御できるよう、複数台になっても良い。
The processing device 102 includes an image input unit 102a, a pan head control unit 102b, a lens control unit 102c, an operation input unit 102d, an image memory 102e, an MPU 102f, a work memory 102g, and an external input / output unit 102h. The image output unit 102i, the alarm output unit 102j, the data bus 102k, the illumination control unit 102m, and the sound source control unit 102n.
The operation device 103 includes a joystick 103a, a first button 103b, and a second button 103c.
In the embodiment of FIG. 1, the illumination light emitting unit 101d and the sound source output unit 101e are described as one for the imaging device 101. However, there may be a plurality of each, and the control unit also determines the number of them. Multiple units may be provided so that control is possible.
具体的には、TV カメラ 101a の出力は、画像入力部 102a を介してデータバス 102k と接続されており、撮像レンズ 101b はレンズ制御部 102c を介してデータバス 102k と接続されており、TV カメラ 101a を搭載するカメラ雲台 101c は、雲台制御部 102b を介してデータバス 102k と接続され、照明発光部 101d は照明制御部 102m を介してデータバス 102k と接続され、音源出力部 101e は音源制御部 102n を介してデータバス 102k と接続され、操作装置 103 の出力は、操作入力部 102d を介してデータバス 102k と接続されている。 Specifically, the output of the TV camera 101a is connected to the data bus 102k via the image input unit 102a, and the imaging lens 101b is connected to the data bus 102k via the lens control unit 102c. The camera head 101c equipped with 101a is connected to the data bus 102k through the head control unit 102b, the illumination light emitting unit 101d is connected to the data bus 102k through the illumination control unit 102m, and the sound source output unit 101e is the sound source. The controller 102n is connected to the data bus 102k, and the output of the controller device 103 is connected to the data bus 102k via the operation input unit 102d.
また、外部記憶装置 104 は、外部入出力部 102h を介してデータバス 102k に接続されており、監視用の画像モニタ 105 は画像出力部 102i を介してデータバス 102k に接続されており、警告灯 106 は警報出力部 102j を介してデータバス 102k に接続されている。なお、MPU 102f とワークメモリ 102g と画像メモリ 102e は、直接的に、データバス 102k と接続されている。 The external storage device 104 is connected to the data bus 102k via the external input / output unit 102h, and the monitoring image monitor 105 is connected to the data bus 102k via the image output unit 102i. 106 is connected to the data bus 102k via the alarm output unit 102j. The MPU 102f, the work memory 102g, and the image memory 102e are directly connected to the data bus 102k.
ここで、TV カメラ 101a は、監視の対象となる領域（監視エリア）を所定の視野内に捉え、監視エリアを撮像して画像信号を出力する。このため、TV カメラ 101a は、撮像レンズ 101b を備え、カメラ雲台 101 に搭載されている。そして、TV カメラ 101a により撮像された画像信号は、画像入力部 101a からデータバス 102k を介して画像メモリ 102e に蓄積される。 Here, the TV camera 101a captures an area to be monitored (monitoring area) within a predetermined field of view, images the monitoring area, and outputs an image signal. For this reason, the TV camera 101a includes an imaging lens 101b and is mounted on the camera head 101. The image signal picked up by the TV camera 101a is stored in the image memory 102e from the image input unit 101a via the data bus 102k.
外部記憶装置 104 は、プログラムやデータなどを記憶する。プログラムやデータなどが必要に応じて外部入出力部 102h を介してワークメモリ 102g に読み込まれ、また、反対に、プログラムやデータなどがワークメモリ 102g から外部記憶装置 104 に保存される。 The external storage device 104 stores programs and data. Programs, data, and the like are read into the work memory 102g via the external input / output unit 102h as needed, and conversely, programs, data, and the like are saved from the work memory 102g to the external storage device 104.
MPU 102f は、外部記憶装置 104 に保存されて処理装置 102 の動作時にワークメモリ 102g に読み込まれたプログラムに従って処理を実行し、ワークメモリ 102g 内で、画像メモリ 102e に蓄積された画像の解析を行う。そして、MPU 102f は、当該処理結果に応じて、レンズ制御部 102c を介して撮像レンズ 101b を制御することや、雲台制御部 102b を介してカメラ雲台 101c 制御する。こうして、TV カメラ 101a の撮像視野を変えるとともに、必要に応じて画像モニタ 105 に検出した結果の画像を表示し、警告灯 106 を点灯させ監視者に知らせる。 The MPU 102f executes processing according to a program stored in the external storage device 104 and read into the work memory 102g when the processing device 102 is operating, and analyzes the image stored in the image memory 102e in the work memory 102g. . Then, the MPU 102f controls the imaging lens 101b via the lens control unit 102c or the camera pan 101c via the pan control unit 102b according to the processing result. In this way, the imaging field of view of the TV camera 101a is changed, the detected image is displayed on the image monitor 105 as necessary, and the warning lamp 106 is turned on to notify the supervisor.
更に、MPU 102f は、当該処理結果に応じて、照明制御部 102m を介して照明発光部 101d を制御することや、音源制御部 102n を介して音源出力部 101e 制御する。
こうして、照明発光部 101d は、監視エリア内を照らしていた光の色や輝度を変えたり、点滅させたりし、監視エリア内の物体に監視エリアであることを知らせる。
またこうして、音源出力部 101e は、監視エリア内に音を発生させ（出力し）、監視エリア内の物体に監視エリアであることを知らせる。
Further, the MPU 102f controls the illumination light emitting unit 101d via the illumination control unit 102m or the sound source output unit 101e via the sound source control unit 102n according to the processing result.
In this way, the illumination light emitting unit 101d changes the color or brightness of the light that illuminates the monitoring area, or blinks it to notify an object in the monitoring area that it is the monitoring area.
Also, in this way, the sound source output unit 101e generates (outputs) a sound in the monitoring area and notifies an object in the monitoring area that it is the monitoring area.
上記の実施例では、発光部 101d は、監視エリア内を最初から照らしていたが、はじめは照らしていず、物体を検出したときに発光するようにしても良い。
また、照明発光部 101d に旋回等の運動機構を持たせ、物体を検出したときに旋回等の運動をさせることによって監視エリア内の物体に警告するようにしても良い。
更に、発光の色や輝度を規則的あるいは不規則的に変化させるようにしても良い。
また、上記実施例の音源出力部 101e が、その音の周波数や大きさを規則的あるいは不規則的に変化させるようにしても良い。
In the above embodiment, the light emitting unit 101d illuminates the inside of the monitoring area from the beginning. However, the light emitting unit 101d may illuminate when an object is detected without illuminating at first.
Further, the illumination light emitting unit 101d may be provided with a motion mechanism such as turning, and when an object is detected, the motion within the monitoring area may be warned by causing the motion such as turning.
Furthermore, the color and brightness of the light emission may be changed regularly or irregularly.
In addition, the sound source output unit 101e of the above embodiment may change the frequency and magnitude of the sound regularly or irregularly.
また、その発光の色、あるいは色変化パターン（発光の色や輝度を規則的あるいは不規則的に変化させるパターン）は、監視対象物（あるいは警戒対象物）が決まっている場合には、その監視対象物に対して人間工学的あるいは生物工学的に不快感を与えるものを選択して出力する。例えば、稲妻のような自然に存在する光やでも良い。また例えば、動物の場合は、焚き火の炎のパターン、ねずみの場合は、ふくろうの目に似た光等でも良い。
音の場合も同様に、監視対象物（あるいは警戒対象物）が決まっている場合には、その監視対象物に対して人間工学的あるいは生物工学的に不快感を与えるものを選択して出力する。例えば、超音波、銃声、砲声、爆発音、等でも良く，雷のような自然に存在する音でも良い。また例えば、カラスの場合は、ミツバチの羽音等嫌いな音を発生させるようにしても良い。同様に、それら監視対象物の天敵の匂いや音あるいは写真、映像、模型等でもよい。
The emission color or color change pattern (pattern for changing the emission color or luminance regularly or irregularly) is monitored when the monitoring object (or the warning object) is determined. Select and output an object that gives an ergonomic or biotechnical discomfort to the object. For example, light that exists naturally, such as lightning, may be used. In addition, for example, in the case of animals, a bonfire flame pattern may be used, and in the case of mice, light similar to an owl's eye may be used.
Similarly, in the case of sound, when a monitoring object (or a warning object) is determined, an object that gives an ergonomic or biotechnical discomfort to the monitoring object is selected and output. . For example, ultrasonic waves, gunshots, gunshots, explosion sounds, etc. may be used, and naturally occurring sounds such as lightning may be used. For example, in the case of a crow, a dislike sound such as a bee wing may be generated. Similarly, the odor or sound of natural enemies of these objects to be monitored or photographs, videos, models, etc. may be used.
なお、上述の画像監視システムについては、撮像装置 101や、処理装置 102 等の構成及びこれらの接続形式は、以上の実施例に限られるものではない。例えば、撮像装置 101 と処理装置 102 がインターネット等のネットワークを介して接続されるような構成や、TV カメラ 101a により撮像された画像信号をデジタル圧縮処理した画像データが処理装置 102 に入力されるような構成等を用いることが可能である。 Note that in the above-described image monitoring system, the configuration of the imaging device 101, the processing device 102, and the like and the connection format thereof are not limited to the above-described embodiments. For example, a configuration in which the imaging device 101 and the processing device 102 are connected via a network such as the Internet, or image data obtained by digitally compressing an image signal captured by the TV camera 101a is input to the processing device 102. It is possible to use various configurations.
図２は、図１の画像監視システムにより行われる、本発明の物体追跡処理の手順の一実施例を示すフローチャートである。図２を参照して、本発明における物体追跡処理方法を説明する。 FIG. 2 is a flowchart showing an embodiment of the procedure of the object tracking process of the present invention performed by the image monitoring system of FIG. With reference to FIG. 2, the object tracking processing method in the present invention will be described.
まず、初期化処理ステップ 201 では、物体追跡処理を実行するための画像メモリ 102e 、ワークメモリ 102g 等の初期化を行う。
次に、差分法による侵入物体の検出処理 202（ステップ 202a 〜 ステップ 202e ）を行う。
First, in an initialization process step 201, the image memory 102e, work memory 102g, etc. for executing the object tracking process are initialized.
Next, an intruding object detection process 202 (step 202a to step 202e) by the difference method is performed.
即ち、画像入力処理ステップ 202a では、TV カメラ 101a から、所定の間時間隔（フレームレート）で例えば横 320 画素、高さ 240 画素の入力画像を得る。
差分処理ステップ 202b では、所定のフレーム間隔（または、時間間隔で得た画像について）で第１の画像入力ステップ 202a で得た入力画像と予め作成しておいた侵入物体の映っていない基準背景画像との間で各画素毎の輝度値の差分を計算する。
That is, in the image input processing step 202a, an input image having, for example, 320 pixels in width and 240 pixels in height is obtained from the TV camera 101a at a predetermined time interval (frame rate).
In the difference processing step 202b, the input image obtained in the first image input step 202a at a predetermined frame interval (or an image obtained at the time interval) and a reference background image in which an intruding object created in advance is not shown. The difference of the luminance value for each pixel is calculated.
二値化処理ステップ 202c では、差分処理ステップ 202b で得られた差分画像の画素値（差分値）が所定のしきい値 Th 未満である画素の画素値を“ 0 ”とし、当該しきい値 Th 以上である画素の画素値を“ 255 ”として二値化画像を得る。ここで、所定のしきい値 Th としては、例えば、Th ＝ 20 を用いている。また、１画素の画素値を 8 ビット（“ 0 ”〜“ 255 ”）で計算している。 In the binarization processing step 202c, the pixel value of the pixel in which the pixel value (difference value) of the difference image obtained in the difference processing step 202b is less than a predetermined threshold Th is set to “0”, and the threshold Th A binary image is obtained by setting the pixel value of the above pixel to “255”. Here, for example, Th = 20 is used as the predetermined threshold value Th. Further, the pixel value of one pixel is calculated with 8 bits (“0” to “255”).
ラベリング処理ステップ 202d では、二値化処理ステップ 202c で得られた二値化画像中の画素値“ 255 ”となる画素のかたまりを検出して各々に番号を付けて区別できるようにする。 In the labeling processing step 202d, a block of pixels having the pixel value “255” in the binarized image obtained in the binarizing processing step 202c is detected so that each can be identified by being numbered.
侵入物体存在判定処理ステップ 202e では、ラベリング処理ステップ 202d で番号付けされた画素値“ 255 ”となる画素のかたまりが所定の条件を満たした場合に、監視対象領域内に侵入物体が存在すると判定する。ここで、所定の条件としては、例えば、横が 20 画素以上で高さが 50 画素以上の大きさであるといった条件が用いられる。 In the intruding object presence determination processing step 202e, it is determined that there is an intruding object in the monitoring target area when the group of pixels having the pixel value “255” numbered in the labeling processing step 202d satisfies a predetermined condition. . Here, as the predetermined condition, for example, a condition that the width is 20 pixels or more and the height is 50 pixels or more is used.
そして、侵入物体存在判定処理ステップ 202e で侵入物体が存在すると判定された場合には、警報・検出情報表示処理ステップ 203 へ移行し、侵入物体が存在しないと判定された場合には、再び上記した第１の画像入力処理ステップ 202a へ移行して再び差分法による処理を実行する。 If it is determined in step 202e that the intruding object is present, the process proceeds to the alarm / detection information display processing step 203. If it is determined that there is no intruding object, the above-described process is performed again. The process proceeds to the first image input processing step 202a, and the process by the difference method is executed again.
次に、警報・検出情報表示処理ステップ 203 では、監視エリア内で発見された物体に、監視エリア内であること、監視カメラで撮像している区域であること、侵入禁止エリアであること、または、危険区域であることを知らせるために、図１で説明したような光、音、または、それらの組合せの少なくとも１つを出力させるために、照明制御部 102m を介して照明発光部 101d から光を出力する、または音源制御部 102n を介して音源出力部 101e から音を出力する。 Next, in the alarm / detection information display processing step 203, an object found in the monitoring area is within the monitoring area, is an area captured by the monitoring camera, is an intrusion prohibited area, or In order to notify that it is a dangerous area, in order to output at least one of light, sound, or a combination thereof as described in FIG. 1, light is emitted from the illumination light emitting unit 101d via the illumination control unit 102m. Or the sound is output from the sound source output unit 101e via the sound source control unit 102n.
更に、警報・検出情報表示処理ステップ 203 では、例えば、監視エリア内で物体を検出したことを表す警報を監視員に伝えるために、画像出力部 102j を介して画像モニタ 105 に侵入物体の情報を表示することや、警報出力部 202j を介して警告灯 206 を点灯させることなどを行う。ここで、侵入物体の情報としては、例えば、位置や人数などの情報を用いることが可能である。 Further, in the alarm / detection information display processing step 203, for example, in order to transmit an alarm indicating that an object has been detected in the monitoring area to the monitor, information on the intruding object is sent to the image monitor 105 via the image output unit 102j. Displaying and turning on the warning light 206 via the alarm output unit 202j. Here, as the information on the intruding object, for example, information such as the position and the number of people can be used.
また更に、例えば、入力画像に侵入物体を重畳して画像モニタ 105 に表示させても良い。なお、入力画像に重畳する侵入物体の表示形態は、二値化処理ステップ 202c で得られた侵入物体の二値化画像そのもの、或いはその外接矩形、或いは侵入物体が人間であれば、その頭上に三角マークを付す、或いは、カラー表示する等々、様々な形態が可能である。 Furthermore, for example, an intruding object may be superimposed on the input image and displayed on the image monitor 105. Note that the display form of the intruding object superimposed on the input image is the binarized image itself of the intruding object obtained in the binarization processing step 202c, its circumscribed rectangle, or the intruding object if it is a human being. Various forms are possible, such as attaching a triangle mark or color display.
警報・検出情報表示処理ステップ 203 で、監視エリア内に物体を検出し、上述のような処理を後、物体追尾ステップ 204 に移行し、検出された物体を所定の時間間隔（例えば、0.1 秒間隔、0.3 秒間隔、0.5 秒間隔、等、物体の移動速度に応じても良い。）で追尾（追跡）する。検出物体の追尾は、例えば、周知のテンプレートマッチング法を用いる。
そして、検出物体有無判定ステップ 205 で、その物体が監視エリア内に存在しているか否かを判定し、存在していると判定されれば、警報・検出情報表示処理ステップ 203 に戻り、存在していないと判定されれば、検出処理ステップ 202（画像入力ステップ 202a ）に戻る。
In alarm / detection information display processing step 203, an object is detected in the monitoring area, and after the processing as described above, the process proceeds to object tracking step 204, and the detected object is detected at a predetermined time interval (for example, at an interval of 0.1 second). Tracking (tracking) may be performed according to the moving speed of the object, such as 0.3 second interval, 0.5 second interval, etc.). The tracking of the detected object uses, for example, a known template matching method.
Then, in the detection object presence / absence determination step 205, it is determined whether or not the object exists in the monitoring area. If it is determined that the object exists, the process returns to the alarm / detection information display processing step 203 to exist. If it is determined that it is not, the process returns to the detection processing step 202 (image input step 202a).
次に、上記画像監視システムを用いた監視システムについて、図３を用いて説明する。図３は、監視エリア内に人物が侵入し、画像監視システムがその人物を検出したときの本発明の監視システムの動作の一実施例を説明するための図である。301 は監視エリア内に侵入した人物、301′は監視エリアに入る前の人物、302 はカメラ、303 は照明装置、304 はスピーカ装置、305 は監視エリア（例えば、屋内）の入口（ゲート）、306 は人物 301′が入口 305 を通って監視エリアへ侵入する経路を示す矢印、307 は入口 305 を何かが通過したことを検出するセンサである。センサ 307 は、例えば、赤外線センサである。 Next, a monitoring system using the image monitoring system will be described with reference to FIG. FIG. 3 is a diagram for explaining an embodiment of the operation of the monitoring system of the present invention when a person enters the monitoring area and the image monitoring system detects the person. 301 is a person who has entered the surveillance area, 301 ′ is a person before entering the surveillance area, 302 is a camera, 303 is a lighting device, 304 is a speaker device, 305 is an entrance (gate) of the surveillance area (for example, indoors), Reference numeral 306 denotes an arrow indicating a path through which the person 301 ′ enters the monitoring area through the entrance 305, and reference numeral 307 denotes a sensor for detecting that something has passed through the entrance 305. The sensor 307 is, for example, an infrared sensor.
照明装置 303 には予め発光する色や輝度等を変化させるポジションを登録し、スピーカ装置 304 には予め出力する音の周波数や大きさ等を変化させるポジションを登録してある。登録している場所は、照明装置 303 またはスピーカ装置 304 それぞれに内蔵したメモリ部（図示しない）でも良いし、それぞれに付属したリムーバルメディアから読み出すようにしても良い。
また、登録、変更、追加、及び削除、等の操作は、照明装置 303 またはスピーカ装置 304 とネットワーク等の伝送線と結合した記憶装置あるいは管理装置から配信されて、それらの照明装置 303 またはスピーカ装置 304 に登録するようにしても良い。
The lighting device 303 has registered in advance a position for changing the color, brightness, etc. of light emission, and the speaker device 304 has previously registered a position for changing the frequency, loudness, etc. of the sound to be output. The registered location may be a memory unit (not shown) built in each of the lighting device 303 or the speaker device 304, or may be read from a removable medium attached to each.
In addition, operations such as registration, change, addition, and deletion are distributed from a storage device or a management device coupled to the lighting device 303 or the speaker device 304 and a transmission line such as a network, and the lighting device 303 or the speaker device. You may make it register to 304.
まず人物 301′が入口 305 を矢印 306 の経路を通過して、監視エリア内に侵入する。
入口 305 を通過する時、入口 305 に設置したセンサ 307 が、人物 301 を認識し、何かが通過したこと知らせる信号をカメラ 302 に出力する。
カメラ 302 は入口 305 付近を撮像するように視野角を変更するため旋回し、撮像した画像を処理装置（例えば、図１の画像監視システム参照）に伝送し、処理装置は、図１及び図２の動作を行って、人物 301 を検出し、人物 301 の移動に従って、カメラを旋回し、人物 301 を追尾する。
画像監視システムは、追尾している人物 301 が、登録したポジションに達すると照明装置 303 及びスピーカ装置 304 に制御信号を送り、照明装置 303 が発光する色とスピーカ装置 304 の出力音を変化させる。
First, the person 301 ′ passes through the route indicated by the arrow 306 through the entrance 305 and enters the monitoring area.
When passing through the entrance 305, the sensor 307 installed at the entrance 305 recognizes the person 301 and outputs a signal notifying that something has passed to the camera 302.
The camera 302 turns to change the viewing angle so as to capture the vicinity of the entrance 305, and transmits the captured image to a processing device (see, for example, the image monitoring system in FIG. 1). The person 301 is detected and the camera is turned to track the person 301 as the person 301 moves.
When the tracking person 301 reaches the registered position, the image monitoring system sends a control signal to the lighting device 303 and the speaker device 304 to change the color emitted by the lighting device 303 and the output sound of the speaker device 304.
なお、登録したポジションに到達しているか否かの判定は、例えば、図２のフローチャートのステップ 205 で判定する。
その場合、カメラ 302 の旋回角とズーム倍率、及び、予めカメラ 302 の設置場所の位置座標との関係を認識させ、登録されたポジションの座標内に、検出した人物の位置（例えば、検出物体の２値化画像の領域の重心位置）が入っているか否かを判定する。
Whether or not the registered position has been reached is determined, for example, in step 205 of the flowchart of FIG.
In that case, the relationship between the turning angle of the camera 302 and the zoom magnification and the position coordinates of the installation location of the camera 302 is recognized in advance, and the position of the detected person (for example, the detected object) is within the registered position coordinates. It is determined whether or not the center of gravity of the binarized image area is included.
図４は、本発明の監視システムの別の実施例を示す図である。図４は、監視エリア内に人物が侵入し、画像監視システムがその人物を検出したときの本発明の監視システムの動作の一実施例を説明するための図である。408 は監視エリア
、401 は監視エリア 408 内に侵入した人物、402 はカメラ、403 は照明装置、404 はスピーカ装置、405 は監視エリア 408 の入口、407 は入口 405 を何かが通過したことを検出するセンサ、408-1 は監視エリア 408 内のサブエリア A 、408-2 は監視エリア 408 内のサブエリア B 、408-3 は監視エリア 408 内のサブエリア C 、408-4 は監視エリア 408 内のサブエリア D である。
FIG. 4 is a diagram showing another embodiment of the monitoring system of the present invention. FIG. 4 is a diagram for explaining an embodiment of the operation of the monitoring system of the present invention when a person enters the monitoring area and the image monitoring system detects the person. 408 is a surveillance area, 401 is a person who has entered the surveillance area 408, 402 is a camera, 403 is a lighting device, 404 is a speaker device, 405 is an entrance to the surveillance area 408, and 407 is that something has passed through the entrance 405. Sensor to be detected, 408-1 is sub-area A in monitoring area 408, 408-2 is sub-area B in monitoring area 408, 408-3 is sub-area C in monitoring area 408, 408-4 is monitoring area 408 It is subarea D within.
図４の実施例は、監視エリア 408 を重要度に従って４つのサブエリア（サブエリア A 408-1、サブエリア B 408-2 、サブエリア C 408-3 、サブエリア D 408-4 に分割し、重要度に応じて、発光する光の色や出力する音の種類を段階的に変化させたものである。
図４の実施例では、重要度がサブエリア A 408-1 が一番低く、次にサブエリア B 408-2 が、その次にサブエリア C 408-3 が低く、最後のサブエリア D 408-4 の重要度が一番高いものである。
The embodiment of FIG. 4 divides the monitoring area 408 into four subareas (subarea A 408-1, subarea B 408-2, subarea C 408-3, and subarea D 408-4 according to importance, According to the importance, the color of emitted light and the type of sound to be output are changed step by step.
In the embodiment of FIG. 4, subarea A 408-1 has the lowest importance, followed by subarea B 408-2, then subarea C 408-3, and last subarea D 408- 4 is the most important.
このとき、予め、例えば、それぞれのサブエリアに人物 401 が検出された場合に、発光する色を、重要度の高い順に例えば、人間の心理的に危険を感じる色や不快感を与える色を割り当てる。また、同様に、出力する音を重要度の高い順に人間の心理的に危険を感じる音や不快感を与える音を割り当てる。
そして、人物 401 が、該当するサブエリアの中に入ったと判定した場合に、該当する色を発光したり、該当する音を出力する。
これによって、人物等の侵入者は、監視エリア内に侵入した場合に、監視員が進んで欲しくない領域に進んでいくほど不快感が増し、人物等の侵入者は進むことをためらうか戻るようにすることができる。
At this time, for example, when a person 401 is detected in each sub-area, for example, a color that emits light is assigned in order of importance, for example, a color that feels dangerous to human beings or a color that gives a sense of discomfort. . Similarly, the sound to be output is assigned a sound that feels human psychologically dangerous or a sound that causes discomfort in descending order of importance.
If the person 401 determines that the person 401 has entered the corresponding sub-area, the person 401 emits the corresponding color or outputs the corresponding sound.
As a result, when an intruder such as a person intrudes into the monitoring area, the discomfort increases as the observer proceeds to an undesired area, and the intruder such as a person hesitates or returns. Can be.
更に、音や光だけでなく、不快な匂い、煙等の異常な現象の発生を感じさせるような現象を擬似的に発生させるようにしても良い。
以上述べた光、音、その他の出力はいずれか１つでも良く、またそれらの組合せでも良い。
また、上述の実施例では、監視エリア内を移動する物体を雲台やズーム機構でパン角、チルト角、またはズーム倍率を変更して、撮像装置の視野範囲を買えることによって追尾を行っているが、高画素サイズ（例えば、メガピクセルカメラ）を有する撮像装置にして、監視エリア全体を撮像し、追尾を画像処理で行うようにしても良い。また、複数台のメガピクセルカメラで、監視エリアを分割したサブエリア内をそれぞれ画像処理で追尾するようにしても良い。
Furthermore, not only sound and light but also a phenomenon that makes an abnormal phenomenon such as an unpleasant odor or smoke appear to be simulated.
Any one of the light, sound, and other outputs described above may be used, or a combination thereof.
Further, in the above-described embodiment, tracking is performed by changing the pan angle, tilt angle, or zoom magnification of an object moving in the monitoring area with a pan head or a zoom mechanism, and purchasing the field of view of the imaging apparatus. However, an imaging apparatus having a high pixel size (for example, a megapixel camera) may be used to image the entire monitoring area and perform tracking by image processing. In addition, a plurality of megapixel cameras may be used to track each sub-area obtained by dividing the monitoring area by image processing.
以上述べたように、本発明の監視システムは、自動追尾機能搭載の撮像装置と、色変化機能搭載の照明発光装置と、音変化機能搭載の音源出力装置を使用して、監視エリア内で検出した物体を検知し、監視エリアから検出物体を排除するために、不快感を与える光、音、匂い、動き、等を出力する。 As described above, the monitoring system of the present invention uses the imaging device equipped with the automatic tracking function, the illumination light emitting device equipped with the color change function, and the sound source output device equipped with the sound change function to detect within the monitoring area. In order to detect the detected object and exclude the detected object from the monitoring area, it outputs light, sound, smell, movement, etc. that give unpleasant feeling.
また、本発明の監視システムは、監視エリア内で検出した物体を撮像装置によって追尾し、監視エリア内の重要な領域に入った場合に、監視エリア内の重要領域から検出物体を排除するために、不快感を与える光、音、匂い、動き、等を出力する。 In addition, the monitoring system of the present invention tracks an object detected in the monitoring area by the imaging device, and excludes the detected object from the important area in the monitoring area when entering the important area in the monitoring area. Outputs light, sound, smell, movement, etc. that give discomfort.
また更に、本発明の監視システムは、監視エリア内を重要度に応じた複数のサブエリアに分割しておき、検出した物体を撮像装置によって追尾し、監視エリア内の重要領域から検出物体を排除するために、物体が位置するサブエリアの重要度に応じて予め定めた不快感を与える光、音、匂い、動き、等を出力する。 Furthermore, the monitoring system of the present invention divides the monitoring area into a plurality of sub-areas according to the importance, tracks the detected object by the imaging device, and excludes the detected object from the important area in the monitoring area. In order to do this, light, sound, smell, movement, etc. that give a predetermined discomfort according to the importance of the sub-area where the object is located are output.
以上述べたように、本発明の監視システムは、目と耳等の感覚で検出された物体に、監視エリアであることを分からせることが可能な監視システムを提供する。 As described above, the monitoring system of the present invention provides a monitoring system that allows an object detected by a sense such as eyes and ears to be identified as a monitoring area.
101：撮像装置、 101a：TVカメラ、 101b：ズームレンズ、 101c：カメラ雲台、 101d：照明発光部、 101e：音源出力部、 102：処理装置、 102a：画像入力部、 102b： 雲台制御部、 102c：レンズ制御部、 102d：操作入力部、 102e：画像メモリ、 102f：MPU、 103g：ワークメモリ、 102h：外部入出力部、 102i：画像出力部、 102j：警報出力部、 102k：データバス、 102n：照明制御部、 102n：音源制御部、 103：操作手段、 103a：ジョイスティック、 103b：ボタン、 103c：ボタン、 104：外部記憶装置、 105：画像モニタ、 106：警告灯、 301，301′：人物、 302：カメラ、 303：照明装置、 304：スピーカ装置、 305：監視エリアの入口、 306：監視エリアへ侵入する経路を示す矢印、 307：センサ、 401：人物、 402：カメラ、 403：照明装置、 404：スピーカ装置、 405：監視エリアの入口、 407：センサ、 408：監視エリア、 408-1，408-2，408-3，408-4：サブエリア。 101: Imaging device 101a: TV camera 101b: Zoom lens 101c: Camera pan head 101d: Illumination light emitting unit 101e: Sound source output unit 102: Processing device 102a: Image input unit 102b: Pan head control unit 102c: Lens controller 102d: Operation input unit 102e: Image memory 102f: MPU 103g: Work memory 102h: External input / output unit 102i: Image output unit 102j: Alarm output unit 102k: Data bus 102n: Lighting control unit, 102n: Sound source control unit, 103: Operating means, 103a: Joystick, 103b: Button, 103c: Button, 104: External storage device, 105: Image monitor, 106: Warning light, 301, 301 ′ : Person, 302: Camera, 303: Lighting device, 304: Speaker device, 305: Entrance to the monitoring area, 306: Arrow indicating the route to enter the monitoring area, 307: Sensor, 401: Person, 402: Camera, 403: Lighting device, 404: Speaker Location, 405: inlet of the monitor area, 407: sensor, 408: monitoring area, 408-1,408-2,408-3,408-4: subareas.
Claims (3)
An imaging device that images a monitoring area divided into a plurality of sub-areas, an image processing device that detects an object from an image acquired by the imaging device, and the plurality of subs when the image processing device detects an object A monitoring system, wherein a color of an illumination lamp or a type of alarm sound of a speaker is changed depending on where the object is present in the area.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006190154A JP2008020981A (en) | 2006-07-11 | 2006-07-11 | Monitoring system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006190154A JP2008020981A (en) | 2006-07-11 | 2006-07-11 | Monitoring system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2008020981A true JP2008020981A (en) | 2008-01-31 |
Family
ID=39076877
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006190154A Pending JP2008020981A (en) | 2006-07-11 | 2006-07-11 | Monitoring system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2008020981A (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010001436A1 (en) * | 2008-06-30 | 2010-01-07 | 株式会社MERSTech | Information providing device |
| JP2011257855A (en) * | 2010-06-07 | 2011-12-22 | Shigeo Masuda | Security device, remote security system, and remote security method |
| JP2014102777A (en) * | 2012-11-22 | 2014-06-05 | Hochiki Corp | Crime prevention alarm device |
| JP2017500823A (en) * | 2014-09-22 | 2017-01-05 | 小米科技有限責任公司Ｘｉａｏｍｉ Ｉｎｃ． | Smart lamp control method, smart lamp control device, program, and recording medium |
| JP2017131135A (en) * | 2016-01-26 | 2017-08-03 | 株式会社はなはな | Harmful animal repellent device |
| CN110008359A (en) * | 2019-03-11 | 2019-07-12 | 深圳警翼智能科技股份有限公司 | A kind of lighting system, device and method |
-
2006
- 2006-07-11 JP JP2006190154A patent/JP2008020981A/en active Pending
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010001436A1 (en) * | 2008-06-30 | 2010-01-07 | 株式会社MERSTech | Information providing device |
| JPWO2010001436A1 (en) * | 2008-06-30 | 2011-12-15 | 株式会社ＭＥＲＳＴｅｃｈ | Information provision device |
| JP2011257855A (en) * | 2010-06-07 | 2011-12-22 | Shigeo Masuda | Security device, remote security system, and remote security method |
| JP2014102777A (en) * | 2012-11-22 | 2014-06-05 | Hochiki Corp | Crime prevention alarm device |
| JP2017500823A (en) * | 2014-09-22 | 2017-01-05 | 小米科技有限責任公司Ｘｉａｏｍｉ Ｉｎｃ． | Smart lamp control method, smart lamp control device, program, and recording medium |
| JP2017131135A (en) * | 2016-01-26 | 2017-08-03 | 株式会社はなはな | Harmful animal repellent device |
| CN110008359A (en) * | 2019-03-11 | 2019-07-12 | 深圳警翼智能科技股份有限公司 | A kind of lighting system, device and method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2801958B1 (en) | Monitoring method and camera | |
| KR20070029760A (en) | Monitoring devices | |
| JPWO2015198767A1 (en) | Anomaly detection device and anomaly detection method | |
| JP2008020981A (en) | Monitoring system | |
| JP2017028364A (en) | Monitoring system and monitoring device | |
| JP5870470B2 (en) | Monitoring system | |
| JP6447425B2 (en) | Violation suppression device and violation suppression system provided with the same | |
| JP2011141787A (en) | Security system | |
| KR102472369B1 (en) | Object tracking system based on sound source asking for emegency help and tracking method using the same | |
| KR101615824B1 (en) | spontaneousness rescue apparatus for vehicle | |
| JP2009015536A (en) | Suspicious person report device, suspicious person monitoring device and remote monitoring system using the same | |
| JP2008541650A (en) | Monitoring method and apparatus | |
| US11592404B2 (en) | Close object detection for monitoring cameras | |
| JP6189284B2 (en) | Image sensing device | |
| JP2011053005A (en) | Monitoring system | |
| WO2017104660A1 (en) | Device for recording crime scene of shoplifting | |
| JP2005056406A (en) | Image movement detection apparatus and computer program | |
| JP2007318674A (en) | Monitoring camera apparatus | |
| KR20150015814A (en) | Apparatus, method, and recording medium for emergency alert | |
| JP4954459B2 (en) | Suspicious person detection device | |
| KR101631403B1 (en) | Security camera linked emergency button with passive infrared sensor | |
| KR20160121958A (en) | Pan-tilt integrated surveillance camera system with a position tracking function of the object | |
| JP2015001836A (en) | Image sensor | |
| JP2013005336A (en) | Monitoring device, security system, and program for monitoring device | |
| KR102439548B1 (en) | Power plant monitoring system and method |