JP2012048676A

JP2012048676A - Notification apparatus

Info

Publication number: JP2012048676A
Application number: JP2010192824A
Authority: JP
Inventors: Tetsuya Takahashi; 哲也高橋; Hideyuki Aoki; 秀行青木; Atsushi Sasaki; 惇佐々木; Takumi Munekata; 匠宗片
Original assignee: Secom Co Ltd
Current assignee: Secom Co Ltd
Priority date: 2010-08-30
Filing date: 2010-08-30
Publication date: 2012-03-08
Anticipated expiration: 2030-08-30
Also published as: JP5757708B2

Abstract

PROBLEM TO BE SOLVED: To provide a notification apparatus capable of determining whether a person is suspicious, without increasing a processing load, even in the case where information on the person is lacked in image information when the person is present at a position proximate to an important object to be monitored.SOLUTION: The present invention relates to a notification apparatus for detecting and notifying a suspicious person in a monitoring space where a storage cabinet is installed, including: a person detection section for detecting the presence of a person at a position proximate to the storage cabinet; an image capturing section for imaging the monitoring space periodically and capturing a monitor image; a storage section for storing the monitor image captured by the image capturing section; a processing image determination section for determining a monitor image which is captured before the lapse of a first predetermined time from the person detection by the person detection section or after, as a processing image; and a suspicious person detection section for detecting a suspicious person of which the face is not sufficiently photographed in the processing image.

Description

本発明は、重要監視物が設置された空間で不審者の存在を検出して通報する通報装置に関し、特に、重要監視物の近接位置に人物が存在するときの画像情報に人物の情報が不足するような場合であっても当該人物が不審者であるか否か判定できる通報装置の提供を目的とする。 The present invention relates to a reporting device that detects and reports the presence of a suspicious person in a space where important monitoring objects are installed, and in particular, lacks human information in image information when a person is present in the proximity of an important monitoring object. It is an object of the present invention to provide a reporting device that can determine whether or not the person is a suspicious person.

従来、撮像装置から入力される画像から人物領域の特徴情報を抽出して不審人物等の特徴に合致した場合、自動的に外部に通報出力するような通報装置が知られている。
このような画像を用いた通報装置においては、撮像された画像は異常事態が発生した際の検証情報として利用されるため、監視すべき範囲より広範な範囲を撮像装置にて撮像していることがある。また、画像から不審人物を検出する処理が複雑高度化する一方で、監視を行う通報装置自体は小型低電力化が求められており、処理負荷により周期的に取得される画像についての処理が取得周期間隔内に終了せず処理の遅延化を招くおそれもある。 2. Description of the Related Art Conventionally, a reporting device is known that automatically extracts feature information of a person region from an image input from an imaging device and automatically outputs a report to the outside when the feature information matches a feature of a suspicious person or the like.
In the notification device using such an image, the captured image is used as verification information when an abnormal situation occurs, and therefore, a range wider than the range to be monitored is captured by the imaging device. There is. Moreover, while the process of detecting a suspicious person from an image has become complex and sophisticated, the monitoring device itself that is to be monitored is required to be small and have low power consumption. There is also a risk that processing will not be completed within the period interval and processing may be delayed.

このため、偶々画像に写りこんだ悪意のない第三者を不審人物として誤検出することを防止するために、また、処理負荷を軽減するために、常時撮像画像を処理して不審人物等を抽出するのではなく、監視すべき範囲に人の存在が検知されるような場合にのみ、撮像画像において不審人物の検出処理を行うことが一般的に行われている。 For this reason, in order to prevent erroneous detection of a non-malicious third party that appears in the image as a suspicious person, and to reduce the processing load, the captured image is always processed to detect suspicious persons, etc. In general, the detection processing of a suspicious person is performed on a captured image only when the presence of a person is detected in a range to be monitored instead of extracting.

例えば、特許文献１には、自動取引装置から不正に現金を引き出すおそれのある不審人物を検出するために、人感センサが自動取引装置の前に人が立ったことを検知したときにカメラから画像を取り込んで、当該画像にサングラスやマスクなどで顔を隠蔽した不審人物が撮像されているか否かを判定する監視装置が記載されている。 For example, in Patent Document 1, in order to detect a suspicious person who may withdraw cash from an automatic transaction apparatus illegally, the camera detects when a human sensor detects that a person stands in front of the automatic transaction apparatus. There is described a monitoring device that captures an image and determines whether or not a suspicious person whose face is concealed with sunglasses or a mask is captured in the image.

特開２０１０−７９７５０号公報JP 2010-79750 A

特許文献１の監視装置では、自動取引装置の操作者の顔が撮影可能に配置されたカメラを用いて、監視範囲となる自動取引装置の前に人が立ったことが検知されたときに画像を取得し当該人物の顔を情報に基づいて不審人物の検出処理を行うことで、誤検出と処理負荷の増大を防止している。 In the monitoring apparatus of Patent Document 1, an image is displayed when it is detected that a person stands in front of an automatic transaction apparatus that becomes a monitoring range by using a camera in which a face of an operator of the automatic transaction apparatus can be photographed. And detecting the suspicious person based on the information of the person's face, thereby preventing erroneous detection and an increase in processing load.

しかしながら、監視範囲に人の存在が検知されたときの画像が必ずしも不審人物を検出するための画像として好適であるとは言えず、そのような場合において特許文献１の監視装置では不審人物を検出できないおそれがある。 However, the image when the presence of a person is detected in the monitoring range is not necessarily suitable as an image for detecting a suspicious person. In such a case, the monitoring apparatus of Patent Document 1 detects a suspicious person. It may not be possible.

例えば、金庫などの保管庫を開けようとする人物を監視対象とした場合、金庫には高い防火性能と堅牢性が求められるため撮像装置を組み込むことは難しく、外部設置された撮像装置で金庫を開けようとする人物を撮像することとなる。また、金庫は、一般に床面に固定設置されており、また前面扉に解錠手段が設けられている。このため、金庫扉を開けようとする人物は通常かがんで解錠手段を操作することとなる。従って、このような場合に金庫の外部に設置された撮像装置で金庫扉を開けようとする人物を撮像すると、当該人物は金庫の陰となって、人物の特徴情報を含んだ画像を撮像するのが困難となる。 For example, if a person who wants to open a vault such as a safe is to be monitored, it is difficult to incorporate an imaging device because the safe requires high fireproof performance and robustness. The person to be opened is imaged. The safe is generally fixedly installed on the floor, and the front door is provided with unlocking means. For this reason, a person who wants to open the safe door usually bends and operates the unlocking means. Therefore, in such a case, when an image of a person who wants to open the safe door is picked up by an image pickup device installed outside the safe, the person is behind the safe and picks up an image including the characteristic information of the person. It becomes difficult.

すなわち、特許文献１に例示される立ったまま操作するような自動取引装置とは異なり、金庫を開けようとする人物を監視対象とした場合には、金庫前に人が存在することを検知したときの画像に当該人物が不審者か否かを判断するための情報が必ずしも十分に含まれていない可能性があり、不審者の検出精度が低下するおそれがある。
一方で、金庫から離れた位置において人の存在を検知するようにした場合には、金庫を開けようとしない第三者を不審人物として誤検出してしまう可能性があり、不審者の検出精度が低下する。 That is, unlike the automatic transaction apparatus that is operated while standing as exemplified in Patent Document 1, when a person who wants to open a safe is targeted for monitoring, the presence of a person in front of the safe is detected. There is a possibility that information for determining whether or not the person is a suspicious person is not always included in the image at that time, and the detection accuracy of the suspicious person may be reduced.
On the other hand, if the presence of a person is detected at a position away from the safe, a third party who does not attempt to open the safe may be erroneously detected as a suspicious person. Decreases.

本発明は、上記の課題に鑑みてなされたもので、金庫など保管庫の近接位置に人の存在が検知されるような場合にのみ不審者の検出処理を行う通報装置に関し、不審者の検出精度を向上できる通報装置の提供を目的とする。 The present invention has been made in view of the above problems, and relates to a notification device that performs detection processing of a suspicious person only when the presence of a person is detected at a close position of a storage such as a safe, and the detection of a suspicious person The purpose is to provide a reporting device that can improve accuracy.

上記の目的を達成するために本発明による通報装置は、保管庫が設置された監視空間において不審者を検出して通報する通報装置であって、前記保管庫の近接位置に人物の存在を検知する人物検知部と、周期的に前記監視空間を撮像して監視画像を取得する撮像部と、前記撮像部が取得する監視画像を記憶する記憶部と、前記人物検知部による前記人物検知時から第一の所定時間前以降に取得された監視画像を処理画像として決定する処理画像決定部と、前記処理画像について顔が十分に撮影されていない不審者を検出する不審者検出部と、を備えることを特徴とした。 In order to achieve the above object, the notification device according to the present invention is a notification device that detects and reports a suspicious person in a monitoring space where a storage is installed, and detects the presence of a person in the proximity of the storage. A person detection unit that periodically captures the monitoring space to acquire a monitoring image, a storage unit that stores a monitoring image acquired by the imaging unit, and a time when the person is detected by the person detection unit A processing image determination unit that determines, as a processing image, a monitoring image acquired after the first predetermined time; and a suspicious person detection unit that detects a suspicious person whose face is not sufficiently photographed with respect to the processing image. It was characterized by that.

かかる構成において、通報装置は、周期的に監視画像を取得するとともに記憶部に記憶して、保管庫の近接位置に人物の存在を検知すると、この人物検知時から第一の所定時間前以降に取得された監視画像を処理画像として決定し、当該処理画像について顔が十分に撮影されていない不審者を検出するように作用する。 In such a configuration, the reporting device periodically acquires monitoring images and stores them in the storage unit, and detects the presence of a person at a close position of the storage, after the first predetermined time from the time of the person detection. The acquired monitoring image is determined as a processed image, and acts to detect a suspicious person whose face is not sufficiently captured for the processed image.

かかる構成によれば、保管庫を開扉可能な位置など保管庫の近接位置に人物を検知したときに、当該人物が保管庫に接近する直前に遡って不審者の検出処理を行うことが可能となる。これにより、保管庫の近接位置では人物の特徴情報を撮像できないような場合であっても、当該人物が保管庫に接近して来るまでの画像から特徴情報を抽出して不審者か否かを判定でき、処理負荷が増大することを防止しつつ検出精度を向上させることが可能となる。 According to such a configuration, when a person is detected at a close position of the storage, such as a position where the storage can be opened, it is possible to detect a suspicious person retroactively immediately before the person approaches the storage. It becomes. As a result, even if the person's feature information cannot be captured at the close position of the storage, the feature information is extracted from the image until the person approaches the storage, and it is determined whether or not the person is a suspicious person. It is possible to make a determination, and it is possible to improve detection accuracy while preventing an increase in processing load.

また、本発明の通報装置において、前記処理画像決定部は、前記人物検知時から第一の所定時間前以降で、且つ前記第一の所定時間より短い第二の所定時間前までに取得された監視画像を処理画像として決定するようにしてもよい。 Further, in the notification device of the present invention, the processed image determination unit is acquired after the first predetermined time from the time of the person detection and before the second predetermined time shorter than the first predetermined time. A monitoring image may be determined as a processed image.

かかる構成において、通報装置は、保管庫の近接位置に人物の存在を検知したときから、第一の所定時間前以降で第二の所定時間前まで（第一の所定時間＞第二の所定時間）となる間に取得された監視画像について顔が十分に撮影されていない不審者を検出するように作用する。 In such a configuration, the notification device starts from the time when the presence of a person is detected at the close position of the storage until the second predetermined time before the first predetermined time (first predetermined time> second predetermined time). ) Acts to detect a suspicious person whose face is not sufficiently captured in the monitoring image acquired during

すなわち、保管庫を開扉可能な位置など保管庫の近接位置に人物の存在を検知した時点から近い過去となる第二の所定時間前までの画像には、当該人物の特徴情報が撮像されていない可能性があり、このような画像を不審者検出の処理対象とすると無駄に画像処理負荷を増大させ、他の処理が遅延してしまうおそれがある。
そこで、かかる構成では、保管庫の近接位置に人物の存在を検知した時点から過去の画像について不審者の検出処理を行う場合に、近い過去の画像を処理対象から除外することにより、処理負荷が増大することを防止しつつ検出精度を向上させることが可能となる。 That is, characteristic information of the person is captured in images from the time when the presence of a person is detected at a close position of the storage, such as a position where the storage can be opened, to the second predetermined time before the near past. There is a possibility that the image processing load is unnecessarily increased. If such an image is set as a processing target for suspicious person detection, the image processing load increases unnecessarily, and other processing may be delayed.
Therefore, in such a configuration, when detecting a suspicious person for a past image from the time when the presence of a person is detected at a close position of the storage, the processing load is reduced by excluding the near past image from the processing target. It is possible to improve the detection accuracy while preventing the increase.

また、本発明の通報装置において、前記不審者検出部は、前記処理画像決定部が決定した処理画像について不審者を検出する処理が終了すると、不審者を検出する処理が終了した時点で最新となる前記監視画像について前記不審者を検出する処理を行うようにしてもよい。 Further, in the notification device of the present invention, the suspicious person detection unit is updated when the process for detecting the suspicious person is completed when the process for detecting the suspicious person is completed for the processed image determined by the processed image determination unit. Processing for detecting the suspicious person may be performed on the monitoring image.

かかる構成において、通報装置は、保管庫の近接位置に人物の存在を検知すると、当該時点よりも前に取得した過去の画像について不審者の検出処理を行い、過去の画像について不審者を検出する処理が終了すると、現在取得される最新の画像について不審者の検出処理を行い、以後、かかる処理が終了したときの最新の画像について不審者の検出処理を行うように作用する。 In such a configuration, when the reporting device detects the presence of a person at a close position of the storage, the reporting device performs a suspicious person detection process on a past image acquired before that time, and detects a suspicious person on the past image. When the process is completed, a suspicious person detection process is performed on the latest image acquired at present, and thereafter, a suspicious person detection process is performed on the latest image when the process is completed.

画像から不審者を検出する処理は、対象となる画像の枚数（量）や画像に含まれる人物数や特徴情報の程度（複雑さ）といった要因に応じて処理に要する時間が異なり、一つの画像についての処理が画像取得間隔内に終了しない可能性もある。このため、周期的に取得される全ての画像について処理をすると未処理の画像が加算的に蓄積してしまい処理が遅延してしまうおそれがある。
そこで、保管庫の近接位置に人物の存在を検知したときに開始される過去の画像についての不審者を検出する処理が終了した場合には、以後、前回の処理が終了したときに取得される最新の画像についてのみ不審者を検出する処理を繰り返すことで、処理負荷が増大することを防止しつつ検出精度を向上させることが可能となる。 The processing for detecting a suspicious person from an image differs depending on factors such as the number of images to be processed (amount), the number of persons included in the image, and the degree of complexity (complexity). There is also a possibility that the process for is not completed within the image acquisition interval. For this reason, if all the images acquired periodically are processed, unprocessed images may be accumulated additionally, and the processing may be delayed.
Therefore, when the process of detecting a suspicious person for a past image that is started when the presence of a person is detected at the close position of the storage is completed, it is acquired when the previous process is completed thereafter. By repeating the process of detecting a suspicious person only for the latest image, it is possible to improve detection accuracy while preventing an increase in processing load.

また、本発明の通報装置において、前記不審者検出部は、前記人物検知部が前記人物の存在を検知しなくなってから第三の所定時間が経過するまで前記不審者を検出する処理を行うようにしてもよい。 Further, in the notification device of the present invention, the suspicious person detection unit performs a process of detecting the suspicious person until a third predetermined time elapses after the person detection unit no longer detects the presence of the person. It may be.

かかる構成によれば、人物が保管庫に接近して来るまでの画像から不審者の存在を判定できなかった場合であっても、保管庫の近接位置に人物を検知しなくなってから第三の所定時間が経過するまで、即ち当該人物が保管庫から離れる間に取得される画像について、不審者が存在するか否かを検出することができ、処理負荷が増大することを防止しつつ検出精度を向上させることが可能となる。 According to such a configuration, even if the presence of the suspicious person cannot be determined from the image until the person approaches the storage, the third person can no longer be detected in the proximity of the storage. It is possible to detect whether or not there is a suspicious person for an image acquired until a predetermined time elapses, that is, while the person is away from the storage, and the detection accuracy is prevented while increasing the processing load. Can be improved.

本発明によれば、保管庫の近接位置に人物を検知したときに、当該人物が保管庫に接近する直前に遡って不審者の検出処理を行うことが可能となる。これにより、保管庫の近接位置では人物の特徴情報を抽出できないような場合であっても、当該人物が保管庫に接近して来るまでの画像から特徴情報を抽出して不審者か否かを判定でき、処理負荷が増大することを防止しつつ検出精度を向上させることが可能となる。 According to the present invention, when a person is detected at a close position of the storage, it is possible to perform a suspicious person detection process retroactively before the person approaches the storage. As a result, even if the feature information of the person cannot be extracted at the close position of the storage, the feature information is extracted from the image until the person approaches the storage, and it is determined whether or not the person is a suspicious person. It is possible to make a determination, and it is possible to improve detection accuracy while preventing an increase in processing load.

本発明の通報装置による通報システムの全体構成を示す概略図である。It is the schematic which shows the whole structure of the notification system by the notification apparatus of this invention. 本発明の通報装置の構成を示すブロック図である。It is a block diagram which shows the structure of the notification apparatus of this invention. 本発明の報装置の動作概要を示すタイミングチャートである。It is a timing chart which shows the operation | movement outline | summary of the information apparatus of this invention. 本発明の通報装置の不審者監視動作処理を示すフローチャートである。It is a flowchart which shows the suspicious person monitoring operation | movement process of the notification apparatus of this invention.

以下、本発明の実施形態について、図面を参照して具体的に説明する。
本実施形態では、監視区域（監視空間）として金融機関や商店などの事務所エリアを監視する場合を例示するが、本発明の範囲はこれに限定されるものではない。 Embodiments of the present invention will be specifically described below with reference to the drawings.
In this embodiment, the case where an office area such as a financial institution or a store is monitored as a monitoring area (monitoring space) is exemplified, but the scope of the present invention is not limited to this.

図１は、本発明の通報装置を用いた通報システム１を示す構成図である。
図１は、金庫など内部に収納空間を有した保管庫２及び通報装置３が設置された監視区域を模式的に側面図上に示している。図１に示すように、本実施形態の通報システム１は、監視区域の床面に固定設置された保管庫２の上部に載置された通報装置３と、遠隔の監視センタ５とを通信回線網６を介して接続して構成されている。 FIG. 1 is a configuration diagram showing a notification system 1 using the notification device of the present invention.
FIG. 1 schematically shows a monitoring area in which a storage 2 having a storage space inside a safe or the like and a notification device 3 are installed on a side view. As shown in FIG. 1, the notification system 1 of the present embodiment includes a communication line between a notification device 3 placed on the upper part of a storage 2 fixedly installed on the floor of a monitoring area and a remote monitoring center 5. They are connected via the network 6.

通報装置３の筐体には、撮像部としての監視カメラ３１と人物検知部としての人感センサ３２が保管庫扉２１と同方向に向いて配置されている。監視カメラ３１は、保管庫扉２１の前方を撮像視野として保管庫２まで接近してくる人物が撮像可能に配置され、人感センサ３２は、保管庫扉２１を開扉可能な近接位置（例えば保管庫扉前方８０ｃｍ以内）に存在する人体７を検知可能に配置される。
なお、監視カメラ３１と人感センサ３２は通報装置３の筐体に内蔵される例に限らず、少なくとも保管庫２まで接近してくる人物が撮像可能であって、保管庫扉２１の近接位置の人体７が検知可能に保管庫２の上部空間や背後壁面などに別途監視カメラ３１と人感センサ３２が設置され、通報装置３と接続される構成としてもよい。また、通報装置３も、保管庫２の上部に載置される例に限らず、保管庫２の上部空間や背後壁面などに設定されてよい。 In the case of the reporting device 3, a monitoring camera 31 as an imaging unit and a human sensor 32 as a person detection unit are arranged in the same direction as the storage door 21. The surveillance camera 31 is arranged so that a person approaching the storage 2 with the front of the storage door 21 as an imaging field of view can be imaged, and the human sensor 32 is a proximity position where the storage door 21 can be opened (for example, The human body 7 existing within 80 cm in front of the storage door is disposed so as to be detectable.
Note that the monitoring camera 31 and the human sensor 32 are not limited to being incorporated in the housing of the notification device 3, and can capture images of at least a person approaching the storage 2, and are close to the storage door 21. A monitoring camera 31 and a human sensor 32 may be separately installed in the upper space or rear wall surface of the storage 2 so that the human body 7 can be detected and connected to the notification device 3. In addition, the reporting device 3 is not limited to the example of being placed on the upper part of the storage 2 and may be set in the upper space of the storage 2 or the rear wall surface.

監視カメラ３１は、所定の撮影間隔（例えば０．２秒）毎に監視区域を撮像して監視画像としての画像データを生成して出力する。また、人感センサ３２は、検知範囲内で人体を検知しているか否かを識別可能に出力する。
通報装置３は、これら監視カメラ３１及び人感センサ３２から出力される情報を基に、人感センサ３２が検知状態となったときに画像データを参照して保管庫２の周辺に不審者が存在するか否かを判定する。 The monitoring camera 31 captures a monitoring area at every predetermined shooting interval (for example, 0.2 seconds), generates image data as a monitoring image, and outputs it. Further, the human sensor 32 outputs whether or not a human body is detected within the detection range so as to be identifiable.
Based on the information output from the monitoring camera 31 and the human sensor 32, the notification device 3 refers to the image data when the human sensor 32 is in a detection state, and a suspicious person is located around the storage 2. Determine if it exists.

本実施形態において、不審者とは、強盗など監視区域の保全を損うおそれのある者をいい、具体的には、外観が予め定めた特徴パターンに合致する者のことである。一般に、強盗行為などを行う不審者は、素性が認知されることを防ぐために顔を隠す傾向がある。そこで、本実施形態では、画像データにおける人物の特徴情報として、例えば、極端にうつむいたりサングラスやマスク、フルフェイスのヘルメット等を装着することで顔の一部分や全部分を隠して人相が分らない人物、即ち顔が十分に撮影されていない人物を不審者として判定する。 In this embodiment, a suspicious person refers to a person who may impair the maintenance of a monitored area such as a burglar, and specifically, a person whose appearance matches a predetermined feature pattern. In general, a suspicious person who performs a robbery or the like tends to hide his / her face in order to prevent recognition of the identity. Therefore, in the present embodiment, as the person's feature information in the image data, for example, the human face is hidden by partially covering all or part of the face by wearing sunglasses, a mask, a full face helmet, etc. A person, that is, a person whose face is not sufficiently photographed is determined as a suspicious person.

ここで、強盗などの不審者が監視区域に入場して保管庫２の収納物を持ち去ろうとする場合の行為態様について説明する。不審者が保管庫２の収納物を持ち去る行為態様として、大きく次の二つに類型化することができる。
第一に、不審者が保管庫２の解錠方法を持ち合わせている場合である。不審者が鍵や暗証番号など保管庫２の解錠方法を既に保有している場合、不審者は、監視区域の利用者を拘束して身動きを取れなくした上で、保管庫２に接近して自ら解錠し収納物を持ち去ることとなる。
第二に、不審者が保管庫２の解錠方法を持ち合わせていない場合である。不審者が保管庫２の解錠方法を有していない場合、不審者は、監視区域の利用者を刃物など凶器で脅して当該利用者に保管庫２を解錠させる。この場合、利用者が保管庫２を解錠する間、その後方などで不審者は利用者を監視している。 Here, an action mode when a suspicious person such as a robber enters the surveillance area and tries to take away the contents stored in the storage 2 will be described. As an action mode in which a suspicious person takes away the contents stored in the storage 2, it can be roughly classified into the following two types.
First, the suspicious person has the unlocking method of the storage 2. If the suspicious person already has the unlocking method of the vault 2 such as a key or a password, the suspicious person restrains the user in the surveillance area and cannot move, and then approaches the vault 2 Unlock and take away the stored items.
Second, the suspicious person does not have the unlocking method of the storage 2. When the suspicious person does not have the unlocking method of the storage 2, the suspicious person threatens the user in the monitoring area with a weapon such as a blade and causes the user to unlock the storage 2. In this case, while the user unlocks the storage 2, the suspicious person monitors the user behind it.

一般に、保管庫２を解錠しようとする人物は、保管庫２に接近し屈んで保管庫扉２１を解錠することとなるために、人物が保管庫２に接近したときに取得される画像データには人物が保管庫２の陰となり人物の特徴情報が含まれていない可能性がある。
このため、上述した第一の類型においては、人物が保管庫２に接近したときに取得される画像データから不審者が検出できず、非常事態を検知できない可能性があり、また第二の類型においては、人物が保管庫２に接近したときに取得される画像データには近接した利用者の身体の一部が大きく写りこんでしまい、その周辺に存在する不審者が検出できず、第一の類型と同様に非常事態を検知できない可能性がある。 In general, since a person who intends to unlock the storage 2 approaches the storage 2 and bends and unlocks the storage door 21, an image acquired when the person approaches the storage 2 There is a possibility that the person is behind the storage 2 and does not include the feature information of the person.
For this reason, in the first type described above, there is a possibility that a suspicious person cannot be detected from the image data acquired when a person approaches the storage 2 and an emergency situation cannot be detected. In the image data acquired when a person approaches the storage 2, a part of the user's body close to the image data is greatly reflected, and a suspicious person existing in the vicinity cannot be detected. Like the type of, there is a possibility that an emergency cannot be detected.

そこで、本実施形態で特徴的な事項として、通報装置３は、人感センサ３２が保管庫扉２１の近接位置に人体７を検知したときに、現時点よりも過去に取得されている画像データを用いて保管庫２の周辺に不審者が存在するか否かを判定する。上述した第一第二の何れの類型においても、保管庫扉２１の近接位置に人物が到達する前の画像データには、そこまで接近してくるときの人体が撮像されている可能性が高く、このような画像データを用いることで不審者の検出精度は向上する。そして、不審者が存在することが判定されると、通報装置３は、遠隔の監視センタ５に監視区域で非常事態が発生していることを示す非常信号を送信するとともに、不審者の検出に用いた画像データを監視センタ５に送信する。 Therefore, as a characteristic matter in the present embodiment, when the human sensor 32 detects the human body 7 at a position close to the storage door 21, the notification device 3 uses image data acquired in the past from the present time. It is used to determine whether or not there is a suspicious person around the storage 2. In any of the first and second types described above, the image data before the person reaches the close position of the storage door 21 has a high possibility that the human body when approaching the person is imaged. By using such image data, the detection accuracy of the suspicious person is improved. When it is determined that there is a suspicious person, the reporting device 3 transmits an emergency signal indicating that an emergency has occurred in the monitoring area to the remote monitoring center 5 and detects a suspicious person. The used image data is transmitted to the monitoring center 5.

監視センタ５は、警備会社などが運営するセンタ装置５１を備えた施設である。センタ装置５１は、１又は複数のコンピュータで構成されており、本発明に関連する監視センタの機能を実現する。監視センタ５では、センタ装置５１により各種機器が制御され、通報装置３から受信した非常信号を記録するとともに、通報装置３から送信される画像データをディスプレイ５２に表示することで、監視員が監視対象となる複数の監視区域を監視している。 The monitoring center 5 is a facility provided with a center device 51 operated by a security company or the like. The center device 51 is composed of one or a plurality of computers, and realizes a monitoring center function related to the present invention. In the monitoring center 5, various devices are controlled by the center device 51, the emergency signal received from the reporting device 3 is recorded, and the image data transmitted from the reporting device 3 is displayed on the display 52, so that the monitor can monitor. Monitors multiple target surveillance areas.

＜通報装置＞
次に、図２を用いて通報装置３の構成について説明する。図２は、通報装置３の構成を示すブロック図である。
通報装置３は、監視センタ５と通信可能に通信回線網６と接続されて、保管庫２の上部に固定載置されている。 <Notification device>
Next, the configuration of the notification device 3 will be described with reference to FIG. FIG. 2 is a block diagram illustrating a configuration of the notification device 3.
The reporting device 3 is connected to the communication network 6 so as to be communicable with the monitoring center 5, and is fixedly placed on the upper part of the storage 2.

通報装置３は、保管庫２前方を撮影する監視カメラ３１と、保管庫扉２１の近接位置に存在する人体を検知する人感センサ３２と、通信回線網６と接続される通信部３３と、ＨＤＤやメモリなどで構成される記憶部３４と、ＭＰＵやマイコンなどで構成され各部の制御を行う制御部３５とを有して概略構成される。 The reporting device 3 includes a monitoring camera 31 that captures the front of the storage 2, a human sensor 32 that detects a human body located in the vicinity of the storage door 21, a communication unit 33 connected to the communication network 6, The storage unit 34 configured by an HDD, a memory, and the like, and a control unit 35 configured by an MPU, a microcomputer, and the like for controlling each unit are schematically configured.

監視カメラ３１は、保管庫２前方を含む監視区域の監視画像を生成する。監視カメラ３１は、撮像素子から入力される画像信号を所定の撮影間隔（例えば０．２秒周期、すなわち５ｆｐｓ（フレーム／秒））でデジタル信号に変換し、圧縮符号化処理を行い所定の規格（例えばＪＰＥＧ規格）に準拠した画像データを生成する。生成された画像データは、制御部３５に出力される。 The monitoring camera 31 generates a monitoring image of a monitoring area including the front of the storage 2. The monitoring camera 31 converts an image signal input from the image sensor into a digital signal at a predetermined shooting interval (for example, a cycle of 0.2 seconds, that is, 5 fps (frame / second)), performs compression encoding processing, and performs a predetermined standard. Image data compliant with (for example, JPEG standard) is generated. The generated image data is output to the control unit 35.

人感センサ３２は、保管庫２の近接位置に存在する人体を検知するもので、本実施形態では、保管庫扉２１を開扉可能な近接位置（例えば保管庫扉前方８０ｃｍ以内）を検知範囲として、検知範囲に人体が存在するか否かを検知する。この保管庫扉２１を開扉可能な近接位置は、保管庫扉２１前方における一般的な人の腕から頭部までの距離として設定してよい。また、保管庫２１前方に設定する検知範囲は、人感センサ３２に対して水平または床面に向け所定の俯角が設定されるよう環境に応じて任意に設定されてよい。本実施形態では、人感センサ３２は、レーザ投受光型の測距センサ（ＰＳＤ）で構成され、投光した探査信号が検知範囲内で反射されるときに検知範囲に人体が存在すると判定する。人感センサ３２は、検知範囲内の人体検知の状態を接点情報として出力し、人体の検知状態になったときに検知信号を、人体の未検知状態となったときに未検知信号を各々出力する。
なお、人感センサは、これに限らず、周知のマットセンサや人体の熱線を検知する熱線センサ、その他近接センサなどにより実現されてよい。 The human sensor 32 detects a human body existing in the proximity position of the storage 2 and, in the present embodiment, a detection range of a proximity position (for example, within 80 cm in front of the storage door) where the storage door 21 can be opened. As described above, it is detected whether or not a human body exists in the detection range. The proximity position at which the storage door 21 can be opened may be set as a distance from a general person's arm to the head in front of the storage door 21. The detection range set in front of the storage 21 may be arbitrarily set according to the environment so that a predetermined depression angle is set toward the human sensor 32 horizontally or toward the floor. In the present embodiment, the human sensor 32 includes a laser light projecting / receiving distance measuring sensor (PSD), and determines that a human body exists in the detection range when the projected search signal is reflected within the detection range. . The human sensor 32 outputs the detection state of the human body within the detection range as contact information, and outputs a detection signal when the human body is detected and an undetected signal when the human body is not detected. To do.
The human sensor is not limited to this, and may be realized by a known mat sensor, a heat ray sensor that detects a heat ray of a human body, or other proximity sensors.

通信部３３は、通信回線網６を介してセンタ装置５１と接続されて監視センタ５との間で通信を行う。通信部３３は、制御部３５にて監視区域内に不審者が存在すると判定されると、自己のアドレス情報を含む非常信号および記憶部３４に記憶された画像データを監視センタ５に送信する。 The communication unit 33 is connected to the center device 51 via the communication line network 6 and communicates with the monitoring center 5. When the control unit 35 determines that there is a suspicious person in the monitoring area, the communication unit 33 transmits the emergency signal including its own address information and the image data stored in the storage unit 34 to the monitoring center 5.

記憶部３４は、ＲＯＭやＲＡＭ、又はＨＤＤにて構成され自己を特定するためのアドレス情報と各種プログラムなどを記憶しており、更に通報装置３を動作させるための各種情報を記憶する。具体的に、記憶部３４は、監視カメラ３１から入力される画像データを記憶する蓄積画像情報と、制御部３５にて決定される処理画像情報と、画像データより不審者が検出されたか否かを示す不審者フラグと、保管庫２の近接位置に人が滞留しているか否かを示す人フラグとを記憶している。 The storage unit 34 is configured by a ROM, a RAM, or an HDD, stores address information for identifying itself, various programs, and the like, and further stores various information for operating the reporting device 3. Specifically, the storage unit 34 determines whether or not a suspicious person has been detected from the accumulated image information for storing the image data input from the monitoring camera 31, the processed image information determined by the control unit 35, and the image data. And a person flag indicating whether or not a person is staying near the storage 2 is stored.

蓄積画像情報は、監視カメラ３１から入力される画像データを一時的に記録するためのリングバッファとして機能する。蓄積画像情報は、監視カメラ３１から入力される画像データを、撮像時刻の情報とともに所定フレーム数（例えば、１００枚）分だけ保持する。そして、蓄積画像情報は、保持された画像データのうち、最も古いものを新しく受信した画像データで上書きして、常に最新の画像データが所定フレーム数だけ保持される。蓄積画像情報に保持されるフレーム数は、人感センサ３２が人体を検知する直前の画像の数となるので、そのフレーム数は制御部３５で不審者検出処理を行う際に過去に遡る程度に応じて設定される。 The stored image information functions as a ring buffer for temporarily recording image data input from the monitoring camera 31. The stored image information holds image data input from the monitoring camera 31 for a predetermined number of frames (for example, 100 frames) together with information on the imaging time. In the stored image information, the oldest of the stored image data is overwritten with newly received image data, and the latest image data is always stored for a predetermined number of frames. Since the number of frames held in the accumulated image information is the number of images immediately before the human sensor 32 detects the human body, the number of frames is traced back to the past when the control unit 35 performs suspicious person detection processing. Set accordingly.

処理画像情報は、蓄積画像情報に記憶された画像データのうち、制御部３５により不審者検出の処理対象画像データとして決定された画像データを記憶する。上述したように、蓄積画像情報は、新規に取得される画像データで順次更新される上書き可能な情報であるため、処理画像情報では、処理対象画像データとして決定された画像データが上書きされないよう一時的に保持している。
なお、本実施形態では、蓄積画像情報と処理画像情報とを別々の記憶情報として説明するが、処理画像情報は蓄積画像情報のうち処理対象画像として決定された画像データを上書き禁止とするフラグ情報として記憶されていてもよい。 The processed image information stores the image data determined as processing target image data for suspicious person detection by the control unit 35 among the image data stored in the accumulated image information. As described above, since the accumulated image information is information that can be overwritten sequentially updated with newly acquired image data, the processed image information is temporarily stored so that the image data determined as the processing target image data is not overwritten. Is holding.
In the present embodiment, the accumulated image information and the processed image information are described as separate storage information. However, the processed image information is flag information that prohibits overwriting of image data determined as a processing target image in the accumulated image information. May be stored.

制御部３５は、ＣＰＵ、ＲＯＭ、ＲＡＭ等からなるマイクロコンピュータ及びその周辺回路で構成され、上述した各部を制御する。そのために、制御部３５は、このマイクロコンピュータ及びマイクロコンピュータ上で実行されるコンピュータプログラムによって実現される機能モジュールとして、監視カメラ３１から入力され保持している画像データから不審者検出を行う処理対象の画像データを決定する処理画像決定部３５１と、画像データから不審者を検出する不審者検出部３５２と、保管庫２の近接位置に人が滞留しているか否かを判定する滞留判定部３５３と、通信部３３から監視センタ５への通報を制御する通報制御部３５４と、を備えている。 The control unit 35 includes a microcomputer including a CPU, a ROM, a RAM, and the like and peripheral circuits thereof, and controls each unit described above. For this purpose, the control unit 35 is a processing module that performs suspicious person detection from image data input from the monitoring camera 31 and held as a functional module realized by the microcomputer and a computer program executed on the microcomputer. A processing image determination unit 351 that determines image data, a suspicious person detection unit 352 that detects a suspicious person from image data, and a stay determination unit 353 that determines whether or not a person is staying in the proximity of the storage 2 A notification control unit 354 that controls notification from the communication unit 33 to the monitoring center 5.

処理画像決定部３５１は、人感センサ３２が検知状態となり検知信号が入力されたときに、蓄積画像情報に保持されている画像データのうち不審者検出処理の対象とする画像データを決定する。具体的には、処理画像決定部３５１は、検知信号が入力されると、現時点より所定時間Ｔ１前から所定時間Ｔ２前（Ｔ１＞Ｔ２）までに取得された画像データを、不審者検出処理を行う処理対象画像データ（処理画像）として決定し、これら処理対象画像データを記憶部３４の処理画像情報に記憶する。例えば、処理画像決定部３５１は、検知信号が入力されると、現時点より１．８秒前から１秒前までに取得された画像データ（０．２秒毎に撮像している場合、９フレーム前から５フレーム前までの５フレーム）を処理対象画像データとして決定する。 The processed image determination unit 351 determines image data to be subjected to suspicious person detection processing from among the image data held in the accumulated image information when the human sensor 32 is in a detection state and a detection signal is input. Specifically, when a detection signal is input, the processed image determination unit 351 performs suspicious person detection processing on image data acquired from a predetermined time T1 to a predetermined time T2 before the current time (T1> T2). It determines as the process target image data (process image) to perform, and memorize | stores these process target image data in the process image information of the memory | storage part 34. FIG. For example, when the detection signal is input, the processed image determination unit 351 receives the image data acquired from 1.8 seconds before to 1 second before the current time (9 frames if captured every 0.2 seconds). 5 frames from the previous 5 frames) are determined as processing target image data.

この処理画像決定部３５１の処理は、人感センサ３２が検知した人物７が保管庫２に接近するまでの画像データを不審者検出処理の対象とすることを意味している。上述したように、人物が保管庫２に接近したときに取得される画像データでは人物が保管庫２の陰となって当該人物の特徴情報が含まれていない可能性がある。一方、図１に例示するように、保管庫２の近接位置で人物７を検知したときから一定時間前の画像データには、当該人物７の過去の像として、保管庫前に歩いて接近して来る人物７ａが撮像されている可能性が高い。そして、この人物７ａが保管庫前に歩いて接近して来るときの画像データには、人物７ａの顔部分を含む特徴情報が撮像されている可能性が高い。このため、処理画像決定部３５１は、人物が保管庫扉２１を解錠可能な位置に接近する直前（現時点から所定時間Ｔ２前まで）の画像データを除外して、それより以前の、人物が保管庫まで接近してくるときの画像データを不審者検出処理の対象として決定する。
なお、これに限らず、処理画像決定部３５１は、所定時間Ｔ１前から現時点までに取得された全ての画像データを処理対象画像データとして決定してよく、人物が接近する直前の画像データを処理対象から除外するか否かは不審者検出処理の処理負荷に応じて任意に設定されてよい。 The processing of the processed image determination unit 351 means that image data until the person 7 detected by the human sensor 32 approaches the storage 2 is targeted for suspicious person detection processing. As described above, in the image data acquired when a person approaches the storage 2, there is a possibility that the person is behind the storage 2 and does not include characteristic information of the person. On the other hand, as illustrated in FIG. 1, the image data of a predetermined time before the person 7 is detected at the close position of the storage 2 walks in front of the storage as a past image of the person 7. There is a high possibility that the incoming person 7a has been imaged. In the image data when the person 7a approaches by walking in front of the storage, there is a high possibility that the feature information including the face portion of the person 7a is captured. For this reason, the processing image determination unit 351 excludes image data immediately before the person approaches the position where the storage door 21 can be unlocked (from the current time to a time before the predetermined time T2), The image data when approaching the storage is determined as a target for suspicious person detection processing.
Not limited to this, the processed image determination unit 351 may determine all the image data acquired from the predetermined time T1 to the present time as the processing target image data, and processes the image data immediately before the person approaches. Whether or not to exclude the target may be arbitrarily set according to the processing load of the suspicious person detection process.

不審者検出部３５２は、人感センサ３２が検知状態になると起動して、処理画像情報に記憶された処理対象画像データを順次読み出して、不審者の画像特徴を有した人物が存在するか否かを判定する。不審者検出部３５２は、処理画像情報に記憶された全ての処理対象画像データについて不審者検出処理が終了すると、続いて、蓄積画像情報に記憶された、現時点で最新の画像データ（現在画像データ）を処理対象として読み出して、不審者の画像特徴を有した人物が存在するか否かを判定する。以後、不審者検出部３５２は、人感センサ３２が人を検知しなくなってから所定の遅延時間（例えば５秒）が経過するまで、処理対象の画像データについての不審者検出処理が終了すると、新たにその時点で最新となる現在画像データを処理対象として不審者検出処理を行うことを繰り返す。人感センサ３２が人を検知しなくなってから所定の遅延時間（例えば５秒）が経過すると、不審者検出部３５２は動作を終了する。 The suspicious person detection unit 352 is activated when the human sensor 32 enters a detection state, sequentially reads out the processing target image data stored in the processing image information, and whether or not there is a person having the image characteristics of the suspicious person. Determine whether. When the suspicious person detecting process is completed for all the processing target image data stored in the processed image information, the suspicious person detecting unit 352 continues to store the latest image data (current image data currently stored in the accumulated image information). ) As a processing target, and it is determined whether or not there is a person having image characteristics of a suspicious person. Thereafter, the suspicious person detection unit 352 ends the suspicious person detection process for the image data to be processed until a predetermined delay time (for example, 5 seconds) elapses after the human sensor 32 no longer detects a person. Repeating the suspicious person detection process with the newest current image data at that time as the processing target. When a predetermined delay time (for example, 5 seconds) elapses after the human sensor 32 no longer detects a person, the suspicious person detection unit 352 ends the operation.

人感センサ３２が未検知状態となった後、所定の遅延時間が経過するまで現在画像データについて不審者検出処理を行うことは、保管庫２前で収納物を取り出す作業をしていた人物が立ち去るときに取得された画像データについても不審者の検出を行うことを意味している。これにより、保管庫２に接近するまでの画像となる処理対象画像データから不審者が判別できない場合であっても、立ち去る際の現在画像データから不審者が存在するか否かを判別可能としている。
また、直前回の処理が終了した時点における最新の現在画像データのみを対象として不審者検出処理を行うことで、多数の人物が画像データに写りこんで処理時間が長くなる場合であっても、１フレーム処理する間に順次取得される画像データにより未処理の画像データが蓄積することを防止して負荷を軽減している。 Performing suspicious person detection processing on the current image data until the predetermined delay time has elapsed after the human sensor 32 is in the undetected state means that the person who has taken out the stored items in front of the storage 2 This means that the suspicious person is also detected for the image data acquired when leaving. This makes it possible to determine whether or not there is a suspicious person from the current image data at the time of leaving, even if the suspicious person cannot be determined from the processing target image data that becomes an image until approaching the storage 2. .
In addition, by performing suspicious person detection processing only for the latest current image data at the time when the previous processing is completed, even if a large number of people are reflected in the image data, the processing time becomes long. The load is reduced by preventing unprocessed image data from accumulating due to image data sequentially acquired during one frame processing.

次に、不審者検出部３５２による不審者検出処理について説明する。本実施形態では、不審者の画像特徴として、画像データに人相が判別可能な顔特徴部分となる各部位（目、鼻、口）を隠蔽している（顔の各部位が検出できない）人物が存在することを検出し、不審者の存在を判定する。不審者が存在すると判定すると不審者検出部３５２は記憶部３４の不審者フラグをＯＮにする。 Next, suspicious person detection processing by the suspicious person detection unit 352 will be described. In this embodiment, as image characteristics of a suspicious person, each part (eyes, nose, mouth) that is a facial feature part whose human phase can be identified is hidden in the image data (each part of the face cannot be detected) Is detected and the presence of a suspicious person is determined. If it is determined that there is a suspicious person, the suspicious person detection unit 352 turns on the suspicious person flag in the storage unit 34.

不審者検出部３５２は、顔領域において顔特徴部分を検出するための公知の様々な方法を用いることができる。具体的には、不審者検出部３５２は不審者検出処理として、過去に撮像された基準データ（無人時の画像データ）と処理対象の画像データとを比較して、輝度値の変動が所定以上であった変動画素を抽出するとともに、略連続した変動画素群を１つの変動領域としてグループ化し、各変動領域に固有のラベルでラベリングする。そして、ラベリングされた変動領域のエッジ成分を抽出し、エッジ画像データにおいて顔の輪郭形状に近似した楕円形状のエッジ分布を検出して、そのエッジ分布に囲まれた楕円領域内の色情報が、肌色（例えばＨＳＶ表色系において色相（Ｈ）成分が０から３０にある画素）を含む場合に当該楕円領域を顔領域として抽出する。そして、この顔領域内に、顔特徴部分となるエッジ（例えば、目、口などの水平エッジ）が現れているか否かを判定し、このような顔特徴部分が検出できない顔領域を不審者であると判定する。 The suspicious person detection unit 352 can use various known methods for detecting a facial feature in the face area. Specifically, as a suspicious person detection process, the suspicious person detection unit 352 compares reference data (image data when there is no person) captured in the past with image data to be processed, and a variation in luminance value exceeds a predetermined value. In addition to extracting the variation pixels that are, the group of substantially continuous variation pixels is grouped as one variation region, and each variation region is labeled with a unique label. Then, the edge component of the labeled fluctuation region is extracted, and an elliptical edge distribution approximate to the contour shape of the face is detected in the edge image data, and the color information in the elliptical region surrounded by the edge distribution is When the skin color (for example, a pixel having a hue (H) component from 0 to 30 in the HSV color system) is included, the elliptical area is extracted as a face area. Then, it is determined whether or not an edge (for example, a horizontal edge such as an eye or a mouth) that becomes a facial feature portion appears in the facial region, and a facial region where such a facial feature portion cannot be detected by a suspicious person. Judge that there is.

また、不審者検出部３５２は、顔領域の輝度分布からサングラス及びマスクを装着した顔領域を検出する。サングラスとマスクを装着した顔領域は、上方に暗い画素が集中するため縦方向の輝度重心が中心より低い位置となる。また、横方向に見たライン毎の輝度値が小さくなるのに対し縦方向に見たライン毎の輝度値の分散は大きい。さらに、サングラスの部分により輝度値が極端に低いという性質がある。そこで、顔領域の輝度重心のＹ座標が顔領域の中心より下方にあり、更に、Ｘ方向の標準偏差とＹ方向の標準偏差の比が所定しきい値より大きく、更に、輝度値の低い画素の割合がしきい値以上となる場合に、この顔領域内の画像はサングラスとマスクを装着した顔の画像であると判定して、当該顔領域を不審者であると判定する。
不審者検出処理は、これに限らず人物の外観または行動が予め設定した不審パターンに合致することを判定できればよい。 In addition, the suspicious person detection unit 352 detects a face area in which sunglasses and a mask are worn from the luminance distribution of the face area. In the face area where the sunglasses and the mask are worn, dark pixels concentrate on the upper side, so that the luminance center of gravity in the vertical direction is lower than the center. Further, the luminance value for each line viewed in the horizontal direction is small, whereas the variance of the luminance value for each line viewed in the vertical direction is large. Furthermore, there is a property that the luminance value is extremely low depending on the part of the sunglasses. Therefore, the Y coordinate of the luminance center of gravity of the face area is below the center of the face area, and the ratio between the standard deviation in the X direction and the standard deviation in the Y direction is larger than a predetermined threshold, and the pixel having a low luminance value Is equal to or greater than the threshold value, it is determined that the image in the face area is an image of a face wearing sunglasses and a mask, and the face area is determined to be a suspicious person.
The suspicious person detection process is not limited to this, and it is only necessary to determine that the appearance or behavior of a person matches a preset suspicious pattern.

滞留判定部３５３は、人感センサ３２の出力に基づき保管庫扉２１を開扉可能な近接位置に人が継続して存在する（滞留）か否かを判定する。保管庫扉２１を解錠して収納物を取り出す作業を一瞬で完結することは困難であるため、通常は保管庫２前で一定時間の作業を必要とする。そこで、滞留判定部３５３は、人感センサ２１から検知信号を受けると計時を開始し、所定時間（例えば２秒）継続して人の存在を検知しているとき、即ち検知信号の入力から所定時間が経過しても未検知信号が入力されないとき、保管庫扉２１を開扉可能な近接位置に人が継続して存在すると判定して記憶部３４の人フラグをＯＮする。また、滞留判定部３５３は、人感センサ２１から未検知信号を受信すると人が存在しないと判定して記憶部３４の人フラグをＯＦＦする。
ここで、人フラグは、保管庫２の近接位置に人が滞留しているか否かを示すフラグ情報である。通報装置３の起動時は初期状態としてフラグＯＦＦであり、滞留判定部３５３が保管庫扉２１の近接位置に人の滞留を判定するとＯＮされ、滞留していないと判定するとＯＦＦされる。 Based on the output of the human sensor 32, the stay determination unit 353 determines whether or not a person is continuously present (stay) at a close position where the storage door 21 can be opened. Since it is difficult to complete the work of unlocking the storage door 21 and taking out the stored items in an instant, it usually requires work for a certain time in front of the storage 2. Therefore, when the stay determination unit 353 receives a detection signal from the human sensor 21, the stay determination unit 353 starts counting time and continuously detects a person's presence for a predetermined time (for example, 2 seconds), that is, from the input of the detection signal. If the undetected signal is not input even after a lapse of time, it is determined that a person is continuously present in the proximity position where the storage door 21 can be opened, and the person flag in the storage unit 34 is turned ON. Further, when the stay determination unit 353 receives a non-detection signal from the human sensor 21, it determines that there is no person and turns off the person flag in the storage unit 34.
Here, the person flag is flag information indicating whether or not a person is staying in the proximity position of the storage 2. When the reporting device 3 is activated, the flag is OFF as an initial state, and is turned on when the stay determination unit 353 determines that a person is staying in the vicinity of the storage door 21, and is turned OFF when it is determined that the person is not staying.

通報制御部３５４は、遠隔の監視センタ５への通報処理を制御する。通報制御部３５４は、人感センサ２１が検知状態になり不審者検出部３５２が動作を開始してから終了するまでの間に、不審者検出部３５２が不審者の存在を判定し、滞留判定部３５３が保管庫２の近接位置に人が滞留していると判定するという二つの条件が満たされると、自己のアドレス情報を含む非常信号を生成し、不審者検出部３５２が不審者の存在を判定した画像データを付して通信部３３に出力し、通信部３３より監視センタ５に送信する。
なお、これに限らず、通報制御部３５４では、不審者検出部３５２が不審者の存在を判定したことだけを条件として通報処理を行うようにしてよく、滞留判定部３５３による滞留の判定を条件とするか否かは監視区域の環境に応じて任意に設定してよい。 The notification control unit 354 controls notification processing to the remote monitoring center 5. The notification control unit 354 determines whether or not the suspicious person detection unit 352 determines the presence of the suspicious person between the time when the human sensor 21 enters the detection state and the time when the suspicious person detection unit 352 starts operation and ends. When the two conditions that the part 353 determines that a person is staying at the close position of the storage 2 are satisfied, an emergency signal including its own address information is generated, and the suspicious person detecting part 352 has the presence of the suspicious person. Is output to the communication unit 33, and transmitted from the communication unit 33 to the monitoring center 5.
Not limited to this, the notification control unit 354 may be configured to perform notification processing only on the condition that the suspicious person detection unit 352 determines the presence of the suspicious person. Whether or not to be set may be arbitrarily set according to the environment of the monitoring area.

＜動作の説明＞
以上のように構成された通報システム１について、図面を参照してその動作を説明する。ここでは、主として通報装置３に関する動作について説明する。まず、図３を用いて通報装置３の動作の概要について説明する。図３は通報装置３の動作を模式的に示したタイミングチャートである。 <Description of operation>
About the notification system 1 comprised as mentioned above, the operation | movement is demonstrated with reference to drawings. Here, the operation related to the reporting device 3 will be mainly described. First, the outline | summary of operation | movement of the notification apparatus 3 is demonstrated using FIG. FIG. 3 is a timing chart schematically showing the operation of the reporting device 3.

図３（ａ）に示すように、監視カメラ３１により所定間隔（例えば０．２秒）ごとに画像データが取得され、記憶部３４の蓄積画像情報に記憶されている。ここで図３（ｂ）に示すように、人感センサ３２が保管庫扉２１を開扉可能な近接位置に人体７を検知すると（図中ｔ）、制御部３５に検知信号が入力され、処理画像決定部３５１は、図３（ｃ）に示すように現時点より所定時間Ｔ１前から所定時間Ｔ２前まで（例えば１．８秒前から１秒前まで）に取得された画像データを、不審者検出処理を行う処理対象画像データとして決定し、記憶部３４の処理画像情報に記憶する。 As shown in FIG. 3A, image data is acquired by the monitoring camera 31 at predetermined intervals (for example, 0.2 seconds) and stored in the accumulated image information in the storage unit 34. Here, as shown in FIG. 3B, when the human sensor 32 detects the human body 7 at a close position where the storage door 21 can be opened (t in the figure), a detection signal is input to the control unit 35, As shown in FIG. 3C, the processed image determination unit 351 suspiciously acquires image data acquired from a current time before a predetermined time T1 to a predetermined time T2 (for example, from 1.8 seconds to 1 second before). Is determined as processing target image data to be subjected to person detection processing, and stored in the processing image information of the storage unit 34.

人感センサ３２が人体を検知すると、図３（ｄ）に示すように、不審者検出部３５２が起動して、図３（ｅ）に示すように、処理画像情報に記憶された処理対象画像データを古い順に順次読み出して、図３（ｆ）に示すように、順次読み出した画像データについて不審者検出処理を行う。処理画像情報に記憶された全ての処理対象画像データについて不審者検出処理が終了すると（図中ｔｂ）、図３（ｅ）に示すように、直前回の不審者検出処理が終了した時点で最新となる画像データ（現在画像データ）を蓄積画像情報より読み出して、この読み出した画像データについて不審者検出処理を行う。以後、不審者検出部３５２は、不審者検出処理が終了すると、その時点で最新となる画像データを蓄積画像情報より読み出して、不審者検出処理を行うことを繰り返す。この一連の不審者検出処理の何れかにおいて、不審者の存在が検出されたときに、不審者検出部３５２は記憶部３４の不審者フラグをＯＮにする。また、人感センサ３２が人体の未検知状態となると（図中ｔｃ）、制御部３５に未検知信号が入力され、不審者検出部３５２は、遅延時間（例えば５秒）の計時を開始し、遅延時間が経過すると動作を終了する（図中ｔｄ）。このとき、記憶部３４の不審者フラグはＯＦＦに初期化される。 When the human sensor 32 detects a human body, the suspicious person detection unit 352 is activated as shown in FIG. 3D, and the processing target image stored in the processing image information as shown in FIG. Data is read out in order from the oldest, and the suspicious person detection process is performed on the sequentially read out image data as shown in FIG. When the suspicious person detection process is completed for all the processing target image data stored in the processed image information (tb in the figure), as shown in FIG. 3E, the latest suspicious person detection process is completed when the previous suspicious person detection process is completed. Image data (current image data) is read from the stored image information, and the suspicious person detection process is performed on the read image data. Thereafter, when the suspicious person detection process ends, the suspicious person detection unit 352 repeatedly reads out the latest image data from the accumulated image information and performs the suspicious person detection process. In any of the series of suspicious person detection processes, when the presence of a suspicious person is detected, the suspicious person detecting unit 352 turns on the suspicious person flag in the storage unit 34. In addition, when the human sensor 32 is in an undetected state of the human body (tc in the figure), an undetected signal is input to the control unit 35, and the suspicious person detecting unit 352 starts measuring a delay time (for example, 5 seconds). When the delay time elapses, the operation ends (td in the figure). At this time, the suspicious person flag in the storage unit 34 is initialized to OFF.

図３（ｇ）に示すように、人感センサ３２の検知状態が所定時間継続すると（例えば２秒）、滞留判定部３５３が保管庫扉２１を開扉可能な近接位置に人が継続して存在すると判定して（図中ｔａ）、人フラグをＯＮにする。また、人感センサ３２が未検知となると、滞留判定部３５３は人が存在しないと判定して（図中ｔｃ）、人フラグをＯＦＦにする。
通報制御部３５４は、不審者検出部３５２が動作を開始して（図中ｔ）から終了するまで（図中ｔｄ）の間に、図３（ｆ）に示す不審者検出処理で不審者フラグがＯＮとなるという条件と、図３（ｇ）に示す滞留判定部３５３が人フラグをＯＮとするという条件とが満たされたことを判定すると、何れか遅い方の条件が成立したときに監視センタ５に非常信号を送信する。 As shown in FIG. 3G, when the detection state of the human sensor 32 continues for a predetermined time (for example, 2 seconds), the person continues to a proximity position where the stay determination unit 353 can open the storage door 21. It is determined that it exists (ta in the figure), and the person flag is turned ON. When the human sensor 32 is not detected, the stay determination unit 353 determines that there is no person (tc in the figure), and turns off the person flag.
The notification control unit 354 starts the operation of the suspicious person detection unit 352 (t in the figure) and ends (td in the figure) until the suspicious person flag is displayed in the suspicious person detection process shown in FIG. If the condition that the flag is ON and the condition that the retention determination unit 353 shown in FIG. 3G satisfies the condition that the person flag is set to ON are satisfied, whichever of the later conditions is satisfied is monitored. An emergency signal is transmitted to the center 5.

次に、図４を用いて、図３の（ｃ）から（ｆ）に示した処理画像決定部３５１及び不審者検出部３５２による不審者監視動作処理について説明する。図４は、通報装置３の制御部３５にて繰り返し実行される監視プログラムの動作を示すフローチャートである。
通報装置３は、所定周期（例えば０．２秒周期、すなわち５ｆｐｓ（フレーム／秒））ごとに監視カメラ３１が撮像した画像データの入力を受け付けて記憶部３４の蓄積画像情報に記憶する。そして、人感センサ３２が、保管庫扉２１に近接する人体７を検知して検知信号が入力されると（ステップＳＴ１−Ｙｅｓ）、処理画像決定部３５１は、図３（ｃ）に示すように、蓄積画像情報に記憶された画像データのうち現時点より過去に取得された画像データを処理対象画像データとして決定し、記憶部３４の処理画像情報に記憶する（ステップＳＴ２）。 Next, the suspicious person monitoring operation process by the processing image determination unit 351 and the suspicious person detection unit 352 shown in FIGS. 3C to 3F will be described with reference to FIG. FIG. 4 is a flowchart showing the operation of the monitoring program repeatedly executed by the control unit 35 of the reporting device 3.
The notification device 3 accepts input of image data captured by the monitoring camera 31 at a predetermined cycle (for example, a cycle of 0.2 seconds, that is, 5 fps (frame / second)) and stores it in the accumulated image information of the storage unit 34. When the human sensor 32 detects the human body 7 in proximity to the storage door 21 and a detection signal is input (step ST1-Yes), the processed image determination unit 351 is as shown in FIG. Then, image data acquired in the past from the present time among the image data stored in the accumulated image information is determined as processing target image data, and stored in the processed image information in the storage unit 34 (step ST2).

不審者検出部３５２は、人感センサ３２が人体を検知しなくなったことを示す未検知信号が入力されなければ（ステップＳＴ３−Ｎｏ）、図３（ｅ）に示すように記憶部３４の処理画像情報から処理対象画像データを読み出して（ステップ４）、当該画像データについて不審者検出処理を実行する（ステップＳＴ５）。かかる不審者検出処理では、不審者の画像特徴として、読み出した画像データに人相が判別可能な顔特徴部分となる各部位（目、鼻、口）を隠蔽している（顔の各部位が検出できない）人物を不審者として検出する。不審者検出処理において処理対象の画像データから不審者が検出されると、不審者検出部３５２は記憶部３４の不審者フラグをＯＮする。 If the undetected signal indicating that the human sensor 32 no longer detects the human body is not input to the suspicious person detection unit 352 (step ST3-No), the process of the storage unit 34 is performed as illustrated in FIG. The processing target image data is read from the image information (step 4), and a suspicious person detection process is executed for the image data (step ST5). In the suspicious person detection process, as the image characteristics of the suspicious person, each part (eyes, nose, mouth) that is a facial feature part that can distinguish the human phase is concealed in the read image data (each part of the face is hidden). A person who cannot be detected is detected as a suspicious person. When a suspicious person is detected from the image data to be processed in the suspicious person detection process, the suspicious person detection unit 352 turns on the suspicious person flag in the storage unit 34.

読み出した画像データについて不審者検出処理が終了すると、全ての処理対象画像データについて不審者検出処理が終了したか判定し（ステップＳＴ６）、未処理の処理対象画像データがあれば（ステップＳＴ６−Ｎｏ）、ステップＳＴ３に処理を戻す。そして、未検知信号の入力がなければ、未処理の処理対象画像データを読み出して不審者検出処理を実行する処理を繰り返す（ステップＳＴ３からＳＴ６）。 When the suspicious person detection processing is completed for the read image data, it is determined whether the suspicious person detection processing is completed for all the processing target image data (step ST6), and if there is unprocessed processing target image data (step ST6-No). ), The process returns to step ST3. If no undetected signal is input, the process of reading the unprocessed processing target image data and executing the suspicious person detection process is repeated (steps ST3 to ST6).

ここで、ステップＳＴ３において、人感センサ３２が人体を検知しなくなったことを示す未検知信号が入力されると（ステップＳＴ３−Ｙｅｓ）、不審者検出部３５２は、所定の遅延時間（例えば５秒）を計時する遅延時間タイマを起動し（ステップＳＴ７）、全ての処理対象画像データについて不審者検出処理が終了するまで、未処理の処理対象画像データを読み出して（ステップＳＴ８）、不審者検出処理を実行する（ステップＳＴ９）。 When an undetected signal indicating that the human sensor 32 no longer detects a human body is input in step ST3 (step ST3-Yes), the suspicious person detecting unit 352 has a predetermined delay time (for example, 5). A delay time timer is started (step ST7), and unprocessed processing target image data is read out for all processing target image data until the suspicious person detection processing is completed (step ST8). Processing is executed (step ST9).

ステップＳＴ８からＳＴ１０の処理で全ての処理対象画像データについて不審者検出処理が終了すると（ステップＳＴ１０−Ｙｅｓ）、不審者検出部３５２は、遅延時間タイマが遅延時間経過を計時しているか否か判定し、遅延時間経過が計時されていると（ステップＳＴ１１−Ｙｅｓ）、通報装置３は記憶部３４の不審者フラグをＯＦＦに初期化して、不審者監視動作処理を終了する。また、遅延時間経過が計時されていなければ（ステップＳＴ１１−Ｎｏ）、処理をステップＳＴ１６へと進める。 When the suspicious person detection process is completed for all the processing target image data in the processes of steps ST8 to ST10 (step ST10-Yes), the suspicious person detection unit 352 determines whether or not the delay time timer has timed the elapsed delay time. When the delay time has elapsed (step ST11-Yes), the reporting device 3 initializes the suspicious person flag in the storage unit 34 to OFF and ends the suspicious person monitoring operation process. If the delay time has not elapsed (step ST11-No), the process proceeds to step ST16.

一方、ステップＳＴ３において未検知信号の入力がなく（人感センサが検知状態）、全ての処理対象画像データについて不審者検出処理が終了すると（ステップＳＴ６−Ｙｅｓ）、不審者検出部３５２は、処理をステップＳＴ１２に進める。そして、未検知信号が入力されなければ（ステップＳＴ１２−Ｎｏ）、不審者検出部３５２は、図３中ｔｂに示すように、蓄積画像情報から最新の画像データを読み出して（ステップＳＴ１３）、不審者検出処理を実行して（ステップＳＴ１４）、処理をステップＳＴ１２へと戻す。このように、不審者検出部３５２は、処理画像決定部３５１が決定した過去の画像データである処理対象画像データについての不審者検出処理が終了すると、未検知信号が入力されるまで、直前回の不審者検出処理が終了した時点における最新の画像データ（現在画像データ）について不審者が存在するか否かを監視する。 On the other hand, when no undetected signal is input in step ST3 (the human sensor is in a detection state) and the suspicious person detection processing is completed for all the processing target image data (step ST6-Yes), the suspicious person detecting unit 352 performs processing. Is advanced to step ST12. If no undetected signal is input (step ST12-No), the suspicious person detecting unit 352 reads the latest image data from the accumulated image information (step ST13), as indicated by tb in FIG. A person detection process is executed (step ST14), and the process returns to step ST12. As described above, when the suspicious person detection process for the processing target image data, which is the past image data determined by the processing image determination unit 351, is completed, the suspicious person detection unit 352 immediately before the undetected signal is input. Whether or not there is a suspicious person is monitored for the latest image data (current image data) at the time when the suspicious person detection process ends.

ここで、ステップＳＴ１２において、人感センサ３２から未検知信号が入力されると（ステップＳＴ１２−Ｙｅｓ）、図３中ｔｃに示すように、不審者検出部３５２は、所定の遅延時間タイマ（例えば５秒）を起動して（ステップＳＴ１５）、蓄積画像情報から最新の画像データ（現在画像データ）を読み出して（ステップＳＴ１６）、不審者検出処理を実行する（ステップＳＴ１７）。そして、遅延時間タイマが遅延時間経過を計時していなければ（ステップＳＴ１８−Ｎｏ）、処理をステップＳＴ１６へと戻し、遅延時間が経過するまで、直前回の不審者検出処理が終了した時点における最新の画像データ（現在画像データ）について不審者が存在するか否かを監視する。遅延時間経過が計時されると（ステップＳＴ１８−Ｙｅｓ）、即ち保管庫扉２１に近接する人体７が検知されなくなってから遅延時間が経過すると、通報装置３は記憶部３４の不審者フラグをＯＦＦに初期化して、不審者監視動作処理を終了する。 Here, when an undetected signal is input from the human sensor 32 in step ST12 (step ST12-Yes), as shown by tc in FIG. 3, the suspicious person detecting unit 352 has a predetermined delay time timer (for example, 5 seconds) is started (step ST15), the latest image data (current image data) is read from the stored image information (step ST16), and a suspicious person detection process is executed (step ST17). If the delay time timer has not timed the elapsed delay time (step ST18-No), the process returns to step ST16, and the latest suspicious person detection process at the time when the previous suspicious person detection process is completed until the delay time elapses. It is monitored whether or not there is a suspicious person in the image data (current image data). When the delay time elapses (step ST18-Yes), that is, when the delay time elapses after the human body 7 close to the storage door 21 is not detected, the reporting device 3 turns off the suspicious person flag in the storage unit 34. And the suspicious person monitoring operation process is terminated.

以上のように、通報装置３は、人感センサ３２が保管庫扉２１を開扉可能な近接位置に人体７を検知すると、当該人体７の検知時点よりも過去となる、保管庫２前まで接近してくる人体７ａが撮像されている可能性のある画像データについて不審者が存在するか否か判定し、その後、最新の画像データについて不審者が存在するか否か判定する。そして、何れかの画像データについて顔が十分に撮影されていない不審者が検出されたときに不審者フラグをＯＮとする。また、図３（ｇ）に示すように、保管庫扉２１を開扉可能な近接位置に人体７が所定時間（例えば２秒）継続して存在すると、滞留判定部が人フラグをＯＮとする。通報制御部３５４は、これら不審者フラグ及び滞留フラグが何れもＯＮになると、通信部３３より遠隔の監視センタ５に非常信号を送信する。 As described above, when the human sensor 7 detects the human body 7 in a proximity position where the human sensor 32 can open the storage door 21, the notification device 3 is in the past from the time of detection of the human body 7 and before the storage 2. It is determined whether or not there is a suspicious person for image data in which the approaching human body 7a may be imaged, and then it is determined whether or not there is a suspicious person for the latest image data. When a suspicious person whose face is not sufficiently photographed is detected for any image data, the suspicious person flag is turned ON. Further, as shown in FIG. 3G, when the human body 7 is continuously present for a predetermined time (for example, 2 seconds) at a proximity position where the storage door 21 can be opened, the stay determination unit sets the human flag to ON. . When both the suspicious person flag and the stay flag are turned ON, the notification control unit 354 transmits an emergency signal from the communication unit 33 to the remote monitoring center 5.

以上、本発明の実施の形態を例示により説明したが、本発明の範囲はこれらに限定されるものではなく、請求項に記載された範囲内において目的に応じて変更・変形することが可能である。 The embodiments of the present invention have been described above by way of example, but the scope of the present invention is not limited to these embodiments, and can be changed or modified according to the purpose within the scope of the claims. is there.

１通報システム
２保管庫
２１保管庫扉
３通報装置
３１監視カメラ
３２人感センサ
３３通信部
３４記憶部
３５制御部
３５１処理画像決定部
３５２不審者検出部
３５３滞留判定部
３５４通報制御部
５監視センタ
５１センタ装置
５２ディスプレイ
６通信回線網
７保管庫に近接した人物
７ａ保管庫の近接位置まで近づく人物

DESCRIPTION OF SYMBOLS 1 Notification system 2 Storage 21 Storage door 3 Notification apparatus 31 Monitoring camera 32 Human sensor 33 Communication part 34 Memory | storage part 35 Control part 351 Process image determination part 352 Suspicious person detection part 353 Stay determination part 354 Notification control part 5 Monitoring center 51 Center device 52 Display 6 Communication network 7 Person close to storage 7a Person approaching close position of storage

Claims

保管庫が設置された監視空間において不審者を検出して通報する通報装置であって、
前記保管庫の近接位置に人物の存在を検知する人物検知部と、
周期的に前記監視空間を撮像して監視画像を取得する撮像部と、
前記撮像部が取得する監視画像を記憶する記憶部と、
前記人物検知部による前記人物検知時から第一の所定時間前以降に取得された監視画像を処理画像として決定する処理画像決定部と、
前記処理画像について顔が十分に撮影されていない不審者を検出する不審者検出部と、
を備えることを特徴とした通報装置。
A reporting device that detects and reports a suspicious person in a monitoring space where a vault is installed,
A person detection unit for detecting the presence of a person in the proximity of the storage;
An imaging unit that periodically images the monitoring space to obtain a monitoring image;
A storage unit for storing a monitoring image acquired by the imaging unit;
A processing image determination unit that determines, as a processing image, a monitoring image acquired after a first predetermined time from the time of detection of the person by the person detection unit;
A suspicious person detection unit for detecting a suspicious person whose face is not sufficiently photographed with respect to the processed image;
A notification device characterized by comprising:

前記処理画像決定部は、前記人物検知時から第一の所定時間前以降で、且つ前記第一の所定時間より短い第二の所定時間前までに取得された監視画像を処理画像として決定する請求項１に記載した通報装置。
The processing image determination unit determines, as a processing image, a monitoring image acquired after the first predetermined time from the time of the person detection and before a second predetermined time shorter than the first predetermined time. The reporting device according to Item 1.

前記不審者検出部は、前記処理画像決定部が決定した処理画像について不審者を検出する処理が終了すると、不審者を検出する処理が終了した時点で最新となる前記監視画像について前記不審者を検出する処理を行う請求項１または２に記載した通報装置。
When the process for detecting a suspicious person is completed for the processed image determined by the processed image determination unit, the suspicious person detecting unit detects the suspicious person for the monitoring image that is the latest when the process for detecting the suspicious person is completed. The notification device according to claim 1 or 2, wherein a notification process is performed.

前記不審者検出部は、前記人物検知部が前記人物の存在を検知しなくなってから第三の所定時間が経過するまで前記不審者を検出する処理を行う請求項３に記載した通報装置。
The notification device according to claim 3, wherein the suspicious person detection unit performs a process of detecting the suspicious person until a third predetermined time elapses after the person detection unit no longer detects the presence of the person.