JP5204707B2 - Image monitoring device - Google Patents
Image monitoring device Download PDFInfo
- Publication number
- JP5204707B2 JP5204707B2 JP2009080913A JP2009080913A JP5204707B2 JP 5204707 B2 JP5204707 B2 JP 5204707B2 JP 2009080913 A JP2009080913 A JP 2009080913A JP 2009080913 A JP2009080913 A JP 2009080913A JP 5204707 B2 JP5204707 B2 JP 5204707B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- monitoring
- transmission
- monitoring center
- abnormality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012806 monitoring device Methods 0.000 title description 2
- 238000012544 monitoring process Methods 0.000 claims description 132
- 230000005540 biological transmission Effects 0.000 claims description 117
- 230000005856 abnormality Effects 0.000 claims description 67
- 238000004891 communication Methods 0.000 claims description 62
- 238000001514 detection method Methods 0.000 claims description 40
- 230000002159 abnormal effect Effects 0.000 claims description 18
- 238000000034 method Methods 0.000 claims description 18
- 230000008569 process Effects 0.000 claims description 15
- 238000009825 accumulation Methods 0.000 claims description 9
- 230000004044 response Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 description 8
- 230000005236 sound signal Effects 0.000 description 8
- 238000001454 recorded image Methods 0.000 description 5
- 230000007423 decrease Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000007704 transition Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
- Alarm Systems (AREA)
Description
本発明は、所定周期で撮影された記録画像を通信網を介して監視センタへ伝送する画像監視装置に関する。 The present invention relates to an image monitoring apparatus that transmits recorded images taken at a predetermined cycle to a monitoring center via a communication network.
監視領域を監視センタから監視する遠隔画像監視システムは、監視領域側に監視カメラを備えた画像監視装置を設置し、監視領域を撮影した記録画像や現在の画像を画像監視装置から公衆通信網を介して監視センタに伝送し、異常発生時の監視領域の状況を監視センタにて確認可能とする。 In a remote image monitoring system that monitors a monitoring area from a monitoring center, an image monitoring apparatus having a monitoring camera is installed on the monitoring area side, and a recorded image obtained by photographing the monitoring area and a current image are transmitted from the image monitoring apparatus to the public communication network. To the monitoring center so that the status of the monitoring area when an abnormality occurs can be confirmed by the monitoring center.
監視の目的からは監視領域の状況を迅速かつ正確に把握することが求められ、そのために監視センタにおいて、記録画像に基づいて実時間と同様の速度、つまり、撮影時の時間経過と同様の速度での動画表示(実時間再生)が求められる。しかし、インターネット網などの通信速度が保証されていない公衆通信網を利用して画像伝送を行う場合、伝送経路での通信混雑などに起因して伝送遅延が生じ、監視センタでの画像の受信間隔が監視カメラでの実際の撮影間隔より長くなり得る。このため、監視センタでの実時間再生ができず、監視員の迅速かつ正確な状況把握に支障を来す可能性がある。 For the purpose of monitoring, it is required to grasp the situation of the monitoring area quickly and accurately. For this purpose, the monitoring center uses the same speed as the real time based on the recorded image, that is, the same speed as the time elapsed during shooting. Video display (real-time playback) is required. However, when image transmission is performed using a public communication network such as the Internet network where the communication speed is not guaranteed, transmission delay occurs due to communication congestion in the transmission path, and the image reception interval at the monitoring center. May be longer than the actual shooting interval of the surveillance camera. For this reason, real-time reproduction cannot be performed at the monitoring center, and there is a possibility that it will hinder the monitoring staff from quickly and accurately grasping the situation.
この対応策として、画像の伝送時間に応じて送信側で画像をフレーム単位で間引いて送信し、受信側で間引き画像による実時間再生を行うシステムが提案されている。 As a countermeasure, a system has been proposed in which an image is thinned out in units of frames on the transmission side according to the transmission time of the image, and real-time reproduction is performed on the reception side using the thinned image.
画像監視装置は、監視センタの監視員からの要求に応じて、監視領域の記録画像や現在の画像及び音声を監視センタへ伝送する。また、異常事象の検知時には、その際の画像を発報画像として、異常通報と共に画像監視装置から監視センタへ送信する。 The image monitoring apparatus transmits the recorded image of the monitoring area, the current image, and the sound to the monitoring center in response to a request from the monitoring center monitor. When an abnormal event is detected, the image at that time is transmitted as a notification image together with the abnormality notification from the image monitoring apparatus to the monitoring center.
画像監視装置から伝送された画像等の情報の利用目的には、監視領域の状況や事象の推移の把握や、異常発生の要因特定などが存在する。例えば、監視領域の状況や事象の推移の把握には画像を上述した実時間再生とすることが好適である。 The purpose of using information such as images transmitted from the image monitoring apparatus includes grasping the status of the monitoring area and the transition of events, and identifying the cause of occurrence of an abnormality. For example, it is preferable to reproduce the image in real time as described above for grasping the situation of the monitoring area and the transition of the event.
一方、異常発生の要因特定を目的とする場合に、実時間再生とすると、間引かれて送信されなかった画像に監視上の重要な像や動きが記録されている可能性がある。そのため、常に実時間再生とすると、却って、監視員の正確な状況把握に支障を来す場合があるという問題があった。 On the other hand, if the purpose is to identify the cause of the occurrence of an abnormality, and if real-time playback is performed, there is a possibility that important images and movements for monitoring are recorded on images that have been thinned out and not transmitted. For this reason, there has been a problem that, if real-time playback is always performed, it may interfere with the accurate situation of the observer.
本発明は、上記問題点を解決するためになされたものであり、監視センタでの利用目的に応じて画像等の伝送を好適な態様で行うことができる画像監視装置を提供することを目的とする。 The present invention has been made to solve the above-described problems, and an object of the present invention is to provide an image monitoring apparatus capable of transmitting an image or the like in a suitable manner according to the purpose of use in the monitoring center. To do.
本発明に係る画像監視装置は、監視区域に発生した所定の異常事象を検出し、通信網を介して接続された監視センタへ異常通報を行うものであって、所定周期で前記監視区域を撮影した画像を取得する画像取得部と、時系列に従って複数フレームの前記画像を記憶する記憶部と、前記監視センタへ前記異常通報及び前記画像の送信を行う通信部と、を有し、前記通信部は、前記異常通報の際に、前記異常事象の検出時に対して予め設定されている通報時注目期間に取得された前記画像の全フレームを前記監視センタへ送信する通報時送信動作と、前記通報時送信動作以外で前記記憶部に記憶された蓄積画像を前記監視センタへ送信する際に、前記通信網の伝送速度に応じてフレームレートを変化させて前記蓄積画像を送信する非通報時送信動作と、を行う。例えば、異常通報を受けて、監視センタの監視員は送信対象撮影期間を指定して蓄積画像の伝送を画像監視装置に要求することができ、画像監視装置は当該要求に対して非通報時送信動作を行う。 An image monitoring apparatus according to the present invention detects a predetermined abnormal event that has occurred in a monitoring area and reports the abnormality to a monitoring center connected via a communication network, and images the monitoring area at a predetermined cycle. An image acquisition unit that acquires the image, a storage unit that stores the image of a plurality of frames according to time series, and a communication unit that transmits the abnormality report and the image to the monitoring center, and the communication unit A notification-time transmission operation for transmitting all frames of the image acquired in the notice period of interest set in advance for the detection of the abnormal event to the monitoring center at the time of the abnormality notification, and the notification When transmitting the stored image stored in the storage unit to the monitoring center other than the time transmission operation, the non-reporting transmission operation transmits the stored image by changing the frame rate according to the transmission speed of the communication network. And, it performs. For example, in response to an abnormality report, the monitoring staff at the monitoring center can request the image monitoring apparatus to transmit the stored image by designating the transmission target shooting period, and the image monitoring apparatus transmits the request when not reporting Perform the action.
本発明に係る画像監視装置は、さらに、前記記憶部に記憶された前記蓄積画像を古いものから順に、新たに取得される前記画像で上書き記録する更新処理を継続し、前記異常事象が検出されると、その時点から前記蓄積画像の一部が更新される所定時間経過後に前記更新処理を停止することで、前記異常事象の検出前後にわたる所定の蓄積対象期間に取得された前記画像を記録する制御部をさらに有し、前記通報時注目期間は、前記蓄積対象期間の一部であって前記異常事象の検出前後にわたって設定される。例えば、通報時注目期間は、異常事象の発生から検出までのタイムラグや、検出の要因の特定が可能であることなどを考慮して定めることができる。通報時注目期間は、検出目的の異常事象に応じて異なるが、基本的には比較的短い時間に設定される。 The image monitoring apparatus according to the present invention further continues update processing for overwriting and recording the accumulated image stored in the storage unit with the newly acquired image in order from the oldest, and the abnormal event is detected. Then, the image acquired during a predetermined accumulation target period before and after the detection of the abnormal event is recorded by stopping the updating process after a predetermined time elapses when a part of the accumulated image is updated from that time. The report-related attention period is a part of the accumulation target period and is set before and after the detection of the abnormal event. For example, the notice period at the time of reporting can be determined in consideration of the time lag from the occurrence of an abnormal event to the detection, the fact that the detection factor can be specified, and the like. The notice period at the time of notification varies depending on the abnormal event for the detection purpose, but is basically set to a relatively short time.
他の本発明に係る画像監視装置は、前記監視区域の音声を取得する音声取得部をさらに有し、前記通信部が、前記画像の送信動作の間、当該送信動作中に連続して取得される前記音声を固定の送信レートで前記監視センタへ送信するものである。 Another image monitoring apparatus according to the present invention further includes a sound acquisition unit that acquires sound of the monitoring area, and the communication unit is continuously acquired during the transmission operation during the image transmission operation. The voice is transmitted to the monitoring center at a fixed transmission rate.
別の本発明に係る画像監視装置は、監視区域に発生した所定の異常事象を検出し、通信網を介して接続された監視センタへ異常通報を行うものであって、所定周期で前記監視区域を撮影した画像を取得する画像取得部と、時系列に従って複数フレームの前記画像を記憶する記憶部と、前記監視区域の音声を取得する音声取得部と、前記監視センタへ前記異常通報並びに、前記画像及び前記音声の送信を行う通信部と、を有し、前記通信部は、前記異常通報の際に、現在取得されている前記音声を前記監視センタへ送信しつつ、前記異常事象の検出時に対して予め設定されている通報時注目期間に取得された前記画像の全フレームを前記監視センタへ送信する通報時送信動作と、前記通報時送信動作で前記記憶部に記憶された蓄積画像を前記監視センタへ送信する際に、現在取得されている前記音声を前記監視センタへ送信しつつ前記蓄積画像を送信する動作であって、前記通信網の伝送速度が所定の閾値未満のときには前記蓄積画像の送信を中断して前記音声のみ送信する非通報時送信動作と、を行う。 Another image monitoring apparatus according to the present invention detects a predetermined abnormal event occurring in a monitoring area, and reports the abnormality to a monitoring center connected via a communication network. An image acquisition unit for acquiring an image obtained by photographing, a storage unit for storing the images of a plurality of frames according to time series, an audio acquisition unit for acquiring audio of the monitoring area, the abnormality report to the monitoring center, and the A communication unit that transmits the image and the sound, and the communication unit transmits the currently acquired sound to the monitoring center and detects the abnormal event when the abnormality is reported. In contrast, a transmission operation at the time of transmitting all the frames of the image acquired during the notice period of interest set in advance to the monitoring center, and the stored image stored in the storage unit by the transmission operation at the time of notification are described above. Supervisor An operation of transmitting the stored image while transmitting the currently acquired voice to the monitoring center when transmitting to the center, and when the transmission speed of the communication network is less than a predetermined threshold, A non-reporting transmission operation in which transmission is interrupted and only the voice is transmitted is performed.
本発明によれば、異常通報の際は、異常発生要因が撮影される可能性が高い異常検出時に対応した通報時注目期間内の全画像を前記監視センタへ送信するので、監視員は異常発生時の状況把握が容易となる。一方、異常通報時以外においては、監視センタでの実時間再生が実現されるように画像が伝送され、監視領域の状況や事象の推移の把握が容易となる。また、画像と併せて伝送される監視領域の音声は、通信網の伝送速度にかかわらず、間欠・中断されずに再生され、監視領域の状況や事象の推移についての音声による把握が容易となる。 According to the present invention, when an abnormality is reported, all the images within the noticed period of time corresponding to the abnormality detected when the abnormality occurrence factor is likely to be captured are transmitted to the monitoring center. It becomes easy to grasp the situation at the time. On the other hand, at times other than when an abnormality is reported, an image is transmitted so that real-time reproduction at the monitoring center is realized, and it becomes easy to grasp the status of the monitoring area and the transition of the event. In addition, the audio of the monitoring area transmitted together with the image is played back without being interrupted or interrupted regardless of the transmission speed of the communication network, and it is easy to grasp the situation of the monitoring area and the transition of the event by voice. .
以下、本発明の実施の形態(以下実施形態という)について、図面に基づいて説明する。 Hereinafter, embodiments of the present invention (hereinafter referred to as embodiments) will be described with reference to the drawings.
図1は、実施形態に係る監視システムの概略の構成を示す模式図である。当該監視システムは本発明に係る画像監視装置である監視カメラ装置2を有する。監視カメラ装置2は、監視領域が設けられる建物に配置される。本監視システムは当該監視カメラ装置2と、これと公衆通信網4を介して通信可能な監視センタ6とからなる。監視カメラ装置2は、監視カメラ10、集音マイク12、侵入センサ14及び監視主装置16を備える。
FIG. 1 is a schematic diagram illustrating a schematic configuration of a monitoring system according to an embodiment. The monitoring system includes a
本監視システムは、監視カメラ10で監視領域を撮影し、監視領域への人の侵入や危険などの異常の発生を監視する。監視カメラ10で撮影された画像は、公衆通信網4を介して監視センタ6へ伝送される。撮影された画像は、リアルタイムで監視センタ6へ伝送することもできるし、監視主装置16にて記録・蓄積し、監視センタ6からの要求に応じて蓄積画像を伝送することもできる。監視センタ6では、監視員が監視カメラ装置2からの異常通報や画像等に基づいて監視領域を遠隔監視する。
The monitoring system captures a monitoring area with the
監視カメラ10は、監視領域を撮影可能な位置に設置され、所定周期で監視領域を撮影し画像を取得する。例えば、監視カメラ10は、1秒当たり5フレーム(5fps)の画像を撮影する。
The
集音マイク12は、監視領域の音声を検出する。
The
侵入センサ14は、監視領域への人の侵入を自動検知する。例えば、侵入センサ14は、建物の窓や扉が開けられたことを検知して検知信号を発報する開閉センサや、監視領域内の人体が発する赤外線を検知して検知信号を発報する空間センサなどである。
The
監視カメラ装置2は、警戒セットモードと警戒解除モードという2つの監視モードを有する。警戒セットモードは、監視領域が設定される部屋や建物から利用者が退出し無人となる状態にて選択・設定される。警戒セットモードでは、侵入センサ14の出力に基づいた侵入者の自動検知が行われる。一方、警戒解除モードは、監視領域に利用者が存在し得る状態にて選択・設定され、当該モードでは侵入センサ14は停止され、又はその侵入検知信号が無効とされる。
The
監視主装置16は、制御部20、記憶部22、画像信号入力部24、音声信号入力部26、検知信号入力部28、モード設定部30及び通信部32を含む。
The monitoring
制御部20は、マイクロプロセッサ(MPU)等を用いて構成され、実行されるプログラムに応じて、監視カメラ装置2の各部の動作を制御する。例えば、制御部20は、異常判定手段34、記録制御手段36、通信制御手段38として機能する。
The
異常判定手段34は、侵入センサ14からの検知信号に基づいて、監視対象とする異常事象の発生を判定する。監視カメラ装置2が警戒セットモードに設定されている場合には、異常判定手段34は、侵入センサ14から侵入検知信号が入力されると異常発生と判定する。
The
記録制御手段36は、記憶部22に記憶されている画像を古いものから順に、新たに取得される画像で上書きする更新処理(以下、FIFO方式の更新処理と称する。)を行い、異常判定手段34が異常を検知すると当該更新処理を停止する。
The
通信制御手段38は、異常判定手段34が異常発生と判定した場合に、通信部32を制御して監視センタ6へ異常通報信号を送信する。また、異常通報信号に続けて、異常検知前後の画像(発報画像)も送信する。通信制御手段38は、監視センタ6から蓄積画像の伝送要求を受けると、記憶部22に蓄積された画像のうち、伝送要求にて指定された期間のものを、公衆通信網4の伝送速度に応じてフレームレートを変化させて監視センタ6へ送信する。通信制御手段38及び通信部32が本発明の通信部に相当する。
The
記憶部22はメモリからなり、監視カメラ10が撮影した画像を記憶・蓄積する。記憶部22への蓄積は監視動作中、上述のように制御部20によりFIFO方式で継続されるため、記憶部22に用いられる記録媒体には、長時間の使用や頻繁なアクセスに耐えることが求められる。この点、メモリは例えば、ハードディスクなどと比べると耐久性・信頼性が高く、当該要求を満たす。一方、メモリは、ハードディスクと比べると高価であるため、監視カメラ装置2に記憶部22として搭載されるメモリの容量は一般的にはそれほど大きくは設定されない。例えば、記憶部22は、500フレームの画像を記憶できるように設計されている。
The
画像信号入力部24は、監視カメラ10から撮影画像の画像信号を監視主装置16に取り込むインターフェース回路であり、監視カメラ10と有線又は無線で接続される。例えば、画像信号入力部24はフレームメモリを備え、監視カメラ10から入力された画像信号を、制御部20による処理が行われるまで保持することができる。画像信号入力部24が本発明の画像取得部に相当する。なお、監視カメラ10を含めて本発明の画像取得部としてもよい。
The image
音声信号入力部26は、集音マイク12が出力する音声信号を監視主装置16に取り込むインターフェース回路であり、集音マイク12と有線又は無線で接続される。音声信号入力部26は集音マイク12からの音声信号をA/D変換し、またADPCM(Adaptive Differential Pulse Code Modulation:適応的差分パルス符号変調)方式で32kbpsに圧縮する。音声信号入力部26が本発明の音声取得部に相当する。なお、集音マイク12を含めて本発明の音声取得部としてもよい。
The audio
検知信号入力部28は、侵入センサ14が出力する検知信号を監視主装置16に取り込むインターフェース回路であり、侵入センサ14と有線又は無線で接続される。
The detection
モード設定部30は、上述の2つの監視モードを選択的に制御部20に設定する手段であり、利用者が監視モードを選択する操作手段を含む。例えば、利用者はスイッチやボタンなどの操作、キーやICカードによる操作、暗証番号の入力などによって監視モードを選択し、モード設定部30は選択された監視モードを示す信号を制御部20へ出力する。
The
通信部32は監視センタ6との通信インターフェースである。
The
監視センタ6は、制御部40、センタ通信部42、表示部44及び操作部46を有する。
The
制御部40はMPU等を用いて構成され、実行されるプログラムに応じて監視センタ6の各部の動作を制御する。
The
センタ通信部42は監視カメラ装置2との通信インターフェースである。
The
表示部44は液晶ディスプレイ等の画像表示手段であり、監視カメラ装置2から伝送された画像や後述する遅延予測情報を表示する。表示部44の表示は、監視員が異常発生を確認するために利用される。
The
操作部46は、監視員が各種の設定、情報、指示等を制御部40に入力する手段であり、例えば、キーボード、ポインティングデバイス、ボタンなどである。
The
次に、監視カメラ装置2における画像蓄積動作について説明する。図2は監視主装置16の動作を説明する概略のフロー図である。制御部20は、異常検知されない間は、侵入センサ14の出力に基づいて異常発生の有無を監視する処理(S5)と、監視カメラ10から画像信号入力部24を介して入力される画像信号の有無を監視する処理(S10)とを継続する。例えば、制御部20は、警戒セットモードにおいて、侵入センサ14が発報する侵入検知信号の受信を監視する(処理S5)。そして、侵入検知信号が受信されず異常が検知されない場合には(S5における「No」の場合)、次フレームの画像が監視カメラ10から入力されているかを判定する(S10)。監視カメラ10からまだ次フレームの画像信号が得られていない場合には(S10における「No」の場合)、処理S5に戻る。このように制御部20は処理S5,S10からなるループを繰り返して、侵入検知信号の受信(S5における「Yes」の場合)と次の画像の入力(S10における「Yes」の場合)とを待つ。
Next, an image accumulation operation in the
監視カメラ10から次フレームの画像信号が得られた場合には(S10における「Yes」の場合)、その画像信号を記憶部22に格納する(S15)。画像の格納後は処理S5に戻る。 When the image signal of the next frame is obtained from the monitoring camera 10 (in the case of “Yes” in S10), the image signal is stored in the storage unit 22 (S15). After the image is stored, the process returns to step S5.
記憶部22は上述のように500フレームの画像を記憶する領域を有している。図3は、記憶部22への画像の蓄積の仕方を説明する模式図である。同図は、当該領域を識別する記憶フレーム番号“n”(nは1〜500の自然数)と、当該領域に格納される画像の撮影時刻Tとの対応関係を表しており、或る時点にて異常検知されたことに伴って画像蓄積が停止された状態の例を示している。制御部20は、新たな画像に記憶フレーム番号順で記憶領域を割り当てる。記憶フレーム番号が一巡した後は、記憶部22に記憶される画像はFIFO方式で更新される。つまり、記憶フレーム番号nを用い、500フレームの記憶領域をリングバッファ方式で利用し、撮影時刻が最も古い画像が記憶された記憶領域を最新の画像で順次上書き記憶していき、常時直近500フレーム分の画像を蓄積しておく。例えば、直前の画像を記憶フレーム番号n=kの領域に格納した場合、次に格納する画像には、n=k+1の領域が割り当てられ、直近画像をn=500の領域に格納した場合には、次の画像に割り当てられる領域はn=1の領域に戻る。
The
図3において時刻Tは、監視カメラ10が撮影した画像のフレーム数で表しており、時刻Tが1ずつ増加する毎に記憶領域が割り当てられることを示している。すなわち、監視カメラ10が撮影する各フレームが順次、記憶部22に格納される。
In FIG. 3, the time T is represented by the number of frames of the image captured by the monitoring
検知信号の受信により異常検知した場合には(S5における「Yes」の場合)、制御部20は、通信部32を介して監視センタ6へ異常を通報する(S20)。また、異常検知後も所定数の画像を蓄積する(S25〜S35)。例えば、制御部20は、異常検知後、100フレームの画像を記憶部22に蓄積する。具体的には、制御部20は、次フレームの画像が監視カメラ10から入力されたかを監視し(S25)、入力されていれば、その画像を記憶部22に記録する(S30)。この画像入力監視(S25)及び画像の記録(S30)は異常検知後、100フレームの画像を蓄積するまで繰り返され(S35における「No」)、100フレーム蓄積すると(S35における「Yes」)記憶部22への画像の記録を停止し(S40)、異常検知前後の画像を記憶部22に保持させる。ちなみに、図3は、時刻T=tの画像の記録後、異常検知がなされ画像蓄積が停止された状態を示している。この図が示すように、異常検知前の画像としてT=t−399からT=tまでの400フレームの各画像が記憶部22に蓄積され、異常検知後の画像としてT=t+1からT=t+100まで100フレームの各画像が記憶部22に蓄積される。すなわち、検知前80秒間及び検知後20秒間の画像が5fpsで記憶部22に蓄積される。
When an abnormality is detected by receiving the detection signal (“Yes” in S5), the
次に、監視カメラ装置2が異常検知を監視センタ6へ通報する際の送信処理(通報時送信動作)を説明する。図4は、当該動作を説明する概略のフロー図である。
Next, a transmission process (transmission operation at the time of notification) when the
監視カメラ装置2において、制御部20は、侵入センサ14からの検知信号を受信すると異常判定手段34により異常を検知し、通信制御手段38により通信部32を制御して、監視センタ6へ異常通報信号を送信して異常を通報する(S50)と共に、現音声の送信を開始する(S55)。また、侵入センサ14からの異常検知の発報前後の記録画像(蓄積画像)を発報画像として送信する(S60,S65)。
In the
発報画像に対応する撮影期間(通報時注目期間)は、侵入検知に対して予め設定されている固定の期間である。当該期間は、侵入の発生から侵入センサ14が検出するまでの時間や侵入センサ14の検出から侵入者が監視カメラ10の撮影範囲に現れるまでの時間などを考慮して、侵入として検知された要因となる事象が画像に好適に捉えられるように設定することができる。また、監視センタ6では、発報画像に基づいて、発報の原因となった事象が真に侵入であるか否かを判定する。例えば、監視センタ6では、監視員が発報画像をコマ送りさせたり、発報画像に含まれるフレームを逐一選択しながら、画像を確認して発報原因を調べる。これらの観点から、通報時注目期間は、監視員が迅速かつ正確に発報原因の特定を行うことができるように設定される。特に、侵入センサ14の検出範囲を監視カメラ10の画角が包含している場合は、異常検知時及びその直前や直後に侵入センサ14の検出対象が写されているはずである。よって、監視員は、異常検知前後の短時間の画像を詳細に確認することが望まれる。本実施形態では、異常検知の2秒前から異常検知の1秒後までに設定され、T=t−10からT=t+5までの16フレームの画像が発報画像とされる。
The shooting period corresponding to the notification image (notice period during notification) is a fixed period set in advance for intrusion detection. This period is a factor that is detected as an intrusion in consideration of the time from the occurrence of an intrusion until the
発報画像の送信は古いものから1フレームずつ順番に行われ(S60)、通報時注目期間内に取得された16フレームの送信が完了するまで継続される(S65)。この発報画像の送信は、公衆通信網4の伝送速度(送信ビットレート)が低下した状態となっても、間引かずに全フレームを送信する。以上が本来の通報時送信動作であり、当該動作は監視センタ6からの要求によってではなく、監視カメラ装置2が異常を検知すると自動的に実行する。この発報画像により、監視センタ6は、異常発生要因の特定のための詳細な情報を得ることができる。
Transmission of the notification image is performed one frame at a time from the oldest (S60), and continues until transmission of 16 frames acquired within the notice period at the time of notification is completed (S65). In the transmission of the notification image, even if the transmission speed (transmission bit rate) of the
本実施形態では監視カメラ装置2は、上述の本来の通報時送信動作の完了に引き続いて、監視カメラ10から入力される現画像の送信動作(S70〜S80)を開始する。当該動作では、現在送信している画像の送信が完了すると(S80における「Yes」の場合)、その時点で画像信号入力部24に入力されている画像を次の送信対象とする(S70)。ここで、通信部32は、公衆通信網4を介し監視センタ6との通信速度を随時監視しており、公衆通信網4が伝送可能な速度に応じて送出するビットレートを調節し、ロスパケットの発生を抑制している。その結果、伝送速度が低下すると、1フレームの現画像の伝送時間τrが長くなる。つまり、現画像の送信動作では、伝送速度によって送信フレームレートは上下し、伝送速度が低下するほど多くのフレームが間引かれた画像が監視センタ6に送られる。
In this embodiment, the
現画像の送信動作は送信停止要求がなされるまで継続される(S75)。送信停止要求は例えば、監視センタ6から公衆通信網4を介して監視カメラ装置2へ送られる。通信制御手段38は、現画像の送信中において(S80における「No」の場合)、送信停止要求の有無を監視する(S75)。そして、送信停止要求があった場合(S75における「Yes」の場合)、現画像の送信を停止すると共に、発報画像の送信と共に開始された現音声の送信処理(S55)も停止する(S85)。
The transmission operation of the current image is continued until a transmission stop request is made (S75). The transmission stop request is sent from the
以上の動作において、監視センタ6では、センタ通信部42が監視カメラ装置2からの異常通報信号、現音声、及び発報画像又は現画像を受信すると、制御部40はそれらを表示部44に表示する。発報画像の各フレームは、例えば、表示部44の画面に設定される表示領域(ウィンドウ)にて、監視員が選択可能に表示され、監視員はそれらの任意のフレームを選択して異常発生の要因を精査できる。また、現画像は別の表示領域に、新たなフレームが受信される毎に更新して表示され、監視領域のリアルタイムの動画が表示される。監視員は、表示部44に表示された異常通報、発報画像、現画像から監視領域での異常発生及び状況を把握することができる。
In the above operation, in the
監視員は、より正確な状況判断等のために、記憶部22の蓄積画像を観察したい場合には、その伝送を求める操作を行うことができる。制御部40は、蓄積画像の撮影期間のうち伝送対象とする期間を指定可能とする。監視員は操作部46を操作して、伝送を求める期間(送信対象撮影期間)の始点及び終点、又は始点のみを設定し、設定された送信対象撮影期間の情報は蓄積画像要求に指定され、監視カメラ装置2へ送信される。蓄積画像の要求時に送信対象撮影期間の始点のみ指定した場合には、蓄積画像の記録停止時点が終点となる。なお、監視員は、蓄積画像の送信中の任意のタイミングにて送信停止要求を行って送信対象撮影期間の終点を指定できる。
When the monitor wants to observe the stored image in the
例えば、このように監視センタ6からの要求を受けた場合など、監視カメラ装置2は、異常検知の通報時の動作以外の期間にも、随時、現画像や蓄積画像を送信する動作(非通報時送信動作)を行うことができる。図5は、監視カメラ装置2の非通報時送信動作を説明する概略のフロー図であり、監視センタ6から蓄積画像要求を受けた場合を表している。この非通報時送信動作では、送信対象撮影期間の蓄積画像を送信する際に、公衆通信網4の伝送速度と蓄積画像のフレームレートとの関係に応じて間引き処理を行ってフレームレートを変化させる。
For example, when receiving a request from the
監視カメラ装置2において、制御部20は、監視センタ6からの蓄積画像要求を受けると(S100)、現音声の送信を開始する(S105)と共に、送信対象撮影期間にて記録された画像の送信を開始する(S110)。
In the
通信制御手段38は、例えば、送信対象撮影期間の最初の画像を送信すると共に(S110)、その伝送時間τrを計測し、蓄積画像の記録間隔(ここでは0.2秒)と比較して伝送遅延の有無を判定する(S115)。伝送遅延がなければ(S115において「No」の場合)、間引き処理は行われず、先行送信画像の次の撮影時刻に取得された画像を送信する(S120)。伝送遅延がある場合は(S115において「Yes」の場合)、間引き処理により伝送時間τrだけ後に取得された画像を次の送信画像として選択し(S125)、当該選択画像を送信する(S130)。 For example, the communication control means 38 transmits the first image of the transmission target shooting period (S110), measures its transmission time τr, and transmits it compared with the recording interval of the stored image (here, 0.2 seconds). It is determined whether or not there is a delay (S115). If there is no transmission delay (in the case of “No” in S115), the thinning process is not performed, and the image acquired at the shooting time next to the preceding transmission image is transmitted (S120). If there is a transmission delay (in the case of “Yes” in S115), the image acquired after the transmission time τr by the thinning process is selected as the next transmission image (S125), and the selected image is transmitted (S130).
処理S120,S130の画像送信においても伝送時間τrが計測される。そして、送信を停止させる要求を監視センタ6から受けておらず(S135における「No」の場合)、かつまだ送信対象撮影期間内である場合(S140において「No」の場合)、処理S115からの処理が繰り返される。 The transmission time τr is also measured in the image transmission in steps S120 and S130. If a request to stop transmission has not been received from the monitoring center 6 (in the case of “No” in S135) and is still within the transmission target imaging period (in the case of “No” in S140), the processing from the process S115 is performed. The process is repeated.
一方、送信対象撮影期間が終了した場合(S140において「Yes」の場合)や、当該期間の途中であっても監視センタ6から蓄積画像の送信停止要求や現画像の送信要求を受けた場合(S135において「Yes」の場合)には、記録画像及び現音声の送信処理を停止する(S145)。
On the other hand, when the transmission target shooting period ends (in the case of “Yes” in S140), or when a transmission stop request for the stored image or a transmission request for the current image is received from the
上述のように非通報時送信動作では、通信制御手段38は、監視センタ6にて撮影時と同様の一様な時間経過の動画再生が可能なように、伝送遅延を考慮して蓄積画像を間引き処理しながら順次、監視センタ6へ送信する。具体的には、通信制御手段38は、先行する画像の送信時に計測した伝送時間τrを蓄積画像の撮影間隔τsと比較して、τr≦τsの場合は伝送遅延はないとして、直近に送信した蓄積画像(先行送信画像)の次に撮影された蓄積画像を送信する。これに対して、τr>τsの場合は伝送遅延があったことになる。この場合は、先行送信画像と次に送信される画像(後続送信画像)との撮影時刻の間隔が先行送信画像の伝送時間に応じた値となるように、先行送信画像と後続送信画像との間の送信間隔を空けて、その間のフレームを間引いて画像を送信する。これにより、監視員は蓄積画像に現れる事象を撮影時と同様の速度で観察することができ、当該事象の把握が容易となる。
As described above, in the non-reporting transmission operation, the communication control means 38 takes the transmission delay into consideration so that the
なお、監視員は間引き処理された蓄積画像の観察から、詳細確認が必要な時間帯を特定することができ、監視カメラ装置2は監視センタ6からの要求に応じて当該時間帯の蓄積画像を間引き処理せず送信するように構成することができる。
The monitoring staff can identify the time zone that requires detailed confirmation from the observation of the accumulated image that has been subjected to the thinning process, and the
通報時送信動作及び非通報時送信動作では、画像の送信と並行して現音声を監視センタ6へ送信している。この現音声は、公衆通信網4の伝送速度にかかわらず、間欠・中断されずに送信レートを固定して送信される。すなわち、例えば、蓄積画像の送信が間引かれて行われる場合でも、監視センタ6では現音声を連続してモニタすることができ、音声により監視領域の現在の状況把握が可能となる。監視カメラ装置2は、公衆通信網4の伝送速度が低下すると、送信する蓄積画像のフレーム間隔を拡大させるが、伝送速度が予め設定した閾値未満となると、蓄積画像の送信を中断し、現音声の送信を優先させる。これにより、伝送速度が極めて低下した場合であっても、少なくとも音声にて現場のリアルタイムな状況確認を行える。
In the reporting operation and the non-reporting transmission operation, the current voice is transmitted to the
上述の実施形態では、監視カメラ10にて0.2秒毎に画像を撮影し、その画像信号を監視主装置16に送信する構成としたが、監視カメラ10からは例えばNTSC方式(29.97fps)の映像信号を出力させ、画像信号入力部24にて0.2秒毎に画像を切り出してフレームメモリに格納し、また当該フレームメモリに格納した画像を記憶部22に記録する構成としてもよい。
In the above-described embodiment, the monitoring
2 監視カメラ装置、4 公衆通信網、6 監視センタ、10 監視カメラ、12 集音マイク、14 侵入センサ、16 監視主装置、20 制御部、22 記憶部、24 画像信号入力部、26 音声信号入力部、28 検知信号入力部、30 モード設定部、32 通信部、34 異常判定手段、36 記録制御手段、38 通信制御手段、40 制御部、42 センタ通信部、44 表示部、46 操作部。
2 monitoring camera device, 4 public communication network, 6 monitoring center, 10 monitoring camera, 12 sound collecting microphone, 14 intrusion sensor, 16 monitoring main device, 20 control unit, 22 storage unit, 24 image signal input unit, 26
Claims (4)
所定周期で前記監視区域を撮影した画像を取得する画像取得部と、
時系列に従って複数フレームの前記画像を記憶する記憶部と、
前記監視センタへ前記異常通報及び前記画像の送信を行う通信部と、
を有し、
前記通信部は、
前記異常通報の際に、前記異常事象の検出時を含む通報時注目期間に取得された画像である発報画像の全フレームを前記監視センタへ自動的に送信する通報時送信動作と、
前記異常通報に対して前記監視センタから画像送信要求を受けた際に、前記通信網の伝送速度に応じてフレームレートを変化させて前記記憶部に記憶された蓄積画像を前記監視センタへ送信する非通報時送信動作と、
を行うことを特徴とする画像監視装置。 In an image monitoring apparatus that detects a predetermined abnormal event that occurs in a monitoring area and reports an abnormality to a monitoring center connected via a communication network,
An image acquisition unit for acquiring an image of the monitoring area taken at a predetermined period;
A storage unit for storing the images of a plurality of frames according to a time series;
A communication unit for transmitting the abnormality report and the image to the monitoring center;
Have
The communication unit is
In the case of the abnormality report, a transmission operation at the time of automatically transmitting all frames of a notification image that is an image acquired in a notice period at the time of notification including the detection of the abnormal event, to the monitoring center;
When an image transmission request is received from the monitoring center in response to the abnormality report, the accumulated image stored in the storage unit is transmitted to the monitoring center by changing the frame rate according to the transmission speed of the communication network. Non-report transmission operation,
An image monitoring apparatus characterized by
前記記憶部に記憶された前記蓄積画像を古いものから順に、新たに取得される前記画像で上書き記録する更新処理を継続し、前記異常事象が検出されると、その時点から前記蓄積画像の一部が更新される所定時間経過後に前記更新処理を停止することで、前記異常事象の検出前後にわたる所定の蓄積対象期間に取得された前記画像を記録する制御部をさらに有し、
前記通報時注目期間は、前記蓄積対象期間の一部であって前記異常事象の検出前後にわたって設定されること、
を特徴とする画像監視装置。 The image monitoring apparatus according to claim 1,
The update process of overwriting and recording the accumulated image stored in the storage unit with the newly acquired image in order from the oldest one is continued, and when the abnormal event is detected, one of the accumulated images is A control unit that records the image acquired in a predetermined accumulation target period before and after the detection of the abnormal event by stopping the update process after a predetermined time when the unit is updated;
The notice period at the time of notification is a part of the accumulation target period and is set before and after the detection of the abnormal event,
An image monitoring apparatus characterized by the above.
前記監視区域の音声を取得する音声取得部をさらに有し、
前記通信部は、前記画像の送信動作の間、当該送信動作中に連続して取得される前記音声を固定の送信レートで前記監視センタへ送信すること、
を特徴とする画像監視装置。 In the image monitoring apparatus according to claim 1 or 2,
A voice acquisition unit that acquires voice of the monitoring area;
The communication unit transmits the sound continuously acquired during the transmission operation to the monitoring center at a fixed transmission rate during the image transmission operation;
An image monitoring apparatus characterized by the above.
所定周期で前記監視区域を撮影した画像を取得する画像取得部と、
時系列に従って複数フレームの前記画像を記憶する記憶部と、
前記監視区域の音声を取得する音声取得部と、
前記監視センタへ前記異常通報並びに、前記画像及び前記音声の送信を行う通信部と、
を有し、
前記通信部は、
前記異常通報の際に、現在取得されている前記音声を前記監視センタへ送信しつつ、前記異常事象の検出時を含む通報時注目期間に取得された画像である発報画像の全フレームを前記監視センタへ自動的に送信する通報時送信動作と、
前記異常通報に対して前記監視センタから画像送信要求を受けた際に、現在取得されている前記音声を前記監視センタへ送信しつつ前記蓄積画像を送信する動作であって、前記通信網の伝送速度が所定の閾値未満のときには前記記憶部に記憶された蓄積画像の送信を中断して前記音声のみ送信する非通報時送信動作と、
を行うことを特徴とする画像監視装置。 In an image monitoring apparatus that detects a predetermined abnormal event that occurs in a monitoring area and reports an abnormality to a monitoring center connected via a communication network,
An image acquisition unit for acquiring an image of the monitoring area taken at a predetermined period;
A storage unit for storing the images of a plurality of frames according to a time series;
An audio acquisition unit for acquiring audio of the monitoring area;
A communication unit for transmitting the abnormality report and the image and the sound to the monitoring center;
Have
The communication unit is
In the case of the abnormality notification, while transmitting the currently acquired voice to the monitoring center, all frames of the notification image that is an image acquired during the notification attention period including the detection of the abnormal event Sending operation at the time of notification automatically sent to the monitoring center,
An operation of transmitting the stored image while transmitting the currently acquired voice to the monitoring center when an image transmission request is received from the monitoring center in response to the abnormality report, and transmission of the communication network Non-reporting transmission operation for interrupting transmission of the stored image stored in the storage unit and transmitting only the voice when the speed is less than a predetermined threshold;
An image monitoring apparatus characterized by
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009080913A JP5204707B2 (en) | 2009-03-30 | 2009-03-30 | Image monitoring device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009080913A JP5204707B2 (en) | 2009-03-30 | 2009-03-30 | Image monitoring device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010233145A JP2010233145A (en) | 2010-10-14 |
JP5204707B2 true JP5204707B2 (en) | 2013-06-05 |
Family
ID=43048502
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009080913A Active JP5204707B2 (en) | 2009-03-30 | 2009-03-30 | Image monitoring device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5204707B2 (en) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6102147B2 (en) * | 2012-09-26 | 2017-03-29 | 株式会社Jvcケンウッド | System and imaging apparatus |
JP6471511B2 (en) | 2015-01-22 | 2019-02-20 | 富士ゼロックス株式会社 | Image forming apparatus |
CN105049807B (en) | 2015-07-31 | 2018-05-18 | 小米科技有限责任公司 | Monitored picture sound collection method and device |
JP6791649B2 (en) * | 2016-04-25 | 2020-11-25 | アマノ株式会社 | Flap device, checkout machine and parking lot management system |
JP6627678B2 (en) * | 2016-07-26 | 2020-01-08 | トヨタ自動車株式会社 | Mobile remote control system |
JP6774821B2 (en) * | 2016-09-05 | 2020-10-28 | 綜合警備保障株式会社 | Reporting system |
WO2019176222A1 (en) * | 2018-03-13 | 2019-09-19 | コニカミノルタ株式会社 | Anomaly sensing system, anomaly sensing method, and anomaly sensing program |
CN113393629B (en) * | 2021-05-25 | 2022-11-15 | 浙江大华技术股份有限公司 | Intrusion behavior detection method and device and multi-channel video monitoring system |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06284148A (en) * | 1993-03-30 | 1994-10-07 | Hitachi Ltd | Moving picture communication control method and communication controller |
JP3809629B2 (en) * | 1998-01-20 | 2006-08-16 | 株式会社熊平製作所 | Image capturing and recording device |
JP3801345B2 (en) * | 1998-03-31 | 2006-07-26 | セコム株式会社 | Image monitoring device |
JP3657857B2 (en) * | 2000-05-30 | 2005-06-08 | 日本電信電話株式会社 | Remote microscope system |
JP2005051663A (en) * | 2003-07-31 | 2005-02-24 | Victor Co Of Japan Ltd | Recording regenerating method of monitoring video signal and recording reproducing apparatus of device monitoring video signal |
JP2006108869A (en) * | 2004-10-01 | 2006-04-20 | Sony Corp | Imaging apparatus, and decoder |
JP5000141B2 (en) * | 2006-01-26 | 2012-08-15 | 三菱電機株式会社 | Elevator remote monitoring system |
-
2009
- 2009-03-30 JP JP2009080913A patent/JP5204707B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2010233145A (en) | 2010-10-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5204707B2 (en) | Image monitoring device | |
JP5217106B2 (en) | Video surveillance system, surveillance video abnormality detection method, and surveillance video abnormality detection program | |
CN109327676A (en) | A kind of falling object from high altitude monitoring system, method and device | |
CN103209316A (en) | Image monitoring system | |
JP2013009159A (en) | System, device and method for supervision | |
JP2008263370A (en) | Camera device and information distribution device | |
JP5154341B2 (en) | Image monitoring apparatus and program | |
JP2004056473A (en) | Monitoring controller | |
JP5323508B2 (en) | Surveillance camera device | |
JP5106430B2 (en) | Remote image monitoring system | |
JP2009015536A (en) | Suspicious person report device, suspicious person monitoring device and remote monitoring system using the same | |
JP2008015566A (en) | Monitoring system, monitoring device, and monitoring method | |
US20120120309A1 (en) | Transmission apparatus and transmission method | |
JP5203236B2 (en) | Surveillance camera device and remote image monitoring system | |
JP2009540460A (en) | Video confirmation system and method for alarm monitoring in a central station | |
TWI595454B (en) | Method for processing image signals in response to security event and related security system | |
JP5052307B2 (en) | Image recording device | |
JP2004234067A (en) | Remote monitoring system and monitoring device | |
JP2002374522A (en) | Data setting method for monitor system and monitor system employing it | |
KR20060123818A (en) | Auto pop-up monitoring system and method | |
EP3672233A1 (en) | Method for carrying out a health check of cameras and a camera system | |
US20060147086A1 (en) | Process and arrangement for remote transmission of data including at least one image data | |
JP2006067225A (en) | Emergency reporting system | |
JP2005311820A (en) | Emergency reporting system | |
JP4959528B2 (en) | Image recording device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120814 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120821 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121018 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5204707 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160222 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |