WO2017033404A1 - 警備システム及び人物画像表示方法 - Google Patents
警備システム及び人物画像表示方法 Download PDFInfo
- Publication number
- WO2017033404A1 WO2017033404A1 PCT/JP2016/003552 JP2016003552W WO2017033404A1 WO 2017033404 A1 WO2017033404 A1 WO 2017033404A1 JP 2016003552 W JP2016003552 W JP 2016003552W WO 2017033404 A1 WO2017033404 A1 WO 2017033404A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- captured image
- captured
- monitoring area
- security
- guard
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/19682—Graphic User Interface [GUI] presenting system data to the user, e.g. information on a screen helping a user interacting with an alarm system
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19645—Multiple cameras, each having view on one of a plurality of scenes, e.g. multiple cameras for multi-room surveillance or for tracking an object by view hand-over
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
- G08B13/1966—Wireless systems, other than telephone systems, used to communicate with a camera
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/1968—Interfaces for setting up or customising the system
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B23/00—Alarms responsive to unspecified undesired or abnormal conditions
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/04—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Definitions
- This disclosure monitors a person to be monitored using a monitoring camera, and when a predetermined event occurs, an image display of a suspect who is suspected to be related to the occurrence of the event or a guard who patrols the monitoring area
- the present invention relates to a security system and a person image display method.
- a plurality of surveillance cameras have been installed in various locations such as large stores (for example, home centers or shopping malls), public facilities (for example, stations and stadiums), offices, factories, and warehouses. More and more people are shooting subjects such as people.
- this type of surveillance camera when a certain event such as an incident (or “event”) occurs in the surveillance area, it is notified to the operator, the security contractor, the police, etc. Security systems for reporting are used.
- a security system that detects a suspicious person who has entered a monitoring area around a building and issues an alarm is known.
- this security system when a first mobile body that is an authorized person to the monitoring area and a second mobile body that is an unauthorized person to the monitored area are simultaneously detected in the monitored area, It is determined whether the non-permitted person is a suspicious person according to the movement path and the movement path of the non-permitted person. Thereby, this security system can detect the pushing burglar who tries to invade indoors threatening a user exactly, for example.
- the security system of Patent Document 1 has a function of determining whether a suspicious person is detected and reporting when the suspicious person is detected. Based on the notification, the security system recognizes the presence of the suspicious person, rushes to the site, etc. Is possible.
- the security system recognizes the presence of the suspicious person, rushes to the site, etc. Is possible.
- the configuration of Patent Document 1 for example, when an attempt is made to obtain a security report indicating an action record (action history) of a suspect or a guard who tracks the suspect when an incident occurs, the image is captured by a surveillance camera. For example, the user manually selects and displays an image in which a suspect or guard is shown from a plurality of recorded images, and a lot of time and labor is required for creating a security report. For this reason, before and after the occurrence of any event or incident in the surveillance area, the action history of the suspect or security guard related to the incident is visually grasped in chronological order. It was difficult to easily obtain a historical action history.
- the present disclosure simply shows an intuitive and visual behavior history of a suspect who is related to an occurrence of an event or incident in a surveillance area or a guard who tracks the suspect. It is an object of the present invention to provide a security system and a person image display method that can be used.
- the present disclosure displays a camera that captures a monitoring area, a recorder that stores a captured image of the monitoring area captured by the camera, a sensor that detects an event in the monitoring area, and a captured image of the monitoring area from the camera or recorder
- a plurality of picked-up images picked up by the suspect of the event are extracted, and a first transition picked-up image in which the extracted picked-up images are arranged in time series along the pick-up time and map information of the monitoring area are displayed.
- a plurality of picked-up images taken by the guard and a code detected by the code detecting device are extracted, and the plurality of picked-up images are extracted.
- Display is switched to the map information of the second transition captured image monitoring area arranged in time series along the marker to the imaging time or detection time indicating the code and to provide a security system.
- the present disclosure is a person image display method in a security system including a camera, a recorder, a sensor, a code detection device, and a video surveillance display device, wherein a surveillance region is imaged by the camera, and a captured image captured by the camera by the recorder , An event in the monitoring area is detected by a sensor, a code attached or held by a guard who goes around the monitoring area is detected by a code detection device, and an imaging of the monitoring area from a camera or recorder is performed by a video monitoring display device When an image is displayed on the display unit, and an event is detected in the monitoring area in the display of the captured image of the monitoring area in the video surveillance display device, a plurality of captured images in which the suspect of the event is imaged are extracted and extracted A first transition captured image in which a plurality of captured images are arranged in time series along the imaging time and map information of the monitoring area are displayed.
- a plurality of captured images captured by the guard and a code detected by the code detection device are extracted, and the extracted plurality of captured images or codes are indicated.
- a person image display method for switching and displaying a marker and a second transition captured image arranged in time series along an imaging time or a detection time and map information of a monitoring area.
- the present disclosure also provides a camera that captures a monitoring area, a recorder that stores a captured image of the monitoring area captured by the camera, a sensor that detects an event in the monitoring area, and a captured image of the monitoring area from the camera or recorder.
- a code detection device that detects a code that is installed or held by a security guard that patrols the monitoring area.
- the video monitoring display device is detected by the code detection device.
- Based on the code a plurality of captured images and codes taken by the guard when an event is detected by the sensor in the monitoring area are extracted, and the plurality of extracted captured images and a marker indicating the code are captured.
- the security system which displays the transition picked-up image and the map information of the monitoring area which were arranged in time series along detection time is provided.
- the present disclosure is a person image display method in a security system including a camera, a recorder, a sensor, a code detection device, and a video surveillance display device, wherein a surveillance area is imaged by the camera, and a captured image captured by the recorder by the camera , An event in the monitoring area is detected by a sensor, a code attached or held by a guard who goes around the monitoring area is detected by a code detection device, and an imaging of the monitoring area from a camera or recorder is performed by a video monitoring display device The image is displayed on the display unit, and the guard when the event is detected in the monitoring area by the sensor is displayed based on the code detected by the code detection device in the display of the captured image of the monitoring area in the video surveillance display device A plurality of captured images and codes extracted, and a mark indicating the extracted plurality of captured images and codes. Preparative displaying the map information of the transition captured image and the monitoring area arranged in time series in the imaging time or detection time, it provides a human image display method.
- FIG. 1 is a block diagram illustrating an example of a system configuration of a security system according to the present embodiment.
- FIG. 2 is a block diagram illustrating an example of a functional configuration of the security system according to the present embodiment.
- FIG. 3 is a flowchart illustrating an example of an operation procedure for acquiring position information of a guard in the security system according to the present embodiment.
- FIG. 4 is a flowchart showing an example of main operations in the security system of the present embodiment.
- FIG. 5 is a diagram illustrating an example of a transition captured image display screen that displays a transition captured image based on a captured image of a suspect and map information of a monitoring area.
- FIG. 1 is a block diagram illustrating an example of a system configuration of a security system according to the present embodiment.
- FIG. 2 is a block diagram illustrating an example of a functional configuration of the security system according to the present embodiment.
- FIG. 3 is a flowchart illustrating an example of an operation procedure for acquiring position information of
- FIG. 6 is a flowchart illustrating an example of a display procedure of the imaging position information of the captured image specified in the transition captured image display screen illustrated in FIG.
- FIG. 7 is a diagram illustrating an example of switching from the transition captured image display screen illustrated in FIG. 5 to a transition captured image display screen that displays a transition captured image based on position information of a guard.
- FIG. 8 is a diagram illustrating an example of position information of a guard when the card reader marker is mouse-overed.
- FIG. 9 is a diagram illustrating an example of the position range information of the guard when the BLE marker is moved over the mouse.
- FIG. 10 is a diagram illustrating an example of a moving image reproduction screen corresponding to a captured image when any captured image is clicked on the transition captured image display screen illustrated in FIG. 5.
- FIG. 5 is a flowchart illustrating an example of a display procedure of the imaging position information of the captured image specified in the transition captured image display screen illustrated in FIG.
- FIG. 7 is a diagram illustrating an example
- FIG. 11 is a flowchart illustrating an example of a procedure for reproducing the moving image illustrated in FIG.
- FIG. 12 is a flowchart illustrating an example of an incident-related information input procedure for any one of the captured images constituting the transition captured image based on the captured image of the suspect or the guard.
- FIG. 13 is a diagram illustrating a selection example of a captured image output as a security report on the transition captured image display screen illustrated in FIG. 5.
- FIG. 14 is a diagram illustrating a non-selected example of a captured image output as a security report on the transition captured image display screen illustrated in FIG.
- FIG. 15 is a flowchart illustrating an example of a selection procedure for selecting a captured image target to be output as a security report on the transition captured image display screen illustrated in FIG. 5.
- FIG. 16 is a flowchart illustrating an example of a selection cancellation procedure for canceling a selection candidate of a captured image output as a security report on the transition captured image display screen illustrated in FIG. 13.
- FIG. 17 is a diagram illustrating an example in which a non-display portion before and after a transition captured image is scrolled and displayed when dragged and dropped on any captured image.
- FIG. 18 is a flowchart showing an example of the scroll procedure shown in FIG.
- FIG. 19 is a diagram illustrating an operation example of print output of a security report including a captured image of the selected suspect.
- FIG. 20 is a diagram illustrating an operation example of print output of a security report including a captured image of a selected security guard.
- FIG. 21 is a flowchart illustrating an example of an operation procedure of the print output illustrated in FIG. 19 or 20.
- FIG. 22 is a diagram illustrating an example of a report printed out as a security report including a captured image of the suspect.
- FIG. 23 is a diagram illustrating an example of a report printed out as a security report including a captured image of a security guard.
- FIG. 24 is a diagram showing an example of the next page of the report shown in FIG.
- the present embodiment an embodiment that specifically discloses a security system and a person image display method according to the present disclosure (hereinafter referred to as “the present embodiment”) will be described in detail with reference to the drawings as appropriate. However, more detailed description than necessary may be omitted. For example, detailed descriptions of already well-known matters and repeated descriptions for substantially the same configuration may be omitted. This is to avoid the following description from becoming unnecessarily redundant and to facilitate understanding by those skilled in the art.
- the accompanying drawings and the following description are provided to enable those skilled in the art to fully understand the present disclosure, and are not intended to limit the claimed subject matter.
- a plurality of monitoring cameras are provided at various locations of a complex store such as a shopping mall as a monitoring area to shoot the monitoring area, and some event (for example, an incident such as theft) occurs in the monitoring area ) Occurs, a configuration example of a system that performs a report including a captured image of a suspect who caused the event and a guard who tracks the suspect is shown.
- a complex store such as a shopping mall
- some event for example, an incident such as theft
- Occurs a configuration example of a system that performs a report including a captured image of a suspect who caused the event and a guard who tracks the suspect is shown.
- embodiments of the security system and the person image display method according to the present disclosure are not limited to the contents of the present embodiment described later.
- FIG. 1 is a block diagram illustrating an example of a system configuration of a security system 10 according to the present embodiment.
- the security system 10 includes a plurality of cameras 11-1 to 11-n, a plurality of various sensors 12-1 to 12-k, and a plurality of recorders 13-1 to 13-m.
- n, k, and m are integers of 2 or more.
- the cameras 11-1 to 11-n are configured to have a lens and an image sensor, are provided at various locations so that a predetermined location in the monitoring area can be photographed, and are attached to a ceiling, a wall, or the like of each installation location.
- a wide-angle lens capable of obtaining a wide viewing angle of 140 degrees or more is used as the lens, and an object image in the field of view is formed on the imaging surface (light-receiving surface) of the image sensor.
- the image sensor is an imaging device such as a CCD (Charged-Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor), and converts an optical image formed on an imaging surface (light receiving surface) into an electrical signal.
- Arbitrary n cameras 11-1 to 11-n are provided according to the conditions of the installation location, the system configuration, and the like.
- Each of the cameras 11-1 to 11-n images a subject at an installation place where the cameras 11-1 to 11-n are arranged, and acquires camera-captured images in each monitoring area.
- the cameras 11-1 to 11-n capture, for example, a moving image of each monitoring area as a camera captured image.
- any of various sensors such as a shoplifting prevention gate, a face matching alarm, a fire alarm, a metal detector, an object sensor, a touch sensor, and the like are used. Sensors according to the purpose are provided at various locations in the monitoring area. Arbitrary k sensors 12-1 to 12-k are provided according to the conditions of the installation location, the system configuration, and the like.
- the sensors 12-1 to 12-k output alarm information when detecting a detection target person, object, event, or the like. For example, when a shoplifting prevention tag is attached to an unpurchased product in a store, if a shoplifter goes shoplifting without purchasing the product and passes a shoplifting prevention gate, shoplifting is an example of a sensor.
- the prevention gate sounds an alarm (that is, outputs alarm information).
- the recorders 13-1 to 13-m are configured to include a storage device such as a hard disk or a semiconductor memory, and store (record) camera-captured images captured by the cameras 11-1 to 11-n.
- Arbitrary m recorders 13-1 to 13-m are provided according to the conditions of the installation location, the system configuration, and the like.
- the recorders 13-1 to 13-m may store not only moving images of camera-captured videos but also camera-captured images of still images generated from the moving images as recorded videos.
- the security system 10 includes a video monitoring display device 14, various sensor management devices 15, a database 16, a face matching server 17, a form output device 18, an input device 19, and a monitor 20.
- the output device 18, the position information management server 21, the security guard information management server 22, the BLE receiving devices BR-1 to BR-p, and the authentication devices CR-1 to CR-r are connected to each other via the network 25, and data Alternatively, transmission / reception of information is possible.
- the network 25 is a wireless network or a wired network.
- the wireless network is, for example, a wireless LAN (Local Area Network), a wireless WAN (Wide Area Network), 3G, LTE (Long Term Evolution), or WiGig (Wireless Gigabit).
- the wired network is, for example, an intranet or the Internet.
- the video surveillance display device 14 is configured by using a computer (for example, a PC (Personal Computer)), and the camera and the video of the still image are captured by the cooperation of the processor and the memory according to a predetermined computer program. Various processes relating to these (hereinafter collectively referred to as “captured images”) are executed.
- the video monitoring display device 14 includes a processor such as a CPU (Central Processing Unit), an MPU (Micro Processing Unit), or a DSP (Digital Signal Processor), a working memory and a ROM (RAM), a RAM (Random Access Memory), or a flash memory. It is configured using program memory and data memory by Read Only Memory) and a communication interface for transmitting and receiving data.
- a processor such as a CPU (Central Processing Unit), an MPU (Micro Processing Unit), or a DSP (Digital Signal Processor), a working memory and a ROM (RAM), a RAM (Random Access Memory), or a flash memory. It is configured using program memory and data memory by
- the video surveillance display device 14 includes images taken from the cameras 11-1 to 11-n and the recorders 13-1 to 13-m, position information (see below) of guards stored by the position information management server 21, and security.
- the guard information stored by the staff information management server 22 is input, and a captured image is displayed, or processing such as generation of a report as a guard report described later is performed.
- the various sensor management devices 15 are configured using a computer (for example, a PC), and manage alarm information output from the various sensors 12-1 to 12-k through cooperation of a processor and a memory according to a predetermined computer program. Various processes related to are executed. For example, the various sensor management devices 15 set the detection conditions of the respective sensors 12-1 to 12-k, manage management information including the detection conditions of the sensors 12-1 to 12-k, and control the sensors 12-1- The 12-k management information is output to the video surveillance display device 14.
- the various sensor management devices 15 may be configured by the same computer together with the video monitoring display device 14.
- the video monitoring display device 14 receives alarm information in the monitoring area. It is recognized that a predetermined event (for example, some kind of accident or incident) has been detected by the sensor around the sensor that has output.
- the events detected by the sensors 12-1 to 12-k include events in which any one of the cameras 11-1 to 11-n detects a specific person, object, etc. using its own captured image. In this case, the cameras 11-1 to 11-n function as the sensors 12-1 to 12-k.
- the various sensor management devices 15 set the occurrence of an incident such as theft as a detection condition, and under this setting, the video monitoring display device 14 outputs alarm information output by the sensor reacting according to the detection conditions.
- the occurrence of the incident is recognized by the input of.
- the database 16 is configured by using a storage device (for example, a hard disk), and stores human face information existing in captured images captured by the cameras 11-1 to 11-n.
- the face information stored in the database 16 is information in which, for example, each face image data is associated with face feature metadata indicating the feature of the face image.
- the face collation server 17 is configured using a computer (for example, a PC), and in the captured images captured by the cameras 11-1 to 11-n through the cooperation of the processor and the memory according to a predetermined computer program for the server.
- the face information matching process is executed.
- the face matching server 17 compares the face image data (including thumbnails) and the face feature metadata (not shown), and the face image to be matched with the face feature metadata of the matching source. It has a face collation unit (not shown) that determines whether or not they match and a communication unit (not shown) that transmits and receives face information.
- the face matching server 17 uses the face images and face feature metadata stored in the database 16 and stores them in the captured images captured by the cameras 11-1 to 11-n or the recorders 13-1 to 13-m. Whether the person appearing in the captured image is the same as the face image stored in the database 16 (that is, whether the person is the same person) is collated.
- the face matching server 17 performs face matching of a person (in other words, a suspect) who has caused an event (for example, an incident) detected by a sensor or a guard who tracks the suspect, and performs a plurality of imaging operations. A face image that matches the face of the suspect or the guard is determined from the image, and a captured image showing the suspect or the guard is extracted. These extracted captured images are stored in the database 16.
- a form output device 18 as an example of a printing device is constituted by, for example, a printer having a printing function, is connected to the video monitoring display device 14, and includes a report including a captured image generated by the video monitoring display device 14 (FIG. 22 to FIG. 22). The form (see FIG. 24) is printed out.
- the form output device 18 may output the form data of the report as a security report to another device, for example, a monitoring center of a security contracting company provided outside via a network.
- the input device 19 is configured using, for example, a mouse, a keyboard, a touch panel, or a touch pad, and is connected to the video monitoring display device 14 and inputs instructions regarding various operations and settings to the video monitoring display device 14 according to a user's input operation. .
- the monitor 20 is configured using, for example, a display device such as an LCD (Liquid Crystal Display) or an organic EL (Electroluminescence), and is connected to the video monitoring display device 14, and various displays related to the captured image generated by the video monitoring display device 14. Display the screen.
- a touch panel is used as the input device 19
- the input device 19 using a translucent touch sensor is disposed on the monitor 20.
- the monitor 20 as the display device and the touch panel as the input device are combined, and the user can perform an intuitive operation.
- a smartphone or a tablet terminal can be applied to the video surveillance display device 14.
- the security system 10 includes BLE transmitting terminals BT-1 to BT-p, BLE receiving devices BR-1 to BR-p, authenticated terminals RC-1 to RC-r, authenticating devices CR-1 to CR-r, It has color barcodes CM-1 to CM-q, a position information management server 21, and a guard information management server 22.
- p, r, and q are integers of 2 or more.
- cameras 11-1 to 11-n, sensors 12-1 to 12-k, recorders 13-1 to 13-m, BLE transmission terminals BT-1 to BT-p, and BLE receivers BR-1 to BR-p In the case where the same description can be made without distinguishing the description of each of the authenticated terminals RC-1 to RC-r, the authentication devices CR-1 to CR-r, and the color barcodes CM-1 to CM-q are abbreviated symbols like camera 11, sensor 12, recorder 13, BLE transmission terminal BT, BLE reception device BR, authenticated terminal RC, authentication device CR, and color barcode CM (see FIG. 2).
- the BLE transmission terminal BT as an example of a code is a transmitter that is worn or carried in a chest pocket of a guard's uniform that, for example, patrols a surveillance area or tracks a suspect.
- the BLE transmission terminal BT transmits a signal indicating the position information of the security guard, for example, within the communication range of Bluetooth (registered trademark) which is a short-range wireless communication technology.
- the BLE transmitting terminal BT and the BLE receiving device BR have a communication function using BLE (Bluetooth (registered trademark) Low Energy), which is one of the extended uses of Bluetooth (registered trademark).
- BLE Bluetooth (registered trademark) Low Energy
- the BLE transmission terminal BT can transmit a signal for indicating the position information of the security guard within a radius of 10 m centered on itself.
- the BLE receiver BR as an example of the code detection device is a receiver that is installed in various places in the monitoring area and receives a signal transmitted from the BLE transmission terminal BT.
- the BLE receiving device BR receives the signal transmitted from the BLE transmitting terminal BT, so that the position information of the guard who wears or holds the BLE transmitting terminal BT can be grasped. Save in the management server 21.
- the authenticated terminal RC as an example of a code is an authenticated medium that is attached to or held in a chest pocket of a guard's uniform that circulates in a monitoring area or tracks a suspect.
- the authenticated terminal RC is, for example, an identification information storage unit (not shown) that stores identification information of a guard who is a wearer or a holder, and a transmission / reception unit (transmission / reception unit) that transmits and receives an authentication signal between the authentication device CR. (Not shown) and a card holding a stored IC chip.
- the authentication device CR as an example of the code detection device is a legitimate authenticated terminal by receiving a signal transmitted from the authenticated terminal RC installed or held by a security guard at various locations in the monitoring area. By authenticating, it is possible to detect that a legitimate authenticated terminal has passed the installation location of the authentication device CR.
- the authentication device CR is a card reader that is disposed, for example, in the vicinity of an entrance / exit door, and authenticates that a security guard possessing a card as an example of the terminal RC to be authenticated passes through the door.
- the authentication device CR stores the position information of the guard in the position information management server 21.
- the color barcode CM as an example of the code is printed on a uniform or a name tag of a guard who goes around the surveillance area or tracks the suspect, for example, and a plurality of different color patterns are defined for each color barcode CM. It is the identification information of the guard.
- a chameleon code registered trademark
- the color barcode CM is detected by image processing of any one of the cameras 11-1 to 11-n as an example of a code detection device that images the monitoring area. The camera transmits the detected color barcode CM to one of the authentication devices CR.
- the authentication device CR as a transmission destination of the color barcode CM from the camera is, for example, an authentication device associated with the camera that has detected the color barcode CM in a one-to-one correspondence.
- an authentication device associated with the camera that has detected the color barcode CM in a one-to-one correspondence For example, a camera and an authentication device installed at a position closest to the camera are associated one-to-one.
- the authentication device CR refers to the security guard information management server 22 and authenticates whether or not the color barcode CM transmitted from the camera and the security guard previously associated with the color barcode CM are successfully authenticated.
- the position information of the camera that has detected the color barcode CM is stored in the position information management server 21 as the position information of the guard.
- the location information management server 21 is configured using a computer (for example, a PC), and the guard and the guard output from the BLE receiving device BR or the authentication device CR by the cooperation of the processor and the memory according to a predetermined computer program for the server. The processing of storing the location information in association with the guard information is executed. When there is a request from the security report print processing unit 142, the location information management server 21 outputs the guard position information as a response to the security report print processing unit 142.
- a computer for example, a PC
- the security guard information management server 22 is configured by using a computer (for example, a PC), and by cooperation of a processor and a memory according to a predetermined computer program for the server, security guard information (for example, security guard identification information, security guard) (Name, color barcode CM assigned to each security guard) is stored.
- security guard information for example, security guard identification information, security guard
- security guard Name, color barcode CM assigned to each security guard
- FIG. 2 is a block diagram illustrating an example of a functional configuration of the security system 10 according to the present embodiment.
- the video surveillance display device 14 includes a video surveillance control unit 141 that executes processing related to display output of the captured image and the incident related information to the monitor 20, generation of a report as a security report including the captured image and the incident related information, and a form And a security report print processing unit 142 that executes processing related to print output to the output device 18.
- the camera-captured video imaged by the camera 11 is sent to the video surveillance control unit 141 and the face collation server 17 of the video surveillance display device 14 and sent to the recorder 13 for storage.
- the camera 11 can send the current camera-captured video (in other words, live video) being captured to the monitor 20 via the video monitoring display device 14 and display it in real time.
- the moving image or the still image captured by the camera (captured image) stored in the recorder 13 is sent to the video monitoring control unit 141.
- the recorder 13 can also send out the stored captured image to the monitor 20 via the video monitoring display device 14 for display.
- a face matching server 17 having a function as a face matching processing unit inputs a camera-captured image captured by the camera 11, detects a human face included in the captured image, and detects face feature metadata of the detected face. The face image is extracted and output to the database 16.
- the database 16 having a function as a face information storage unit stores face information including face feature metadata and a face image sent from the face matching server 17. Further, the face matching server 17 uses the face image stored in the database 16 and face feature metadata to check whether the face image in the captured image captured by the camera 11 is the face image of the same person. To do.
- the alarm information output from the sensor 12 is input to the video surveillance control unit 141.
- Alarm information is installed on the fence around the shop premises, for example, a detection signal for a shoplifting prevention gate installed near the entrance of a store, a door unlocking signal when entering or leaving a predetermined area using a card reader, etc.
- a detection signal of the touch sensor is included.
- the camera 11 as the sensor 12, it is possible to emit detection information when a person is detected in a captured image in a place where a person usually does not enter.
- the video monitoring control unit 141 sets the face image of the suspect or the guard from the captured image according to the operation input of the input device 19 by the guard who is the user.
- the face collation server 17 searches whether the same face image as the face image of the suspect or the guard set by the video monitoring control unit 141 is reflected in the captured image recorded in the recorder 13, and the same The captured image including the face image of the suspect or security guard is extracted.
- the occurrence of the incident is detected not only by the alarm information from the sensor 12 but also by the security guard confirming the occurrence of the incident from a suspicious movement by looking at the live camera image taken on the monitor 20 and operating the input device 19. It can also be done by input.
- the video monitoring control unit 141 causes the monitor 20 to display a captured image including the extracted suspect or security guard.
- the video surveillance control unit 141 inputs incident-related information used as a memo of the suspect and incident related to the captured image, or as a memo of the security guard and incident, according to the operation input of the input device 19 by the user. And stored in the memory (not shown) of the video surveillance display device 14, the database 16, or the recorder 13.
- the video monitoring control unit 141 generates various display screens including the captured image and the case related information according to the operation input of the input device 19 by the user, and displays the generated display screen on the monitor 20.
- the security report print processing unit 142 outputs a request to the location information management server 21 and the security guard information management server 22 according to the operation input of the input device 19 by the user, and the location information management server 21 and the security guard information management server 22.
- the security report including the captured image selected for generating the report and the incident related information is generated by using the response from, and is output to the form output device 18.
- the form output device 18 prints out the security report (report) generated by the security report print processing unit 142.
- FIG. 3 is a flowchart illustrating an example of an operation procedure for acquiring position information of a guard in the security system 10 according to the present embodiment.
- the guard information the identification information of the BLE transmission terminal BT when the security guard wears or possesses the BLE transmission terminal BT
- the authentication terminal RC including the color barcode CM
- the authenticated terminal RC is initially registered in the security guard information management server 22 (step S1).
- step S1 information related to the installation position of the authentication device CR installed in the monitoring area and the installation position of the BLE receiving device BR may also be registered in the guard information management server 22.
- step S2a one of step S2a, step S2b, or step S2c is executed. That is, when the security guard wears or possesses the BLE transmission terminal BT, the BLE reception device BR receives a signal from the BLE transmission terminal BT (step S2a). Alternatively, when the security guard wears or carries the authenticated terminal RC, the authentication device CR receives a signal from the authenticated terminal RC (step S2b). Alternatively, when the security guard wears or carries the color barcode CM, the authentication device CR authenticates whether the color barcode detected by the camera 11 matches the color barcode initially registered in step S1. Perform (step S2c).
- step S3 the location information management server 21 stores and accumulates the location information of the guards output from the BLE receiving device BR or the authentication device CR (step S3).
- step S3 when the signals from the BLE transmission terminal BT and the authenticated terminal RC are not received and the color barcode to be transmitted from the camera 11 is not received by the authentication apparatus CR (step S4, NO).
- step S4 NO the authentication apparatus CR
- the signal from the BLE transmitting terminal BT or the authenticated terminal RC is received or the color barcode transmitted from the camera 11 is received by the authentication device CR (step S4, NO)
- step S4 NO it is shown in FIG.
- any one of step S2a, step S2b, or step S2c is executed, and the location information management server 21 continues to accumulate the location information of the guard.
- FIG. 4 is a flowchart showing main operations in the security system 10 of the present embodiment.
- the camera 11 continuously shoots the monitoring area of each installation location, and the recorder 13 stores the camera-captured video imaged by the camera 11.
- the video surveillance display device 14 can acquire camera-captured video from the camera 11 and the recorder 13.
- storage process of the guard's positional information shown in FIG. 3 may be performed at any timing of the process shown in FIG.
- the face collation server 17 receives and acquires a camera-captured image captured by the camera 11 (step S11).
- the face collation server 17 detects the face of a person in the video from the camera-captured video, and outputs and stores the facial feature metadata indicating the facial features and the facial image in the database 16 (step S12).
- the video surveillance display device 14 receives and acquires alarm information from the sensor 12 (step S13).
- the video monitoring display device 14 may display the alarm information on the monitor 20 to notify the occurrence of the incident.
- the video surveillance display device 14 Upon receiving the alarm information, the video surveillance display device 14 executes processing when an incident occurs. That is, the video surveillance display device 14 extracts a captured image in which a suspect or a guard who tracks the suspect is reflected from the captured image stored in the recorder 13, and inputs incident related information (step S14). Here, the video surveillance display device 14 selects a captured image in which the suspect or the guard is imaged in accordance with the operation input of the input device 19 by the guard who is the user, and corresponds to the captured image of the suspect or the guard. Enter incident related information.
- the video surveillance display device 14 When selecting the captured image captured by the suspect or the guard, for example, the video surveillance display device 14 reads and monitors the captured image that is a little before the incident occurrence time (alarm information reception time) stored in the recorder 13. The captured image of about 30 frames is selected as a candidate image in which the suspect or the guard is captured. Then, the video surveillance display device 14 guards a captured image at an angle from which the facial features of the suspect are easily understood from the candidate images by, for example, frame-feeding the candidate images in accordance with the operation input of the input device 19 by the user. Specify and select. At this time, a region including the face image of the suspect or the guard may be trimmed and enlarged in the captured image.
- the face collation server 17 also extracts the face feature metadata and face image of the suspect or the guard, and outputs them to the database 16 and saves the captured image obtained by capturing the suspect or the guard.
- the face matching server 17 uses the face feature metadata and the face image based on the captured image of the angle of the face of the suspect or guard selected by the video surveillance display device 14 as described above. And get.
- the face collation server 17 collates the face image in a captured image with the face image of a suspect or a guard about the captured image until now memorize
- a captured image is searched (step S15). Thereby, in the face collation server 17, it becomes possible to extract the picked-up images in which the suspects or the guards are picked up at different times and places from before the incident occurrence to after the incident occurrence.
- the face matching server 17 can also detect a suspect by reading a color barcode from the captured image when extracting a captured image in which the suspect is captured. For example, in a store where a visitor generally holds a shopping cart, a shopping basket, a shopping bag, etc. in the store, in an environment in which a specific visitor can be associated with on-site equipment such as a shopping cart, A color barcode is attached to the equipment in the hall, and the face matching server 17 can track a specific person by detecting the color barcode from the captured image of each monitoring area in the store. In this case, the face matching server 17 executes face matching and color barcode detection processing, links the suspect's face image with a color barcode existing together within a predetermined range, and corresponding color barcodes.
- the captured image in which the suspect is captured can be extracted from the captured image in which the specific color barcode is detected.
- the color barcode for example, a two-dimensional barcode may be used as appropriate.
- the chameleon code (registered trademark) may be used as the color barcode.
- the video monitoring display device 14 displays, on the monitor 20, a transition captured image based on the behavior of the suspect in time series, using the extracted captured image of the suspect until the incident occurs. Further, the video surveillance display device 14 simultaneously displays the map information image 52 indicating the position where each captured image is photographed on the monitor 20 together with the transition captured image (step S16).
- the transition captured image refers to the same suspect at different times and locations based on the behavior of the suspect or guard from a certain time before to a certain time after the incident when the sensor 12 reacts. It is a captured image in which a plurality of captured images of a guard are arranged side by side with elapsed time in time series.
- the video surveillance display device 14 performs transition imaging based on the behavior of any guard on the screen on which the transition captured image (for example, the transition captured image of the suspect) displayed in step S16 and the map information image 52 are displayed.
- the transition captured image for example, the transition captured image of the suspect
- the map information image 52 are displayed.
- the video surveillance display device 14 displays the transition captured image based on the behavior of the suspect on the screen on which the transition captured image (for example, the transition captured image of the guard) displayed in step S18 and the map information image 52 are displayed.
- the transition captured image based on the action of the selected suspect and the map information indicating the position where each captured image is captured
- the image 52 is simultaneously displayed on the monitor 20 (step S20).
- the operation for switching to the time-series display of the transition captured image based on the suspect's action is not performed (step S19, NO)
- the process illustrated in FIG. 4 proceeds to step S21.
- the video surveillance display device 14 inputs a form output instruction in accordance with an operation input of the input device 19 such as pressing of a form output button by a guard or other user (step S21). Based on this form output instruction, the video surveillance display device 14 generates a security report in which transition captured images are displayed in time series, and prints out the security report form from the form output device 18 (step S22). In the security report, the incident related information is displayed together with the transition captured image.
- the form data of the security report may be output from the form output device 18 to another device such as a monitoring center of a security contractor provided outside via a network.
- FIG. 5 is a figure which shows an example of the transition captured image display screen which displays the transition captured image based on the suspected person's captured image, and the map information of a monitoring area
- the transition captured image display screen 51 illustrated in FIG. 5 is displayed on the monitor 20 by the processing of the video monitoring display device 14.
- a plurality of captured images in which the suspect is imaged in a line along the lower edge of the screen are arranged in time series.
- a transition captured image 53 indicating the action history of the suspect is formed by the captured images arranged in time series.
- a map information image 52 indicating the imaging position of each captured image in the monitoring area is arranged on the upper side of the transition captured image 53 on the transition captured image display screen 51.
- the map information image 52 the layout of a store to be monitored by the security system 10 is indicated by a map, and the imaging position of the captured image of each monitoring area can be displayed on the map based on the arrangement of each camera 11. Yes.
- a specific An imaging position mark 56 corresponding to the captured image 53a and imaging attached information 57 of the captured image are displayed.
- the imaging position mark 56 a mark indicating a position such as a circle is displayed on the map information image 52.
- the imaging accessory information 57 includes the name of the imaging position (installation position of the camera 11) corresponding to the imaging position mark 56 (for example, the west entrance), the shooting date (YYYY / MM / DD), the shooting time (hh / mm / ss), and the like. Is displayed.
- the video surveillance display device 14 switches the imaging position mark 56 and the imaging accessory information 57 in accordance with the transition of the mouse pointer 55.
- the image pickup position and the image pickup position information corresponding to the designated picked-up image are displayed (for example, see the west entrance at the lower part of FIG. 5 ⁇ the jewelry store ⁇ the miscellaneous goods ⁇ the men's reference).
- FIG. 6 is a flowchart showing a display procedure of imaging position information of a captured image designated in the transition captured image display screen 51 shown in FIG.
- the video surveillance display device 14 instructs the mouse pointer 55 by operating the input device 19 (for example, mouse over, tap, point).
- the designation input of the captured image that is the target for displaying the stay position of the suspect is received (step S31).
- the position information in other words, the position information of the suspect
- the camera 11 that captured the suspect by using a mouse pointer 55 having the shape of a human finger, for example, from among a plurality of captured images constituting the transition image 53. Any captured image 53a to be displayed is designated.
- the video surveillance display device 14 displays the imaging position mark 56 on the map information image 52 as the location information of the imaging point of the designated captured image 53a, and displays imaging auxiliary information 57 corresponding to the imaging position mark 56 ( Step S32).
- Switching display between the transition captured image of the suspect and the transition captured image of the guard FIG. 7 is a transition imaging that displays the transition captured image based on the position information of the guard from the transition captured image display screen 51 shown in FIG. It is a figure which shows the example of a switch to an image display screen.
- the transition captured image display screen 51 shown in the upper part of FIG. 7 shows a transition captured image 53 based on the behavior of the suspect, similar to the transition captured image display screen 51 shown in FIG.
- a switching selection screen SEL for switching the imaging target of the transition captured image. Is displayed in the center portion of the transition captured image display screen 51.
- the video surveillance display device 14 displays the selected security guard (for example, security guard) as shown in the lower part of FIG. A transition captured image based on the behavior of the worker A) is generated, and a transition captured image display screen 51 in which the transition captured image 53 of the suspect is switched to the transition captured image 53k of the guard (for example, the guard A) is displayed on the monitor 20 To do.
- the transition captured image 53k of the security guard includes, in addition to the captured images 53a of the individual security guards, an authenticated terminal RC that is attached or possessed by the security guard, A marker (eg, card reader marker MK1) indicating the authentication device CR when the color barcode CM is authenticated, or a marker (eg, BLE marker MK2) indicating the BLE receiver BR when a signal from the BLE transmission terminal BT is received. ) May be displayed so as to interrupt the time-series transition captured image 53k.
- a marker eg, card reader marker MK1 indicating the authentication device CR when the color barcode CM is authenticated
- a marker eg, BLE marker MK2 indicating the BLE receiver BR when a signal from the BLE transmission terminal BT is received.
- the authentication device CR for example, a card reader
- the fourth authentication device CR for example, a card reader
- a card reader marker MK1 is shown.
- the transition captured image 53k shown in the lower part of FIG. 7 shows the imaging time of the fifth captured image from the left end of the page.
- the BLE receiving device BR When the BLE receiving device BR receives a signal from the BLE transmitting terminal BT after the imaging time of the seventh captured image after that, the BLE marker MK2 indicating the BLE receiving device BR is shown sixth from the left end of the page. It is.
- FIG. 8 is a diagram showing an example of position information of a guard when the card reader marker MK1 is moused over.
- the video surveillance display device 14 displays the position information management server 21 and the guard.
- the installation position of the authentication device CR corresponding to the card reader marker MK1 subject to the mouse-over (for example, in the vicinity of the entrance of the jewelry store in FIG. 8), and the authentication device CR is the authenticated terminal RC Is displayed as the imaging accessory information 57.
- FIG. 9 is a diagram illustrating an example of the position range information of the guard when the BLE marker is moved over the mouse.
- the video surveillance display device 14 includes the position information management server 21 and the security guard. Referring to the information management server 22, the range of the source of the signal from the BLE transmission terminal received by the BLE reception device BR corresponding to the BLE marker MK2 that is the object of the mouse over (for example, the installation position of the BLE reception device in FIG. 9) And the time when the BLE receiving device BR receives the signal from the BLE transmitting terminal BT is displayed as the imaging auxiliary information 57.
- FIG. 10 is a diagram illustrating an example of a moving image reproduction screen corresponding to a captured image when any captured image is clicked on the transition captured image display screen illustrated in FIG.
- the transition captured image display screen 51 shown in the upper part of FIG. 10 when the user operates the input device 19 and designates one of the transition captured images 53 b with the mouse pointer 55 (for example, clicks).
- a captured image enlargement display screen 61 shown in the lower part of FIG. 10 is displayed, and a video reproduction screen 62 for displaying and reproducing the video for a predetermined time from which the captured image 53b is captured is displayed.
- the video playback screen 62 is provided with a playback button, a stop button, a fast forward button, a rewind button, and the like, and in accordance with a user operation instruction using the input device 19, playback of a moving image of a captured image is executed in an enlarged display state. Is done.
- the captured image enlargement display screen 61 is provided with a map information display button 63 for returning to the transition captured image display screen 51 including display of the original map information.
- the video playback screen 62 of the captured image enlargement display screen 61 makes it easier to recognize the characteristics of the suspect, such as an image in which the suspect is facing the front, while the user reproduces and visually recognizes the moving image of the captured image.
- a captured image of a desired still image By temporarily stopping at the state frame, it is possible to select a captured image of a desired still image. That is, a captured image of a suitable frame can be selected from a captured image of a moving image having a plurality of frames and extracted as a captured image of a still image.
- the map information display button 63 when the map information display button 63 is operated to return to the original transition captured image display screen 51, the video surveillance display device 14 reproduces the moving image corresponding to the captured image 53b by operating the map information display button 63.
- the frame is forcibly stopped, and the still image of the frame at the time of the stop is displayed as the corresponding captured image 53 b of the transition captured image 53.
- the user can confirm in detail the detailed content of the captured image in enlarged display, and output the captured image when outputting it as a security report (report) to be described later.
- Image frames can be easily determined.
- FIG. 11 is a flowchart showing an example of a procedure for reproducing the moving image shown in FIG.
- the video surveillance display device 14 indicates an instruction (for example, click, double tap, double click) of the mouse pointer 55 by an operation input of the input device 19 of the user. ) Or the like to receive an enlarged display instruction input of any one of the captured images 53 to be enlarged and displayed (step S41).
- a captured image that is a playback target of a moving image within a certain period before and after the captured image is captured by a mouse pointer 55 having the shape of a human finger. 53b is designated.
- the video surveillance display device 14 reads out the captured image data of a certain period before and after the designated captured image 53b is captured from the recorder 13, and displays the captured image enlarged display screen 61 of the captured image 53b on the monitor 20.
- the video surveillance display device 14 reproduces and displays the recorded video of the moving image of the captured image 53b on the entire display area of the monitor 20 by the video playback screen 62 of the captured image enlargement display screen 61 (step S42).
- -Incident-related information input FIG. 12 is a flowchart illustrating an example of a procedure for inputting incident-related information with respect to any captured image constituting a transition captured image based on a captured image of a suspect or a guard. In FIG.
- a designation input of a captured image as an information input target by a double tap on the touch panel or the like is received (step S51). For example, in the state where the video surveillance display device 14 displays on the monitor 20 a captured image just before the incident occurrence stored in the recorder 13, a captured image in which the suspect was captured by the security officer's visual judgment is selected. The captured image for inputting the incident related information is designated by the operation input of the guard.
- the video surveillance display device 14 inputs designation of a captured image that is an input target of incident related information.
- the video surveillance display device 14 inputs incident related information corresponding to the captured image in which the suspect corresponding to the designated input is captured (step S52).
- the imaging information including at least one of the imaging position and the imaging time when the captured image is captured may be acquired from the camera 11 or the recorder 13 and automatically input.
- the guard operates the keyboard of the input device 19 and inputs the type of alarm information, the characteristic information of the suspect, and the like.
- the incident related information is stored in the memory of the video surveillance display device 14, the database 16, or the recorder 13.
- An example of incident related information is shown below.
- Common Name / Name Common name ABCDE [Alarm information: Origin] From shoplifting prevention gate A [Alarm information: Occurrence time] 20:15:40 July 20, 2015 [Age] Visible around 35 years old [Gender] Visible to male [Height] About 160cm (Because it is about 10cm higher than the shoplifting prevention gate) [Remarks] I often wander around the parking lot.
- FIG. 13 is a diagram showing a selection example of the captured image to be output as the security report on the transition captured image display screen 51 shown in FIG. is there.
- the user operates the input device 19 and any captured image 53 c in the transition captured image 53 is designated by the mouse pointer 55.
- the video surveillance display device 14 displays an image selection menu near the display position of the designated captured image 53c.
- the video surveillance display device 14 displays the captured image 53c from which the image selection menu is displayed. Is selected as the output target of the security report.
- the video monitoring display device 14 displays the selected captured image 53c with a check mark CK (see FIG. 19).
- FIG. 14 is a diagram illustrating a non-selection example of a captured image output as a security report on the transition captured image display screen 51 illustrated in FIG.
- an image is displayed in a state in which any captured image 53 c is selected as a security report output target by a right click operation of the mouse pointer 55 or the like.
- the menu item non-selection 65 is designated by dragging the selection menu with the mouse pointer 55
- the video surveillance display device 14 cancels the selection of the captured image 53c as the output target of the security report, and outputs the security report. Exclude from the target.
- the video surveillance display device 14 hides the check mark CK for the captured image whose selection as the output target of the security report is released.
- FIG. 15 is a flowchart illustrating an example of a selection procedure for selecting a target of a captured image to be output as a security report on the transition captured image display screen 51 illustrated in FIG.
- the video surveillance display device 14 indicates an instruction (for example, right click and selection) of the mouse pointer 55 by an operation input of the user input device 19 when the transition captured image display screen 51 shown in FIG. 5 is displayed.
- a designated input of a captured image to be selected as an output target of a security report is received by each operation or each operation of long tap and selection) (step S61).
- the captured image 53c is designated as the output target of the security report.
- the video surveillance display device 14 sets the designated captured image 53c as the output target of the security report, adds a check mark CK (see FIG. 19), and displays it (step S62).
- FIG. 16 is a flowchart illustrating an example of a selection cancellation procedure for canceling selection candidates of a captured image output as a security report on the transition captured image display screen 51 illustrated in FIG. 13.
- the video surveillance display device 14 indicates an instruction of the mouse pointer 55 (for example, right click and non-display) by the operation input of the user input device 19 when the transition captured image display screen 51 shown in FIG.
- a designated input of a captured image to be canceled (non-selected) from the output target of the security report is received by each selection operation or each operation of long tap and non-selection (step S71).
- FIG. 17 is a diagram illustrating an example in which a non-display portion before and after a transition captured image is scrolled and displayed when dragged and dropped on any captured image. As shown in FIG.
- the video surveillance display device when the user operates the input device 19 on the transition captured image display screen 51 and moves the transition captured image 53 with the mouse pointer 55 (for example, drag and drop), the video surveillance display device is displayed. 14 moves and displays the image group of the transition captured image 53 according to the moving operation. Thereby, the video surveillance display device 14 can display the captured images before or after the captured time of the captured image displayed before the moving operation so as to appear in order. For example, when the mouse pointer 55 is operated to move the transition captured image 53 in the left direction, the video surveillance display device 14 can display an image group of transition captured images whose shooting time has gone back in the past before the moving operation. Further, when the mouse pointer 55 is operated to move the transition captured image 53 in the right direction, the video surveillance display device 14 can display an image group of transition captured images having a new shooting time before the moving operation.
- FIG. 18 is a flowchart showing an example of the scroll procedure shown in FIG.
- the video surveillance display device 14 operates the mouse pointer 55 by the operation input of the user input device 19 (for example, drag and drop, flick, swipe) when the transition captured image display screen 51 is displayed.
- the movement operation input of the image group of the transition captured image 53 currently being displayed is received (step S81).
- a movement instruction indicating a movement direction and a movement amount to be scrolled is input.
- the video surveillance display device 14 scrolls the image group of the transition captured image 53 in accordance with the movement instruction, and displays the image group of the transition captured image before or after the shooting time from the moving operation input time point in step S81 (step S81).
- step S81 the movement instruction indicating a movement direction and a movement amount to be scrolled
- FIG. 19 is a figure which shows the operation example of the print output of the security report containing the picked-up image of the selected suspect.
- the video surveillance display device 14 When the user operates the input device 19 and instructs (eg, clicks) the security report print button 54 with the mouse pointer 55 on the transition captured image display screen 51, the video surveillance display device 14. Generates a report of a security report (see FIG. 22) displaying the captured image selected as the output target of the security report with the check mark CK and the incident related information corresponding to the captured image. The data is output to the form output device 18 and printed out.
- FIG. 22 shows the user operates the input device 19 and instructs (eg, clicks) the security report print button 54 with the mouse pointer 55 on the transition captured image display screen 51.
- the video surveillance display device 14 Generates a report of a security report (see FIG. 22) displaying the captured image selected as the output target of the security report with the check mark CK and the incident related information corresponding to the captured image.
- the data is
- a report of a security report in which images 53d, 53e, 53f, and 53g are arranged in time series is generated.
- the captured images 53d, 53e, 53f, and 53g are obtained by outputting and displaying still images of output image frames selected from moving images of captured images of a plurality of frames in the security report.
- FIG. 20 is a diagram illustrating an operation example of print output of a security report including a captured image of a selected security guard.
- the video surveillance display device 14 Is a report of a security report that displays the captured image selected as the output target of the security report due to the addition of the check mark CK and the incident related information corresponding to the captured image (see FIGS. 23 and 24) Is generated and output to the form output device 18 for printing.
- FIG. 20 is a diagram illustrating an operation example of print output of a security report including a captured image of a selected security guard.
- a report of a security report in which images 53d, 53e, 53f, and 53g are arranged in time series is generated.
- the captured images 53d, 53e, 53f, and 53g are obtained by outputting and displaying still images of output image frames selected from moving images of captured images of a plurality of frames in the security report.
- FIG. 21 is a flowchart showing an example of the operation procedure of the print output shown in FIG. 19 or FIG.
- the video surveillance display device 14 is in response to an instruction (for example, printing button click, tap) of the mouse pointer 55 by an operation input of the user's input device 19 when the transition captured image display screen 51 is displayed.
- an instruction input for form print output is accepted (step S91).
- a pressing operation of the security report print button 54 is input in a state where at least one captured image (for example, a plurality of captured images) is selected as a security report output target.
- the video surveillance display device 14 arranges at least one picked-up image (for example, a plurality of picked-up images) selected as an output target of the security report among the transition picked-up images in time series, and picks up the attached image information for each picked-up image.
- a security report form associating the imaging position and the shooting time as 57 is generated, output to the form output device 18 and printed out (step S92).
- FIG. 22 is a diagram illustrating an example of a report printed out as a security report including a captured image of the suspect.
- a face detection source image 72 enlarged so as to clearly show the characteristics of the suspect is arranged at the upper part of the report 71, and is selected as an output target of the security report on the lower side.
- at least one captured image 73 (for example, a plurality of captured images 73) is arranged and displayed in time series.
- the face detection source image 72 is a detection source suspect image obtained by detecting the face of the suspect by the face matching server 17 based on the image captured by the camera 11 and storing the face image and face feature metadata in the database 16.
- a captured image having an angle at which the facial features of the suspect can be easily understood is used as a collation-source face image used for face collation.
- imaging attached information 74 including the name of the imaging position, the shooting date, and the shooting time is displayed as incident related information.
- captured images 73 captured in chronological order in the order of West entrance ⁇ Cosmetic store ⁇ Jewelry store ⁇ General store ⁇ Men's clothing store ⁇ Bookstore (in front of the bookstore). A transition captured image is shown.
- the user can grasp at a glance the characteristics of the suspect and the action history up to the occurrence of the incident at a glance by visually viewing the report 71 of the security report. Further, for example, only when a user having a specific editing authority logs in, the imaging attached information button 75 may be displayed in the report 71 shown in FIG. When a user having a specific editing authority designates one of the captured images 73 and clicks the captured auxiliary information button 75 with the mouse pointer 55 by an operation using the input device 19, the specified captured image 73 is displayed.
- the imaging accessory information 57 can be edited.
- FIG. 23 is a diagram illustrating an example of a report printed out as a security report including a captured image of a security guard.
- the face detection original image 72k enlarged and displayed so that the characteristics of the security guard are clearly shown is arranged at the upper part of the report 71k, and is selected as an output target of the security report on the lower side.
- at least one captured image 73k (for example, a plurality of captured images 73k) is arranged and displayed in time series.
- the face detection original image 72k is a security image of a detection source in which the face of the security guard is detected by the face matching server 17 based on the captured image of the camera 11 and the face image and the facial feature metadata are stored in the database 16.
- a captured image of an angle at which the facial features of the security guard are easy to understand is used, and becomes a face image of a collation source used at the time of face collation.
- imaging attached information 74k including the name of the imaging position, the shooting date, and the shooting time is displayed as incident related information.
- FIG. 23 based on the behavior history of the security guard, a transition captured image including a captured image 73 captured in time series in the order of West entrance ⁇ cosmetic department ⁇ jewelry store is shown.
- the action history of the guard is specifically listed along the items of date, place name, acquisition device name, and event name.
- the security guard corresponding to the face detection source image 72k is wearing or possessing the terminal RC to be authenticated, and firstly, it is authenticated by the authentication device CR-1 that it has passed through the door T1 at the west entrance, and then the jewelry store After being imaged by the camera 11-2, the face is collated by the face collation server 17, and thereafter, it is authenticated by the authentication device CR-r that it has passed through the south exit door T2.
- the signal from the BLE transmission terminal BT-3 was received by the BLE receiver BR-3 installed in the parking lot, and then from the parking lot.
- the fact that the vehicle passed through the south exit door T2 so as to return is authenticated by the authentication device CR-r.
- the image is captured by the camera 11-3 at the cosmetics department and verified by the face verification server 17.
- the user can grasp at a glance the characteristics of the guard and the action history of the guard who should track the suspect when the incident occurs by visually viewing the report 71k of the guard report. become able to. Further, for example, only when a user having a specific editing authority logs in, the report attached information button 75k and the action history button 76 may be displayed in the report 71k shown in FIG. A user who has a specific editing authority designates one of the captured images 73 by an operation using the input device 19 and then clicks the captured additional information button 75k or the action history button 76 with the mouse pointer 55. The attached image information 57 or the action history of the captured image 73 can be edited.
- FIG. 24 is a diagram showing an example of the next page of the report 71k shown in FIG.
- the identification number and name of the guard are displayed at the top of the report 71k, and further, the map information image 52 of the monitoring area that the guard circulates is displayed.
- the other information shown in FIG. 24 is the same as the report 71k shown in FIG.
- the security system 10 when a signal from the BLE transmission terminal BT mounted or held by the security officer who circulates the monitoring area of the camera 11 is received by the BLE reception device BR, When the authenticated terminal RC to be mounted or held is authenticated by the authentication device CR, or when the color barcode CM mounted or held by the guard is detected by the camera 11, the position information of the guard is the position information. Stored in the management server 21.
- the video surveillance display device 14 indicates that the person who caused the event (that is, the suspect) is the camera 11.
- the video surveillance display device 14 has a plurality of captured images in which the designated security guard is captured by the camera 11 when an operation for switching from the suspect to the security guard is performed on the switching selection screen SEL. And a marker indicating any one of the BLE transmission terminal BT, the authenticated terminal RC, and the color barcode CM (for example, the card reader marker MK1 and the BLE marker MK2) are arranged in time series along the imaging time or the detection time of the guard.
- the transition captured image 53k and the monitoring area map information image 52 are switched to be displayed on the monitor 20.
- the security system 10 detects and reacts when an event or incident occurs in the monitoring area, and extracts a captured image of the suspect or the security guard from the captured image of the camera 11, and the security guard.
- Security guards based on the results of various processing of the BLE receiving device BR, the authenticating device CR or the camera 11 (for example, signal reception from the BLE transmitting terminal BT, authentication of the authenticated terminal RC, detection of the color barcode CM) Position information can be easily obtained.
- the security system 10 displays on the monitor 20 an intuitive and visual action history of a guard who tracks a suspect or a suspect related to the occurrence of an event or incident in the monitoring area on the monitor 20. 52 in a simple and detailed manner.
- the video surveillance display device 14 specifies the captured image 53a designated in accordance with the designation of any captured image 53a constituting the transition captured image 53 of the suspect or the transition captured image 53k of the guard.
- the incident-related information including the imaging position and the imaging time for is displayed.
- the video surveillance display device 14 provides the user with the incident related information such as the imaging position and the imaging time corresponding to the designated captured image, regardless of the transition captured image 53 of the suspect or the transition captured image 53k of the guard. It can be confirmed in detail.
- a security report print button for instructing generation of a report 71 as a security report indicating a behavior history of the suspect is displayed on the screen on which the transition image 53 of the suspect is displayed on the monitor 20. 54 is displayed.
- the video surveillance display device 14 uses the part or all of the captured image 53a constituting the transition captured image 53 in accordance with the designation of the security report print button 54 when this screen is displayed, and the action of the suspect
- the report output device 18 connected to the video surveillance display device 14 is caused to print the report 71 (see FIG. 22) indicating the history.
- the video surveillance display device 14 prints out a report of the suspicious person's intuitive and visual behavior history when an event or incident occurs in the surveillance area by printing the suspect's action history form. It can be easily obtained and contributes to the reporting duties necessary for the security company.
- a security report print button for instructing generation of a report 71k as a security report indicating a security history of the security guard is displayed on the screen on which the transition captured image 53k of the security guard is displayed on the monitor 20. 54 is displayed.
- the video surveillance display device 14 uses the part or all of the captured image 53a constituting the transition captured image 53k according to the designation of the security report print button 54 when this screen is displayed, and the behavior of the guard
- the report output device 18 connected to the video surveillance display device 14 is caused to print the report 71k (see FIG. 23 or FIG. 24) indicating the history.
- the video surveillance display device 14 can print out a form of a guard's action history to output any event in the surveillance area, and where the guard is to track the suspect when an incident occurs. It is possible to easily obtain an intuitive and visual action history report document indicating whether or not such an action has been performed, which can contribute to a reporting duty necessary for the operation of the security company.
- the security guards previously wear or hold a color barcode that defines a plurality of color patterns, and this color barcode is detected by the camera 11.
- a special transmitter or receiver such as the BLE transmission terminal BT, the authenticated terminal RC, the BLE reception device BR, and the authentication device CR is provided.
- the camera 11 can easily acquire the position information of the security guard by detecting the color barcode by image processing of the captured image.
- the security system 10 when the signal from the BLE transmission terminal BT that is mounted or held by the security guard who goes around the monitoring area of the camera 11 is received at the BLE receiver BR, the security system 10 wears it.
- the authenticated terminal RC to be held is authenticated by the authentication device CR, or when the color barcode CM attached or held by the security guard is detected by the camera 11, the position information of the security guard in the monitoring area is obtained. It is stored in the location information management server 21.
- the video surveillance display device 14 tracks the person who caused the event (that is, the suspect).
- a security guard extracts a plurality of captured images captured by the camera 11 and displays on the monitor 20 a transition captured image 53k and a map information image 52 of the imaging region arranged in time series along the imaging time.
- the security system 10 detects when an event or event occurs in the monitoring area, the sensor 12 detects the captured image of the security guard from the captured image of the camera 11, and the BLE receiving device BR and the authentication device CR.
- the position information of the security guard can be easily obtained based on the results of various processes of the camera 11 (for example, signal reception from the BLE transmission terminal BT, authentication of the authenticated terminal RC, detection of the color barcode CM). Therefore, the security system 10 associates an intuitive and visual action history of a guard who tracks a suspect about an occurrence of an event or incident in the monitoring area on the monitor 20 with the map information image 52 of the monitoring area. Can be shown simply.
- the video surveillance display device 14 displays either the transition captured image 53 based on the behavior of the suspect or the transition captured image 53k based on the behavior of the guard on the transition captured image display screen 51.
- the security report print button 54 is designated by an operation using the input device 19 by the user, the reports as the security reports shown in FIGS. Form data may be generated and output to the form output device 18 for printing.
- the video surveillance display device 14 can generate a report that efficiently contributes to the reporting duty necessary for the security company's business for both the suspect and the guard.
- the present disclosure relates to a security system and a person image display method that can easily show an intuitive and visual action history of a suspect who is involved in the occurrence of an event or incident in a surveillance area or a guard who tracks the suspect. Useful.
Landscapes
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Alarm Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
Abstract
警備システムは、監視領域を撮像するカメラと、カメラにより撮像された撮像画像を記憶するレコーダと、監視領域における事象を検知するセンサと、カメラ又はレコーダからの監視領域の撮像画像をモニタに表示する映像監視表示装置と、監視領域を巡回する警備員により装着又は保持されるBLE送信端末からの信号を検知するBLE受信装置とを備える。映像監視表示装置は、監視領域において事象が検知された時、被疑者又は警備員の撮像画像を抽出して時系列に並べてモニタに表示する。更に、映像監視表示装置は、警備員の撮像画像を表示する際、BLE送信端末の位置情報も対応付けて表示する。
Description
本開示は、監視カメラを用いて監視対象の人物を監視し、所定の事象が発生した場合に事象の発生に関係があると推察される被疑者、又は監視領域を巡回する警備員の画像表示を行う警備システム及び人物画像表示方法に関する。
昨今、広大な店舗(例えばホームセンター又はショッピングモール)、公共施設(例えば駅やスタジアム)、オフィス、工場、倉庫などの種々の場所において、複数の監視カメラが設置され、それぞれの監視カメラの監視領域における人物等の監視対象を撮影することが多くなっている。また、この種の監視カメラを用いて、監視領域において事件などの所定の事象(又は「イベント」とも言われる)が発生した場合に、監視対象場所の運営者、警備請負会社又は警察等に報知、報告等を行う警備システムが利用されている。
警備システムの従来例としては、例えば特許文献1に記載のように、建物周囲の監視エリアに侵入した不審者を検出して警報を発する警備システムが知られている。この警備システムは、監視エリアへの許可者である第1の移動体と、監視エリアへの非許可者である第2の移動体とが同時に監視エリア内において検知されている場合、許可者の移動軌跡と非許可者の移動軌跡に応じて、非許可者が不審者か否か判定する。これにより、この警備システムは、例えばユーザを脅して屋内へ侵入しようとする押込み強盗を的確に検出することができる。
特許文献1の警備システムは、不審者の判定を行い、不審者を検出した場合に通報する機能を有しており、通報に基づいて、不審者の存在の認識、現場へ急行する等の対応が可能となっている。しかしながら、特許文献1の構成では、例えば事件発生時に被疑者又はその被疑者を追跡する警備員のいずれかの行動記録(行動履歴)を示す警備レポートを得ようとすると、監視カメラにより撮像されて録画された複数の画像から被疑者又は警備員が映っている画像をユーザが手動で選択して表示するなど、警備レポートの作成作業のために多くの手間を要していた。このため、監視領域において何かしらの事象、事件の発生前後において、その事件に関係する被疑者又は警備員の行動履歴を時系列で視覚的に把握するなど、被疑者又は警備員の直感的かつ視覚的な行動履歴を簡単に取得することが困難であった。
本開示は、上述した従来の課題を解決するために、監視領域における何かしらの事象、事件の発生に関する被疑者又はその被疑者を追跡する警備員の直感的かつ視覚的な行動履歴を簡易に示すことができる警備システム及び人物画像表示方法を提供することを目的とする。
本開示は、監視領域を撮像するカメラと、カメラにより撮像された監視領域の撮像画像を記憶するレコーダと、監視領域における事象を検知するセンサと、カメラ又はレコーダからの監視領域の撮像画像を表示部に表示する映像監視表示装置と、監視領域を巡回する警備員により装着又は保持されるコードを検知するコード検知装置と、を備え、映像監視表示装置は、監視領域において事象が検知された場合に、事象の被疑者が撮像された複数の撮像画像を抽出し、抽出された複数の撮像画像を撮像時間に沿って時系列に並べた第1遷移撮像画像と監視領域の地図情報とを表示し、被疑者から警備員への切替操作に応じて、警備員が撮像された複数の撮像画像とコード検知装置により検知されたコードとを抽出し、抽出された複数の撮像画像とコードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた第2遷移撮像画像と監視領域の地図情報とに切り替えて表示する、警備システムを提供する。
また、本開示は、カメラ、レコーダ、センサ、コード検知装置及び映像監視表示装置を含む警備システムにおける人物画像表示方法であって、カメラにより監視領域を撮像し、レコーダによりカメラにより撮像された撮像画像を記憶し、センサにより監視領域における事象を検知し、コード検知装置により監視領域を巡回する警備員により装着又は保持されるコードを検知し、映像監視表示装置によりカメラ又はレコーダからの監視領域の撮像画像を表示部に表示し、映像監視表示装置における監視領域の撮像画像の表示において、監視領域において事象が検知された場合に、事象の被疑者が撮像された複数の撮像画像を抽出し、抽出された複数の撮像画像を撮像時間に沿って時系列に並べた第1遷移撮像画像と監視領域の地図情報とを表示し、被疑者から警備員への切替操作に応じて、警備員が撮像された複数の撮像画像とコード検知装置により検知されたコードとを抽出し、抽出された複数の撮像画像又はコードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた第2遷移撮像画像と監視領域の地図情報とに切り替えて表示する、人物画像表示方法を提供する。
また、本開示は、監視領域を撮像するカメラと、カメラにより撮像された監視領域の撮像画像を記憶するレコーダと、監視領域における事象を検知するセンサと、カメラ又はレコーダからの監視領域の撮像画像を表示部に表示する映像監視表示装置と、監視領域を巡回する警備員により装着又は保持されるコードを検知するコード検知装置と、を備え、映像監視表示装置は、コード検知装置により検知されたコードを基に、センサにより監視領域において事象が検知された時の警備員が撮像された複数の撮像画像とコードとを抽出し、抽出された複数の撮像画像とコードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた遷移撮像画像と監視領域の地図情報とを表示する、警備システムを提供する。
更に、本開示は、カメラ、レコーダ、センサ、コード検知装置及び映像監視表示装置を含む警備システムにおける人物画像表示方法であって、カメラにより監視領域を撮像し、レコーダによりカメラにより撮像された撮像画像を記憶し、センサにより監視領域における事象を検知し、コード検知装置により監視領域を巡回する警備員により装着又は保持されるコードを検知し、映像監視表示装置によりカメラ又はレコーダからの監視領域の撮像画像を表示部に表示し、映像監視表示装置における監視領域の撮像画像の表示において、コード検知装置により検知されたコードを基に、センサにより監視領域において事象が検知された時の警備員が撮像された複数の撮像画像とコードとを抽出し、抽出された複数の撮像画像とコードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた遷移撮像画像と監視領域の地図情報とを表示する、人物画像表示方法を提供する。
本開示によれば、監視領域における何かしらの事象、事件の発生に関する被疑者又はその被疑者を追跡する警備員の直感的かつ視覚的な行動履歴を簡易に示すことができる。
以下、適宜図面を参照しながら、本開示に係る警備システム及び人物画像表示方法を具体的に開示した実施形態(以下、「本実施形態」という)を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面及び以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより請求の範囲に記載の主題を限定することは意図されていない。
本実施形態では、警備システムの一例として、監視領域としてのショッピングモールなどの複合店舗の各所に複数の監視カメラを設けて監視領域の撮影を行い、監視領域において何かしらの事象(例えば盗難等の事件)が発生した場合に、その事象を引き起こした被疑者、その被疑者を追跡する警備員の撮像画像を含む報告を行うシステムの構成例を示す。但し、本開示に係る警備システム及び人物画像表示方法の実施形態は、後述する本実施形態の内容に限定されない。
[警備システムの構成]
図1は、本実施形態の警備システム10のシステム構成の一例を示すブロック図である。警備システム10は、複数のカメラ11-1~11-n、複数の各種のセンサ12-1~12-k、複数のレコーダ13-1~13-mを有する。n、k、mは2以上の整数である。
図1は、本実施形態の警備システム10のシステム構成の一例を示すブロック図である。警備システム10は、複数のカメラ11-1~11-n、複数の各種のセンサ12-1~12-k、複数のレコーダ13-1~13-mを有する。n、k、mは2以上の整数である。
カメラ11-1~11-nは、レンズ及びイメージセンサを有して構成され、監視領域内の既定の場所を撮影可能に各所に設けられ、各設置場所の天井、壁などに取り付けられる。レンズは、例えば140度以上の広い視野角が得られる広角レンズが用いられ、視野の範囲にある被写体像をイメージセンサの撮像面(受光面)に結像させる。イメージセンサは、例えばCCD(Charged-Coupled Device)又はCMOS(Complementary Metal Oxide Semiconductor)等による撮像デバイスであり、撮像面(受光面)に結像した光学像を電気信号に変換する。カメラ11-1~11-nは、設置場所の条件、システム構成等に応じて、任意のn個設けられる。カメラ11-1~11-nは、それぞれが配置された設置場所の被写体を撮像し、各監視領域におけるカメラ撮影映像を取得する。カメラ11-1~11-nは、カメラ撮影映像として、例えば各監視領域の動画像を撮影する。
センサ12-1~12-kは、例えば万引き防止ゲート、顔照合アラーム、火災報知器、金属探知機、物体センサ、タッチセンサなどの各種のセンサのうちのいずれかが用いられ、設置場所と検知目的に応じたセンサが監視領域の各所に設けられる。センサ12-1~12-kは、設置場所の条件、システム構成等に応じて、任意のk個設けられる。センサ12-1~12-kは、検知対象の人物、物、事象などを検知した時、アラーム情報を出力する。例えば、店舗内の未購入の商品に万引き防止用タグが付与されている場合に、万引き犯がその商品を購入せずに万引きした上で万引き防止ゲートを通過した場合、センサの一例としての万引き防止ゲートはアラームを鳴動する(つまり、アラーム情報を出力する)。
レコーダ13-1~13-mは、ハードディスク又は半導体メモリ等のストレージデバイスを有して構成され、カメラ11-1~11-nによって撮像されたカメラ撮影映像を記憶(録画)する。レコーダ13-1~13-mは、設置場所の条件、システム構成等に応じて、任意のm個設けられる。レコーダ13-1~13-mは、録画映像として、カメラ撮影映像の動画像だけでなく、動画像から生成した静止画像のカメラ撮影画像を記憶してもよい。
また、警備システム10は、映像監視表示装置14、各種センサ管理装置15、データベース16、顔照合サーバ17、帳票出力装置18、入力デバイス19、モニタ20を有する。
カメラ11-1~11-n、各種のセンサ12-1~12-k、レコーダ13-1~13-m、映像監視表示装置14、各種センサ管理装置15、データベース16、顔照合サーバ17、帳票出力装置18、位置情報管理サーバ21、警備員情報管理サーバ22、BLE受信装置BR-1~BR-p、認証装置CR-1~CR-rは、ネットワーク25を介して相互に接続され、データ又は情報の送受信が可能である。ネットワーク25は、無線ネットワーク又は有線ネットワークである。無線ネットワークは、例えば無線LAN(Local Area Network)、無線WAN(Wide Area Network)、3G、LTE(Long Term Evolution)又はWiGig(Wireless Gigabit)である。有線ネットワークは、例えばイントラネット又はインターネットである。
映像監視表示装置14は、コンピュータ(例えばPC(Personal Computer))を用いて構成され、所定のコンピュータプログラムに従ってプロセッサ及びメモリが協働することにより、動画像のカメラ撮影映像又は静止画像のカメラ撮影画像(以下、これらをまとめて「撮像画像」と称する)に関する各種処理を実行する。映像監視表示装置14は、例えばCPU(Central Processing Unit)、MPU(Micro Processing Unit)又はDSP(Digital Signal Processor)等のプロセッサと、RAM(Random Access Memory)又はフラッシュメモリ等によるワーキングメモリと、ROM(Read Only Memory)等によるプログラムメモリ、データメモリと、データの送受信を行う通信インタフェースとを用いて構成される。映像監視表示装置14は、カメラ11-1~11-n及びレコーダ13-1~13-mからの撮像画像、位置情報管理サーバ21により記憶されている警備員の位置情報(後述参照)並びに警備員情報管理サーバ22により記憶されている警備員情報を入力し、撮像画像を表示したり、後述する警備レポートとしての報告書の生成等の処理を行ったりする。
各種センサ管理装置15は、コンピュータ(例えばPC)を用いて構成され、所定のコンピュータプログラムに従ってプロセッサ及びメモリが協働することにより、各種のセンサ12-1~12-kが出力するアラーム情報の管理に関する各種処理を実行する。例えば各種センサ管理装置15は、それぞれのセンサ12-1~12-kの検知条件を設定し、センサ12-1~12-kにおける検知条件を含む管理情報を管理し、センサ12-1-~12-kの管理情報を映像監視表示装置14に出力する。各種センサ管理装置15は、映像監視表示装置14とともに同一のコンピュータによって構成されてもよい。
映像監視表示装置14は、それぞれの検知条件が設定されたセンサ12-1~12-kのうち少なくとも1つがアラーム情報を出力してそのアラーム情報を取得(受信)した時、監視領域のアラーム情報を出力したセンサの周囲で所定の事象(例えば何かしらの事故、事件)がそのセンサにより検知されたことを認識する。なお、センサ12-1~12-kが検知する事象には、カメラ11-1~11-nのうちいずれかのカメラが自己の撮像画像を用いて特定の人物、物体等を検知するイベントも含まれ、この場合にはカメラ11-1~11-nがセンサ12-1~12-kとして機能する。本実施形態では、各種センサ管理装置15は盗難等の事件の発生を検知条件として設定し、この設定の下で、映像監視表示装置14は、その検知条件に従ってセンサが反応して出力したアラーム情報の入力によって、事件の発生を認識する。
データベース16は、ストレージデバイス(例えばハードディスク)を用いて構成され、カメラ11-1~11-nにより撮像された撮像画像中に存在する人物の顔情報を保存する。データベース16が保存する顔情報は、例えばそれぞれの顔画像のデータと顔画像の特徴を示す顔特徴メタデータとが対応付けられた情報である。
顔照合サーバ17は、コンピュータ(例えばPC)を用いて構成され、サーバ用の所定のコンピュータプログラムに従ってプロセッサ及びメモリが協働することにより、カメラ11-1~11-nにより撮像された撮像画像中の顔情報の照合処理を実行する。顔照合サーバ17は、顔画像のデータ(サムネイルを含む)と顔特徴メタデータとを取得する特徴データ取得部(不図示)と、照合対象の顔画像と照合元の顔特徴メタデータとを比較照合して一致するかを判定するする顔照合部(不図示)と、顔情報の送受信を行う通信部(不図示)とを有する。
顔照合サーバ17は、データベース16に保存された顔画像と顔特徴メタデータとを用いて、カメラ11-1~11-nにより撮像された撮像画像又はレコーダ13-1~13-mに記憶された撮像画像に現れる人物がデータベース16に保存された顔画像と同一か否か(つまり、同一人物か否か)を照合する。本実施形態では、顔照合サーバ17は、センサにより検知された事象(例えば事件)を引き起こした人物(言い換えれば、被疑者)又はその被疑者を追跡する警備員の顔照合を行い、複数の撮像画像の中から被疑者又は警備員の顔と一致する顔画像を判定し、被疑者又は警備員が写っている撮像画像を抽出する。これらの抽出された撮像画像はデータベース16により保存される。
印刷装置の一例としての帳票出力装置18は、例えば印刷機能を有するプリンタにより構成され、映像監視表示装置14に接続され、映像監視表示装置14により生成された撮像画像を含む報告書(図22~図24参照)の帳票を印刷出力する。なお、帳票出力装置18は、警備レポートとしての報告書の帳票データを、ネットワークを介して他の装置、例えば外部に設けられる警備請負会社の監視センター等に出力してもよい。
入力デバイス19は、例えばマウス、キーボード、タッチパネル又はタッチパッドを用いて構成され、映像監視表示装置14に接続され、使用者の入力操作に従って各種操作や設定に関する指示を映像監視表示装置14へ入力する。
モニタ20は、例えばLCD(Liquid Crystal Display)又は有機EL(Electroluminescence)による表示デバイスを用いて構成され、映像監視表示装置14に接続され、映像監視表示装置14にて生成された撮像画像に関する各種表示画面を表示する。入力デバイス19としてタッチパネルが使用される場合、モニタ20の上に透光性のタッチセンサによる入力デバイス19が重ねて配置される。これにより、表示デバイスとしてのモニタ20と入力デバイスとしてのタッチパネルとが複合され、使用者は直感的な操作が可能となる。入力デバイス19とモニタ20とが複合されて使用される場合、映像監視表示装置14は、スマートフォン又はタブレット端末が適用可能となる。
また、警備システム10は、BLE送信端末BT-1~BT-p、BLE受信装置BR-1~BR-p、被認証端末RC-1~RC-r、認証装置CR-1~CR-r、カラーバーコードCM-1~CM-q、位置情報管理サーバ21、警備員情報管理サーバ22を有する。p、r、qは2以上の整数である。
以下、カメラ11-1~11-n、センサ12-1~12-k、レコーダ13-1~13-m、BLE送信端末BT-1~BT-p、BLE受信装置BR-1~BR-p、被認証端末RC-1~RC-r、認証装置CR-1~CR-r、カラーバーコードCM-1~CM-qの各々の説明を区別することなく同一の説明が可能である場合には、カメラ11、センサ12、レコーダ13、BLE送信端末BT、BLE受信装置BR、被認証端末RC、認証装置CR、カラーバーコードCMのように符号を略記する(図2参照)。
コードの一例としてのBLE送信端末BTは、例えば監視領域を巡回したり被疑者を追跡したりする警備員の制服の胸ポケットに装着又は所持される送信機である。BLE送信端末BTは、例えば近距離無線通信技術であるBluetooth(登録商標)の通信圏内に、警備員の位置情報を示すための信号を送信する。ここで、BLE送信端末BT及びBLE受信装置BRは、Bluetooth(登録商標)の拡張使用の一つであるBLE(Bluetooth(登録商標) Low Energy)を用いた通信機能を有する。BLE送信端末BTは、例えば自己を中心とした半径10mの範囲内に警備員の位置情報を示すための信号を送信することができる。
コード検知装置の一例としてのBLE受信装置BRは、監視領域の各所に設置され、BLE送信端末BTから送信された信号を受信するための受信機である。BLE受信装置BRは、BLE送信端末BTから送信された信号を受信することで、BLE送信端末BTを装着又は保持する警備員の位置情報を把握することができ、警備員の位置情報を位置情報管理サーバ21に保存する。
コードの一例としての被認証端末RCは、例えば監視領域を巡回したり被疑者を追跡したりする警備員の制服の胸ポケットに装着又は所持される被認証媒体である。被認証端末RCは、例えば装着者又は所持者である警備員の識別情報を保存する識別情報保存部(不図示)と、認証装置CRとの間で認証のための信号を送受信する送受信部(不図示)と格納されたICチップを保持するカードである。
コード検知装置の一例としての認証装置CRは、監視領域の各所に設置され、警備員が装着又は保持する被認証端末RCから送信された信号を受信して正当な被認証端末であるか否かを認証することで、正当な被認証端末が認証装置CRの設置場所を通過したことを検知することができる。認証装置CRは、例えば入退室の扉の付近に配置され、被認証端末RCの一例としてのカードを所持する警備員がその扉を通過することを認証するカードリーダである。認証装置CRは、警備員の位置情報を位置情報管理サーバ21に保存する。
コードの一例としてのカラーバーコードCMは、例えば監視領域を巡回したり被疑者を追跡したりする警備員の制服又は名札等に印字され、カラーバーコードCM毎に異なる複数のカラーパターンが規定された警備員の識別情報である。カラーバーコードCMの一例として、例えばカメレオンコード(登録商標)を用いることも可能である。カラーバーコードCMは、監視領域を撮像するコード検知装置の一例としてのカメラ11-1~11-nのうちいずれかのカメラの画像処理によって検知される。そのカメラは、検知したカラーバーコードCMをいずれかの認証装置CRに送信する。カメラからのカラーバーコードCMの送信先としての認証装置CRは、例えばカラーバーコードCMを検知したカメラと一対一に予め対応付けられた認証装置である。例えばカメラとそのカメラに最も近い位置に設置された認証装置とが一対一に対応付けられる。認証装置CRは、警備員情報管理サーバ22を参照し、カメラから送信されたカラーバーコードCMと予めそのカラーバーコードCMに対応付けられた警備員であるか否かを認証し、認証が成功した場合に、カラーバーコードCMを検知したカメラの位置情報を警備員の位置情報として、位置情報管理サーバ21に保存する。
位置情報管理サーバ21は、コンピュータ(例えばPC)を用いて構成され、サーバ用の所定のコンピュータプログラムに従ってプロセッサ及びメモリが協働することにより、BLE受信装置BR又は認証装置CRから出力された警備員の位置情報を警備員情報と対応付けて保存する処理を実行する。位置情報管理サーバ21は、警備レポート印刷処理部142からのリクエストがあると、警備レポート印刷処理部142にレスポンスとしての警備員位置情報を出力する。
警備員情報管理サーバ22は、コンピュータ(例えばPC)を用いて構成され、サーバ用の所定のコンピュータプログラムに従ってプロセッサ及びメモリが協働することにより、警備員情報(例えば警備員の識別情報、警備員の氏名、個々の警備員に割り当てられたカラーバーコードCM)を保存する処理を実行する。警備員情報管理サーバ22は、警備レポート印刷処理部142からのリクエストがあると、警備レポート印刷処理部142にレスポンスとしての警備員情報を出力する。
図2は、本実施形態の警備システム10の機能的構成の一例を示すブロック図である。映像監視表示装置14は、撮像画像及び事件関連情報のモニタ20への表示出力に関する処理を実行する映像監視制御部141と、撮像画像及び事件関連情報を含む警備レポートとしての報告書の生成と帳票出力装置18への印刷出力に関する処理を実行する警備レポート印刷処理部142とを有する。
カメラ11により撮像されたカメラ撮影映像は、映像監視表示装置14の映像監視制御部141と顔照合サーバ17とに送られるとともに、レコーダ13に送られて記憶される。また、カメラ11は、撮像している現在のカメラ撮影映像(言い換えると、ライブ映像)を、映像監視表示装置14を介してモニタ20に送出してリアルタイムに表示することも可能である。
レコーダ13に記憶された動画像又は静止画像のカメラ撮影画像(撮像画像)は、映像監視制御部141に送られる。また、レコーダ13は、記憶している撮像画像を、映像監視表示装置14を介してモニタ20に送出して表示することも可能である。
顔照合処理部としての機能を有する顔照合サーバ17は、カメラ11により撮像されたカメラ撮影映像を入力し、撮像画像中に含まれる人物の顔を検知し、検知した顔の顔特徴メタデータと顔画像とを抽出してデータベース16に出力する。
顔情報保存部としての機能を有するデータベース16は、顔照合サーバ17から送られる顔特徴メタデータと顔画像とを含む顔情報を保存する。また、顔照合サーバ17は、カメラ11が撮像している撮像画像中の顔画像について、データベース16に保存した顔画像と顔特徴メタデータとを用いて、同一人物の顔画像であるかどうか照合する。
センサ12により所定の事象として盗難等の事件発生が検知された場合、センサ12から出力されたアラーム情報が映像監視制御部141に入力される。アラーム情報は、例えば店舗の出入口付近に設置された万引き防止ゲートの検知信号、カードリーダ等を用いた所定エリアへの入退出時の扉の解錠信号、店舗の敷地周辺のフェンスに設置されたタッチセンサの検知信号が含まれる。また、カメラ11をセンサ12として用いて、通常は人が侵入しない場所において撮像画像に人物が検出された場合に検知情報を発することも可能である。
映像監視制御部141は、事件発生を知らせるアラーム情報が入力された場合、使用者である警備員による入力デバイス19の操作入力に従って、撮像画像から被疑者又は警備員の顔画像を設定する。顔照合サーバ17は、映像監視制御部141により設定された被疑者又は警備員の顔画像と同一の顔画像がレコーダ13に記録された撮像画像の中に映っているか否かを検索し、同一の被疑者又は警備員の顔画像を含む撮像画像を抽出する。
なお、事件発生の検知は、センサ12からのアラーム情報だけでなく、警備員がモニタ20にてライブ映像のカメラ撮影映像を見て不審な動きなどから事件発生を確認し、入力デバイス19の操作入力により行うことも可能である。
映像監視制御部141は、抽出した被疑者又は警備員を含む撮像画像をモニタ20に表示させる。また、映像監視制御部141は、使用者による入力デバイス19の操作入力に従って、撮像画像に関連する被疑者及び事件等のメモ、又は警備員及び事件等のメモとして使用する事件関連情報を入力し、映像監視表示装置14のメモリ(不図示)、データベース16、若しくはレコーダ13に記憶する。また、映像監視制御部141は、使用者による入力デバイス19の操作入力に従って、撮像画像、事件関連情報を含む各種表示画面を生成し、モニタ20に表示させる。
警備レポート印刷処理部142は、使用者による入力デバイス19の操作入力に従って、位置情報管理サーバ21や警備員情報管理サーバ22にリクエストを出力するとともに、位置情報管理サーバ21や警備員情報管理サーバ22からのレスポンスを用いて、報告書の生成用に選択された撮像画像、事件関連情報を含む警備レポートを生成し、帳票出力装置18に出力する。帳票出力装置18は、警備レポート印刷処理部142により生成された警備レポート(報告書)を印刷出力する。
[警備システムの動作]
図3は、本実施形態の警備システム10における警備員の位置情報の取得動作手順の一例を示すフローチャートである。図3において、先ず、使用者による入力デバイス19の操作入力により、警備員情報と、警備員がBLE送信端末BTを装着又は所持する場合にはBLE送信端末BTの識別情報と、警備員が被認証端末RC(カラーバーコードCMを含む)を装着又は所持する場合には被認証端末RCとが警備員情報管理サーバ22に初期登録される(ステップS1)。なお、ステップS1では、監視領域に設置された認証装置CRの設置位置、BLE受信装置BRの設置位置に関する情報も警備員情報管理サーバ22に登録されてもよい。
図3は、本実施形態の警備システム10における警備員の位置情報の取得動作手順の一例を示すフローチャートである。図3において、先ず、使用者による入力デバイス19の操作入力により、警備員情報と、警備員がBLE送信端末BTを装着又は所持する場合にはBLE送信端末BTの識別情報と、警備員が被認証端末RC(カラーバーコードCMを含む)を装着又は所持する場合には被認証端末RCとが警備員情報管理サーバ22に初期登録される(ステップS1)。なお、ステップS1では、監視領域に設置された認証装置CRの設置位置、BLE受信装置BRの設置位置に関する情報も警備員情報管理サーバ22に登録されてもよい。
ステップS1の後、ステップS2a、ステップS2b又はステップS2cのうちいずれかが実行される。即ち、警備員がBLE送信端末BTを装着又は所持する場合には、BLE受信装置BRは、BLE送信端末BTからの信号を受信する(ステップS2a)。又は、警備員が被認証端末RCを装着又は所持する場合には、認証装置CRは、被認証端末RCからの信号を受信する(ステップS2b)。又は、警備員がカラーバーコードCMを装着又は所持する場合には、認証装置CRは、カメラ11により検知されたカラーバーコードとステップS1において初期登録されたカラーバーコードとが一致するか認証を行う(ステップS2c)。
ステップS2a、ステップS2b又はステップS2cの後、位置情報管理サーバ21は、BLE受信装置BR又は認証装置CRから出力された警備員の位置情報を保存して蓄積する(ステップS3)。ステップS3の後、BLE送信端末BT及び被認証端末RCからの信号が受信されず、更に、カメラ11から送信されるべきカラーバーコードが認証装置CRにおいて受信されない場合には(ステップS4、NO)、図3に示す処理は終了する。一方、BLE送信端末BT又は被認証端末RCからの信号が受信され、又はカメラ11から送信されたカラーバーコードが認証装置CRにおいて受信された場合には(ステップS4、NO)、図3に示す処理はステップS2a、ステップS2b又はステップS2cのいずれかが実行され、警備員の位置情報の位置情報管理サーバ21における蓄積が継続される。
図4は、本実施形態の警備システム10における主要な動作を示すフローチャートである。監視領域において、カメラ11は各設置場所の監視領域を継続して撮影し、レコーダ13はカメラ11により撮影されたカメラ撮影映像を記憶する。この際、映像監視表示装置14は、カメラ11及びレコーダ13からカメラ撮影映像を取得可能となっている。また、図3に示す警備員の位置情報の蓄積処理は、図4に示す処理のいずれのタイミングで実行されてもよい。
図4において、先ず、顔照合サーバ17は、カメラ11により撮影されたカメラ撮影映像を受信して取得する(ステップS11)。顔照合サーバ17は、カメラ撮影映像から映像内の人物の顔を検知し、顔の特徴を示す顔特徴メタデータと顔画像とをデータベース16に出力して保存させる(ステップS12)。
本実施形態の警備システム10が配備された店舗において、盗難等の事件が発生した場合、映像監視表示装置14は、センサ12からのアラーム情報を受信して取得する(ステップS13)。アラーム情報を受信した場合、映像監視表示装置14は、モニタ20にアラーム情報を表示して事件の発生を報知してもよい。
アラーム情報の受信により、映像監視表示装置14は、事件発生時の処理を実行する。即ち、映像監視表示装置14は、レコーダ13に記憶された撮像画像から被疑者又はその被疑者を追跡する警備員が映っている撮像画像を抽出し、事件関連情報を入力する(ステップS14)。ここで、映像監視表示装置14は、使用者である警備員による入力デバイス19の操作入力に従って、被疑者又は警備員が撮像された撮像画像を選択し、被疑者又は警備員の撮像画像に対応する事件関連情報を入力する。
被疑者又は警備員が撮像された撮像画像を選択する場合、例えば、映像監視表示装置14は、レコーダ13に記憶された事件発生時点(アラーム情報受信時点)の少し前の撮像画像を読み出してモニタ20に表示し、被疑者又は警備員が撮像されている候補画像として30フレーム程度の撮像画像を選択する。そして、映像監視表示装置14は、使用者による入力デバイス19の操作入力に従って、候補画像をコマ送りするなどして候補画像の中から被疑者の顔の特徴が分かりやすい角度の撮像画像を警備員が指定して選択する。この際、撮像画像において被疑者又は警備員の顔画像を含む領域をトリミングして拡大してもよい。
顔照合サーバ17は、被疑者又は警備員が撮像された撮像画像に関しても、被疑者又は警備員の顔特徴メタデータと顔画像とを抽出し、データベース16に出力して保存させる。この場合、顔照合サーバ17は、上記のように映像監視表示装置14により選択された被疑者又は警備員の顔の特徴が分かりやすい角度の撮像画像を元にして、顔特徴メタデータと顔画像とを取得する。そして、顔照合サーバ17は、レコーダ13に記憶された現在までの撮像画像について、撮像画像中の顔画像を被疑者又は警備員の顔画像と照合し、被疑者又は警備員の顔画像を含む撮像画像を検索する(ステップS15)。これにより、顔照合サーバ17において、事件発生前から事件発生後までの異なる時間、場所における被疑者又は警備員が撮像された撮像画像が抽出可能となる。
なお、顔照合サーバ17は、被疑者が撮像された撮像画像を抽出する場合に、撮像画像中からカラーバーコードを読み取って被疑者を検知することも可能である。例えば、入場者が店内でショッピングカート、ショッピングバスケット、ショッピングバッグなどを保持することが一般的である店舗において、特定の入場者とショッピングカート等の場内備品との対応付けが可能な環境下では、場内備品にカラーバーコードを付しておき、顔照合サーバ17は、店内の各監視領域の撮像画像からカラーバーコードを検出することによって特定の人物を追跡することができる。この場合、顔照合サーバ17は、顔照合とカラーバーコード検出の処理を実行し、被疑者の顔画像と所定範囲内に一緒に存在するカラーバーコードとを紐付けて、対応するカラーバーコードを追跡して検出する。これにより、特定のカラーバーコードが検出された撮像画像によって、被疑者が撮像された撮像画像を抽出可能となる。カラーバーコードは、例えば二次元バーコードなどを適宜用いればよい。もちろん、カラーバーコードとして、上記したカメレオンコード(登録商標)を用いてもよい。
続いて、映像監視表示装置14は、抽出された事件発生までの被疑者の撮像画像を用いて、被疑者の行動に基づく遷移撮像画像を時系列にモニタ20に表示する。また、映像監視表示装置14は、遷移撮像画像とともに、各撮像画像が撮影された位置を示す地図情報画像52とを同時にモニタ20に表示する(ステップS16)。以下の説明において、遷移撮像画像とは、センサ12が反応する事件発生時より一定時間前から一定時間後までの被疑者又は警備員の行動に基づいて、異なる時間、場所における同一の被疑者又は警備員の複数の撮像画像が時系列に経過時間とともに並べて配置された撮像画像である。
映像監視表示装置14は、ステップS16において表示された遷移撮像画像(例えば被疑者の遷移撮像画像)と地図情報画像52とが表示された画面に対し、いずれかの警備員の行動に基づく遷移撮像画像の時系列表示に切り替えるための操作が入力デバイス19により入力されると(ステップS17、YES)、選択された警備員の行動に基づく遷移撮像画像と各撮像画像が撮影された位置を示す地図情報画像52とを同時にモニタ20に表示する(ステップS18)。一方、いずれかの警備員の行動に基づく遷移撮像画像の時系列表示に切り替えるための操作がなされない場合には(ステップS17、NO)、図4に示す処理はステップS21に進む。
また、映像監視表示装置14は、ステップS18において表示された遷移撮像画像(例えば警備員の遷移撮像画像)と地図情報画像52とが表示された画面に対し、被疑者の行動に基づく遷移撮像画像の時系列表示に切り替えるための操作が入力デバイス19により入力されると(ステップS19、YES)、選択された被疑者の行動に基づく遷移撮像画像と各撮像画像が撮影された位置を示す地図情報画像52とを同時にモニタ20に表示する(ステップS20)。一方、被疑者の行動に基づく遷移撮像画像の時系列表示に切り替えるための操作がなされない場合には(ステップS19、NO)、図4に示す処理はステップS21に進む。
映像監視表示装置14は、警備員又は他の使用者による帳票出力ボタンの押下などの入力デバイス19の操作入力に従って、帳票出力指示を入力する(ステップS21)。この帳票出力指示に基づき、映像監視表示装置14は、遷移撮像画像を時系列に表示した警備レポートを生成し、帳票出力装置18から警備レポートの帳票を印刷出力させる(ステップS22)。警備レポートには、遷移撮像画像に対応付けて事件関連情報を一緒に表示する。なお、警備レポートの帳票データは、帳票出力装置18からネットワークを介して、外部に設けられる警備請負会社の監視センター等の他の装置に出力してもよい。
[各処理の詳細動作]
・撮像画像及び地図情報の表示
図5は、被疑者の撮像画像に基づく遷移撮像画像と監視領域の地図情報とを表示する遷移撮像画像表示画面の一例を示す図である。図5に示す遷移撮像画像表示画面51は、映像監視表示装置14の処理によってモニタ20に表示される。遷移撮像画像表示画面51は、例えば画面下端の辺に沿って一列に並んで被疑者が撮像された複数の撮像画像が時系列に配置される。この時系列に配置された撮像画像によって、被疑者の行動履歴を示す遷移撮像画像53が形成される。遷移撮像画像表示画面51における遷移撮像画像53の上側には、監視領域内の各撮像画像の撮像位置を示す地図情報画像52が配置される。地図情報画像52は、警備システム10の監視対象となる店舗のレイアウトが地図によって示され、各カメラ11の配置に基づいてそれぞれの監視領域の撮像画像の撮像位置が地図上に表示可能になっている。
・撮像画像及び地図情報の表示
図5は、被疑者の撮像画像に基づく遷移撮像画像と監視領域の地図情報とを表示する遷移撮像画像表示画面の一例を示す図である。図5に示す遷移撮像画像表示画面51は、映像監視表示装置14の処理によってモニタ20に表示される。遷移撮像画像表示画面51は、例えば画面下端の辺に沿って一列に並んで被疑者が撮像された複数の撮像画像が時系列に配置される。この時系列に配置された撮像画像によって、被疑者の行動履歴を示す遷移撮像画像53が形成される。遷移撮像画像表示画面51における遷移撮像画像53の上側には、監視領域内の各撮像画像の撮像位置を示す地図情報画像52が配置される。地図情報画像52は、警備システム10の監視対象となる店舗のレイアウトが地図によって示され、各カメラ11の配置に基づいてそれぞれの監視領域の撮像画像の撮像位置が地図上に表示可能になっている。
例えば、遷移撮像画像表示画面51において使用者が入力デバイス19を操作して遷移撮像画像53のうちの特定の撮像画像53aの上にマウスポインタ55を位置させる(例えばマウスオーバーさせる)と、特定の撮像画像53aに対応する撮像位置マーク56と、撮像画像の撮像付属情報57とが表示される。撮像位置マーク56は、地図情報画像52上に丸印などの位置を示すマークが表示される。撮像付属情報57は、撮像位置マーク56に対応する撮像位置(カメラ11の設置位置)の名称(例えば西入口)、撮影日(YYYY/MM/DD)、撮影時間(hh/mm/ss)などが表示される。また、遷移撮像画像53の他の撮像画像上にマウスポインタ55を順に位置させていくと、映像監視表示装置14は、マウスポインタ55の推移に従って、撮像位置マーク56と撮像付属情報57を切り替えて表示し、指定された撮像画像に対応する撮像位置と撮像位置情報を表示する(例えば図5の下段の西入口→宝石店→雑貨→メンズ参照)。
図6は、図5に示す遷移撮像画像表示画面51の中で指定された撮像画像の撮像位置情報の表示手順を示すフローチャートである。図6において、映像監視表示装置14は、遷移撮像画像表示画面51が表示されている時に、使用者の入力デバイス19の操作入力により、マウスポインタ55の指示(例えば、マウスオーバー、タップ、ポイント)などにより、被疑者の滞在位置を表示させる対象となる撮像画像の指定入力を受け付ける(ステップS31)。この場合、遷移撮像画像53を構成する複数の撮像画像の中から、例えば人の指の形状を有するマウスポインタ55により、被疑者を撮像したカメラ11の位置情報(言い換えれば、被疑者の位置情報)の表示対象となるいずれかの撮像画像53aが指定される。
映像監視表示装置14は、指定された撮像画像53aの撮像地点の位置情報として、撮像位置マーク56を地図情報画像52上に表示し、撮像位置マーク56に対応する撮像付属情報57を表示する(ステップS32)。
・被疑者の遷移撮像画像と警備員の遷移撮像画像との間の切替表示
図7は、図5に示す遷移撮像画像表示画面51から警備員の位置情報に基づく遷移撮像画像を表示する遷移撮像画像表示画面への切替例を示す図である。図7の上段に示す遷移撮像画像表示画面51には、図5に示す遷移撮像画像表示画面51と同様に被疑者の行動に基づく遷移撮像画像53が示されている。図7の上段に示す遷移撮像画像表示画面51に対し、使用者が入力デバイス19を操作したことで切替選択ボタン54kが指定されると、遷移撮像画像の撮像対象を切り替えるための切替選択画面SELが遷移撮像画像表示画面51の中央部分に表示される。続けて切替選択画面SELに対していずれかの警備員(例えば警備員A)が選択されると、図7の下段に示すように、映像監視表示装置14は、選択された警備員(例えば警備員A)の行動に基づく遷移撮像画像を生成し、被疑者の遷移撮像画像53から警備員(例えば警備員A)の遷移撮像画像53kに切り替えた遷移撮像画像表示画面51をモニタ20上に表示する。
・被疑者の遷移撮像画像と警備員の遷移撮像画像との間の切替表示
図7は、図5に示す遷移撮像画像表示画面51から警備員の位置情報に基づく遷移撮像画像を表示する遷移撮像画像表示画面への切替例を示す図である。図7の上段に示す遷移撮像画像表示画面51には、図5に示す遷移撮像画像表示画面51と同様に被疑者の行動に基づく遷移撮像画像53が示されている。図7の上段に示す遷移撮像画像表示画面51に対し、使用者が入力デバイス19を操作したことで切替選択ボタン54kが指定されると、遷移撮像画像の撮像対象を切り替えるための切替選択画面SELが遷移撮像画像表示画面51の中央部分に表示される。続けて切替選択画面SELに対していずれかの警備員(例えば警備員A)が選択されると、図7の下段に示すように、映像監視表示装置14は、選択された警備員(例えば警備員A)の行動に基づく遷移撮像画像を生成し、被疑者の遷移撮像画像53から警備員(例えば警備員A)の遷移撮像画像53kに切り替えた遷移撮像画像表示画面51をモニタ20上に表示する。
なお、図7の下段に示す遷移撮像画像表示画面51では、警備員の遷移撮像画像53kには、個々の警備員の撮像画像53aの他に、警備員が装着又は所持する被認証端末RC、カラーバーコードCMが認証された場合の認証装置CRを示すマーカ(例えばカードリーダマーカMK1)や、BLE送信端末BTからの信号が受信された場合のBLE受信装置BRを示すマーカ(例えばBLEマーカMK2)が時系列な遷移撮像画像53kに割り込むように表示されてもよい。例えば警備員(例えば警備員A)が被認証端末RC(例えばカード)を装着又は所持している場合、図7の下段に示す遷移撮像画像53kには、紙面左端から3番目の撮像画像の撮像時間の後であって5番目の撮像画像の撮像時間の前に、認証装置CR(例えばカードリーダ)が被認証端末RCを認証した場合、紙面左端から4番目に認証装置CR(例えばカードリーダ)を示すカードリーダマーカMK1が示される。また、例えば警備員(例えば警備員A)がBLE送信端末BTを装着又は所持している場合、図7の下段に示す遷移撮像画像53kには、紙面左端から5番目の撮像画像の撮像時間の後であって7番目の撮像画像の撮像時間の前に、BLE受信装置BRがBLE送信端末BTからの信号を受信した場合、紙面左端から6番目にBLE受信装置BRを示すBLEマーカMK2が示される。
なお図7では、被疑者の遷移撮像画像53から警備員の遷移撮像画像53kに切り替わる例が示されているが、その逆方向、つまり警備員の遷移撮像画像53kから被疑者の遷移撮像画像53に切り替えて表示されてもよい。
図8は、カードリーダマーカMK1がマウスオーバーされた時の警備員の位置情報を示す例を示す図である。図8に示す遷移撮像画像表示画面51において、使用者が入力デバイス19を操作したことでマウスポインタ55がカードリーダマーカMK1をマウスオーバーすると、映像監視表示装置14は、位置情報管理サーバ21及び警備員情報管理サーバ22を参照し、マウスオーバーの対象となったカードリーダマーカMK1に対応する認証装置CRの設置位置(例えば図8では宝石店の入り口付近)と、認証装置CRが被認証端末RCを認証した時間とを撮像付属情報57として表示する。
図9は、BLEマーカがマウスオーバーされた時の警備員の位置範囲情報を示す例を示す図である。図9に示す遷移撮像画像表示画面51において、使用者が入力デバイス19を操作したことでマウスポインタ55がBLEマーカMK2をマウスオーバーすると、映像監視表示装置14は、位置情報管理サーバ21及び警備員情報管理サーバ22を参照し、マウスオーバーの対象となったBLEマーカMK2に対応するBLE受信装置BRが受信したBLE送信端末からの信号の発信元の範囲(例えば図9ではBLE受信装置の設置位置である本屋の入り口付近を中心とした半径10m程度の範囲、同図の点線参照)と、BLE受信装置BRがBLE送信端末BTからの信号を受信した時間とを撮像付属情報57として表示する。
・撮像画像の拡大表示
図10は、図5に示す遷移撮像画像表示画面においていずれかの撮像画像がクリックされた時に撮像画像に対応する動画像の再生画面の一例を示す図である。図10の上段に示す遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して遷移撮像画像53のうちのいずれかの撮像画像53bをマウスポインタ55によって指定する(例えばクリックする)と、図10の下段に示す撮像画像拡大表示画面61が表示され、撮像画像53bが撮像された所定時間分の映像が拡大表示して再生されるための映像再生画面62が表示される。映像再生画面62は、再生ボタン、停止ボタン、早送りボタン、巻き戻しボタンなどが設けられ、入力デバイス19を用いた使用者の操作指示に従って、拡大表示した状態で撮像画像の動画像の再生が実行される。撮像画像拡大表示画面61には、元の地図情報の表示を含む遷移撮像画像表示画面51に戻るための地図情報表示ボタン63が設けられる。
・撮像画像の拡大表示
図10は、図5に示す遷移撮像画像表示画面においていずれかの撮像画像がクリックされた時に撮像画像に対応する動画像の再生画面の一例を示す図である。図10の上段に示す遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して遷移撮像画像53のうちのいずれかの撮像画像53bをマウスポインタ55によって指定する(例えばクリックする)と、図10の下段に示す撮像画像拡大表示画面61が表示され、撮像画像53bが撮像された所定時間分の映像が拡大表示して再生されるための映像再生画面62が表示される。映像再生画面62は、再生ボタン、停止ボタン、早送りボタン、巻き戻しボタンなどが設けられ、入力デバイス19を用いた使用者の操作指示に従って、拡大表示した状態で撮像画像の動画像の再生が実行される。撮像画像拡大表示画面61には、元の地図情報の表示を含む遷移撮像画像表示画面51に戻るための地図情報表示ボタン63が設けられる。
撮像画像拡大表示画面61の映像再生画面62は、使用者が撮像画像の動画像を再生して視認しながら、例えば被疑者が正面を向いている画像など、被疑者の特徴をより認識し易い状態のフレームで一時停止することによって、所望の静止画像の撮像画像を選択できる。即ち、複数フレームを有してなる動画像の撮像画像から、好適なフレームの撮像画像を選択して静止画像の撮像画像として抽出することができる。この場合、地図情報表示ボタン63を操作して元の遷移撮像画像表示画面51に戻ると、映像監視表示装置14は、地図情報表示ボタン63の操作によって撮像画像53bに対応する動画像の再生を強制的に停止し、その停止時点におけるフレームの静止画像を遷移撮像画像53の該当する撮像画像53bとして表示する。使用者は、この映像再生画面62を閲覧することで、撮像画像の拡大表示による詳細内容を詳細に確認することができるとともに、後述する警備レポート(報告書)として出力する際の撮像画像の出力画像フレームを容易に決定することが可能になる。
図11は、図10に示す動画像の再生手順の一例を示すフローチャートである。図11において、映像監視表示装置14は、遷移撮像画像表示画面51が表示されている時に、使用者の入力デバイス19の操作入力により、マウスポインタ55の指示(例えば、クリック、ダブルタップ、ダブルクリック)などにより、遷移撮像画像53のうちの拡大表示対象となるいずれかの撮像画像の拡大表示指示入力を受け付ける(ステップS41)。この場合、遷移撮像画像53を構成する複数の撮像画像の中から、例えば人の指の形状を有するマウスポインタ55により、撮像画像の撮像前後の一定期間内の動画像の再生対象となる撮像画像53bが指定される。
映像監視表示装置14は、指定された撮像画像53bが撮像された前後の一定期間の撮像画像のデータをレコーダ13から読み出し、撮像画像53bの撮像画像拡大表示画面61をモニタ20上に表示する。映像監視表示装置14は、撮像画像拡大表示画面61の映像再生画面62により、撮像画像53bの動画像の録画映像をモニタ20の表示領域の全面に再生表示する(ステップS42)。
・事件関連情報の入力
図12は、被疑者又は警備員の撮像画像に基づく遷移撮像画像を構成するいずれかの撮像画像に対する事件関連情報の入力手順の一例を示すフローチャートである。図12において、映像監視表示装置14は、センサ12から出力されたアラーム情報を取得すると、事件発生時の処理として、使用者である警備員による入力デバイス19の操作入力により、例えばマウスのクリック、タッチパネルのダブルタップなどによる情報入力対象の撮像画像の指定入力を受け付ける(ステップS51)。例えば、映像監視表示装置14がレコーダ13に記憶された事件発生時点の少し前の撮像画像をモニタ20に表示している状態で、警備員の目視判断により被疑者が撮像された撮像画像が選択され、警備員の操作入力によって事件関連情報を入力するための撮像画像が指定される。映像監視表示装置14は、事件関連情報の入力対象となる撮像画像の指定を入力する。
・事件関連情報の入力
図12は、被疑者又は警備員の撮像画像に基づく遷移撮像画像を構成するいずれかの撮像画像に対する事件関連情報の入力手順の一例を示すフローチャートである。図12において、映像監視表示装置14は、センサ12から出力されたアラーム情報を取得すると、事件発生時の処理として、使用者である警備員による入力デバイス19の操作入力により、例えばマウスのクリック、タッチパネルのダブルタップなどによる情報入力対象の撮像画像の指定入力を受け付ける(ステップS51)。例えば、映像監視表示装置14がレコーダ13に記憶された事件発生時点の少し前の撮像画像をモニタ20に表示している状態で、警備員の目視判断により被疑者が撮像された撮像画像が選択され、警備員の操作入力によって事件関連情報を入力するための撮像画像が指定される。映像監視表示装置14は、事件関連情報の入力対象となる撮像画像の指定を入力する。
映像監視表示装置14は、指定入力に該当する被疑者が撮像された撮像画像に対応する、事件関連情報を入力する(ステップS52)。なお、事件関連情報において、撮像画像を撮像した撮像位置、撮影時間の少なくとも一方を含む撮像情報は、映像監視表示装置14がカメラ11又はレコーダ13から取得して自動的に入力してもよい。
事件関連情報としては、例えば警備員が入力デバイス19のキーボードを操作して、アラーム情報の種別、被疑者の特徴情報などを入力する。事件関連情報は、映像監視表示装置14のメモリ、又はデータベース16、若しくはレコーダ13に記憶される。事件関連情報の一例を以下に示す。
[通称・名称]通称ABCDE
[アラーム情報:発生元]万引き防止ゲートAより
[アラーム情報:発生時間]2015年7月20日20時15分40秒
[年齢]35歳前後に見える
[性別]男性に見える
[身長]160cm程度に見える(万引き防止ゲートより10cm程度高いため)
[備考]よく駐車場周辺をうろついている
・撮像画像の警備レポートへの出力選択
図13は、図5に示す遷移撮像画像表示画面51において警備レポートとして出力する撮像画像の選択例を示す図である。図13に示すように、図5に示す遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して遷移撮像画像53の中でいずれかの撮像画像53cがマウスポインタ55によって指定される(例えば右クリックされる)と、映像監視表示装置14は、指定された撮像画像53cの表示位置付近に画像選択メニューを表示する。この画像選択メニューが表示された時に、画像選択メニューがマウスポインタ55によってドラッグ操作されてメニュー項目の選択64が指定されると、映像監視表示装置14は、画像選択メニューの表示元の撮像画像53cを警備レポートの出力対象として選択する。映像監視表示装置14は、選択された撮像画像53cに対し、チェックマークCK(図19参照)を付与して表示する。
[通称・名称]通称ABCDE
[アラーム情報:発生元]万引き防止ゲートAより
[アラーム情報:発生時間]2015年7月20日20時15分40秒
[年齢]35歳前後に見える
[性別]男性に見える
[身長]160cm程度に見える(万引き防止ゲートより10cm程度高いため)
[備考]よく駐車場周辺をうろついている
・撮像画像の警備レポートへの出力選択
図13は、図5に示す遷移撮像画像表示画面51において警備レポートとして出力する撮像画像の選択例を示す図である。図13に示すように、図5に示す遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して遷移撮像画像53の中でいずれかの撮像画像53cがマウスポインタ55によって指定される(例えば右クリックされる)と、映像監視表示装置14は、指定された撮像画像53cの表示位置付近に画像選択メニューを表示する。この画像選択メニューが表示された時に、画像選択メニューがマウスポインタ55によってドラッグ操作されてメニュー項目の選択64が指定されると、映像監視表示装置14は、画像選択メニューの表示元の撮像画像53cを警備レポートの出力対象として選択する。映像監視表示装置14は、選択された撮像画像53cに対し、チェックマークCK(図19参照)を付与して表示する。
図14は、図5に示す遷移撮像画像表示画面51において警備レポートとして出力する撮像画像の非選択例を示す図である。図14に示すように、図5に示す遷移撮像画像表示画面51において、マウスポインタ55の右クリック操作などによりいずれかの撮像画像53cに対して警備レポートの出力対象として選択された状態で、画像選択メニューをマウスポインタ55によってドラッグ操作してメニュー項目の非選択65が指定されると、映像監視表示装置14は、撮像画像53cの警備レポートの出力対象としての選択を解除し、警備レポートの出力対象から除外する。この除外により、映像監視表示装置14は、警備レポートの出力対象としての選択が解除された撮像画像に対し、チェックマークCKを非表示する。
図15は、図5に示す遷移撮像画像表示画面51において警備レポートとして出力する撮像画像の対象を選択する選択手順の一例を示すフローチャートである。図15において、映像監視表示装置14は、図5に示す遷移撮像画像表示画面51が表示されている時に、使用者の入力デバイス19の操作入力によるマウスポインタ55の指示(例えば右クリック及び選択の各操作、又はロングタップ及び選択の各操作)などにより、警備レポートの出力対象として選択するための撮像画像の指定入力を受け付ける(ステップS61)。この場合、遷移撮像画像53において、警備レポートの出力対象として、撮像画像53cが指定される。映像監視表示装置14は、指定された撮像画像53cを、警備レポートの出力対象に設定し、チェックマークCK(図19参照)を付与して表示する(ステップS62)。
図16は、図13に示す遷移撮像画像表示画面51において警備レポートとして出力する撮像画像の選択候補を解除する選択解除手順の一例を示すフローチャートである。図16において、映像監視表示装置14は、図13に示す遷移撮像画像表示画面51が表示されている時に、使用者の入力デバイス19の操作入力によるマウスポインタ55の指示(例えば、右クリック及び非選択の各操作、又はロングタップ及び非選択の各操作)などにより、警備レポートの出力対象から解除(非選択)対象にする撮像画像の指定入力を受け付ける(ステップS71)。この場合、遷移撮像画像53において、警備レポートの出力対象として、ステップS71の指定入力がなされる前に既に警備レポートの出力対象として選択されていた撮像画像53cが指定される。映像監視表示装置14は、指定された撮像画像53cを、警備レポートの出力対象を解除するように設定し、チェックマークCK(図19参照)を非表示する(ステップS72)。
・遷移撮像画像のスクロール表示
図17は、いずれかの撮像画像に対してドラッグアンドドロップされた時に遷移撮像画像の前後の非表示部分をスクロールして表示させる例を示す図である。図17に示すように、遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して遷移撮像画像53をマウスポインタ55によって移動操作する(例えばドラッグアンドドロップする)と、映像監視表示装置14は、移動操作に応じて遷移撮像画像53の画像群を移動して表示する。これにより、映像監視表示装置14は、移動操作前に表示されていた撮像画像の撮影時間より前又は後の撮像画像を順に現れるように表示することができる。例えば、マウスポインタ55が遷移撮像画像53を左方向に移動操作すると、映像監視表示装置14は、移動操作前より撮影時間が過去に遡った遷移撮像画像の画像群を表示できる。また、マウスポインタ55が遷移撮像画像53を右方向に移動操作すると、映像監視表示装置14は、移動操作前より撮影時間が新しい遷移撮像画像の画像群を表示できる。
・遷移撮像画像のスクロール表示
図17は、いずれかの撮像画像に対してドラッグアンドドロップされた時に遷移撮像画像の前後の非表示部分をスクロールして表示させる例を示す図である。図17に示すように、遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して遷移撮像画像53をマウスポインタ55によって移動操作する(例えばドラッグアンドドロップする)と、映像監視表示装置14は、移動操作に応じて遷移撮像画像53の画像群を移動して表示する。これにより、映像監視表示装置14は、移動操作前に表示されていた撮像画像の撮影時間より前又は後の撮像画像を順に現れるように表示することができる。例えば、マウスポインタ55が遷移撮像画像53を左方向に移動操作すると、映像監視表示装置14は、移動操作前より撮影時間が過去に遡った遷移撮像画像の画像群を表示できる。また、マウスポインタ55が遷移撮像画像53を右方向に移動操作すると、映像監視表示装置14は、移動操作前より撮影時間が新しい遷移撮像画像の画像群を表示できる。
図18は、図17に示すスクロール手順の一例を示すフローチャートである。図18において、映像監視表示装置14は、遷移撮像画像表示画面51が表示されている時に、使用者の入力デバイス19の操作入力によるマウスポインタ55の操作(例えば、ドラッグアンドドロップ、フリック、スワイプ)などにより、現在表示中の遷移撮像画像53の画像群の移動操作入力を受け付ける(ステップS81)。この場合、遷移撮像画像53において、スクロールの対象となる移動方向及び移動量を示す移動指示が入力される。映像監視表示装置14は、移動指示に応じて遷移撮像画像53の画像群をスクロールさせ、ステップS81の移動操作入力時点よりも撮影時間が前又は後の遷移撮像画像の画像群を表示する(ステップS82)。
・警備レポートの印刷出力
図19は、選択された被疑者の撮像画像を含む警備レポートの印刷出力の操作例を示す図である。図19に示すように、遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して警備レポート印刷ボタン54をマウスポインタ55によって指示操作する(例えばクリックする)と、映像監視表示装置14は、チェックマークCKが付与されたことで警備レポートの出力対象として選択された撮像画像と、この撮像画像に対応する事件関連情報とを表示した警備レポートの報告書(図22参照)を生成し、帳票出力装置18に出力して印刷出力させる。図19の例では、遷移撮像画像53の中から、チェックマークCKが付与された4つの撮像画像53d、53e、53f、53gが選択され、映像監視表示装置14は、被疑者の行動を示す撮像画像53d、53e、53f、53gを時系列に並べた警備レポートの報告書を生成する。それぞれの撮像画像53d、53e、53f、53gは、警備レポートにおいて、複数フレームの撮像画像の動画像から選択された出力画像フレームの静止画像が出力され表示されたものとなる。
・警備レポートの印刷出力
図19は、選択された被疑者の撮像画像を含む警備レポートの印刷出力の操作例を示す図である。図19に示すように、遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して警備レポート印刷ボタン54をマウスポインタ55によって指示操作する(例えばクリックする)と、映像監視表示装置14は、チェックマークCKが付与されたことで警備レポートの出力対象として選択された撮像画像と、この撮像画像に対応する事件関連情報とを表示した警備レポートの報告書(図22参照)を生成し、帳票出力装置18に出力して印刷出力させる。図19の例では、遷移撮像画像53の中から、チェックマークCKが付与された4つの撮像画像53d、53e、53f、53gが選択され、映像監視表示装置14は、被疑者の行動を示す撮像画像53d、53e、53f、53gを時系列に並べた警備レポートの報告書を生成する。それぞれの撮像画像53d、53e、53f、53gは、警備レポートにおいて、複数フレームの撮像画像の動画像から選択された出力画像フレームの静止画像が出力され表示されたものとなる。
図20は、選択された警備員の撮像画像を含む警備レポートの印刷出力の操作例を示す図である。図20に示すように、遷移撮像画像表示画面51において、使用者が入力デバイス19を操作して警備レポート印刷ボタン54をマウスポインタ55によって指示操作する(例えばクリックする)と、映像監視表示装置14は、チェックマークCKが付与されたことで警備レポートの出力対象として選択された撮像画像と、この撮像画像に対応する事件関連情報とを表示した警備レポートの報告書(図23及び図24参照)を生成し、帳票出力装置18に出力して印刷出力させる。図20の例では、遷移撮像画像53の中から、チェックマークCKが付与された4つの撮像画像53d、53e、53f、53gが選択され、映像監視表示装置14は、警備員の行動を示す撮像画像53d、53e、53f、53gを時系列に並べた警備レポートの報告書を生成する。それぞれの撮像画像53d、53e、53f、53gは、警備レポートにおいて、複数フレームの撮像画像の動画像から選択された出力画像フレームの静止画像が出力され表示されたものとなる。
図21は、図19又は図20に示す印刷出力の動作手順の一例を示すフローチャートである。図21において、映像監視表示装置14は、遷移撮像画像表示画面51が表示されている時に、使用者の入力デバイス19の操作入力によるマウスポインタ55の指示(例えば、印刷ボタンクリック、タップ)などにより、帳票印刷出力の指示入力を受け付ける(ステップS91)。この場合、少なくとも1つの撮像画像(例えば複数の撮像画像)が警備レポートの出力対象として選択された状態で警備レポート印刷ボタン54の押下操作が入力される。映像監視表示装置14は、遷移撮像画像の中で警備レポートの出力対象として選択された少なくとも1つの撮像画像(例えば複数の撮像画像)を時系列に配置し、各撮像画像に対して撮像付属情報57としての撮像位置及び撮影時間を対応付けた警備レポートの帳票を生成し、帳票出力装置18に出力して印刷出力させる(ステップS92)。
図22は、被疑者の撮像画像を含む警備レポートとして印刷出力された報告書の一例を示す図である。警備レポートとしての報告書71は、被疑者の特徴が明確に示されるように拡大表示された顔検出元画像72が報告書71の上部に配置され、下側に警備レポートの出力対象として選択された少なくとも1つの撮像画像73(例えば複数の撮像画像73)が時系列に配置されて表示されている。顔検出元画像72は、カメラ11の撮像画像を基に顔照合サーバ17により被疑者の顔検出がなされて顔画像と顔特徴メタデータとがデータベース16に記憶された検出元の被疑者画像であり、被疑者の顔の特徴が分かりやすい角度の撮像画像が用いられ、顔照合時に利用される照合元の顔画像となるものである。各撮像画像73の下部には、撮像位置の名称と撮影日、撮影時間を含む撮像付属情報74が事件関連情報として表示されている。図22の例では、被疑者の行動履歴に基づいて、西入口→化粧品売り場→宝石店→雑貨店→紳士服売り場→書店前(本屋前)の順に、時系列に撮像された撮像画像73を含む遷移撮像画像が示されている。
使用者は、この警備レポートの報告書71を目視で閲覧することで、被疑者の特徴、事件発生までの行動履歴を時系列に一目で把握することができるようになる。また、例えば特定の編集権限を有する使用者がログインした場合に限って、図22に示す報告書71には撮像付属情報ボタン75が表示されてもよい。特定の編集権限を有する使用者は、入力デバイス19を用いた操作により、いずれかの撮像画像73を指定した上で撮像付属情報ボタン75をマウスポインタ55によってクリックすると、指定された撮像画像73の撮像付属情報57を編集することができる。
図23は、警備員の撮像画像を含む警備レポートとして印刷出力された報告書の一例を示す図である。警備レポートとしての報告書71kは、警備員の特徴が明確に示されるように拡大表示された顔検出元画像72kが報告書71kの上部に配置され、下側に警備レポートの出力対象として選択された少なくとも1つの撮像画像73k(例えば複数の撮像画像73k)が時系列に配置されて表示されている。顔検出元画像72kは、カメラ11の撮像画像を基に顔照合サーバ17により警備員の顔検出がなされて顔画像と顔特徴メタデータとがデータベース16に記憶された検出元の警備員画像であり、警備員の顔の特徴が分かりやすい角度の撮像画像が用いられ、顔照合時に利用される照合元の顔画像となるものである。各撮像画像73kの下部には、撮像位置の名称と撮影日、撮影時間を含む撮像付属情報74kが事件関連情報として表示されている。図23の例では、警備員の行動履歴に基づいて、西入口→化粧品売り場→宝石店の順に、時系列に撮像された撮像画像73を含む遷移撮像画像が示されている。更に、図23に示す報告書71kには、警備員の行動履歴が、年月日、場所名、取得デバイス名、イベント名の各項目に沿って具体的に列挙されている。
例えば顔検出元画像72kに対応する警備員は、被認証端末RCを装着又は所持しており、先ず西入口の扉T1を通過したことが認証装置CR-1により認証され、その後、宝石店のカメラ11-2により撮像された上で顔照合サーバ17によって照合され、その後、南出口の扉T2を通過したことが認証装置CR-rにより認証されている。更にその後、警備員は、南出口から駐車場に行った時にBLE送信端末BT-3からの信号が駐車場に設置されているBLE受信装置BR-3において受信されており、その後、駐車場から戻ってくるように南出口の扉T2を通過したことが認証装置CR-rにより認証され、最後に化粧品売り場のカメラ11-3により撮像された上で顔照合サーバ17により照合されている。
使用者は、この警備レポートの報告書71kを目視で閲覧することで、警備員の特徴、事件が発生した時に被疑者を追跡するべき警備員の行動履歴を時系列に一目で把握することができるようになる。また、例えば特定の編集権限を有する使用者がログインした場合に限って、図23に示す報告書71kには撮像付属情報ボタン75k及び行動履歴ボタン76が表示されてもよい。特定の編集権限を有する使用者は、入力デバイス19を用いた操作により、いずれかの撮像画像73を指定した上で撮像付属情報ボタン75k又は行動履歴ボタン76をマウスポインタ55によってクリックすると、指定された撮像画像73の撮像付属情報57又は行動履歴を編集することができる。
図24は、図23に示す報告書71kの次ページの一例を示す図である。図24に示す報告書71kでは、報告書71kの上部に警備員の識別番号及び氏名が表示され、更に、警備員が巡回する監視領域の地図情報画像52が表示されている。図24に示すその他の情報は図23に示す報告書71kと同様であるため、説明を省略する。
以上により、本実施形態の警備システム10では、カメラ11の監視領域を巡回する警備員により装着又は保持されるBLE送信端末BTからの信号がBLE受信装置BRにおいて受信された場合、同警備員により装着又は保持される被認証端末RCが認証装置CRにおいて認証された場合、又は同警備員により装着又は保持されるカラーバーコードCMがカメラ11により検出された場合、警備員の位置情報が位置情報管理サーバ21に保存される。警備システム10では、監視領域において事象(例えば万引き等の事件、フェンスのよじ登り)がセンサ12により検知された場合、映像監視表示装置14は、事象を引き起こした人物(つまり、被疑者)がカメラ11により撮像された複数の撮像画像を抽出して撮像時間に沿って時系列に並べた遷移撮像画像53と撮像領域の地図情報画像52とを対応付けてモニタ20に表示する。また、警備システム10では、映像監視表示装置14は、切替選択画面SELにおいて被疑者から警備員に切り替えるための操作がなされると、指定された警備員がカメラ11により撮像された複数の撮像画像とBLE送信端末BT、被認証端末RC又はカラーバーコードCMのいずれかを示すマーカ(例えばカードリーダマーカMK1,BLEマーカMK2)とを撮像時間又は警備員の検知時間に沿って時系列に並べた遷移撮像画像53kと監視領域の地図情報画像52とに切り替えてモニタ20に表示する。
これにより、警備システム10は、監視領域において何かしらの事象、事件が発生した時にセンサ12が検知して反応し、被疑者や警備員の撮像画像をカメラ11の撮像画像から抽出し、また警備員についてはBLE受信装置BR、認証装置CR又はカメラ11の各種処理(例えば、BLE送信端末BTからの信号受信、被認証端末RCの認証、カラーバーコードCMの検知)の結果を基にして警備員の位置情報を容易に取得できる。従って、警備システム10は、監視領域における何かしらの事象、事件の発生に関する被疑者又はその被疑者を追跡する警備員の直感的かつ視覚的な行動履歴をモニタ20上に、監視領域の地図情報画像52と対応付けて簡易かつ詳細に示すことができる。
また、警備システム10では、映像監視表示装置14は、被疑者の遷移撮像画像53又は警備員の遷移撮像画像53kを構成するいずれかの撮像画像53aの指定に応じて、指定された撮像画像53aに関する撮像位置と撮影時間を含む事件関連情報を表示する。これにより、映像監視表示装置14は、被疑者の遷移撮像画像53でも警備員の遷移撮像画像53kでも、指定された撮像画像に対応する撮像位置、撮影時間等の事件関連情報をユーザに対して詳細に確認させることができる。
また、警備システム10では、被疑者の遷移撮像画像53がモニタ20に表示された画面には、被疑者の行動履歴を示す警備レポートとしての報告書71の生成を指示するための警備レポート印刷ボタン54が表示される。映像監視表示装置14は、この画面が表示されている時の警備レポート印刷ボタン54の指定に応じて、遷移撮像画像53を構成する一部又は全部の撮像画像53aを用いて、被疑者の行動履歴を示す報告書71(図22参照)の印刷を、映像監視表示装置14に接続した帳票出力装置18に実行させる。これにより、映像監視表示装置14は、被疑者の行動履歴の帳票の印刷出力により、監視領域における何かしらの事象、事件が発生した時の被疑者の直感的かつ視覚的な行動履歴の報告書面を容易に得ることができ、警備会社の業務上必要な報告義務に資することができる。
また、警備システム10では、警備員の遷移撮像画像53kがモニタ20に表示された画面には、警備員の行動履歴を示す警備レポートとしての報告書71kの生成を指示するための警備レポート印刷ボタン54が表示される。映像監視表示装置14は、この画面が表示されている時の警備レポート印刷ボタン54の指定に応じて、遷移撮像画像53kを構成する一部又は全部の撮像画像53aを用いて、警備員の行動履歴を示す報告書71k(図23又は図24参照)の印刷を、映像監視表示装置14に接続した帳票出力装置18に実行させる。これにより、映像監視表示装置14は、警備員の行動履歴の帳票の印刷出力により、監視領域における何かしらの事象、事件が発生した時に被疑者を追跡するべき警備員がどのような場所にいてどのような行為を行っていたかの直感的かつ視覚的な行動履歴の報告書面を容易に得ることができ、警備会社の業務上必要な報告義務に資することができる。
また、警備システム10では、警備員は複数のカラーパターンが規定されたカラーバーコードを予め装着又は保持しており、このカラーバーコードはカメラ11により検知される。これにより、警備システム10では、警備員の位置情報を把握するために、例えばBLE送信端末BT、被認証端末RC、BLE受信装置BR及び認証装置CRのような特別な送信機や受信機を配備することなく、カメラ11は、撮像画像の画像処理によりカラーバーコードを検出することで、警備員の位置情報を簡易に取得することができる。
また、本実施形態の警備システム10では、カメラ11の監視領域を巡回する警備員により装着又は保持されるBLE送信端末BTからの信号がBLE受信装置BRにおいて受信された場合、同警備員により装着又は保持される被認証端末RCが認証装置CRにおいて認証された場合、又は同警備員により装着又は保持されるカラーバーコードCMがカメラ11により検出された場合、警備員の監視領域における位置情報が位置情報管理サーバ21に保存される。警備システム10では、監視領域において事象(例えば万引き等の事件、フェンスのよじ登り)がセンサ12により検知された場合に、映像監視表示装置14は、事象を引き起こした人物(つまり、被疑者)を追跡する警備員がカメラ11により撮像された複数の撮像画像を抽出して撮像時間に沿って時系列に並べた遷移撮像画像53kと撮像領域の地図情報画像52とをモニタ20に表示する。
これにより、警備システム10は、監視領域において何かしらの事象、事件が発生した時にセンサ12が検知し、警備員の撮像画像をカメラ11の撮像画像から抽出し、またBLE受信装置BR、認証装置CR又はカメラ11の各種処理(例えば、BLE送信端末BTからの信号受信、被認証端末RCの認証、カラーバーコードCMの検知)の結果を基に警備員の位置情報を容易に取得できる。従って、警備システム10は、監視領域における何かしらの事象、事件の発生に関する被疑者を追跡する警備員の直感的かつ視覚的な行動履歴をモニタ20上に、監視領域の地図情報画像52と対応付けて簡易に示すことができる。
以上、図面を参照しながら各種の実施形態について説明したが、本開示はかかる例に限定されないことは言うまでもない。当業者であれば、請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。
また本実施形態では、映像監視表示装置14は、遷移撮像画像表示画面51において、被疑者の行動に基づく遷移撮像画像53又は警備員の行動に基づく遷移撮像画像53kのいずれが表示されている場合でも、使用者の入力デバイス19を用いた操作によって警備レポート印刷ボタン54が指定された場合に、図22~図24に示す各警備レポートとしての報告書を1つの報告書に纏めて報告書の帳票データを生成し、帳票出力装置18に出力して印刷させてもよい。これにより、映像監視表示装置14は、被疑者及び警備員の両方について、警備会社の業務上必要な報告義務に効率的に資する報告書を生成することができる。
本開示は、監視領域における何かしらの事象、事件の発生に関する被疑者又はその被疑者を追跡する警備員の直感的かつ視覚的な行動履歴を簡易に示すことができる警備システム及び人物画像表示方法として有用である。
10 警備システム
11,11-1~11-n カメラ
12,12-1~12-k センサ
13,13-1~13-m レコーダ
14 映像監視表示装置
15 各種センサ管理装置
16 データベース
17 顔照合サーバ
18 帳票出力装置
19 入力デバイス
20 モニタ
21 位置情報管理サーバ
22 警備員情報管理サーバ
25 ネットワーク
51 遷移撮像画像表示画面
52 地図情報画像
53,53k 遷移撮像画像
53a,73,73k 撮像画像
54 警備レポート印刷ボタン
54k 切替選択ボタン
55 マウスポインタ
56 撮像位置マーク
57,74 撮像付属情報
61 撮像画像拡大表示画面
62 映像再生画面
71,71k 報告書
72 顔検出元画像
75 撮像付属情報ボタン
76 行動履歴ボタン
141 映像監視制御部
142 警備レポート印刷処理部
BR,BR-1,BR-p BLE受信装置
BT,BT-1,BT-p BLE送信端末
CK チェックマーク
CM,CM-1,CM-r カラーバーコード
CR,CR-1,CR-r 認証装置
MK1 カードリーダマーカ
MK2 BLEマーカ
RC,RC-1,RC-r 被認証端末
SEL 切替選択画面
11,11-1~11-n カメラ
12,12-1~12-k センサ
13,13-1~13-m レコーダ
14 映像監視表示装置
15 各種センサ管理装置
16 データベース
17 顔照合サーバ
18 帳票出力装置
19 入力デバイス
20 モニタ
21 位置情報管理サーバ
22 警備員情報管理サーバ
25 ネットワーク
51 遷移撮像画像表示画面
52 地図情報画像
53,53k 遷移撮像画像
53a,73,73k 撮像画像
54 警備レポート印刷ボタン
54k 切替選択ボタン
55 マウスポインタ
56 撮像位置マーク
57,74 撮像付属情報
61 撮像画像拡大表示画面
62 映像再生画面
71,71k 報告書
72 顔検出元画像
75 撮像付属情報ボタン
76 行動履歴ボタン
141 映像監視制御部
142 警備レポート印刷処理部
BR,BR-1,BR-p BLE受信装置
BT,BT-1,BT-p BLE送信端末
CK チェックマーク
CM,CM-1,CM-r カラーバーコード
CR,CR-1,CR-r 認証装置
MK1 カードリーダマーカ
MK2 BLEマーカ
RC,RC-1,RC-r 被認証端末
SEL 切替選択画面
Claims (8)
- 監視領域を撮像するカメラと、
前記カメラにより撮像された前記監視領域の撮像画像を記憶するレコーダと、
前記監視領域における事象を検知するセンサと、
前記カメラ又は前記レコーダからの前記監視領域の撮像画像を表示部に表示する映像監視表示装置と、
前記監視領域を巡回する警備員により装着又は保持されるコードを検知するコード検知装置と、を備え、
前記映像監視表示装置は、
前記監視領域において前記事象が検知された場合に、前記事象の被疑者が撮像された複数の撮像画像を抽出し、抽出された前記複数の撮像画像を撮像時間に沿って時系列に並べた第1遷移撮像画像と前記監視領域の地図情報とを表示し、
前記被疑者から前記警備員への切替操作に応じて、前記警備員が撮像された複数の撮像画像と前記コード検知装置により検知された前記コードとを抽出し、抽出された前記複数の撮像画像と前記コードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた第2遷移撮像画像と前記監視領域の地図情報とに切り替えて表示する、
警備システム。 - 請求項1に記載の警備システムであって、
前記映像監視表示装置は、
前記第1遷移撮像画像又は前記第2遷移撮像画像を構成するいずれかの撮像画像の指定に応じて、指定された前記撮像画像に関する撮像位置及び撮像時間を含む事象関連情報を表示する、
警備システム。 - 請求項1に記載の警備システムであって、
前記第1遷移撮像画像が前記表示部に表示された画面には、前記被疑者の行動履歴を示す第1警備レポートの生成を指示するための第1アイコンが示され、
前記映像監視表示装置は、
前記第1アイコンの指定に応じて、前記第1遷移撮像画像の一部又は全部を用いて、前記被疑者の行動履歴を示す第1警備レポートの印刷を、前記映像監視表示装置に接続した印刷装置に実行させる、
警備システム。 - 請求項1に記載の警備システムであって、
前記第2遷移撮像画像が前記表示部に表示された画面には、前記警備員の行動履歴を示す第2警備レポートの生成を指示するための第2アイコンが示され、
前記映像監視表示装置は、
前記第2アイコンの指定に応じて、前記第2遷移撮像画像の一部又は全部を用いて、前記警備員の行動履歴を示す第2警備レポートの印刷を、前記映像監視表示装置に接続した印刷装置に実行させる、
警備システム。 - 請求項1に記載の警備システムであって、
前記コードは、複数のカラーパターンが規定されたカラーバーコードであり、
前記コード検知装置は、前記カメラである、
警備システム。 - カメラ、レコーダ、センサ、コード検知装置及び映像監視表示装置を含む警備システムにおける人物画像表示方法であって、
前記カメラにより監視領域を撮像し、
前記レコーダにより前記カメラにより撮像された撮像画像を記憶し、
前記センサにより前記監視領域における事象を検知し、
前記コード検知装置により前記監視領域を巡回する警備員により装着又は保持されるコードを検知し、
前記映像監視表示装置により前記カメラ又は前記レコーダからの前記監視領域の撮像画像を表示部に表示し、
前記映像監視表示装置における前記監視領域の撮像画像の表示において、
前記監視領域において前記事象が検知された場合に、前記事象の被疑者が撮像された複数の撮像画像を抽出し、抽出された前記複数の撮像画像を撮像時間に沿って時系列に並べた第1遷移撮像画像と前記監視領域の地図情報とを表示し、
前記被疑者から前記警備員への切替操作に応じて、前記警備員が撮像された複数の撮像画像と前記コード検知装置により検知された前記コードとを抽出し、抽出された前記複数の撮像画像又は前記コードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた第2遷移撮像画像と前記監視領域の地図情報とに切り替えて表示する、
人物画像表示方法。 - 監視領域を撮像するカメラと、
前記カメラにより撮像された前記監視領域の撮像画像を記憶するレコーダと、
前記監視領域における事象を検知するセンサと、
前記カメラ又は前記レコーダからの前記監視領域の撮像画像を表示部に表示する映像監視表示装置と、
前記監視領域を巡回する警備員により装着又は保持されるコードを検知するコード検知装置と、を備え、
前記映像監視表示装置は、
前記コード検知装置により検知された前記コードを基に、前記センサにより前記監視領域において前記事象が検知された時の前記警備員が撮像された複数の撮像画像と前記コードとを抽出し、抽出された前記複数の撮像画像と前記コードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた遷移撮像画像と前記監視領域の地図情報とを表示する、
警備システム。 - カメラ、レコーダ、センサ、コード検知装置及び映像監視表示装置を含む警備システムにおける人物画像表示方法であって、
前記カメラにより監視領域を撮像し、
前記レコーダにより前記カメラにより撮像された撮像画像を記憶し、
前記センサにより前記監視領域における事象を検知し、
前記コード検知装置により前記監視領域を巡回する警備員により装着又は保持されるコードを検知し、
前記映像監視表示装置により前記カメラ又は前記レコーダからの前記監視領域の撮像画像を表示部に表示し、
前記映像監視表示装置における前記監視領域の撮像画像の表示において、
前記コード検知装置により検知された前記コードを基に、前記センサにより前記監視領域において前記事象が検知された時の前記警備員が撮像された複数の撮像画像と前記コードとを抽出し、抽出された前記複数の撮像画像と前記コードを示すマーカとを撮像時間又は検知時間に沿って時系列に並べた遷移撮像画像と前記監視領域の地図情報とを表示する、
人物画像表示方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/745,865 US10276007B2 (en) | 2015-08-27 | 2016-08-02 | Security system and method for displaying images of people |
US16/394,927 US10991219B2 (en) | 2015-08-27 | 2019-04-25 | Security system and method for displaying images of people |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015-167936 | 2015-08-27 | ||
JP2015167936A JP6268498B2 (ja) | 2015-08-27 | 2015-08-27 | 警備システム及び人物画像表示方法 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US15/745,865 A-371-Of-International US10276007B2 (en) | 2015-08-27 | 2016-08-02 | Security system and method for displaying images of people |
US16/394,927 Continuation US10991219B2 (en) | 2015-08-27 | 2019-04-25 | Security system and method for displaying images of people |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2017033404A1 true WO2017033404A1 (ja) | 2017-03-02 |
Family
ID=58099702
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2016/003552 WO2017033404A1 (ja) | 2015-08-27 | 2016-08-02 | 警備システム及び人物画像表示方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US10276007B2 (ja) |
JP (1) | JP6268498B2 (ja) |
WO (1) | WO2017033404A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018176586A (ja) * | 2017-04-17 | 2018-11-15 | 富士ゼロックス株式会社 | データ処理装置 |
CN108881858A (zh) * | 2018-08-03 | 2018-11-23 | 四川民工加网络科技有限公司 | 建筑工地外来人员监测方法、装置及电子设备 |
CN110418281A (zh) * | 2018-08-20 | 2019-11-05 | 广东优世联合控股集团股份有限公司 | 基于二维码绑定的三维模型在增强现实中的定位方法 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8494961B1 (en) * | 2010-10-14 | 2013-07-23 | Jpmorgan Chase Bank, N.A. | Image authentication and security system and method |
JP6979643B2 (ja) * | 2017-06-22 | 2021-12-15 | 凸版印刷株式会社 | 監視映像表示システム、監視映像表示装置、監視情報管理サーバ、および、監視映像表示方法 |
US11941114B1 (en) * | 2018-01-31 | 2024-03-26 | Vivint, Inc. | Deterrence techniques for security and automation systems |
JP2019149641A (ja) * | 2018-02-26 | 2019-09-05 | グローリー株式会社 | 監視システム、監視方法及び監視プログラム。 |
JP7142443B2 (ja) * | 2018-03-02 | 2022-09-27 | グローリー株式会社 | 画像認証システム、画像認証方法および画像認証プログラム |
CN109743626B (zh) * | 2019-01-02 | 2022-08-12 | 京东方科技集团股份有限公司 | 一种图像显示方法、图像处理方法和相关设备 |
AU2020287175A1 (en) * | 2019-06-07 | 2022-01-27 | Intergraph Corporation | Data sharing control methods and systems |
AT17341U1 (de) * | 2021-01-27 | 2022-01-15 | Pke Holding Ag | Anordnung von Kameras zur Überwachung eines Bereiches |
US11809675B2 (en) | 2022-03-18 | 2023-11-07 | Carrier Corporation | User interface navigation method for event-related video |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09224237A (ja) * | 1996-02-16 | 1997-08-26 | Hitachi Ltd | 画像監視システム |
JP2011227851A (ja) * | 2010-04-23 | 2011-11-10 | Rf Logitech Kk | 映像記録システム |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7634662B2 (en) * | 2002-11-21 | 2009-12-15 | Monroe David A | Method for incorporating facial recognition technology in a multimedia surveillance system |
JP3869692B2 (ja) * | 2001-09-03 | 2007-01-17 | ペンタックス株式会社 | 電子内視鏡装置および電子内視鏡システム |
US20030206100A1 (en) * | 2002-05-04 | 2003-11-06 | Lawrence Richman | Method and protocol for real time security system |
US20040085446A1 (en) * | 2002-10-30 | 2004-05-06 | Park Ho-Sang | Method for secured video signal transmission for video surveillance system |
JP4349199B2 (ja) * | 2003-05-21 | 2009-10-21 | 株式会社日立製作所 | 時空間通信システム |
SG118198A1 (en) * | 2003-07-31 | 2006-01-27 | Kenetics Innovations Pte Ltd | Use of RFID tags and readers to automate real timealert signals in a security system |
US8174378B2 (en) * | 2005-03-18 | 2012-05-08 | Richman Technology Corporation | Human guard enhancing multiple site security system |
US20070291118A1 (en) * | 2006-06-16 | 2007-12-20 | Shu Chiao-Fe | Intelligent surveillance system and method for integrated event based surveillance |
US7961946B2 (en) * | 2007-05-15 | 2011-06-14 | Digisensory Technologies Pty Ltd | Method and system for background estimation in localization and tracking of objects in a smart video camera |
US20080285787A1 (en) | 2007-05-17 | 2008-11-20 | Sun Szu-Wei | Thin loudspeaker |
US8199009B2 (en) * | 2007-06-08 | 2012-06-12 | Bas Strategic Solutions, Inc. | Method and system for administering remote area monitoring system |
TWI397865B (zh) * | 2009-08-12 | 2013-06-01 | Utechzone Co Ltd | Security personnel to monitor the degree of focus monitoring system |
JP5441749B2 (ja) | 2010-02-12 | 2014-03-12 | セコム株式会社 | 警備システム |
US8787618B2 (en) * | 2010-04-13 | 2014-07-22 | Sony Corporation | Content information processing device, content information processing method, content information processing program, and personal digital assistant |
US20140019768A1 (en) * | 2010-12-02 | 2014-01-16 | Viscount Security Systems Inc. | System and Method for Shunting Alarms Using Identifying Tokens |
JP2012208793A (ja) * | 2011-03-30 | 2012-10-25 | Sogo Keibi Hosho Co Ltd | 警備装置 |
JP5858754B2 (ja) * | 2011-11-29 | 2016-02-10 | キヤノン株式会社 | 撮影装置、表示方法及びプログラム |
US9239965B2 (en) * | 2012-06-12 | 2016-01-19 | Electronics And Telecommunications Research Institute | Method and system of tracking object |
GB2506411B (en) * | 2012-09-28 | 2020-03-11 | 2D3 Ltd | Determination of position from images and associated camera positions |
JP6171374B2 (ja) * | 2013-02-06 | 2017-08-02 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、及び情報処理システム |
US10474240B2 (en) * | 2013-06-10 | 2019-11-12 | Honeywell International Inc. | Frameworks, devices and methods configured for enabling gesture-based interaction between a touch/gesture controlled display and other networked devices |
JP5506990B1 (ja) * | 2013-07-11 | 2014-05-28 | パナソニック株式会社 | 追跡支援装置、追跡支援システムおよび追跡支援方法 |
-
2015
- 2015-08-27 JP JP2015167936A patent/JP6268498B2/ja active Active
-
2016
- 2016-08-02 US US15/745,865 patent/US10276007B2/en active Active
- 2016-08-02 WO PCT/JP2016/003552 patent/WO2017033404A1/ja active Application Filing
-
2019
- 2019-04-25 US US16/394,927 patent/US10991219B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09224237A (ja) * | 1996-02-16 | 1997-08-26 | Hitachi Ltd | 画像監視システム |
JP2011227851A (ja) * | 2010-04-23 | 2011-11-10 | Rf Logitech Kk | 映像記録システム |
Non-Patent Citations (2)
Title |
---|
KYOKO KIHARA: "Seitai Ninsho to Security", GEKKAN JIDO NINSHIKI, vol. 28, no. 1, 10 January 2015 (2015-01-10), pages 29 - 31 * |
YASUSHI HAMADA: "Kao Ninsho Seihin to Shakai Solution deno Katsuyo", NEC TECHNICAL JOURNAL, vol. 67, no. 1, 14 November 2014 (2014-11-14), pages 52 - 55 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018176586A (ja) * | 2017-04-17 | 2018-11-15 | 富士ゼロックス株式会社 | データ処理装置 |
CN108881858A (zh) * | 2018-08-03 | 2018-11-23 | 四川民工加网络科技有限公司 | 建筑工地外来人员监测方法、装置及电子设备 |
CN108881858B (zh) * | 2018-08-03 | 2020-06-23 | 四川亚东世纪科技有限公司 | 建筑工地外来人员监测方法、装置及电子设备 |
CN110418281A (zh) * | 2018-08-20 | 2019-11-05 | 广东优世联合控股集团股份有限公司 | 基于二维码绑定的三维模型在增强现实中的定位方法 |
Also Published As
Publication number | Publication date |
---|---|
US10991219B2 (en) | 2021-04-27 |
JP6268498B2 (ja) | 2018-01-31 |
US20180204433A1 (en) | 2018-07-19 |
US20190251811A1 (en) | 2019-08-15 |
US10276007B2 (en) | 2019-04-30 |
JP2017045315A (ja) | 2017-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6268498B2 (ja) | 警備システム及び人物画像表示方法 | |
JP6268497B2 (ja) | 警備システム、及び人物画像表示方法 | |
US10241640B2 (en) | System and method for visualization of history of events using BIM model | |
AU2018312581B2 (en) | Supervising property access with portable camera | |
CA2814366C (en) | System and method of post event/alarm analysis in cctv and integrated security systems | |
US11640726B2 (en) | Person monitoring system and person monitoring method | |
CN105427517B (zh) | 使用蓝牙低能量设备在bim中自动配置设备的***和方法 | |
US20130208123A1 (en) | Method and System for Collecting Evidence in a Security System | |
CN104243907A (zh) | 用于动态跟踪的视频加标签 | |
JP4925419B2 (ja) | 情報収集システム、及び、モバイル端末 | |
CN103297749A (zh) | 现场操作员和移动操作员之间点播视频交换的***和方法 | |
JP2005086626A (ja) | 広域監視装置 | |
WO2016194275A1 (ja) | 動線分析システム、カメラ装置及び動線分析方法 | |
WO2017029779A1 (ja) | 警備システム、人物画像表示方法、及びレポート作成方法 | |
JP2008011212A (ja) | 監視装置 | |
US20220277642A1 (en) | Investigation assistance system and investigation assistance method | |
JP5909712B1 (ja) | 動線分析システム、カメラ装置及び動線分析方法 | |
JP6268496B2 (ja) | 警備システム及び画像表示方法 | |
JP5909709B1 (ja) | 動線分析システム、カメラ装置及び動線分析方法 | |
JP4594609B2 (ja) | 監視システム、および監視方法 | |
JP7487888B2 (ja) | 画像処理システム、画像処理方法及びプログラム | |
JP2022031206A (ja) | 防犯管理システム、および防犯管理方法 | |
CN102457718A (zh) | 在视频监控中利用用户输入对视频数据加图形书签 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16838756 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 15745865 Country of ref document: US |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 16838756 Country of ref document: EP Kind code of ref document: A1 |