KR20230038352A - Control method of IoT system for prevention of problem situation and facility management - Google Patents

Control method of IoT system for prevention of problem situation and facility management Download PDF

Info

Publication number
KR20230038352A
KR20230038352A KR1020210121120A KR20210121120A KR20230038352A KR 20230038352 A KR20230038352 A KR 20230038352A KR 1020210121120 A KR1020210121120 A KR 1020210121120A KR 20210121120 A KR20210121120 A KR 20210121120A KR 20230038352 A KR20230038352 A KR 20230038352A
Authority
KR
South Korea
Prior art keywords
information
iot system
facility
server
problem situation
Prior art date
Application number
KR1020210121120A
Other languages
Korean (ko)
Inventor
이영재
이재근
신현길
김성한
Original Assignee
주식회사 서진아이앤씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 서진아이앤씨 filed Critical 주식회사 서진아이앤씨
Priority to KR1020210121120A priority Critical patent/KR20230038352A/en
Publication of KR20230038352A publication Critical patent/KR20230038352A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/26Government or public services
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01DMEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
    • G01D21/00Measuring or testing not otherwise provided for
    • G01D21/02Measuring two or more variables by means not covered by a single other subclass
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/60Radiation pyrometry, e.g. infrared or optical thermometry using determination of colour temperature
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/14Central alarm receiver or annunciator arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/53Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers
    • H04H20/59Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers for emergency or urgency
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Emergency Management (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Theoretical Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Multimedia (AREA)
  • Educational Administration (AREA)
  • Development Economics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Alarm Systems (AREA)

Abstract

The present invention provides a control method of an IoT system for preventing problem situations and managing facilities by a server which comprises the following steps of: allowing a server to obtain management information from an IoT system corresponding to a management facility; allowing the server to determine whether a problem situation event has occurred based on the management information; allowing the server to obtain problem situation type information corresponding to the problem situation event according to a determination result; allowing the server to control an operation of the IoT system based on the problem situation type information; and allowing the server to transmit an alarm corresponding to the problem situation event to a pre-registered electronic terminal.

Description

문제상황 방지 및 시설물 관리를 위한 IoT 시스템의 제어 방법{Control method of IoT system for prevention of problem situation and facility management}Control method of IoT system for prevention of problem situation and facility management}

본 발명은 각 시설별 맞춤형 안전 진단 및 보안 유지를 자동으로 실행하는 문제상황 방지 및 시설물 관리를 위한 IoT 시스템의 제어 방법에 관한 것이다.The present invention relates to a control method of an IoT system for preventing problem situations and managing facilities by automatically executing customized safety diagnosis and security maintenance for each facility.

종래의 재난 또는 위기상황에 대한 시설 관리는 관리자를 통해 이루어지고 있으며, 침입 신고에 대한 출동시 소요되는 시간에 의해 침입자를 놓치는 문제점이 있어 왔다.Conventional facility management for disasters or crises is performed by a manager, and there has been a problem of missing an intruder due to the time required for dispatch to report an intrusion.

또한, IoT(Internet of Things)는, 4차 산업혁명에 따라 대두된 기술 또는 환경으로, 센서를 탑재한 여러 사물에 정보통신기술이 융합되어 실시간으로 데이터를 인터넷으로 주고받는 기술이며, 이는 사람의 개입 없이, 블루투스, 근거리무선통신(NFC), 센서데이터 및 네트워크가 자율적인 소통을 돕는 기술이다.In addition, IoT (Internet of Things) is a technology or environment that emerged according to the 4th industrial revolution, and information and communication technology is fused with various objects equipped with sensors to exchange data in real time through the Internet. Bluetooth, near field communication (NFC), sensor data and network help autonomous communication without intervention.

등록특허공보 제10-1944018호, 2019.01.24.Registered Patent Publication No. 10-1944018, 2019.01.24.

본 발명이 해결하고자 하는 과제는 시설별 재난, 재해 및 인재를 포함하는 문제 상황을 자동으로 인식하고 IoT 시스템의 제어에 의해 문제 상황을 시설별 맞춤 해결하는 문제상황 방지 및 시설물 관리를 위한 IoT 시스템의 제어 방법을 제공하는 것이다.The problem to be solved by the present invention is an IoT system control method for preventing problem situations and managing facilities by automatically recognizing problem situations, including disasters, disasters, and man-made disasters for each facility, and solving problem situations tailored to each facility by control of the IoT system. is to provide

본 발명이 해결하고자 하는 과제들은 이상에서 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The problems to be solved by the present invention are not limited to the problems mentioned above, and other problems not mentioned will be clearly understood by those skilled in the art from the description below.

상술한 과제를 해결하기 위한 본 발명의 서버에 의한 문제상황 방지 및 시설물 관리를 위한 IoT 시스템의 제어 방법은, 서버가, 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계, 서버가, 관리 정보를 바탕으로 문제상황 이벤트의 발생 여부를 판단하는 단계, 서버가, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계, 서버가, 문제상황 유형 정보를 바탕으로, IoT 시스템의 동작을 제어하는 단계 및 서버가, 기 등록된 전자 단말로 문제상황 이벤트에 대응하는 알람을 전송하는 단계를 포함한다.In order to solve the above problems, a control method of an IoT system for preventing problem situations and managing facilities by a server of the present invention includes steps for a server to obtain management information from an IoT system corresponding to a management facility, the server to manage Step of determining whether a problem situation event has occurred based on the information, step of obtaining, by the server, problem situation type information corresponding to the problem situation event according to the determination result, by the server, based on the problem situation type information, IoT Controlling the operation of the system and transmitting, by the server, an alarm corresponding to a problem situation event to pre-registered electronic terminals.

일 실시예로, 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계는, 관리 시설이 기 등록된 제1 시설인 경우, 침수 수위 정보, 제1 영상 정보 및 통행량 정보를 관리 정보로 획득하는 단계를 더 포함하고, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는, 침수 수위 정보를 바탕으로 침수 정보를 문제상황 유형 정보로 획득하는 단계, 제1 영상 정보를 바탕으로 붕괴 정보를 문제상황 유형 정보로 획득하는 단계 및 제1 영상 정보 및 통행량 정보를 바탕으로 추돌 정보를 문제상황 유형 정보로 획득하는 단계를 더 포함할 수 있다.In one embodiment, the step of acquiring management information from the IoT system corresponding to the management facility may include obtaining submerged water level information, first image information, and traffic information as management information when the management facility is a pre-registered first facility. The step of obtaining problem situation type information corresponding to the problem situation event according to the determination result includes: obtaining submersion information as problem situation type information based on the submersion level information; first image information The method may further include acquiring collapse information as problem situation type information and obtaining collision information as problem situation type information based on the first image information and traffic volume information.

일 실시예에 따라, 문제상황 유형 정보를 바탕으로, IoT 시스템의 동작을 제어하는 단계는, IoT 시스템이, 서버의 제어를 통해 출입 통제 경보를 동작시키는 단계, IoT 시스템이, 서버의 제어를 통해 방송 정보를 출력하는 단계 및 IoT 시스템이, 서버의 제어를 통해 전광판을 동작시키는 단계를 더 포함할 수 있다.According to an embodiment, the step of controlling the operation of the IoT system based on the problem situation type information is the step of the IoT system operating an access control alarm through the control of the server, by the IoT system through the control of the server. The step of outputting the broadcasting information and the step of the IoT system operating the signboard through the control of the server may be further included.

다른 실시예로, 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계는, 관리 시설이 기 등록된 제2 시설인 경우, 제2 영상 정보, 출입 정보, 예약 정보 및 온습도 정보를 관리 정보로 획득하는 단계를 더 포함하고, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는, 제2 영상 정보, 출입 정보 및 예약 정보 중 적어도 하나를 바탕으로 침입 정보, 파손 정보 및 도난 정보 중 적어도 하나를 문제상황 유형 정보로 획득하는 단계 및 제2 영상 정보 및 온습도 정보를 바탕으로 화재 정보를 문제상황 유형 정보로 획득하는 단계를 더 포함하고, 문제상황 유형 정보를 바탕으로, IoT 시스템의 동작을 제어하는 단계는, IoT 시스템이, 서버의 제어에 따라, 문제상황 유형 정보에 대응하는 방송을 출력하는 단계, IoT 시스템이, 서버의 제어에 따라, 출입 통제 경보를 동작시키는 단계, IoT 시스템이, 서버의 제어에 따라, 객체 추적 촬영을 실시하는 단계 및 IoT 시스템이, 문제상황 유형 정보 및 객체 추적 정보를 제2 시설에 대응하는 제1 단말에 공유하는 단계를 더 포함할 수 있다.In another embodiment, the step of obtaining management information from the IoT system corresponding to the management facility may include, when the management facility is a pre-registered second facility, second image information, access information, reservation information, and temperature/humidity information as management information. Acquiring problem situation type information corresponding to the problem situation event according to the determination result may include intrusion information and damage information based on at least one of second image information, access information, and reservation information. And obtaining at least one of the theft information as problem situation type information and obtaining fire information as problem situation type information based on the second image information and temperature and humidity information, Based on the problem situation type information, The step of controlling the operation of the IoT system is the step of the IoT system outputting a broadcast corresponding to the problem situation type information under the control of the server, and the step of operating the access control alarm under the control of the server by the IoT system. , The IoT system may further include performing object tracking shooting under the control of the server and sharing the problem situation type information and the object tracking information with the first terminal corresponding to the second facility by the IoT system. there is.

또 다른 실시예로, 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계는, 관리 시설이 기 등록된 제3 시설인 경우, 서버가, 제3 시설에 대응하는 대상자에 대한 케어 정보를 관리 정보로 획득하는 단계를 더 포함하고, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는, 케어 정보에 매칭된 열화상 정보 및 움직임 정보를 바탕으로 위급 정보를 문제상황 유형 정보로 획득하는 단계를 더 포함하고, 문제상황 유형 정보를 바탕으로, IoT 시스템의 동작을 제어하는 단계는, IoT 시스템이, 서버의 제어에 따라, 제3 시설에 대응하는 기 등록된 통신수단을 스피커폰으로 동작시키는 단계, IoT 시스템이, 서버의 제어에 따라, 제3 시설에 대응하는 기 등록된 이상 알람을 출력하는 단계 및 IoT 시스템이, 서버의 제어에 따라, 제3 시설에 대응하는 인터폰을 통해 관리실 통신부로 기 등록된 신호음을 전송하는 단계를 더 포함할 수 있다.In another embodiment, the step of acquiring management information from the IoT system corresponding to the management facility may include, if the management facility is a pre-registered third facility, the server manages care information for the target person corresponding to the third facility. The step of acquiring problem situation type information corresponding to the problem situation event according to the determination result further comprises obtaining emergency information based on the thermal image information and motion information matched to the care information in the problem situation. Further comprising the step of obtaining type information, and controlling the operation of the IoT system based on the problem situation type information, the IoT system, under the control of the server, the pre-registered communication means corresponding to the third facility. operating as a speaker phone, the IoT system outputting a pre-registered abnormal alarm corresponding to the third facility under the control of the server, and the IoT system, under the control of the server, outputting an interphone corresponding to the third facility. It may further include transmitting a pre-registered signal tone to the communication unit of the management office through.

다른 실시예에 따라, 서버의 제어에 따라, 객체 추적 촬영을 실시하는 단계는, 문제상황 유형 정보에 대응하는 객체를 중심 좌표로 CCTV의 촬영 영역을 변경하는 단계 및 드론을 통해 문제상황 유형 정보에 대응하는 객체에 대한 객체 추적을 실행하는 단계를 더 포함하고, 문제상황 유형 정보에 대응하는 객체를 중심 좌표로 CCTV의 촬영 영역을 변경하는 단계는, 기 등록된 기초 이미지에 대응하는 객체를 검출하는 단계, 객체를 중심좌표로 획득하는 단계 및 중심좌표 변위를 바탕으로 객체를 추적하는 단계를 더 포함하고, 드론을 통해 문제상황 유형 정보에 대응하는 객체에 대한 객체 추적을 실행하는 단계는, 촬영 영역이 CCTV의 가시거리를 벗어난 경우, 중심좌표 변위를 바탕으로 객체의 이동 방향 및 객체의 이동 속도를 획득하는 단계, 객체의 이동 방향 및 객체의 이동 속도를 바탕으로 객체 획득 영역을 산출하는 단계, 객체 획득 영역에 대응하여 드론을 동작시키는 단계, 드론을 통해 객체를 검출하는 단계 및 객체를 드론의 추적 좌표로 획득하는 단계를 더 포함할 수 있다.According to another embodiment, the step of performing the object tracking shooting under the control of the server may include the step of changing the shooting area of CCTV with the center coordinates of the object corresponding to the problem situation type information and the problem situation type information through the drone. Further comprising the step of executing object tracking for the corresponding object, and the step of changing the shooting area of the CCTV with the center coordinates of the object corresponding to the problem situation type information, detecting the object corresponding to the pre-registered basic image The step of acquiring the object as center coordinates and tracking the object based on the center coordinate displacement, and the step of executing object tracking for the object corresponding to the problem situation type information through the drone comprises: If it is out of the visual range of this CCTV, obtaining the moving direction and moving speed of the object based on the center coordinate displacement, calculating the object acquisition area based on the moving direction and moving speed of the object, object The method may further include operating a drone in response to the acquisition area, detecting an object through the drone, and acquiring the object as tracking coordinates of the drone.

다른 실시예에 따라, 본 발명의 제어 방법은, IoT 시스템이, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 출입문 동작을 제어하는 단계, IoT 시스템이, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 CCTV 동작을 제어하는 단계 및 IoT 시스템이, 조도 정보를 획득하고, 조도 정보를 바탕으로 제2 시설에 대응하는 조명 동작을 제어하는 단계를 더 포함하고, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 출입문 동작을 제어하는 단계는, 제2 영상 정보와 예약 정보가 대응하는 경우, 예약 정보에 대응하는 출입문 수동제어 가능 시간을 획득하는 단계를 더 포함하고, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 CCTV 동작을 제어하는 단계는, 예약 정보와 현재 시간이 대응하는 경우, 제2 시설에 대응하는 영역 정보를 획득하는 단계, 영역 정보에 대응하는 인원 정보를 획득하는 단계 및 인원 정보가 기 설정된 폐쇄 기준에 대응하는 경우, 제2 시설에 대응하는 출입문 동작을 제어하는 단계를 더 포함하고, 예약 정보는, 예약자 안면 이미지를 포함하는 것을 특징으로 할 수 있다.According to another embodiment, the control method of the present invention includes the step of controlling, by the IoT system, the door operation corresponding to the second facility based on the second image information and the reservation information, by the IoT system, the second image information and the reservation Controlling the CCTV operation corresponding to the second facility based on the information, and obtaining, by the IoT system, illuminance information, and controlling the lighting operation corresponding to the second facility based on the illuminance information; 2 The step of controlling the operation of the door corresponding to the second facility based on the video information and the reservation information includes, when the second video information and the reservation information correspond, the step of obtaining a manually controllable time for the door corresponding to the reservation information. The step of controlling a CCTV operation corresponding to the second facility based on the second image information and the reservation information includes: acquiring area information corresponding to the second facility when the reservation information and the current time correspond. , Obtaining personnel information corresponding to the region information, and controlling a door operation corresponding to the second facility when the personnel information corresponds to a preset closing criterion, wherein the reservation information includes a face image of the person making the reservation. It can be characterized by including.

또 다른 실시예에 따라, 본 발명의 제어 방법은, IoT 시스템이, 기 설정된 시간 간격에 대응하는 확인 알람을 출력하는 단계 및 IoT 시스템이, 확인 알람에 대응하는 버튼 입력 정보를 획득하는 단계를 더 포함하고, 기 설정된 시간 간격에 대응하는 확인 알람을 출력하는 단계는, 확인 알람에 대응하는 버튼 입력 정보가 기 설정된 입력 시간 동안 미획득 된 경우, 대상자에 대응하는 움직임 정보를 획득하는 단계 및 움직임 정보에 대응하는 열화상 정보를 획득하는 단계를 더 포함하고, 바람직하게, 본 발명의 제어 방법은, IoT 시스템이, 제2 단말에 전력량 정보를 공유하는 단계, IoT 시스템이, 제2 단말에 버튼 입력 정보를 전송하는 단계, 확인 알람에 대응하는 버튼 입력 정보가 기 설정된 입력 시간 동안 미획득 된 경우, IoT 시스템이, 제2 단말에 움직임 정보 및 열화상 정보를 전송하는 단계 및 IoT 시스템이, 제2 단말의 위치 정보를 바탕으로 제3 시설의 출입문을 제어하는 단계를 더 포함할 수 있다.According to another embodiment, the control method of the present invention further includes, by the IoT system, outputting a confirmation alarm corresponding to a preset time interval and acquiring, by the IoT system, button input information corresponding to the confirmation alarm. The step of outputting a confirmation alarm corresponding to a preset time interval may include: obtaining motion information corresponding to a subject when button input information corresponding to the confirmation alarm is not acquired during a preset input time; and motion information Further comprising obtaining thermal image information corresponding to , and preferably, the control method of the present invention includes the step of sharing, by the IoT system, power amount information with the second terminal, by the IoT system, pressing a button to the second terminal Transmitting information, when button input information corresponding to a confirmation alarm is not acquired during a preset input time, IoT system transmitting motion information and thermal image information to a second terminal, and IoT system performing a second The method may further include controlling the door of the third facility based on the location information of the terminal.

본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the invention are included in the detailed description and drawings.

본 발명의 문제상황 방지 및 시설물 관리를 위한 IoT 시스템의 제어 방법은, 각 시설에 대응하는 IoT 시스템을 통해 각 시설별 맞춤형 서비스를 통해, 시설 보안 및 안전 진단을 자동 실시하는 효과를 유도한다.The control method of the IoT system for preventing problem situations and managing facilities of the present invention induces the effect of automatically performing facility security and safety diagnosis through customized services for each facility through the IoT system corresponding to each facility.

구체적으로, 침수 지하차도, 터널 사고 등을 센서(수위계, CCTV 판독)를 통해서 상태 파악후 자동화(시설물 차단, 방송, 전광판 표출 등)할 수 있으며, IOT 기반 시설물 통제에 의해, 인터넷으로 예약을 하면, 예약 시간에 출입문이 자동으로 열리고, 일몰시간대에는 조명이 자동으로 켜지며, 예약 시간이 종료되면, AI CCTV가 운동장 전체를 모니터링 후 자동으로 출입문을 닫고, 조명을 끌 수 있으며, 어플을 통해 관리자가 수동으로 제어가 가능하고, IOT 및 AI 기반 문화재 시설 통합 제어에 따라, 문화재 보호 구역(울타리 등)을 침범시 자동으로 경고 방송 송출 및 조명이 깜빡이고, 관리자에게 알림을 보내면, CCTV 화면을 보면서 실시간 방송을 내보낼 수 있으며, 문화재 등에 센서 등을 설치하여 화재, 도난, 침범 시 드론 또는 CCTV로 촬영 및 소방서, 경찰서 등으로 사진, 영상 실시간 전송하여 긴급시 출동하도록 할 수 있다.Specifically, flooded underpasses and tunnel accidents can be automated (facility blocking, broadcasting, electronic display, etc.) after checking the condition through sensors (water level gauge, CCTV reading), and by controlling IOT-based facilities, if you make a reservation on the Internet, , Doors open automatically at the reservation time, lights are automatically turned on during sunset time, and when the reservation time ends, AI CCTV monitors the entire playground and automatically closes the door and turns off the lights. can be manually controlled, and according to IOT and AI-based integrated control of cultural property facilities, when a cultural property protection area (fence, etc.) is violated, a warning broadcast is automatically transmitted and lights blink, and when a notification is sent to the manager, Real-time broadcasting can be sent out, and by installing sensors, etc. on cultural properties, etc., in case of fire, theft, or invasion, shooting with drones or CCTV, and real-time transmission of photos and videos to fire departments and police stations so that they can be dispatched in case of emergency.

또한, IOT 및 AI 기반 의료, 보건 시설 통합 제어 기능에 의해, 홈IOT 허브에 연결된 각종 센서(움직임감지, 열화상, 전력량체크 등)를 통해 독거 노인, 환자 등의 건강상태를 체크하여 케어하는 것이 가능한 효과가 발생한다.In addition, by IOT and AI-based medical and health facility integrated control functions, it is important to check and care for the health conditions of elderly people living alone and patients through various sensors (motion detection, thermal imaging, power consumption check, etc.) connected to the home IOT hub. Possible effects occur.

본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the description below.

도 1은 본 발명의 시스템 구성도이다.
도 2는 본 발명의 다른 실시예에 따른 시스템 구성도이다.
도 3은 본 발명의 다른 실시예에 따른 객체 추적 방식을 도시한 것이다.
도 4는 본 발명의 또 다른 실시예에 따른 장치를 도시한 것이다.
도 5는 본 발명의 기본 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 흐름도이다.
도 7은 본 발명의 다른 실시예에 따른 흐름도이다.
도 8은 본 발명의 또 다른 실시예에 따른 흐름도이다.
도 9는 본 발명의 서버 구성도이다.
1 is a system configuration diagram of the present invention.
2 is a system configuration diagram according to another embodiment of the present invention.
3 illustrates an object tracking method according to another embodiment of the present invention.
4 shows a device according to another embodiment of the present invention.
5 is a basic flow chart of the present invention.
6 is a flowchart according to one embodiment of the present invention.
7 is a flowchart according to another embodiment of the present invention.
8 is a flowchart according to another embodiment of the present invention.
9 is a server configuration diagram of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.Advantages and features of the present invention, and methods of achieving them, will become clear with reference to the detailed description of the following embodiments taken in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, only these embodiments are intended to complete the disclosure of the present invention, and are common in the art to which the present invention belongs. It is provided to fully inform the person skilled in the art of the scope of the invention, and the invention is only defined by the scope of the claims.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.Terminology used herein is for describing the embodiments and is not intended to limit the present invention. In this specification, singular forms also include plural forms unless specifically stated otherwise in a phrase. As used herein, "comprises" and/or "comprising" does not exclude the presence or addition of one or more other elements other than the recited elements. Like reference numerals throughout the specification refer to like elements, and “and/or” includes each and every combination of one or more of the recited elements. Although "first", "second", etc. are used to describe various components, these components are not limited by these terms, of course. These terms are only used to distinguish one component from another. Accordingly, it goes without saying that the first element mentioned below may also be the second element within the technical spirit of the present invention.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used in this specification may be used with meanings commonly understood by those skilled in the art to which the present invention belongs. In addition, terms defined in commonly used dictionaries are not interpreted ideally or excessively unless explicitly specifically defined.

명세서에서 사용되는 "부" 또는 “모듈”이라는 용어는 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, "부" 또는 “모듈”은 어떤 역할들을 수행한다. 그렇지만 "부" 또는 “모듈”은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부" 또는 “모듈”은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부" 또는 “모듈”은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부" 또는 “모듈”들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부" 또는 “모듈”들로 결합되거나 추가적인 구성요소들과 "부" 또는 “모듈”들로 더 분리될 수 있다.The term "unit" or "module" used in the specification means a hardware component such as software, FPGA or ASIC, and "unit" or "module" performs certain roles. However, "unit" or "module" is not meant to be limited to software or hardware. A “unit” or “module” may be configured to reside in an addressable storage medium and may be configured to reproduce one or more processors. Thus, as an example, a “unit” or “module” may refer to components such as software components, object-oriented software components, class components, and task components, processes, functions, properties, procedures, subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays and variables. Functions provided within components and "units" or "modules" may be combined into smaller numbers of components and "units" or "modules" or may be combined into additional components and "units" or "modules". can be further separated.

공간적으로 상대적인 용어인 "아래(below)", "아래(beneath)", "하부(lower)", "위(above)", "상부(upper)" 등은 도면에 도시되어 있는 바와 같이 하나의 구성요소와 다른 구성요소들과의 상관관계를 용이하게 기술하기 위해 사용될 수 있다. 공간적으로 상대적인 용어는 도면에 도시되어 있는 방향에 더하여 사용시 또는 동작시 구성요소들의 서로 다른 방향을 포함하는 용어로 이해되어야 한다. 예를 들어, 도면에 도시되어 있는 구성요소를 뒤집을 경우, 다른 구성요소의 "아래(below)"또는 "아래(beneath)"로 기술된 구성요소는 다른 구성요소의 "위(above)"에 놓일 수 있다. 따라서, 예시적인 용어인 "아래"는 아래와 위의 방향을 모두 포함할 수 있다. 구성요소는 다른 방향으로도 배향될 수 있으며, 이에 따라 공간적으로 상대적인 용어들은 배향에 따라 해석될 수 있다.The spatially relative terms "below", "beneath", "lower", "above", "upper", etc. It can be used to easily describe a component's correlation with other components. Spatially relative terms should be understood as including different orientations of elements in use or operation in addition to the orientations shown in the drawings. For example, if you flip a component that is shown in a drawing, a component described as "below" or "beneath" another component will be placed "above" the other component. can Thus, the exemplary term “below” may include directions of both below and above. Components may also be oriented in other orientations, and thus spatially relative terms may be interpreted according to orientation.

본 명세서에서, 컴퓨터는 적어도 하나의 프로세서를 포함하는 모든 종류의 하드웨어 장치를 의미하는 것이고, 실시 예에 따라 해당 하드웨어 장치에서 동작하는 소프트웨어적 구성도 포괄하는 의미로서 이해될 수 있다. 예를 들어, 컴퓨터는 스마트폰, 태블릿 PC, 데스크톱, 노트북 및 각 장치에서 구동되는 사용자 클라이언트 및 애플리케이션을 모두 포함하는 의미로서 이해될 수 있으며, 또한 이에 제한되는 것은 아니다.In this specification, a computer means any kind of hardware device including at least one processor, and may be understood as encompassing a software configuration operating in a corresponding hardware device according to an embodiment. For example, a computer may be understood as including a smartphone, a tablet PC, a desktop computer, a laptop computer, and user clients and applications running on each device, but is not limited thereto.

이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 9는 본 발명의 서버 구성도이다.9 is a server configuration diagram of the present invention.

도시된 바와 같이, 서버(100)는 메모리(110), 통신부(120) 및 프로세서(130)를 포함할 수 있다.As shown, the server 100 may include a memory 110 , a communication unit 120 and a processor 130 .

메모리(110)는 서버(100)의 동작에 필요한 각종 프로그램 및 데이터를 저장할 수 있다. 메모리(110)는 비휘발성 메모리(110), 휘발성 메모리(110), 플래시메모리(110)(flash-memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 등으로 구현될 수 있다.The memory 110 may store various programs and data necessary for the operation of the server 100 . The memory 110 may be implemented as a non-volatile memory 110, a volatile memory 110, a flash-memory, a hard disk drive (HDD), or a solid state drive (SSD).

통신부(120)는 외부 장치와 통신을 수행할 수 있다. 특히, 통신부(120)는 와이파이 칩, 블루투스 칩, 무선 통신 칩, NFC칩, 저전력 블루투스 침(BLE 칩) 등과 같은 다양한 통신 칩을 포함할 수 있다. 이때, 와이파이 칩, 블루투스 칩, NFC 칩은 각각 LAN 방식, WiFi 방식, 블루투스 방식, NFC 방식으로 통신을 수행한다. 와이파이 칩이나 블루투스칩을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신 하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다.The communication unit 120 may communicate with an external device. In particular, the communication unit 120 may include various communication chips such as a Wi-Fi chip, a Bluetooth chip, a wireless communication chip, an NFC chip, and a Bluetooth Low Energy (BLE) chip. At this time, the Wi-Fi chip, the Bluetooth chip, and the NFC chip perform communication in a LAN method, a WiFi method, a Bluetooth method, and an NFC method, respectively. In the case of using a Wi-Fi chip or a Bluetooth chip, various connection information such as an SSID and a session key is first transmitted and received, and various information can be transmitted and received after communication is connected using this. The wireless communication chip refers to a chip that performs communication according to various communication standards such as IEEE, ZigBee, 3rd Generation (3G), 3rd Generation Partnership Project (3GPP), and Long Term Evolution (LTE).

프로세서(130)는 메모리(110)에 저장된 각종 프로그램을 이용하여 서버(100)의 전반적인 동작을 제어할 수 있다. 프로세서(130)는 RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 및 버스로 구성될 수 있다. 이때, RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 등은 버스를 통해 서로 연결될 수 있다.The processor 130 may control overall operations of the server 100 using various programs stored in the memory 110 . The processor 130 may include a RAM, a ROM, a graphic processing unit, a main CPU, first through n interfaces, and a bus. At this time, the RAM, ROM, graphic processing unit, main CPU, first to n interfaces, etc. may be connected to each other through a bus.

RAM은 O/S 및 어플리케이션 프로그램을 저장한다. 구체적으로, 서버(100)가 부팅되면 O/S가 RAM에 저장되고, 사용자가 선택한 각종 어플리케이션 데이터가 RAM에 저장될 수 있다.RAM stores O/S and application programs. Specifically, when the server 100 is booted, O/S is stored in RAM, and various application data selected by the user may be stored in RAM.

ROM에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, 메인 CPU는 ROM에 저장된 명령어에 따라 메모리(110)에 저장된 O/S를 RAM에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU는 메모리(110)에 저장된 각종 어플리케이션 프로그램을 RAM에 복사하고, RAM에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.The ROM stores instruction sets for system booting. When a turn-on command is input and power is supplied, the main CPU copies the O/S stored in the memory 110 to the RAM according to the command stored in the ROM, and executes the O/S to boot the system. When booting is completed, the main CPU copies various application programs stored in the memory 110 to RAM, and executes the application programs copied to RAM to perform various operations.

그래픽 처리부는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이템, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 여기서, 연산부는 입력부로부터 수신된 제어 명령을 이용하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산하는 구성일 수 있다. 그리고, 렌더링부는 연산부에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성하는 구성이 일 수 있다. 이러한 렌더링부에서 생성된 화면은 디스플레이의 디스플레이 영역 내에 표시될 수 있다.The graphic processing unit uses a calculation unit (not shown) and a rendering unit (not shown) to create a screen including various objects such as items, images, and text. Here, the calculation unit may be configured to calculate attribute values such as coordinate values, shape, size, color, etc. of each object to be displayed according to the layout of the screen by using a control command received from the input unit. And, the rendering unit may be configured to generate screens of various layouts including objects based on the attribute values calculated by the calculation unit. The screen created by the rendering unit may be displayed within the display area of the display.

메인 CPU는 메모리(110)에 액세스하여, 메모리(110)에 저장된 OS를 이용하여 부팅을 수행한다. 그리고, 메인 CPU는 메모리(110)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.The main CPU accesses the memory 110 and performs booting using the OS stored in the memory 110 . And, the main CPU performs various operations using various programs, contents, data, etc. stored in the memory 110 .

제1 내지 n 인터페이스는 상술한 각종 구성요소들과 연결된다. 제1 내지 n 인터페이스 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.The first through n interfaces are connected to the various components described above. One of the first through n interfaces may be a network interface connected to an external device through a network.

한편, 나아가, 프로세서(130)는 인공지능 모델을 제어할 수 있다. 이 경우, 프로세서(130)는 인공지능 모델을 제어하기 위한 그래픽 전용 프로세서(예: GPU)를 포함할 수 있음은 물론이다.Meanwhile, furthermore, the processor 130 may control the artificial intelligence model. In this case, of course, the processor 130 may include a graphics-only processor (eg, GPU) for controlling the artificial intelligence model.

한편, 본 발명에 따른 인공지능 모델은 교사 지도학습(supervised learning) 또는 비교사 지도학습(unsupervised learning)기반의 모델일 수 있다. 나아가, 본 발명에 따른 인공지능 모델은 SVM(support vector machine), Decision tree, neural network 등 및 이들이 응용된 방법론을 포함할 수 있다.Meanwhile, the artificial intelligence model according to the present invention may be a model based on supervised learning or unsupervised learning. Furthermore, the artificial intelligence model according to the present invention may include a support vector machine (SVM), a decision tree, a neural network, and the like, and methodologies to which they are applied.

일 실시예로, 본 발명에 따른 인공지능 모델은 학습데이터를 입력하여 학습된 합성곱 신경망(Convolutional deep Neural Networks, CNN) 기반의 인공지능 모델일 수 있다. 다만, 이에 한정되는 것은 아니며, 다양한 인공지능 모델이 본 발명에 적용될 수 있음은 물론이다. 예컨대, DNN(Deep Neural Network), RNN(Recurrent Neural Network), BRDNN(Bidirectional Recurrent Deep Neural Network)과 같은 모델이 인공지능 모델로서 사용될 수 있으나, 이에 한정되지 않는다.As an embodiment, the artificial intelligence model according to the present invention may be an artificial intelligence model based on convolutional deep neural networks (CNN) learned by inputting training data. However, it is not limited thereto, and it goes without saying that various artificial intelligence models can be applied to the present invention. For example, models such as a deep neural network (DNN), a recurrent neural network (RNN), and a bidirectional recurrent deep neural network (BRDNN) may be used as an artificial intelligence model, but are not limited thereto.

이때, 합성곱 신경망(Convolutional deep Neural Networks, CNN)은 최소한의 전처리(preprocess)를 사용하도록 설계된 다계층 퍼셉트론(multilayer perceptrons)의 한 종류이다. 합성곱 신경망은 하나 또는 여러개의 합성곱 계층(convolutional layer)과 그 위에 올려진 일반적인 인공신경망 계층들로 이루어져 있으며, 가중치와 통합 계층(pooling layer)들을 추가로 활용한다. 이러한 구조 덕분에 합성곱 신경망은 2차원 구조의 입력 데이터를 충분히 활용할 수 있다. 또한, 합성곱 신경망은 표준 역전달을 통해 훈련될 수 있다. 합성곱 신경망은 다른 피드포워드 인공신경망 기법들보다 쉽게 훈련되는 편이고 적은 수의 매개변수를 사용한다는 이점이 있다.At this time, convolutional deep neural networks (CNNs) are a type of multilayer perceptrons designed to use a minimum of preprocessing. A convolutional neural network consists of one or several convolutional layers and general artificial neural network layers placed on top of them, and additionally utilizes weights and pooling layers. Thanks to this structure, convolutional neural networks can fully utilize input data with a two-dimensional structure. Also, convolutional neural networks can be trained via standard back-propagation. Convolutional neural networks are easier to train than other feedforward artificial neural network techniques and have the advantage of using fewer parameters.

또한, 심층 신경망(Deep Neural Networks, DNN)은 입력 계층(input layer)과 출력 계층(output layer) 사이에 복수개의 은닉 계층(hidden layer)들로 이뤄진 인공신경망(Artificial Neural Network, ANN)이다.In addition, deep neural networks (DNNs) are artificial neural networks (ANNs) consisting of a plurality of hidden layers between an input layer and an output layer.

이때, 심층 신경망의 구조는 퍼셉트론(perceptron)으로 구성될 수 있다. 퍼셉트론은 여러 개의 입력 값(input)과 하나의 프로세서(prosessor), 하나의 출력 값으로 구성된다. 프로세서는 여러 개의 입력 값에 각각 가중치를 곱한 후, 가중치가 곱해진 입력 값들을 모두 합한다. 그 다음 프로세서는 합해진 값을 활성화함수에 대입하여 하나의 출력 값을 출력한다. 만약 활성화함수의 출력 값으로 특정한 값이 나오기를 원하는 경우, 각 입력 값에 곱해지는 가중치를 수정하고, 수정된 가중치를 이용하여 출력 값을 다시 계산할 수 있다. 이때, 각각의 퍼셉트론은 서로 다른 활성화함수를 사용할 수 있다. 또한 각각의 퍼셉트론은 이전 계층에서 전달된 출력들을 입력으로 받아들인 다음, 활성화 함수를 이용해서 출력을 구한다. 구해진 출력은 다음 계층의 입력으로 전달된다. 상술한 바와 같은 과정을 거치면 최종적으로 몇 개의 출력 값을 얻을 수 있다.At this time, the structure of the deep neural network may be composed of a perceptron. Perceptron consists of several inputs, one processor, and one output value. The processor multiplies each of a plurality of input values by a weight, and then sums all the input values multiplied by the weight. Then, the processor substitutes the summed value into the activation function and outputs one output value. If a specific value is desired as an output value of the activation function, a weight value multiplied with each input value may be modified, and an output value may be recalculated using the corrected weight value. At this time, each perceptron may use a different activation function. In addition, each perceptron accepts the outputs passed from the previous layer as inputs, and then obtains the outputs using the activation function. The obtained output is passed as input to the next layer. Through the process as described above, several output values can finally be obtained.

순환 신경망(Reccurent Neural Network, RNN)은 인공신경망을 구성하는 유닛 사이의 연결이 Directed cycle을 구성하는 신경망을 말한다. 순환 신경망은 앞먹임 신경망과 달리, 임의의 입력을 처리하기 위해 신경망 내부의 메모리를 활용할 수 있다.Recurrent Neural Network (RNN) refers to a neural network in which the connections between units constituting an artificial neural network constitute a directed cycle. Unlike feed-forward neural networks, recurrent neural networks can utilize the memory inside the neural network to process arbitrary inputs.

심층 신뢰 신경망(Deep Belief Networks, DBN)이란 기계학습에서 사용되는 그래프 생성 모형(generative graphical model)으로, 딥 러닝에서는 잠재변수(latent variable)의 다중계층으로 이루어진 심층 신경망을 의미한다. 계층 간에는 연결이 있지만 계층 내의 유닛 간에는 연결이 없다는 특징이 있다.Deep Belief Networks (DBN) is a generative graphical model used in machine learning. In deep learning, it means a deep neural network consisting of multiple layers of latent variables. There are connections between layers, but there is no connection between units within a layer.

심층 신뢰 신경망은 생성 모형이라는 특성상 선행학습에 사용될 수 있고, 선행학습을 통해 초기 가중치를 학습한 후 역전파 혹은 다른 판별 알고리즘을 통해 가중치의 미조정을 할 수 있다. 이러한 특성은 훈련용 데이터가 적을 때 굉장히 유용한데, 이는 훈련용 데이터가 적을수록 가중치의 초기값이 결과적인 모델에 끼치는 영향이 세지기 때문이다. 선행학습된 가중치 초기값은 임의로 설정된 가중치 초기값에 비해 최적의 가중치에 가깝게 되고 이는 미조정 단계의 성능과 속도향상을 가능케 한다.Due to the characteristics of a generative model, the deep trust neural network can be used for prior learning, and after learning initial weights through prior learning, the weights can be fine-tuned through backpropagation or other discrimination algorithms. This characteristic is very useful when there is little training data, because the smaller the training data, the stronger the influence of the initial weight values on the resulting model. The pre-learned initial value of the weight becomes closer to the optimal weight than the arbitrarily set initial value of the weight, which enables the performance and speed of the fine-tuning step to be improved.

상술한 인공지능 및 그 학습방법에 관한 내용은 예시를 위하여 서술된 것이며, 이하에서 설명되는 실시 예들에서 이용되는 인공지능 및 그 학습방법은 제한되지 않는다. 예를 들어, 당 업계의 통상의 기술자가 동일한 과제해결을 위하여 적용할 수 있는 모든 종류의 인공지능 기술 및 그 학습방법이 개시된 실시 예에 따른 시스템을 구현하는 데 활용될 수 있다.The above-described artificial intelligence and its learning method are described for illustrative purposes, and the artificial intelligence and its learning method used in the embodiments described below are not limited. For example, all kinds of artificial intelligence technologies and learning methods that can be applied by a person skilled in the art to solve the same problem can be used to implement the system according to the disclosed embodiment.

한편, 본 발명의 제1 단말(제2 시설의 관리자에 대응하는 단말) 및 제2 단말(제3 시설의 대상자를 보호하거나 간병하는 보호자 또는 의료인에 대응하는 단말)은 전자 장치이며, 전자 장치는 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC (desktop PC), 랩탑 PC(laptop PC), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라, 또는 웨어러블 장치(wearable device), 인공지능 스피커(AI speaker) 중 적어도 하나를 포함할 수 있다.On the other hand, the first terminal (terminal corresponding to the manager of the second facility) and the second terminal (terminal corresponding to the guardian or medical person who protects or cares for the subject of the third facility) of the present invention are electronic devices, and the electronic device Smartphone, tablet personal computer, mobile phone, video phone, e-book reader, desktop PC, laptop PC, netbook computer (netbook computer), workstation, server, personal digital assistant (PDA), portable multimedia player (PMP), MP3 player, mobile medical device, camera, or wearable device, AI speaker ) may include at least one of

도 1은 본 발명의 시스템 구성도이다.1 is a system configuration diagram of the present invention.

도 5는 본 발명의 기본 흐름도이다.5 is a basic flow chart of the present invention.

도시된 바에 따르면, 본 발명의 서버(100)에 의한 문제상황 방지 및 시설물 관리를 위한 IoT 시스템(200, 300, 400)의 제어 방법은, 서버(100)가, 관리 시설에 대응하는 IoT 시스템(200, 300, 400)으로부터 관리 정보를 획득하는 단계, 서버(100)가, 관리 정보를 바탕으로 문제상황 이벤트의 발생 여부를 판단하는 단계, 서버(100)가, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계, 서버(100)가, 문제상황 유형 정보를 바탕으로, IoT 시스템(200, 300, 400)의 동작을 제어하는 단계 및 서버(100)가, 기 등록된 전자 단말로 문제상황 이벤트에 대응하는 알람을 전송하는 단계를 포함한다.As shown, in the control method of the IoT system 200, 300, 400 for preventing problem situations and managing facilities by the server 100 of the present invention, the server 100, the IoT system corresponding to the management facility ( 200, 300, 400), step of obtaining management information from the server 100, determining whether a problem situation event has occurred based on the management information, server 100, according to the determination result, problem situation event Acquisition of problem situation type information corresponding to, the server 100, based on the problem situation type information, the step of controlling the operation of the IoT system (200, 300, 400) and the server 100, pre-registered and transmitting an alarm corresponding to the problem situation event to the selected electronic terminal.

서버(100)가, 관리 시설에 대응하는 IoT 시스템(200, 300, 400)으로부터 관리 정보를 획득하는 단계에서, 관리 시설은, 지하 공간, 터널, 체육시설, 문화재, 보건 시설 등 보안 또는 안전 문제가 발생할 수 있어 관리가 필요한 시설이며, IoT 시스템(200, 300, 400)은, IoT 기반 시스템으로 센서로 획득된 데이터를 활용한 자동 동작 제어 시스템일 수 있다.In the step in which the server 100 acquires management information from the IoT systems 200, 300, and 400 corresponding to the management facility, the management facility is a security or safety problem such as an underground space, a tunnel, a sports facility, a cultural property, a health facility, etc. It is a facility that requires management because it can occur, and the IoT system (200, 300, 400) is an IoT-based system and may be an automatic operation control system using data acquired by a sensor.

또한, 관리 정보는, 관리 시설에 설치되어 동작 중인 IoT 시스템(200, 300, 400)으로부터 획득된 데이터일 수 있다.In addition, the management information may be data obtained from the IoT systems 200, 300, and 400 installed in the management facility and operating.

서버(100)가, 관리 정보를 바탕으로 문제상황 이벤트의 발생 여부를 판단하는 단계 및 서버(100)가, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계에서, 문제상황 이벤트는, 침수, 역류, 교통사고, 지진, 붕괴, 정전, 침입, 도난, 시설물 훼손, 화재 및 건강 이상 중 어느 하나 이상의 사건이 발생한 것일 수 있으며, 문제상황 유형 정보는, 발생한 문제상황 이벤트를 침수, 역류, 교통사고, 지진, 붕괴, 정전, 침입, 도난, 시설물 훼손, 화재 및 건강 이상에 대한 카테고리로 분류함으로써 식별된 유형 정보일 수 있다.In the step of the server 100 determining whether a problem situation event has occurred based on the management information and the server 100 acquiring problem situation type information corresponding to the problem situation event according to the determination result, the problem The situation event may be one or more occurrences of flooding, regurgitation, traffic accident, earthquake, collapse, power outage, intrusion, theft, facility damage, fire, and health problems. It may be type information identified by classifying it into categories such as flooding, regurgitation, traffic accident, earthquake, collapse, power outage, intrusion, theft, facility damage, fire, and health abnormality.

서버(100)가, 문제상황 유형 정보를 바탕으로, IoT 시스템(200, 300, 400)의 동작을 제어하는 단계에서, IoT 시스템(200, 300, 400)은 발생한 문제상황 이벤트에 대해, 침수, 역류, 교통사고, 지진, 붕괴, 정전, 침입, 도난, 시설물 훼손, 화재 및 건강 이상 중 어떠한 유형 정보인지에 따라 기 등록된 대응 방법을 실행함으로써 대처하여, 관리 시설의 보안 및 관리 시설 이용자의 안전을 유지할 수 있다.In the step of the server 100 controlling the operation of the IoT system 200, 300, 400 based on the problem situation type information, the IoT system 200, 300, 400, for the problem situation event that occurred, flooding, Reverse current, traffic accident, earthquake, collapse, power outage, intrusion, theft, facility damage, fire, and health abnormality, depending on the type of information, responding by executing a pre-registered response method to ensure the security of management facilities and the safety of management facility users can keep

서버(100)가, 기 등록된 전자 단말로 문제상황 이벤트에 대응하는 알람을 전송하는 단계에서, 전자 단말(제1 단말 및 제2 단말을 포함)은 관리 시설에 대응하는 관리자, 대상자(예를 들어, 환자, 노약자 등), 대상자의 보호자 및 의료인 중 어느 하나가 소지한 전자 장치일 수 있다.In the step of the server 100 transmitting an alarm corresponding to a problem situation event to a pre-registered electronic terminal, the electronic terminal (including the first terminal and the second terminal) is a manager corresponding to the management facility, a target person (eg For example, the electronic device may be an electronic device possessed by any one of a patient, an elderly person, etc.), a guardian of a subject, and a medical practitioner.

도 6은 본 발명의 일 실시예에 따른 흐름도이다.6 is a flowchart according to one embodiment of the present invention.

본 발명의 제어 방법에 있어서, 일 실시예에 따라, 관리 시설이 지하차도, 지하주차장 및 터널 중 어느 하나인 제1 시설인 경우, 도시된 바와 같이, 관리 시설에 대응하는 IoT 시스템(200)으로부터 관리 정보를 획득하는 단계는, 서버(100)가, 제1 시설에 대응하는 IoT 시스템(200)으로부터 침수 수위 정보, 제1 영상 정보 및 통행량 정보를 관리 정보로 획득하는 단계를 더 포함하고, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는, 서버(100)가, 침수 수위 정보를 바탕으로 침수 정보를 문제상황 유형 정보로 획득하는 단계, 서버(100)가, 제1 영상 정보를 바탕으로 붕괴 정보를 문제상황 유형 정보로 획득하는 단계 및 서버(100)가, 제1 영상 정보 및 통행량 정보를 바탕으로 추돌 정보를 문제상황 유형 정보로 획득하는 단계를 더 포함할 수 있다.In the control method of the present invention, according to an embodiment, when the management facility is a first facility that is any one of an underpass, an underground parking lot, and a tunnel, as shown, from the IoT system 200 corresponding to the management facility The step of acquiring the management information further includes acquiring, by the server 100, submerged water level information, first image information, and traffic information from the IoT system 200 corresponding to the first facility as management information, and determining According to the result, the step of obtaining the problem situation type information corresponding to the problem situation event is the step of obtaining, by the server 100, submersion information as problem situation type information based on the flood level information, by the server 100, Acquiring collapse information as problem situation type information based on the first image information and obtaining, by the server 100, collision information as problem situation type information based on the first image information and traffic information. can

구체적으로, 침수 수위 정보, 제1 영상 정보 및 통행량 정보를 관리 정보로 획득하는 단계에서, 서버(100)는 제1 시설에 대응하는 수위 측정 센서, 교통단속 카메라 및 보안 카메라 중 어느 하나를 포함하는 제1 시설 IoT 시스템(200)을 통해 관리 정보를 획득할 수 있다.Specifically, in the step of acquiring the submerged water level information, the first image information, and the traffic information as management information, the server 100 includes any one of a water level measuring sensor, a traffic enforcement camera, and a security camera corresponding to the first facility Management information may be obtained through the first facility IoT system 200 .

추가로, 침수 수위 정보를 바탕으로 침수 정보를 문제상황 유형 정보로 획득하는 단계는, 서버(100)가, 수위 상승 속도를 획득하는 단계, 서버(100)가, 수위 상승 속도를 바탕으로 기 설정된 위험 수위까지 도달하는 제1 시간값을 산출하는 단계, 서버(100)가, 제1 시간값을 바탕으로 시뮬레이션 정보를 획득하는 단계 및 서버(100)가, 기 설정된 위험등급 기준 및 시뮬레이션 정보를 바탕으로 침수 수위 정보에 위험등급 정보를 매칭하는 단계를 더 포함하여, 침수가 발생한 것에 대한 문제상황 이벤트의 위험성을 판단하고 이에 따라 대처 속도(IoT 시스템(200)의 동작 속도)를 기준 속도보다 빠르게 조정할 수 있다.In addition, the step of obtaining submersion information as problem situation type information based on the submerged water level information is the step of obtaining, by the server 100, the water level rise rate, by the server 100, based on the water level rise rate, Calculating a first time value to reach the danger level, obtaining, by the server 100, simulation information based on the first time value; Further comprising matching risk level information with flood level information, determining the risk of a problem situation event for flooding and adjusting the response speed (the operating speed of the IoT system 200) faster than the reference speed accordingly can

제1 영상 정보를 바탕으로 붕괴 정보를 문제상황 유형 정보로 획득하는 단계에서, 서버(100)가, 관리 시설인 제1 시설의 기준 이미지를 획득하는 단계, 서버(100)가, 제1 영상 정보로부터 제1 시설의 기준 이미지에 대응하지 않는 미확인 객체를 식별하는 단계, 서버(100)가, 통행량 정보를 바탕으로 미확인 객체를 식별하는 단계, 미확인 객체가 통행량 정보에 대응하지 않는 경우, 서버(100)가, 미확인 객체에 대응하는 배경값이 제1 영상 정보로부터 기 설정된 제2 시간값 이내에 획득되는지 여부를 판단하는 단계 및 서버(100)가, 판단 결과를 바탕으로 붕괴 정보를 획득하는 단계를 더 포함할 수 있다.In the step of obtaining collapse information as problem situation type information based on the first image information, the server 100 acquires a reference image of the first facility, which is a management facility, the server 100, the first image information identifying an unidentified object that does not correspond to the reference image of the first facility from the step of identifying, by the server 100, an unidentified object based on the traffic information; if the unidentified object does not correspond to the traffic information, the server 100 ), determining whether the background value corresponding to the unidentified object is obtained within a preset second time value from the first image information, and obtaining, by the server 100, collapse information based on the determination result. can include

구체적으로, 제1 시설의 시설물(예를 들어, 조명, 환풍기, 기둥, 차선, 스피커, 전광판, 소화전 등)과 관련한 이미지인 기준 이미지가 미확인 객체로 인해 가려져 영상(제1 영상 정보)으로부터 제2 시간값 동안 획득되지 않는 경우, 서버(100)는, 관리 시설 내에 붕괴가 발생하여 기준 이미지가 획득되지 않은 것으로 판단할 수 있다.Specifically, a reference image, which is an image related to facilities of the first facility (eg, lighting, ventilators, pillars, lanes, speakers, electric signs, fire hydrants, etc.), is obscured by an unidentified object, and the second image information (first image information) If not obtained during the time value, the server 100 may determine that the reference image is not acquired because collapse occurs in the management facility.

이때, 통행량 정보를 바탕으로 미확인 객체를 식별하는 단계에서, 미확인 객체가 통행량 정보에 포함된 차량으로 식별될 수 있으며, 차량으로 식별된 경우, 서버(100)는, 문제상황 이벤트가 발생하지 않은 것으로 판단할 수 있다.At this time, in the step of identifying the unidentified object based on the traffic information, the unidentified object may be identified as a vehicle included in the traffic information, and when identified as a vehicle, the server 100 determines that no problem event has occurred. can judge

제1 영상 정보 및 통행량 정보를 바탕으로 추돌 정보를 문제상황 유형 정보로 획득하는 단계에서, 서버(100)는, 제1 영상 정보를 바탕으로 기 설정된 영역 내의 차량 밀집도가 기 설정된 밀집도를 초과한 경우 차량 추돌 사고가 발생한 것으로 판단할 수 있고, 또한, 통행량 정보를 바탕으로 관리 시설 내에 위치한 차량 대수가 기 설저된 차량 대수를 초과한 경우 차량 추돌 사고가 발생한 것으로 판단하여, 차량 추돌 사고에 대한 정보인 추돌 정보를 문제상황 유형 정보로 획득할 수 있다.In the step of obtaining collision information as problem situation type information based on the first image information and traffic information, the server 100, if the vehicle density in a preset area exceeds the preset density based on the first image information It can be determined that a vehicle collision accident has occurred, and based on the traffic volume information, if the number of vehicles located in the management facility exceeds the number of vehicles already installed, it is determined that a vehicle collision accident has occurred, and information on the vehicle collision accident Collision information can be acquired as problem situation type information.

또한, 일 실시예에 따라, 문제상황 유형 정보를 바탕으로, IoT 시스템(200)의 동작을 제어하는 단계는, IoT 시스템(200)이, 서버(100)의 제어를 통해 출입 통제 경보를 동작시키는 단계, IoT 시스템(200)이, 서버(100)의 제어를 통해 방송 정보를 출력하는 단계 및 IoT 시스템(200)이, 서버(100)의 제어를 통해 전광판을 동작시키는 단계를 더 포함할 수 있다.In addition, according to an embodiment, the step of controlling the operation of the IoT system 200 based on the problem situation type information includes operating an access control alarm through the control of the server 100 by the IoT system 200. The step, the step of the IoT system 200 outputting broadcasting information through the control of the server 100 and the step of the IoT system 200 operating the electronic signboard through the control of the server 100 may further be included. .

IoT 시스템(200)이, 서버(100)의 제어를 통해 출입 통제 경보를 동작시키는 단계에서, IoT 시스템(200)이, 제1 시설에 대응하는 스피커를 통해 기 등록된 사이렌음을 출력하는 단계, IoT 시스템(200)이, 제1 시설에 대응하는 신호등을 적색 신호를 출력하도록 제어하는 단계 및 IoT 시스템(200)이, 제1 시설에 대응하는 출입 차단기를 통해 차량 진입을 제한하는 단계를 더 포함할 수 있다.In the step of the IoT system 200 operating the access control alarm through the control of the server 100, the IoT system 200 outputs a pre-registered siren sound through a speaker corresponding to the first facility; The step of controlling, by the IoT system 200, the traffic light corresponding to the first facility to output a red signal, and the step of, by the IoT system 200, the step of restricting vehicle entry through the access barrier corresponding to the first facility can do.

IoT 시스템(200)이, 서버(100)의 제어를 통해 방송 정보를 출력하는 단계에서, IoT 시스템(200)이 제1 시설에 대응하는 스피커를 통해 기 등록된 진입금지 멘트(예를 들어, "터널 내 사고가 발생하였으므로 우회하여 가시기를 바랍니다." 등)를 출력할 수 있다.In the step of the IoT system 200 outputting broadcasting information through the control of the server 100, the IoT system 200 transmits a pre-registered entry prohibition statement (eg, "no entry" through a speaker corresponding to the first facility). There has been an accident in the tunnel, so please take a detour." etc.) can be output.

IoT 시스템(200)이, 서버(100)의 제어를 통해 전광판을 동작시키는 단계에서, IoT 시스템(200)이 제1 시설에 대응하는 전광판을 통해 기 등록된 문구(예를 들어, "진입금지", "붕괴발생" 등)를 출력할 수 있다.In the step of the IoT system 200 operating the signboard through the control of the server 100, the IoT system 200 pre-registered phrase (for example, “entry prohibited”) through the signboard corresponding to the first facility. , "collapse occurrence", etc.) can be output.

추가로, 일 실시예에 따라, 본 발명의 제어 방법은, 문제상황 이벤트를 획득한 경우, 서버(100)가, 제1 시설에 대응하는 수위 측정 센서, 교통단속 카메라 및 보안 카메라 간의 교차 검증을 제어하는 단계를 더 포함할 수 있다.Additionally, according to an embodiment, in the control method of the present invention, when a problem situation event is obtained, the server 100 performs cross-verification between the water level measuring sensor, the traffic enforcement camera, and the security camera corresponding to the first facility. A controlling step may be further included.

구체적으로, 서버(100)가 침수 정보를 획득한 경우, IoT 시스템(200)이, 제1 영상 정보를 바탕으로 제1 시설의 침수 여부를 판단하는 단계, 서버(100)가, 판단 결과를 획득하는 단계 및 서버(100)가, 판단 결과를 바탕으로 침수 정보의 획득을 문제상황 이벤트의 발생으로 판단하는 단계를 더 포함할 수 있다.Specifically, when the server 100 obtains flood information, the IoT system 200 determines whether the first facility is flooded based on the first image information, and the server 100 obtains the determination result. The server 100 may further include determining that the acquisition of submersion information is the occurrence of a problem situation event based on the determination result.

또한, IoT 시스템(200)이, 제1 영상 정보를 바탕으로 제1 시설의 침수 여부를 판단하는 단계에서, 제1 영상 정보가 미획득 되고, 통행량 정보를 바탕으로 획득된 현재 시점에 대응하는 통행량과 기 등록된 기준 통행량의 차이값이 기 설정된 제1 차이값 이하인 경우, 서버(100)가, 침수 정보를 수위 센서 오류 정보로 획득하는 단계를 더 포함하여, 보안 카메라가 고장난 경우에도, 서버(100)가 교통단속 카메라를 통해 침수 정보의 진위 여부를 판단할 수 있다.In addition, in the step where the IoT system 200 determines whether the first facility is flooded based on the first image information, the first image information is not acquired and the traffic volume corresponding to the current point in time obtained based on the traffic volume information When the difference value between the previously registered standard traffic volume is less than or equal to the preset first difference value, the server 100 further comprising obtaining submersion information as water level sensor error information, so that even if the security camera is broken, the server ( 100) can determine the authenticity of flood information through the traffic control camera.

일 실시예에서, 제1 시설에 대응하는 보안 카메라는 제1 시설 내부에 설치되고, 제1 시설에 대응하는 교통단속 카메라는 제1 시설의 출입구에 설치될 수 있다.In one embodiment, a security camera corresponding to the first facility may be installed inside the first facility, and a traffic enforcement camera corresponding to the first facility may be installed at an entrance of the first facility.

도 2는 본 발명의 다른 실시예에 따른 시스템 구성도이다.2 is a system configuration diagram according to another embodiment of the present invention.

도 3은 본 발명의 다른 실시예에 따른 객체 추적 방식을 도시한 것이다.3 illustrates an object tracking method according to another embodiment of the present invention.

도 7은 본 발명의 다른 실시예에 따른 흐름도이다.7 is a flowchart according to another embodiment of the present invention.

다른 실시예에 따라, 본 발명의 제어 방법에 있어서, 관리 시설이 체육시설(예를 들어, 체육관, 운동장, 경기장 등) 및 문화재 시설(예를 들어, 고분, 박물관, 고궁 등) 중 어느 하나인 제2 시설인 경우, 도시된 바와 같이, 관리 시설에 대응하는 IoT 시스템(300)으로부터 관리 정보를 획득하는 단계는, 서버(100)가, 제2 영상 정보, 출입 정보, 예약 정보 및 온습도 정보를 관리 정보로 획득하는 단계를 더 포함하고, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는, 서버(100)가, 제2 영상 정보, 출입 정보 및 예약 정보 중 적어도 하나를 바탕으로 침입 정보, 파손 정보 및 도난 정보 중 적어도 하나를 문제상황 유형 정보로 획득하는 단계 및 서버(100)가, 제2 영상 정보 및 온습도 정보를 바탕으로 화재 정보를 문제상황 유형 정보로 획득하는 단계를 더 포함할 수 있다.According to another embodiment, in the control method of the present invention, the management facility is any one of sports facilities (eg, gymnasium, playground, stadium, etc.) and cultural property facilities (eg, tombs, museums, palaces, etc.) In the case of the second facility, as shown, in the step of obtaining management information from the IoT system 300 corresponding to the management facility, the server 100 provides second image information, access information, reservation information, and temperature and humidity information. The step of obtaining the problem situation type information corresponding to the problem situation event according to the determination result further includes the step of obtaining management information, and the step of acquiring the problem situation type information corresponding to the problem situation event, the server 100 performs at least one of second image information, access information, and reservation information. Acquiring at least one of intrusion information, damage information, and theft information as problem situation type information based on one, and the server 100 acquiring fire information as problem situation type information based on the second image information and temperature and humidity information It may further include steps to do.

서버(100)가, 제2 영상 정보, 출입 정보, 예약 정보 및 온습도 정보를 관리 정보로 획득하는 단계에서, 관리 정보는, 제2 시설에 대응하는 예약 어플리케이션, 제2 시설의 출입문(310) 여닫힘 감지 센서, 제2 시설의 CCTV(330), 제2 시설의 온습도 센서, 제2 시설의 창문 여닫힘 감지 센서 등에 의해 생성될 수 있다.In the step of acquiring, by the server 100, second image information, access information, reservation information, and temperature and humidity information as management information, the management information includes a reservation application corresponding to the second facility, and a door 310 of the second facility. It may be generated by a closing detection sensor, a CCTV 330 of the second facility, a temperature and humidity sensor of the second facility, a window opening/closing detection sensor of the second facility, and the like.

다른 실시예에 따라, 문제상황 유형 정보를 바탕으로, IoT 시스템(300)의 동작을 제어하는 단계는, IoT 시스템(300)이, 서버(100)의 제어에 따라, 문제상황 유형 정보에 대응하는 방송을 출력하는 단계, IoT 시스템(300)이, 서버(100)의 제어에 따라, 출입 통제 경보를 동작시키는 단계, IoT 시스템(300)이, 서버(100)의 제어에 따라, 객체(10) 추적 촬영을 실시하는 단계 및 IoT 시스템(300)이, 문제상황 유형 정보 및 객체(10) 추적 정보를 제2 시설에 대응하는 제1 단말에 공유하는 단계를 더 포함할 수 있다.According to another embodiment, the step of controlling the operation of the IoT system 300 based on the problem situation type information includes the IoT system 300 corresponding to the problem situation type information under the control of the server 100. Outputting a broadcast, the IoT system 300 operating an access control alarm under the control of the server 100, the IoT system 300, under the control of the server 100, the object 10 The step of performing tracking photographing and the IoT system 300 may further include sharing problem situation type information and tracking information of the object 10 to a first terminal corresponding to a second facility.

IoT 시스템(300)이, 서버(100)의 제어에 따라, 문제상황 유형 정보에 대응하는 방송을 출력하는 단계에서, 방송은 기 등록된 경고 멘트(예를 들어, "시설 밖으로 나가주시기 바랍니다." 등)일 수 있다.In the step of the IoT system 300 outputting a broadcast corresponding to the problem situation type information under the control of the server 100, the broadcast is a pre-registered warning message (eg, "Please leave the facility." etc.) can be

IoT 시스템(300)이, 서버(100)의 제어에 따라, 출입 통제 경보를 동작시키는 단계에서, 출입 통제 경보는, 기 등록된 사이렌 소리일 수 있으며, 추가로, IoT 시스템(300)이, 출입문(310)의 잠금을 실시하는 단계 및 IoT 시스템(300)이, 출입문(310)에 대응하는 조명(340)이 붉은색으로 발광하도록 제어하는 단계를 더 포함할 수 있다.In the step of the IoT system 300 operating the access control alarm under the control of the server 100, the access control alarm may be a pre-registered siren sound, and additionally, the IoT system 300 The step of locking 310 and the IoT system 300 controlling the light 340 corresponding to the door 310 to emit red light may be further included.

IoT 시스템(300)이, 서버(100)의 제어에 따라, 객체(10) 추적 촬영을 실시하는 단계 및 IoT 시스템(300)이, 문제상황 유형 정보 및 객체(10) 추적 정보를 제2 시설에 대응하는 제1 단말에 공유하는 단계에서, 제1 단말은 제2 시설을 관리하는 관리자의 전자 장치일 수 있다.The step of the IoT system 300 performing tracking and photographing of the object 10 under the control of the server 100, and the IoT system 300 providing problem situation type information and object 10 tracking information to the second facility. In the step of sharing with the corresponding first terminal, the first terminal may be an electronic device of a manager managing the second facility.

다른 실시예에 의하여, 서버(100)의 제어에 따라, 객체(10) 추적 촬영을 실시하는 단계는, IoT 시스템(300)이, 문제상황 유형 정보에 대응하는 객체(10)를 중심 좌표로 CCTV(330)의 촬영 영역을 변경하는 단계 및 IoT 시스템(300)이, 드론(350)을 통해 문제상황 유형 정보에 대응하는 객체(10)에 대한 객체(10) 추적을 실행하는 단계를 더 포함할 수 있다.According to another embodiment, the step of tracking and photographing the object 10 under the control of the server 100 is such that the IoT system 300 sets the object 10 corresponding to the problem situation type information to the center coordinates of CCTV. The step of changing the shooting area of 330 and the IoT system 300 further including the step of executing object 10 tracking for the object 10 corresponding to the problem situation type information through the drone 350. can

IoT 시스템(300)이, 문제상황 유형 정보에 대응하는 객체(10)를 중심 좌표로 CCTV(330)의 촬영 영역을 변경하는 단계에서, IoT 시스템(300)이, CCTV의 가시영역(331) 내에서 촬영 영역을 변경하는 것이 가능하다.In the step of the IoT system 300 changing the shooting area of the CCTV 330 with the center coordinates of the object 10 corresponding to the problem situation type information, the IoT system 300 is within the visible area 331 of the CCTV. It is possible to change the shooting area in

이때, 객체(10)는, 관리 시설에 무단으로 침입한 침입자 또는 관리 시설에 대응하는 시설물(예를 들어, 전시품, 판매 물품, 울타리 등)을 훔치거나 파손시킨 범인일 수 있다.In this case, the object 10 may be an intruder who trespasses into the management facility without permission or a culprit who steals or damages facilities corresponding to the management facility (eg, exhibits, items for sale, fences, etc.).

구체적으로, 서버(100)가, 제2 시설에 대응하지 않는 이미지를 제2 영상으로부터 검출한 경우, 인공지능을 통해, 이미지가 물건(예를 들어, 물병, 가방 등), 동물, 사람 및 비행체(예를 들어, 조류, 연, 타인의 드론 등) 중 어느 하나인지 판단할 수 있으며, 이미지가 사람 또는 비행체인 경우, 이미지를 객체(10)로 특정할 수 있다.Specifically, when the server 100 detects an image that does not correspond to the second facility from the second image, the image is an object (eg, water bottle, bag, etc.), animal, person, and flying object through artificial intelligence. (For example, a bird, a kite, another person's drone, etc.) may be determined, and if the image is a person or an air vehicle, the image may be specified as the object 10 .

IoT 시스템(300)이, 드론(350)을 통해 문제상황 유형 정보에 대응하는 객체(10)에 대한 객체(10) 추적을 실행하는 단계에서, 객체(10)가 CCTV의 가시영역(331)을 이탈한 경우, IoT 시스템(300)이 드론(350)을 통해 객체(10)를 추적할 수 있다.In the step of executing the object 10 tracking for the object 10 corresponding to the problem situation type information through the drone 350 by the IoT system 300, the object 10 covers the visible area 331 of the CCTV. When departing, the IoT system 300 may track the object 10 through the drone 350.

이때, 문제상황 유형 정보에 대응하는 객체(10)를 중심 좌표로 CCTV(330)의 촬영 영역을 변경하는 단계는, IoT 시스템(300)이, 기 등록된 기초 이미지에 대응하는 객체(10)를 검출하는 단계, IoT 시스템(300)이, 객체(10)를 중심좌표로 획득하는 단계 및 IoT 시스템(300)이, 중심좌표 변위를 바탕으로 객체(10)를 추적하는 단계를 더 포함할 수 있다.At this time, in the step of changing the shooting area of the CCTV 330 with the center coordinates of the object 10 corresponding to the problem situation type information, the IoT system 300 uses the object 10 corresponding to the pre-registered basic image. The step of detecting, by the IoT system 300, acquiring the object 10 as the center coordinates, and by the IoT system 300, the step of tracking the object 10 based on the displacement of the center coordinates may be further included. .

IoT 시스템(300)이, 기 등록된 기초 이미지에 대응하는 객체(10)를 검출하는 단계에서, IoT 시스템(300)은, 제2 시설의 정적인 배경 이미지인 기초 이미지를 바탕으로 동적인 객체(10)를 검출할 수 있다.In the step of the IoT system 300 detecting the object 10 corresponding to the pre-registered base image, the IoT system 300 includes a dynamic object based on the base image, which is a static background image of the second facility ( 10) can be detected.

또한, 드론(350)을 통해 문제상황 유형 정보에 대응하는 객체(10)에 대한 객체(10) 추적을 실행하는 단계는, 촬영 영역이 CCTV의 가시영역(331)을 벗어나 CCTV의 비가시영역(332)에 위치한 경우, IoT 시스템(300)이, 중심좌표 변위를 바탕으로 객체(10)의 이동 방향 및 객체(10)의 이동 속도를 획득하는 단계, IoT 시스템(300)이, 객체(10)의 이동 방향 및 객체(10)의 이동 속도를 바탕으로 객체(10) 획득 영역을 산출하는 단계, IoT 시스템(300)이, 객체(10) 획득 영역에 대응하여 드론(350)을 동작시키는 단계, IoT 시스템(300)이, 드론(350)을 통해 객체(10)를 검출하는 단계 및 IoT 시스템(300)이, 객체(10)를 드론(350)의 추적 좌표로 획득하는 단계를 더 포함할 수 있다.In addition, in the step of executing the tracking of the object 10 for the object 10 corresponding to the problem situation type information through the drone 350, the shooting area is out of the visible area 331 of the CCTV and the non-visible area of the CCTV ( 332), the step of obtaining, by the IoT system 300, the moving direction of the object 10 and the moving speed of the object 10 based on the center coordinate displacement, the IoT system 300, the object 10 Calculating the object 10 acquisition area based on the moving direction of the object 10 and the moving speed of the object 10, the IoT system 300 operating the drone 350 in response to the object 10 acquisition area, The IoT system 300 may further include a step of detecting the object 10 through the drone 350 and a step of the IoT system 300 acquiring the object 10 as tracking coordinates of the drone 350. there is.

IoT 시스템(300)이, 중심좌표 변위를 바탕으로 객체(10)의 이동 방향 및 객체(10)의 이동 속도를 획득하는 단계에서, IoT 시스템(300)은, 객체(10)의 이동 방향 및 객체(10)의 이동 속도를 바탕으로 객체 이동 벡터(11)를 획득할 수 있다.In the step where the IoT system 300 acquires the moving direction and moving speed of the object 10 based on the center coordinate displacement, the IoT system 300, the moving direction of the object 10 and the object An object movement vector 11 can be obtained based on the movement speed of (10).

IoT 시스템(300)이, 객체(10)의 이동 방향 및 객체(10)의 이동 속도를 바탕으로 객체(10) 획득 영역을 산출하는 단계 및 IoT 시스템(300)이, 객체(10) 획득 영역에 대응하여 드론(350)을 동작시키는 단계에서, IoT 시스템(300)은 객체 이동 벡터(11)와 평행한 객체 추적 방향(351)을 따라 드론(350)을 제어할 수 있다.The IoT system 300 calculating the object 10 acquisition area based on the moving direction of the object 10 and the moving speed of the object 10, and the IoT system 300 in the object 10 acquisition area In the step of correspondingly operating the drone 350, the IoT system 300 may control the drone 350 along the object tracking direction 351 parallel to the object movement vector 11.

IoT 시스템(300)이, 드론(350)을 통해 객체(10)를 검출하는 단계에서, IoT 시스템(300)이, CCTV(330)를 통해 획득한 이미지를 바탕으로 드론(350)을 통해 획득하는 영상에서 객체(10)를 검출할 수 있다.In the step of the IoT system 300 detecting the object 10 through the drone 350, the IoT system 300 acquires through the drone 350 based on the image acquired through the CCTV 330. The object 10 may be detected in the image.

추가로, 객체(10)가 비행체인 경우, IoT 시스템(300)이, 객체(10) 획득 영역에 대응하여 드론(350)을 동작시키는 단계에서, IoT 시스템(300)이, 인공지능을 통해 객체(10)의 비행 방향을 산출하는 단계 및 IoT 시스템(300)이, 드론(350)을 통해 객체(10)의 비행 진로를 제한하는 단계를 더 포함할 수 있다.In addition, when the object 10 is an air vehicle, in the step of operating the drone 350 in response to the object 10 acquisition area, the IoT system 300 performs the object through artificial intelligence. The step of calculating the flight direction of (10) and the IoT system 300 may further include the step of limiting the flight path of the object 10 through the drone 350.

다른 실시예에 따라, 본 발명의 제어 방법은, IoT 시스템(300)이, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 출입문(310) 동작을 제어하는 단계, IoT 시스템(300)이, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 CCTV(330) 동작을 제어하는 단계 및 IoT 시스템(300)이, 조도 정보를 획득하고, 조도 정보를 바탕으로 제2 시설에 대응하는 조명(340) 동작을 제어하는 단계를 더 포함할 수 있다.According to another embodiment, the control method of the present invention includes the step of controlling, by the IoT system 300, the operation of the door 310 corresponding to the second facility based on the second image information and the reservation information, the IoT system 300 ) controls the operation of the CCTV 330 corresponding to the second facility based on the second image information and reservation information, and the IoT system 300 acquires the illumination information, and based on the illumination information, the second facility A step of controlling the operation of the lighting 340 corresponding to may be further included.

이때, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 출입문(310) 동작을 제어하는 단계는, 제2 영상 정보와 예약 정보가 대응하는 경우, IoT 시스템(300)이, 예약 정보에 대응하는 출입문(310) 수동제어 가능 시간을 획득하는 단계를 더 포함할 수 있다.At this time, in the step of controlling the operation of the door 310 corresponding to the second facility based on the second image information and the reservation information, when the second image information and the reservation information correspond, the IoT system 300 performs the reservation information A step of obtaining a manually controllable time of the door 310 corresponding to may be further included.

이에 따라, 예약 시간 동안, 예약자에 의해 출입문(310)의 수동 걔폐가 가능해진다.Accordingly, during the reservation time, manual opening and closing of the door 310 is possible by the person making the reservation.

이때, 제2 영상 정보 및 예약 정보를 바탕으로 제2 시설에 대응하는 CCTV(330) 동작을 제어하는 단계는, 예약 정보와 현재 시간이 대응하는 경우, IoT 시스템(300)이, 제2 시설에 대응하는 영역 정보를 획득하는 단계, IoT 시스템(300)이, 영역 정보에 대응하는 인원 정보를 획득하는 단계 및 인원 정보가 기 설정된 폐쇄 기준에 대응하는 경우, IoT 시스템(300)이, 제2 시설에 대응하는 출입문(310) 동작을 제어하는 단계를 더 포함하고, 예약 정보는, 예약자 안면 이미지를 포함하는 것을 특징으로 할 수 있다.At this time, the step of controlling the operation of the CCTV 330 corresponding to the second facility based on the second video information and the reservation information is, when the reservation information and the current time correspond, the IoT system 300 to the second facility. Acquiring corresponding area information, by the IoT system 300, acquiring personnel information corresponding to the area information, and when the personnel information corresponds to a preset closing criterion, the IoT system 300 performs a second facility Further comprising the step of controlling the operation of the door 310 corresponding to , and the reservation information may include a facial image of the person making the reservation.

이때, 제2 시설에 대응하는 영역 정보는, 예약 정보를 바탕으로 특정된 예약자가 예약한 시설 또는 사용 허가된 구역에 대한 정보일 수 있다.In this case, the area information corresponding to the second facility may be information about a facility reserved by a specific booker based on the reservation information or an area permitted to be used.

구체적으로, 서버(100)는 예약 정보를 바탕으로 예약 시간을 산출하고, 예약 시간에 따라 예약이 종료되는 시간이 현재 시간과 일치한 경우, 영역 정보에 대응하는 영역 내에 인원 수가 0명인 경우 출입문(310)을 자동으로 닫고 잠금할 수 있다.Specifically, the server 100 calculates the reservation time based on the reservation information, and when the time at which the reservation ends according to the reservation time coincides with the current time, when the number of people in the area corresponding to the area information is 0, the door ( 310) can be automatically closed and locked.

IoT 시스템(300)이, 영역 정보에 대응하는 인원 정보를 획득하는 단계에서, 인원 정보가 기 설정된 폐쇄 기준에 대응하지 않는 경우, IoT 시스템(300)이, 서버(100)에 인원 정보를 전송하는 단계 및 서버(100)가, 예약자에 대응하는 제3 단말에 퇴실 알람을 전송하는 단계를 더 포함할 수 있다.In the step of obtaining, by the IoT system 300, personnel information corresponding to area information, when the personnel information does not correspond to a preset closing criterion, the IoT system 300 transmits the personnel information to the server 100. and the server 100 may further include transmitting an exit alarm to a third terminal corresponding to the person making the reservation.

도 4는 본 발명의 또 다른 실시예에 따른 장치를 도시한 것이다.4 shows a device according to another embodiment of the present invention.

도 8은 본 발명의 또 다른 실시예에 따른 흐름도이다.8 is a flowchart according to another embodiment of the present invention.

또 다른 실시예로, 본 발명의 제어 방법에 따라, 관리 시설이 보건 시설(예를 들어, 노인 휴게실, 입원실, 응급실, 보건소 대기실, 환자 대기실 등) 및 노약자 가정(예를 들어, 독거노인 거주지, 조손가정 등) 중 어느 하나인 제3 시설인 경우, 도시된 바와 같이, 관리 시설에 대응하는 IoT 시스템(400)으로부터 관리 정보를 획득하는 단계는, 서버(100)가, 제3 시설에 대응하는 대상자에 대한 케어 정보를 관리 정보로 획득하는 단계를 더 포함하고, 판단 결과에 따라, 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는, 케어 정보에 매칭된 열화상 정보 및 움직임 정보를 바탕으로 위급 정보를 문제상황 유형 정보로 획득하는 단계를 더 포함할 수 있다.In another embodiment, according to the control method of the present invention, the management facility is a health facility (eg, a rest room for the elderly, a hospital room, an emergency room, a public health center waiting room, a patient waiting room, etc.) and a home for the elderly (eg, a residence for the elderly living alone, In the case of a third facility, which is any one of grandparents' homes, etc.), as shown, in the step of obtaining management information from the IoT system 400 corresponding to the management facility, the server 100, corresponding to the third facility Acquiring care information about the target person as management information, and obtaining problem situation type information corresponding to a problem situation event according to a result of the determination includes thermal image information and motion information matched to the care information. Based on this, the step of obtaining emergency information as problem situation type information may be further included.

이때, 대상자는 노약자 및 환자를 포함하는 관리 대상일 수 있다.At this time, the target may be a management target including the elderly and patients.

또한, 문제상황 유형 정보를 바탕으로, IoT 시스템(400)의 동작을 제어하는 단계는, IoT 시스템(400)이, 서버(100)의 제어에 따라, 제3 시설에 대응하는 기 등록된 통신수단을 스피커폰으로 동작시키는 단계, IoT 시스템(400)이, 서버(100)의 제어에 따라, 제3 시설에 대응하는 기 등록된 이상 알람을 출력하는 단계 및 IoT 시스템(400)이, 서버(100)의 제어에 따라, 제3 시설에 대응하는 인터폰을 통해 관리실 통신부로 기 등록된 신호음을 전송하는 단계를 더 포함할 수 있다.In addition, in the step of controlling the operation of the IoT system 400 based on the problem situation type information, the IoT system 400, according to the control of the server 100, a pre-registered communication means corresponding to the third facility operating as a speaker phone, the IoT system 400, under the control of the server 100, outputting a pre-registered abnormal alarm corresponding to the third facility, and the IoT system 400, the server 100 According to the control of the third facility, it may further include transmitting a pre-registered tone to the communication unit of the management office through the intercom corresponding to the third facility.

또 다른 실시예에 따라, 본 발명의 제어 방법은, IoT 시스템(400)이, 기 설정된 시간 간격에 대응하는 확인 알람을 출력하는 단계 및 IoT 시스템(400)이, 확인 알람에 대응하는 버튼 입력 정보를 획득하는 단계를 더 포함할 수 있다.According to another embodiment, the control method of the present invention includes the steps of, by the IoT system 400, outputting a confirmation alarm corresponding to a preset time interval, and the IoT system 400, button input information corresponding to the confirmation alarm. It may further include the step of obtaining.

이때, 기 설정된 시간 간격에 대응하는 확인 알람을 출력하는 단계는, 확인 알람에 대응하는 버튼 입력 정보가 기 설정된 입력 시간 동안 미획득 된 경우, 대상자에 대응하는 움직임 정보를 획득하는 단계 및 움직임 정보에 대응하는 열화상 정보를 획득하는 단계를 더 포함할 수 있다.At this time, the step of outputting a confirmation alarm corresponding to a preset time interval includes, when button input information corresponding to the confirmation alarm is not acquired during a preset input time, obtaining motion information corresponding to the target person and motion information. The method may further include acquiring corresponding thermal image information.

또 다른 실시예에 따라, 본 발명의 제어 방법은, IoT 시스템(400)이, 제2 단말에 전력량 정보를 공유하는 단계, IoT 시스템(400)이, 제2 단말에 버튼 입력 정보를 전송하는 단계, 확인 알람에 대응하는 버튼 입력 정보가 기 설정된 입력 시간 동안 미획득 된 경우, IoT 시스템(400)이, 제2 단말에 움직임 정보 및 열화상 정보를 전송하는 단계 및 IoT 시스템(400)이, 제2 단말의 위치 정보를 바탕으로 제3 시설의 출입문을 제어하는 단계를 더 포함할 수 있다.According to another embodiment, the control method of the present invention, the IoT system 400, sharing the power amount information to the second terminal, the IoT system 400, the step of transmitting the button input information to the second terminal , When the button input information corresponding to the confirmation alarm is not acquired during the preset input time, the IoT system 400 transmits motion information and thermal image information to the second terminal, and the IoT system 400 performs the first 2 The step of controlling the door of the third facility based on the location information of the terminal may be further included.

이를 위해, 도시된 바와 같이, 제3 시설 IoT 시스템(400)이 동작을 제어하거나 관리 정보를 획득하기 위한 제3 시설 IoT 장치(410)는, 버튼 입력 정보를 생성하는 버튼(411), 확인 알람을 시각화한 알람 이미지(415), 알람을 출력하는 스피커(414), 제3 시설의 출입문을 대상자가 제어할 수 있도록 하는 제3 시설 출입문 동작 버튼(413), 열화상 이미지 상에서 체온을 화면에 별도로 출력하도록 제어하는 온도 확인 버튼(412) 및 전력량 정보를 이미지화한 전력량 이미지(416)를 포함할 수 있다.To this end, as shown, the third facility IoT device 410 for controlling the operation of the third facility IoT system 400 or obtaining management information includes a button 411 generating button input information, a confirmation alarm alarm image 415 visualizing the alarm, a speaker 414 outputting an alarm, a third facility door operation button 413 allowing the subject to control the door of the third facility, and the body temperature on the thermal image separately displayed on the screen. It may include a temperature check button 412 for controlling output and a power amount image 416 in which power amount information is imaged.

한편, 프로세서(130)는 하나 이상의 코어(core, 미도시) 및 그래픽 처리부(미도시) 및/또는 다른 구성 요소와 신호를 송수신하는 연결 통로(예를 들어, 버스(bus) 등)를 포함할 수 있다.Meanwhile, the processor 130 may include one or more cores (not shown) and a graphic processor (not shown) and/or a connection path (eg, a bus) for transmitting and receiving signals to and from other components. can

일 실시예에 따른 프로세서(130)는 메모리(110)에 저장된 하나 이상의 인스트럭션을 실행함으로써, 도 1과 관련하여 설명된 방법을 수행한다.Processor 130 according to one embodiment performs the method described with respect to FIG. 1 by executing one or more instructions stored in memory 110 .

예를 들어, 프로세서(130)는 메모리(110)에 저장된 하나 이상의 인스트럭션을 실행함으로써 신규 학습용 데이터를 획득하고, 학습된 모델을 이용하여, 상기 획득된 신규 학습용 데이터에 대한 테스트를 수행하고, 상기 테스트 결과, 라벨링된 정보가 소정의 제1 기준값 이상의 정확도로 획득되는 제1 학습용 데이터를 추출하고, 상기 추출된 제1 학습용 데이터를 상기 신규 학습용 데이터로부터 삭제하고, 상기 추출된 학습용 데이터가 삭제된 상기 신규 학습용 데이터를 이용하여 상기 학습된 모델을 다시 학습시킬 수 있다.For example, the processor 130 acquires new training data by executing one or more instructions stored in the memory 110, performs a test on the acquired new training data using a learned model, and performs the test As a result, first training data for which the labeled information is obtained with an accuracy equal to or higher than a predetermined first reference value is extracted, the extracted first training data is deleted from the new training data, and the new training data from which the extracted training data is deleted The learned model may be retrained using the training data.

한편, 프로세서(130)는 프로세서(130) 내부에서 처리되는 신호(또는, 데이터)를 일시적 및/또는 영구적으로 저장하는 램(RAM: Random Access Memory, 미도시) 및 롬(ROM: Read-Only Memory, 미도시)을 더 포함할 수 있다. 또한, 프로세서(130)는 그래픽 처리부, 램 및 롬 중 적어도 하나를 포함하는 시스템온칩(SoC: system on chip) 형태로 구현될 수 있다.Meanwhile, the processor 130 includes RAM (Random Access Memory, not shown) and ROM (Read-Only Memory) temporarily and/or permanently storing signals (or data) processed in the processor 130. , not shown) may be further included. In addition, the processor 130 may be implemented in the form of a system on chip (SoC) including at least one of a graphics processing unit, RAM, and ROM.

메모리(110)에는 프로세서(130)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있다. 메모리(110)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.The memory 110 may store programs (one or more instructions) for processing and control of the processor 130 . Programs stored in the memory 110 may be divided into a plurality of modules according to functions.

본 발명의 실시예와 관련하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로 직접 구현되거나, 하드웨어에 의해 실행되는 소프트웨어 모듈로 구현되거나, 또는 이들의 결합에 의해 구현될 수 있다. 소프트웨어 모듈은 RAM(Random Access Memory), ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM), 플래시 메모리(Flash Memory), 하드 디스크, 착탈형 디스크, CD-ROM, 또는 본 발명이 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터 판독가능 기록매체에 상주할 수도 있다.Steps of a method or algorithm described in connection with an embodiment of the present invention may be implemented directly in hardware, implemented in a software module executed by hardware, or implemented by a combination thereof. A software module may include random access memory (RAM), read only memory (ROM), erasable programmable ROM (EPROM), electrically erasable programmable ROM (EEPROM), flash memory, hard disk, removable disk, CD-ROM, or It may reside in any form of computer readable recording medium well known in the art to which the present invention pertains.

본 발명의 구성 요소들은 하드웨어인 컴퓨터와 결합되어 실행되기 위해 프로그램(또는 애플리케이션)으로 구현되어 매체에 저장될 수 있다. 본 발명의 구성 요소들은 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있으며, 이와 유사하게, 실시 예는 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다.Components of the present invention may be implemented as a program (or application) to be executed in combination with a computer, which is hardware, and stored in a medium. Components of the present invention may be implemented as software programming or software elements, and similarly, embodiments may include various algorithms implemented as data structures, processes, routines, or combinations of other programming constructs, such as C, C++ , Java (Java), can be implemented in a programming or scripting language such as assembler (assembler). Functional aspects may be implemented in an algorithm running on one or more processors.

이상, 첨부된 도면을 참조로 하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다.Although the embodiments of the present invention have been described with reference to the accompanying drawings, those skilled in the art to which the present invention pertains can be implemented in other specific forms without changing the technical spirit or essential features of the present invention. you will be able to understand Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive.

10 : 객체
11 : 객체 이동 벡터
100 : 서버
110 : 메모리
120 : 통신부
130 : 프로세서
200 : 제1 시설 IoT 시스템
300 : 제2 시설 IoT 시스템
310 : 제2 시설의 출입문
320 : 제2 시설의 스피커
330 : CCTV
331 : CCTV의 가시영역
332 : CCTV의 비가시영역
340 : 조명
350 : 드론
351 : 객체 추적 방향
400 : 제3 시설 IoT 시스템
410 : 제3 시설 IoT 장치
411 : 버튼
412 : 온도 확인 버튼
413 : 제3 시설 출입문 동작 버튼
414 : 제3 시설의 스피커
415 : 알람 이미지
416 : 전력량 이미지
10: object
11: object movement vector
100: server
110: memory
120: communication department
130: processor
200: first facility IoT system
300: 2nd facility IoT system
310: entrance door of the second facility
320: Speaker of the second facility
330: CCTV
331: CCTV visible area
332: CCTV invisible area
340: lighting
350: Drone
351: object tracking direction
400: 3rd facility IoT system
410: 3rd facility IoT device
411: button
412: temperature confirmation button
413: 3rd facility door operation button
414: Speaker of the third facility
415: alarm image
416: wattage image

Claims (8)

서버에 의한 문제상황 방지 및 시설물 관리를 위한 IoT 시스템의 제어 방법에 있어서,
상기 서버가, 관리 시설에 대응하는 상기 IoT 시스템으로부터 관리 정보를 획득하는 단계;
상기 서버가, 상기 관리 정보를 바탕으로 문제상황 이벤트의 발생 여부를 판단하는 단계;
상기 서버가, 판단 결과에 따라, 상기 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계;
상기 서버가, 상기 문제상황 유형 정보를 바탕으로, 상기 IoT 시스템의 동작을 제어하는 단계; 및
상기 서버가, 기 등록된 전자 단말로 상기 문제상황 이벤트에 대응하는 알람을 전송하는 단계;를 포함하는 제어 방법.
In the control method of the IoT system for preventing problem situations and managing facilities by the server,
obtaining, by the server, management information from the IoT system corresponding to a management facility;
determining, by the server, whether a problem situation event has occurred based on the management information;
obtaining, by the server, problem situation type information corresponding to the problem situation event according to a determination result;
Controlling, by the server, an operation of the IoT system based on the problem situation type information; and
and transmitting, by the server, an alarm corresponding to the problem situation event to a pre-registered electronic terminal.
제1 항에 있어서,
상기 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계는,
상기 관리 시설이 기 등록된 제1 시설인 경우, 침수 수위 정보, 제1 영상 정보 및 통행량 정보를 관리 정보로 획득하는 단계;를 더 포함하고,
상기 판단 결과에 따라, 상기 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는,
상기 침수 수위 정보를 바탕으로 침수 정보를 문제상황 유형 정보로 획득하는 단계;
상기 제1 영상 정보를 바탕으로 붕괴 정보를 문제상황 유형 정보로 획득하는 단계; 및
상기 제1 영상 정보 및 상기 통행량 정보를 바탕으로 추돌 정보를 문제상황 유형 정보로 획득하는 단계;를 더 포함하는 제어 방법.
According to claim 1,
Obtaining management information from the IoT system corresponding to the management facility,
In case the management facility is a pre-registered first facility, acquiring submerged water level information, first image information, and traffic information as management information;
Obtaining problem situation type information corresponding to the problem situation event according to the determination result,
Acquiring submersion information as problem situation type information based on the inundation level information;
Obtaining collapse information as problem situation type information based on the first image information; and
Acquiring collision information as problem situation type information based on the first image information and the traffic information.
제2 항에 있어서,
상기 문제상황 유형 정보를 바탕으로, 상기 IoT 시스템의 동작을 제어하는 단계는,
상기 IoT 시스템이, 상기 서버의 제어를 통해 출입 통제 경보를 동작시키는 단계;
상기 IoT 시스템이, 상기 서버의 제어를 통해 방송 정보를 출력하는 단계; 및
상기 IoT 시스템이, 상기 서버의 제어를 통해 전광판을 동작시키는 단계;를 더 포함하는 제어 방법.
According to claim 2,
Based on the problem situation type information, the step of controlling the operation of the IoT system,
The IoT system operating an access control alarm through control of the server;
The IoT system outputting broadcast information through control of the server; and
The control method further comprising: operating, by the IoT system, an electronic display board through control of the server.
제1 항에 있어서,
상기 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계는,
상기 관리 시설이 기 등록된 제2 시설인 경우, 제2 영상 정보, 출입 정보, 예약 정보 및 온습도 정보를 관리 정보로 획득하는 단계;를 더 포함하고,
상기 판단 결과에 따라, 상기 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는,
상기 제2 영상 정보, 상기 출입 정보 및 상기 예약 정보 중 적어도 하나를 바탕으로 침입 정보, 파손 정보 및 도난 정보 중 적어도 하나를 문제상황 유형 정보로 획득하는 단계; 및
상기 제2 영상 정보 및 상기 온습도 정보를 바탕으로 화재 정보를 문제상황 유형 정보로 획득하는 단계;를 더 포함하고,
상기 문제상황 유형 정보를 바탕으로, 상기 IoT 시스템의 동작을 제어하는 단계는,
상기 IoT 시스템이, 상기 서버의 제어에 따라, 문제상황 유형 정보에 대응하는 방송을 출력하는 단계;
상기 IoT 시스템이, 상기 서버의 제어에 따라, 출입 통제 경보를 동작시키는 단계;
상기 IoT 시스템이, 상기 서버의 제어에 따라, 객체 추적 촬영을 실시하는 단계; 및
상기 IoT 시스템이, 상기 문제상황 유형 정보 및 객체 추적 정보를 상기 제2 시설에 대응하는 제1 단말에 공유하는 단계;를 더 포함하는 제어 방법.
According to claim 1,
Obtaining management information from the IoT system corresponding to the management facility,
Acquiring second image information, access information, reservation information, and temperature and humidity information as management information when the management facility is a pre-registered second facility;
Obtaining problem situation type information corresponding to the problem situation event according to the determination result,
obtaining at least one of intrusion information, damage information, and theft information as problem situation type information based on at least one of the second image information, the access information, and the reservation information; and
Acquiring fire information as problem situation type information based on the second image information and the temperature and humidity information; Further comprising,
Based on the problem situation type information, the step of controlling the operation of the IoT system,
outputting, by the IoT system, a broadcast corresponding to problem situation type information under control of the server;
The IoT system operating an access control alarm according to the control of the server;
Performing, by the IoT system, object tracking photographing according to the control of the server; and
The control method further comprising: sharing, by the IoT system, the problem situation type information and object tracking information with a first terminal corresponding to the second facility.
제1 항에 있어서,
상기 관리 시설에 대응하는 IoT 시스템으로부터 관리 정보를 획득하는 단계는,
상기 관리 시설이 기 등록된 제3 시설인 경우, 상기 서버가, 상기 제3 시설에 대응하는 대상자에 대한 케어 정보를 관리 정보로 획득하는 단계;를 더 포함하고,
상기 판단 결과에 따라, 상기 문제상황 이벤트에 대응하는 문제상황 유형 정보를 획득하는 단계는,
상기 케어 정보에 매칭된 열화상 정보 및 움직임 정보를 바탕으로 위급 정보를 문제상황 유형 정보로 획득하는 단계;를 더 포함하고,
상기 문제상황 유형 정보를 바탕으로, 상기 IoT 시스템의 동작을 제어하는 단계는,
상기 IoT 시스템이, 상기 서버의 제어에 따라, 상기 제3 시설에 대응하는 기 등록된 통신수단을 스피커폰으로 동작시키는 단계;
상기 IoT 시스템이, 상기 서버의 제어에 따라, 상기 제3 시설에 대응하는 기 등록된 이상 알람을 출력하는 단계; 및
상기 IoT 시스템이, 상기 서버의 제어에 따라, 상기 제3 시설에 대응하는 인터폰을 통해 관리실 통신부로 기 등록된 신호음을 전송하는 단계;를 더 포함하는 제어 방법.
According to claim 1,
Obtaining management information from the IoT system corresponding to the management facility,
If the management facility is a pre-registered third facility, obtaining, by the server, care information for a target person corresponding to the third facility as management information;
Obtaining problem situation type information corresponding to the problem situation event according to the determination result,
Acquiring emergency information as problem situation type information based on thermal image information and motion information matched to the care information; further comprising;
Based on the problem situation type information, the step of controlling the operation of the IoT system,
operating, by the IoT system, a pre-registered communication means corresponding to the third facility as a speaker phone under control of the server;
outputting, by the IoT system, a pre-registered abnormality alarm corresponding to the third facility under control of the server; and
The control method further comprising transmitting, by the IoT system, a pre-registered signal tone to a management room communication unit through an interphone corresponding to the third facility under the control of the server.
제4 항에 있어서,
상기 서버의 제어에 따라, 객체 추적 촬영을 실시하는 단계는,
문제상황 유형 정보에 대응하는 객체를 중심 좌표로 CCTV의 촬영 영역을 변경하는 단계; 및
드론을 통해 문제상황 유형 정보에 대응하는 객체에 대한 객체 추적을 실행하는 단계;를 더 포함하고,
상기 문제상황 유형 정보에 대응하는 객체를 중심 좌표로 CCTV의 촬영 영역을 변경하는 단계는,
기 등록된 기초 이미지에 대응하는 객체를 검출하는 단계;
객체를 중심좌표로 획득하는 단계; 및
중심좌표 변위를 바탕으로 객체를 추적하는 단계;를 더 포함하고,
상기 드론을 통해 문제상황 유형 정보에 대응하는 객체에 대한 객체 추적을 실행하는 단계는,
촬영 영역이 상기 CCTV의 가시거리를 벗어난 경우, 상기 중심좌표 변위를 바탕으로 상기 객체의 이동 방향 및 상기 객체의 이동 속도를 획득하는 단계;
상기 객체의 이동 방향 및 상기 객체의 이동 속도를 바탕으로 객체 획득 영역을 산출하는 단계;
상기 객체 획득 영역에 대응하여 상기 드론을 동작시키는 단계;
상기 드론을 통해 객체를 검출하는 단계; 및
객체를 상기 드론의 추적 좌표로 획득하는 단계;를 더 포함하는 제어 방법.
According to claim 4,
In the step of performing object tracking shooting under the control of the server,
Changing the shooting area of CCTV using the center coordinates of the object corresponding to the problem situation type information; and
Executing object tracking for an object corresponding to the problem situation type information through the drone; further comprising,
In the step of changing the shooting area of the CCTV with the center coordinates of the object corresponding to the problem situation type information,
detecting an object corresponding to a pre-registered base image;
obtaining the object as center coordinates; and
Tracking the object based on the center coordinate displacement; further comprising,
In the step of executing object tracking for an object corresponding to problem situation type information through the drone,
obtaining a moving direction and a moving speed of the object based on the center coordinate displacement when the shooting area is out of the visual range of the CCTV;
calculating an object acquisition area based on the moving direction of the object and the moving speed of the object;
operating the drone in response to the object acquisition area;
detecting an object through the drone; and
The control method further comprising acquiring an object as tracking coordinates of the drone.
제4 항에 있어서,
상기 제어 방법은,
상기 IoT 시스템이, 상기 제2 영상 정보 및 상기 예약 정보를 바탕으로 상기 제2 시설에 대응하는 출입문 동작을 제어하는 단계;
상기 IoT 시스템이, 상기 제2 영상 정보 및 상기 예약 정보를 바탕으로 상기 제2 시설에 대응하는 CCTV 동작을 제어하는 단계; 및
상기 IoT 시스템이, 조도 정보를 획득하고, 상기 조도 정보를 바탕으로 상기 제2 시설에 대응하는 조명 동작을 제어하는 단계;를 더 포함하고,
상기 제2 영상 정보 및 상기 예약 정보를 바탕으로 상기 제2 시설에 대응하는 출입문 동작을 제어하는 단계는,
상기 제2 영상 정보와 상기 예약 정보가 대응하는 경우, 상기 예약 정보에 대응하는 출입문 수동제어 가능 시간을 획득하는 단계;를 더 포함하고,
상기 제2 영상 정보 및 상기 예약 정보를 바탕으로 상기 제2 시설에 대응하는 CCTV 동작을 제어하는 단계는,
상기 예약 정보와 현재 시간이 대응하는 경우, 상기 제2 시설에 대응하는 영역 정보를 획득하는 단계;
상기 영역 정보에 대응하는 인원 정보를 획득하는 단계; 및
상기 인원 정보가 기 설정된 폐쇄 기준에 대응하는 경우, 상기 제2 시설에 대응하는 출입문 동작을 제어하는 단계;를 더 포함하고,
상기 예약 정보는, 예약자 안면 이미지를 포함하는 것을 특징으로 하는 제어 방법.
According to claim 4,
The control method,
Controlling, by the IoT system, a door operation corresponding to the second facility based on the second image information and the reservation information;
Controlling, by the IoT system, a CCTV operation corresponding to the second facility based on the second image information and the reservation information; and
Further comprising, by the IoT system, acquiring illuminance information and controlling a lighting operation corresponding to the second facility based on the illuminance information,
The step of controlling the door operation corresponding to the second facility based on the second image information and the reservation information,
When the second image information and the reservation information correspond, acquiring a manually controllable time of the door corresponding to the reservation information;
Controlling the CCTV operation corresponding to the second facility based on the second image information and the reservation information,
obtaining area information corresponding to the second facility when the reservation information corresponds to the current time;
obtaining personnel information corresponding to the area information; and
Controlling the operation of the door corresponding to the second facility when the information on personnel corresponds to a preset closing criterion;
The reservation information, control method characterized in that it comprises a facial image of the person making the reservation.
제5 항에 있어서,
상기 제어 방법은,
상기 IoT 시스템이, 기 설정된 시간 간격에 대응하는 확인 알람을 출력하는 단계; 및
상기 IoT 시스템이, 상기 확인 알람에 대응하는 버튼 입력 정보를 획득하는 단계;를 더 포함하고,
상기 기 설정된 시간 간격에 대응하는 확인 알람을 출력하는 단계는,
상기 확인 알람에 대응하는 버튼 입력 정보가 기 설정된 입력 시간 동안 미획득 된 경우, 상기 대상자에 대응하는 움직임 정보를 획득하는 단계; 및
상기 움직임 정보에 대응하는 열화상 정보를 획득하는 단계;를 더 포함하고,
상기 제어 방법은,
상기 IoT 시스템이, 제2 단말에 전력량 정보를 공유하는 단계;
상기 IoT 시스템이, 상기 제2 단말에 상기 버튼 입력 정보를 전송하는 단계;
상기 확인 알람에 대응하는 버튼 입력 정보가 기 설정된 입력 시간 동안 미획득 된 경우, 상기 IoT 시스템이, 상기 제2 단말에 상기 움직임 정보 및 상기 열화상 정보를 전송하는 단계; 및
상기 IoT 시스템이, 상기 제2 단말의 위치 정보를 바탕으로 상기 제3 시설의 출입문을 제어하는 단계;를 더 포함하는 제어 방법.
According to claim 5,
The control method,
Outputting, by the IoT system, a confirmation alarm corresponding to a preset time interval; and
Further comprising, by the IoT system, acquiring button input information corresponding to the confirmation alarm;
The step of outputting a confirmation alarm corresponding to the preset time interval,
obtaining motion information corresponding to the target person when button input information corresponding to the confirmation alarm is not obtained during a predetermined input time; and
Acquiring thermal image information corresponding to the motion information; further comprising,
The control method,
The IoT system sharing power amount information with a second terminal;
Transmitting, by the IoT system, the button input information to the second terminal;
Transmitting, by the IoT system, the motion information and the thermal image information to the second terminal when button input information corresponding to the confirmation alarm is not acquired during a preset input time; and
The control method further comprising controlling, by the IoT system, the door of the third facility based on the location information of the second terminal.
KR1020210121120A 2021-09-10 2021-09-10 Control method of IoT system for prevention of problem situation and facility management KR20230038352A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210121120A KR20230038352A (en) 2021-09-10 2021-09-10 Control method of IoT system for prevention of problem situation and facility management

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210121120A KR20230038352A (en) 2021-09-10 2021-09-10 Control method of IoT system for prevention of problem situation and facility management

Publications (1)

Publication Number Publication Date
KR20230038352A true KR20230038352A (en) 2023-03-20

Family

ID=85796375

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210121120A KR20230038352A (en) 2021-09-10 2021-09-10 Control method of IoT system for prevention of problem situation and facility management

Country Status (1)

Country Link
KR (1) KR20230038352A (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101944018B1 (en) 2018-06-04 2019-01-30 주식회사 레즐러 building management system and building management method using voice recognition

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101944018B1 (en) 2018-06-04 2019-01-30 주식회사 레즐러 building management system and building management method using voice recognition

Similar Documents

Publication Publication Date Title
US11620884B2 (en) Egress advisement devices to output emergency egress guidance to users
CN103839373B (en) A kind of unexpected abnormality event Intelligent Recognition alarm device and warning system
WO2021047306A1 (en) Abnormal behavior determination method and apparatus, terminal, and readable storage medium
US10964187B2 (en) Smart surveillance system for swimming pools
US20210241597A1 (en) Smart surveillance system for swimming pools
US11072966B1 (en) Video analytic enhanced pet door
US20220139180A1 (en) Custom event detection for surveillance cameras
JP7371595B2 (en) Apparatus, system, method and program
EP3907652A1 (en) Method for adapting the quality and/or frame rate of a live video stream based upon pose
KR102492066B1 (en) Mobile preventive warning system
KR20230038352A (en) Control method of IoT system for prevention of problem situation and facility management
US20210352207A1 (en) Method for adapting the quality and/or frame rate of a live video stream based upon pose
Durairaj et al. AI-driven drowned-detection system for rapid coastal rescue operations
KR102676130B1 (en) Gobo lighting system dynamically tracking objects through artificial intelligence
KR102499291B1 (en) Method and system for CCTV installation simulation
Nandhini et al. IoT Based Smart Home Security System with Face Recognition and Weapon Detection Using Computer Vision
JP2021096840A (en) Security system and program
WO2024123710A1 (en) Pool guardian and surveillance safety systems and methods
KR20230070700A (en) Event detection using artificial intelligence surveillance camera

Legal Events

Date Code Title Description
E902 Notification of reason for refusal