KR102378499B1 - Solution for scaling/reducing employing 5G image communication - Google Patents
Solution for scaling/reducing employing 5G image communication Download PDFInfo
- Publication number
- KR102378499B1 KR102378499B1 KR1020210143560A KR20210143560A KR102378499B1 KR 102378499 B1 KR102378499 B1 KR 102378499B1 KR 1020210143560 A KR1020210143560 A KR 1020210143560A KR 20210143560 A KR20210143560 A KR 20210143560A KR 102378499 B1 KR102378499 B1 KR 102378499B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- accident
- control center
- control
- iot device
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
- H04H20/53—Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers
- H04H20/59—Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers for emergency or urgency
-
- H04L61/2007—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L61/00—Network arrangements, protocols or services for addressing or naming
- H04L61/30—Managing network names, e.g. use of aliases or nicknames
- H04L61/3015—Name registration, generation or assignment
- H04L61/302—Administrative registration, e.g. for domain names at internet corporation for assigned names and numbers [ICANN]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
- H04N21/814—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts comprising emergency warnings
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- Computer Graphics (AREA)
- Traffic Control Systems (AREA)
- Alarm Systems (AREA)
Abstract
Description
본 명세서에 개시된 내용은 차량용 IoT 디바이스 장치용 영상 처리 방법에 관한 것으로, 보다 상세하게는 차량을 운행할 경우에, 차량 주변에서 사고 현장을 영상수집하여 관제센터의 월 시스템에 맞게 영상을 변환하여 모니터링을 원활하게 할 수 있도록 하는 것이다.The content disclosed in the present specification relates to an image processing method for an IoT device for a vehicle, and more particularly, when a vehicle is driven, an image of an accident scene is collected around the vehicle, and the image is converted to match the wall system of the control center and monitored to make it smoother.
본 명세서에서 달리 표시되지 않는 한, 이 섹션에 설명되는 내용들은 이 출원의 청구항들에 대한 종래 기술이 아니며, 이 섹션에 포함된다고 하여 종래 기술이라고 인정되는 것은 아니다.Unless otherwise indicated herein, the material described in this section is not prior art to the claims of this application, and inclusion in this section is not an admission that it is prior art.
일반적으로, 최근 증가하는 도시 기반시설과 다중이용시설 재난발생의 경우, 위험감지 및 전파지연, 대피/대응 등의 이유로 생존자 구호가 어려워 대형피해로 이어지는 경우가 증가한다.In general, in the case of disasters in urban infrastructure and multi-use facilities, which are increasing recently, it is difficult to rescue survivors due to risk detection, delay in propagation, and evacuation/response, leading to large-scale damage.
그래서, 재난의 예방/ 대비/ 대응/ 복구업무를 효율 등을 위해 재난 및 안전사고 저감을 위한 기술개발을 한다.Therefore, we develop technologies to reduce disasters and safety accidents for efficiency in disaster prevention/preparation/response/recovery work.
그리고, 이러한 경우에 이를 위해서, 재난/재해로부터 예방, 감지, 대응 등 실시간 대응을 위한 안전 고도화 등에 대한 요구수준이 높아지면서 CCTV 영상 기반의 범죄예방, 교통사고 실시간 감시/대응체계 구축 등 다양한 기술이 등장하였다.And, for this purpose, as the level of demand for safety advancement for real-time response such as prevention, detection, and response from disasters/disasters increases, various technologies such as CCTV image-based crime prevention and real-time traffic accident monitoring/response system establishment have been developed. appeared.
그런데, 기존 도로시설물의 관제시스템은 일반적인 메트릭스 방식으로 영상확대, 축소 등이 불가능하여 사고현장의 집중 모니터링에 한계가 있다. 그리고, 영상을 대형 모니터에서 확인할 순 있으나, 저화질의 CCTV영상으로 영상확대시 해상도 문제로 관제의 피로도가 있기도 하다.However, the existing control system for road facilities has limitations in intensive monitoring of the accident site because it is impossible to enlarge or reduce the image in a general matrix method. And, although the image can be checked on a large monitor, there is also the fatigue of the control due to the resolution problem when the image is enlarged with a low-quality CCTV image.
특히, 일반적으로 도로에서 사용하는 CCTV영상을 월 시스템(Wall System)으로 영상확대 시 화질저하를 발생한다.In particular, when the CCTV image, which is generally used on the road, is enlarged with a wall system, the image quality deteriorates.
이러한 배경의 선행기술문헌은 아래의 특허문헌이 나오는 정도이다.The prior art literature in this background is the extent to which the following patent documents appear.
(특허문헌 1) KR101923494 Y1(Patent Document 1) KR101923494 Y1
(특허문헌 2) KR101033237 Y1(Patent Document 2) KR101033237 Y1
참고적으로, 이러한 특허문헌 1의 기술은 지향성 스피커를 사용한 이동차량용 재난 대응 시스템에 관한 것으로, 이동차량에서 지향성 스피커를 설치하여 재난방송을 하여 대피를 할 수 있도록 하는 정도일 수 있다.For reference, the technology of Patent Document 1 relates to a disaster response system for a mobile vehicle using a directional speaker, and may be to the extent that a directional speaker is installed in a mobile vehicle to broadcast a disaster to enable evacuation.
그리고, 특허문헌 2는 초광역 영상을 통해 여러 가지 기능을 제공하는 단속 시스템에 관한 정도이다.And, Patent Document 2 is about an enforcement system that provides various functions through an ultra-wide image.
개시된 내용은, 외부 영상을 관제 시스템 및 월 시스템으로 영상을 전송의 개념을 적용하여 외부의 아날로그/ 디지털 입력 영상을 1:1, 1:N, N:N으로 확대/축소하여 다수의 모니터에서 하나의 영상을 확인하고, 또한 영상 확대로 인해 발생하는 해상도 저하 문제 해결을 위해 초해상화 개념의 딥러닝 영상확대 알고리즘 적용하고, 그리고 또한 영상을 맞춤 변환하여 관리차량에서 관제 시스템으로 전송하여 사고수습을 효과적으로 수행할 수 있도록 하는 5G영상통신을 이용한 영상 확대/축소 솔루션을 제공하고자 한다.The disclosed content applies the concept of transmitting an external image to a control system and a wall system to enlarge/reduce an external analog/digital input image to 1:1, 1:N, N:N to one on multiple monitors. In addition, to solve the problem of resolution degradation caused by image enlargement, a deep learning image magnification algorithm of the super-resolution concept is applied, and the image is customized and converted and transmitted from the management vehicle to the control system to solve the accident. We want to provide an image enlargement/reduction solution using 5G video communication that can be performed effectively.
실시예에 따른 5G영상통신을 이용한 영상 확대/축소 솔루션은,The video enlargement/reduction solution using 5G video communication according to the embodiment,
사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치에 사용하는 것으로, 교량 및 대교에서 재난, 재해 사고가 났을 경우, 상황을 관제(지휘) 센터에서 현장의 상황을 실시간으로 파악하고 대응할 수 있도록 5G 디바이스 기반의 관제 센터/ 지휘 차량 간 양방향 대응 영상체계 기술에 관한 것이다. 그리고, 이러한 경우에, 집중 관제를 위한 ESRGAN 기반형 딥러닝 기반 영상확대 기술을 포함하는 것을 특징으로 한다.It is used in 5G-based IoT device devices for accident management vehicles. In the event of a disaster or disaster on a bridge or bridge, the control (command) center can understand and respond to the situation in real time. It is about the video system technology for interactive response between the control center of the control center/commanding vehicle. And, in this case, it is characterized by including an ESRGAN-based deep learning-based image magnification technology for centralized control.
실시예들에 의하면, 교통사고에 대한 인지, 사고형태에 따른 신속한 판단과 대응을 통해 2차 추돌사고를 방지 및 피해 최소화할 수 있는 지원 기술확보를 제공한다.According to the embodiments, it provides support technology that can prevent a secondary collision accident and minimize damage through recognition of a traffic accident and rapid judgment and response according to the accident type.
그리고, 충돌사고 발생 시, 관제 센터에서 이를 확인하고 유관기관(소방청, 경찰청 등)과 연계 협력이 이루어 질 수 있도록 영상 지원이 가능하다.And, in the event of a collision, video support is possible so that the control center can check it and cooperate with related organizations (fire department, police department, etc.).
또한, 기존 사고관리 차량과 관제 센터 간의 무전기, 유무선전화기 등 사고수습 의사교환 체계를 5G 신기술 기반 영상공유를 통해 정확한 상황 전달 가능 및 충돌사고 대처가 가능하다.In addition, it is possible to accurately communicate the situation and cope with collision accidents through video sharing based on 5G new technology through the accident management communication system such as radio and wired/wireless phone between the existing accident management vehicle and the control center.
이에 더하여, 또한 IP스피커를 통하여 도로시설물 구간별로 설치하고 사고지점을 중심으로 거리별 우회도로 안내, 전방 사고 안내, 경보방송 안내 등 선별 대피/안내방송 지원을 통해 편의와 원활하 조치를 제공한다.In addition, it is installed for each road facility section through an IP speaker and provides convenience and smooth measures through selective evacuation/information support such as detour road guidance for each street centering on the accident point, forward accident guidance, and warning broadcast guidance.
도 1은 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 개념적으로 설명하기 위한 도면
도 2는 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 적용한 시스템을 전체적으로 도시한 도면
도 3은 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 적용한 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치의 구성을 도시한 블록도
도 4는 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 순서대로 도시한 플로우 차트
도 5는 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법에 적용한 영상 확대 포맷(알고리즘)을 설명하기 위한 도면1 is a diagram for conceptually explaining an image enlargement/reduction method using 5G video communication according to an embodiment;
2 is a view showing the overall system to which the image enlargement/reduction method using 5G video communication according to an embodiment is applied;
3 is a block diagram showing the configuration of a 5G-based IoT device device for mounting an accident management vehicle to which an image enlargement/reduction method using 5G video communication is applied according to an embodiment;
4 is a flowchart sequentially illustrating an image enlargement/reduction method using 5G video communication according to an embodiment;
5 is a diagram for explaining an image enlargement format (algorithm) applied to an image enlargement/reduction method using 5G image communication according to an embodiment;
도 1은 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 개념적으로 설명하기 위한 도면이다.1 is a diagram for conceptually explaining an image enlargement/reduction method using 5G video communication according to an embodiment.
도 1에 도시된 바와 같이, 일실시예의 영상 확대/축소 방법은 교량 및 대교에서 재난, 재해 사고가 났을 경우, 상황을 관제(지휘) 센터에서 현장의 상황을 실시간으로 파악하고 대응할 수 있도록 5G 디바이스 기반의 관제 센터/ 지휘 차량 간 양방향 대응 영상체계 기술에 관한 것이다. 그리고, 이러한 IoT 디바이스 장치는 이에 더하여, 집중 관제를 위한 SR GAN 기반형 딥러닝 기반 영상확대 기술과 구간별 대응체계 수립을 위한 IP스피커 제어기술을 포함한다.As shown in Figure 1, the image enlargement/reduction method of an embodiment is a 5G device so that when a disaster or disaster occurs on a bridge or a bridge, the control (command) center can understand the situation in real time and respond It is about the two-way response image system technology between the control center/commanding vehicle based on the And, in addition to this, the IoT device includes an SR GAN-based deep learning-based image enlargement technology for centralized control and an IP speaker control technology for establishing a response system for each section.
그래서, 이를 통해 교량 및 대교에서의 충돌사고에 대한 대처기술 개발을 통해 재난, 재해 사고수습을 위한 빠른 대응체계 수립, 관제(지휘)센터, 지휘 차량의 사고대응 전문성 및 효율성 강화, 사고수습/복구 등 위기관리 능력을 향상한다.So, through this, through the development of coping technologies for collision accidents on bridges and bridges, the establishment of a rapid response system for disaster and disaster accident management, the reinforcement of the accident response expertise and efficiency of the control center and the command vehicle, and accident management/recovery improve crisis management skills.
구체적으로, 이러한 IoT 디바이스 장치는 차량 외에 설치한 사고현장 영상 수집용 CCTV카메라와 사고알람용 (지향성) IP스피커를 포함하고, 차량 내에는 제어용 IoT 디바이스와 5G 영상/문자 송수신 모듈 및 운전자확인용 대시보드(모니터)를 포함한다.Specifically, these IoT device devices include a CCTV camera for accident scene video collection and an accident alarm (directional) IP speaker installed outside the vehicle, and an IoT device for control, a 5G video/text transmission/reception module, and a dash for driver confirmation in the vehicle. Includes board (monitor).
그리고, 이러한 경우에 상기 CCTV카메라는 차량 외형에 설치하여 사고현장의 영상을 수집하는 용도이다.And, in this case, the CCTV camera is installed on the exterior of the vehicle to collect images of the accident site.
또한, 상기 제어용 IoT 디바이스 장치는 Window 기반의 IoT 디바이스 제어용 SW를 내장한다. 그리고, 또한 5G 기반 영상/문자 송수신 및 통신상태모니터링 기능을 구비한다. 그리고, 수집데이터 저장 DB를 구성하고 영상데이터가 실시간 스트리밍이 가능하도록 한다. 이에 더하여, 상기 제어용 IoT 디바이스 장치는 사용자 정의 데이터 포맷 및 파일형식과 사용자 인터페이스 UI/UX를 구비한다. 또한, CCTV카메라 수집영상 확인 기능도 포함한다. 그리고, 관제센터 영상/문자 확인 및 출력 기능과 관제센터 영상/문자 확인 기능도 가진다. 그래서, 이를 통해 IP스피커 관련 사고 주변 안내/대피 방송 송출 기능을 수행한다. 그리고, 특히 일반적으로 도로에서 사용하는 CCTV영상을 월 시스템(Wall System)으로 영상확대 시 등에 화질저하를 발생하는데, 해당기술은 해당 CCTV영상을 4K이상의 영상으로 변환하는 SR GAN 기반형 딥러닝 기반 영상확대 기술을 가진다. 그리고, 또한 이러한 기술은 월시스템 영상을 고화질 영상으로 변환하여 이 IoT 디바이스 장치에 전달하는 것도 포함하며, 정리하면 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치와 월 시스템 사이에서 주고 받는 영상에서 처리하는 것으로 사용한다.In addition, the IoT device device for control includes a window-based IoT device control SW. In addition, it is equipped with 5G-based video/text transmission/reception and communication status monitoring functions. Then, the collected data storage DB is configured and video data can be streamed in real time. In addition, the IoT device for control has a user-defined data format and file format, and a user interface UI/UX. In addition, it includes a function to check the video collected by CCTV cameras. In addition, it has a control center video/text check and output function and a control center video/text check function. So, through this, the IP speaker-related accident information/evacuation broadcast transmission function is performed. And, in particular, when the CCTV image generally used on the road is enlarged with the Wall System, the image quality deteriorates. have magnification skills. And, this technology also includes converting the wall system image into a high-definition image and transmitting it to this IoT device device. use it as
상기 5G 영상/문자 송수신 모듈은 차량 ?? 관제센터 간 실시간 영상 및 문자 무선송수신하는 용도이다.The 5G video/text transmission/reception module is a vehicle ?? It is used to wirelessly transmit and receive real-time images and texts between control centers.
그리고, 상기 대시보드는 차량 내 설치하여 사용자가 CCTV카메라의 수집 영상 현황 및 관제센터 수신영상을 확인하기 위한 용도로 사용한다.And, the dashboard is installed in the vehicle, and the user uses it for the purpose of checking the status of the CCTV camera's collected image and the control center's received image.
또한, 상기 (지향성)IP스피커는 차량 외형에 설치하여 사고현장 주변 사람을 대상으로 사고현황 알림을 위한 용도로 사용한다. 이러한 경우에, 상기 IP 스피커는 지향성 스피커 구매를 통해 주변소음제거 및 정확한 음질 전달을 제공한다.In addition, the (directional) IP speaker is installed on the exterior of the vehicle and used to notify the accident status to people around the accident site. In this case, the IP speaker provides ambient noise cancellation and accurate sound quality transmission through the purchase of a directional speaker.
도 2는 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 적용한 시스템을 전체적으로 도시한 도면이다.FIG. 2 is a view showing the overall system to which the image enlargement/reduction method using 5G video communication according to an embodiment is applied.
도 2에 도시된 바와 같이, 일실시예의 시스템은 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)와 관제센터(200) 및 관리자 단말기(300)를 포함한다.As shown in FIG. 2 , the system of one embodiment includes a 5G-based
추가적으로, 일실시예에 따른 시스템은 상기 관제센터(200)와 연동하여 외부연계해서 서비스를 수행하는 곳으로, 고장수리처 정보처리장치(400-1)와 병원 정보처리장치(400-2), 경찰서 정보처리장치(400-3) 등을 포함한다.Additionally, the system according to an exemplary embodiment is a place for performing services in connection with the outside in conjunction with the
부가해서, 이때 상기 각 장치는 상호 간에 자가망을 통해 연결한다. 이러한 경우, 상기 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100) 내에 각 부는 상호 간에 네트워크를 통해 시리얼(RS232, RS485) 또는, 무선(LoRA, RF, BT, BLE) 중에서 어느 하나로 연결하기도 한다. 그리고, 각 장치 상호 간의 자가망으로는 무선통신 방식으로 와이파이 또는 LTE를 사용한다.In addition, at this time, the respective devices connect to each other via a private network. In this case, each unit in the 5G-based
상기 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)는 교량 및 대교에서 재난, 재해 사고가 났을 경우, 상황을 관제(지휘) 센터에서 현장의 상황을 실시간으로 파악하고 대응할 수 있도록 5G 디바이스 기반의 관제 센터/ 지휘 차량 간 양방향 대응 영상체계를 구비한다. 구체적으로는, 이러한 IoT 디바이스 장치(100)는 차량을 운행할 경우에, 차량 내에 설치하여 CCTV카메라에 의해 촬영한 영상을 등록 관제센터로 전달하고, 상기 관제센터로부터 영상과 문자를 전달받아 각기 출력하도록 한다. 또한 이에 더하여, 집중 관제를 위한 SR GAN 기반형 딥러닝 기반 영상확대 기술과 구간별 대응체계 수립을 위한 IP스피커 제어기술을 구비한다. 부연하면, 이러한 영상확대 기술은 도로에서 사용하는 CCTV영상을 월 시스템 등으로 영상확대 시 화질저하를 발생하는데, 이를 위해 해당기술은 해당 CCTV영상을 4K이상의 영상으로 변환하는 등으로, 이러한 IoT 디바이스 장치(100)와 관제센터(200) 즉, 월시스템의 상호 간에 영상을 고화질영상으로 미리 변환하여 전달하도록 한다. 즉, 이러한 기술은 정리하면, 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치와 월 시스템 사이에서 주고 받는 영상에서 처리하는 것으로 사용한다.The 5G-based
상기 관제센터(200)(또는, 관리자 단말기(300))는 이러한 사고현장 영상을 무선통신 방식으로(예: 웹기반 서비스) 상기 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)를 통해 전달받을 경우에, 월 시스템으로부터의 모니터링 영상과 안내문자를 제공함으로써, 사고상황에 조치한다. 예를 들어, 상기 관제센터(200)는 이러한 사고현장 영상을 제공받을 경우, 해당하는 영상으로부터 사고 발생여부와 정도를 판별하고, 사고발생을 확인할 때에는 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)에 통지한다. 그래서, 이를 통해 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)에서 IP 스피커를 통해 대피방송을 할 수 있도록 하기도 한다. The control center 200 (or the manager terminal 300) transmits the accident scene image in a wireless communication method (eg, a web-based service) through the 5G-based
도 3은 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 적용한 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치의 구성을 도시한 블록도이다.3 is a block diagram illustrating the configuration of a 5G-based IoT device for mounting an accident management vehicle to which an image enlargement/reduction method using 5G video communication is applied according to an embodiment.
도 3에 도시된 바와 같이, 일실시예의 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)는 CCTV카메라(101)와 제어용 IoT 디바이스(102), 5G 영상/문자 송수신 모듈(103), 모니터(운전자확인용 대시보드)(104) 및 IP 스피커(105)를 포함한다.As shown in FIG. 3, the 5G-based
추가적으로, 일실시예에 따른 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치(100)는 사용자 키 조작에 따라 각종 설정정보를 입력받는 키신호 입력부(106)와 IP 스피커(105)의 음성 출력 동작을 관리자가 원하는 바에 따라 상이하게 구동하는 음향 조절부(107)를 포함한다.Additionally, the 5G-based
상기 CCTV카메라(101)는 차량을 운행할 경우에, 차량 외에 설치하여 주변 영상을 촬영하여 수집한다.When the
상기 제어용 IoT 디바이스(102)는 상기 차량 내에 설치하여 상기 CCTV카메라(101)에 의해 촬영한 영상을 등록 관제센터로 전달하고, 상기 관제센터(200)로부터 영상과 문자를 전달받아 각기 출력하도록 한다. 이러한 경우에, 일실시예에 따라 상기 제어용 IoT 디바이스(100)는 a) 상기 차량 주변에서 사고가 발생한 경우, 상기 CCTV카메라(101)로부터의 사고현장 영상을 상기 관제센터(200)로 전달하고, 상기 관제센터(200)로부터 월시스템(Wall System) 영상을 전달받아서, 상기 모니터(104)에 상기 사고현장 영상과 상기 월시스템 영상을 출력한다. 그리고, b) 상기 관제센터(200)에서 월시스템 영상을 전달받을 때에 안내 문자를 전달받은 경우, 상기 모니터(104)에 상기 안내 문자를 조합하여 출력하도록 하기도 한다. c) 또한, 상기 사고현장 영상과 상기 월시스템 영상 또는 상기 안내 문자를 통해 사고를 확인한 경우에, 상기 IP 스피커(105)로부터의 음성 출력 동작을 제어하여 대피방송을 출력하도록 한다. d) 그리고, 또한 상기 관제센터(200)로 사고현장 영상을 전달할 경우에는, 상기 사고현장 영상으로부터 설정 단일 이미지 형식으로 단일 이미지를 생성하고, 설정 단일 매트(Mat) 형식 이미지로 변환한 후, 설정 SR GAN 기반형 딥러닝 기반 영상확대 포맷에 의해 SI(super image)로 변경해서 다수의 상이한 CCTV 영상 파일 형식별로 대응하는 전체의 단일 이미지 또는 전체 동영상 형태로 업 스케일링을 하여 고화질영상으로 변환함으로써, 상기 관제센터(200)에 사고현장 영상을 전달한다. 또는, 이러한 제어용 IoT 디바이스(102)는 월시스템 영상을 제공받을 경우에도, 이러한 방식으로부터 동일하게 고화질영상을 제공받음으로써, 다양한 방식의 IoT 디바이스 장치에서 모두 이러한 고화질영상을 다시 각각의 장치에 맞도록 변환하여 사용할 수 있도록 한다.The IoT device for
상기 5G 영상/문자 송수신 모듈(103)은 상기 제어용 IoT 디바이스(102)와 상기 관제센터(200)의 상호 간에 영상과 문자를 전달받기 위해 상기 차량 내에 설치한 것이다. 이러한 경우에, 상기 5G 영상/문자 송수신 모듈(103)은 관제센터(200)에 연결하여 정보를 예를 들어, 사고현장의 영상과 월 시스템의 영상/안내문자를 송수신한다. 예를 들어, 와이파이 또는 LTE를 사용하기도 한다.The 5G video/text transmission/
상기 모니터(운전자확인용 대시보드)(104)는 상기 제어용 IoT 디바이스(102)에 의해 상기 CCTV카메라(101)의 영상과 상기 관제센터(200)의 영상을 조합하여 표시한다.The monitor (dashboard for driver confirmation) 104 displays a combination of the image of the
상기 IP 스피커(105)는 상기 제어용 IoT 디바이스(102) 또는 상기 관제센터(200)에 의해 음성 출력한다.The
도 4는 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법을 순서대로 도시한 플로우 차트이다(도 3 참조).4 is a flowchart sequentially illustrating an image enlargement/reduction method using 5G video communication according to an embodiment (refer to FIG. 3 ).
도 4에 도시된 바와 같이, 일실시예에 따른 영상 확대/축소 방법은 먼저 기본적으로는, 차량을 운행할 경우에, 차량 외에 설치한 CCTV 카메라에서 주변 영상을 촬영하여 수집한다.As shown in FIG. 4 , in the image enlargement/reduction method according to an embodiment, first, when a vehicle is driven, a surrounding image is captured by a CCTV camera installed outside the vehicle and collected.
그리고, 이러한 경우에, 제어용 IoT 디바이스는 상기 차량 내에 설치하여 상기 CCTV카메라에 의해 촬영한 영상을 등록 관제센터로 전달하고, 상기 관제센터로부터 영상과 문자를 전달받아 각기 출력하도록 한다.And, in this case, the IoT device for control is installed in the vehicle, transmits the image captured by the CCTV camera to the registration control center, and receives the image and text from the control center to output each.
또한, 이때 5G 영상/문자 송수신 모듈에서는 상기 제어용 IoT 디바이스와 상기 관제센터의 상호 간에 영상과 문자를 전달받기 위해 상기 차량 내에 설치한다.In addition, in this case, the 5G video/text transmission/reception module is installed in the vehicle to receive images and texts between the IoT device for control and the control center.
그리고, 모니터(운전자확인용 대시보드)에서는 상기 제어용 IoT 디바이스에 의해 상기 CCTV카메라의 영상과 상기 관제센터의 영상을 조합하여 표시한다.And, on the monitor (dashboard for driver confirmation), the video of the CCTV camera and the video of the control center are combined and displayed by the IoT device for control.
이에 더하여, 이러한 경우에, IP 스피커는 상기 제어용 IoT 디바이스 또는 상기 관제센터에 의해 음성 출력한다.In addition, in this case, the IP speaker outputs audio by the IoT device for control or the control center.
이러한 상태에서, 상기 제어용 IoT 디바이스는 일실시예에 따라 아래의 동작을 수행한다.In this state, the IoT device for control performs the following operation according to an embodiment.
a) 먼저, 상기 제어용 IoT 디바이스는 상기 차량 주변에서 사고가 발생한 경우(S401), 상기 CCTV카메라로부터의 사고현장 영상을 상기 관제센터로 전달하고(S402), 상기 관제센터로부터 월시스템 영상을 전달받아서(S403), 상기 모니터에 상기 사고현장 영상과 상기 월시스템 영상을 출력한다.a) First, when an accident occurs around the vehicle (S401), the IoT device for control transmits the accident scene image from the CCTV camera to the control center (S402), and receives the wall system image from the control center (S403), the accident scene image and the wall system image are output to the monitor.
b) 그리고, 상기 관제센터에서 월시스템 영상을 전달받을 때에 안내 문자를 전달받은 경우(S404), 상기 모니터에 상기 안내 문자를 조합하여 출력하도록 하기도 한다(S405).b) In addition, when a guide text is received when receiving a wall system image from the control center (S404), the guide text is combined and output to the monitor (S405).
c) 그리고, 또한 상기 사고현장 영상과 상기 월시스템 영상 또는 상기 안내 문자를 통해 사고를 확인한 경우에, 상기 IP 스피커로부터의 음성 출력 동작을 제어하여 대피방송을 출력하도록 한다(S406).c) Also, when an accident is confirmed through the accident scene image, the wall system image, or the guide text, the operation of outputting the voice from the IP speaker is controlled to output an evacuation broadcast (S406).
d) 특히, 일실시예에 따라 이러한 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치와 월 시스템 사이에서 주고 받는 영상에서 처리하는 방식은 아래와 같다.d) In particular, according to an embodiment, the processing method in the image exchanged between the 5G-based IoT device device mounted on the accident management vehicle and the wall system is as follows.
예를 들어, 관제센터로 사고현장 영상을 전달할 경우에는, 상기 사고현장 영상으로부터 설정 단일 이미지 형식으로 단일 이미지를 생성하고, 설정 단일 매트(Mat) 형식 이미지로 변환한 후, 설정 SR GAN 기반형 딥러닝 기반 영상확대 포맷에 의해 SI(super image)로 변경해서 다수의 상이한 CCTV 영상 파일 형식별로 대응하는 전체의 단일 이미지 또는 전체 동영상 형태로 업 스케일링을 하여 고화질영상으로 변환함으로써, 상기 관제센터에 사고현장 영상을 전달한다(보다 구체적인 SR GAN 내용은 도 5를 참조함).For example, when delivering an accident scene image to the control center, a single image is created from the accident scene image in a set single image format, converted into a set single Mat format image, and then set SR GAN-based deep By changing to SI (super image) by the running-based image enlargement format, upscaling to a single image or an entire video format corresponding to a number of different CCTV image file formats, and converting it to a high-definition image, the accident scene at the control center The video is transmitted (refer to FIG. 5 for more detailed SR GAN contents).
또는, 이러한 IoT 디바이스 장치로 월시스템 영상을 제공할 경우, 이러한 방식으로부터 월시스템 영상을 고화질영상으로 변환함으로써, 이와 마찬가지로 동일한 효과를 제공한다.Alternatively, when a wall system image is provided to such an IoT device, the same effect is provided by converting the wall system image into a high-quality image from this method.
이상과 같이, 일실시예는 교량 및 대교에서 재난, 재해 사고가 났을 경우, 상황을 관제(지휘) 센터에서 현장의 상황을 실시간으로 파악하고 대응할 수 있도록 5G 디바이스 기반의 관제 센터/ 지휘 차량 간 양방향 대응 영상체계 기술이다. 그리고, 이러한 IoT 디바이스 장치는 이에 더하여, 집중 관제를 위한 SR GAN 기반형 딥러닝 기반 영상확대 기술과 구간별 대응체계 수립을 위한 IP스피커 제어기술을 포함한다.As described above, in one embodiment, when a disaster or disaster occurs on a bridge or a bridge, the control (commanding) center can understand and respond to the situation in real time in real time between the control center/commanding vehicle based on a 5G device. It is a corresponding video system technology. And, in addition to this, the IoT device includes an SR GAN-based deep learning-based image enlargement technology for centralized control and an IP speaker control technology for establishing a response system for each section.
따라서, 이를 통해 교량 및 대교에서의 충돌사고에 대한 대처기술 개발을 통해 재난, 재해 사고수습을 위한 빠른 대응체계 수립, 관제(지휘)센터, 지휘 차량의 사고대응 전문성 및 효율성 강화, 사고수습/복구 등 위기관리 능력을 향상한다.Therefore, through this, through the development of coping technologies for collision accidents on bridges and bridges, the establishment of a rapid response system for disaster and disaster accident management, the reinforcement of the accident response expertise and efficiency of the control (command) center and command vehicle, and accident management/recovery improve crisis management skills.
도 5는 일실시예에 따른 5G영상통신을 이용한 영상 확대/축소 방법에 적용한 영상 확대/축소 포맷(알고리즘)을 설명하기 위한 도면이다.5 is a diagram for explaining an image enlargement/reduction format (algorithm) applied to an image enlargement/reduction method using 5G video communication according to an embodiment.
도 5에 도시된 바와 같이, 일실시예의 영상 확대/축소 포맷은 일반적으로 도로에서 사용하는 CCTV영상을 월 시스템으로 영상확대 시 등에 화질저하를 발생하는데, 해당 CCTV영상 등을 4K이상의 영상 등으로 변환하는 SR GAN 기반형 딥러닝 기반 영상확대 기술이다.As shown in Figure 5, the image enlargement/reduction format of one embodiment generally causes a degradation in image quality when the CCTV image used on the road is enlarged by the wall system, and the CCTV image is converted into a 4K or higher image, etc. SR GAN-based deep learning-based image magnification technology.
그리고, 또한 이러한 영상확대 내용은 예를 들어, CCTV 측에서는 1채널의 CCTV영상을 최대 32채널의 크기의 영상으로 변환을 위한 기술을 구비한다(월시스템도 동일한 또는 유사한 방식으로 사용함).In addition, this image enlargement content, for example, on the CCTV side, has a technology for converting a CCTV image of one channel into an image of a maximum size of 32 channels (the wall system is also used in the same or similar manner).
그리고, 또한 예컨대 사고현장 영상 즉, 입력받은 영상을 매트(MAT) 형식 이미지로 변환 후 딥러닝 기반 영상확대 알고리즘 적용(이를 통해 픽셀 단위에 접근하여 값 변경 가능)한다.And, also, for example, an accident scene image, that is, an input image is converted into a matte (MAT) format image, and a deep learning-based image magnification algorithm is applied (through this, the value can be changed by accessing the pixel unit).
이러한 알고리즘은 주요 내용으로, 단일이미지를 SI(super image)로 변경하고 전체의 단일이미지 또는 전체 동영상 형태로 업 스케일링을 하는데, 예를 들어 입력 영상에 대한 파일 형식 mpeg4, h264의 동영상 파일로 변환한다. 그래서, 4K이상 영상확대를 위하여 저화질 영상을 고화질영상으로 변환하며, 이러한 경우에 상기 변환 동작은 SR알고리즘 중 Learning Temporal Coherence via Self-Supervision for GAN-based Video Generation (TecoGAN)의 알고리즘을 적용한다. 부가적으로, 이러한 SRGAN 알고리즘은 기존의 SR(Super-Resolution) 기법의 문제점을 해결한 기술로써, GAN을 사용하여 실 사진과 같은 복원이 가능하다 (4K 이상의 영상확보 가능). 그리고 또한, 기존의 SRResNet나 bicubic interpolation 방법은 주변 픽셀의 average(평균)를 학습하기 때문에 영상이 흐릿하게 나오나, SRGAN은 기존의 SRResNet에서 GAN을 활용하여 가중치 값을 더하는 형식이기 때문에 업 스케일링하더라도 타 기법과 다르게 더욱 선명한 출력값을 얻을 수 있다.The main content of this algorithm is to change a single image to SI (super image) and up-scaling to a single image or an entire video format. . Therefore, a low-quality image is converted into a high-definition image for image magnification of 4K or higher, and in this case, the conversion operation applies an algorithm of Learning Temporal Coherence via Self-Supervision for GAN-based Video Generation (TecoGAN) among SR algorithms. In addition, this SRGAN algorithm is a technology that solves the problems of the existing SR (Super-Resolution) technique, and using GAN, it is possible to restore the same as a real photo (images of 4K or higher can be secured). Also, in the existing SRResNet or bicubic interpolation method, the image is blurry because it learns the average (average) of the surrounding pixels. A clearer output value can be obtained.
한편, 이에 더하여 이러한 5G영상통신을 이용한 영상 확대/축소 방법은 이렇게 각종 정보를 송수신할 경우에, 상호 간에 데이터베이스를 일치 유지함으로써, 신속하고 편리하게 서비스를 제공하도록 한다.On the other hand, in addition to this, the image enlargement/reduction method using this 5G video communication provides a service quickly and conveniently by keeping the database consistent with each other when transmitting and receiving various types of information.
이를 위해, 상기 제어용 IoT 디바이스는 아래의 동작을 수행한다.To this end, the IoT device for control performs the following operations.
a) 먼저 상기 관제센터와 장치등록 정보와 데이터를 저장한 테이블을 상호 간에 동일하게 구비하고, 상기 테이블에 대한 정합 관계를 미리 설정 등록한다.a) First, the control center and the table storing the device registration information and data are equally provided with each other, and a matching relationship for the table is set and registered in advance.
b) 그래서, 상호 간에 테이블 내의 정보를 변경할 경우, 상기 정합 관계에 따라서 테이블을 각기 동기화한다.b) Therefore, when information in a table is mutually changed, the tables are synchronized according to the matching relationship.
c) 그리고, 상기 테이블을 동기화할 경우에, 다수의 상이한 설비 유형과 예를 들어, 디바이스 장치 유형마다 또한, 관리자 장치 유형별로의(등급 또는, 장치 유형) 데이터 유형마다 정보를 다원화함으로써, 데이터베이스를 일치한다.c) and, when synchronizing the table, by diversifying the information per data type per device device type and per manager device type (class or device type) with a number of different equipment types, for example, match
그리고, 또한 이러한 IoT 디바이스 장치는 이러한 경우, 인터페이스부를 통해서 데이터를 다원화하여 이러한 DB일치를 위한 방식과 연계해서 전송함으로써, 효율적으로 신속하게 정보를 주고받을 수 있도록 한다.In addition, in this case, the IoT device apparatus diversifies data through the interface unit and transmits it in connection with the DB matching method, so that information can be exchanged efficiently and quickly.
a) 이를 위해, 먼저 인터페이스부에 있어서 내부에 출력포트 테이블을 예컨대 게이트웨이 내에 구비하고, 이 출력포트 테이블은 위와 동일하게 각각의 설비 유형과 데이터 유형별로 정보를 다원화하여 입출력하는 것이다.a) To this end, first, an output port table is provided inside the interface unit, for example, in the gateway, and the output port table diversifies information for each equipment type and data type as above and inputs and outputs.
b) 그래서, 이러한 상태에서 각종 데이터를 전송할 경우, 이러한 출력포트 테이블로부터 데이터를 다원화하여 신속하게 일괄적으로 관제센터 등에 전송함으로써, 효율적으로 신속하게 알림 정보 등을 제공하도록 한다.b) So, when transmitting various data in this state, by diversifying the data from the output port table and transmitting it to the control center, etc. quickly and collectively, notification information is provided efficiently and quickly.
c) 그리고, 또한 추가적으로 이러한 데이터 전송에 관한 다원화 방식은 이렇게 정보를 전송할 경우, 상기 테이블과도 연계해서 테이블 내의 정보를 변경할 경우에 출력포트 테이블 상의 정보도 예컨대, IoT 디바이스 장치 정보 등을 동기화하여 변경한다. 이때, 상기 정합 관계는 출력포트 테이블에 관한 포맷도 구비하여 상호 간에 조합하여 동작하도록 한다. 그래서, 이를 통해 이러한 다원화 방식에 있어서 효율적으로 사용할 수 있도록 한다.c) And, additionally, in this diversification method for data transmission, when information is transmitted in this way, when information in the table is changed in connection with the table, information on the output port table is also changed by synchronizing, for example, IoT device information, etc. do. In this case, the matching relation also includes a format related to the output port table to operate in combination with each other. So, through this, it can be used efficiently in this diversification method.
다른 한편으로, 추가적으로, 이러한 IoT 디바이스 장치는 이렇게 사고현장용 영상 등을 제공할 경우에, 주변 등의 관리자 단말기에 실시간으로 연결을 확보하므로, 신속하고 손쉽게 정보를 관리자에게 전달하도록 한다.On the other hand, additionally, when such an IoT device device provides an image for an accident site, etc., it secures a connection to a manager terminal in the vicinity in real time, so that information can be delivered to the manager quickly and easily.
이를 위해서, 상기 제어용 IoT 디바이스는 아래의 동작을 수행한다.To this end, the IoT device for control performs the following operations.
a) 먼저, 상기 제어용 IoT 디바이스는 등록 관리자 단말기와 통신을 할 경우에는, 예를 들어, 위의 다원화 방식을 사용하여 1차적으로 등록 로컬 통신망의 연결 여부를 확인해서, 상기 확인 결과 상기 로컬 통신망을 연결한 경우에는 상이한 관리 작업위치별로 대응하는 설정 관리자 공용 계정으로서 연결한다.a) First, when the IoT device for control communicates with the registration manager terminal, for example, by using the above diversification method, it first checks whether the registration local network is connected, and as a result of the check, the local communication network is connected. In the case of connection, it is connected as a setting administrator common account corresponding to each different management work location.
b) 상기 확인 결과, 상기 로컬 통신망을 연결하지 않은 경우에는 2차적으로 등록 무선 통신망의 연결 여부를 확인해서, 상기 확인 결과 상기 무선 통신망을 연결한 경우에는 개별 IP 주소로 연결한다.b) As a result of the check, if the local communication network is not connected, it is checked whether the registered wireless communication network is connected secondarily, and when the wireless communication network is connected as a result of the check, an individual IP address is connected.
c) 상기 확인 결과, 상기 무선 통신망을 연결하지 않은 경우에는 등록 이동 통신망의 단말기 식별 번호로 연결하므로, 상기 관리자 단말기와 연결을 확보c) As a result of the check, if the wireless communication network is not connected, the connection is made with the terminal identification number of the registered mobile communication network, so the connection with the manager terminal is secured
한편으로, 이렇게 관리자 단말기와 실시간으로 연결을 할 경우에, 연결의 보안을 위해서 IP테이블을 이용하여 IP의 감시 및 비인가자의 접속에 따른 모니터링(또는, 로그)을 관리하도록 한다(이때, 이 IP테이블은 위의 다원화 방식의 테이블과 동일한 방식가능). 그리고, 부가적으로 상기 IP테이블은 이러한 경우에 예컨대, 다원화 방식의 테이블과 동일한 방식을 적용해서 관리자 단말기 유형 또는 관리 작업 유형별로 데이터를 다원화하여 입출력하도록 하기도 한다.On the other hand, in the case of real-time connection with the administrator terminal in this way, for the security of the connection, the IP table is used to monitor the IP and manage the monitoring (or log) according to the connection of the unauthorized person (in this case, the IP table can be done in the same way as the above table of diversification method). In addition, in this case, for example, the IP table uses the same method as the diversification table to diversify data for each manager terminal type or management task type to input/output.
a) 구체적으로는, 이를 위해 먼저 상기 로컬 통신망의 관리자 공용 계정과 상기 무선 통신망의 개별 IP 주소를 등록한 IP 테이블을 미리 구성한다.a) Specifically, for this, an IP table in which an administrator public account of the local communication network and individual IP addresses of the wireless communication network are registered is configured in advance.
b) 그리고, 이렇게 관리자 단말기로 알람을 제공할 경우에, 해당하는 통신망의 헬로우(HELLO) 메시지를 송신해서 응답 결과 내의 다음 홉(next hop) 스위치 IP 주소를 추출한다.b) And, when an alarm is provided to the manager terminal in this way, the next hop switch IP address is extracted from the response result by sending a hello message of the corresponding communication network.
c) 다음, 이러한 다음 홉 스위치 IP 주소와 동일한 스위치 IP 주소를 스위치 인접지 연결 관계 리스트에서 확인한다.c) Next, check the switch IP address that is the same as the next hop switch IP address in the switch neighbor connection relationship list.
d) 상기 확인 결과, 상기 다음 홉 스위치 IP 주소와 동일한 스위치 IP 주소가 있는 경우, 해당하는 관리자 공용 계정 또는, 개별 IP 주소가 상기 IP 테이블에도 있는지 확인하므로, 비인가자의 접속 여부를 확인한다.d) As a result of the check, if there is a switch IP address that is the same as the IP address of the next hop switch, it is checked whether the corresponding administrator public account or individual IP address is also in the IP table, so that unauthorized access is checked.
e) 상기 확인 결과, 해당하는 관리자 공용 계정 또는, 개별 IP 주소가 상기 IP 테이블에도 있는 경우에 조인/정리(JOIN/PRUNE) 메시지를 송신하므로, 해당하는 통신망과 연결한다.e) As a result of the above check, if the corresponding administrator public account or individual IP address is also in the IP table, a JOIN/PRUNE message is transmitted, so it is connected to the corresponding communication network.
100 : 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치
200 : 관제센터
101 : CCTV카메라 102 : 제어용 IoT 디바이스
103 : 5G 영상/문자 송수신 모듈 104 : 모니터(운전자확인용 대시보드)
105 : IP 스피커100: 5G-based IoT device for accident management vehicle mounting
200: control center
101: CCTV camera 102: IoT device for control
103: 5G video/text transmission/reception module 104: monitor (dashboard for driver confirmation)
105 : IP speaker
Claims (4)
상기 차량 내에 설치하여 상기 CCTV카메라에 의해 촬영한 영상을 등록 관제센터로 전달하고, 상기 관제센터로부터 영상과 문자를 전달받아 각기 출력하도록 하는 제어용 IoT 디바이스;
상기 제어용 IoT 디바이스와 상기 관제센터의 상호 간에 영상과 문자를 전달받기 위해 상기 차량 내에 설치한 5G 영상/문자 송수신 모듈;
상기 제어용 IoT 디바이스에 의해 상기 CCTV카메라의 영상과 상기 관제센터의 영상을 조합하여 표시하는 모니터(운전자확인용 대시보드); 및
상기 제어용 IoT 디바이스 또는 상기 관제센터에 의해 음성 출력하는 IP스피커; 를 포함하며,
상기 제어용 IoT 디바이스는,
a) 상기 차량 주변에서 사고가 발생한 경우, 상기 CCTV카메라로부터의 사고현장 영상을 상기 관제센터로 전달하고, 상기 관제센터로부터 월시스템(Wall System) 영상을 전달받아서, 상기 모니터에 상기 사고현장 영상과 상기 월시스템 영상을 출력하고,
b) 상기 관제센터에서 월시스템 영상을 전달받을 때에 안내 문자를 전달받은 경우, 상기 모니터에 상기 안내 문자를 조합하여 출력하도록 하기도 하며,
c) 상기 사고현장 영상과 상기 월시스템 영상 또는 상기 안내 문자를 통해 사고를 확인한 경우에, 상기 IP 스피커로부터의 음성 출력 동작을 제어하여 대피방송을 출력하도록 하고,
d) 상기 관제센터와 사고현장 영상을 전달하거나 또는, 월시스템 영상을 전달받을 경우에는, 상기 사고현장 영상 또는 월시스템 영상으로부터 설정 단일 이미지 형식으로 단일 이미지를 생성하고, 설정 단일 매트(Mat) 형식 이미지로 변환한 후, 설정 SR GAN 기반형 딥러닝 기반 영상확대 포맷에 의해 SI(super image)로 변경해서 다수의 상이한 CCTV 영상 파일 형식별로 대응하는 전체의 단일 이미지 또는 전체 동영상 형태로 업 스케일링을 하여 고화질영상으로 변환함으로써, 상호 간에 사고현장 영상과 월시스템 영상을 전달하며,
상기 제어용 IoT 디바이스는
a-1) 상기 관제센터와 장치등록 정보와 데이터를 저장한 테이블을 상호 간에 동일하게 구비하고, 상기 테이블에 대한 정합 관계를 미리 설정 등록해서,
b-1) 상호 간에 테이블 내의 정보를 변경할 경우, 상기 정합 관계에 따라서 테이블을 각기 동기화하고,
c-1) 상기 테이블을 동기화할 경우에, 다수의 상이한 설비 유형과 관리자 장치 유형별로의 데이터 유형마다 정보를 다원화함으로써, 데이터베이스를 일치시키며,
상기 제어용 IoT 디바이스는
a-2) 등록 관리자 단말기와 통신을 할 경우에는, 1차적으로 등록 로컬 통신망의 연결 여부를 확인해서, 상기 확인 결과 상기 로컬 통신망을 연결한 경우에는 상이한 관리 작업위치별로 대응하는 설정 관리자 공용 계정으로서 연결하고,
b-2) 상기 확인 결과, 상기 로컬 통신망을 연결하지 않은 경우에는 2차적으로 등록 무선 통신망의 연결 여부를 확인해서, 상기 확인 결과 상기 무선 통신망을 연결한 경우에는 개별 IP 주소로 연결하고,
c-2) 상기 확인 결과, 상기 무선 통신망을 연결하지 않은 경우에는 등록 이동 통신망의 단말기 식별 번호로 연결하므로, 상기 관리자 단말기와 연결을 확보하는 것; 을 특징으로 하는 5G영상통신을 이용한 영상 확대/축소 방법을 구비한 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치.
When operating a vehicle, a CCTV camera installed outside the vehicle to capture and collect surrounding images;
a control IoT device installed in the vehicle to transmit the image captured by the CCTV camera to a registration control center, and to receive and output images and text from the control center;
a 5G video/text transmission/reception module installed in the vehicle to receive images and texts between the control IoT device and the control center;
a monitor (dashboard for driver confirmation) displaying a combination of the video of the CCTV camera and the video of the control center by the IoT device for control; and
an IP speaker outputting voice by the IoT device for control or the control center; includes,
The control IoT device,
a) When an accident occurs around the vehicle, the accident scene image from the CCTV camera is transmitted to the control center, and a Wall System image is received from the control center, and the accident scene image and output the wall system image,
b) If a guide text is received when receiving a wall system image from the control center, a combination of the guide text is output on the monitor;
c) When an accident is confirmed through the accident site image, the wall system image, or the guide text, the operation of audio output from the IP speaker is controlled to output an evacuation broadcast;
d) When transmitting the accident scene image to the control center or receiving the wall system image, a single image is created from the accident scene image or the wall system image in a set single image format, and a set single mat format After converting to an image, it is changed to SI (super image) by the setting SR GAN-based deep learning-based image enlargement format, and upscaling to a single image or entire video format corresponding to a number of different CCTV image file formats. By converting it into high-definition video, we deliver accident scene video and wall system video to each other.
The IoT device for control is
a-1) The control center and the table storing the device registration information and data are equally provided with each other, and a matching relationship for the table is set and registered in advance;
b-1) When information in a table is mutually changed, each table is synchronized according to the matching relationship;
c-1) In the case of synchronizing the table, the database is matched by diversifying the information for each data type for a number of different equipment types and for each manager device type;
The IoT device for control is
a-2) In the case of communication with the registration manager terminal, it is first checked whether the registered local communication network is connected, and as a result of the check, when the local communication network is connected, as a setting administrator common account corresponding to different management work locations connect,
b-2) As a result of the above check, if the local communication network is not connected, it is checked whether the registered wireless communication network is connected secondarily, and when the wireless communication network is connected as a result of the check, an individual IP address is connected;
c-2) as a result of the check, if the wireless communication network is not connected, the connection is made with the terminal identification number of the registered mobile communication network, so that the connection with the manager terminal is secured; 5G-based IoT device device for accident management vehicle equipped with an image enlargement/reduction method using 5G video communication, characterized in that.
상기 제어용 IoT 디바이스는
a) 상기 로컬 통신망의 관리자 공용 계정과, 상기 무선 통신망의 개별 IP 주소를 등록한 IP 테이블을 미리 구성하고,
b) 상기 관리자 단말기로 알람을 제공할 경우에, 해당하는 통신망의 HELLO 메시지를 송신해서 응답 결과 내의 다음 홉(next hop) 스위치 IP 주소를 추출하고,
c) 상기 다음 홉 스위치 IP 주소와 동일한 스위치 IP 주소를 스위치 인접지 연결 관계 리스트에서 확인하며,
d) 상기 확인 결과, 상기 다음 홉 스위치 IP 주소와 동일한 스위치 IP 주소가 있는 경우, 해당하는 관리자 공용 계정 또는, 개별 IP 주소가 상기 IP 테이블에도 있는지 확인하므로, 비인가자의 접속 여부를 확인하고,
e) 상기 확인 결과, 해당하는 관리자 공용 계정 또는, 개별 IP 주소가 상기 IP 테이블에도 있는 경우에 JOIN/PRUNE 메시지를 송신하므로, 해당하는 통신망과 연결하는 것; 을 특징으로 하는 5G영상통신을 이용한 영상 확대/축소 방법을 구비한 사고관리차량 탑재용 5G 기반의 IoT 디바이스 장치.
The method according to claim 1,
The IoT device for control is
a) preconfiguring an IP table in which an administrator public account of the local communication network and individual IP addresses of the wireless communication network are registered;
b) When an alarm is provided to the manager terminal, the HELLO message of the corresponding communication network is transmitted to extract the next hop switch IP address in the response result,
c) Check the switch IP address identical to the next hop switch IP address in the switch neighbor connection relationship list;
d) As a result of the check, if there is a switch IP address that is the same as the next hop switch IP address, it is checked whether the corresponding administrator public account or individual IP address is also in the IP table, so that unauthorized access is checked;
e) As a result of the check, when the corresponding administrator public account or individual IP address is also in the IP table, the JOIN/PRUNE message is transmitted, so connecting to the corresponding communication network; 5G-based IoT device device for accident management vehicle equipped with an image enlargement/reduction method using 5G video communication, characterized in that.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210143560A KR102378499B1 (en) | 2021-10-26 | 2021-10-26 | Solution for scaling/reducing employing 5G image communication |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210143560A KR102378499B1 (en) | 2021-10-26 | 2021-10-26 | Solution for scaling/reducing employing 5G image communication |
Publications (1)
Publication Number | Publication Date |
---|---|
KR102378499B1 true KR102378499B1 (en) | 2022-03-24 |
Family
ID=80935637
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210143560A KR102378499B1 (en) | 2021-10-26 | 2021-10-26 | Solution for scaling/reducing employing 5G image communication |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102378499B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102487031B1 (en) * | 2022-04-29 | 2023-01-10 | (주)하이브시스템 | Video transmission apparatus capable of event management |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100130792A (en) * | 2009-06-04 | 2010-12-14 | (주)유레네트웍스 | System and method for transferring real time moving picture of crime by wireless |
JP2019148875A (en) * | 2018-02-26 | 2019-09-05 | 富士ゼロックス株式会社 | Image processing device and program |
KR102245501B1 (en) * | 2020-11-25 | 2021-04-29 | 주식회사 아이지오 | Low-quality CCTV Image Based Object Restoration System Using Deep-learning |
-
2021
- 2021-10-26 KR KR1020210143560A patent/KR102378499B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100130792A (en) * | 2009-06-04 | 2010-12-14 | (주)유레네트웍스 | System and method for transferring real time moving picture of crime by wireless |
JP2019148875A (en) * | 2018-02-26 | 2019-09-05 | 富士ゼロックス株式会社 | Image processing device and program |
KR102245501B1 (en) * | 2020-11-25 | 2021-04-29 | 주식회사 아이지오 | Low-quality CCTV Image Based Object Restoration System Using Deep-learning |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102487031B1 (en) * | 2022-04-29 | 2023-01-10 | (주)하이브시스템 | Video transmission apparatus capable of event management |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6466258B1 (en) | 911 real time information communication | |
CA2827564C (en) | Dynamic asset marshalling within an incident communications network | |
CN103516799A (en) | Synchronization alarming, alarm receiving and police dispatching system and method | |
KR101744517B1 (en) | Method for Supporting CCTV Image Service Between U-CITY Control Center and 112 Call Center | |
CN201839388U (en) | Video monitoring system with virtual private network (VPN) function and global positioning system (GPS) function in third generation (3G) network | |
CN101989375A (en) | Services based two way voice service recording and logging | |
KR102378499B1 (en) | Solution for scaling/reducing employing 5G image communication | |
TW201243776A (en) | Remote surveillance device and method thereof | |
CN102420978A (en) | Wireless remote emergency command system | |
CN203492055U (en) | Synchronous alerting, alarm answering and alarm handling system | |
KR102426910B1 (en) | Apparatus for 5G IoT device employing accident management vehicle | |
CN112954254A (en) | Emergency command fusion communication platform | |
CN102572408A (en) | Monitoring system and method based on 3G (third generation) wireless communication network | |
CN202121733U (en) | Interphone system | |
JP4378551B2 (en) | Disaster prevention information communication terminal | |
JP3890385B2 (en) | Disaster prevention information communication system | |
CN113784079A (en) | Fire-fighting visual alarm system and method | |
KR102167394B1 (en) | Emergency interphone system | |
CN202143106U (en) | Emergency command system based on wireless network | |
KR20060001932A (en) | Internet real time multimedia prevention of crimes- prevention of disasters service method to use real time video streaming relay server and client program, real time multimedia transmitter-receiver at urgency situation (fire, rescue, trespass and unusualness report etc) appearance | |
CN102523060A (en) | Emergent command system based on network transmission | |
JP2016005237A (en) | Information communication system and information communication method | |
CN211019246U (en) | Disaster area field multimedia emergency communication system | |
JP7517742B1 (en) | Reporting system, reporting method and program | |
JP2003274050A (en) | Monitor apparatus and monitor system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |