KR101983247B1

KR101983247B1 - Car Parking Recognition Apparatus for Internet of Things using Image Complex Sensor

Info

Publication number: KR101983247B1
Application number: KR1020170012275A
Authority: KR
Inventors: 유영욱; 박수은
Original assignee: 셀로코주식회사
Priority date: 2016-08-31
Filing date: 2017-01-25
Publication date: 2019-05-28
Also published as: KR20180025119A

Abstract

본 발명의 영상복합 센서를 이용한 사물인터넷 주차인식 장치에 따르면, 어느 특정 위치에 주차한 차량을 인식하기 위하여 하나의 몸체 박스에 차량 인식에 필요한 센싱, 구동, 제어, 통신기능을 장착하며, 센싱으로는 차량 입/출입, 사람의 접근을 감지하는 거리, 지자기, 움직임 등의 센서를 구비하고, 필요한 경우에는 기계를 구동하는 구동장치, 경광등, 사이렌을 구비하며, 주야간 촬영할 수 있는 카메라와 조명투광장치를 장착하여 야간 주차확인도 가능한 효과가 있다.According to the object Internet parking recognition apparatus using the video composite sensor of the present invention, sensing, driving, control, and communication functions necessary for vehicle recognition are installed in one body box to recognize a vehicle parked at a specific position, A camera capable of taking pictures by day and night, and an illuminating light emitting device (not shown) provided with a driving device for driving a machine, a warning light, and a siren, if necessary, It is possible to check parking at night.

Description

영상복합 센서를 이용한 사물인터넷 주차인식 장치{Car Parking Recognition Apparatus for Internet of Things using Image Complex Sensor}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a vehicle parking recognition apparatus,

본 발명은 영상복합 센서를 이용한 사물인터넷 주차인식 장치에 관한 것으로, 더욱 상세하게는 어느 특정 위치에 주차한 차량을 인식하기 위하여, 하나의 몸체인 박스에 차량 인식에 필요한 센싱, 구동, 제어, 통신기능을 장착하여 복합적으로 이루어진 영상복합 센서를 이용한 사물인터넷 주차인식 장치에 관한 것이다.More particularly, the present invention relates to a method and apparatus for recognizing a vehicle parked at a specific position by sensing, driving, controlling, communicating, The present invention relates to an object-based Internet parking recognition apparatus using a composite image sensor.

차량의 증가 추세에 따라 주차난이 심각한 문제로 대두되고 있고, 증가하는 주차난을 해결하기 위해 앞으로도 많은 수의 주차장이 만들어질 것으로 예상된다.As the number of vehicles increases, the number of parking lots is expected to increase in the future.

이때, 주차장은 도로의 노면 또는 교통광장의 일정한 영역에 설치된 노상 주차장, 도로의 노면 또는 교통광장 외의 장소에 설치된 노외 주차장, 및 건축물 등 주차수요를 유발하는 시설에 부대하여 설치된 부설 주차장 등으로 분류될 수 있고, 이러한 주차장은 유인 또는 무인 운영 방식으로 분류될 수도 있다.At this time, the parking lot is classified into a roadside parking lot installed on a road surface or a certain area of a traffic plaza, an outdoor parking lot installed on a road surface or a place other than a traffic plaza, and a parking lot installed in addition to a facility And these parking lots may be classified as either manned or unmanned.

여기서 유인 방식은 요금 정산을 위하여 직원이 배치되어야 하므로 과다한 인건비가 소요되고 유인징수 시 부정의 소지가 있어 요금누수 발생 등이 대두되는 문제점이 있다.Here, the incentive system has a problem in that excessive staffing costs are required to arrange the employees for the settlement of the fare, and there is a possibility that the fee is leaked due to the illegal possession of the incentive.

그리고 노상 주차장의 경우 주차장 전체를 통제하는 고정된 요금 정산소가 설치될 수 없기 때문에, 직원은 관리 영역이 넓은 경우 주차장 전체를 효율적으로 관리하기 어려울 수 있다.And, in the case of a street parking lot, it is not possible to install a fixed fare clearinghouse that controls the entire parking lot, so it may be difficult for an employee to efficiently manage the entire parking lot if the management area is wide.

한편, 무인 방식의 경우, 노외 주차장 및 부설 주차장은 그 입구와 출구가 제한되어 있어 출입하는 차량을 차단기 등으로 통제하여 무인으로 관리하기가 용이하지만 노상 주차장은 주차구획이 도로의 노면 등에 설치되어 있는 특성 때문에 출입하는 차량을 쉽게 통제하기 어렵다는 문제점이 있다.On the other hand, in the case of the unmanned method, since the entrance and exit of the outdoor parking lot and the parking lot are limited, it is easy to manage unauthorized vehicles by controlling the entrance and exit of the vehicle by a breaker. However, There is a problem that it is difficult to easily control a vehicle entering and exiting because of its characteristics.

이러한 노상 주차장의 문제를 해결하기 위해, 무인 운영 노상 주차장은 플랩 제어방식을 사용하는 경우가 빈번하다.In order to solve the problem of the street parking lot, the unmanned operation street parking lot often uses the flap control method.

여기서, 플랩 제어 방식은 차량이 주차할 때 주차장 바닥으로부터 플랩이 상승하여 차량을 구속함으로써 주차정산이 완결될 때까지 차량의 무단 출차를 방지하는 방식이다.Here, the flap control method is a method for preventing unauthorized departure of the vehicle until the parking adjustment is completed by raising the flap from the floor of the parking lot when the vehicle is parked and restricting the vehicle.

그러나 이러한 플랩 제어 방식은, 주차장 조성 및 운영 원가 중 플랩의 비용이 가장 큰 부분을 차지하므로, 주차장 조성 및 운영 원가를 상승시킨다는 문제점이 있다. 또한, 플랩 제어 방식은 요금이 자발적이 아니고 강제적으로 징수되어 주차장 사용자에게 거부감을 유발할 우려가 있다.However, such a flap control method occupies the largest portion of the cost of the flap among the parking lot composition and the operating cost, thereby raising the parking lot composition and operating cost. In addition, the flap control method is not voluntary, and is charged forcibly, which may cause a feeling of rejection to the parking lot user.

따라서 최근에는 입차에서 출차까지 인력 없이 운영 가능한 차량번호 인식 방식 노상 주차장 무인 정산 시스템이 이용되고 있다.In recent years, an unmanned settlement system has been used as a vehicle identification system that can operate without any manpower from entry to departure.

그러나 이러한 노상 주차장 무인 정산 시스템은 각각의 차량 촬영은 용이하나 전체 주차장의 촬영을 위해서는 별도의 CCTV를 이용해야 하고, CCTV가 촬영할 수 없는 사각지대가 존재하며, 쉽게 주차 요금을 정산하기 어렵고, 야간에 조명장치가 없을 경우 보안기능이 취약하다는 문제점이 있으므로, 상시 야간에도 보안영상을 동영상 촬영 및 저장하고 차량진입 시 차량번호를 인식할 수 있는 조명장치 등이 필요하다.However, such a roadside parking lot unmanned settlement system is easy to shoot each vehicle, but it is necessary to use separate CCTV for shooting the entire parking lot, there is a blind spot where CCTV can not shoot, it is difficult to easily settle the parking fee, In the absence of a lighting device, there is a problem that security functions are weak. Therefore, a lighting device capable of capturing and storing a security image at all times of the night and recognizing the vehicle number when entering the vehicle is needed.

또한, 차량이 진입하고 나면 카메라에 근접하여 주차하므로 차량번호판이 보이지 않게 되는데 진입 시 차량번호 인식이 부분인식 되거나 미인식 되었을 경우 이에 대한 해결방안이 요구되는 실정이다.Also, since the vehicle is parked close to the camera after the vehicle has entered, the license plate is not visible. Therefore, a solution is required when the recognition of the car number is partially recognized or not recognized upon entry.

대한민국 등록특허공보 등록번호 제10-801935호Korean Registered Patent Publication No. 10-801935

본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로서, 어느 특정 위치에 주차한 차량을 인식하기 위하여 하나의 몸체 박스에 차량 인식에 필요한 센싱, 구동, 제어, 통신기능을 장착하며, 센싱으로는 차량 입/출입, 사람의 접근을 감지하는 거리, 지자기, 움직임 등의 센서를 구비하고, 필요한 경우에는 기계를 구동하는 구동장치, 경광등, 사이렌을 구비하며, 주야간 촬영할 수 있는 카메라와 조명투광장치를 장착하여 야간 주차확인도 가능한 영상복합 센서를 이용한 사물인터넷 주차인식 장치를 제공하는 것이다.SUMMARY OF THE INVENTION The present invention has been conceived to solve the above-described problems, and it is an object of the present invention to provide a vehicle body sensing apparatus which is equipped with sensing, driving, Equipped with sensors such as entrance / exit, distance sensing the approach of a person, geomagnetism, movement, etc., if necessary, a driving device for driving the machine, a warning light, a siren, And to provide an object Internet parking recognizing device using a video composite sensor capable of checking parking at night.

상술한 목적을 달성하기 위한 본 발명의 영상복합 센서를 이용한 사물인터넷 주차인식 장치는, 특정 위치에 주차한 차량을 인식하기 위하여 하나의 몸체 박스에 차량 인식에 필요한 센싱 기능, 구동 기능, 제어 기능 및 통신 기능을 장착하며; 센싱 기능은 차량의 입/출입을 감지하는 센서, 사람의 접근을 감지하는 센서, 지자기를 감지하는 센서, 움직임을 감지하는 센서를 구비하고; 구동 기능은 기계를 구동하는 구동 장치, 경광등을 구동하는 구동 장치, 사이렌을 구동하는 구동 장치, 주/야간 촬영할 수 있는 카메라와 조명장치를 구동하는 구동 장치를 구비하며; 제어 기능은 2개의 CPU를 구비하여 센싱 기능에 따른 센싱 신호 및 구동 기능에 따른 구동 신호를 제어 처리하고, 영상 인식 및 음성 처리에 대한 제어 처리를 수행하며; 통신 기능은 유선 통신 기능 및 무선 통신 기능을 제공하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided an object Internet parking recognition apparatus using a video composite sensor, including a sensing unit, a driving function, a control function, Equipped with communication function; The sensing function includes a sensor for sensing the entrance / exit of the vehicle, a sensor for sensing the approach of a person, a sensor for sensing geomagnetism, and a sensor for sensing motion; The driving function includes a driving device for driving the machine, a driving device for driving the warning light, a driving device for driving the siren, a camera for shooting at day / night, and a driving device for driving the lighting device; The control function includes two CPUs to control the sensing signal according to the sensing function and the driving signal corresponding to the driving function, and perform control processing for image recognition and audio processing; The communication function is characterized by providing a wired communication function and a wireless communication function.

상기 영상복합 센서를 이용한 사물인터넷 주차인식 장치는 주차장 출입구, 길거리 주차장, 거주자 우선 주차 구역, 이동형 주차장, 이동형 임시 차량 신호대 또는 행사장 출입 통제 구역에 설치되어, 차량 통제, 차량 번호 인식 수행을 하는 것을 특징으로 할 수 있다.The object internet parking recognizing device using the video composite sensor is installed in a parking lot entrance, a street parking, a resident priority parking area, a movable parking lot, a mobile temporary signaling station, or a venue access control area, .

영상복합 센서를 이용한 사물인터넷 주차인식 장치는 전면판, 센싱구동부, 영상처리 연산부 및 후면판이 적층 결합되어 구성되며; 센싱구동부는 제1CPU, 제1메모리, 영상센서, 조명장치, 거리센서, PIR센서, 조도센서, 가속도센서, GPS 수신부, 스피커 또는 마이크 중 어느 하나 이상을 포함하여 구성되고; 영상처리 연산부는 제2CPU, 제2메모리, 영상처리부, 제3메모리 또는 제4메모리 중 어느 하나 이상을 포함하여 구성되고; 후면판은 외부신호 연결부, 통신 연결부를 포함하여 구성될 수 있다.The object Internet parking recognition apparatus using a video composite sensor includes a front plate, a sensing driving unit, an image processing operation unit, and a rear plate laminated together; Wherein the sensing driver comprises at least one of a first CPU, a first memory, an image sensor, a lighting device, a distance sensor, a PIR sensor, an illuminance sensor, an acceleration sensor, a GPS receiver, a speaker or a microphone; The image processing operation unit may include at least one of a second CPU, a second memory, an image processing unit, a third memory, or a fourth memory; The backplane may be configured to include an external signal connection and a communication connection.

전면판은 영상센서, 조명장치, 거리센서, PIR센서, 조도센서, 스피커 및 마이크가 외부로 노출되도록 구비되며; 후면판의 외부신호 연결부에 지자기 센서가 더 포함되어 구성될 수 있다.The front plate is provided such that an image sensor, a lighting device, a distance sensor, a PIR sensor, an illuminance sensor, a speaker, and a microphone are exposed to the outside; The external signal connection portion of the back plate may further include a geomagnetic sensor.

이상에서 설명한 바와 같은 본 발명의 영상복합 센서를 이용한 사물인터넷 주차인식 장치에 따르면, 어느 특정 위치에 주차한 차량을 인식하기 위하여 하나의 몸체 박스에 차량 인식에 필요한 센싱, 구동, 제어, 통신기능을 장착하며, 센싱으로는 차량 입/출입, 사람의 접근을 감지하는 거리, 지자기, 움직임 등의 센서를 구비하고, 필요한 경우에는 기계를 구동하는 구동장치, 경광등, 사이렌을 구비하며, 주야간 촬영할 수 있는 카메라와 조명투광장치를 장착하여 야간 주차확인도 가능한 효과가 있다.According to the object Internet parking recognizing apparatus using the video composite sensor of the present invention as described above, in order to recognize a vehicle parked at a specific position, sensing, driving, controlling, and communication functions necessary for recognizing the vehicle in one body box A sensor for detecting the approaching / exiting of the vehicle, a distance for sensing the approach of a person, a geomagnetism, a motion, etc., and if necessary, a driving device for driving the machine, a warning light, a siren, It is possible to check parking at night by installing a camera and an illuminator.

도 1은 본 발명의 일실시예에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치의 외관을 나타낸 사시도이며,
도 2는 본 발명의 일실시예에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치의 내부 구성을 나타낸 사시도이며,
도 3은 본 발명의 일실시예에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치의 기능적 구조를 설명하기 위한 블록도이며,
도 4는 본 발명의 일실시예에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치의 원격 모니터링을 설명하기 위한 예시도이며,
도 5는 본 발명의 일실시예에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치의 응용 예시를 나타낸 도면이다.FIG. 1 is a perspective view showing an appearance of an object Internet parking recognizing apparatus using a video composite sensor according to an embodiment of the present invention,
FIG. 2 is a perspective view illustrating an internal configuration of a matter-of-interest Internet parking recognition apparatus using a video composite sensor according to an embodiment of the present invention,
FIG. 3 is a block diagram for explaining a functional structure of an object Internet parking recognition apparatus using a video composite sensor according to an embodiment of the present invention.
FIG. 4 is a diagram for explaining remote monitoring of an object Internet parking recognition apparatus using a video composite sensor according to an embodiment of the present invention,
FIG. 5 is a diagram illustrating an application example of an object Internet parking recognition apparatus using a video composite sensor according to an embodiment of the present invention.

이하, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 상세히 설명하기 위하여, 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 상세하게 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings in order to facilitate a person skilled in the art to easily carry out the present invention.

본 발명의 일실시예에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)는 도 1에 나타낸 바와 같이, 벽에 거치하여 설치하는 벽 거치형 또는 기둥에 일체형으로 설치하는 기둥 일체형으로 제작할 수 있으며, 어느 특정 위치에 주차한 차량을 인식하기 위하여, 하나의 몸체 박스에 차량 인식에 필요한 센싱기능, 구동기능, 제어기능 및 통신기능을 장착한다.As shown in FIG. 1, the object-based Internet parking recognizing apparatus 100 using the image composite sensor according to an embodiment of the present invention can be manufactured as a wall-mounted type that is mounted on a wall or a single- A sensing function, a driving function, a control function, and a communication function necessary for recognizing a vehicle are installed in one body box in order to recognize a vehicle parked at a specific position.

영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)는 2개의 CPU가 포함된 제어기능을 통하여 센싱신호를 제어 처리하고, 구동 신호를 제어 처리하고, 영상인식, 음성처리 등의 기능도 담당한다. The object Internet parking recognition apparatus 100 using a video composite sensor controls a sensing signal through a control function including two CPUs, controls a driving signal, and performs functions such as image recognition and voice processing.

영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)는 태양에너지 전지를 부착하여 외진 곳, 임의 장소의 주차장, 거리 통제를 위한 장소, 통과를 통제하기 위한 장소 등에 설치하여 유용하게 이용될 수 있다.The object Internet parking recognizing apparatus 100 using the video composite sensor can be usefully installed by attaching a solar energy cell to a parking lot at an outside location, a parking place at a certain place, a place for distance control, a place for controlling passage.

상기 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)의 내부 구성으로써 도 2 및 도 3에 나타낸 바와 같이, 각종 센서/구동장치가 구비되고, 계산 기능, 통신 송수신 기능이 구비되어 일체형으로 구성되는데, 그 구성은 전면판(110), 센싱구동부(130), 영상처리 연산부(150), 후면판(170)으로 구성된다.As shown in FIG. 2 and FIG. 3, an internal configuration of the object type Internet parking recognition apparatus 100 using the image composite sensor includes various sensors / driving devices, and has an integrated function including a calculation function and a communication transmission / reception function And includes a front panel 110, a sensing driver 130, an image processing unit 150, and a rear panel 170.

전면판(130)은 도 3에 나타낸 바와 같이, 영상센서(131, 132), 조명장치(139, 140), 거리센서(133), PIR센서(135), 조도센서(136), 스피커(141), 마이크(142)가 노출되게 설계된다.3, the front panel 130 includes image sensors 131 and 132, illuminators 139 and 140, a distance sensor 133, a PIR sensor 135, an illuminance sensor 136, a speaker 141 , The microphone 142 is designed to be exposed.

센싱구동부(130)는 도 3에 나타낸 바와 같이, PCB상에 각종 센서 및 구동 기능의 부품과 이를 제어하는 CPU 및 memory 등이 배치된다.As shown in FIG. 3, the sensing driver 130 includes components such as various sensors and driving functions, a CPU and a memory for controlling the components, and the like.

영상촬영을 위한 CIS 카메라 센서는 주간 촬영을 위한 일반 가시광용 영상센서(131)와 야간 촬영을 위한 적외선용 영상센서(132)로 구비되며, 거리센서(133)는 초음파 또는 LED 빛으로 재는 방식인데, 대체로 50cm ~ 3m 정도에 사물, 사람이 있을 때 감지할 수 있다.The CIS camera sensor for capturing an image is provided with an image sensor 131 for a normal visible light for daytime shooting and an infrared image sensor 132 for nighttime shooting and a distance sensor 133 is a method using ultrasound or LED light , It can be detected when there is a thing or a person in about 50cm ~ 3m in general.

무선 RF 센서(134)는 정확도를 높이기 위해서 PIR 센서(135), 거리센서(133)를 보완하는 것으로 전방의 물체를 1~5m 내에서 유/무를 판별할 수 있는 것으로, 날씨, 기온, 습도 등의 영향을 받지 않는 가장 확실한 방법이다.The wireless RF sensor 134 can compensate for the PIR sensor 135 and the distance sensor 133 in order to improve the accuracy. The wireless RF sensor 134 can determine the presence or absence of the object within 1 to 5 meters from the front, It is the most reliable method that is not affected by.

PIR 센서(135)는 열감지 센서로 사람이나 동물이 접근할 때에 감지한다.The PIR sensor 135 senses when a person or an animal approaches the heat sensor.

조도센서(136)는 빛의 밝기에 대해서 반응하여 어두워질 때에 적절 수준에 맞추어서 IR LED를 켜서 적외선용 영상센서(132)를 통한 영상촬영이 이루어질 수 있도록 한다.The illuminance sensor 136 responds to the brightness of the light, and when it becomes dark, the IR LED is turned on according to an appropriate level so that the image capturing through the infrared image sensor 132 can be performed.

GPS 센서(137)는 야외, 외진 곳, 이동형으로 설치할 때에 부착하여 현 주차인식장치가 어디에 있는지, 거기에 주차하는 차의 위치를 알 수 있게 한다.The GPS sensor 137 is attached when installed outdoors, in a remote place, or in a mobile manner, so as to know where the current parking recognizing device is located and the position of the car to park there.

임시 행사용 주차장, 도로통제장치, 건설현장, 공원, 야외 적재장 등의 주차, 차량 통행제어 장치 등에 위치 알림을 위하여 활용할 수 있다.It can be used for location notification in parking of temporary event, parking of road control device, construction site, park, outdoor loading place, and vehicle traffic control device.

가속도 센서(138)는 설치된 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)를 어떤 사람이 일부러 훼손하거나 다른 물리적인 이유로 훼손되어 진동이 발생하였을 때 이를 알려준다.The acceleration sensor 138 informs the user of the object Internet parking detection apparatus 100 using the installed video composite sensor when a person deliberately destroys it or is damaged due to another physical reason and the vibration occurs.

백색 LED 조명(139)는 낮 시간에 촬영을 할 때 점등하여 영상 촬영이 이루어질 때 촬영된 영상의 화질을 높여주며, 적외선 LED 조명(140)은 어두워질 시간에 조도센서(136)를 통한 조도 감도에 맞추어서 점등하여 야간 촬영 시에 적절한 영상 촬영이 이루어질 수 있도록 한다.The white LED illumination light 139 illuminates when shooting in the daytime to enhance the image quality of a photographed image when the image shooting is performed. The infrared LED illumination 140 illuminates the illumination sensitivity through the illumination sensor 136 So that appropriate image shooting can be performed at the time of night shooting.

따라서 주/야간 촬영할 수 있는 영상센서와 조명장치가 장착되어서 야간에 주차 관련된 확인이 가능하다.Therefore, it is possible to check parking related at night by equipped with image sensor and lighting device which can shoot day / night.

스피커(141)는 주차를 희망하는 운전자 등 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)의 주변에 있는 사람들에게 관리자(중앙통제실, 관리자 소유의 스마트폰)가 안내 방송, 경고 방송 등을 할 수 있도록 한다.The speaker 141 is configured to allow a manager (a central control room, a smart phone owned by a manager) to announce and broadcast a warning to people in the vicinity of the object internet parking recognizing apparatus 100 using a video composite sensor such as a driver who wants to park .

마이크(142)는 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)를 이용하는 운전자 또는 주변 사람들이 적절한 이유로 관리자(중앙통제실, 해당 스마트폰)에 현장의 상황 등 연락하고자 할 때 사용할 수 있다.The microphone 142 can be used by a driver or surrounding people who use the object Internet parking recognition apparatus 100 using the video composite sensor to communicate with a manager (central control room, corresponding smartphone) on the spot for appropriate reasons.

아울러, 센서구동부(130)는 상기 각종 센서, 구동 기능, 영상 촬영 등을 제어하고, 연동하고, 외부 통신을 제어하고, 기록하게 하는 제1CPU(143)가 구비되고, 관련 데이터가 저장되는 제1메모리(144)가 구비된다.In addition, the sensor driving unit 130 is provided with a first CPU 143 that controls the various sensors, the driving function, and the image capturing, and interlocks them, controls the external communication, and records the data. A memory 144 is provided.

영상처리 연산부(150)는 별도 PCB 상에서 구현되는데, 주로 복잡한 영상신호처리, 음성신호처리, IoT Security 등의 계산, 연산을 하는 제2CPU(151)와 필요한 제2메모리(152), 촬영된 영상을 처리하는 영상처리부(153)와 필요한 영상메모리(154), 외부와 무선으로 통신하는 Wi-Fi, 3G, LTE 등의 무선통신부(173) 및 주요 센서 값, 영상을 저장하는 SD 메모리(155)를 포함하여 구비된다.The image processing operation unit 150 is implemented on a separate PCB. The image processing operation unit 150 mainly includes a second CPU 151 for performing calculation and calculation of complex video signal processing, voice signal processing, IoT Security, etc. and a second memory 152, A wireless communication unit 173 such as Wi-Fi, 3G, and LTE that wirelessly communicates with the outside, and an SD memory 155 that stores main sensor values and images. .

상기 제2CPU(151)는 주로 IoT에 쓰이는 주요 알고리즘을 연산하는 데 쓰인다.The second CPU 151 is mainly used to calculate a main algorithm used in IoT.

특히 사람 유무인식, 얼굴인식, 말하는 사람의 말 인식, 보안관련 알고리즘 등의 연산을 한다.In particular, it performs operations such as presence / absence recognition, face recognition, speaker's speech recognition, and security-related algorithms.

제2CPU(151)는 차량인식 알고리즘을 장착하여 차량 접근 유/무를 10~20m 정도에서도 알 수 있도록 한다.The second CPU 151 is equipped with a vehicle recognition algorithm so that vehicle accessibility can be recognized even at about 10 to 20 meters.

영상처리부(153)는 JPEG 입력 압축 기능과 QVGA, VGA, 1M, 2M, 5M pixel 영상 크기를 조절하는 기능을 가지고 있다. The image processing unit 153 has a function of controlling the JPEG input compression function and the image size of QVGA, VGA, 1M, 2M, and 5M pixels.

또한 영상 움직임을 하드웨어(hardware)적으로 감지하는 기능을 가지고 있어서 PIR 센서(135), 거리센서(133), 무선 RF 센서(134) 등과 움직임 감지를 상호 보완한다.Also, it has a function of detecting the motion of the hardware in a hardware manner, thereby complementing the motion detection with the PIR sensor 135, the distance sensor 133, the wireless RF sensor 134, and the like.

SD 메모리(155)는 32GB ~ 124GB의 크기를 가지고 대체로 1주일 ~ 한달 정도의 동작 상황을 기록하여 저장하며, 사람 및 차량 인식장치로는 32-bit CPU 및 메모리가 구비된 컴퓨터 모듈을 사용한다.The SD memory 155 has a size of 32 GB to 124 GB and stores and records the operation status for about one week to one month. A computer module having a 32-bit CPU and a memory is used as a person and vehicle recognition device.

센싱 구동부(130)와 영상처리 연산부(150)는 제어 신호, 데이터 송/수신, 클록(clock)선 등을 연결하는 케이블로 연결되어 있다.The sensing driver 130 and the image processing calculator 150 are connected by a cable connecting control signals, data transmission / reception, and clock lines.

후면판(170)에는 외부 신호를 연결하는 외부 신호 구동연결구(171), 유선통신을 위한 유선 통신(Ethernet) 연결구(172)를 포함하여 구성되어 있다.The back panel 170 includes an external signal driving connector 171 for connecting an external signal and a wired communication (Ethernet) connector 172 for wired communication.

외부 신호 구동연결구(171)는 GPIO, UART, USB, 5V 전원 연결구를 가지고 있어서, 지자기 센서(174) 같은 센서, 모터 구동, 스위치 on-off, 요금 지불기 같은 외부 연동장치와 접속하여 사용할 수 있게 하며, 5V 전압 전원을 공급하는 단자가 있어서 지자기 센서(174) 같이 별도 전압이 필요할 때에 편리하게 전원공급을 제공할 수 있다.The external signal drive connector 171 has a GPIO, UART, USB, and 5V power connector so that it can be connected to an external interlock device such as a geomagnetic sensor 174, a motor drive, a switch on-off, And a terminal for supplying a 5 V voltage power can be conveniently provided when a separate voltage such as the geomagnetic sensor 174 is required.

지자기 센서(174)는 별도의 독자형 패키지(5ㅧ6cm 정도 크기)로 되고, 크기도 커서 별도로 후면판(170)의 외부 신호 구동연결구(171)의 GPIO 단자에 연결하여 동작하게 한다.The geomagnetic sensor 174 is a separate reader-type package (about 5 cm to 6 cm in size) and is separately connected to the GPIO terminal of the external signal driving connector 171 of the rear plate 170 to operate.

본 발명에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)는 유/무선(Ethernet, Wi-Fi) 통신 등 실내에서 가능한 통신망이 구비되며, 일반적인 Wi-Fi 통신이 되지 않는 실외, 원격지 또는 이동형 주차인식 장치를 쓸 때 등 필요한 경우 3G/LTE(이동형, 임시 교통통제 등) 방식의 이동통신망으로 통신이 수행될 수 있어 IoT 기능을 확보할 수 있다.The object Internet parking recognizing apparatus 100 using the video composite sensor according to the present invention is provided with a communication network that can be used indoors such as Ethernet and Wi-Fi communication, In case of using a portable parking recognizing device, communication can be performed by 3G / LTE (mobile type, temporary traffic control, etc.) mobile communication network, thereby securing the IoT function.

또한 필요한 경우에는 기계를 구동하는 구동부, 경광등, 사이렌을 구비하여, 구동에 따른 기계를 구동하는 신호, 경광등 및 사이렌 구동에 따른 신호를 내보낸다.If necessary, a driving unit for driving the machine, a warning light, and a siren are provided, and a signal for driving the machine, a warning light, and a signal for driving the siren are outputted.

구동 기능으로써 차단바를 올리고 내리는 기계적인 구동 기능이 제공될 수 있으며, 사이렌, 경광등으로 이상 상태가 발생 시 이를 시각적으로 알린다.The drive function can be provided with a mechanical drive function that raises and lowers the shut-off bar, and a siren or a warning light visually announces an abnormal condition.

상기 본 발명에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)는 IoT 기능으로써, 도 4에 나타낸 바와 같이, Ethernet, Wi-Fi, 3G/LTE를 이용한 인터넷을 통하여 Server Systems, 관리제어용 PC 및 Smart phone 등으로 연결할 수 있다.The object Internet parking recognizing apparatus 100 using the video composite sensor according to the present invention is an IoT function. As shown in FIG. 4, the object Internet parking recognizing apparatus 100 includes a server system, a management control PC And Smart phone.

따라서 원격에 위치한 관리자는 관리제어용 PC 또는 smart phone 으로 주차장 주변, 차량의 입/출입, 제한된 거리 통행 등을 모니터하고 관리할 수 있다.Therefore, a remote administrator can monitor and manage the vicinity of the parking lot, the entrance / exit of the vehicle, and the limited distance traveled by the management control PC or the smart phone.

상기 본 발명에 따른 영상복합 센서를 이용한 사물인터넷 주차인식 장치(100)의 응용 예시로써 도 5에 나타낸 바와 같이, 이동형 또는 임시용 차량 신호대에 주차인식 장치를 부착하여 사용하는 것으로, 태양전지로부터 전원을 공급받아 구동할 수 있으며, 이는 도로, 공사장, 임시출입구, 행사장 등에 설치될 수 있다.As shown in FIG. 5, an application example of the object type Internet parking recognition apparatus 100 using the video composite sensor according to the present invention is to use a parking recognition device attached to a mobile or temporary vehicle signal, And can be installed on roads, construction sites, temporary entrances, event sites, and the like.

주로 주차장 출입구, 주차장 현장, 길거리 주차장, 거주자 우선 주차구역, 이동형 주차장, 이동형 임시 차량 신호대, 행사장 출입통제 시스템(미리 허가한 차량만 통과) 등 다양한 주차장에 설치되어, 주차용도, 차량통제, 주차번호 인식 등으로 사용할 수 있다.It is mainly installed in various parking lots such as parking lot entrance, parking lot, street parking, resident priority parking area, mobile parking lot, mobile type temporary vehicle signal area, event site access control system Recognition, and so on.

아울러 일체형으로 기둥에 부착하여 주차출입 통제 시스템에 사용할 때, 요금지불장치와 연동하여 구동할 수 있으며, 이때, 하나의 기둥에서 반대 쪽면에 주차인식 장치를 서로 대향되게 설치하여 사용함으로써, 하나의 기둥으로 일측과 타측의 양측을 관리할 수 있다.In addition, when the vehicle is attached to a pillar and used as a parking access control system, it can be driven in conjunction with the fare payment device. At this time, the parking recognition device is installed on the opposite side of the pillar on the opposite side, So that both sides of one side and the other side can be managed.

건물 벽면에 부착하여 사용하는 것으로, 실내 주차장, 건물 앞 주차관리 시스템, 주택, 빌딩 내부의 주차장에 설치될 수 있다.It can be installed in an indoor parking lot, a parking management system in front of a building, a car park in a house, or a building by being attached to a wall of a building.

그리고 후면에 외부 신호 구동연결구(171)를 통하여 현재 내장된 센서/구동기능을 확장할 수 있다.And the sensor / driving function currently built in can be extended through the external signal driving connector 171 on the rear side.

상술한 바와 같이 구성된 본 발명에 따른 주차인식 장치를 활용하면 스마트폰 APP으로 자신 차의 현재 모습과 주차위치를 APP이나 주차관리 키오스크에서 영상으로 바로 확인할 수 있으며, 사람이나 차량을 구분하는 영상센서, 움직임 센서, 지자기 센서를 장착하여 현장의 요구에 따른 차량 알림, 현지/원격 경광등, 사이렌, 관리자 APP 등으로 대응조치를 할 수 있다.With the parking recognition device according to the present invention configured as described above, the current state of the car and the parking position can be directly confirmed from the APP or the parking management kiosk with the smartphone APP, and an image sensor, Motion sensor and geomagnetic sensor can be installed to respond to the needs of the field by vehicle notification, local / remote warning light, siren, manager APP, etc.

2개의 CPU 처리기가 있어서 당면한 여러 가지 센서 및 구동 제어기능을 첫 번째 CPU가 하고, 현장에서 바로 처리가 필요한 IoT 알고리즘(영상, 음성 등)은 두 번째 처리하는 구조이다.IoT algorithm (video, audio, etc.) is the second processing structure, which has two CPU processors and has various sensor and drive control functions in the first CPU and processing in the field.

주 통신은 Ethernet, WiFi, 3G/LTE인데, 대체로 실내나 WiFi 제한된 구역에서는 WiFi, Ethernet 통신을 한다. Main communication is Ethernet, WiFi, 3G / LTE. WiFi and Ethernet communication are usually performed in indoor or WiFi restricted areas.

즉, WiFi가 없는 길거리, 공원, 운동장, 건설장, 국립공원 등 외진 곳에서는 일반 이동통신망(3G/LTE망)을 이용한다.In other words, it uses the general mobile communication network (3G / LTE network) in the outside places such as streets without WiFi, parks, playgrounds, construction sites, and national parks.

상기 주차인식 장치를 빌딩용 자동주차장 관리기나 길거리 주차장, 공원, 공공 주차장 등에서 사정에 따라서 벽거치형, 기둥형의 시설에 현재 사용하는 각종 현금지급기(실제 현금, 모바일결제)와 연동되게 해당 통신방법에 대한 접속기능이나 스마트폰 APP을 제공할 수 있다.The above-mentioned parking recognizing device can be connected to various communication devices such as an automatic parking lot manager for a building, a street parking lot, a park, a public parking lot, etc. in conjunction with various ATMs (actual cash, mobile payment) currently used in a wall- It can provide connection function or smartphone APP.

아울러, 전기가 들어오지 않는 외진 곳, 길거리 공사장, 원격지 산림, 행사장 등의 주차 및 차량통제 장치, 이동형 신호장치 등에 쓸 수 있게 태양전지, 풍력전지 등을 장착한다면 독립형 차량 진출입 및 주차시스템에 이용 가능하다.In addition, it can be used for stand-alone vehicle entry and parking system if it is equipped with solar battery, wind power battery, etc. to be used for parking, vehicle control device, mobile signal device, etc. of outside location, street construction site, remote forest, .

참고로, 2개의 CPU 처리기가 구비된 사물 인터넷용 시스템 온 칩 이중 프로세서 구조는 8비트 마이크로 컨트롤러부, 8비트 고속 데이터 버스부 및 32비트 마이크로 프로세서부를 포함하여 크게 3부분으로 나눌 수 있는데, 우선 8비트 마이크로 컨트롤러부는 8비트 마이크로 컨트롤러 유닛과 8비트 저속 데이터 버스, 그리고 여러 다양한 내부 기능 블럭들로 구성되어 있으며 낮은 데이터 처리 및 사물 인터넷용 시스템 온 칩의 전체 동작을 제어한다.For reference, a system-on-chip dual processor architecture for the Internet with two CPU processors includes an 8-bit microcontroller, an 8-bit high-speed data bus, and a 32-bit microprocessor. The bit microcontroller unit consists of an 8-bit microcontroller unit, an 8-bit low-speed data bus, and various internal function blocks to control the overall operation of the system-on-a-chip for low data processing and object internet.

8비트 고속 데이터 버스부는 8비트 고속 데이터 버스와 영상 인코더부를 포함한 다양한 내부 기능 블럭들로 구성되어 있으며 8비트의 고속 데이터 처리 및 영상 데이터 압축, 외부 통신 모듈과의 고속 인터페이스를 수행한다.The 8-bit high-speed data bus is composed of various internal functional blocks including an 8-bit high-speed data bus and a video encoder, and performs 8-bit high-speed data processing, image data compression and high-speed interface with an external communication module.

8비트 고속 데이터 버스는 영상 데이터와 음성 데이터를 외부 통신모듈과 고속으로 송/수신하는 것에 적합하고, 8비트 저속 데이터 버스는 센서 데이터와 8비트 마이크로 컨트롤러에서 출력되는 명령을 외부 통신모듈이나 센서에 저속으로 송/수신하는 것에 적합하다.The 8-bit high-speed data bus is suitable for transmitting / receiving image data and voice data at high speed with the external communication module. The 8-bit low-speed data bus is used to transmit the sensor data and commands output from the 8- It is suitable for transmitting / receiving at low speed.

32비트 마이크로 프로세서부는 32비트 마이크로 프로세서와 대용량 외부 메모리 인터페이스, 32비트 고속 데이터 버스와 32비트 저속 데이터 버스로 구성되어 있으며 복잡한 알고리즘 동작을 수행하고 고속 데이터 송/수신을 수행한다.The 32-bit microprocessor consists of a 32-bit microprocessor, a large-capacity external memory interface, a 32-bit high-speed data bus, and a 32-bit low-speed data bus. The 32-bit microprocessor performs complex algorithm operations and performs high-speed data transmission and reception.

8비트 마이크로 컨트롤러부와 8비트 고속 데이터 버스부 사이에는 서로 다른 동작 주파수를 가진 신호를 처리하기 위한 동기화 작업을 수행하는 제1브릿지부가 구비되고, 8비트 고속 데이터 버스부와 32비트 마이크로 프로세서부 사이에는 서로 다른 동작 주파수를 가진 신호를 처리하기 위한 동기화 작업을 수행하는 제2브릿지부가 구비된다.A first bridge unit for performing a synchronization operation for processing signals having different operating frequencies is provided between the 8-bit microcontroller unit and the 8-bit high-speed data bus unit, A second bridge unit for performing a synchronization operation for processing signals having different operating frequencies is provided.

32비트 마이크로 프로세서부의 32비트 마이크로 프로세서와 8비트 마이크로 컨트롤러부의 8비트 마이크로 컨트롤러 유닛 사이에는 간단한 명령을 저장하여 각각의 CPU의 명령을 송/수신해주는 역할을 수행하는 Mail Box부가 구비된다.Between the 32-bit microprocessor of the 32-bit microprocessor unit and the 8-bit microcontroller unit of the 8-bit microcontroller unit, there is provided a Mail Box unit which stores simple commands and transmits / receives commands of respective CPUs.

8비트 고속 데이터 버스부와 32비트 마이크로 프로세서부 사이에는 프로그래밍 부팅을 위한 부트로더부가 구비되고, 8비트 마이크로 컨트롤러부와 8비트 고속 데이터 버스부 사이에는 8비트 마이크로 컨트롤러용 데이터 메모리부가 구비된다.A boot loader portion for programming boot is provided between the 8-bit high-speed data bus portion and the 32-bit microprocessor portion, and an 8-bit microcontroller data memory portion is provided between the 8-bit microcontroller portion and the 8-bit high speed data bus portion.

상기 데이터 메모리부는 8비트 마이크로 컨트롤러용 32KByte 저장 용량의 데이터 메모리로써, 듀얼 포트(Dual port)이므로 8비트 마이크로 컨트롤러뿐만 아니라 메모리 접근부(DMA)에서도 접근(access)할 수 있다.The data memory unit is a data memory having a storage capacity of 32 Kbytes for an 8-bit microcontroller, and is a dual port. Therefore, the data memory unit can access not only an 8-bit microcontroller but also a memory access unit (DMA).

8비트 마이크로 컨트롤러부는 사물 인터넷용 시스템 온 칩에 적합한 듀얼 CPU의 전체 동작을 제어하는 역할을 수행하며 8비트 처리용량의 8비트 마이크로 컨트롤러 유닛과 8비트 저속 데이터 버스와 내부 기능 블럭들로 구성되어 있다.The 8-bit microcontroller is responsible for controlling the overall operation of dual CPUs suitable for system-on-a-chip for the Internet, and consists of an 8-bit microcontroller unit with 8-bit processing capacity and an 8-bit low-speed data bus and internal functional blocks .

상기 8비트 마이크로 컨트롤러 유닛은 8비트 마이크로 컨트롤러부와 8비트 고속 데이터 버스부의 모든 기능 블럭들을 직접 제어할 수 있다.The 8-bit microcontroller unit can directly control all functional blocks of the 8-bit microcontroller and the 8-bit high-speed data bus.

8비트 마이크로 컨트롤러부의 8비트 마이크로 컨트롤러 유닛은 8비트 처리용량의 마이크로 컨트롤러 유닛(MCU)으로써, Intel Standard 8051에 호환된다.The 8-bit microcontroller unit of the 8-bit microcontroller is an 8-bit processing microcontroller unit (MCU) and is Intel Standard 8051 compliant.

8비트 마이크로 컨트롤러 유닛부의 클럭 주파수는 7.384MHz이다.The clock frequency of the 8-bit microcontroller unit is 7.384 MHz.

8비트 마이크로 컨트롤러부의 8비트 저속 데이터 버스에 연결된 내부 기능 블럭으로는 임의의 타이밍을 만들어 이벤트를 만들어주거나 발생된 이벤트를 계수하는 기능을 수행하는 2개의 타이머부(Timer), 입력 신호의 Level 변화에 따라 Pulse의 Width에 변화를 주는 2개의 펄스폭 변조부(PWM), 8비트 마이크로 컨트롤러 유닛이 오작동을 하여 무한 루틴에 빠지는 것을 방지하는 것으로 정해진 시간에 스위치 reset을 하게 해주는 와치독 타이머부(WDT), RS-232 통신을 위한 것으로 최고 230400bps의 baud rate를 지원하는 2개의 UART부(UART), I2C 통신을 위한 I2C부(I2C), 최대 16개의 interrupt 중 하나를 muxing 처리하여 8비트 마이크로 컨트롤러 유닛이 갖고 있는 2개의 외부 인터럽트 중 어느 하나의 인터럽트를 사용할 수 있게 하는 기능을 수행하는 외부 인터럽트부(INTC), UART부 또는 직렬연결버스(SPI)와 같이 serial 통신을 위한 직렬 컴퓨터 버스 및 추가로 32비트를 사용할 수 있도록 지원하는 일반 입/출력부를 포함하여 구성될 수 있다.The internal function block connected to the 8-bit low-speed data bus of the 8-bit microcontroller includes two timer units (Timer) for generating an arbitrary timing and counting generated events, There are two pulse width modulators (PWM) that change the width of the pulse, a watchdog timer unit (WDT) that prevents the 8 bit microcontroller unit from malfunctioning and goes into an infinite routine, , 2 UARTs (UART) for RS-232 communication with maximum baud rate of 230400 bps, I2C part for I2C communication (I2C), 8 bit microcontroller unit by muxing one of up to 16 interrupts An external interrupt unit (INTC), a UART unit, or the like which performs a function of making use of any one of two external interrupts A serial computer bus and further for serial communication, such as a column bus connection (SPI) can be configured to include a general input / output, which supports the use of 32 bits.

8비트 고속 데이터 버스부는 8비트 마이크로 컨트롤부의 8비트 저속 데이터 버스에 비해 클럭 주파수가 높은 고속의 데이터 처리속도로 외부 주변장치들을 제어하고 영상 데이터를 처리되도록 하는 8비트 고속 데이터 버스와 내부 기능 블럭들로 구성되어 있다.The 8-bit high-speed data bus section has an 8-bit high-speed data bus for controlling external peripheral devices and processing image data at a high data processing speed with a high clock frequency as compared with the 8-bit low-speed data bus of the 8- .

8비트 고속 데이터 버스에 연결된 내부 기능 블럭으로는, 상대적으로 클럭 주파수가 낮아 저속인 8비트 마이크로 컨트롤러 유닛의 제어 없이 직접 메모리 접근 동작을 수행하여 8비트 마이크로 컨트롤러 유닛의 데이터 메모리부에 접근하고 8비트 고속 데이터 버스에 연결된 외부 주변장치들을 제어하는 메모리접근부(DMA), 8비트 고속 데이터 버스에서 데이터 충돌이 생기는 것을 방지하는 우선중재부(Senbus Arbiter), 메모리접근부(DMA)를 통해 제어되는 메모리중재부(SMC), 8비트 고속 데이터 버스에 연결된 내부 기능 블럭들의 제어를 위한 레지스터 블럭(Sen_reg), 고속 대용량의 영상 데이터를 고속으로 전송할 수 있는 시큐어 디지털 입/출력부(SDIO), 대용량의 데이터를 고속으로 전송할 수 있는 직렬 연결 버스부(SPI), 8비트 고속 데이터 버스에 연결되어 사물 인터넷에서 데이터 및 영상 보안 기능으로 소스 수준에서 센서 데이터와 영상데이터를 암호화/복호화 처리를 하여 사물인터넷에 특화된 보안 기능을 지원하는 경량암호알고리즘부(LEA), 움직임 감지부(Motion Detection)에 의해 외부 영상센서(CIS)로부터 입력되는 영상 데이터의 영상처리 효율을 향상시키고자 QVGA 해상도부터 VGA(0.3P), SXGA(1MP), UXGA(2MP), QSXGA(5MP)로 최대 5백만 화소의 해상도까지 영상압축을 지원하고 외부 영상센서(CIS)로부터 입력된 영상데이터의 해상도를 조절하여 효과적으로 움직임 감지가 수행되도록 하는 스케일러부(Scaler), 외부 영상센서(CIS)로부터 입력되는 영상 데이터의 노이즈 성분을 최적화여 영상 인코더부(JPENC)에서 출력되는 영상 데이터의 크기가 줄어지도록 하는 노이즈감소부(Noise Reduction), 외부 영상센터(CIS)로부터 입력된 영상 데이터에 대해 이전 프레임과 현재 프레임과의 차이를 8비트 데이터 값으로 출력하여 영상 데이터 내 변화되는 데이터를 감지함으로써 움직임을 검출하는 움직임 감지부(Motion Detection), 외부 영상 센서로부터 입력된 영상 데이터를 압축하는 영상 인코더부(JPENC), 외부 오디오 코덱부로부터 입력된 오디오 데이터가 상기 메모리접근부(DMA)의 제어에 의해 외부 주변장치들에 전달되도록 하거나, 또는 외부 주변장치들로부터 전달된 오디오 데이터가 상기 메모리접근부(DMA)의 제어에 의해 외부 오디오코덱부로 전달되도록 하는 오디오처리부(ADPCM)를 포함하여 구성된다.The internal functional blocks connected to the 8-bit high-speed data bus include a direct memory access operation without the control of a low-speed 8-bit microcontroller unit due to the relatively low clock frequency to access the data memory of the 8-bit microcontroller unit, A memory access unit (DMA) for controlling external peripheral devices connected to the high-speed data bus, a Senbus Arbiter for preventing data collision on the 8-bit high-speed data bus, a memory controlled by a memory access unit (DMA) A register block (Sen_reg) for controlling internal function blocks connected to the 8-bit high-speed data bus, a secure digital input / output section (SDIO) for transferring high-speed large-capacity image data at a high speed, (SPI), which can be connected to an 8-bit high-speed data bus, The Lightweight Cryptographic Algorithm (LEA), which encrypts / decrypts sensor data and image data at the source level with the data and image security functions in the Internet to support security functions specific to the Internet, In order to improve the image processing efficiency of image data input from the image sensor (CIS), video from QVGA resolution to VGA (0.3P), SXGA (1MP), UXGA (2MP), QSXGA A scaler that supports compression and adjusts the resolution of image data input from an external image sensor CIS so as to perform motion detection effectively, and a noise component of image data input from an external image sensor (CIS) A noise reduction unit for reducing the size of the image data output from the image encoder unit JPENC, a noise reduction unit for reducing the size of the image input from the external image center CIS, A motion detection unit (Motion Detection) for detecting a motion by outputting a difference between a previous frame and a current frame as an 8-bit data value to detect data in the image data, (EN), audio data input from an external audio codec unit is transferred to external peripheral devices under the control of the memory access unit (DMA), or audio data transferred from external peripheral devices And an audio processor (ADPCM) for transferring the audio signal to an external audio codec unit under the control of a memory access unit (DMA).

8비트 고속 데이터 버스의 클럭 주파수는 96MHz인데, 영상 인코더부에서 외부의 영상센서(CIS)로부터 입력된 영상 데이터를 압축하는데 필요한 인코딩 클럭 주파수는 48MHz ~ 96Mhz로 별도로 구분하여 사용함으로써, 여러 영상 센서(CIS)의 종류에 따른 클럭 주파수의 변경에 대응할 수 있도록 한다.The clock frequency of the 8-bit high-speed data bus is 96 MHz. The encoding clock frequency required for compressing the image data input from the external image sensor (CIS) in the image encoder section is separately classified into 48 MHz to 96 MHz, CIS) according to the kind of the clock frequency.

8비트 마이크로 컨트롤러 유닛이 8비트 고속 데이터 버스(SENbus)를 이용하려면 제1브릿지부와 우선중재부(Senbus Arbiter)를 통해 interface를 해야 하며 2개의 메모리접근부(DMA)를 통해 대용량의 8비트 데이터를 고속으로 송/수신할 수 있다.In order to use the 8-bit high-speed data bus (SENbus), the 8-bit microcontroller unit must interface through the first bridge unit and the Senbus Arbiter, and through the two memory access units (DMA) Can be transmitted / received at high speed.

상기 2개의 메모리접근부(DMA) 중 하나는 영상 인코딩되고 암호화된 영상 데이터의 고속 데이터 전송을 담당한다.One of the two memory access units (DMAs) is responsible for high-speed data transfer of image-encoded and encrypted image data.

8비트 고속 데이터 버스부의 우선중재부(Senbus Arbiter)는 고속 데이터 버스(310; SENbus) 내에서 우선 순위에 따라 명령을 처리하여 데이터 충돌을 방지하는 것으로, 8비트 마이크로 컨트롤러 유닛과 메모리접근부(DMA) 중 8비트 마이크로 컨트롤러 유닛으로부터 입력된 명령을 더 높은 우선 순위로 처리할 수 있다.The Senbus Arbiter of the 8-bit high-speed data bus unit processes instructions in a priority order in the high-speed data bus 310 (SENbus) to prevent data collision. The 8-bit microcontroller unit and the memory access unit ) Can process a command input from an 8-bit microcontroller unit at a higher priority.

8비트 고속 데이터 버스부의 영상 인코더부(JPENC)는 외부 영상센서(CIS)로부터 입력되는 데이터를 JPG type의 영상 데이터로 인코딩하며, JPEG 표준에 호환된다.The image encoder unit (JPENC) of the 8-bit high-speed data bus unit encodes data input from an external image sensor (CIS) into image data of JPG type, and is compatible with the JPEG standard.

경량암호알고리즘부(LEA)는 수신 측에서 해당하는 암호키를 가지고 복호화 해서 원래 값을 재현시킨다.The lightweight encryption algorithm unit (LEA) decrypts the encryption key with the corresponding encryption key on the receiving side and reproduces the original value.

8비트 고속 데이터 버스부에서의 영상처리는 외부의 영상 센서로부터 입력된 영상 데이터를 압축한 후, 메모리접근부의 제어에 의해 압축된 영상 데이터가 외부 주변장치들에 전달되도록 하는 것으로, 외부의 영상 센서로부터 입력된 영상 데이터는 영상 인코더부에서 압축되어 영상메모리(256Byte buffer)에 저장된 후, 메모리중재부를 거쳐서 고속 데이터 버스(SENbus)를 통해 외부메모리에 저장될 수 있다.The image processing in the 8-bit high-speed data bus unit compresses the image data inputted from the external image sensor, and then the compressed image data is transferred to the external peripheral devices under the control of the memory access unit. The image data input from the image encoder unit may be compressed and stored in an image memory (256 byte buffer), and then stored in an external memory through a high-speed data bus (SENbus) through a memory arbitration unit.

32비트 마이크로 프로세서부는 32비트 처리 용량의 32비트 마이크로 프로세서와 2개의 데이터 버스, 내부 기능 블럭과 32비트 대용량 메모리 인터페이스부로 구성되어 있는데, 32비트 고속 데이터 송/수신을 수행하고, 32비트 마이크로 프로세서를 이용하여 영상 인식 알고리즘 동작과 같은 복잡한 연산처리를 수행하며, 압축되지 않은 영상 데이터를 외부 대용량 메모리(DDR2)에 저장하는 동작을 수행한다.The 32-bit microprocessor consists of a 32-bit microprocessor with 32-bit processing capability, two data buses, an internal functional block and a 32-bit large memory interface to perform 32-bit high-speed data transmission and reception, And performs operations such as the operation of the image recognition algorithm and the operation of storing the uncompressed image data in the external large capacity memory (DDR2).

32비트 마이크로 프로세서부는 32비트 고속 데이터 버스를 backbone 버스로 사용하여 32비트 마이크로 프로세서와 DMA 등이 연결되어 있고, 주변 장치 데이터 전송을 위해 32비트 저속 데이터 버스에는 내부 기능 블럭이 연결되어 있다.The 32-bit microprocessor uses a 32-bit high-speed data bus as a backbone bus, and a 32-bit microprocessor and DMA are connected. An internal function block is connected to the 32-bit low-speed data bus for peripheral device data transfer.

32비트 마이크로 프로세서의 클럭 주파수는 33Mhz이다.The 32-bit microprocessor has a clock frequency of 33 MHz.

32비트 고속 데이터 버스는 32비트 대용량 메모리 인터페이스부가 한 번에 많은 양의 데이터를 전송하는 버스트 모드의 데이터 전송을 지원하도록 하고, 외부 영상센서(CIS)로부터 입력된 압축되지 않은 영상 데이터를 32비트 대용량 메모리 인터페이스부로 전송하는 AHB 용 메모리접근부(AHB_DMA)로 구성될 수 있다.The 32-bit high-speed data bus enables the 32-bit large memory interface to support burst mode data transfer, which transfers a large amount of data at a time, and the uncompressed image data input from the external image sensor (CIS) And an AHB memory access unit (AHB_DMA) for transferring the data to the memory interface unit.

즉, 32비트 고속 데이터 버스는 32비트 고속 데이터 송수신을 수행하고, 32비트 마이크로 프로세서를 이용하여 영상 인식 알고리즘 동작과 같은 복잡하고 빠른 연산처리 가능하게 하며, 고속 DRAM DDR2를 제어하여서 쓰기/읽기 작업에 의한 빠른 영상처리를 가능하게 한다.That is, the 32-bit high-speed data bus performs 32-bit high-speed data transmission and reception, enables a complicated and fast operation process such as the operation of image recognition algorithm using a 32-bit microprocessor, and controls high speed DRAM DDR2 for writing / Thereby enabling fast image processing.

32비트 저속 데이터 버스는 low bandwidth인 주변 장치와 인터페이스를 위한 내부 기능 블럭을 제어하는데 적합하게 사용될 수 있다.The 32-bit low-speed data bus can be used to control internal function blocks for interfacing with peripheral devices of low bandwidth.

32비트 저속 데이터 버스는 pipelined 버스 인터페이스의 고성능이 필요하지 않고 low bandwidth인 주변 장치와 인터페이스를 위한 내부 기능 블럭들을 위해 사용되며, 임의의 타이밍을 만들어 이벤트를 만들어주거나 발생된 이벤트를 계수하는 기능을 수행하는 타이머부(TIMER), RS-232 통신을 위한 UART부(UART), 영상 인코더부를 제어하는 영상 제어부를 포함하여 구성될 수 있다.The 32-bit low-speed data bus is used for internal function blocks for interfacing with peripherals that do not require the high performance of the pipelined bus interface and for low bandwidth. They create arbitrary timing and perform functions to count events A UART unit for RS-232 communication, and a video controller for controlling the video encoder unit.

32비트 마이크로 프로세서부는 32비트 고속 데이터 버스와 32비트 저속 데이터 버스로 버스를 분리하여, 소비 전력과 전송 속도에서 경제적이다.The 32-bit microprocessor divides the bus into a 32-bit high-speed data bus and a 32-bit low-speed data bus, which is economical at power consumption and transmission speed.

32비트 마이크로 프로세서부에서 IMG2DMA는 움직임 감지부(Motion Detection)로부터 오는 영상 데이터를 AHB용 메모리접근부(AHB_DMA)에 전달하기 위한 FIFO 블럭이다.In the 32-bit microprocessor, the IMG2DMA is a FIFO block for transferring image data coming from a motion detection unit to the AHB memory access unit (AHB_DMA).

sys_reg는 32비트 마이크로 프로세서로부터 명령어를 받아 전체 동작을 위한 시스템 레지스터를 저장한다.sys_reg receives instructions from the 32-bit microprocessor and stores system registers for the entire operation.

video_con은 영상인식 알고리즘을 처리하는 동작을 위한 제어 레지스터를 저장하고 있다.video_con stores a control register for an operation for processing an image recognition algorithm.

SYS_DMA는 32비트 저속 데이터 버스용 메모리접근부이며, 32비트 저속 데이터 버스에 연결된 기능 블럭들을 제어하고 데이터 송/수신동작을 수행한다.SYS_DMA is a memory access unit for a 32-bit low-speed data bus. It controls the function blocks connected to the 32-bit low-speed data bus and performs data transmission / reception operations.

표 1은 사물 인터넷용 시스템 온 칩 이중 프로세서 구조의 스펙 테이블로써, 32비트 마이크로 프로세서를 위한 AMBA(Adv anced Microcontroller Bus Architecture) 버스가 구비되고, 33Mhz 클럭 동작의 AHB bus는 DDR2 인터페이스 , 영상 인지 알고리즘 처리를 위한 대용량 데이터를 송/수신하며, 33Mhz 클럭 동작의 APB bus는 외부 타이머 , UART, GPIO 등을 연결한다.Table 1 shows the spec table of system-on-chip dual-processor architecture for the Internet. The AMBA (Advanced Microcontroller Bus Architecture) bus for 32-bit microprocessor is equipped with AHB bus with 33Mhz clock, DDR2 interface, , And the APB bus of 33Mhz clock operation connects external timer, UART, GPIO and so on.

AMBA 버스와 유사한 2개의 분리된 8비트 버스 구조를 가지며, 78MHz 클럭 동작의 고속 데이터 버스(SenBus)는 DMA controller, SPI 등을 연결한다.It has two separate 8-bit bus structures similar to the AMBA bus. A high-speed data bus (SenBus) with a clock speed of 78 MHz connects the DMA controller, SPI, and so on.

7.384MHz 클럭 동작의 MCU Bu s는 외부 타이머, UART, GPIO 등을 연결한다.The MCU of 7.384MHz clock operation Bu connects s external timer, UART, GPIO.

6개의 개별 PLL을 이용하여 6개의 클럭을 독립적으로 사용하며, 영상 데이터의 크기(resolution)가 향상되는데, 영상 데이터는 최대(Max) 2592 x 1944 resolutio n의 QSXGA(Quad Super Extended Graphics Array)부터 5M pixels까지의 영상을 처리한다.Six independent clocks are used independently of six individual PLLs to improve the resolution of the image data. The image data is converted from QSXGA (Quad Super Extended Graphics Array) with maximum 2592 x 1944 resolution to 5M pixels.

영상신호 처리 속도(frame rate)가 향상되는데, 최대(Max) 5fps @ QSXGA의 영상을 처리한다.The video signal processing rate (frame rate) is improved, and the maximum 5fps @ QSXGA image is processed.

32kB 용량의 데이터 메모 리 내장으로 동작 속도 및 소비전력 저감한 Dual-port RAM으로 8비트 마이크로 컨트롤러와 메모리접근부에서 모두 access 가능하다.Dual-port RAM with built-in 32kB data memory and reduced operating speed and power consumption. Access to both 8-bit microcontroller and memory access is possible.

최대 8Mb 용량의 외부 데이터 메모리를 확장하여 access 가능하고, 주변회로(pe ripheral)를 지원하는데, 내부 GPIO 16개, 외부 32비트 GPIO, 내부 INT 5개 (10개), 외부 16개 확장 INT, I2C, SPI 4개, I2S, SDIO, UART 3개, PWM 2개, WDT이 구비되고, 외부 SRAM 접속을 하는데, 4개(SMC, SRAM M emory Controller 이용)까지 가능하다.16 internal GPIOs, external 32-bit GPIOs, 5 internal INTs (10), external 16 expansion INTs, I2Cs , Four SPIs, I2S, SDIO, three UARTs, two PWMs, WDTs, and four external SRAM memories (using SMC and SRAM memory controllers).

상술한 바와 같이 사물 인터넷용 시스템 온 칩 이중 프로세서 구조에서, 사물 인터넷용 시스템 온 칩 이중 프로세서 구조에 적합한 듀얼 CPU 구조는 6개의 개별 PLL을 이용하여 5개의 클럭이 독립적으로 동작하게 함으로써 전력 소모를 줄일 수 있고, 4개의 개별 데이터 버스를 이용할 수 있으며 다양한 상황에 맞게 효율적으로 동작할 수 있다.As described above, in the system-on-chip dual processor architecture for the Internet, a dual CPU structure suitable for a system-on-chip dual processor architecture for the Internet uses five individual PLLs to operate independently, thereby reducing power consumption Four separate data buses are available, and can operate efficiently for a variety of situations.

그리고 사물 인터넷용 시스템 온 칩 이중 프로세서 구조에 적합한 듀얼 CPU구조에서 32비트 마이크로 프로세서부는 32비트 마이크로 프로세서를 기반으로 하여 AMBA 버스(AHB bus, APB bus) 및 다양한 IP를 추가할 수 있다.In a dual-CPU architecture suitable for system-on-chip dual processor architecture for Internet use, the 32-bit microprocessor is based on a 32-bit microprocessor and can add AMBA bus (AHB bus, APB bus) and various IPs.

32비트 마이크로 프로세서는 32비트 기반의 RISC타입 프로세서가 될 수 있으며, AMBA 버스 사용을 통해 고속 및 저전력으로 동작이 가능하고 디버깅을 위해 OCD(On Chip Debugger)를 함께 내장하여 프로세서 동작 시 내부 레스터에 대한 정보를 얻을 수 있다.The 32-bit microprocessor can be a 32-bit RISC type processor. It can operate at high speed and low power through the use of AMBA bus, and it also includes OCD (On Chip Debugger) for debugging. Information can be obtained.

또한, cache를 함께 내장하도록 설계하여, 빠른 처리 속도를 구현할 수 있으며, 다양한 인터페이스를 통해 다양한 저장 장치 사용과 여러 가지 형태의 입/출력 장치를 사용 가능하다.In addition, it is designed to embed cache together to realize fast processing speed, and it is possible to use various storage devices and various types of input / output devices through various interfaces.

그리고 PIC 모듈을 통해 효율적인 멀티태스킹 인터럽트 관리를 지원한다.It also supports efficient multitasking interrupt management through the PIC module.

인터럽트 지원은 멀티태스킹 구현을 위해 필수적인 것이다.Interrupt support is essential for multitasking implementations.

아울러, 사물 인터넷용 시스템 온 칩 이중 프로세서 구조에서 영상 감지 및 영상 인지 기능을 수행하는 과정으로써, 먼저, 외부 센서로부터 감지 신호 혹은 이벤트 신호가 발생하면, power down mode로 있던 8비트 마이크로 컨트롤러가 활성화된다.In addition, when a sensing signal or an event signal is generated from an external sensor, the 8-bit microcontroller in the power down mode is activated. .

이어서, 외부 영상 센서를 동작시키기 위한 셋팅 값을 I2C 모듈을 통해 보내어 이미지센서를 활성화하고, 영상 데이터를 입력받아 영상 인코더부를 통해 영상 데이터 압축, SMC 블럭을 통해 외부 SRAM에 저장한다.Then, the setting value for operating the external image sensor is sent through the I2C module to activate the image sensor, and the image data is received and stored in the external SRAM through the image data compression unit and the SMC block through the image encoder unit.

영상 인지 기능을 수행한다면, 우선 8비트 마이크로 컨트롤러가 Mail Box를 통해 32비트 마이크로 프로세서에게 영상인지 기능을 수행하라는 명령어를 전송하고, 32비트 마이크로 프로세서는 영상인지 알고리즘을 수행하기 위한 영상 데이터를 외부 영상센서(CIS)에서 IMG2DMA블럭을 통해 받아서 AHB_DMA를 사용하여 DDR2 controller를 거쳐서 DDR2에 저장시킨다.If an 8-bit microcontroller performs an image recognition function, the 8-bit microcontroller transmits an instruction to the 32-bit microprocessor through the Mail Box to perform the image recognition function. The 32-bit microprocessor transmits the image data for performing the image recognition algorithm to the external image Sensor (CIS) receives through IMG2DMA block and AHB_DMA is stored in DDR2 through DDR2 controller.

영상 인지 기능의 수행이 완료되면 32비트 마이크로 프로세서는 완료되었다는 신호를 Mail Box를 통해 명령어를 전달하고, Mail Box로부터 영상인지 기능이 완료되었음을 확인받은 8비트 마이크로 컨트롤러는 동작중인 기능을 종료하고 power down mode로 돌입한다. When the image recognition function is completed, the 32-bit microprocessor transmits the command through the Mail Box and the 8-bit microcontroller confirmed that the image recognition function is completed from the Mail Box. mode.

상술한 바와 같이, 사물 인터넷용 시스템 온 칩 이중 프로세서 구조에 의하여, 국산 CPU인 32비트 Core-A 프로세서를 적용하여 사물 인터넷용 시스템 온 칩에 적합한 듀얼 CPU를 개발함으로 사물인터넷 시스템 온 칩을 일반 8비트 프로세서와 컨트롤러에 비해서 성능 향상을 할 수 있고, Smart 기능, 저전력 기능, 보안 기능을 구현할 수 있다.As described above, the dual-CPU system for on-chip internet has been applied to develop a dual CPU suitable for a system-on-chip for the Internet by applying a 32-bit Core-A processor, which is a domestic CPU, It can improve performance compared to bit processors and controllers, and can implement Smart functions, low power functions and security functions.

32비트 Core-A 프로세서와 3M~5M 픽셀 영상처리기능을 집적하여 생체특징 인식, 영상ㅇ얼굴 인식 등 고화질 수요에 대응할 수 있고, 32비트 마이크로 프로세서와 지그비 네트워크 기능을 하나의 시스템 온 칩으로 구현하여 고기능 저가형 사물인터넷용 시스템 온 칩을 구현할 수 있다.It integrates 32-bit Core-A processor and 3M ~ 5M pixel image processing functions to cope with high quality demand such as biometric feature recognition, image recognition and face recognition, and realizes 32 bit microprocessor and ZigBee network function as one system-on-chip High-performance low-cost objects System-on-chip for the Internet can be realized.

즉, 사물 인터넷 알고리즘 처리 전용으로 고속 버스와 고속 메모리를 이용하여, 현재 화자인식을 위한 음성처리, 영상처리, 센서값 (예: 온도, 조도, 거리, 움직임, 가스, 분진 등)들과, 영상처리, 음성처리를 고려하여 복합적인 상황에 대한 판단을 하게 해서 특히 영상 처리에 유용하게 처리 속도를 빠르게 하는 기능을 수행하도록 할 수 있다.In other words, speech processing, image processing, sensor values (eg, temperature, illuminance, distance, motion, gas, dust, etc.) for current speaker recognition, and image It is possible to make a decision on a complex situation in consideration of processing, voice processing, and particularly to perform a function of speeding up the processing speed particularly useful for image processing.

그리고 영상 데이터의 화질 개선을 위하여 영상 잡음 제거 필터를 구현하며, 영상 데이터를 암호화하는 기능 즉 Key로 잠그고 푸는 하드웨어 기능을 부여할 수 있도록, 보안 기능의 경량 블록 암호 프로세서를 하드웨어로 구현하여 필수적인 사물인터넷 보안 기능을 포함하였다.In order to improve the image quality of the image data, the image noise cancellation filter is implemented and the light block cryptographic processor of security function is implemented in hardware so that the function of encrypting the image data, that is, the hardware function of locking and unlocking by the key, Security features.

이상의 설명에서는 본 발명의 바람직한 실시예를 제시하여 설명하였으나, 본 발명이 반드시 이에 한정되는 것은 아니며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경할 수 있음을 쉽게 알 수 있을 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of illustration, It will be readily apparent that various substitutions, modifications, and alterations can be made herein.

Claims

특정 위치에 주차한 차량을 인식하기 위하여 하나의 몸체 박스에 차량 인식에 필요한 센싱 기능, 구동 기능, 제어 기능 및 통신 기능이 제공되고; 센싱 기능은 차량의 입/출입을 감지하는 센서, 사람의 접근을 감지하는 센서, 지자기를 감지하는 센서, 움직임을 감지하는 센서를 통하여 제공되고; 구동 기능은 기계를 구동하는 구동 장치, 경광등을 구동하는 구동 장치, 사이렌을 구동하는 구동 장치, 주/야간 촬영할 수 있는 카메라와 조명장치를 구동하는 구동 장치를 통하여 제공되고; 제어 기능은 2개의 CPU를 통하여 제공되는 것으로 센싱 기능에 따른 센싱 신호 및 구동 기능에 따른 구동 신호를 제어 처리하며, 영상 인식 및 음성 처리에 대한 제어 처리를 수행하고; 통신 기능은 유선 통신 기능 및 무선 통신 기능이 제공되는 것을 특징으로 한 영상복합 센서를 이용한 사물인터넷 주차인식 장치를 제공하며;
영상복합 센서를 이용한 사물인터넷 주차인식 장치는 전면판, 센싱구동부, 영상처리 연산부 및 후면판이 적층 결합되어 구성되고; 전면판은 영상센서, 조명장치, 거리센서, PIR센서, 조도센서, 스피커 및 마이크가 외부로 노출되도록 구성되고; 영상센서는 주간 촬영을 위한 일반 가시광용 영상센서와 야간 촬영을 위한 적외선용 영상센서로 구성되고; 거리센서는 초음파 또는 LED 빛으로 재는 방식으로 50cm ~ 3m 범위에 사물 및 사람을 감지하며; 전면판에는 PIR 센서 및 거리센서를 보완하는 것으로, 전방의 물체를 1~5m 내에서 유/무를 판별할 수 있는 무선 RF 센서가 더 구성되며; 센싱구동부는 제1CPU, 제1메모리, 영상센서, 조명장치, 거리센서, PIR센서, 조도센서, 가속도센서, GPS 수신부, 스피커 또는 마이크 중 어느 하나 이상을 포함하여 구성되고; 제1CPU는 각종 센서, 구동 기능, 영상 촬영을 제어하고, 외부 통신을 제어하며; 영상처리 연산부는 제2CPU, 제2메모리, 영상처리부, 제3메모리 또는 제4메모리 중 어느 하나 이상을 포함하여 구성되고; 제2CPU는 영상신호처리, 음성신호처리 및 IoT Security 기능을 제어하는 것으로, IoT에 쓰이는 알고리즘을 연산하며 사람 유무인식, 얼굴인식, 말하는 사람의 말 인식, 보안관련 알고리즘의 연산을 수행하고, 차량인식 알고리즘을 통하여 차량 접근 유/무를 10 ~ 20m 정도에서도 인식할 수 있으며; 영상처리부는 JPEG 입력 압축 기능과 QVGA, VGA, 1M, 2M 및 5M pixel 영상으로 크기를 조절하며; 후면판은 외부신호 연결부, 통신 연결부를 포함하여 구성되며; 외부 신호 연결부는 GPIO, UART, USB, 5V 전원 연결구를 가지고 있어서, 지자기 센서, 모터 구동, 스위치 on-off, 요금 지불기를 포함한 외부 연동장치와 접속하여 사용할 수 있으며, 5V 전압 전원을 공급하는 단자가 구비되고; 지자기 센서는 GPIO 단자에 연결하여 동작하고; 센싱 구동부와 영상처리 연산부는 제어 신호, 데이터 송/수신, 클록(clock)선을 연결하는 케이블로 연결되어 구비된 것을 특징으로 한 영상복합 센서를 이용한 사물인터넷 주차인식 장치.A sensing function, a driving function, a control function, and a communication function necessary for vehicle recognition are provided in one body box to recognize a vehicle parked at a specific position; The sensing function is provided through a sensor for detecting the entrance / exit of a vehicle, a sensor for detecting a human approach, a sensor for detecting a geomagnetism, and a sensor for detecting a motion; The driving function is provided through a driving device for driving the machine, a driving device for driving the warning light, a driving device for driving the siren, a camera for shooting main night / night and a driving device for driving the lighting device; The control function is provided through two CPUs, and controls a sensing signal according to the sensing function and a driving signal corresponding to the driving function, performs control processing for image recognition and voice processing, Wherein the communication function is provided with a wired communication function and a wireless communication function;
The object Internet parking recognition apparatus using the image composite sensor includes a front panel, a sensing driver, an image processing unit, and a rear panel stacked together; The front plate is configured to expose the image sensor, the illumination device, the distance sensor, the PIR sensor, the illuminance sensor, the speaker, and the microphone to the outside; The image sensor is composed of a general visible light image sensor for daytime shooting and an infrared image sensor for nighttime shooting; Distance sensor detects objects and people in the range of 50cm ~ 3m by ultrasonic or LED light; The front panel complements the PIR sensor and the distance sensor, and further comprises a wireless RF sensor capable of determining the presence or absence of the object within 1 to 5 m; Wherein the sensing driver comprises at least one of a first CPU, a first memory, an image sensor, a lighting device, a distance sensor, a PIR sensor, an illuminance sensor, an acceleration sensor, a GPS receiver, a speaker or a microphone; The first CPU controls various sensors, a driving function, a video photographing, and controls external communication; The image processing operation unit may include at least one of a second CPU, a second memory, an image processing unit, a third memory, or a fourth memory; The second CPU controls image signal processing, voice signal processing, and IoT security functions, and performs algorithms used in IoT to calculate human presence, face recognition, speaker's speech recognition, security related algorithms, Through the algorithm, it is possible to recognize vehicle accessibility from 10 ~ 20m; The image processor adjusts the size with JPEG compression and QVGA, VGA, 1M, 2M and 5M pixel images; The backplane comprises an external signal connection and a communication connection; The external signal connection has GPIO, UART, USB, 5V power connector and can be connected with external interlock including geomagnetic sensor, motor drive, switch on-off, ; The geomagnetic sensor operates by connecting to the GPIO terminal; Wherein the sensing driving unit and the image processing operation unit are connected to each other by a cable connecting a control signal, data transmission / reception, and a clock line.

청구항 1에 있어서, 상기 영상복합 센서를 이용한 사물인터넷 주차인식 장치는 주차장 출입구, 길거리 주차장, 거주자 우선 주차 구역, 이동형 주차장, 이동형 임시 차량 신호대 또는 행사장 출입 통제 구역에 설치되어, 차량 통제, 차량 번호 인식 수행을 하는 것을 특징으로 한 영상복합 센서를 이용한 사물인터넷 주차인식 장치.[3] The object recognition apparatus of claim 1, wherein the object compound parking sensor is installed in a parking lot entrance, a street parking lot, a resident priority parking area, a movable parking lot, a mobile temporary traffic signal area, Wherein the object recognition means detects the presence of the object by using the image composite sensor.

삭제delete