KR101660254B1 - recognizing system of vehicle number for parking crossing gate - Google Patents

recognizing system of vehicle number for parking crossing gate Download PDF

Info

Publication number
KR101660254B1
KR101660254B1 KR1020140175574A KR20140175574A KR101660254B1 KR 101660254 B1 KR101660254 B1 KR 101660254B1 KR 1020140175574 A KR1020140175574 A KR 1020140175574A KR 20140175574 A KR20140175574 A KR 20140175574A KR 101660254 B1 KR101660254 B1 KR 101660254B1
Authority
KR
South Korea
Prior art keywords
vehicle
camera
character
recognized
image
Prior art date
Application number
KR1020140175574A
Other languages
Korean (ko)
Other versions
KR20160069685A (en
Inventor
주석재
Original Assignee
(주)토마토전자
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)토마토전자 filed Critical (주)토마토전자
Priority to KR1020140175574A priority Critical patent/KR101660254B1/en
Publication of KR20160069685A publication Critical patent/KR20160069685A/en
Application granted granted Critical
Publication of KR101660254B1 publication Critical patent/KR101660254B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625—License plates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07B—TICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
    • G07B15/00—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
    • G07B15/02—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Finance (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Devices For Checking Fares Or Tickets At Control Points (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 입차용 차단기에 진입하는 입차차량의 앞번호판의 문자인식에 실패하는 경우에만 뒷번호판을 촬영하는 카메라를 구동시키고, 이를 출차시에 촬영된 영상과 비교활용하도록 함으로써 시스템의 부하를 대폭적으로 경감시키도록 하는 것이다. In the present invention, a camera for photographing a rear license plate is driven only when the character recognition of the front license plate of the intruding vehicle entering the entrance blocking circuit fails, and compared with the photographed image at the time of departure, .

Description

주차차단기의 번호인식시스템{recognizing system of vehicle number for parking crossing gate}Description: BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a parking-

본 발명은 주차차단기에 설치되는 번호인식시스템에 관한 것으로, 더욱 상세하게는 입차용 주차차단기에 설치되는 전방카메라와 후방카메라에 의하여 이중으로 촬영한 영상에 의하여 번호인식률을 높힌 주차차단기의 번호인식시스템에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a number recognition system installed in a parking breaker, and more particularly, to a number recognition system for a parking breaker having a number recognition rate enhanced by a front camera installed in a parking brake .

주차장의 출입통제 및 과금을 위한 차량번호 인식률을 높이기 위하여 특허10-1127876호(발명의 명칭: 차량번호 이중인식 주차관리시스템 및 주차관리방법)(이하, 종래기술이라 함)와 같은 발명이 이루어졌다.In order to increase the recognition rate of the car number for access control and billing of the parking lot, an invention such as the patent 10-1127876 (the name of the invention: double car parking identification management system and parking management method) .

도 1은 종래기술의 구성을 설명하기 위한 블록도이다.1 is a block diagram for explaining the configuration of the prior art.

도 1에 도시된 종래기술의 구성은 입차용 차단기(500), 출차용 차단기(550), 입차 차량 앞번호판을 촬영하는 제1카메라부(400), 입차 차량 뒷번호판을 촬영하는 제2카메라부(450), 출차 차량의 앞 번호판을 촬영하는 제3카메라부(460), 통합서버(600)로 이루어지는데, 상기 제1, 2카메라부(400, 450)는 입차하는 차량의 앞번호판과 뒷번호판을 각각 촬영하여 통합서버에 전송하고,제3카메라부(460)는 출차하는 차량의 앞번호판을 촬영하여 통합서버에 전송한다. 도 1의 구성은 제2카메라부(450)가 설치됨으로써 차량의 뒷번호판을 촬영할 수 있게 됨에 따라 제1카메라부(400)에 의해 촬영된 차량 앞번호판과 비교 확인하여 차량번호 인식의 정확도와 신뢰도를 높일 수 있고, 앞 번호판이 훼손되거나 흙이나 눈 또는 빛 반사에 의해 정확히 인식되지 않을 경우 상기 제2카메라부(450)를 통해 뒷번호판의 차량번호를 인식할 수 있도록 한다. 또한 통합서버는 디스플레이부, 데이터저장부, 비교부를 포함하여 구성되는데, 상기 디스플레이부는 영상촬영부에 의해 촬영된 영상과 그 영상으로부터 추출한 차량번호를 화면에 나타내는 구성이고, 상기 데이터저장부는 촬영된 영상과 그 영상으로부터 추출한 차량번호를 저장하는 구성이며, 비교부는 추출된 앞번호판의 차량번호와 뒷번호판의 차량번호를 비교하며, 상기 통합서버는, 상기 비교부에서 비교 확인되는 앞번호판의 차량번호와 뒷번호판의 차량번호가 다를 경우, 상기 촬영된 영상에 나타난 차량번호를 육안으로 판독하여 상기 데이터저장부에 저장하는 조작부(640)를 더 포함하여 이루어진다.1 includes a mouth-breaking circuit breaker 500, an outgoing circuit breaker 550, a first camera part 400 for photographing the license plate in front of the entrance vehicle, a second camera part The first camera unit 400 and the second camera unit 450 are provided with a front plate and a rear plate of the entering vehicle, And the third camera unit 460 picks up the front license plate of the outgoing vehicle and transfers it to the integration server. 1, as the second camera unit 450 is installed, the rear plate of the vehicle can be photographed, and compared with the front plate of the vehicle photographed by the first camera unit 400, the accuracy and reliability of the vehicle number recognition So that the vehicle number of the rear license plate can be recognized through the second camera unit 450 when the front license plate is damaged or is not correctly recognized due to soil, snow, or light reflection. The integrated server includes a display unit, a data storage unit, and a comparison unit. The display unit displays an image captured by the image capture unit and a vehicle number extracted from the captured image, And the comparison unit compares the vehicle number of the extracted license plate with the license plate number of the rear license plate, and the integration server compares the car number of the license plate which is compared and verified by the comparison unit And an operation unit 640 for visually reading the vehicle number displayed on the photographed image and storing the read vehicle number in the data storage unit when the vehicle number of the rear plate is different.

그러나 종래기술에서 앞번호판의 차량번호와 뒷번호판의 차량번호가 틀린 경우 관리자가 일일이 육안으로 판독하여야 하는 어려움이 존재한다.However, in the conventional art, when the vehicle number of the front number plate is different from the vehicle number of the rear number plate, there is a difficulty for the manager to read the information by eyes.

또한 종래기술에서 제1, 제2, 제3카메라부에서는 촬영되는 모든 통과차량에 대하여 차량번호를 검출하여야 하기 때문에 시스템에 부하가 많이 걸리게 되고, 시스템 부하를 줄이기 위하여 제1, 제2, 제3 카메라의 영상으로부터 각각 차량번호를 추출하기 위한 번호인식 프로그램을 별도로 설치하고자 하는 경우에는 설치비용이 많이 소요되게 된다.In addition, in the related art, since the first, second, and third camera units must detect the vehicle number of all passing vehicles, there is a heavy load on the system. In order to reduce the system load, the first, It is necessary to install a number recognition program for extracting a car number from a camera image separately.

본 발명은 이러한 문제점들을 해결하기 위한 것으로, 시스템 구축비용을 줄이면서도 시스템의 부하를 경감시키는 주차차단기의 번호인식시스템을 제공하기 위한 것이다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and it is an object of the present invention to provide a parking brake number recognition system that reduces the system load while reducing the system construction cost.

상기 과제를 해결하기 위한 해결수단은 차량의 진행방향을 기준으로 입차용 차단기의 전방에 설치되는 제1센서에 입차차량이 검출될 때 상기 입차차량의 앞 번호판을 촬영하기 위한 제1카메라와, 상기 입차 용 차단기의 후방에 설치되는 제2센서에 상기 입차차량이 검출될 때 상기 입차차량의 뒷번호판을 촬영하기 위한 제2카메라와, 출차용 차단기의 전방에 설치되는 제3센서에 출차차량이 검출될 때 상기 출차차량의 앞 번호판을 촬영하기 위한 제3카메라와, 상기 제1, 제2, 제3 카메라들에 의하여 촬영된 영상으로부터 차량번호를 인식하기 위한 관리서버를 포함하는 주차차단기의 번호인식시스템에 있어서: 상기 관리서버는 상기 제1카메라로부터 촬영된 제1입차차량 영상, 상기 제2카메라로부터 촬영된 제2입차차량 영상과 상기 제3카메라부터 촬영된 출차차량 영상으로부터 문자를 인식하는 번호인식모듈; 상기 제1입차차량영상에 대한 문자인식이 실패하는 경우 상기 제2카메라를 구동시켜 제2입차차량 영상을 획득하는 제어모듈; 상기 제1입차차량 영상과 상기 출차차량 영상으로부터 번호인식이 실패하는 경우 인식실패한 문자의 위치에 인식대상의 영역의 영상인 영상문자를 삽입시켜 인식된 문자와 혼합한 혼합번호판을 생성하는 특징부추출모듈; 상기 출차차량 영상으로부터 차량번호가 인식되는 경우 상기 제1입차차량 영상, 상기 제2입차차량 영상으로부터 동일한 차량번호가 있는지를 검출하여 동일한 차량번호가 존재하는 경우 동일한 차량번호의 입차차량이 출차차량과 동일차량으로 판정하고, 상기 출차차량 영상으로부터 차량번호가 불완전하게 인식되는 경우 상기 특징부추출모듈에서 생성되는 출차차량 혼합번호판과 상기 제1입차차량 영상들로부터 인식되는 차량번호 또는 상기 제1 입차차량영상들로부터 생성되는 입차차량 혼합번호판들에 대한 유사도들을 검출하고, 가장 높은 유사도가 기설정된 값 이상일 때 상기 가장 높은 유사도를 갖는 입차차량을 출차차량과 동일한 차량으로 판정하고, 상기 유사도들이 상기 기설정된 값 미만인 경우 모니터에 유사도들이 높은 순서대로 입차차량을 표시하는 것이다.According to an aspect of the present invention, there is provided a vehicle including a first camera for photographing a front license plate of an intruding vehicle when an entrance vehicle is detected on a first sensor installed in front of a entrance blocking circuit on the basis of a traveling direction of the vehicle, A second camera for photographing a rear plate of the intruding vehicle when the intruding vehicle is detected by a second sensor installed at the rear of the intruding breaker, and a third sensor installed in front of the outgoing circuit breaker for detecting And a management server for recognizing the vehicle number from the images photographed by the first, second, and third cameras, and a third camera for photographing the front license plate of the outgoing vehicle The system of claim 1, wherein the management server comprises: a first intervening vehicle image taken by the first camera; a second intervening vehicle image taken by the second camera; A number recognition module for recognizing characters from an outgoing vehicle image; A control module for driving the second camera to acquire a second intervening vehicle image when character recognition of the first intervening vehicle image fails; Extracting a feature section for generating a mixed number plate mixed with a recognized character by inserting a video character which is a video of an area of the recognition object at a position of a character whose recognition is unsuccessful when the number recognition fails from the first and second vehicle images, module; If the vehicle number is recognized from the outgoing vehicle image, it is detected whether the same vehicle number exists from the first and second intruded vehicle images, and if an identical vehicle number exists, The vehicle identification number, the vehicle number recognized from the first intervening vehicle images, or the vehicle number recognized from the first intervening vehicle images generated by the feature extracting module, when the vehicle number is incompletely recognized from the vehicle image, Detecting an intrinsic vehicle having the highest degree of similarity as the same vehicle as an outgoing vehicle when the highest similarity degree is equal to or greater than a predetermined value, If the value is less than the value, The car is displayed.

삭제delete

또한 본 발명에서 상기 유사도는 비교되는 두 개의 문자영역에 대한 특징점들을 비교하여 유사값을 결정하고, 각각의 유사값에 각각의 비교되는 문자영역의 문자들이 인식된 문자인지 영상문자인지에 따라 결정되는 가중치를 곱하여 산출되는 것이 바람직하다.In the present invention, the degree of similarity may be determined by comparing feature points of two character regions to be compared to determine a similar value, and determining whether each character in the compared character region is a recognized character or an image character And is calculated by multiplying by the weight.

상기 과제와 해결수단에 따르면, 입차시의 뒷번호판을 촬영하는 제2카메라는 제1카메라에 의하여 획득되는 영상으로부터 문자인식에 실패하는 경우에만 구동되게 되고, 문자인식이 이루어지기 때문에 문자인식모듈의 부하가 경감되게 되어 결국 시스템의 동작을 원활하게 할 뿐만 아니라 출차영상으로부터 문자인식이 실패하는 경우에 출차영상과 입차영상의 유사도를 산출하여 입차차량의 동일차량을 판별하여 과금하거나, 출차차단기를 동작시키도록 함으로써 사용자와 관리자의 불편을 최소화시킨다. According to the above-mentioned problems and solutions, since the second camera for photographing the rear plate at the time of entry is driven only when the character recognition fails from the image obtained by the first camera, and the character recognition is performed, The load is reduced so that the operation of the system is smoothly performed. In addition, if the character recognition fails from the outgoing image, the similarity between the outgoing image and the intruded image is calculated to identify and charge the same vehicle of the incoming vehicle, Thereby minimizing the inconvenience of users and administrators.

도 1은 종래기술의 구성을 설명하기 위한 블록도이다.
도 2는 본 발명의 전체적인 구성을 설명하기 위한 구성도이다.
도 3은 본 발명의 전체적인 구성을 설명하기 위한 블록도이다.
도 4는 본 발명의 동작과정을 설명하는 순서도이다.
도 5는 본 발명에서 특징부추출모듈에서 생성된 번호판의 예시도이다.
도 6은 본 발명의 유사도를 추출하기 위한 예시화면이다.
도 7은 본 발명의 유사도를 추출하기 위한 다른 예시화면이다. 1 is a block diagram for explaining the configuration of the prior art.
2 is a configuration diagram for explaining the overall configuration of the present invention.
3 is a block diagram for explaining the overall configuration of the present invention.
4 is a flow chart illustrating an operation procedure of the present invention.
Figure 5 is an illustration of license plates generated in the feature extraction module in the present invention.
6 is an exemplary screen for extracting the similarity of the present invention.
7 is another exemplary screen for extracting the degree of similarity of the present invention.

도 2는 본 발명의 전체적인 구성을 설명하기 위한 구성도이고, 도 3은 본 발명의 전체적인 구성을 설명하기 위한 블록도이다.FIG. 2 is a block diagram for explaining the overall configuration of the present invention, and FIG. 3 is a block diagram for explaining the overall configuration of the present invention.

입차용 차단기(500)의 차단바가 주차장 진입로에 횡방향으로 설치되어 있으며, 제1카메라(400)는 차단바로부터 각도 a만큼 전방을 향하여 광축이 구축되어 있으며, 제1카메라의 광축과 도로가 만나는 지점인 입차용 차단기(500)의 전방에 입차차량을 감지하는 제1센서(401)가 설치되어 있다. 차량감지센서는 통상적으로 루프센서가 사용되지만 이에 국한되지 않고 레이저 센서등 다양한 장치들이 설치될 수 있다. 제1센서(401)에 의하여 입차차량(3)이 감지되면 관리서버(1)는 제1카메라(400)를 구동시켜 입차차량(3)을 촬영하도록 하여 촬영된 입차차량 영상을 수신받는다. 관리서버(1)는 입력되는 입차차량 영상으로부터 차량번호를 인식하고, 인식되는 차량번호, 입차차량의 입차시간 등 입차차량의 정보를 저장하고, 입차차량의 차량번호의 인식이 실패되는 경우 입차차량의 특징부를 추출한다. 제1카메라(400)에서 촬영된 입차차량 영상으로부터 입차차량(3)의 차량번호가 인식되지 않는 경우에는 입차차량(3)이 입차차단기(500)의 후방에 설치되는 제2센서(451)를 통과할 때 제2카메라(450)를 구동시켜 입차차량 뒷번호판이 설치된 차량 뒷면을 촬영하도록 하고, 촬영된 영상으로부터 차량번호를 인식하도록 한다. 또한 입차차량(3)이 출차되어 출차용 차단기(550)의 전방에 설치되는 제3센서(461)를 통과하는 경우에 관리서버(1)는 제3카메라(460)로 출차차량의 전면을 촬영하도록 하고, 촬영된 영상으로부터 번호를 인식하도록 한다. 제3카메라(460)의 출차차량 영상으로부터 번호인식이 성공하는 경우 제3카메라(460)의 출차차량 영상으로부터 추출된 차량번호와 제1카메라(400)의 입차차량 영상 또는 제2카메라(450)의 입차차량 영상으로부터 추출된 차량번호를 근거로 일치하는 출차차량의 번호와 일치하는 입차차량의 차량의 번호가 존재한다면 일치하는 번호의 입차차량을 현재 출차하는 출차차량과 동일 차량으로 판정하고, 입차차량의 입차시간을 검출하여 주차요금을 산정한다. 만일 제3카메라(460)의 영상으로부터 번호인식이 실패하는 경우 특징부를 추출하여 제1카메라(460)의 영상으로부터 추출되는 특징부를 비교하여 일치하는 경우 현재 출차되는 출차차량과 동일한 차량으로 판정하고, 이 판정을 근거로 주차요금을 산출하거나 출차단기를 동작시켜 차단기의 차단봉을 상승시키도록 한다.A blocking bar of the entrance blocking circuit 500 is installed in a lateral direction of the parking access road. An optical axis of the first camera 400 is formed forward by an angle a from the blocking bar, and the optical axis of the first camera meets the road A first sensor 401 is provided in front of the entrance blocking circuit 500 to detect an incoming vehicle. The vehicle sensor is typically a loop sensor, but various devices such as a laser sensor can be installed. The management server 1 drives the first camera 400 to take an image of the intruding vehicle 3 and receives the photographed intruded vehicle image when the intruding vehicle 3 is detected by the first sensor 401. The management server 1 recognizes the vehicle number from the input intruding vehicle image, stores the information of the intruding vehicle such as the recognized vehicle number and the entering time of the intruding vehicle, and when the recognition of the vehicle number of the intruding vehicle fails, . When the vehicle number of the intercepting vehicle 3 is not recognized from the intercepting vehicle image photographed by the first camera 400, the second sensor 451 installed at the rear of the intercepting device 500 The second camera 450 is driven to shoot the rear side of the vehicle provided with the rear license plate, and the vehicle number is recognized from the photographed image. When the entrance vehicle 3 passes the third sensor 461 installed in front of the outgoing breaker 550, the management server 1 photographs the front face of the outgoing vehicle to the third camera 460 So that the number is recognized from the photographed image. If the number recognition is successful from the outgoing vehicle image of the third camera 460, the vehicle number extracted from the outgoing vehicle image of the third camera 460, the inter-vehicle image of the first camera 400, If there is a vehicle number of the entering vehicle matching the number of the matching outgoing vehicle on the basis of the vehicle number extracted from the entering vehicle image of the entrance vehicle, The entrance time of the vehicle is detected and the parking fee is calculated. If the recognition of the number is unsuccessful from the image of the third camera 460, the feature is extracted and compared with the features extracted from the image of the first camera 460, Based on this judgment, the parking fee is calculated or the breaker of the breaker is operated by operating the breaker.

도 3에 도시된 바와 같이 관리서버(1)는 제1센서(401), 제2센서(451), 제3센서(461)에 차량이 감지될 때 제1카메라(400), 제2카메라(450), 제3카메라를 구동시키고, 입차차량 영상과 출차차량 영상을 선명하게 영상처리하며, 입차용 차단기(500), 출차용 차단기(550)를 제어하는 제어모듈(11)과, 입차차량 영상과 출차차량 영상으로부터 번호인식을 수행하는 번호인식모듈(13), 영상처리된 영상데이터를 입력받아 특징부를 추출하는 특징부 추출모듈(15)과, 현재 출차되는 출차차량과 동일한 입차차량을 검출하고 판단하며 검출된 동일차량의 입차시간을 추출하는 동일차량 판정모듈(17)과, 동일차량 판정모듈(17)로부터 출차차량의 출차시간과 동일차량의 입차시간정보를 입력받아 주차요금을 산출하는 과금모듈(19)과, 데이터를 저장하기 위한 저장모듈(21)로 이루어진다.3, when the vehicle is detected by the first sensor 401, the second sensor 451 and the third sensor 461, the management server 1 controls the first camera 400, 450), a control module (11) for driving the third camera, processing the incoming vehicle image and the outgoing vehicle image in a clear image, and controlling the entrance blocking circuit (500) and the outgoing circuit breaker (550) A number recognition module 13 for performing number recognition from an outgoing vehicle image, a feature extraction module 15 for extracting a feature by receiving image-processed image data, An identical vehicle judging module 17 for extracting an entrance time of the same vehicle judged and detected and an entrance time information of the same vehicle as the departure time of the outgoing vehicle from the same vehicle judgment module 17, Module 19 and a storage module 21 for storing data .

도 4는 본 발명의 동작과정을 설명하는 순서도이고, 도 5는 본 발명에서 특징부추출모듈에서 생성된 번호판의 예시도이다.FIG. 4 is a flowchart illustrating an operation procedure of the present invention, and FIG. 5 is an exemplary view of a license plate generated in the feature extraction module according to the present invention.

제어모듈(11)은 제1센서(401)에 의하여 입차차량(3)이 감지되면 제1카메라(400)가 구동되어 입차차량을 촬영하도록 하고, 번호인식모듈(13)은 촬영된 입차차량 영상으로부터 번호를 인식하고, 번호인식이 성공하면 인식된 번호를 저장모듈(21)에 저장한다(S11), (S13), (S15). 만일 제1카메라의 입차차량 영상으로부터 번호인식을 실패하면 특징부추출모듈(15)은 특징부를 추출하게 된다(S17). The control module 11 allows the first camera 400 to drive the first camera 400 to photograph an incoming vehicle when the first vehicle 401 is detected by the first sensor 401, If the number recognition is successful, the recognized number is stored in the storage module 21 (S11), (S13), and (S15). If the recognition of the number from the intruder vehicle image of the first camera fails, the feature extraction module 15 extracts the feature (S17).

특징부추출모듈(15)은 차량의 폭, 길이, 색상 정보 등 다양한 특징들을 검출하여 활용할 수 있지만 바람직하게는 입차차량의 번호판에 대한 영상을 추출하고, 번호인식모듈(13)로부터 번호판 중에서 인식된 문자와 인식된 문자의 위치정보와 인식에 실패한 문자의 위치정보 및 문자인식에 실패한 영상을 입력받고, 인식실패한 문자의 위치에 인식대상의 영역의 영상인 영상문자를 삽입시켜 인식된 문자와 혼합한 혼합번호판을 생성하고, 이를 저장모듈(21)에 저장한다.The feature extraction module 15 may detect various features such as the width, length, and color information of the vehicle and utilize it. Preferably, the feature extraction module 15 extracts an image of the license plate of the entering vehicle, The positional information of the character and the recognized character, the positional information of the character that failed to recognize, and the image which failed to recognize the character are received, the video character which is the image of the area of the recognized object is inserted at the position of the failed character, Generates a mixed number plate, and stores it in the storage module (21).

도 5는 입차차량 혼합 번호판의 예시도로서 제1카메라(400)에서 촬영된 영상에서 번호인식모듈(13)이 4번째, 5번째 문자를 인식하지 못하여 16우??13의 상태로 입차차량의 차량번호를 판독하게 된다. 이때 특징부추출모듈(15)은 제1카메라(400)에서 촬영된 영상에서 4번째, 5번째 문자의 위치의 영상을 추출하고 도 5에 도시된 바와 같이 문자인식이 실패한 위치에 실패한 문자의 영상(이하, 영상문자라 한다)을 삽입시켜 새로운 혼합 번호판을 생성한다.5 is a view illustrating an example of an entry vehicle mixed license plate. In the image captured by the first camera 400, the number recognition module 13 fails to recognize the fourth and fifth characters, The vehicle number is read. At this time, the feature extracting module 15 extracts images of the positions of the fourth and fifth characters from the image captured by the first camera 400, and extracts the images of the failed characters (Hereinafter referred to as a video image) is inserted to generate a new mixed plate.

또한 번호인식이 완전하게 이루어지지 않은 경우에 제어모듈(11)은 입차차량(3)이 제2센서를 통과하게 되면 제2카메라(450)를 구동시켜 차량뒷면에 설치된 뒷번호판을 인식하게 된다. 차량(3)의 번호판이 인식되게 되면 인식된 번호를 저장모듈(21)에 저장하게 된다.Also, when the number recognition is not completely performed, the control module 11 drives the second camera 450 to recognize the rear plate installed on the rear side of the vehicle when the entrance vehicle 3 passes the second sensor. When the number plate of the vehicle 3 is recognized, the recognized number is stored in the storage module 21.

또한 차량 출차되게 되어 제3센서(461)에 감지되게 되면 제어모듈(11)은 제3카메라(460)를 구동시켜 현재 출차되는 출차차량에 대한 출차차량 영상을 획득하게 되고, 번호인식모듈(13)은 출차차량 영상으로부터 출차 차량번호를 인식하게 된다. 출차 차량번호가 인식되면 동일차량판정모듈(17)은 저장모듈(21)에 저장된 제1카메라 입차차량 영상 및 제2카메라 입차차량 영상으로부터 판독된 차량번호와 비교하여 일치되는 차량번호가 검출되는 경우 검출된 입차차량이 현재 출차되는 차량과 동일한 입차차량으로 판정하고, 동일한 입차차량의 입차시간을 검출한다(S21), (S27). 이와 같이 제1카메라 영상과 제3카메라 영상으로부터 차량번호가 완전하게 검출되는 경우에는 제1카메라영상과 제3카메라 영상을 비교하여 과금모듈(19)에서 주차요금을 과금하게 된다. 이때는 제2카메라가 구동되지 않기 때문에 번호인식모듈(13)에서는 제1, 3카메라의 영상만 판독하면 충분하기 때문에 시스템의 부하를 경감시킨다. The control module 11 drives the third camera 460 to acquire an outgoing vehicle image for the presently emerging vehicle, and the number recognition module 13 ) Recognizes the outgoing vehicle number from the outgoing vehicle image. When the exit vehicle number is recognized, the same vehicle judging module 17 compares the vehicle number read from the first camera interim vehicle image stored in the storage module 21 and the second camera interim vehicle image, It is determined that the detected intruding vehicle is the same as the current incoming vehicle, and the intrusion time of the same intruding vehicle is detected (S21) (S27). When the car number is completely detected from the first camera image and the third camera image, the first camera image and the third camera image are compared with each other, and the parking fee is charged in the charging module 19. In this case, since the second camera is not driven, the number recognition module 13 only needs to read the images of the first and third cameras, thereby reducing the load on the system.

그러나 제1카메라 입차차량 영상으로부터 문자인식이 완전하게 이루어지지 않는 경우에 제어모듈(11)은 제2카메라를 구동시켜 제2카메라 입차차량의 뒷번호판이 포함된 영상을 촬영하도록, 제2카메라 입차차량 영상으로부터 입차되는 차량의 뒷번호판의 번호인식을 수행하도록 하고, 동일차량판정모듈(17)은 제3카메라 출차차량 영상으로부터 인식되는 출차차량 번호와 제2카메라 입차차량 영상으로부터 추출된 차량번호를 비교하여 검출하고, 일치되는 입차차량이 검출되면 일치된 입차차량과 현재 출차되는 출차차량과 동일한 차량임을 판정하고 동일한 입차차량의 입차시간을 과금모듈(19)에 전송하고, 과금모듈(19)은 출차되는 출차차량의 출차시간과 입차시간에 의하여 주차요금을 산출한다. 이때 주차요금 영수증에는 문자인식된 차량번호가 프린트되어 출력되게 된다.However, in the case where the character recognition is not completely performed from the first camera interim vehicle image, the control module 11 drives the second camera so as to photograph the image including the rear plate of the second camera interim vehicle, The same vehicle judging module 17 carries out the recognition of the number of the rear plate of the vehicle entering from the vehicle image, and the same vehicle judging module 17 judges the number of the vehicle which is recognized from the third camera outgoing vehicle image and the vehicle number extracted from the second camera- And when it is detected that a matching intruding vehicle is detected, it is determined that the vehicle is the same vehicle as the matching incoming vehicle and the currently departing vehicle, and the entrance time of the same intruding vehicle is transmitted to the charging module 19, and the charging module 19 The parking fee is calculated based on the arrival time and the arrival time of the outgoing vehicle. At this time, the recognized car number will be printed out on the parking fee receipt.

제3카메라 영상으로부터 차량번호가 완전하게 인식되는 경우, 즉 도 5에 도시된 바와 같이 4번째, 5번째 문자가 인식되지 못하는 등 부분적으로 인식되지 못하는 경우에는 일부 영상이 혼합되는, 특징부추출모듈(15)에서 도 5에 도시된 바와 같은 혼합번호판을 생성하게 되고, 동일차량판정모듈(17)은 제3카메라의 출차차량 영상으로부터 생성되는 혼합번호판과 제1카메라 영상으로부터 문자인식된 입차차량의 차량번호 및 문자인식이 이루어지지 않은 혼합번호판과 비교하고 유사도를 산출하여 가장 높은 유사도를 갖는 차량을 동일차량으로 판정하게 되고, 동일차량의 입차시점을 검출하고, 입차시점과 출차시점 정보를 과금모듈(19)에 전송하고, 과금모듈(19)은 입차시점과 출차시점을에 의하여 주차요금을 산출하도록 한다.If the vehicle number is completely recognized from the third camera image, that is, if the fourth and fifth characters are not recognized as shown in FIG. 5, the partial images are mixed, 5, the same vehicle judging module 17 generates a mixed number plate as shown in FIG. 5 from the mixed license plate generated from the outgoing vehicle image of the third camera and the mixed license plate generated from the first camera image The vehicle having the highest degree of similarity is judged as the same vehicle by comparing the vehicle number and the character number with the mixed number plate in which character recognition is not performed and the degree of similarity is calculated to detect the entering time point of the same vehicle, (19), and the billing module (19) calculates the parking fee by the time of entry and the time of departure.

동일차량판정모듈(17)은 제1카메라 입차차량 영상과 제3카메라 출차차량 영상으로부터 인식되는 영상문자와 인식문자들, 영상문자와 영상문자들의 특징점들을 비교하여 유사도가 기설정된 값 이상인 경우에는 동일차량으로 판정한다.The same vehicle judging module 17 compares minutiae points of video characters, recognition characters, video characters and video characters recognized from the first camera incoming vehicle image and the third camera outgoing vehicle image, and when the similarity degree is equal to or greater than a preset value, It is judged by the vehicle.

또한 출차차량에 대한 유사도가 기설정된 값 미만으로 나오게 되면 출차차량에 대한 동일차량을 검출할 수 없기 때문에 경고메시지를 출력시키고, 주차시스템 관리자에게 유사도가 가장 높은 입차차량부터 모니터에 제시함으로써 관리자가 동일차량을 용이하게 검출하도록 한다.In addition, if the similarity to the outgoing vehicle is less than a predetermined value, the same vehicle for the outgoing vehicle can not be detected. Therefore, a warning message is output and the parking system administrator presents the same to the monitor So that the vehicle can be easily detected.

도 6은 본 발명의 유사도를 추출하기 위한 예시화면이다. 6 is an exemplary screen for extracting the similarity of the present invention.

유사도는 영상의 특징점들을 추출하여 유사값을 산출하고, 각각의 유사값에 가중치를 부여한다. 이때 가중치는 비교되는 영상이 인식된 문자와 문자를 비교할 때 가중치가 가장 높은 최대값으로 설정되고, 영상문자와 영상문자가 비교될 때 가장 낮은 최소 가중치를 갖게 설정된다. 예시적으로 최대가중치를 1, 최소가중치를 0.6, 인식문자와 영상문자에 대한 가중치를 0.8이라 한다.The degree of similarity is calculated by extracting the feature points of the image and assigning a weight to each similar value. In this case, the weight is set to the highest value having the highest weight when the compared character and the recognized character are compared, and the lowest weight is set when the video character and the video character are compared. Illustratively, the maximum weight is 1, the minimum weight is 0.6, and the weight for recognition and video characters is 0.8.

도 6의 영상에서 (가)는 4, 5번째의 문자가 영상문자이고, (나)의 영상에서 5번째의 문자가 영상문자이고 나머지는 인식문자이며, 각 문자값을 비교할 때 특징점들로부터 추출되는 유사값이 100이라고 할 때 가중치를 적용하면 유사도는 다음의 식으로 산출된다.In the image of FIG. 6, (a) shows that the fourth and fifth characters are video characters, the fifth character in the video in (b) is a video character, and the rest are recognition characters. And the similarity value is 100. When the weight is applied, the similarity is calculated by the following equation.

유사도 = 1번째 문자 유사값*가중치+ 2번째 문자 유사값*가중치+ 3번째 문자 유사값*가중치 +4번째 문자 유사값*가중치 + 5번째 문자 유사값*가중치 +6번째 문자 유사값*가중치 + 7번째 문자 유사값*가중치 = 100*1 +100*1 + 100*1 + 100*0.8 + 100*0.6 + 100*1 + 100*1 = 640.Similarity value = 1st character similarity value Weight value + 2nd character similarity value Weight value + 3rd character similarity value Weight value + 4th character similarity value Weight value + 5th character similarity value Weight value +6th character similarity value Weight value + 7th character similarity value * Weight = 100 * 1 + 100 * 1 + 100 * 1 + 100 * 0.8 + 100 * 0.6 + 100 * 1 + 100 * 1 = 640.

도 7은 본 발명의 유사도를 추출하기 위한 다른 예시화면이다. 7 is another exemplary screen for extracting the degree of similarity of the present invention.

도 7의 (가)에서 2, 3, 4, 5번째는 영상문자이고, (나)에서 1, 5번째는 영상문자이므로 다음의 식에 의하여 유사도가 결정된다.In (A) of FIG. 7, the second, third, fourth and fifth images are image characters, and the first and fifth images in (B) are image characters, and the similarity is determined by the following equation.

유사도= 50*0.8 + 100*0.8 + 100*0.8 + 100*0.8 + 100*0.6 + 100*1 + 100*1 = 540 The similarity is 50 * 0.8 + 100 * 0.8 + 100 * 0.8 + 100 * 0.8 + 100 * 0.6 + 100 * 1 + 100 * 1 = 540

위 식에서 첫 번째 문자들의 특징점들을 비교할 때 특징점들이 상호 일치하지 않기 때문에 낮은 유사값을 갖게 되어 50으로 결정되고, 이는 특징점들의 유사값을 산출하는 프로그램에 의하여 결정되게 된다.When comparing the feature points of the first characters in the above equation, the feature points do not coincide with each other, so they have a low similarity value and are determined to be 50, which is determined by a program that calculates similarity values of feature points.

1: 관리서버 11: 제어모듈
13: 번호인식모듈 15: 특징부추출모듈
17: 동일차량판정모듈 19: 과금모듈 21: 저장모듈
400: 제1카메라 401: 제1센서
450: 제2카메라 451: 제2센서
460: 제3카메라 461: 제3센서
500: 입차용 차단기 550: 출차용 차단기1: management server 11: control module
13: number recognition module 15: feature extraction module
17: Same vehicle judging module 19: Charging module 21: Storing module
400: first camera 401: first sensor
450: second camera 451: second sensor
460: Third camera 461: Third sensor
500: Breaker for entrance door 550: Breaker for exit

Claims (3)

차량의 진행방향을 기준으로 입차용 차단기의 전방에 설치되는 제1센서에 입차차량이 검출될 때 상기 입차차량의 앞 번호판을 촬영하기 위한 제1카메라와, 상기 입차 용 차단기의 후방에 설치되는 제2센서에 상기 입차차량이 검출될 때 상기 입차차량의 뒷번호판을 촬영하기 위한 제2카메라와, 출차용 차단기의 전방에 설치되는 제3센서에 출차차량이 검출될 때 상기 출차차량의 앞 번호판을 촬영하기 위한 제3카메라와, 상기 제1, 제2, 제3 카메라들에 의하여 촬영된 영상으로부터 차량번호를 인식하기 위한 관리서버를 포함하는 주차차단기의 번호인식시스템에 있어서:
상기 관리서버는
상기 제1카메라로부터 촬영된 제1입차차량 영상, 상기 제2카메라로부터 촬영된 제2입차차량 영상과 상기 제3카메라부터 촬영된 출차차량 영상으로부터 문자를 인식하는 번호인식모듈;
상기 제1입차차량영상에 대한 문자인식이 실패하는 경우 상기 제2카메라를 구동시켜 제2입차차량 영상을 획득하는 제어모듈;
상기 제1입차차량 영상과 상기 출차차량 영상으로부터 번호인식이 실패하는 경우 인식실패한 문자의 위치에 인식대상의 영역의 영상인 영상문자를 삽입시켜 인식된 문자와 혼합한 혼합번호판을 생성하는 특징부추출모듈;
상기 출차차량 영상으로부터 차량번호가 인식되는 경우 상기 제1입차차량 영상, 상기 제2입차차량 영상으로부터 동일한 차량번호가 있는지를 검출하여 동일한 차량번호가 존재하는 경우 동일한 차량번호의 입차차량이 출차차량과 동일차량으로 판정하고, 상기 출차차량 영상으로부터 차량번호가 불완전하게 인식되는 경우 상기 특징부추출모듈에서 생성되는 출차차량 혼합번호판과 상기 제1입차차량 영상들로부터 인식되는 차량번호 또는 상기 제1 입차차량영상들로부터 생성되는 입차차량 혼합번호판들에 대한 유사도들을 검출하고, 가장 높은 유사도가 기설정된 값 이상일 때 상기 가장 높은 유사도를 갖는 입차차량을 출차차량과 동일한 차량으로 판정하고, 상기 유사도들이 상기 기설정된 값 미만인 경우 모니터에 유사도들이 높은 순서대로 입차차량을 표시하는 동일차량 판정모듈을 포함하는 것을 특징으로하는 주차차단기의 번호인식시스템. A first camera for photographing a front license plate of an intruding vehicle when an entrance vehicle is detected on a first sensor installed in front of a entrance blocking circuit on the basis of a traveling direction of the vehicle; A second camera for photographing a rear plate of the intruding vehicle when the entrance vehicle is detected by the second sensor and a second sensor installed on the front of the exit circuit breaker for detecting an entrance vehicle, A parking lot number recognition system comprising: a third camera for photographing; and a management server for recognizing the vehicle number from the images photographed by the first, second, and third cameras, the system comprising:
The management server
A number recognizing module for recognizing characters from a first intercepted vehicle image photographed by the first camera, a second intercepted vehicle image photographed by the second camera, and an outgoing vehicle image photographed by the third camera;
A control module for driving the second camera to acquire a second intervening vehicle image when character recognition of the first intervening vehicle image fails;
Extracting a feature section for generating a mixed number plate mixed with a recognized character by inserting a video character which is a video of an area to be recognized at a position of a character which is not recognized when the number recognition fails from the first and second vehicle images, module;
If the vehicle number is recognized from the outgoing vehicle image, it is detected whether the same vehicle number exists from the first and second intruded vehicle images, and if an identical vehicle number exists, The vehicle identification number, the vehicle number recognized from the first intervening vehicle images, or the vehicle number recognized from the first intervening vehicle images generated by the feature extracting module, when the vehicle number is incompletely recognized from the vehicle image, Detecting an intrinsic vehicle having the highest degree of similarity as the same vehicle as an outgoing vehicle when the highest similarity degree is equal to or greater than a predetermined value, If the value is less than the value, Recognition systems of the parking breaker comprising the same vehicle determination module that displays the vehicle. 삭제delete 청구항1에 있어서, 상기 유사도는 비교되는 두 개의 문자영역에 대한 특징점들을 비교하여 유사값을 결정하고, 각각의 유사값에 각각의 비교되는 문자영역의 문자들이 인식된 문자인지 영상문자인지에 따라 결정되는 가중치를 곱하여 산출되는 것을 특징으로 하는 주차차단기의 번호인식시스템.The method of claim 1, wherein the similarity is determined by comparing feature points of two character regions to be compared to determine a similar value, and determining each similarity value based on whether each character of the compared character region is a recognized character or a video character Of the parking brake number of the parking breaker.
KR1020140175574A 2014-12-09 2014-12-09 recognizing system of vehicle number for parking crossing gate KR101660254B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140175574A KR101660254B1 (en) 2014-12-09 2014-12-09 recognizing system of vehicle number for parking crossing gate

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140175574A KR101660254B1 (en) 2014-12-09 2014-12-09 recognizing system of vehicle number for parking crossing gate

Publications (2)

Publication Number Publication Date
KR20160069685A KR20160069685A (en) 2016-06-17
KR101660254B1 true KR101660254B1 (en) 2016-10-10

Family

ID=56343765

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140175574A KR101660254B1 (en) 2014-12-09 2014-12-09 recognizing system of vehicle number for parking crossing gate

Country Status (1)

Country Link
KR (1) KR101660254B1 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101970210B1 (en) 2019-01-24 2019-04-18 (주)청명씨앤아이 System and method for managing entrance or exit of vehicle based on recognizing car number
KR101987618B1 (en) * 2019-02-26 2019-06-10 윤재민 Vehicle license plate specific system applying deep learning-based license plate image matching technique
KR102247050B1 (en) * 2019-05-27 2021-04-30 주식회사 몹티콘 Multidirection unmanned camera system,and crackdown method by the camera
CN113496144B (en) * 2020-03-19 2023-10-27 杭州海康威视数字技术股份有限公司 Vehicle information detection method and device and electronic equipment
KR102274728B1 (en) * 2020-11-25 2021-07-08 (주) 에스알포스트 System and method for parking management by parking cars motion detection based on video images
KR102625000B1 (en) * 2021-03-03 2024-01-15 엔에이치엔클라우드 주식회사 Method and system for recognizing license plate based on deep-learning

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101127876B1 (en) * 2011-09-21 2012-03-21 (주)신안정보시스템 Parking lot management system and method thereof
KR101319508B1 (en) * 2013-08-22 2013-10-17 주식회사 넥스파시스템 The system and the method for monitoring illegal stopping and parking vehicles using an enhanced focus degradation method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100033331A (en) * 2008-09-19 2010-03-29 에스케이네트웍스 주식회사 System and method for recognizing car number

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101127876B1 (en) * 2011-09-21 2012-03-21 (주)신안정보시스템 Parking lot management system and method thereof
KR101319508B1 (en) * 2013-08-22 2013-10-17 주식회사 넥스파시스템 The system and the method for monitoring illegal stopping and parking vehicles using an enhanced focus degradation method

Also Published As

Publication number Publication date
KR20160069685A (en) 2016-06-17

Similar Documents

Publication Publication Date Title
KR101660254B1 (en) recognizing system of vehicle number for parking crossing gate
KR101974105B1 (en) Photographing system and method for increasing recognition rate of vehicle number
KR101496390B1 (en) System for Vehicle Number Detection
KR102297169B1 (en) Vehicel management system using vehicle license plate, vehicle model recognition and rfid sensor
KR102017800B1 (en) Regulation vehicle for enhancing regulating accuracy and efficiency
JP2001216519A (en) Traffic monitor device
KR102256802B1 (en) Unmanned parking illegal tailing management system and method using reflector camera
CN110580808B (en) Information processing method and device, electronic equipment and intelligent traffic system
CN110889351A (en) Video detection method and device, terminal equipment and readable storage medium
KR101493009B1 (en) Method for front and rear vehicle license plate recognition and system thereof
KR101729486B1 (en) Around view monitor system for detecting blind spot and method thereof
KR101049758B1 (en) Method for monitoring total of school zone and system thereof
US20230015771A1 (en) Methods for detecting phantom projection attacks against computer vision algorithms
KR102162130B1 (en) Enforcement system of illegal parking using single camera
KR20160038944A (en) traffic monitoring system
KR101080219B1 (en) System for regulating illegal parking
KR20200026492A (en) Accident monitoring system in tunnel using camera grouping of IoT based
KR101210615B1 (en) Regulation system of u-turn violation vehicle
KR101374653B1 (en) Apparatus and method for detecting movement of vehicle
KR101882888B1 (en) Method for providing panorama image in multi-lane hi-Pass system
CN116887057B (en) Intelligent video monitoring system
KR20150058881A (en) Air circulation control method for vehicle based on image recognition
KR20190136515A (en) Vehicle recognition device
CN111241918B (en) Vehicle tracking prevention method and system based on face recognition
JP2002145072A (en) Railroad crossing obstacle detecting device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
GRNT Written decision to grant