KR101665961B1 - 차량 영상 제공 장치 및 그 방법 - Google Patents
차량 영상 제공 장치 및 그 방법 Download PDFInfo
- Publication number
- KR101665961B1 KR101665961B1 KR1020160043420A KR20160043420A KR101665961B1 KR 101665961 B1 KR101665961 B1 KR 101665961B1 KR 1020160043420 A KR1020160043420 A KR 1020160043420A KR 20160043420 A KR20160043420 A KR 20160043420A KR 101665961 B1 KR101665961 B1 KR 101665961B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- vehicle
- feature information
- lane
- lanes
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000012545 processing Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 5
- 238000002716 delivery method Methods 0.000 claims 1
- 230000008569 process Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/017—Detecting movement of traffic to be counted or controlled identifying vehicles
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/04—Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
-
- H04N5/2257—
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Traffic Control Systems (AREA)
Abstract
본 발명은 차량 영상 제공 장치 및 그 방법에 관한 것이다. 본 발명에 따르면, 도로의 소정 지점에서 촬영한 차량의 영상을 제공하는 장치에 있어서, 소정 차로를 주행하는 차량의 전방을 촬영한 전방 영상을 획득하고, 상기 전방 영상으로부터 차량의 차로 정보를 추출하는 전방 영상 수집부, 복수의 차로를 포함하여 촬영된 상기 차량에 대한 후방 영상을 획득하는 후방 영상 수집부, 상기 차량의 차로 정보를 이용하여 상기 후방 영상의 차로에 매칭되도록 상기 전방 영상을 배열하는 제어부, 그리고 상기 배열된 차량의 전방 영상을 상기 후방 영상의 차로에 대응하여 출력하는 화면 출력부를 포함하는 차량 영상 제공 장치를 제공한다.
본 발명에 의하면, 각 영상의 특징 정보를 기초로 전방 영상과 후방 영상을 효율적으로 매칭하여 관리자에게 제공함은 물론, 차량 번호판의 고의적인 번호판 가림이나 훼손 등에 의해 인식되지 못하는 차량을 효과적으로 검색/추정할 수 있다.
본 발명에 의하면, 각 영상의 특징 정보를 기초로 전방 영상과 후방 영상을 효율적으로 매칭하여 관리자에게 제공함은 물론, 차량 번호판의 고의적인 번호판 가림이나 훼손 등에 의해 인식되지 못하는 차량을 효과적으로 검색/추정할 수 있다.
Description
본 발명은 차량 영상 제공 장치 및 그 방법에 관한 것으로서, 보다 상세하게는 복수 차로 상에 주행하는 차량을 용이하게 식별하기 위한 차량 영상 제공 장치 및 그 방법에 관한 것이다.
차량을 이용한 위법 행위들이 증가하면서, 위법 행위들을 단속하거나 위법 행위 지역을 감시하기 위한 시스템들이 생활 주변 곳곳에 다양하게 설치되고 있다.
그 대표적인 시스템으로 차량 방범 시스템이 있다. 일반적으로 차량 방범 시스템은 검출 모듈을 포함하며, 설정된 지점을 통과하는 차량을 촬영 장치로 촬영하여 차량 번호를 검출/인식한다.
이러한 차량 방범 시스템은 보통 한 차로에 한 대씩 설치되어 이동하는 차량의 정보를 검출/인식하며, 중요 데이터베이스(DB)와 연동하여 위법 차량(범죄 차량, 체납 차량 등)의 이동 경로를 파악한다.
하지만 근래에 차량 번호판을 개조, 변형하거나 차량 번호판을 가리는 등의 행위를 통해 차량 번호가 인식되지 않는 차량이 상당히 증가하고 있다. 특히, 차량 번호 인식률을 99%까지 올렸음에도, 고의적인 번호판 가림이나 훼손에 의해 미인식되는 차량이 꾸준히 증가하고 있다.
이로 인해 수도권의 한 도시에 설치된 차량 방범 시스템의 경우, 하루 대략 60만대의 차량이 검출되었음에도 불구하고, 이중 95~97% 정도 차량의 차량 번호만이 인식되고 있다. 즉, 2만 여대 가까운 차량의 차량 번호가 인식되지 못하고 있는 실정이다.
특히, 기존의 차량 방범 시스템은 차량 번호판 영역을 검출한 후 차량 번호가 인식되지 않으면 미인식으로 분류할 뿐, 미인식된 차량을 추정할 수 있는 어떠한 정보도 제공하지 못하기 때문에, 실질적으로 위법 차량에 대한 대처를 전혀 하지 못하고 있다. 더욱이, 관련 정보를 디스플레이하는 경우에도, 차량 영상, 인식 정보와, 미인식된 차량에 대한 알람만 제공할 뿐, 미인식 차량에 대한 어떠한 정보도 제공하고 있지 못한 실정이다.
따라서, 차량 번호판의 고의적인 번호판 가림이나 훼손 등을 효율적으로 파악함은 물론, 이에 대한 정보를 출력할 수 있는 새로운 장치가 절실히 필요하다.
본 발명의 배경이 되는 기술은 한국등록특허 10-0968433(2010.07.08 공고)에 개시되어 있다.
본 발명은 복수 차로 상에 주행하는 차량을 용이하게 식별하기 위한 차량 영상 제공 장치 및 그 방법을 제공하기 위한 것이다.
본 발명은, 도로의 소정 지점에서 촬영한 차량의 영상을 제공하는 장치에 있어서, 소정 차로를 주행하는 차량의 전방을 촬영한 전방 영상을 획득하고, 상기 전방 영상으로부터 차량의 차로 정보를 추출하는 전방 영상 수집부, 복수의 차로를 포함하여 촬영된 상기 차량에 대한 후방 영상을 획득하는 후방 영상 수집부, 상기 차량의 차로 정보를 이용하여 상기 후방 영상의 차로에 매칭되도록 상기 전방 영상을 배열하는 제어부, 그리고 상기 배열된 차량의 전방 영상을 상기 후방 영상의 차로에 대응하여 출력하는 화면 출력부를 포함하는 차량 영상 제공 장치를 제공한다.
또한, 상기 화면 출력부는, 상기 후방 영상을 출력하는 제1 설정 영역과, 상기 제1 설정 영역에 포함된 차로에 대응하는 위치에 상기 배열된 전방 영상을 배치하여 출력하는 하나 이상의 제2 설정 영역을 포함할 수 있다.
또한, 상기 차량 영상 제공 장치는, 상기 전방 영상에 복수의 차로가 포함되어 있는 경우, 차로 별로 상기 전방 영상을 분할하여 분할 영상을 생성하는 영상 분할부를 더 포함할 수 있다.
또한, 상기 전방 영상은, 전방에 부착된 차량 번호가 미인식된 차량에 대한 영상일 수 있다.
또한, 상기 차량 영상 제공 장치는, 상기 전방 영상 및 후방 영상을 영상 처리하여 각각 차량의 제1 특징 정보 및 제2 특징 정보를 검출하는 특징 검출부, 및 상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 후방 영상 내에 촬영된 적어도 하나의 차량 중에서 상기 전방 영상에 대응하는 차량을 추정하는 추정부를 더 포함할 수 있다.
또한, 상기 화면 출력부는, 상기 제2 설정 영역과 평행하게 배열되며, 상기 추정된 차량의 후방 영상을 상기 제2 설정 영역에 대응하여 출력하는 제3 설정 영역을 더 포함할 수 있다.
또한, 상기 차량 영상 제공 장치는, 상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 소정 지점의 통과를 기준으로 상기 추정된 차량의 차로 변경 여부를 판단하는 판단부를 더 포함하고, 상기 화면 출력부는, 상기 추정된 차량이 차로를 변경한 것으로 판단되면, 상기 하나 이상의 제2 설정 영역 중에서 상기 변경된 차로와 일치하는 순번의 차로에 대응하는 제2 설정 영역 상에 상기 차량의 전방 영상을 출력할 수 있다.
또한, 상기 제1 특징 정보 및 제2 특징 정보는, 차량 번호판의 크기, 색상, 형태, 차량 번호, 상기 차량의 종류, 상기 차량의 색상, 상기 차량의 차로 중 적어도 하나를 포함할 수 있다.
또한, 상기 차량 영상 제공 장치는, 관리자로부터 입력된 소정 정보, 상기 후방 영상에서 검출된 특징 정보 중 적어도 하나를 기초로 상기 전방 영상으로부터 검출된 특징 정보를 저장하고 있는 저장부를 검색하고, 상기 전방 영상의 특징 정보가 검색되지 않으면, 전방 영상 미인식 차량으로 분류하는 검색부를 더 포함할 수 있다.
그리고, 본 발명은, 도로의 소정 지점에서 촬영한 차량의 영상을 제공하는 방법에 있어서, 소정 차로를 주행하는 차량의 전방을 촬영한 전방 영상과, 복수의 차로를 포함하여 촬영된 상기 차량에 대한 후방 영상을 각각 획득하는 단계와, 상기 전방 영상으로부터 차량의 차로 정보를 추출하는 단계와, 상기 차량의 차로 정보를 이용하여 상기 후방 영상의 차로에 매칭되도록 상기 전방 영상을 배열하는 단계, 그리고 상기 배열된 차량의 전방 영상을 상기 후방 영상의 차로에 대응하여 출력하는 단계를 포함하는 차량 영상 제공 방법을 제공한다.
여기서, 상기 출력하는 단계는, 상기 후방 영상을 출력하는 제1 설정 영역과, 상기 제1 설정 영역에 포함된 차로에 대응하는 위치에 상기 배열된 전방 영상을 배치하여 출력하는 하나 이상의 제2 설정 영역을 출력할 수 있다.
또한, 상기 차량 영상 제공 방법은, 상기 전방 영상에 복수의 차로가 포함되어 있는 경우, 차로 별로 상기 전방 영상을 분할하여 분할 영상을 생성하는 단계를 더 포함할 수 있다.
또한, 상기 전방 영상은, 전방에 부착된 차량 번호가 미인식된 차량에 대한 영상일 수 있다.
또한, 상기 차량 영상 제공 방법은, 상기 전방 영상 및 후방 영상을 영상 처리하여 각각 차량의 제1 특징 정보 및 제2 특징 정보를 검출하는 단계, 및 상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 후방 영상 내에 촬영된 적어도 하나의 차량 중에서 상기 전방 영상에 대응하는 차량을 추정하는 단계를 더 포함할 수 있다.
또한, 상기 출력하는 단계는, 상기 제2 설정 영역과 평행하게 배열되며, 상기 추정된 차량의 후방 영상을 상기 제2 설정 영역에 대응하여 출력하는 제3 설정 영역을 더 출력할 수 있다.
또한, 상기 차량 영상 제공 방법은, 상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 소정 지점의 통과를 기준으로 상기 추정된 차량의 차로 변경 여부를 판단하는 단계를 더 포함하고, 상기 출력하는 단계는, 상기 추정된 차량이 차로를 변경한 것으로 판단되면, 상기 하나 이상의 제2 설정 영역 중에서 상기 변경된 차로와 일치하는 순번의 차로에 대응하는 제2 설정 영역 상에 상기 차량의 전방 영상을 출력할 수 있다.
또한, 상기 제1 특징 정보 및 제2 특징 정보는, 차량 번호판의 크기, 색상, 형태, 차량 번호, 상기 차량의 종류, 상기 차량의 색상, 상기 차량의 차로 중 적어도 하나를 포함할 수 있다.
또한, 상기 차량 영상 제공 방법은, 상기 전방 영상에서 검출된 차량 번호를 저장하고 있는 DB 내에 상기 후방 영상에서 검출된 차량 번호를 검색하고, 상기 차량 번호가 미검색된 경우 해당 후방 영상과 상기 후방 영상의 차량 번호를 포함한 정보를 번호 미인식 차량으로 분류하는 단계를 더 포함할 수 있다.
본 발명에 따른 차량 영상 제공 장치 및 그 방법에 의하면, 각 영상의 특징 정보를 기초로 전방 영상과 후방 영상을 효율적으로 매칭하여 관리자에게 제공함은 물론, 차량 번호판의 고의적인 번호판 가림이나 훼손 등에 의해 인식되지 못하는 차량을 효과적으로 검색 또는 추정할 수 있는 이점이 있다.
도 1은 본 발명의 실시 예에 따른 차량 영상 제공 장치가 적용된 시스템을 설명하기 위한 도면이다.
도 2는 도 1의 차량 영상 제공 장치를 상세히 도시한 도면이다.
도 3은 도 1의 화면 출력부가 제공하는 템플릿(Templete)을 설명하기 위한 도면이다.
도 4는 본 발명의 제1 실시 예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법을 나타낸 도면이다.
도 5a 및 도 5b는 도 1의 차량 영상 제공 장치가 수신하는 전방/후방 영상에 대해 설명하기 위한 도면이다.
도 6은 본 발명의 제2 실시예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법을 나타낸 도면이다.
도 2는 도 1의 차량 영상 제공 장치를 상세히 도시한 도면이다.
도 3은 도 1의 화면 출력부가 제공하는 템플릿(Templete)을 설명하기 위한 도면이다.
도 4는 본 발명의 제1 실시 예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법을 나타낸 도면이다.
도 5a 및 도 5b는 도 1의 차량 영상 제공 장치가 수신하는 전방/후방 영상에 대해 설명하기 위한 도면이다.
도 6은 본 발명의 제2 실시예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법을 나타낸 도면이다.
그러면 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.
도 1은 본 발명의 실시 예에 따른 차량 영상 제공 장치가 적용된 시스템을 설명하기 위한 도면이다.
도 1에 나타낸 바와 같이, 본 발명의 실시 예에 따른 차량 영상 제공 시스템은 촬영 장치(100)와 차량 영상 제공 장치(200)를 포함하며, 복수의 차로 상에 이동하는 차량들의 전/(및, 또는)후방 영상을 촬영하고, 전/후방 영상을 차로별로 매칭하여 관리자에게 제공한다. 여기서, 복수의 차로는 역주행이 가능한 분리대가 없는 차로를 포함한다.
촬영 장치(100)는 도로 상의 동일 지점에 설치되어 복수의 차로 상에 주행하는 차량을 촬영하는 전방 촬영 장치(110)와 후방 촬영 장치(120)를 포함하며, 차량의 전방 영상과 후방 영상을 촬영하여 차량 영상 제공 장치(200)로 전송한다.
전방 촬영 장치(110)는 차량이 진행하는 정면에 설치되며, 소정 검지 수단을 이용하여 차량의 전방을 촬영하고, 촬영한 전방 영상을 차량 영상 제공 장치(200)로 제공한다. 이때, 검지 수단은 루프(Loop), 음파, 레이저(Laser) 및 영상(Video) 등의 검지 수단과 같이 차량을 검지할 수 있는 다양한 수단을 포함한다.
전방 영상은 복수의 차로를 포함하여 촬영된 영상이거나 차로 별로 촬영된 영상일 수 있다. 전방 촬영 장치(110)가 복수 차로에 대응하여 다수 대 설치된 경우 전방 영상은 차로 별로 개별 촬영된 영상일 수 있고, 전방 촬영 장치(110)가 복수 차로를 아울러 한 대 설치된 경우 전방 영상은 복수의 차로를 포함하여 촬영된 영상일 수 있다.
후방 촬영 장치(120)는 차량이 진행하는 후면에 설치되며, 소정 검지 수단을 이용하여 차량의 후방을 촬영하고, 촬영한 후방 영상을 차량 영상 제공 장치(200)로 제공한다. 이때, 후방 촬영 장치(120)는 전방 영상의 촬영 시점으로부터 설정된 시간 이후에 차량의 후방을 촬영할 수 있다. 본 발명의 실시예에 따르면 후방 촬영 장치(120)는 한 대인 것이 바람직하며 후방 영상은 복수의 차로를 포함하여 촬영된다.
차량 영상 제공 장치(200)는 촬영 장치(100)로부터 차량의 전방 영상과 후방 영상을 수신하며, 수신한 전방 영상에서 추출한 차량의 차로 정보를 이용하여 차량의 전방 영상을 후방 영상의 해당 차로에 대응하여 출력한다.
여기서, 전방 영상이 복수의 차로를 포함한 영상인 경우 차량 영상 제공 장치(200)는 전방 영상을 차로 별로 분할하여 복수의 분할 영상을 생성한 후 차로 별 분할 영상을 후방 영상의 해당 차로에 각각 대응하여 출력하도록 한다.
그 밖에도 차량 영상 제공 장치(200)는 전방 영상과 후방 영상 각각으로부터 특징 정보를 검출하고, 검출한 특징 정보를 기초로 후방 영상 내에 촬영된 차량 중에서 전방 영상에 대응하는 차량을 추정한다. 그리고, 추정한 후방 영상을 템플릿을 통해 관리자에게 제공한다.
여기서, 특징 정보는 차량 번호판의 크기, 색상, 형태, 차량 번호, 상기 차량의 종류, 차량의 색상, 차량의 차로, 촬영 시간 정보 등과 같이 영상에서 추출할 수 있는 차량의 특징 정보를 포함한다.
한편, 본 발명의 실시 예에서는 촬영 장치(100)의 전방 촬영 장치(110)와 후방 촬영 장치(120) 각각이 직접 통신망과 연결되어 차량 영상 제공 장치(200)로 촬영한 영상을 전송하는 것으로 설명하였으나, 촬영 장치(100)와 차량 영상 제공 장치(200)의 중간에 현장 장치(미도시)를 구비할 수 있다.
여기서, 현장 장치(미도시)는 전방 촬영 장치(110) 및 후방 촬영 장치(120)로부터 촬영된 전/후방 영상을 수신하고, 수신한 전/후방 영상을 통신망을 통해 차량 영상 제공 장치(200)로 전송하는 중개 역할을 수행한다.
이와 같이, 차량 영상 제공 장치(200)는 차량의 전방 영상과 후방 영상을 촬영 장치(100)로부터 직접 수신하는 것도 가능하지만, 촬영 장치(100)의 영상을 수집한 별도의 현장 장치(미도시)로부터 차량의 전방 영상과 후방 영상을 제공받는 것도 가능하다.
물론, 현장 장치(미도시)가 차량 영상 제공 장치(200)의 일부 기능을 포함하는 경우, 촬영 장치(100)로부터 수신하는 영상을 차로별로 분할하고, 분할 영상과 후방 영상을 차량 영상 제공 장치(200)로 제공할 수도 있다. 또한, 분할 영상과 후방 영상을 분석하여 특징 정보를 함께 차량 영상 제공 장치(200)로 제공할 수 있다.
다음은 도 2를 통해 본 발명의 실시 예에 따른 차량 영상 제공 장치를 상세히 설명한다.
도 2는 본 발명의 실시 예에 따른 차량 영상 제공 장치를 상세히 도시한 도면이다.
도 2에 나타낸 바와 같이, 본 발명의 실시 예에 따른 차량 영상 제공 장치(200)는 전방 영상 수집부(210), 후방 영상 수집부(220), 제어부(230), 화면 출력부(240), 영상 분할부(250), 특징 검출부(260), 추정부(270), 판단부(280) 및 검색부(290)를 포함한다.
먼저 전방 영상 수집부(210)는 소정 차로를 주행하는 차량의 전방을 촬영한 전방 영상을 획득하고, 전방 영상으로부터 차량의 차로 정보를 추출한다.
전방 촬영 장치(110)가 차로 별로 각각 설치된 경우, 전방 영상 수집부(210)는 차로 별 전방 영상을 개별 획득한다. 각각의 전방 촬영 장치(110)는 기 할당된 차로를 촬영하도록 설정되어 있으며 전방 영상의 제공 시에 할당 차로 정보를 함께 제공한다. 따라서 이 경우 전방 영상 수집부(210)는 전방 영상의 수신과 함께 차로 정보까지 추출할 수 있게 된다.
전방 촬영 장치(110)가 복수의 차로를 촬영하도록 설치된 경우, 전방 영상 수집부(210)는 복수의 차로를 포함하여 촬영된 전방 영상을 획득한다. 이 경우 전방 영상 수집부(210)는 전방 영상 내에서 적어도 하나의 차선을 검출한 후 검출한 차선을 기초로 차량의 차로 정보를 추출할 수 있다.
영상 내에서 차선을 분석하면 차로의 개수를 판별할 수 있고, 전방 영상 내에서 반대로 보여지는 차로 순서를 역으로 해석하는 것을 통하여 차량의 차로 정보를 분석할 수 있다. 예를 들어, 전방 영상 내에서 가장 오른쪽 차로를 1차로로 하여 왼쪽 방향으로 한 차로씩 순차적으로 증가시키는 방법으로 차량 영상 제공 장치(200)는 차량의 차로 정보를 확인할 수 있다.
후방 영상 수집부(220)는 주행하는 해당 차량에 대한 후방 영상을 획득한다. 후방 영상은 전방 영상의 촬영 시점으로부터 설정된 시간 이후에 촬영된 차량의 후방 영상을 나타내며 복수의 차로를 포함하여 촬영된다.
여기서, 후방 영상 속에 나타나는 복수 차로는 실제 차로 순서대로 보여진다. 따라서, 후방 영상 내의 경우, 영상 속에 보여지는 그대로 가장 왼쪽 차로를 1차로로 하여 오른쪽 방향으로 1씩 순차적으로 증가시키는 방법으로 차량의 차로 정보를 확인할 수 있다.
제어부(230)는 전방 영상 수집부(210)에서 추출한 차량의 차로 정보를 이용하여, 후방 영상의 차로에 매칭되도록 전방 영상을 배열한다.
여기서, 전방 촬영 장치(110)가 차로 별로 설치되어 전방 영상이 차로 별로 복수 개로 획득되는 경우는 각각의 전방 영상을 단순히 차로 순서대로 배열하면 된다. 또한, 전방 영상이 복수 차로를 포함한 영상인 경우에는 차로 별 생성한 분할 영상을 차로 순서대로 배열하면 된다.
영상 분할부(250)는 전방 영상에 복수의 차로가 포함된 경우 전방 영상을 차로 별로 분할하여 복수의 분할 영상을 생성하며, 차로 별 생성한 분할 영상을 차로 정보와 함께 제어부(230)로 전달한다. 그러면 제어부(230)는 복수의 분할 영상을 차로 순서대로 배열한다.
화면 출력부(240)는 배열된 차량의 전방 영상을, 그에 대응되는 후방 영상의 차로에 대응하여 출력한다. 화면 출력부(240)는 제어부(230)로부터 수신한 전방 영상(또는 분할 영상)을 후방 영상 내 보여지는 차로 배열 순서에 매칭(Matching)하여 템플릿(Templete) 상에 출력한다.
이와 같이, 화면 출력부(240)는 관리자가 영상 정보들을 쉽고 편리하게 확인할 수 있도록 소정 정보를 출력하기 위한 템플릿을 포함한다. 이때, 템플릿은 소정 영상과 특징 정보 등을 표출하고, 관리자로부터 소정 정보를 입력받을 수 있는 GUI(Graphic User Interface)를 포함한다.
도 3은 도 1의 화면 출력부가 제공하는 템플릿(Templete)을 설명하기 위한 도면이다.
도 3을 참조로 본 발명에 따른 차량 정보 제공 장치의 템플릿을 설명하면, 템플릿(300)은 후방 영상을 출력하는 제1 설정 영역(310), 전방 영상 또는 분할 영상을 출력하는 하나 이상의 제2 설정 영역(320)을 포함하며, 추정된 후방 영상을 출력하는 하나 이상의 제3 설정 영역(미도시)을 더 포함할 수 있다.
먼저, 제1 설정 영역(310)은 복수 차로가 포함되어 촬영된 후방 영상을 출력하는 영역이다. 도 3의 경우 총 3개 차로를 가진 도로를 예시한 것이며 3개 차로 중 3차로를 주행 중인 차량의 후방이 촬영된 모습이다.
도 3에 도시된 제1 설정 영역(310)은 후방 영상을 차로 별로 3개 영역으로 끊어서 분할 출력하는 형태이지만, 분할 없이 이어진 형태로 출력하는 것도 가능하다. 물론 현재 도 3에 도시된 형태 역시 복수 차로가 포함되어 촬영된 후방 영상에 해당함은 자명하다.
제2 설정 영역(320)과 제3 설정 영역(미도시)은 실질적으로 후방 영상 내의 차로 개수에 대응하여 존재한다. 3차로의 도로를 예시한 도 3의 경우, 제2 설정 영역(320)과 제3 설정 영역(미도시)은 제1 설정 영역(310)에 보여지는 후방 영상의 각 차로에 대응하는 위치에 나란히 3 개씩 배열된다.
먼저, 제2 설정 영역(320)은 배열된 전방 영상이 차로 별로 각각 출력된다. 제2 설정 영역(320)은 배열된 해당 차로의 전방 영상(또는 분할 영상)을 제1 설정 영역(310)에 포함된 각 차로에 대응하는 위치에 배치하여 출력한다. 도 3의 경우, 1차로, 2차로 및 3차로에 해당하는 각각의 전방 영상이 각각 좌측의 제2 설정 영역(321), 중앙의 제2 설정 영역(322) 및 우측의 제2 설정 영역(323)에 각각 출력된 모습을 예시적으로 나타낸 것이다.
이러한 도 3의 예시는 제1 설정 영역(310) 내에 출력된 후방 영상 속의 3차로 상의 차량과 동일한 번호의 차량이 그에 대응하는 화면 우측의 제2 설정 영역(323)에 출력된 예시이며, 해당 차량이 지점 통과 시에 차선을 변경하지 않고 그대로 3차로를 주행한 경우를 나타낸다.
도 3에 도시된 것과 같이, 복수 차로를 포함하여 촬영된 후방 영상은 추가적인 영상 처리 없이 제1 설정 영역(310) 내에 그대로 출력되거나 차로 별로 분리된(끊어진) 형태로 출력되면 된다. 이러한 후방 영상은 별도의 영상 배열 과정이 불필요하다.
하지만, 차로 별로 얻어지는 전방 영상(또는 분할 영상)의 경우는 후방 영상 내의 차로 순서에 대응하도록 배열된 이후, 해당 차로 순서의 제2 설정 영역(320) 상에 각각 출력된다. 도 3의 경우, 차로 순서대로 배열한 3개의 전방 영상을 그에 대응하는 각각의 제2 설정 영역(321,322,323)에 출력한 모습을 나타낸다.
결론적으로, 전방 영상의 촬영 시점에 1차로를 주행한 차량의 전방 영상은 1차로에 대응하는 좌측의 제2 설정 영역(321)에 출력되고, 2차로를 주행한 차량의 전방 영상은 중앙의 제2 설정 영역(322)에 출력되고, 3차로를 주행한 차량의 전방 영상은 우측의 제2 설정 영역(323)에 출력되게 된다.
물론, 동일 촬영 시점을 기준으로, 각 차로 별 수집한 전방 영상(또는 분할 영상) 중에는 차량이 촬영된 영상도 있고 그렇지 않은 영상도 있을 수 있다. 따라서 각각의 제1 설정 영역(321,322,323) 중에는 차량이 존재하지 않는 영역도 있을 수 있다.
도 3의 경우도 이러한 특성이 드러나도록 도시된 것으로서, 전방 영상을 촬영한 시점에 3차로를 주행한 차량만 존재한 경우이며 해당 차량이 우측의 제1 설정 영역(323)에 출력된 모습을 나타낸 것이다. 다만, 차량이 3차로를 주행할 때 운전석 바퀴가 2차로를 일부 침범하여 차선을 물고 주행한 경우로서 중앙의 제2 설정 영역(322)의 경우 해당 차량의 좌측 일부분이 잘려져 보이는 형태를 포함한다.
제3 설정 영역(미도시)은 제1 설정 영역(310)의 상부와 제2 설정 영역(320)의 하부 사이 부분에서 제2 설정 영역(320)과 평행하게 배열될 수 있다. 이러한 제3 설정 영역(미도시)은 추정부(270)에서 추정된 차량의 후방 영상을 제2 설정 영역(320)에 대응하여 출력한다.
예를 들어, 도 3의 경우, 우측의 제2 설정 영역(323)은 3차로를 주행한 차량의 전방 영상을 출력하고 있는데, 이 경우 추정부(270)는 이와 동일한 특징(ex, 차량번호, 차량 종류, 색상 등)을 가지는 차량을 후방 영상 내의 차량 중에서 추정한다. 추정 결과, 후방 영상 내 차량 중에서 3차로 상의 차량이 추정 차량이 된다. 따라서 추정 차량의 영상은 제3 설정 영역 중에서 3차로에 대응하는 우측의 제3 설정 영역(미도시)에 출력된다.
제3 설정 영역(미도시)은 후방 영상 내의 차량 중에서 추정된 3차로의 차량 영상을 후방 영상에서 분리하여 출력할 수 있다. 예를 들어 제1 설정 영역 상의 후방 영상을 차로 별로 분할한 후 해당 차량이 위치한 차로 부분의 영상만을 분리하여 출력할 수 있다.
각각의 제3 설정 영역(미도시)은 차로 별 전방 영상 각각에 대응하는 추정 영상을 복수 개 출력할 수도 있다. 이는 후방 영상 속에서 전방 영상의 차량과 특징 정보의 유사도가 높은 차량이 다수로 존재하는 경우도 발생할 수 있기 때문이다.
특징 검출부(260)는 전방 영상 및 후방 영상을 영상 처리하여 각각 차량의 제1 특징 정보 및 제2 특징 정보를 검출한다. 여기서, 제1 특징 정보 및 제2 특징 정보는, 차량 번호판의 크기, 색상, 형태, 차량 번호, 상기 차량의 종류, 상기 차량의 색상, 상기 차량의 차로 중 적어도 하나를 포함한다.
특징 검출부(260)는 차량의 종류, 차량의 색상, 차량의 번호 등과 같은 차량의 특징 정보를 검출하기 위한 영상 처리 알고리즘을 포함하며, 영상 처리를 통해 검출한 차량의 특징 정보를 추정부(270)로 제공한다.
그 밖에도 특징 검출부(260)는 수신한 차량의 영상의 광류(optical flow)를 분석하여 예상된 차량의 속도, 전방 영상 내 검지 지점과 차량의 거리 등을 기초로 후방 영상을 추정하기 위한 참조 시간을 계산하여 추정부(270)로 제공할 수 있다.
추정부(270)는 특징 검출부(260)에 의해 검출된 특징 정보를 이용하여 후방 영상 내에서 전방 영상에 대응하는 차량을 추정하고 추정한 차량의 후방 영상을 화면 출력부(240)에 제공한다.
이때, 추정부(270)는 제1 특징 정보 및 제2 특징 정보를 비교하여, 후방 영상 내에 촬영된 적어도 하나의 차량 중에서 전방 영상에 대응하는 차량을 추정하고, 해당 차량의 전방 영상과 추정된 영상, 각 영상의 특징 정보를 화면 출력부(240)를 통해 출력한다.
또한, 추정부(270)는 전방 영상을 촬영한 시점을 중심으로 설정된 시간 내에 촬영한 후방 영상을 시간의 경과에 따라 화면 출력부(240)를 통해 제공할 수 있다. 이때, 추정부(270)는 특징 검출부(260)로부터 계산된 지연 시간을 이용하여 전방 영상에 대응하는 후방 영상을 제공할 수 있다.
한편, 본 발명의 실시 예에서 전방 영상이란 전방에 부착된 차량 번호판의 차량 번호가 미인식된 차량에 대한 전방 영상을 의미할 수 있다. 본 발명의 실시 예에 따르면, 전방 영상에서 차량번호가 미인식된 차량의 경우, 전방 영상에 대응하는 후방 영상 내의 적어도 하나의 차량 중에서 미인식 차량과 동일 또는 유사도 높은 특징을 가진 적어도 하나의 차량을 추정하고, 추정한 차량의 후방 영상을 전방 영상과 대응하여 제공한다.
따라서, 고의적인 번호판 가림이나 훼손 등을 이유로 전방 영상에서 차량 번호의 인식이 실패한 차량에 대한 후방 영상을 추정하여 제공한다면, 해당 차량의 후면 번호판을 통해 차량 번호의 확인이 가능해지고 위법 차량의 식별과 단속이 용이해지는 이점이 있다.
또한, 추정 대상 차량(미인식 차량)이 소정 지점(전/후방 촬영 장치의 설치 지점)을 통과하면서 주행 차선을 변경하게 되면, 전방 영상과 후방 영상 내에서 해당 차량의 주행 차로가 상이하게 촬영되게 된다.
이 경우, 후방 영상 속에는 이미 변경한 차로 상에 해당 차량이 촬영되기 때문에, 단순히 차로 정보만 이용하여 전방 영상을 배열하여 출력할 경우, 전방 영상의 출력 위치가 후방 영상 내 해당 차량의 차로 위치와는 매칭되지 않는 문제가 발생한다.
이와 같은 경우에 본 발명의 실시 예는 제1 특징 정보와 제2 특징 정보를 서로 비교하는 것을 통하여 차량의 차로 변경 여부를 확인하며, 차로 변경이 확인되면 변경한 차로 위치를 기초로 전방 영상을 다시 배열하여 출력할 수 있다.
다음으로, 판단부(280)는 제1 특징 정보 및 제2 특징 정보를 비교하여, 소정 지점의 통과를 기준으로 상기 추정된 차량의 차로 변경 여부를 판단한다.
이때, 화면 출력부(240)는 추정된 차량이 차로를 변경한 것으로 판단되면, 하나 이상의 제2 설정 영역(321,322,323) 중에서 변경된 차로와 일치하는 순번의 차로에 대응하는 제2 설정 영역(320) 상에 차량의 전방 영상을 출력한다.
즉, 실제 전방 영상의 촬영 당시 3차로 주행 중이던 차량이라 하더라도 후방 영상 촬영 당시 2차로로 변경 주행한 경우라면, 해당 차량의 전방 영상은 제2 설정 영역(321,322,323) 중에서 3차로에 해당하는 우측의 제2 설정 영역(323)이 아닌 2차로에 해당하는 중앙의 제2 설정 영역(322) 상에 출력된다.
물론, 이 경우 추정부(270)는 특징 정보의 비교를 통해, 후방 영상 내 차량 중 2차로에 있는 차량이 전방 영상의 해당 차량인 것으로 추정하게 될 것이다. 이때, 후방 영상에서 추정된 2차로의 해당 차량의 영상은 3개의 제3 설정 영역 중에서도 두 번째의 제3 설정 영역(미도시) 상에 출력된다. 이러한 구성에 따라, 본 발명의 실시 예는 차량의 차선 변경 등에도 강인한 추정 결과를 제공할 수 있다.
검색부(290)는 전방 영상에서 검출된 차량 번호를 저장하고 있는 DB 내에 후방 영상에서 검출된 차량 번호를 검색한다. 검색부(290)는 후방 영상에서 검출한 차량 번호가 DB 내에서 미검색된 경우, 해당 후방 영상 및 해당 후방 영상의 차량 번호를 포함한 정보를 번호 미인식 차량(추적 대상 차량)으로 분류하도록 한다.
즉, 후방 영상은 차량의 후면 번호판으로부터 인식이 가능하고 전방 영상은 차량의 전면 번호판으로부터 인식이 가능한 바, 만일 후면 번호판은 인식되었으나 전면 번호판은 인식되지 않은 경우, 해당 차량은 전방 번호판을 인위적으로 가렸거나 훼손한 위법 차량일 가능성이 높다. 따라서 이 경우 본 발명의 실시 예에 따른 차량 영상 제공 장치(200)는 차량의 후방 영상과 해당 차량번호를 포함한 정보를 인덱싱하여 관리할 수 있다.
또한, 검색부(290)는 관리자로부터 입력받은 입력 정보 또는 특징 검출부(260)로부터 수신한 후방 영상의 특징 정보를 기초로, 그에 대응하는 검색 결과(특징 정보에 대응하는 전방 영상, 전방 영상의 특징 정보 등)를 제공할 수 있다. 이때 입력 정보는 검색 조건(검색 기간 및 위법 차량 검색 여부 등), 검색 장소 등의 정보를 포함한다.
화면 출력부(240)는 검색 영역(330)을 함께 제공하는데, 검색 영역(330)은 관리자로부터 입력받은 검색 조건을 검색부(290)로 제공하며 검색부(290)로부터 수신한 검색 결과를 출력한다.
예를 들어, 검색부(290)는 차량 번호판을 훼손한 차량을 검출하기 위해, 관리자로부터 입력받은 입력 정보, 검출부(260)로부터 수신한 후방 영상의 특징 정보 중 적어도 하나의 검색 정보를 이용하여 저장부(미도시)에 저장된 전방 영상을 검색할 수도 있다. 이때, 검색부(290)는 전방 영상이 검색되지 않는 경우에, 해당 후방 영상의 특징 정보에 대응하는 전방 영상이 검색되지 않음을 제어부(미도시)로 알린다.
이를 통해, 차량 영상 제공 장치(200)는 전방 영상의 차량이 차량 번호판을 가리거나 훼손하여 인식되지 못한 경우에, 후방 영상의 특징 정보를 이용하여 해당 차량을 추정할 수 있다.
본 발명의 실시 예는 도시되지 않았으나 차량 영상 제공 장치(200)는 저장부 및 제어부를 추가로 포함할 수 있다. 저장부(미도시)는 전방 영상, 후방 영상, 각 영상의 특징 정보를 저장하며, 전방 영상에 매칭하여 추정된 후방 영상의 정보를 저장할 수 있다. 제어부(미도시)는 각 부 간의 데이터 흐름을 제어하며, 저장부(미도시)에 저장된 정보를 관리한다. 또한, 제어부(미도시)는 검색부(290)로부터 인덱싱된 후방 영상을 수신하는 경우에 소정의 이벤트(팝업, 소리, 메시지 등)를 관리자에게 제공할 수 있다.
한편, 본 발명의 실시 예에서는 차량 영상 제공 장치(200)가 전방 영상을 기준으로 후방 영상을 추정하여 제공하지만, 후방 영상을 기준으로 전방 영상을 추정하여 제공할 수도 있다.
이러한, 본 발명에 따른 차량 영상 제공 장치는 템플릿을 이용하여 효과적으로 차량의 전방 영상과 후방 영상을 매칭하여 제공함은 물론, 후방 영상에서 검출한 특징 정보를 이용하여 효과적으로 위법 차량을 검출할 수 있는 장점이 있다.
다음은 도 4 내지 도 5b를 통해 본 발명의 실시 예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법에 대하여 설명한다.
도 4는 본 발명의 제1 실시 예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법을 나타낸 도면이고, 도 5a 및 도 5b는 도 1의 차량 영상 제공 장치가 수신하는 전방 및 후방 영상에 대해 설명하기 위한 도면이다.
도 4에 나타낸 바와 같이, 본 발명의 실시 예에 따른 차량 영상 제공 장치(200)의 전방 영상 수집부(210)와 후방 영상 수집부(220)는 촬영 장치(100)로부터 전방 영상과 후방 영상을 각각 획득한다(S410).
그리고, 전방 영상 수집부(210)는 수신한 전방 영상으로부터 차로 정보를 추출한다(S420).
만일, 복수의 전방 촬영 장치(110)를 통해 각 차로의 전방 영상을 개별 수집한 경우, 각각의 전방 촬영 장치(110)가 전방 영상과 함께 제공하는 차로 정보를 그대로 활용한다.
또한, 전방 촬영 장치(110)를 통해 복수 차로가 포함된 전방 영상을 수집한 경우, 전방 영상 수집부(210)는 전방 영상을 영상 처리하여 차선을 인식하고 차선을 기초로 전방 영상의 각 차로 정보를 추출한다.
다음, 제어부(230)는 차량의 차로 정보를 이용하여 전방 영상을 차로 순으로 배열한다(S430).
여기서, 복수 차로가 포함된 전방 영상의 경우, 영상 분할부(250)는 차로 별로 전방 영상을 분할하여 복수의 분할 영상을 생성하여 제어부(230)로 전달하고, 제어부(230)는 복수의 분할 영상을 차로 순으로 배열한다.
도 5a 및 도 5b는 복수 차로를 포함하여 촬영된 전방 영상과 후방 영상을 각각 나타낸다. 도 5a를 참조하면, 영상 분할부(220)는 전방 영상의 복수 차선을 기준으로, 오른쪽 차로에서 왼쪽 방향으로 차로를 검출 및 분할할 수 있다. 즉, 영상 분할부(250)는 전방 영상 내 차선을 이용하여 가상 차로 범위를 설정하고, 이를 이용하여 제일 오른쪽 차로부터 왼쪽 방향으로 한 차로씩 순차적으로 증가시켜 차량의 차로를 분할할 수 있다.
한편, 본 발명의 실시 예에서는 전방 영상에 대해 차로를 분할하였지만, 후방 영상에 대해 차로를 분할할 수도 있다. 이 경우 전방 영상의 차로 분할과는 반대로, 후방 영상에서는 도 5b와 같이 제일 왼쪽 차로가 1차로가 되므로, 차선을 기준으로 오른쪽 방향으로 한 차로씩 증가시켜 차량의 차로를 분할할 수 있다.
이후, 화면 출력부(240)는 배열한 차량의 전방 영상(또는 영상 분할이 있는 경우는 분할 영상)과 함께, 후방 영상을 출력하는데, 배열한 전방 영상을 후방 영상의 차로에 대응하여 배열한 상태로 템플릿 상에 출력한다(S440). 즉, 후방 영상이 전방 영상에 대응하는 영상이므로, 후방 영상의 차로에 대응하도록 전방 영상(또는 분할 영상) 각각을 배열하여 화면 출력부(240)를 통해 출력하게 된다.
이와 같이 S410 내지 S440 단계까지는 전방 영상을 차로에 기초하여 분할한 이후에 후방 영상 내의 차로와 대응하는 위치에 전방 영상을 출력하는 과정을 설명한 것이다. 이 경우, 차로 정보만을 기초로 전방 영상과 후방 영상을 매칭하여 제공하는 것이기 때문에 영상 내 차량의 특징을 분석하는 과정이 불필요하지만, 동일 차로의 전/후방 영상을 효과적으로 제공함으로써, 전/후방 영상 내 차량 식별력을 크게 높일 수 있다.
또한 전방 영상의 영상 처리 결과 차량번호가 인식되지 않는 차량이 발견되는 경우, 소정 시차로 촬영된 후방 영상 내 차량 중에서 그에 대응하는 차량의 후방 영상을 추정하여 제공할 필요성이 있다. 즉, 본 발명의 실시 예에 따른 차량 영상 제공 장치(200)는 전방에서 차량 번호가 미인식된 차량의 경우 후방 영상에 나타난 후면 번호판을 통해 번호 인식을 할 수 있다.
이하에서는 도 6을 통하여 전방 영상과 후방 영상 간의 차량의 특징 정보를 이용하여 후방 영상 내 차량 중에서 해당 차량을 추정하는 추가적인 과정에 대하여 설명한다.
도 6은 본 발명의 제2 실시예에 따른 차량 영상 제공 장치의 차량 영상 제공 방법을 나타낸 도면이다.
먼저, 도 6에서 S610 내지 S640 단계는 앞서 도 4에서 설명한 S440 내지 S440 단계의 내용과 대응하는 것으로 중복되는 설명은 생략한다.
S640 단계 이후, 특징 검출부(260)는 기 저장한 영상 처리 알고리즘을 이용하여 전방 영상과 후방 영상을 각각 분석하여 특징 정보를 검출하고, 검출한 특징 정보를 추정부(270)로 제공한다(S650).
그러면, 추정부(270)는 두 영상 간의 특징 정보를 비교하여, 후방 영상 내 포함된 차량 중에서 전방 영상에 포함된 차량을 추정한다(S660).
추정부(270)는 전방 영상 내 차량 색상, 차량 번호, 차종 중 적어도 하나의 특징을 후방 영상에 촬영된 각 차량의 해당 특징 비교한 후, 소정 범위 이상 또는 소정 개수 이상의 특징이 일치하거나 가장 일치하는 차량을 추정하여 제공할 수 있다.
예를 들어, 전방 번호판의 일부만을 가린 차량의 경우 전체 차량번호 중 일부는 인식될 수 있기 때문에, 추정부(270)는 특징 정보들 중 차량 번호만을 이용하여 전부 또는 일부가 일치하는 차량을 추정 차량으로 제공할 수 있다. 또한, 번호판을 모두 가린 차량의 경우는 후방 영상 내 차량 중에서 차종이나 색상 등의 정보 중 적어도 하나가 일치하는 차량을 추정 차량으로 제공할 수 있다. 물론, 추정된 차량이 복수 개이면 복수의 차량을 추정 차량의 후보로 제공할 수 있다.
이후, 화면 출력부(240)는 추정된 차량의 후방 영상을 전방 영상에 대응하여 템플릿 상에 추가로 출력한다(S670).
예를 들어, 추정부(270)는 특징 정보들 중 차량 색상 또는 차종을 이용하여 후방 영상을 추정하는 경우, 전방 영상을 촬영한 시점부터 설정된 시간 내에 촬영된 후방 영상 내에서, 전방 영상의 차량과 색상 또는 차종이 일치하는 차량을 추정 차량으로 제공할 수 있다.
또한, 추정부(270)는 특징 정보들 중 차로를 이용하여 후방 영상을 추정하는 경우에, 전방 영상을 촬영한 시점으로부터 설정된 시간 내에 촬영한 차량의 후방 영상을 시간의 경과에 따라 차선별로 제공할 수 있다. 즉, 추정부(270)는 전방 영상의 차량을 촬영한 후, 설정된 시간 내에 해당 차로를 사용하는 모든 차량의 후방 영상을 추정하여 템플릿 상에 출력한다.
물론, 추정부(270)는 특징 정보들의 차로뿐만 아니라, 그 외 정보들을 활용하여 보다 정확하게 후방 영상을 추정하고, 이를 제공할 수도 있다.
이와 같이, 본 발명에 따른 추정부(270)는 관리자의 설정이나, 설치 환경(차로 개수, 도로 상태 등)에 따라 후방 영상 추정을 위해 이용되는 특징 정보를 달리 설정하여 보다 정확하게 추정 영상을 제공할 수 있다.
이상과 같은 본 발명에 따른 차량 영상 제공 장치 및 그 방법에 의하면, 각 영상의 특징 정보를 기초로 전방 영상과 후방 영상을 효율적으로 매칭하여 관리자에게 제공함은 물론, 차량 번호판의 고의적인 번호판 가림이나 훼손 등에 의해 인식되지 못하는 차량을 효과적으로 검색/추정할 수 있는 이점이 있다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
100: 촬영 장치 110: 전방 촬영 장치
120: 후방 촬영 장치 200: 차량 영상 제공 장치
210: 전방 영상 수집부 220: 후방 영상 수집부
230: 제어부 240: 화면 출력부
250: 영상 분할부 260: 특징 검출부
270: 추정부 280: 판단부
290: 검색부
120: 후방 촬영 장치 200: 차량 영상 제공 장치
210: 전방 영상 수집부 220: 후방 영상 수집부
230: 제어부 240: 화면 출력부
250: 영상 분할부 260: 특징 검출부
270: 추정부 280: 판단부
290: 검색부
Claims (18)
- 도로의 소정 지점에서 촬영한 차량의 영상을 제공하는 장치에 있어서,
복수의 차로를 포함하여 촬영된 상기 차량에 대한 제1 영상을 획득하고, 상기 제1 영상으로부터 차로 정보를 추출하는 제1 영상 수집부,
상기 제1 영상을 상기 차로 별로 각각 분할하는 영상 분할부;
복수의 차로를 포함하여 촬영된 상기 차량에 대한 제2 영상을 획득하는 제2 영상 수집부,
상기 차로 정보를 이용하여, 상기 분할한 제1 영상을 각각 상기 제2 영상의 차로에 매칭되도록 배열하는 제어부, 그리고
상기 배열된 제1 영상을 각각 상기 제2 영상의 차로에 대응하여 출력하는 화면 출력부를 포함하며,
상기 제1 영상 및 제2 영상 각각은,
차량의 전방 또는 후방을 촬영한 영상이며, 서로 상이한 방향에서 촬영한 영상인 차량 영상 제공 장치. - 청구항 1에 있어서,
상기 화면 출력부는,
상기 제2 영상을 출력하는 제1 설정 영역과,
상기 제1 설정 영역에 포함된 차로에 대응하는 위치에 상기 배열된 제1 영상을 각각 배치하여 출력하는 복수의 제2 설정 영역을 포함하는 차량 영상 제공 장치. - 삭제
- 삭제
- 청구항 2에 있어서,
상기 제1 영상 및 제2 영상을 영상 처리하여 각각 차량의 제1 특징 정보 및 제2 특징 정보를 검출하는 특징 검출부,
상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 제2 영상 내에 촬영된 적어도 하나의 차량 중에서 상기 제1 영상에 대응하는 차량을 추정하는 추정부를 더 포함하는 차량 영상 제공 장치. - 청구항 5에 있어서,
상기 화면 출력부는,
상기 제2 설정 영역과 평행하게 배열되며, 상기 추정된 차량의 제2 영상을 상기 제2 설정 영역에 대응하여 출력하는 제3 설정 영역을 더 포함하는 차량 영상 제공 장치. - 청구항 5에 있어서,
상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 소정 지점의 통과를 기준으로 상기 추정된 차량의 차로 변경 여부를 판단하는 판단부를 더 포함하고,
상기 화면 출력부는,
상기 추정된 차량이 차로를 변경한 것으로 판단되면, 상기 변경된 차로에 대응하는 제2 설정 영역 상에 상기 차량의 제1 영상을 출력하는 차량 영상 제공 장치. - 청구항 5에 있어서,
상기 제1 특징 정보 및 제2 특징 정보는,
차량 번호판의 크기, 색상, 형태, 차량 번호, 상기 차량의 종류, 상기 차량의 색상, 상기 차량의 차로 중 적어도 하나를 포함하는 차량 영상 제공 장치. - 청구항 1에 있어서,
상기 제1 영상으로부터 검출된 특징 정보를 저장하는 저장부, 및
상기 제2 영상으로부터 검출된 특징 정보에 대응하는 제1 영상을 상기 저장부에서 검색하고, 상기 제1 영상이 검색되지 않으면, 제1 영상을 미인식 차량 영상으로 분류하는 검색부
를 더 포함하는 차량 영상 제공 장치 - 도로의 소정 지점에서 촬영한 차량의 영상을 제공하는 방법에 있어서,
복수의 차로를 포함하여 촬영된 상기 차량에 대한 제1 영상과, 복수의 차로를 포함하여 촬영된 상기 차량에 대한 제2 영상을 각각 획득하는 단계,
상기 제1 영상으로부터 차로 정보를 추출하여 상기 제1 영상을 상기 차로 별로 각각 분할하는 단계;
상기 차로 정보를 이용하여, 상기 분할한 제1 영상을 각각 상기 제2 영상의 차로에 매칭되도록 배열하는 단계, 그리고
상기 배열된 제1 영상을 각각 상기 제2 영상의 차로에 대응하여 출력하는 단계를 포함하며,
상기 제1 영상 및 제2 영상 각각은,
차량의 전방 또는 후방을 촬영한 영상이며, 서로 상이한 방향에서 촬영한 영상인 차량 영상 제공 방법. - 청구항 10에 있어서,
상기 출력하는 단계는,
상기 제2 영상을 출력하는 제1 설정 영역과,
상기 제1 설정 영역에 포함된 차로에 대응하는 위치에 상기 배열된 제1 영상을 각각 배치하여 출력하는 복수의 제2 설정 영역을 출력하는 차량 영상 제공 방법. - 삭제
- 삭제
- 청구항 11에 있어서,
상기 제1 영상 및 제2 영상을 영상 처리하여 각각 차량의 제1 특징 정보 및 제2 특징 정보를 검출하는 단계, 및
상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 제2 영상 내에 촬영된 적어도 하나의 차량 중에서 상기 제1 영상에 대응하는 차량을 추정하는 단계를 더 포함하는 차량 영상 제공 방법. - 청구항 14에 있어서,
상기 출력하는 단계는,
상기 제2 설정 영역과 평행하게 배열되며, 상기 추정된 차량의 제2 영상을 상기 제2 설정 영역에 대응하여 출력하는 제3 설정 영역을 더 출력하는 차량 영상 제공 방법. - 청구항 14에 있어서,
상기 제1 특징 정보 및 상기 제2 특징 정보를 비교하여, 상기 소정 지점의 통과를 기준으로 상기 추정된 차량의 차로 변경 여부를 판단하는 단계를 더 포함하고,
상기 출력하는 단계는,
상기 추정된 차량이 차로를 변경한 것으로 판단되면, 상기 변경된 차로에 대응하는 제2 설정 영역 상에 상기 차량의 제1 영상을 출력하는 차량 영상 제공 방법. - 청구항 14에 있어서,
상기 제1 특징 정보 및 제2 특징 정보는,
차량 번호판의 크기, 색상, 형태, 차량 번호, 상기 차량의 종류, 상기 차량의 색상, 상기 차량의 차로 중 적어도 하나를 포함하는 차량 영상 제공 방법. - 청구항 10에 있어서,
상기 제1 영상으로부터 검출된 특징 정보를 저장하는 단계, 및
상기 제2 영상으로부터 검출된 특징 정보에 대응하는 제1 영상을 상기 저장된 정보로부터 검색하고, 상기 제1 영상이 검색되지 않으면, 제1 영상을 미인식 차량 영상으로 분류하는 단계를 더 포함하는 차량 영상 제공 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160043420A KR101665961B1 (ko) | 2016-04-08 | 2016-04-08 | 차량 영상 제공 장치 및 그 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160043420A KR101665961B1 (ko) | 2016-04-08 | 2016-04-08 | 차량 영상 제공 장치 및 그 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101665961B1 true KR101665961B1 (ko) | 2016-10-14 |
Family
ID=57157187
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020160043420A KR101665961B1 (ko) | 2016-04-08 | 2016-04-08 | 차량 영상 제공 장치 및 그 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101665961B1 (ko) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106504554A (zh) * | 2016-09-30 | 2017-03-15 | 乐视控股(北京)有限公司 | 识别交通灯状态信息的方法及装置 |
KR101870229B1 (ko) * | 2018-02-12 | 2018-06-22 | 주식회사 사라다 | 차로 위치 결정 시스템 및 그 방법 |
KR20210064492A (ko) * | 2019-11-25 | 2021-06-03 | 주식회사 딥비전 | 교행 다차로에서의 이상차량 인식방법 및 장치 |
KR20210151415A (ko) * | 2020-06-05 | 2021-12-14 | 한국건설기술연구원 | 등주식 가로등 구조물을 활용한 도로 돌발상황 검지 시스템 및 방법 |
KR102429312B1 (ko) * | 2021-08-09 | 2022-08-04 | 주식회사 영국전자 | 차량 단속 장치 및 방법 |
KR102510765B1 (ko) * | 2022-01-04 | 2023-03-17 | 주식회사 아이에스앤로드테크 | 이륜차 단속 시스템 및 방법. |
KR102558936B1 (ko) * | 2022-12-27 | 2023-07-25 | 주식회사 아이에스앤로드테크 | 이륜차 단속 시스템 및 방법. |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004056497A (ja) * | 2002-07-19 | 2004-02-19 | Sumitomo Electric Ind Ltd | 画像処理装置、画像処理方法及び車両監視システム |
JP2013196365A (ja) * | 2012-03-19 | 2013-09-30 | Fujitsu Ltd | 抽出装置、抽出プログラム及び抽出方法 |
JP2014130435A (ja) * | 2012-12-28 | 2014-07-10 | Fujitsu Ltd | 情報処理装置及び方法 |
KR20160000990A (ko) * | 2014-06-25 | 2016-01-06 | 서울여자대학교 산학협력단 | 다차로 기반의 차량 촬영장치 및 그 제어방법 |
-
2016
- 2016-04-08 KR KR1020160043420A patent/KR101665961B1/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004056497A (ja) * | 2002-07-19 | 2004-02-19 | Sumitomo Electric Ind Ltd | 画像処理装置、画像処理方法及び車両監視システム |
JP2013196365A (ja) * | 2012-03-19 | 2013-09-30 | Fujitsu Ltd | 抽出装置、抽出プログラム及び抽出方法 |
JP2014130435A (ja) * | 2012-12-28 | 2014-07-10 | Fujitsu Ltd | 情報処理装置及び方法 |
KR20160000990A (ko) * | 2014-06-25 | 2016-01-06 | 서울여자대학교 산학협력단 | 다차로 기반의 차량 촬영장치 및 그 제어방법 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106504554A (zh) * | 2016-09-30 | 2017-03-15 | 乐视控股(北京)有限公司 | 识别交通灯状态信息的方法及装置 |
KR101870229B1 (ko) * | 2018-02-12 | 2018-06-22 | 주식회사 사라다 | 차로 위치 결정 시스템 및 그 방법 |
KR20210064492A (ko) * | 2019-11-25 | 2021-06-03 | 주식회사 딥비전 | 교행 다차로에서의 이상차량 인식방법 및 장치 |
KR102306789B1 (ko) * | 2019-11-25 | 2021-10-01 | 주식회사 딥비전 | 교행 다차로에서의 이상차량 인식방법 및 장치 |
KR20210151415A (ko) * | 2020-06-05 | 2021-12-14 | 한국건설기술연구원 | 등주식 가로등 구조물을 활용한 도로 돌발상황 검지 시스템 및 방법 |
KR102435281B1 (ko) * | 2020-06-05 | 2022-08-23 | 한국건설기술연구원 | 등주식 가로등 구조물을 활용한 도로 돌발상황 검지 시스템 및 방법 |
KR102429312B1 (ko) * | 2021-08-09 | 2022-08-04 | 주식회사 영국전자 | 차량 단속 장치 및 방법 |
KR102510765B1 (ko) * | 2022-01-04 | 2023-03-17 | 주식회사 아이에스앤로드테크 | 이륜차 단속 시스템 및 방법. |
KR102558936B1 (ko) * | 2022-12-27 | 2023-07-25 | 주식회사 아이에스앤로드테크 | 이륜차 단속 시스템 및 방법. |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101665961B1 (ko) | 차량 영상 제공 장치 및 그 방법 | |
CN109784162B (zh) | 一种行人行为识别及轨迹跟踪方法 | |
KR101647370B1 (ko) | 카메라 및 레이더를 이용한 교통정보 관리시스템 | |
KR101758576B1 (ko) | 물체 탐지를 위한 레이더 카메라 복합 검지 장치 및 방법 | |
KR101971878B1 (ko) | 다차로 환경에서의 딥러닝 기반 차량번호인식 기술을 활용한 영상감시 시스템 및 방법 | |
KR101935399B1 (ko) | 심층 신경망 알고리즘 기반 광역 다중 객체 감시 시스템 | |
CN105702048B (zh) | 基于行车记录仪的高速公路前车违法占道识别***及方法 | |
KR102031503B1 (ko) | 다중 객체 검출 시스템 및 방법 | |
CN103366154B (zh) | 可重配置的畅通路径检测*** | |
KR101326943B1 (ko) | 추월차량 경고 시스템 및 추월차량 경고 방법 | |
JP6794243B2 (ja) | 物体検出装置 | |
KR101742490B1 (ko) | 끼어들기 위반차량 단속 시스템 및 그 방법 | |
KR102491091B1 (ko) | 채증영상클립 생성 방법과, 이를 이용한 이륜차 및 사륜차 일체형 무인교통단속 시스템 | |
KR102001002B1 (ko) | 딥러닝 기반 번호 인식 시스템 | |
KR102282800B1 (ko) | 라이다와 영상카메라를 이용한 멀티 표적 추적 방법 | |
KR102197449B1 (ko) | 구간단속지점 내에서 연계적 일정구간별 단속을 수행하는 단속시스템 | |
KR102332517B1 (ko) | 영상감시 제어장치 | |
KR101542564B1 (ko) | 존-검지 체계 기반 교통안전 관리 시스템 | |
KR102018123B1 (ko) | 레이저 스캐너를 이용한 차량 감지 장치 | |
KR102465167B1 (ko) | 번호인식률을 높인 후방번호판을 활용한 차량번호 인식시스템 | |
KR20120067890A (ko) | 영상분석장치 및 그 방법 | |
KR101210615B1 (ko) | 불법유턴 차량 단속 시스템 | |
KR101719799B1 (ko) | 교통정보 감응형 cctv 모니터링 시스템 | |
KR20150018990A (ko) | 운전 주의 정보 안내 장치 및 방법 | |
KR102234768B1 (ko) | 다기능 차량 검지 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |