KR101614247B1 - 파노라마 영상의 접합면 표시장치 - Google Patents

파노라마 영상의 접합면 표시장치 Download PDF

Info

Publication number
KR101614247B1
KR101614247B1 KR1020150070416A KR20150070416A KR101614247B1 KR 101614247 B1 KR101614247 B1 KR 101614247B1 KR 1020150070416 A KR1020150070416 A KR 1020150070416A KR 20150070416 A KR20150070416 A KR 20150070416A KR 101614247 B1 KR101614247 B1 KR 101614247B1
Authority
KR
South Korea
Prior art keywords
image
images
degree
synthesized
joint surface
Prior art date
Application number
KR1020150070416A
Other languages
English (en)
Inventor
류춘우
박재홍
Original Assignee
주식회사 와이즈오토모티브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 와이즈오토모티브 filed Critical 주식회사 와이즈오토모티브
Priority to KR1020150070416A priority Critical patent/KR101614247B1/ko
Application granted granted Critical
Publication of KR101614247B1 publication Critical patent/KR101614247B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2622—Signal amplitude transition in the zone between image portions, e.g. soft edges
    • H04N5/23238—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 복수의 이미지에서 서로 중첩되는 영역을 합성한 접합부의 불일치도를 산출하여 불일치도가 높으면 임의의 영상 영역을 확대시켜 표시하는 파노라마 영상의 접합면 표시장치를 제공하는 것을 목적으로 한다. 이를 위해 본 발명은 본 발명은 파노라마 영상의 접합면 표시장치로서, 차량의 주변을 촬영하는 복수의 카메라; 상기 복수의 카메라가 촬영한 복수의 이미지로부터 임의의 제 1 이미지, 제 2 이미지 및 제 3 이미지가 서로 중첩되는 영역에 접합면을 형성한 파노라마 이미지를 합성하고, 상기 접합면의 불일치도를 산출하여 불일치도가 미리 설정된 불일치 판단용 기준값보다 높으면, 상기 접합면을 갈라내고, 상기 제 1 내지 제 3 이미지 중 어느 하나의 이미지에서 중첩되는 영역을 줌인(Zoom in)하여 합성한 파노라마 이미지를 출력하는 제어부; 및 상기 제어부가 출력하는 파노라마 이미지를 표시하는 디스플레이부를 포함한다. 따라서 본 발명은 복수의 이미지에서 서로 중첩되는 영역을 합성한 접합부의 불일치도를 산출하여 불일치도가 높으면 임의의 영상 영역을 확대시켜 표시함으로써, 불일치되는 영역의 왜곡과, 접합면에서 물체가 사라지는 것을 개선할 수 있는 장점이 있다.

Description

파노라마 영상의 접합면 표시장치{APPARATUS FOR DISPLAYING IMAGE MATCHING REGION OF PANORAMA IMAGE}
본 발명은 파노라마 영상의 접합면 표시장치에 관한 발명으로서, 더욱 상세하게는 복수의 이미지에서 서로 중첩되는 영역을 합성한 접합부의 불일치도를 산출하여 불일치도가 높으면 임의의 영상 영역을 확대시켜 표시하는 파노라마 영상의 접합면 표시장치에 관한 것이다.
일반적으로 차량에는 안전 운전을 위한 수단으로서, 측면 도어에 설치되어 측면 후방의 시야 확보를 위해 설치된 사이드 미러(side mirror)와 자동차 실내의 루프 라이닝에 설치되어 자동차의 후방 시야 확보를 위해 설치된 룸 미러(room mirror)가 있다.
이러한 미러에 의해 일정 수준까지는 측면 및 후방상황을 파악할 수 있으나, 후방상황을 인지하는 데 불충분한 지역, 즉 미러에 의해 보이지 않는 사각지대도 발생될 수 있어 이러한 사각지대에 사물 또는 사람이 위치하고 있는 경우에는 차량에 큰 손상을 입을 수 있음은 물론 인명피해까지 발생할 수 있다.
이러한 차량 후방의 사각 지대에서 발생하는 사고를 방지하기 위해서 차량에는 후방 감시를 위한 후방 감시 카메라를 설치하고, 내비게이션이나 별도의 디스플레이 장치를 통해 차량 후방의 영상을 화면에 표시해주어, 운전자가 좀 더 용이하면서도 정확하게 차량 후방의 상황을 인지하여, 안전 운전을 도모할 수 있도록 해주는 후방감시 시스템에 대한 기술이 많이 제안되었다.
그러나 상기와 같은 기존의 차량에 장착된 후방감시 시스템은 후방 감시 영상의 디스플레이를 위해 별도의 디스플레이 장치를 사용해야하므로, 디스플레이 장치의 구비로 별도 비용이 발생하는 단점이 있으며, 디스플레이 장치의 설치 공간이 필요하고 차량 미관에도 좋지 않은 영향을 주는 단점이 있다.
주지한 바와 같은 기존 차량에 장착된 후방감시 시스템에서 발생하는 단점을 해결하기 위해서 차량에 필수적으로 구비되는 룸미러를 활용하여 후방감시 영상을 표시해주는 방법도 제안되고 있다.
룸미러를 활용한 후방감시 영상 표시에 대한 종래기술이, 대한민국특허청 공개특허공보 공개번호 10-2002-0009711호(2002.2.2. 공개)(발명의 명칭: 룸미러를 이용한 영상구현장치, 이하 종래기술 1이라고 함)와, 대한민국특허청 등록특허공보 등록번호 10-0792933호(2008.01.08. 공고)(발명의 명칭: 자동차용 룸미러 및 이를 구비한 후방감지시스템, 이하 종래기술 2라고 함)에 개시된다.
개시된 종래기술 1은 차량의 실내에 구비된 룸미러를 통해 차량의 주행조건에 따라 차량의 후방 상태나 공중파 방송을 시청하게 하여, 후방 시야의 사각지대를 제거할 뿐만 아니라 차량 설계시 고려되지 않은 기기의 장착에 따른 불편을 해소하게 된다.
또한, 개시된 종래기술 2는 룸미러 하우징, 룸미러 하우징의 전면에 설치되는 하프미러, 상기 하프미러의 후면에 설치되며 영구자석이 구비된 디스플레이 패널 및 상기 영구자석에 대응되는 전자석으로 구성되어, 자동차의 후방카메라에 의해 촬영된 영상을 차량용 룸미러의 내부 디스플레이 패널에 출력함으로써, 운전자가 후진시 손쉽게 후방 화면을 주시할 수 있어 사고예방 및 차량의 파손을 막아주게 된다.
그러나 이러한 종래의 기술들은 단순히 후방카메라를 통해 입력되는 영상만을 디스플레이하는 것으로 두 개 이상의 이미지를 합성하여 출력하는 경우 이미지의 왜곡으로 인한 정확한 이미지의 출력이 어려운 문제점이 있다.
또한, 합성하는 과정에서 접합면에 포함된 사물이 사라지는 문제점이 있다.
1. 대한민국특허청 공개특허공보 공개번호 10-2002-0009711호(발명의 명칭: 룸미러를 이용한 영상구현장치) 2. 대한민국특허청 등록특허공보 등록번호 10-0792933호(발명의 명칭: 자동차용 룸미러 및 이를 구비한 후방감지시스템)
이러한 문제점을 해결하기 위하여, 본 발명은 복수의 이미지에서 서로 중첩되는 영역을 합성한 접합부의 불일치도를 산출하여 불일치도가 높으면 임의의 영상 영역을 확대시켜 표시하는 파노라마 영상의 접합면 표시장치를 제공하는 것을 목적으로 한다.
상기한 목적을 달성하기 위하여 본 발명은 파노라마 영상의 접합면 표시장치로서, 차량의 주변을 촬영하는 복수의 카메라; 상기 복수의 카메라가 촬영한 복수의 이미지로부터 임의의 제 1 이미지, 제 2 이미지 및 제 3 이미지가 서로 중첩되는 영역에 접합면을 형성한 파노라마 이미지를 합성하고, 상기 접합면의 불일치도를 산출하여 불일치도가 미리 설정된 불일치 판단용 기준값보다 높으면, 상기 접합면을 갈라내고, 상기 제 1 내지 제 3 이미지 중 어느 하나의 이미지에서 중첩되는 영역을 줌인(Zoom in)하여 합성한 파노라마 이미지를 출력하는 제어부; 및 상기 제어부가 출력하는 파노라마 이미지를 표시하는 디스플레이부를 포함한다.
또한, 본 발명에 따른 상기 제어부는 카메라가 촬영한 복수의 이미지 중에서 합성 대상인 제 1 내지 제 3 이미지를 입력받는 영상 입력부; 상기 입력된 제 1 내지 제 3 이미지중에서 제 1 및 제 2 이미지가 서로 중첩되는 영역에 접합면을 형성한 파노라마 이미지를 합성하는 이미지 합성부; 상기 합성된 파노라마 이미지에서 접합면의 불일치도를 산출하는 불일치도 연산부; 및 상기 산출된 접합면의 불일치도를 미리 설정된 불일치 판단용 기준값과 비교하여 상기 불일치도가 기준값보다 크면 상기 접합면을 갈라내고, 상기 제 1 내지 제 3 이미지 중 어느 하나의 이미지에서 서로 중첩되는 영역을 줌인하여 상기 접합면에 합성시킨 파노라마 이미지를 출력하는 이미지 보정부를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 상기 제 1 이미지와 제 2 이미지는 일부 영역만 중첩되는 이미지이고, 상기 제 3 이미지는 제 1 및 제 2 이미지가 중첩되는 영역을 포함한 이미지인 것을 특징으로 한다.
또한, 본 발명에 따른 상기 줌인은 제 1 이미지 또는 제 2 이미지 중 어느 하나의 이미지에 포함된 중첩 영역이 합성되도록 하는 것을 특징으로 한다.
또한, 본 발명에 따른 상기 줌인은 제 1 및 제 2 이미지의 중첩되는 영역이 포함된 제 3 이미지가 합성되도록 하는 것을 특징으로 한다.
또한, 본 발명에 따른 상기 이미지 보정부는 상기 불일치도가 기준값보다 작으면, 상기 접합면을 포함한 파노라마 이미지가 출력되도록 하는 것을 특징으로 한다.
또한, 본 발명에 따른 상기 불일치도는 상기 합성된 접합면과 상기 입력된 이미지 중에서 상기 중첩되는 영역이 포함된 제 3 이미지를 레퍼런스 이미지로 비교하여 색상 및 명암 중 적어도 하나의 편차를 산출한 값, 중첩되는 동일 영역의 픽셀 값을 빼서 산출한 크기 값, 접합부의 좌측 및 우측에 위치한 이미지의 픽셀 값의 편차의 합산 값이거나 또는 상측 및 하측에 위치한 이미지의 픽셀 값의 편차의 합산 값, 접합부의 좌측 및 우측에 위치한 이미지의 명암도 차이 값이거나 또는 상측 및 하측에 위치한 이미지의 명암도 차이 값, 접합부 영역에서 에지필터(Edge Filter)로 나타나는 에지 값 중 적어도 하나를 산출하는 것을 특징으로 한다.
본 발명은 복수의 이미지에서 서로 중첩되는 영역을 합성한 접합부의 불일치도를 산출하여 불일치도가 높으면 임의의 영상 영역을 확대시켜 표시함으로써, 불일치되는 영역의 왜곡과, 접합면에서 물체가 사라지는 것을 개선할 수 있는 장점이 있다.
도 1 은 본 발명에 따른 파노라마 영상의 접합면 표시장치의 구성을 나타낸 블록도.
도 2 는 본 발명에 따른 파노라마 영상의 접합면 표시장치의 제어부 구성을 나타낸 블록도.
도 3 은 본 발명에 따른 파노라마 영상의 접합면 표시장치의 이미지 합성과정을 나타낸 예시도.
도 4 는 본 발명에 따른 파노라마 영상의 접합면 표시장치의 이미지 합성과정을 나타낸 다른 예시도.
도 5 는 본 발명에 따른 파노라마 영상의 접합면 표시장치의 합성전 이미지를 나타낸 예시도.
도 6 은 본 발명에 따른 파노라마 영상의 접합면 표시장치를 이용한 합성후 이미지를 나타낸 예시도.
도 7 은 본 발명에 따른 파노라마 영상의 접합면 표시장치의 이미지 합성과정을 나타낸 또 다른 예시도.
이하, 첨부된 도면을 참조하여 본 발명에 따른 파노라마 영상의 접합면 표시장치의 바람직한 실시예를 상세하게 설명한다.
도 1은 본 발명에 따른 파노라마 영상의 접합면 표시장치의 구성을 나타낸 블록도이고, 도 2는 본 발명에 따른 파노라마 영상의 접합면 표시장치의 제어부 구성을 나타낸 블록도이다.
도 1 및 도 2에 나타낸 바와 같이, 본 발명에 따른 파노라마 영상의 접합면 표시장치는 차량에 설치되어 주변을 촬영하는 복수의 카메라(110, 120, 130, 140)와, 제어부(150)와, 디스플레이부(160)를 포함하여 구성된다.
상기 복수의 카메라(110, 120, 130, 140)는 차량의 좌측을 촬영하는 제 1 카메라(110)와, 차량의 우측을 촬영하는 제 2 카메라(120)와, 차량의 후측을 촬영하는 제 3 카메라(130)와, 차량의 전측을 촬영하는 제 4 카메라(140)를 포함하여 구성된다.
상기 제 1 카메라(110)는 차량의 좌측 사이드미러에 설치되어 차량의 좌측과 좌측 후방을 촬영한 제 1 이미지(210)를 출력한다.
상기 제 2 카메라(120)는 차량의 우측 사이드미러에 설치되어 차량의 우측과 우측 후방을 촬영한 제 2 이미지(220)를 출력한다.
상기 제 3 카메라(130)는 차량의 중앙 또는 실내 상부에 설치되어 차량의 후방을 촬영하고, 바람직하게는 상기 제 1 및 제 2 이미지(210, 220)의 일부 영역을 포함하여 촬영하며, 광각 렌즈가 설치되어 넓은 화각이 형성될 수 있게 한다.
상기 제 4 전방 카메라(140)는 룸 미러(미도시) 등에 설치되어 차량의 전방을 촬영한 이미지를 출력한다.
상기 제 1 내지 제 4 카메라(110, 120, 130, 140)는 CMOS 센서, CCD 센서 등의 촬영소자를 이용한 카메라로 이루어지고, 이에 한정되는 것은 아니며 임의의 촬영 가능한 소자를 사용하는 것도 무방하다.
상기 제어부(150)는 제 1 내지 제 4 카메라(110, 120, 130, 140)가 촬영한 복수의 이미지로부터 합성 대상인 임의의 제 1 이미지(210), 제 2 이미지(220) 및 제 3 이미지(240)가 서로 중첩되는 영역에 접합면(230)을 형성한 파노라마 이미지(200)를 합성하고, 상기 접합면(230)의 불일치도를 산출하여 불일치도가 미리 설정된 불일치 판단용 기준값보다 높으면, 상기 접합면(230)을 갈라내고, 상기 제 1 내지 제 3 이미지(210, 220, 240) 중 어느 하나의 이미지에서 중첩되는 영역을 줌인(Zoom in)하여 합성한 파노라마 이미지를 출력하는 구성으로서, 영상 입력부(151)와, 이미지 합성부(152)와, 불일치도 연산부(153)와, 이미지 보정부(154)를 포함하여 구성된다.
상기 영상 입력부(151)는 제 1 내지 제 4 카메라(110, 120, 130, 140)가 촬영한 복수의 이미지 중에서 파노라마 이미지 합성을 위한 제 1 내지 제 3 이미지(210, 220, 240)를 입력받는다.
상기 이미지 합성부(152)는 상기 영상 입력부(151)로 입력된 제 1 내지 제 3 이미지(210, 220, 240)중에서 파노라마 이미지를 합성하기 위한 제 1 및 제 2 이미지(210, 220)를 이용하여 서로 중첩되는 영역에 접합면(230)을 형성한 파노라마 이미지(200)를 합성한다.
즉 상기 이미지 합성부(152)는 도 3과 같이, 파노라마 이미지(200)를 합성하기 위해 제 1 이미지(210)와 제 2 이미지(220)를 합성하고, 이때 제 1 및 제 2 이미지(210, 220) 간에 서로 중첩되는 영역에서 접합면(230)을 형성하며 합성되도록 한다.
상기 제 1 이미지(210)와 제 2 이미지(220)는 일부 영역만 중첩되는 이미지로서, 차량의 좌측 및 우측 후방을 촬영한 이미지이고, 상기 제 3 이미지(240)는 제 1 및 제 2 이미지(210, 220)가 중첩되는 영역을 포함한 이미지로서, 상기 제 1 및 제 2 이미지(210, 220)와 중첩되는 일부 영역을 포함한 후방을 촬영한 이미지이다.
또한, 상기 이미지 합성부(152)는 영상 입력부(151)로 입력된 이미지들을 미리 저장된 영상 보정 프로그램을 통해 왜곡 보정을 위한 파라미터들의 추출과, 인접 이미지간의 호모그래피 등을 계산하여 왜곡 보정과 함께 파노라마 이미지, 원근이 조절된 이미지 등으로 변환한다.
특히, 후방 이미지를 출력하는 제 3 카메라(130)의 경우 광각 렌즈(또는 어안 렌즈)와 같이 화각이 큰 렌즈가 설치되므로, 왜곡이 보정된 이미지로의 변환과정이 필요하다.
상기 불일치도 연산부(153)는 이미지 합성부(152)에서 합성된 파노라마 이미지(200)에서 접합면(230)의 불일치도를 산출한다.
상기 불일치도는 합성된 접합면(230)과, 상기 중첩되는 접합면(230)과 상기 입력된 이미지 중에서 상기 중첩되는 영역이 포함된 제 3 이미지(240)를 레퍼런스 이미지로 비교하여 상기 합성된 접합면(230)과 제 3 이미지(240)의 비교 영역 사이에 산출되는 색상의 편차값이거나, 명암의 편차값이다.
상기 색상 편차 또는 명함 편차가 작을 값을 가질수록 합성이 잘된 것으로 판단할 수 있다.
또한, 상기 불일치도는 상기 합성된 접합면(230)과 제 3 이미지(240)의 비교 영역 사이에 산출되는 색상의 편차값이거나, 명암의 편차값 이외에도, 중첩되는 동일 영역의 픽셀 값을 빼서 산출한 크기 값일 수도 있으며, 상기 크기 값이 큰 값을 가질수록 불일치도가 증가하는 것으로 판단할 수 있다.
또한, 상기 불일치도는 접합면(230)의 좌측 및 우측에 위치한 이미지의 픽셀 값의 편차의 합을 산출한 합산 값일 수도 있고, 접합면의 상측 및 하측에 위치한 이미지의 픽셀 값의 편차의 합을 산출한 합산 값일 수도 있으며, 상기 합산 값이 커질수록 불일치도가 증가하는 것으로 판단할 수 있다.
또한, 상기 불일치도는 색상의 문제를 줄이기 위해 접합부의 좌측 및 우측에 위치한 이미지에서 색을 뺀 명암도 차이를 산출한 차이 값일 수도 있고, 접합부의 상측 및 하측에 위치한 이미지에서 색을 뺀 명암도 차이를 산출한 차이 값일 수도 있으며, 상기 차이 값이 클수록 불일치도가 증가하는 것으로 판단할 수 있다.
또한, 상기 불일치도는 접합부 영역에서 에지필터(Edge Filter)로 나타나는 에지 값을 산출한 값일 수도 있으며, 상기 에지 값이 큰 경우에 접합부의 불일치도가 증가하는 것으로 판단할 수 있다.
상기 이미지 보정부(154)는 상기 불일치도 연산부(153)에서 산출된 접합면(230)의 불일치도를 미리 설정된 불일치 판단용 기준값과 비교하여 상기 불일치도가 기준값보다 크면 상기 접합면(230)을 갈라내고, 상기 제 1 내지 제 3 이미지(210, 220, 240) 중 어느 하나의 이미지에서 서로 중첩되는 영역을 줌인하여 상기 접합면(230)에 합성시킨 파노라마 이미지를 출력한다.
상기 줌인은 불일치도가 기준값보다 크면 접합면에서 물체가 사라지거나, 사각이 발생하거나 또는 한 물체가 두개로 보이는 더블 이미지가 발생하는 것을 해소하기 위해 접합면(230)을 갈라내고, 제 1 및 제 2 이미지(210, 220)의 중첩되는 영역이 포함된 영역에 돋보기를 배치한 것과 같이, 제 3 이미지(240)가 합성되도록 함으로써, 그 영역이 잘보일 수 있게 한다.
즉 도 4와 같이, 제 1 이미지(210)와 제 2 이미지(220) 사이의 접합면을 갈라내고, 그 영역에 제 3 이미지(240)를 합성시킨 파노라마 이미지(200)를 생성한다.
도 5 및 도 6은 본 발명에 따른 파노라마 영상의 접합면 표시장치의 합성전/후의 이미지를 나타낸 예시도로서, 제 1 이미지(210)와 제 2 이미지(220)를 합성하면, 접합면(230)에서 불일치가 발생하여 물체의 일부가 사라지게 된다.
이때, 상기 접합면(230)을 갈라내고, 상기 접합면(230)의 영역을 포함한 제 3 이미지를 합성함으로써, 사라진 물체 또는 장애물 등이 보여지게 된다.
또한, 상기 줌인은 불일치도가 기준값보다 크면, 도 7과 같이 제 1 이미지(210')의 중첩 영역(210'a) 일측이 더 보여질 수 있게 제 2 이미지(220')에 합성함으로써, 물체가 사라지는 것을 방지한 파노라마 이미지(200')를 제공할 수도 있다.
본 실시예에서는 제 1 이미지(210')의 일부를 확장시켜 중첩한 것을 설명하였지만, 제 2 이미지(220)의 일부를 확장시켜 중첩하는 합성을 통해 파노라마 이미지(200')를 합성하는 것도 가능하다..
또한, 상기 이미지 보정부(154)는 상기 불일치도가 기준값보다 작으면, 상기 접합면(230)을 포함한 파노라마 이미지(200)가 출력되도록 한다.
상기 디스플레이부(160)는 제어부(150)가 출력하는 파노라마 이미지(200)를 표시하는 구성으로서, LCD 등의 디스플레이수단으로 이루어지고, 바람직하게는 차량(200)의 룸 미러에 설치되어 디스플레이될 수 있게 한다.
따라서 복수의 이미지에서 서로 중첩되는 영역을 합성한 접합부의 불일치도를 산출하여 불일치도가 높으면 임의의 영상 영역을 확대시켜 표시함으로써, 불일치되는 영역의 왜곡과, 접합면에서 물체가 사라지는 것을 개선할 수 있게 된다.
상기와 같이, 본 발명의 바람직한 실시 예를 참조하여 설명하였지만 해당 기술 분야의 숙련된 당업자라면 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
또한, 본 발명의 실시예를 설명하는 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있으며, 상술된 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있으므로, 이러한 용어들에 대한 해석은 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
100 : 표시장치
110 : 제 1 카메라
120 : 제 2 카메라
130 : 제 3 카메라
140 : 제 4 카메라
150 : 제어부
151 : 영상 입력부
152 : 이미지 합성부
153 : 불일치도 연산부
154 : 이미지 보정부
160 : 디스플레이부
200, 200' : 파노라마 이미지
210, 210' : 제 1 이미지
220, 220' : 제 2 이미지
230 : 접합면
240 : 제 3 이미지

Claims (7)

  1. 차량의 주변을 촬영하는 복수의 카메라(110, 120, 130, 140);
    상기 복수의 카메라(110, 120, 130, 140)가 촬영한 복수의 이미지로부터 임의의 제 1 이미지(210), 제 2 이미지(220) 및 제 3 이미지(240)가 서로 중첩되는 영역에 접합면(230)을 형성한 파노라마 이미지(200)를 합성하고, 상기 접합면(230)의 불일치도를 산출하여 불일치도가 미리 설정된 불일치 판단용 기준값보다 높으면, 상기 접합면(230)을 갈라내고, 상기 제 1 내지 제 3 이미지(210, 220, 240) 중 어느 하나의 이미지에서 중첩되는 영역을 줌인(Zoom in)하여 합성한 파노라마 이미지를 출력하는 제어부(150); 및
    상기 제어부(150)가 출력하는 파노라마 이미지를 표시하는 디스플레이부(160)를 포함하는 파노라마 영상의 접합면 표시장치.
  2. 제 1 항에 있어서,
    상기 제어부(150)는 카메라(110, 120, 130, 140)가 촬영한 복수의 이미지 중에서 합성 대상인 제 1 내지 제 3 이미지(210, 220, 240)를 입력받는 영상 입력부(151);
    상기 입력된 제 1 내지 제 3 이미지(210, 220, 240)중에서 제 1 및 제 2 이미지(210, 220)가 서로 중첩되는 영역에 접합면(230)을 형성한 파노라마 이미지(200)를 합성하는 이미지 합성부(152);
    상기 합성된 파노라마 이미지(200)에서 접합면(230)의 불일치도를 산출하는 불일치도 연산부(153); 및
    상기 산출된 접합면(230)의 불일치도를 미리 설정된 불일치 판단용 기준값과 비교하여 상기 불일치도가 기준값보다 크면 상기 접합면(230)을 갈라내고, 상기 제 1 내지 제 3 이미지(210, 220, 240) 중 어느 하나의 이미지에서 서로 중첩되는 영역을 줌인하여 상기 접합면(230)에 합성시킨 파노라마 이미지를 출력하는 이미지 보정부(154)를 포함하는 것을 특징으로 하는 파노라마 영상의 접합면 표시장치.
  3. 제 2 항에 있어서,
    상기 제 1 이미지(210)와 제 2 이미지(220)는 일부 영역만 중첩되는 이미지이고, 상기 제 3 이미지(240)는 제 1 및 제 2 이미지가 중첩되는 영역을 포함한 이미지인 것을 특징으로 하는 파노라마 영상의 접합면 표시장치.
  4. 제 3 항에 있어서,
    상기 줌인은 제 1 이미지(210) 또는 제 2 이미지(220) 중 어느 하나의 이미지에 포함된 중첩 영역이 합성되도록 하는 것을 특징으로 하는 파노라마 영상의 접합면 표시장치.
  5. 제 3 항에 있어서,
    상기 줌인은 제 1 및 제 2 이미지(210, 220)의 중첩되는 영역이 포함된 제 3 이미지(240)가 합성되도록 하는 것을 특징으로 하는 파노라마 영상의 접합면 표시장치.
  6. 제 2 항에 있어서,
    상기 이미지 보정부(154)는 상기 불일치도가 기준값보다 작으면, 상기 접합면(230)을 포함한 파노라마 이미지(200)가 출력되도록 하는 것을 특징으로 하는 파노라마 영상의 접합면 표시장치.
  7. 제 1 항에 있어서,
    상기 불일치도는 상기 합성된 접합면과 입력된 이미지 중에서 상기 중첩되는 영역이 포함된 제 3 이미지를 레퍼런스 이미지로 비교하여 색상 및 명암 중 적어도 하나의 편차를 산출한 값, 중첩되는 동일 영역의 픽셀 값을 빼서 산출한 크기 값, 접합부의 좌측 및 우측에 위치한 이미지의 픽셀 값의 편차의 합산 값이거나 또는 상측 및 하측에 위치한 이미지의 픽셀 값의 편차의 합산 값, 접합부의 좌측 및 우측에 위치한 이미지의 명암도 차이 값이거나 또는 상측 및 하측에 위치한 이미지의 명암도 차이 값, 접합부 영역에서 에지필터(Edge Filter)로 나타나는 에지 값 중 적어도 하나를 산출하는 것을 특징으로 하는 파노라마 영상의 접합면 표시장치.
KR1020150070416A 2015-05-20 2015-05-20 파노라마 영상의 접합면 표시장치 KR101614247B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150070416A KR101614247B1 (ko) 2015-05-20 2015-05-20 파노라마 영상의 접합면 표시장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150070416A KR101614247B1 (ko) 2015-05-20 2015-05-20 파노라마 영상의 접합면 표시장치

Publications (1)

Publication Number Publication Date
KR101614247B1 true KR101614247B1 (ko) 2016-04-29

Family

ID=55915879

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150070416A KR101614247B1 (ko) 2015-05-20 2015-05-20 파노라마 영상의 접합면 표시장치

Country Status (1)

Country Link
KR (1) KR101614247B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101868057B1 (ko) * 2017-01-20 2018-06-18 재단법인대구경북과학기술원 파노라마 영상 생성 방법 및 그 장치
KR20190056292A (ko) * 2017-11-16 2019-05-24 엑시스 에이비 중첩 시야각을 갖는 제1 및 제2 이미지를 블렌딩하기 위한 방법, 장치 및 카메라
KR20200137214A (ko) * 2019-05-29 2020-12-09 현대모비스 주식회사 차량용 서라운드 뷰 영상 평가 장치 및 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020009711A (ko) 2000-07-26 2002-02-02 이계안 룸미러를 이용한 영상구현장치
JP2007328582A (ja) * 2006-06-08 2007-12-20 Matsushita Electric Ind Co Ltd 画像合成装置およびその方法
KR100792933B1 (ko) 2006-10-11 2008-01-08 현대자동차주식회사 자동차용 룸미러 및 이를 구비한 후방감지시스템
JP2009081666A (ja) * 2007-09-26 2009-04-16 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
JP2012023658A (ja) * 2010-07-16 2012-02-02 Toshiba Alpine Automotive Technology Corp 車両用画像表示装置
JP2014090349A (ja) * 2012-10-31 2014-05-15 Clarion Co Ltd 画像処理システム及び画像処理方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020009711A (ko) 2000-07-26 2002-02-02 이계안 룸미러를 이용한 영상구현장치
JP2007328582A (ja) * 2006-06-08 2007-12-20 Matsushita Electric Ind Co Ltd 画像合成装置およびその方法
KR100792933B1 (ko) 2006-10-11 2008-01-08 현대자동차주식회사 자동차용 룸미러 및 이를 구비한 후방감지시스템
JP2009081666A (ja) * 2007-09-26 2009-04-16 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
JP2012023658A (ja) * 2010-07-16 2012-02-02 Toshiba Alpine Automotive Technology Corp 車両用画像表示装置
JP2014090349A (ja) * 2012-10-31 2014-05-15 Clarion Co Ltd 画像処理システム及び画像処理方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101868057B1 (ko) * 2017-01-20 2018-06-18 재단법인대구경북과학기술원 파노라마 영상 생성 방법 및 그 장치
KR20190056292A (ko) * 2017-11-16 2019-05-24 엑시스 에이비 중첩 시야각을 갖는 제1 및 제2 이미지를 블렌딩하기 위한 방법, 장치 및 카메라
KR102154402B1 (ko) * 2017-11-16 2020-09-09 엑시스 에이비 중첩 시야각을 갖는 제1 및 제2 이미지를 블렌딩하기 위한 방법, 장치 및 카메라
KR20200137214A (ko) * 2019-05-29 2020-12-09 현대모비스 주식회사 차량용 서라운드 뷰 영상 평가 장치 및 방법
KR102566120B1 (ko) 2019-05-29 2023-08-11 현대모비스 주식회사 차량용 서라운드 뷰 영상 평가 장치 및 방법

Similar Documents

Publication Publication Date Title
JP5194679B2 (ja) 車両用周辺監視装置および映像表示方法
JP5321711B2 (ja) 車両用周辺監視装置および映像表示方法
JP4254887B2 (ja) 車両用画像表示システム
US20150042799A1 (en) Object highlighting and sensing in vehicle image display systems
US7825953B2 (en) Vehicular image display apparatus
US8279279B2 (en) Image processing apparatus
JP4195966B2 (ja) 画像表示制御装置
US20140114534A1 (en) Dynamic rearview mirror display features
JP5953824B2 (ja) 車両用後方視界支援装置及び車両用後方視界支援方法
JP7244488B2 (ja) 合成映像作成装置および合成映像作成方法並びに合成映像作成プログラム
JP5051263B2 (ja) 車両用後方視認システム
WO2014034364A1 (ja) 画像生成装置、画像表示システム、パラメータ取得装置、画像生成方法、およびパラメータ取得方法
US20050270500A1 (en) Monitoring apparatus
JP2007141098A (ja) 画像処理装置及び画像処理方法
JP2018052216A5 (ko)
JP2016168877A (ja) 車両用視認装置
KR101614247B1 (ko) 파노라마 영상의 접합면 표시장치
JP4830380B2 (ja) 車両周辺監視装置及び車両周辺監視方法
JP2020028027A (ja) 車両用周辺表示装置
KR101657673B1 (ko) 파노라마뷰 생성 장치 및 방법
JP2021027469A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP6293089B2 (ja) 後方モニタ
KR101750156B1 (ko) 차량의 파노라마 영상 표시장치 및 방법
CN216331763U (zh) 一种集成全景功能和bsd功能的智能汽车电子后视镜设备
CN104859542B (zh) 车载监控***及车载监控处理方法

Legal Events

Date Code Title Description
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190326

Year of fee payment: 4