KR20130124089A

KR20130124089A - 영상 처리 장치 및 그 방법

Info

Publication number: KR20130124089A
Application number: KR1020120047721A
Authority: KR
Inventors: 장형석; 강동현; 박상조; 송효진; 이동영; 한순보
Original assignee: 엘지전자 주식회사
Priority date: 2012-05-04
Filing date: 2012-05-04
Publication date: 2013-11-13

Abstract

본 명세서는 입체 영상을 변형하여도 사용자가 시각적 이질감 없이 변형된 입체 영상을 감상할 수 있는 영상 처리 장치 및 그 방법에 관한 것으로서, 본 명세서의 실시예들에 따른 영상 처리 장치는, 표시부와; 제1 입체 영상을 미리결정된 포맷으로 변형하고, 상기 제1 입체 영상의 변형 정도가 미리결정된 허용 범위를 벗어나면, 상기 제1 입체 영상에 대응하는 깊이 지도를 상기 미리결정된 포맷으로 변형하고, 상기 변형된 깊이 지도를 근거로 제2 입체 영상을 생성하고, 상기 생성된 제2 입체 영상을 상기 표시부에 표시하는 제어부를 포함할 수 있다.

Description

영상 처리 장치 및 그 방법{VIDEO PROCESSING APPARATUS AND METHOD THEREOF}

본 명세서는 영상 처리 장치 및 그 방법에 관한 것이다.

일반적으로, 종래 기술에 따른 영상 처리 장치는 카메라를 통해 촬영된 입체 영상 또는 유선/무선 통신망을 통해 수신된 입체 영상을 표시부에 표시하였다. 종래 기술에 따른 입체 영상 표시 장치는 한국 특허 출원번호 10-2011-7013890에도 개시되어 있다.

본 명세서는, 입체 영상을 변형하여도 사용자가 시각적 이질감 없이 변형된 입체 영상을 감상할 수 있는 영상 처리 장치 및 그 방법을 제공하는 데 그 목적이 있다.

본 명세서의 실시예들에 따른 영상 처리 장치는, 표시부와; 제1 입체 영상을 미리결정된 포맷으로 변형하고, 상기 제1 입체 영상의 변형 정도가 미리결정된 허용 범위를 벗어나면, 상기 제1 입체 영상에 대응하는 깊이 지도를 상기 미리결정된 포맷으로 변형하고, 상기 변형된 깊이 지도를 근거로 제2 입체 영상을 생성하고, 상기 생성된 제2 입체 영상을 상기 표시부에 표시하는 제어부를 포함한다.

본 발명과 관련된 일 예로서, 상기 제어부는, 상기 제1 입체 영상의 변형 정도가 상기 미리결정된 허용 범위 이내이면, 상기 변형된 제1 입체 영상을 상기 표시부에 표시할 수 있다.

본 발명과 관련된 일 예로서, 상기 제어부는, 상기 제1 입체 영상의 변형 정도가 상기 미리결정된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상을 2차원 영상 포맷으로 변환하고, 상기 변환된 2차원 영상을 상기 표시부에 표시할 수 있다.

본 발명과 관련된 일 예로서, 상기 제어부는, 상기 제1 입체 영상의 변형 정도가 상기 미리결졍된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 또는 우안 영상을 상기 표시부에 표시할 수 있다.

본 발명과 관련된 일 예로서, 상기 미리결정된 허용 범위는, 양안시차 각도의 허용 범위일 수 있다.

본 발명과 관련된 일 예로서, 상기 제어부는, 입체 브라우저에 표시된 입체 오브젝트를 검출하고, 상기 검출된 입체 오브젝트가 미리결정된 개수 이상이면, 상기 생성된 제2 입체 영상을 상기 표시부에 표시할 수 있다.

본 발명과 관련된 일 예로서, 상기 제어부는, 상기 검출된 입체 오브젝트가 상기 미리결정된 개수 미만이면, 상기 변형된 제1 입체 영상을 2차원 영상 포맷으로 변환하고, 상기 변환된 2차원 영상을 상기 표시부에 표시할 수 있다.

본 발명과 관련된 일 예로서, 상기 제어부는, 상기 미리결정된 허용 범위가 변경되면 상기 변경된 허용 범위에 대응하는 정보를 무선 또는 유선 통신망을 통해 서버에 전송하는 통신부를 더 포함하며, 상기 제어부는 상기 통신부를 통해 상기 변경된 허용 범위에 대응하는 입체 영상을 상기 서버로부터 수신하고, 상기 수신된 입체 영상을 상기 표시부에 표시할 수 있다.

본 명세서의 실시예들에 따른 영상 처리 방법은, 제1 입체 영상을 미리결정된 포맷으로 변형하는 단계와; 상기 제1 입체 영상의 변형 정도가 미리결정된 허용 범위를 벗어나면, 상기 제1 입체 영상에 대응하는 깊이 지도를 상기 미리결정된 포맷으로 변형하는 단계와; 상기 변형된 깊이 지도를 근거로 제2 입체 영상을 생성하는 단계와; 상기 생성된 제2 입체 영상을 표시부에 표시하는 단계를 포함할 수 있다.

본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입력 입체 영상의 변형 정도에 따라 입력 입체 영상을 2차원 영상으로 변환하거나, 상기 변형된 입력 입체 영상을 사용자가 감상 가능하도록 처리함으로써, 사용자가 변형된 입체 영상을 시각적 이질감 없이 감상할 수 있는 효과가 있다.

도 1은 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 이동 통신 단말기의 구성을 나타낸 구성도이다.
도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치의 구성을 나타낸 구성도이다.
도 3은 본 발명의 실시예에 따른 영상 처리 장치를 나타낸 구성도이다.
도 4는 본 발명의 제1 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.
도 5는 본 발명의 실시예들에 따라 변형된 영상을 나타낸 예시도 이다.
도 6은 본 발명의 제2 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.
도 7은 본 발명의 제2 실시예에 따른 입체 영상을 나타낸 예시도이다.
도 8은 본 발명의 제3 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.
도 9 내지 도 11은 본 발명의 제3 실시예에 따른 2차원 영상을 나타낸 예시도이다.

본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.

또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.

또한, 본 명세서에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.

도 1은 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 이동 통신 단말기(100)의 구성을 나타낸 구성도이다. 이동 통신 단말기(이동 전화기)(100)는 다양한 형태로 구현될 수 있다. 예를 들면, 이동 통신 단말기(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 있다.

도1에 도시한 바와 같이, 이동 통신 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 이동 통신 단말기(100)의 구성요소 모두가 필수 구성요소인 것은 아니며, 도 1에 도시된 구성요소보다 많은 구성요소에 의해 이동 통신 단말기(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 이동 통신 단말기(100)가 구현될 수도 있다.

상기 무선 통신부(110)는 이동 통신 단말기(100)와 무선 통신 시스템 간의 무선 통신 또는 이동 통신 단말기(100)와 그 이동 통신 단말기(100)가 위치한 네트워크간의 무선 통신을 수행하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들면, 무선 통신부(110)는 방송 수신 모듈(111), 이동 통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치 정보 모듈(115) 등을 포함할 수 있다.

상기 방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 미리 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 이동 통신 단말기(100)에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.

한편, 상기 방송 관련 정보는, 이동 통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동 통신 모듈(112)에 의해 수신될 수 있다. 상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들면, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.

상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다. 방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.

상기 이동 통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 및/또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

상기 무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 의미하는 것으로, 상기 무선 인터넷 모듈(113)은 이동 통신 단말기(100)에 내장되거나 외장될 수 있다. 여기서, 무선 인터넷 기술로는 WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access : Wimax), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

상기 근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 의미한다. 근거리 통신 기술로서 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.

상기 위치 정보 모듈(115)은 이동 단말기의 위치(이동 단말기가 차량에 장착되었을 때 차량의 위치 확인 가능)를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들면, GPS 모듈은, 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 정확히 계산할 수 있다. 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다. 상기 위치 정보 모듈(115)로서 와이파이 위치추적 시스템(Wi-Fi Positioning System) 및/또는 하이브리드 위치추적 시스템(Hybrid Positioning System)이 적용될 수도 있다.

상기 위치 정보 모듈(115)은 방향을 검출하는 지자계 센서 및/또는 중력 센서를 더 포함할 수 있다. 예를 들면, 상기 위치 정보 모듈(115)은 상기 지자계 센서(전자 나침반)를 통해 증강현실(augmented reality)을 이용한 내비게이션 구현을 위해 이동 통신 단말기의 방향(예를 들면, 동서남북)을 검출한다. 상기 위치 정보 모듈(115)은 상기 중력 센서(G 센서)를 통해 중력이 어느 방향으로 작용하는지를 탐지하고, 사용자가 이동 통신 단말기를 세로로 길게 들고 있을 때는 세로로 된 화면을 보여주고, 가로로 들고 있을 때는 화면을 자동으로 90도 회전시켜 넓은 화면을 보여준다. 또한, 사용자가 동영상을 시청할 때, 상기 위치 정보 모듈(115)은 상기 중력 센서(G 센서)를 통해 사용자가 이동 통신 단말기를 들고 있는 방향에 따라 화면을 회전시켜 사용자가 편하게 영상을 시청하도록 한다.

상기 A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호를 입력하기 위한 것으로서, 상기 A/V(Audio/Video) 입력부(120)에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 상기 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 상기 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.

상기 카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 상기 카메라(121)는 이동 단말기의 구성 형태에 따라 2개 이상이 구성될 수도 있다.

상기 마이크(122)는 통화 모드 또는 녹음 모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 수신하여 전기적인 음성 데이터로 처리한다. 상기 통화 모드일 때, 상기 처리된 음성 데이터는 이동 통신 모듈(112)을 통하여 이동 통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 상기 마이크(122)는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.

상기 사용자 입력부(130)는 사용자가 이동 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 상기 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.

상기 센싱부(140)는 이동 통신 단말기(100)의 개폐 상태, 이동 통신 단말기(100)의 위치, 사용자 접촉 유무, 이동 통신 단말기(100)의 방위, 이동 통신 단말기(100)의 가속/감속 등과 같이 이동 통신 단말기(100)의 현 상태를 감지하여 이동 통신 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들면, 이동 통신 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 상기 센싱부(140)는 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당한다.

상기 인터페이스부(170)는 이동 통신 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 통신 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 통신 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 통신 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 통신 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.

상기 출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로서, 상기 출력부(150)에는 디스플레이부(151)과 음향 출력 모듈(152), 알람부(153) 등이 포함될 수 있다.

상기 디스플레이부(표시부)(151)는 이동 통신 단말기(100)에서 처리되는 정보를 표시하여 출력한다. 예를 들면, 이동 통신 단말기(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 이동 통신 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.

상기 디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 이동 통신 단말기(100)의 구현 형태에 따라 디스플레이부(151)가 2개 이상 존재할 수도 있다. 예를 들면, 이동 통신 단말기(100)에 외부 디스플레이부(도시하지 않음)와 내부 디스플레이부(도시하지 않음)가 동시에 구비될 수 있다.

상기 디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.

또한, 상기 터치 센서는, 상기 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(도시하지 않음)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)에 전송한다. 이로써, 상기 제어부(180)는, 상기 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.

본 발명에서 근접 터치(proximity-touch)는, 포인터(pointer)가 화면에 실제로 터치는 되지 않고, 화면으로부터 소정 거리 떨어져 접근되는 것을 의미한다.

상기 근접 센서(141)는, 터치 스크린에 의해 감싸지는 이동 통신 단말기(100)의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서(141)는, 소정의 검출 면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 상기 근접 센서(141)는, 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.

상기 근접 센서(141)의 예로는, 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치 스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.

이하에서는 설명의 편의를 위해, 상기 터치 스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(Proximity Touch)"라고 칭하고, 상기 터치 스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(Contact Touch)"라고 칭한다. 상기 터치 스크린 상에서 포인터로 근접 터치가 되는 위치는, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다.

또한, 상기 근접 센서(141)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 상기 터치 스크린 상에 출력될 수 있다.

상기 센싱부(140)는 가속도 센서(142)를 포함할 수 있다. 가속도 센서(142)는 어느 한 방향의 가속도 변화에 대해서 이를 전기 신호로 바꾸어 주는 소자로서, MEMS(micro-electromechanical systems) 기술의 발달과 더불어 널리 사용되고 있다. 가속도 센서(142)에는, 자동차의 에어백 시스템에 내장되어 충돌을 감지하는데 사용하는 큰 값의 가속도를 측정하는 것부터, 사람 손의 미세한 동작을 인식하여 게임 등의 입력 수단으로 사용하는 미세한 값의 가속도를 측정하는 것까지 다양한 종류가 있다. 가속도 센서(142)는 보통 2축이나 3축을 하나의 패키지에 실장하여 구성되며, 사용 환경에 따라서는 Z축 한 축만 필요한 경우도 있다. 따라서, 어떤 이유로 Z축 방향 대신 X축 또는 Y축 방향의 가속도 센서를 써야 할 경우에는 별도의 조각 기판을 사용하여 가속도 센서를 주 기판에 세워서 실장할 수도 있다.

상기 음향 출력 모듈(152)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성 인식 모드, 방송 수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 통신 단말기(100)에서 수행되는 기능(예를 들면, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

상기 알람부(153)는 이동 통신 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 상기 알람부(153)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신될 때, 이를 알리기 위해 알람부(153)는 진동 수단을 통해 이동 단말기를 진동시킬 수 있다. 또는, 상기 알람부(153)는, 키 신호가 입력된 경우, 그 키 신호 입력에 대한 피드백으로 진동 수단을 통해 이동 통신 단말기(100)를 진동시킬 수 있다. 상기와 같은 진동을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.

상기 햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.

상기 햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 텔레매틱스 단말기의 구성 태양에 따라 2개 이상이 구비될 수 있다. 햅틱 모듈(154)은 차량에서 사용자와의 접촉이 빈번한 곳에 구비될 수 있다. 예를 들어, 조향 휠, 변속 기어 레버, 좌석 시트 등에 구비될 수 있다.

상기 메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 지도 데이터, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.

상기 메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 통신 단말기(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.

상기 인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset Port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(Memory Card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module: UIM), 가입자 인증 모듈(Subscriber Identify Module: SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module: USIM) 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치'라 한다)는, 스마트 카드(Smart Card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.

상기 인터페이스부(170)는 이동 단말기(100)가 외부 크래들(Cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.

상기 제어부(180)는 통상적으로 이동 통신 단말기(100)의 전반적인 동작을 제어한다. 예를 들면, 상기 제어부(180)는 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 상기 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 상기 멀티미디어 모듈(181)은 상기 제어부(180) 내에 구현될 수도 있고, 상기 제어부(180)와 별도로 구현될 수도 있다.

상기 제어부(180)는 터치 스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.

상기 전원 공급부(190)는 상기 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 수신하여 각 구성요소들의 동작에 필요한 전원을 공급한다.

상기 이동 통신 단말기(100)에 적용된 구성 요소의 기능은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수도 있다. 하드웨어적인 구현에 의하면, ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다. 소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수도 있다.

상기 음성 인식 모듈(182)은 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.

상기 이동 통신 단말기(100)에 적용된 내비게이션 세션(session)(300)은 지도 데이터 상에 주행 경로를 표시한다.

본 발명의 실시예들에 따른 이동 통신 단말기(100)에 적용된 영상 처리 장치의 구성 요소에 대한 상세한 설명은 도3 내지 도 11을 참조하여 설명한다.

이하에서는, 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치(200)의 구성을 도 2를 참조하여 설명한다.

도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 영상 표시 장치(200)의 구성을 나타낸 구성도이다.

도 2에 도시한 바와 같이, 본 발명의 실시예들에 의한 영상 표시 장치(200)는 튜너(210), 복조부(220), 외부장치 인터페이스부(230), 네트워크 인터페이스부(235), 저장부(240), 사용자입력 인터페이스부(250), 제어부(270), 디스플레이(280), 오디오 출력부(285), 및 3D 시청장치(295)를 포함할 수 있다.

튜너(210)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 상기 튜너(210)는 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다. 예를 들어, 상기 튜너(210)는 상기 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)로 변환한다. 즉, 튜너(210)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다.

튜너(210)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)는 제어부(270)로 직접 입력될 수 있다.

또한, 튜너(210)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.

한편, 튜너(210)는, 본 발명에서 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다.

복조부(220)는 튜너(210)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 예를 들어, 튜너(210)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(220)는 8-VSB(7-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(220)는 채널 복호화를 수행할 수도 있다.

상기 복조부(220)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다. 예를 들어, 튜너(210)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(220)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다. 또한, 복조부(220)는, 채널 복호화를 수행할 수도 있다. 이를 위해, 복조부(220)는, 컨벌루션 디코더(convolution decoder), 디인터리버, 및 리드-솔로먼 디코더 등을 구비하여, 컨벌루션 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.

복조부(220)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.

복조부(220)는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비되는 것이 가능하다. 즉, ATSC 복조부와, DVB 복조부로 구비되는 것이 가능하다.

복조부(220)에서 출력한 스트림 신호는 제어부(270)로 입력될 수 있다. 제어부(270)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이(280)에 영상을 출력하고, 오디오 출력부(285)로 음성을 출력한다.

외부장치 인터페이스부(230)는, 접속된 외부 장치와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다.

외부장치 인터페이스부(230)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치(도시하지 않음)와 유/무선으로 접속될 수 있다. 외부장치 인터페이스부(230)는 접속된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 영상표시장치(200)의 제어부(270)로 전달한다. 또한, 제어부(270)에서 처리된 영상, 음성 또는 데이터 신호를 연결된 외부 장치로 출력할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다.

A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 영상표시장치(200)로 입력할 수 있도록, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다.

무선 통신부는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. 영상표시장치(200)는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 규격에 따라 다른 전자기기와 네트워크 연결될 수 있다.

또한, 외부장치 인터페이스부(230)는, 다양한 셋탑 박스와 상술한 각종 단자 중 적어도 하나를 통해 접속되어, 셋탑 박스와 입력/출력 동작을 수행할 수도 있다.

한편, 외부장치 인터페이스부(230)는, 3D 시청장치(295)와 데이터를 송수신할 수 있다.

네트워크 인터페이스부(235)는, 영상표시장치(200)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(235)는, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.

네트워크 인터페이스부(235)는, 네트워크를 통해, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크를 통하여 인터넷, 컨텐츠 제공자 등으로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있다. 또한, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.

또한, 네트워크 인터페이스부(235)는, 예를 들어, IP(internet Protocol) TV와 접속되어, 양방향 통신이 가능하도록, IPTV용 셋탑 박스에서 처리된 영상, 음성 또는 데이터 신호를 수신하여 제어부(270)로 전달할 수 있으며, 제어부(270)에서 처리된 신호들을 IPTV용 셋탑 박스로 전달할 수 있다.

한편, 상술한 IPTV는, 전송네트워크의 종류에 따라 ADSL-TV, VDSL-TV, FTTH-TV 등을 포함하는 의미일 수 있으며, TV over DSL, Video over DSL, TV overIP(TVIP), Broadband TV(BTV) 등을 포함하는 의미일 수 있다. 또한, IPTV는 인터넷 접속이 가능한 인터넷 TV, 풀브라우징 TV를 포함하는 의미일 수도 있다.

저장부(240)는, 제어부(270) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다.

또한, 저장부(240)는 외부장치 인터페이스부(230)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(240)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.

저장부(240)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(200)는, 저장부(240) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있다.

도 2는 저장부(240)가 제어부(270)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(240)는 제어부(270) 내에 포함될 수 있다.

사용자입력 인터페이스부(250)는, 사용자가 입력한 신호를 제어부(270)로 전달하거나, 제어부(270)로부터의 신호를 사용자에게 전달한다. 예를 들어, 사용자입력 인터페이스부(250)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(260)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 수신하거나, 제어부(270)로부터의 신호를 원격제어장치(260)로 송신할 수 있다.

또한, 예를 들어, 사용자입력 인터페이스부(250)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(도시하지 않음)에서 입력되는 사용자 입력 신호를 제어부(270)에 전달할 수 있다.

또한, 예를 들어, 사용자입력 인터페이스부(250)는, 사용자의 제스처를 센싱하는 센싱부(도시하지 않음)로부터 입력되는 사용자 입력 신호를 제어부(270)에 전달하거나, 제어부(270)로부터의 신호를 센싱부(도시하지 않음)로 송신할 수 있다. 여기서, 센싱부(도시하지 않음)는, 터치 센서, 음성 센서, 위치 센서, 동작 센서 등을 포함할 수 있다.

제어부(270)는, 튜너(210) 또는 복조부(220) 또는 외부장치 인터페이스부(230)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다.

제어부(270)에서 영상 처리된 영상 신호는 디스플레이(280)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(270)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다.

제어부(270)에서 처리된 음성 신호는 오디오 출력부(285)로 음향 출력될 수 있다. 또한, 제어부(270)에서 처리된 음성 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다.

제어부(270)는 역다중화부, 영상처리부 등을 포함할 수 있다. 제어부(270)는, 영상표시장치(200) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(270)는 튜너(210)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.

또한, 제어부(270)는 사용자입력 인터페이스부(250)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(200)를 제어할 수 있다.

예를 들어, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 소정 채널 선택 명령에 따라 선택한 채널의 신호가 입력되도록 튜너(210)를 제어한다. 그리고, 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(270)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이(280) 또는 오디오 출력부(285)를 통하여 출력될 수 있도록 한다.

다른 예로, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(230)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의 영상 신호 또는 음성 신호가 디스플레이(280) 또는 오디오 출력부(285)를 통해 출력될 수 있도록 한다.

제어부(270)는, 영상을 표시하도록 디스플레이(280)를 제어할 수 있다. 예를 들어, 튜너(210)를 통해 입력되는 방송 영상, 외부장치 인터페이스부(230)를 통해 입력되는 외부 입력 영상 또는 네트워크 인터페이스부(235)를 통해 입력되는 영상 또는 저장부(240)에 저장된 영상을 디스플레이(280)에 표시하도록 제어할 수 있다. 이때, 디스플레이(280)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.

제어부(270)는 디스플레이(280)에 표시되는 영상 중에, 소정 오브젝트에 대해 3D 오브젝트로 생성하여 표시되도록 한다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다. 이러한 3D 오브젝트는, 디스플레이(280)에 표시되는 영상과 다른 깊이를 가지도록 처리될 수 있다. 제어부(270)는 3D 오브젝트가 디스플레이(280)에 표시되는 영상에 비해 돌출되어 보이도록 처리할 수 있다.

제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식한다. 예를 들어, 사용자와 영상표시장치(200)간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이(280) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.

한편, 도 2에 도시하지 않았지만, 채널 신호 또는 외부 입력 신호에 대응하는 썸네일 영상을 생성하는 채널 브라우징 처리부가 더 구비되는 것도 가능하다. 채널 브라우징 처리부는, 복조부(220)에서 출력한 스트림 신호(TS) 또는 외부장치 인터페이스부(230)에서 출력한 스트림 신호 등을 입력받아, 입력되는 스트림 신호로부터 영상을 추출하여 썸네일 영상을 생성할 수 있다. 생성된 썸네일 영상은 그대로 또는 부호화되어 제어부(270)로 입력될 수 있다. 또한, 생성된 썸네일 영상은 스트림 형태로 부호화되어 제어부(270)로 입력되는 것도 가능하다.

제어부(270)는 입력된 썸네일 영상을 이용하여 복수의 썸네일 영상을 구비하는 썸네일 리스트를 디스플레이(280)에 표시할 수 있다. 이때의 썸네일 리스트는, 디스플레이(280)에 소정 영상을 표시한 상태에서 일부 영역에 표시되는 간편 보기 방식으로 표시되거나, 디스플레이(280)의 대부분 영역에 표시되는 전체 보기 방식으로 표시될 수 있다. 이러한 썸네일 리스트 내의 썸네일 영상은 순차적으로 업데이트 될 수 있다.

디스플레이(280)는, 제어부(270)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 또는 외부장치 인터페이스부(230)에서 수신되는 영상 신호, 데이터 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다.

디스플레이(280)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 특히, 본 발명의 실시예에 따라, 3차원 디스플레이(3D display)가 가능할 수 있다.

3차원 영상 시청을 위해 디스플레이(280)는, 추가 디스플레이 방식과 단독 디스플레이 방식으로 나뉠 수 있다. 단독 디스플레이 방식은, 별도의 추가 디스플레이, 예를 들어 안경(glass) 등이 없이, 디스플레이(280) 단독으로 3D 영상을 구현할 수 있는 것으로서, 그 예로, 렌티큘라 방식, 파라랙스 베리어(parallax barrier) 등 다양한 방식이 적용될 수 있다. 상기 추가 디스플레이 방식은, 디스플레이(280) 외에 추가 디스플레이를 사용하여 3D 영상을 구현할 수 있는 것으로서, 그 예로, 헤드 마운트 디스플레이(HMD) 타입, 안경 타입 등 다양한 방식이 적용될 수 있다.

상기 안경 타입은, 편광 안경 타입 등의 패시브(passive) 방식과, 셔터 글래스(ShutterGlass) 타입 등의 액티브(active) 방식으로 다시 나뉠 수 있다. 한편, 헤드 마운트 디스플레이 타입에서도 패시브 방식과 액티브 방식으로 나뉠 수 있다.

입체 영상을 시청하기 위한 3D 시청 장치(3D용 글래스)(295)는, 패시브 방식의 편광 글래스 또는 액티브 방식의 셔트 글래스를 포함할 수 있으며, 상술한 헤드 마운트 타입도 포함하는 개념으로 기술된다.

한편, 디스플레이(280)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.

오디오 출력부(285)는, 제어부(270)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1 채널 신호 또는 5.1 채널 신호를 입력 받아 음성으로 출력한다. 음성 출력부(185)는 다양한 형태의 스피커로 구현될 수 있다.

한편, 사용자의 제스처를 감지하기 위해, 상술한 바와 같이, 터치 센서, 음성 센서, 위치 센서, 동작 센서 중 적어도 하나를 구비하는 센싱부(도시하지 않음)가 영상표시장치(200)에 더 구비될 수 있다. 센싱부(도시하지 않음)에서 감지된 신호는 사용자입력 인터페이스부(150)를 통해 제어부(170)로 전달된다.

제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상, 또는 센싱부(도시하지 않음)로부터의 감지된 신호를 각각 또는 조합하여 사용자의 제스처를 감지할 수 있다.

원격제어장치(260)는, 사용자 입력을 사용자입력 인터페이스부(250)로 송신한다. 이를 위해, 원격제어장치(260)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(260)는, 사용자입력 인터페이스부(250)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(260)에서 표시하거나 음성 출력할 수 있다.

상술한 영상표시장치(200)는, 고정형으로서 ATSC 방식(7-VSB 방식)의 디지털 방송, DVB-T 방식(COFDM 방식)의 디지털 방송, ISDB-T 방식(BST-OFDM방식)의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 이동형으로서 지상파 DMB 방식의 디지털 방송, 위성 DMB 방식의 디지털 방송, ATSC-M/H 방식의 디지털 방송, DVB-H 방식(COFDM 방식)의 디지털 방송, 미디어플로(Media Foward Link Only) 방식의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 케이블, 위성통신, IPTV 용 디지털 방송 수신기일 수도 있다.

본 명세서에서 기술되는 영상표시장치는, TV 수상기, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.

도 2에 도시된 영상표시장치(200)의 구성도는 본 발명의 실시예들을 위한 구성도이다. 구성도의 각 구성요소는 실제 구현되는 영상표시장치(200)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.

상기 영상 표시 장치(200)에서 복호화된 영상 신호는, 다양한 포맷의 3D 영상 신호일 수 있다. 예를 들면, 색차 영상(color image) 및 깊이 영상(depth image)으로 이루어진 3D 영상 신호일 수 있으며, 또는 복수 시점 영상 신호로 이루어진 3D 영상 신호 등일 수 있다. 복수 시점 영상 신호는, 예를 들어, 좌안 영상 신호와 우안 영상 신호를 포함할 수 있다. 여기서, 3D 영상 신호의 포맷은, 좌안 영상 신호(L)와 우안 영상 신호(R)를 좌,우로 배치하는 사이드 바이 사이드(Side by Side) 포맷, 상,하로 배치하는 탑 다운(Top / Down) 포맷, 시분할로 배치하는 프레임 시퀀셜(Frame Sequential) 포맷, 좌안 영상 신호와 우안 영상 신호를 라인 별로 혼합하는 인터레이스 (Interlaced) 포맷, 좌안 영상 신호와 우안 영상 신호를 박스 별로 혼합하는 체커 박스(Checker Box) 포맷 등일 수 있다.

이하에서는, 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법을 도 3 내지 도 11을 참조하여 설명한다. 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은 이동 통신 단말기(100), 상기 텔레매틱스 단말기, 내비게이션 장치와 같은 이동 단말기에 적용될 뿐만 아니라, 3D 영상을 표시하는 3차원 영상 텔레비전(3D TV)과 같은 영상 기기, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 프로젝터, 홈시어터 등과 같은 단말기에도 적용될 수도 있다.

도 3은 본 발명의 실시예에 따른 영상 처리 장치를 나타낸 구성도이다.

도 3에 도시한 바와 같이, 본 발명의 제1 실시예에 따른 영상 처리 장치(400)는, 표시부(403)와; 제1 입체 영상(제1 3차원 영상)(좌안 영상 및 우안 영상)을 미리결정된 포맷(형태)으로 변형하고, 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 미리결정된 허용 범위 이내인지를 판단하고, 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 허용 범위 미만이면(예를 들면, 제1 입체 영상의 변형 정도가 사용자가 감상할 수 있을 정도의 변형이면) 상기 변형된 제1 입체 영상을 상기 표시부(403)에 표시하는 제어부(401)와; 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 허용 범위에 속하면(예를 들면, 제1 입체 영상의 변형 정도가 사용자가 감상하기 어려울 정도의 변형이면), 상기 제1 입체 영상(좌안 영상 및 우안 영상)에 대응하는 깊이 지도(Depth map)(입체 모델 정보)를 추출(또는 예측)하고, 상기 추출된 깊이 지도를 상기 미리결정된 포맷(형태)으로 변형하고, 상기 변형된 깊이 지도를 근거로 제2 입체 영상(제2 좌안 영상 및 제2 우안 영상)을 생성하고, 상기 생성된 제2 입체 영상을 상기 표시부(403)에 표시하는 변형부(Transformation unit)(402)를 포함한다. 입체 영상은 스테레오 카메라 또는 TOF(Time-of-Flight) 카메라 등을 통해 촬영된 입체 영상 또는 유선 통신망 또는 무선 통신망을 통해 단말기 또는 서버로부터 수신된 입체 영상일 수 있다.

본 발명의 실시예에 따른 영상 처리 장치(400)는 입체 브라우저(3D Browser) 그래픽 처리 장치(Graphics processing unit, GPU)에 적용될 수 있으며, 상기 그래픽 처리 장치는 상기 제어부(401) 및 변형부(402)를 포함할 수 있다.

상기 변형부(402)는, 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 허용 범위를 벗어나면(예를 들면, 제1 입체 영상의 변형 정도가 사용자가 감상할 수 없을 정도의 변형이면), 상기 변형된 제1 입체 영상을 2차원 영상(좌안 영상 또는 우안 영상) 포맷으로 변환하고, 상기 변환된 2차원 영상을 상기 표시부(403)에 표시한다. 예를 들면, 상기 변형부(402)는, 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 또는 우안 영상을 상기 표시부(403)에 표시한다.

상기 미리결정된 허용 범위는, 양안시차(Disparity) 각도의 허용 범위를 나타낸 것으로서, 입력 입체 영상(제1 입체 영상)에 대한 X축의 허용 회전 각도는 5~70도일 수 있고, 상기 입력 입체 영상(제1 입체 영상)에 대한 Y축의 허용 회전 각도는 5~45도일 수 있고, 상기 입력 입체 영상(제1 입체 영상)에 대한 Z축의 허용 회전 각도는 5~20도일 수 있으며, 이는 사용자 또는 설계자의 의도에 따라 변경될 수 있으며, 또한 기기특성(예를 들면, 화면 크기, 출력 방식, 입력 입체 영상의 타입 등)에 따라 변경될 수도 있다. 즉, 양안시차(Disparity)의 방향이 수직에 가까울수록 시각적 이질감을 더 많이 발생시키므로, 양안시차(Disparity)의 각도가 상기 미리결정된 허용 범위에 속할 때 상기 제1 입체 영상(좌안 영상 및 우안 영상)에 대응하는 깊이 지도(Depth map)(입체 모델 정보)를 추출(또는 예측)하고, 상기 추출된 깊이 지도를 상기 미리결정된 포맷(형태)으로 변형하고, 상기 변형된 깊이 지도를 근거로 좌안 영상과 우안 영상을 생성 및 표시함으로써 사용자가 변형된 입체 영상을 감상할 수 있다. 상기 양안시차(Disparity)의 각도는 움직임 예측(motion estimation), 광흐름(optical flow), 스테레오 매칭(stereo matching) 등의 영상처리 기법을 사용하여 예측 가능하며, 이에 대한 기술은 이미 공지된 기술이므로 이에 대한 상세한 설명은 생략한다.

이하에서는, 본 발명의 제1 실시예에 따른 영상 처리 방법을 도 3 내지 도 5를 참조하여 설명한다.

도 4는 본 발명의 제1 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.

먼저, 상기 제어부(401)는, 제1 입체 영상(제1 3차원 영상)(좌안 영상 및 우안 영상)을 무선 또는 유선 통신망을 통해 서버로부터 수신하거나, 외부 또는 내부 저장 장치(도시되지 않음)로부터 독출(read)한다.

상기 제어부(401)는 제1 입체 영상을 미리결정된 포맷(형태)으로 변형한다(S11).

도 5는 본 발명의 실시예들에 따라 변형된 영상을 나타낸 예시도 이다.

도 5에 도시한 바와 같이, 상기 제어부(401)는 입력 입체 영상의 좌안 영상 및 우안 영상을 미리결정된 각도(또는 방향)로 기울이거나, 미리결정된 위치로 이동시키거나, 미리결정된 모양(또는 형태)으로 변형시키거나, 평행 성분을 유지하고 미리결졍된 축 방향으로 기울임으로써 상기 입력 입체 영상을 변형시키고, 그 변형된 입체 영상(5-1)을 입체 브라우저에 표시할 수 있다.

상기 제어부(401)는 상기 미리결정된 포맷에 따라 상기 제1 입체 영상에 대응하는 좌안 영상 및 우안 영상을 스케일링(Scaling)할 수 있다. 상기 스케일링은 영상을 수평적으로 다른 비율로 축소하는 기능을 의미한다.

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결정된 허용 범위 미만인지를 판단한다(S12). 예를 들면, 상기 제어부(401)는 상기 제1 입체 영상의 변형 정도가 사용자가 입체 영상을 감상할 수 있을 정도의 변형인지를 판단한다.

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결졍된 허용 범위 미만이면(예를 들면, 제1 입체 영상의 변형 정도가 사용자가 감상할 수 있을 정도의 변형이면) 상기 변형된 제1 입체 영상을 상기 표시부(403)에 표시한다(S13). 상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결졍된 허용 범위 이내일 때 상기 변형된 제1 입체 영상을 상기 표시부(403)에 표시할 수도 있다.

이하에서는, 본 발명의 제2 실시예에 따른 영상 처리 방법을 도 3 내지 도 7을 참조하여 설명한다.

도 6은 본 발명의 제2 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.

상기 제어부(401)는 제1 입체 영상을 미리결정된 포맷(형태)으로 변형한다(S21).

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결정된 허용 범위 이내인지를 판단한다(S22). 예를 들면, 상기 제어부(401)는 상기 제1 입체 영상의 변형 정도가 사용자가 입체 영상을 감상하기 어려운 정도의 변형인지를 판단한다.

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결졍된 허용 범위 이내이면(예를 들면, 제1 입체 영상의 변형 정도가 사용자가 감상하기 어려울 정도의 변형이면), 상기 제1 입체 영상(좌안 영상 및 우안 영상)에 대응하는 깊이 지도(Depth map)(입체 모델 정보)를 추출(또는 예측)한다(S23).

상기 제어부(401)는 상기 추출된 깊이 지도를 상기 미리결정된 포맷(형태)으로 변형하고(S24), 상기 변형된 깊이 지도를 근거로 제2 입체 영상(제2 좌안 영상 및 제2 우안 영상)을 생성하고(S25), 상기 생성된 제2 입체 영상을 상기 표시부(403)에 표시한다(S26). 상기 제어부(401)는 변형부(402)를 포함할 수 있다.

도 7은 본 발명의 제2 실시예에 따른 입체 영상을 나타낸 예시도이다.

도 7에 도시한 바와 같이, 상기 제어부(또는 변형부)(401)는 상기 제1 입체 영상(변형된 좌안 영상(7-1) 및 변형된 우안 영상(7-2))의 변형 정도가 상기 허용 범위에 속하면(예를 들면, 제1 입체 영상의 변형 정도가 사용자가 감상하기 어려울 정도의 변형이면), 상기 제1 입체 영상(좌안 영상 및 우안 영상)에 대응하는 깊이 지도(Depth map)(입체 모델 정보)(7-3)를 추출(또는 예측)하고, 상기 추출된 깊이 지도(7-3)를 상기 미리결정된 포맷(형태)으로 변형하고, 상기 변형된 깊이 지도(7-4)를 근거로 제2 입체 영상(제2 좌안 영상(7-5) 및 제2 우안 영상(7-6))을 생성하고, 상기 생성된 제2 입체 영상을 상기 표시부(403)에 표시한다.

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결졍된 허용 범위를 벗어나면(초과하면), 상기 제1 입체 영상(좌안 영상 및 우안 영상)에 대응하는 깊이 지도(Depth map)(입체 모델 정보)(7-3)를 추출(또는 예측)하고, 상기 추출된 깊이 지도(7-3)를 상기 미리결정된 포맷(형태)으로 변형하고, 상기 변형된 깊이 지도(7-4)를 근거로 제2 입체 영상(제2 좌안 영상(7-5) 및 제2 우안 영상(7-6))을 생성하고, 상기 생성된 제2 입체 영상을 상기 표시부(403)에 표시할 수도 있다.

이하에서는, 본 발명의 제3 실시예에 따른 영상 처리 방법을 도 3 내지 도 11을 참조하여 설명한다.

도 8은 본 발명의 제3 실시예에 따른 영상 처리 방법을 나타낸 흐름도이다.

상기 제어부(401)는 제1 입체 영상을 미리결정된 포맷(형태)으로 변형한다(S31).

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결정된 허용 범위를 벗어났는지를 판단한다(S32). 예를 들면, 상기 제어부(401)는 상기 제1 입체 영상의 변형 정도가 사용자가 입체 영상을 감상할 수 없을 정도의 변형인지를 판단한다.

상기 제어부(401)는 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 미리결졍된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상을 2차원 영상(좌안 영상 또는 우안 영상) 포맷으로 변환하고(S33), 상기 변환된 2차원 영상을 상기 표시부(403)에 표시한다(S34). 예를 들면, 상기 제어부(401)는, 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 또는 우안 영상을 상기 표시부(403)에 표시한다.

도 9 내지 도 11은 본 발명의 제3 실시예에 따른 2차원 영상을 나타낸 예시도이다.

도 9에 도시한 바와 같이, 상기 제어부(401)는, 상기 제1 입체 영상(변형된 좌안 영상 및 변형된 우안 영상)의 변형 정도가 상기 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 및 우안 영상 중 어느 하나를 상기 표시부(403)에 표시할 수도 있지만, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 및 우안 영상 중에서 우안 영상을 좌안 영상과 동일하게 매칭시킴으로써 상기 2차원 영상을 생성할 수도 있다.

도 10에 도시한 바와 같이, 상기 제어부(401)는, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 및 우안 영상 중에서 좌안 영상을 우안 영상과 동일하게 매칭시킴으로써 상기 2차원 영상을 생성할 수도 있다.

도 11에 도시한 바와 같이, 상기 제어부(401)는, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 및 우안 영상을 합성하고, 그 합성된 영상을 좌안 영상 및 우안 영상에 적용함으로써 상기 2차원 영상을 생성할 수도 있다.

한편, 상기 제어부(401)는 입체 브라우저에 표시된 입체 오브젝트(들)을 검출하고, 상기 검출된 입체 오브젝트가 미리결정된 개수 이상인지를 판단할 수 있다. 상기 미리결정된 개수는 사용자 또는 설계자의 의도에 따라 변경될 수 있다.

상기 제어부(401)는, 상기 검출된 입체 오브젝트가 상기 미리결정된 개수 이상이면, 사용자의 시각적 불편함을 방지하기 위해 제2 실시예를 실행할 수 있다.

반면, 상기 제어부(401)는, 상기 검출된 입체 오브젝트가 상기 미리결정된 개수 미만이면, 사용자의 시각적 불편함이 감소하므로, 제1 실시예 또는 제3 실시예를 실행할 수 있다.

한편, 본 발명의 실시예들에 따른 영상 처리 장치는, 상기 미리결정된 허용 범위가 사용자에 의해 변경되면 상기 변경된 허용 범위에 관련된 정보(상기 변경된 허용 범위에 대응하는 정보)를 무선 또는 유선 통신망을 통해 서버(도시되지 않음)에 전송하는 통신부(도시되지 않음)를 더 포함할 수 있다. 상기 서버는 상기 변경된 허용 범위에 대응하는 입체 영상을 검출하고, 그 검출된 입체 영상을 상기 통신부에 전송한다. 상기 제어부(401)는 상기 통신부를 통해 수신된 상기 변경된 허용 범위에 대응하는 입체 영상을 상기 표시부(403)에 표시할 수도 있다.

이상에서 상세히 설명한 바와 같이, 본 발명의 실시예들에 따른 영상 처리 장치 및 그 방법은, 입력 입체 영상의 변형 정도에 따라 입력 입체 영상을 2차원 영상으로 변환하거나, 상기 변형된 입력 입체 영상을 사용자가 감상 가능하도록 처리함으로써, 사용자가 변형된 입체 영상을 시각적 이질감 없이 감상할 수 있다.

본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

401: 제어부 402: 변형부
403: 표시부

Claims

표시부와;
제1 입체 영상을 미리결정된 포맷으로 변형하고, 상기 제1 입체 영상의 변형 정도가 미리결정된 허용 범위를 벗어나면, 상기 제1 입체 영상에 대응하는 깊이 지도를 상기 미리결정된 포맷으로 변형하고, 상기 변형된 깊이 지도를 근거로 제2 입체 영상을 생성하고, 상기 생성된 제2 입체 영상을 상기 표시부에 표시하는 제어부를 포함하는 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 제어부는,
상기 제1 입체 영상의 변형 정도가 상기 미리결정된 허용 범위 이내이면, 상기 변형된 제1 입체 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 제어부는,
상기 제1 입체 영상의 변형 정도가 상기 미리결정된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상을 2차원 영상 포맷으로 변환하고, 상기 변환된 2차원 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 제어부는,
상기 제1 입체 영상의 변형 정도가 상기 미리결졍된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 또는 우안 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 미리결정된 허용 범위는,
양안시차 각도의 허용 범위인 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 제어부는,
입체 브라우저에 표시된 입체 오브젝트를 검출하고, 상기 검출된 입체 오브젝트가 미리결정된 개수 이상이면, 상기 생성된 제2 입체 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 처리 장치.
제6항에 있어서, 상기 제어부는,
상기 검출된 입체 오브젝트가 상기 미리결정된 개수 미만이면, 상기 변형된 제1 입체 영상을 2차원 영상 포맷으로 변환하고, 상기 변환된 2차원 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 제어부는,
상기 미리결정된 허용 범위가 변경되면 상기 변경된 허용 범위에 대응하는 정보를 무선 또는 유선 통신망을 통해 서버에 전송하는 통신부를 더 포함하는 것을 특징으로 하는 영상 처리 장치.
제8항에 있어서, 상기 제어부는,
상기 통신부를 통해 상기 변경된 허용 범위에 대응하는 입체 영상을 상기 서버로부터 수신하고, 상기 수신된 입체 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 처리 장치.
제1항에 있어서, 상기 제어부는,
상기 제2 입체 영상을 상기 표시부에 표시된 입체 영상 브라우저에 표시하는 것을 특징으로 하는 영상 처리 장치.
제1 입체 영상을 미리결정된 포맷으로 변형하는 단계와;
상기 제1 입체 영상의 변형 정도가 미리결정된 허용 범위를 벗어나면, 상기 제1 입체 영상에 대응하는 깊이 지도를 상기 미리결정된 포맷으로 변형하는 단계와;
상기 변형된 깊이 지도를 근거로 제2 입체 영상을 생성하는 단계와;
상기 생성된 제2 입체 영상을 표시부에 표시하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서,
상기 제1 입체 영상의 변형 정도가 상기 미리결정된 허용 범위 이내이면, 상기 변형된 제1 입체 영상을 상기 표시부에 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서,
상기 제1 입체 영상의 변형 정도가 상기 미리결정된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상을 2차원 영상 포맷으로 변환하는 단계와;
상기 변환된 2차원 영상을 상기 표시부에 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서,
상기 제1 입체 영상의 변형 정도가 상기 미리결졍된 허용 범위를 벗어나면, 상기 변형된 제1 입체 영상에 포함된 좌안 영상 또는 우안 영상을 상기 표시부에 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서, 상기 미리결정된 허용 범위는,
양안시차 각도의 허용 범위인 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서,
입체 브라우저에 표시된 입체 오브젝트를 검출하는 단계와;
상기 검출된 입체 오브젝트가 미리결정된 개수 이상이면, 상기 생성된 제2 입체 영상을 상기 표시부에 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제16항에 있어서,
상기 검출된 입체 오브젝트가 상기 미리결정된 개수 미만이면, 상기 변형된 제1 입체 영상을 2차원 영상 포맷으로 변환하는 단계와;
상기 변환된 2차원 영상을 상기 표시부에 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서,
상기 미리결정된 허용 범위가 변경되면 상기 변경된 허용 범위에 대응하는 정보를 무선 또는 유선 통신망을 통해 서버에 전송하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제18항에 있어서,
상기 변경된 허용 범위에 대응하는 입체 영상을 상기 서버로부터 수신하는 단계와;
상기 수신된 입체 영상을 상기 표시부에 표시하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
제11항에 있어서, 상기 제2 입체 영상을 상기 표시부에 표시하는 단계는,
상기 제2 입체 영상을 상기 표시부에 표시된 입체 영상 브라우저에 표시하는 것을 특징으로 하는 영상 처리 방법.