KR20110090640A - 영상표시장치 및 그 동작방법 - Google Patents

영상표시장치 및 그 동작방법 Download PDF

Info

Publication number
KR20110090640A
KR20110090640A KR1020100010548A KR20100010548A KR20110090640A KR 20110090640 A KR20110090640 A KR 20110090640A KR 1020100010548 A KR1020100010548 A KR 1020100010548A KR 20100010548 A KR20100010548 A KR 20100010548A KR 20110090640 A KR20110090640 A KR 20110090640A
Authority
KR
South Korea
Prior art keywords
eye image
pixel
right eye
left eye
image
Prior art date
Application number
KR1020100010548A
Other languages
English (en)
Inventor
주재현
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020100010548A priority Critical patent/KR20110090640A/ko
Publication of KR20110090640A publication Critical patent/KR20110090640A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration using histogram techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/324Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/327Calibration thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/361Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 영상표시장치및 그 동작 방법에 관한 것이다. 본 발명의 실시예에 따른 영상표시장치의 동작 방법은 좌안 영상과 우안 영상을 이용하여 입체 영상을 표시하는 방법으로서, 상기 좌안 영상과 상기 우안 영상의 히스토그램을 추출하는 단계, 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램이 상이한 경우, 상기 좌안 영상의 좌안 영상 대응 픽셀과 상기 우안 영상의 우안 영상 대응 픽셀의 픽셀값을 동일하게 보정하는 단계 및 상기 픽셀값이 보정된 좌안 영상과 우안 영상을 출력하는 단계를 포함하되, 상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀은 각각 상기 좌안 영상과 상기 우안 영상 내에서 좌표값이 서로 동일하고 픽셀값이 서로 상이한 것을 특징으로 한다. 본 발명의 실시예에 따르면, 좌안 영상과 우안 영상의 정보를 이용하여 입체 영상의 화질을 개선할 수 있으며, 특히 이미 제공된 정보와 간단한 연산만을 이용하여 보다 나은 화질의 입체 영상을 제공할 수 있다.

Description

영상표시장치 및 그 동작방법 {Image Display Device and Operating Method for the Same}
본 발명은 영상표시장치 및 그 동작방법에 관한 것이다. 본 발명은 더욱 상세하게는 입체 영상을 보정하는 영상표시장치 또는 영상표시방법에 관한 것이다.
영상표시장치는 사용자가 시청할 수 있는 영상을 표시하는 기능을 갖춘 장치이다. 사용자는 영상표시장치를 통하여 방송을 시청할 수 있다. 영상표시장치는 방송국에서 송출되는 방송신호 중 사용자가 선택한 방송을 디스플레이에 표시한다. 현재 방송은 전세계적으로 아날로그 방송에서 디지털 방송으로 전환되고 있는 추세이다.
디지털 방송은 디지털 영상 및 음성 신호를 송출하는 방송을 의미한다. 디지털 방송은 아날로그 방송에 비해, 오부 잡음에 강해 데이터 손실이 작으며, 에러 정정에 유리하며, 해상도가 높고, 선명한 화면을 제공한다. 또한, 디지털 방송은 아날로그 방송과 달리 양방향 서비스가 가능하다.
또한 최근에는 입체 영상 및 입체 영상을 통해 제공 가능한 다양한 컨텐츠 들에 대한 연구가 활발히 진행되고 있으며, 컴퓨터 그래픽에서 뿐만 아니라 다른 다양한 환경 및 기술에서도 입체 영상 기술이 점점 더 보편화되고 실용화되고 있다. 또한 상술한 디지털 방송에서도 입체 영상을 송신할 수 있으며, 이를 재생하기 위한 장치에 대한 개발 역시 진행 중에 있다.
그런데 입체 영상은 좌안 영상과 우안 영상을 이용하여 표시되는데, 입체 영상의 화질은 기본적으로 좌안 영상과 우안 영상의 화질에 의해 결정된다. 특히 좌안 영상과 우안 영상이 서로 다른 화질을 가지거나 계조나 명암비가 서로 다른 경우, 이를 보정함으로써 보다 나은 입체 영상의 화질을 제공할 수 있게 된다.
따라서, 본 발명의 목적은 입체적인 영상을 표시하는 경우, 영상의 화질을 높이는 데에 있다. 특히 좌안 영상과 우안 영상의 같은 지점에 대한 픽셀값이 상이한 경우, 보다 나은 화질을 가지는 영상을 기준으로 좌안 영상과 우안 영상을 동일하게 보정함으로써, 이미 제공된 영상과 그 영상에 대한 정보의 범위 이내에서 영상의 품질을 높이고자 한다. 특히 영상의 계조나 명암비, 선명도에 중점을 두어 간단한 연산을 통해 영상을 보정하고자 한다.
상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치의 동작방법은 좌안 영상과 우안 영상을 이용하여 입체 영상을 표시하는 방법으로서, 상기 좌안 영상과 상기 우안 영상의 히스토그램을 추출하는 단계, 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램이 상이한 경우, 상기 좌안 영상의 좌안 영상 대응 픽셀과 상기 우안 영상의 우안 영상 대응 픽셀의 픽셀값을 동일하게 보정하는 단계 및 상기 픽셀값이 보정된 좌안 영상과 우안 영상을 출력하는 단계를 포함하되, 상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀은 각각 상기 좌안 영상과 상기 우안 영상 내에서 좌표값이 서로 동일하고 픽셀값이 서로 상이한 것을 특징으로 한다.
또한 상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치는 좌안 영상과 우안 영상을 이용하여 입체 영상을 표시하는 것으로서, 상기 좌안 영상과 상기 우안 영상의 히스토그램을 추출하고 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램이 상이한 경우, 상기 좌안 영상의 좌안 영상 대응 픽셀과 상기 우안 영상의 우안 영상 대응 픽셀의 픽셀값을 동일하게 보정하는 제어부 및 상기 픽셀값이 보정된 좌안 영상과 우안 영상을 출력하는 디스플레이부를 포함하되, 상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀은 각각 상기 좌안 영상과 상기 우안 영상 내에서 좌표값이 서로 동일하고 픽셀값이 서로 상이한 것을 특징으로 한다.
본 발명의 실시예에 따르면, 사용자에게 입체적인 영상을 제공할 수 있음은 물론, 입체 영상의 화질을 개선할 수 있다. 이미 제공된 좌안 영상과 우안 영상에 포함된 히스토그램과 메타 정보를 이용하여 보다 나은 품질의 영상을 기준으로 다른 영상을 보정함으로써, 추가적은 정보의 획득 과정 없이 입체 영상의 화질을 개선할 수 있다. 특히 입체 영상의 계조나 명암비, 선명도 면에서 영상의 품질이 개선된다. 또한 영상 보정에 필요한 연산 과정을 최소화하고, 각 픽셀의 특성에 맞게 다른 연산 방법을 적용할 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상표시장치의 내부 블록도.
도 2는 도 1의 영상표시장치에 접속 가능한 외부장치의 일예를 도시한 도면.
도 3은 도 1의 제어부의 내부 블록도의 일예를 도시한 도면.
도 4는 도 3의 포맷터에서 2D 영상 신호와 3D 영상 신호의 분리를 보여주는 도면.
도 5는 도 3의 포맷터에서 출력되는 3D 영상의 다양한 포맷을 보여주는 도면.
도 6은 도 3의 포맷터에서 출력되는 3D 영상의 스케일링을 설명하기 위해 참조되는 도면.
도 7a 내지 도 7c는 도 1의 영상표시장치에 표시되는 영상의 일 예를 도시한 도면.
도 8은 본 발명의 일 실시예에 따른 영상표시장치의 동작 방법을 나타낸 흐름도이다.
도 9는 본 발명의 다른 실시예에 따른 영상표시장치의 동작 방법을 나타낸 흐름도이다.
도 10은 본 발명의 또 다른 실시예에 따른 영상표시장치의 동작 방법을 나타낸 흐름도이다.
도 11 및 도 12는 보정 전의 좌안 영상, 우안 영상 및 각각의 히스토그램을 예시한 도면이다.
도 13은 도 10을 참조하여 설명한 실시예에 따른 영상표시장치 및 그 동작 방법에 의해 보정된 좌안 영상, 우안 영상 및 각각의 히스토그램을 예시한 도면이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
도 1은 본 발명의 일 실시예에 따른 영상표시장치의 내부 블록도이다.
도 1을 참조하면, 본 발명의 일실시예에 의한 영상표시장치(100)는 튜너(110), 복조부(120), 외부신호입출력부(130), 저장부(140), 인터페이스부(150), 센싱부(미도시), 제어부(170), 디스플레이(180), 음향출력부(185)를 포함할 수 있다.
튜너(110)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 또한, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다.
예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS SIF)로 변환한다. 즉, 튜너(110)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다. 튜너부(110)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS SIF)는 신호처리부(180)로 직접 입력될 수 있다.
또한, 튜너(110)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.
한편, 튜너(110)는, 본 발명에서 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다. 이는, 디스플레이(180)에 방송 채널에 해당하는 복수의 썸네일 영상을 포함하는 썸네일 리스트를 도시하기 위한 것이다. 이에 따라, 튜너(110)는, 선택 채널 또는 기저장된 모든 채널의 RF 방송 신호를 순차적/주기적으로 수신하는 것이 가능하다.
복조부(120)는 튜너(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.
예를 들어, 튜너(110)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(120)는 8-VSB(8-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(120)는 채널 복호화를 수행할 수도 있다. 이를 위해 복조부(120)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.
예를 들어, 튜너(110)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(120)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다. 또한, 복조부(120)는, 채널 복호화를 수행할 수도 있다. 이를 위해, 복조부(120)는, 컨벌루션 디코더(convolution decoder), 디인터리버, 및 리드-솔로먼 디코더 등을 구비하여, 컨벌루션 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.
복조부(120)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.
한편, 상술한 복조부(120)는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비되는 것이 가능하다. 즉, ATSC 복조부와, DVB 복조부로 구비되는 것이 가능하다.
복조부(120)에서 출력한 스트림 신호는 제어부(170)로 입력될 수 있다. 제어부(170)는 역다중화 및 신호 처리 등을 수행한 후, 디스플레이(180)에 영상을 출력하고, 음향출력부(185)로 음성을 출력한다.
외부신호입출력부(130)는 외부 장치와 영상표시장치(100)을 연결할 수 있다. 이를 위해, 외부신호입출력부(130)는, A/V 입출력부 또는 무선 통신부를 포함할 수 있다.
외부신호입출력부(130)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치와 유/무선으로 연결된다. 외부신호입출력부(130)는 연결된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 영상표시장치(100)의 제어부(170)로 전달한다. 또한, 제어부(170)에서 처리된 영상, 음성 또는 데이터 신호를 연결된 외부 장치로 출력할 수 있다.
A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 영상표시장치(100)로 입력할 수 있도록, 이더넷(Ethernet)단자, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다.
무선 통신부는 무선 인터넷 접속을 수행할 수 있다. 영상표시장치(100)는 무선 통신부를 통해 무선 인터넷 접속될 수 있다. 무선 인터넷 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.
또한, 무선 통신부는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. 영상표시장치(100)는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee) 등의 통신 규격에 따라 다른 전자기기와 네트워크 연결될 수 있다.
또한, 외부신호입출력부(130)는, 다양한 셋탑 박스와 상술한 각종 단자 중 적어도 하나를 통해 접속되어, 셋탑 박스와 입력/출력 동작을 수행할 수도 있다.
예를 들어, 셋탑 박스가 IP(internet Protocol) TV용 셋탑 박스인 경우, 양방향 통신이 가능하도록, IP TV용 셋탑 박스에서 처리된 영상, 음성 또는 데이터 신호를 제어부(170)로 전달할 수 있으며, 제어부(170)에서 처리된 신호들을 IP TV용 셋탑 박스로 전달할 수 있다.
한편, 상술한 IPTV는, 전송네트워크의 종류에 따라 ADSL-TV, VDSL-TV, FTTH-TV 등을 포함하는 의미일 수 있으며, TV over DSL, Video over DSL, TV overIP(TVIP), Broadband TV(BTV) 등을 포함하는 의미일 수 있다. 또한, IPTV는 인터넷 접속이 가능한 인터넷 TV, 풀브라우징 TV를 포함하는 의미일 수도 있다.
또한, 외부신호입출력부(130)는 영상 또는 음성 통화를 할 수 있는 통신망과 연결될 수 있다. 통신망은 LAN을 통하여 연결되는 방송형 통신망, 공중전화망, 이동통신망 등을 포함하는 의미일 수 있다.
저장부(140)는, 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수도 있다.
또한, 저장부(140)는 외부신호입출력부(130)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(140)는, 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.
저장부(140)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(100)는, 저장부(140) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있다.
도 1은 저장부(140)가 제어부(170)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(140)는 제어부(170) 내에 포함될 수 있다.
인터페이스부(150)는, 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달한다. 예를 들어, 인터페이스부(150)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 수신하거나, 제어부(170)로부터의 신호를 원격제어장치(200)로 송신할 수 있다. 센싱부(미도시)는, 원격제어장치(200)를 사용하지 않는 사용자가 영상표시장치(100)로 사용자 명령을 입력할 수 있도록 한다. 센싱부(미도시)의 구체적인 구성은 후술한다.
제어부(170)는, 튜너(110)와 복조부(120) 또는 외부신호입출력부(130)를 통하여 입력되는 스트림을 역다중화하고 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. 그 외 영상표시장치(100) 내의 전반적인 동작을 제어할 수 있다. 제어부(170)는 인터페이스부(150) 또는 센싱부(미도시)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다.
도 1에는 도시되어 있지 않으나, 제어부(170)는 역다중화부, 영상처리부, 음성처리부 등을 포함할 수 있다.
제어부(170)는 튜너(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.
제어부(170)는 수신되는 스트림 신호, 일예로 MPEG-2 TS를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다. 여기서, 제어부(170)에 입력되는 스트림 신호는 튜너(110), 복조부(120) 또는 외부신호입출력부(130)에서 출력되는 스트림 신호일 수 있다.
또한, 제어부(170)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 예를 들어, 역다중화된 영상 신호가 부호화된 영상 신호인 경우, 영상 복호화를 수행할 수 있다. 특히, 영상 복호화시, 역다중화된 영상 신호가, 2D 영상 및 3D 영상이 혼합된 신호인 경우, 또는 2D 영상 신호 또는 3D 영상 신호만으로 이루어진 경우, 이 해당 코덱(codec)에 따라 2D 영상 복호화 또는 3D 영상 복호화를 수행할 수 있다. 제어부(170)의 2D 영상 또는 3D 영상의 신호 처리 동작에 대해서는 이하의 도 3을 참조하여 상세히 설명하기로 한다.
또한, 제어부(170)는 영상 신호의 밝기(brightness), 틴트(Tint) 및 색조(Color) 조절 등을 처리할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이(180)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부신호입출력부(130)를 통하여 외부 출력장치로 입력될 수 있다.
또한, 제어부(170)는 역다중화된 음성 신호의 음성 처리를 수행할 수 있다. 예를 들어, 역다중화된 음성 신호가 부호화된 음성 신호인 경우, 이를 복호화할 수 있다. 구체적으로, 역다중화된 음성 신호가 MPEG-2 규격의 부호화된 음성 신호인 경우, MPEG-2 디코더에 의해 복호화될 수 있다. 또한, 역다중화된 음성 신호가 지상파 DMB(Digital Multimedia Broadcasting) 방식에 따른 MPEG 4 BSAC(Bit Sliced Arithmetic Coding) 규격의 부호화된 음성 신호인 경우, MPEG 4 디코더에 의해 복호화될 수 있다. 또한, 역다중화된 음성 신호가 위성 DMB 방식 또는 DVB-H에 따른 MPEG 2의 AAC(Advanced Audio Codec) 규격의 부호화된 음성 신호인 경우, AAC 디코더에 의해 복호화될 수 있다.
또한, 제어부(170)는 베이스(Base), 트레블(Treble), 음량 조절 등을 처리할 수 있다.
제어부(170)에서 처리된 음성 신호는 음향출력부(185)로 음향 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부신호입출력부(130)를 통하여 외부 출력장치로 입력될 수 있다.
또한, 제어부(170)는 역다중화된 데이터 신호의 데이터 처리를 수행할 수 있다. 예를 들어, 역다중화된 데이터 신호가 부호화된 데이터 신호인 경우, 이를 복호화할 수 있다. 부호화된 데이터 신호는, 각 채널에서 방영되는 방송프로그램의 시작시간, 종료시간 등의 방송정보를 포함하는 EPG(Electronic Progtam Guide) 정보일 수 있다. 예를 들어, EPG 정보는, ATSC방식인 경우, TSC-PSIP(ATSC-Program and System Information Protocol) 정보일 수 있으며, DVB 방식인 경우, DVB-SI(DVB-Service Information) 정보를 포함할 수 있다. ATSC-PSIP 정보 또는 DVB-SI 정보는, 상술한 스트림, 즉 MPEG-2 TS의 헤더(4 byte)에 포함되는 정보일 수 있다.
또한, 제어부(170)는 OSD(On Screen Display) 처리를 수행할 수 있다. 구체적으로 제어부(170)는, 영상 처리된 영상 신호와, 데이터 처리된 데이터 신호 중 적어도 하나 또는 원격제어장치(200)를 통하여 입력되는 사용자 입력 신호에 기초하여, 디스플레이(180)의 화면에 각종 정보를 그래픽(Graphic)이나 텍스트(Text)로 표시하기 위한 신호를 생성할 수 있다. 생성된 OSD 신호는 영상 처리된 영상 신호 및 데이터 처리된 데이터 신호와 함께, 디스플레이(180)에 입력될 수 있다.
상술한, 그래픽 또는 텍스트 디스플레이를 위하여 생성된 신호는 영상표시장치(100)의 사용자 인터페이스 화면, 다양한 메뉴 화면, 위젯, 아이콘 등의 다양한 데이터를 포함할 수 있다.
한편, 제어부(170)는, OSD 신호 생성시, 해당 OSD 신호를 2D 영상 신호 또는 3D 영상 신호로 구현할 수 있다. 이에 대해서는 이하의 도 3을 참조하여 상세히 설명하기로 한다.
또한, 제어부(170)는, 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)를 입력받아, 신호 처리를 수행한다. 여기서, 제어부(170)에 입력되는 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)는 튜너(110) 또는 외부신호입출력부(130)에서 출력된 아날로그 베이스 밴드 영상/음성신호일 수 있다. 신호 처리된 영상 신호는 디스플레이(180)로 입력되어 영상 표시되며, 신호 처리된 음성 신호는 음향출력부(185), 예를 들어 스피커로 입력되어 음성 출력되게 된다.
한편, 도면에 도시하지 않았지만, 채널 신호 또는 외부 입력 신호에 대응하는 썸네일 영상을 생성한는 채널 브라우징 처리부가 더 구비되는 것도 가능하다. 채널 브라우징 처리부는, 복조부(120)에서 출력한 스트림 신호(TS) 또는 외부신호입출력부(130)에서 출력한 스트림 신호 등을 입력 받아, 입력되는 스트림 신호로부터 영상을 추출하여 썸네일 영상을 생성할 수 있다. 생성된 썸네일 영상은 그대로 또는 부호화되어 제어부(170)로 입력될 수 있다. 또한, 생성된 썸네일 영상은 스트림 형태로 부호화되어 제어부(170)로 입력되는 것도 가능하다. 제어부(170)는 입력된 썸네일 영상을 이용하여 복수의 썸네일 영상을 구비하는 썸네일 리스트를 디스플레이(180)에 표시할 수 있다.
제어부(170)는 인터페이스부(150)를 통하여 원격제어장치(200)가 전송한 신호를 수신할 수 있다. 제어부(170)는 수신한 신호를 통하여 사용자가 원격제어장치(200)로 입력한 명령을 판별하고 그에 대응하도록 영상표시장치(100)를 제어한다. 일예로, 사용자가 소정 채널 선택명령을 입력하면, 제어부(170)는 선택한 채널의 신호가 입력되도록 튜너(110)를 제어한다. 또한, 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(170)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이(180) 또는 음향출력부(185)를 통하여 출력될 수 있도록 한다.
또 다른 예로, 사용자는 원격제어장치(200)를 통하여 다른 종류의 영상 또는 음성 출력 명령을 입력할 수 있다. 사용자는 방송 신호 대신 외부신호입출력부(130)를 통하여 입력되는 카메라 또는 캠코더 영상 신호를 시청하기를 원할 수 있다. 이 경우 제어부(170)는 외부신호입출력부(130)를 통하여 입력되는 영상 신호 또는 음성 신호가 디스플레이(180) 또는 음향출력부(185)를 통해 출력되도록 할 수 있다.
제어부(170)는 영상표시장치(100) 내에 구비되는 센싱부(미도시) 중 하나인 로컬 키(미도시)로 입력된 사용자 명령을 판별하고 그에 대응하도록 영상표시장치(100)를 제어할 수 있다. 일예로, 사용자는 로컬 키를 통하여 영상표시장치(100) 온/오프 명령, 채널 변경 명령, 볼륨 변경 명령 등을 입력할 수 있다. 로컬 키는 영상표시장치(100)에 형성된 버튼이나 키로 이루어질 수 있다. 제어부(170)는 로컬 키의 조작 여부를 판별하고 그에 따라 영상표시장치(100)를 제어할 수 있다.
디스플레이(180)는, 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부신호입출력부(130)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성한다.
디스플레이(180)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 특히, 본 발명의 실시예에 따라, 3차원 디스플레이(3D display)가 가능한 것이 바람직하다.
이를 위해 디스플레이(180)는, 추가 디스플레이 방식과 단독 디스플레이 방식으로 나뉠 수 있다.
단독 디스플레이 방식은, 별도의 추가 디스플레이, 예를 들어 안경 등이 없이, 디스플레이(180) 단독으로 3D 영상을 구현할 수 있는 것으로서, 그 예로, 렌티큘라 방식, 파라랙스 베리어(parallax barrier) 등 다양한 방식이 적용될 수 있다.
한편, 추가 디스플레이 방식은, 디스플레이(180) 외에 추가 디스플레이를 사용하여 3D 영상을 구현할 수 있는 것으로서, 그 예로, 헤드 마운트 디스플레이(HMD) 타입, 안경 타입 등 다양한 방식이 적용될 수 있다. 또한, 안경 타입은, 편광 안경 타입, 셔터 글래스(ShutterGlass) 타입, 스펙트럼 필터 타입 등이 적용될 수 있다.
한편, 디스플레이(180)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.
음향출력부(185)는, 제어부(170)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1 채널 신호 또는 5.1 채널 신호를 입력 받아 음성으로 출력한다. 음성 출력부(185)는 다양한 형태의 스피커로 구현될 수 있다.
원격제어장치(200)는, 사용자 입력을 인터페이스부(150)로 송신한다. 이를 위해, 원격제어장치(200)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(200)는, 인터페이스부(150)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(200)에서 표시하거나 음성 출력할 수 있다.
한편, 도면에서는 도시하지 않았지만, 본 발명의 실시에에 따른 영상표시장치(100)는, 센싱부(미도시)를 더 포함할 수 있다. 센싱부(미도시)는, 터치 센서, 음성 센서, 위치 센서, 동작 센서 등을 포함할 수 있다.
터치 센서는 디스플레이(180)를 구성하는 터치스크린일 수 있다. 터치 센서는 사용자가 터치스크린을 터치하는 위치 또는 세기 등을 센싱할 수 있다. 음성 센서는 사용자 음성 또는 사용자가 발생시키는 다양한 소리를 센싱할 수 있다. 위치 센서는 사용자의 위치를 센싱할 수 있다. 동작 센서는 사용자의 제스처 동작 등을 센싱할 수 있다. 위치 센서 또는 동작 센서는 적외선 감지 센서 또는 카메라로 구성될 수 있으며, 영상표시장치(100)와 사용자 사이의 거리, 사용자의 움직임 유무, 사용자의 손동작 등을 센싱할 수 있다.
상술한 각 센서는 사용자의 음성, 터치, 위치, 동작들을 센싱한 결과를 별도의 센싱신호 처리부(미도시)로 전달하거나, 또는 센싱 결과를 1차적으로 해석하고 그에 상응하는 센싱 신호를 생성하여 제어부(170)로 입력할 수 있다.
센싱신호 처리부(미도시)는 센싱부(미도시)에서 생성된 신호를 처리하여, 제어부(170)로 전달할 수 있다.
상술한 영상표시장치(100)는, 고정형으로서 ATSC 방식(8-VSB 방식)의 디지털 방송, DVB-T 방식(COFDM 방식)의 디지털 방송, ISDB-T 방식(BST-OFDM방식)의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 이동형으로서 지상파 DMB 방식의 디지털 방송, 위성 DMB 방식의 디지털 방송, ATSC-M/H 방식의 디지털 방송, DVB-H 방식(COFDM 방식)의 디지털 방송, 미디어플로(Media Foward Link Only) 방식의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 케이블, 위성통신, IPTV 용 디지털 방송 수신기일 수도 있다.
한편, 본 명세서에서 기술되는 영상표시장치는, TV 수상기, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.
한편, 도 1에 도시된 영상표시장치(100)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 영상표시장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 2는 도 1의 영상표시장치에 접속 가능한 외부장치의 일예를 도시한 도면이다. 도시된 바와 같이, 본 발명에 의한 영상표시장치(100)는 외부신호입출력부(130)를 통하여 외부 장치와 유/무선으로 접속될 수 있다.
본 실시예에서 영상표시장치(100)와 연결될 수 있는 외부 장치는, 예를 들어, 카메라(211), 스크린형 원격제어장치(212), 셋톱박스(213), 게임기기(214), 컴퓨터(215), 이동통신 단말기(216) 등이 있을 수 있다.
영상표시장치(100)는 외부신호입출력부(130)를 통하여 연결된 외부 장치의 그래픽 유저 인터페이스 화면을 디스플레이(180)에 표시할 수 있다. 사용자는 외부 장치와 영상표시장치(100)를 접속하고, 외부 장치에서 재생 중인 영상 또는 저장된 영상을 영상표시장치(100)를 통하여 시청할 수 있다.
또한, 영상표시장치(100)는 외부신호입출력부(130)를 통하여 연결된 외부 장치에서 재생 중인 음성 또는 저장된 음성을 음향출력부(185)를 통하여 출력할 수 있다.
영상표시장치(100)와 외부신호입출력부(130)를 통하여 연결된 외부 장치의 데이터, 예를 들어, 정지 영상 파일, 동영상 파일, 음악 파일 또는 텍스트 파일은, 영상표시장치(100) 내부의 저장부(140)에 저장될 수 있다.
영상표시장치(100)는 저장부(140)에 저장된 정지 영상 파일, 동영상 파일, 음악 파일 또는 텍스트 파일을 외부 장치와의 연결이 해제된 뒤에도 디스플레이(180)에 표시하거나, 음향출력부(185)를 통해 출력할 수 있다.
영상표시장치(100)는 외부신호입출력부(130)를 통하여 이동통신 단말기(216) 혹은 통신망과 연결되면, 영상 또는 음성통화를 위한 화면을 디스플레이(180)에 표시할 수 있다. 또한 영상표시장치(100)는 영상 또는 음성통화를 위한 음성을 음향출력부(185)를 통해 출력할 수 있다. 사용자는 이동통신 단말기(216) 혹은 통신망과 연결된 영상표시장치(100)를 이용하여 영상 또는 음성 통화를 할 수 있다.
도 3은 도 1의 제어부의 내부 블록도의 일예를 도시한 도면이며, 도 4는 도 3의 포맷터에서 2D 영상 신호와 3D 영상 신호의 분리를 보여주는 도면이고, 도 5는 도 3의 포맷터에서 출력되는 3D 영상의 다양한 포맷을 보여주는 도면이고, 도 6은 도 3의 포맷터에서 출력되는 3D 영상의 스케일링을 설명하기 위해 참조되는 도면이다.
본 발명의 일실시예에 의한 제어부(170)는, 영상처리부(310), 포맷터(320), OSD 생성부 (330), 및 믹서(340)를 포함할 수 있다.
먼저, 도 3(a)에 도시된 바와 같이, 제어부(170)는, 영상처리부(310)에서 복호화된 영상 신호에 기초하여 포맷터(320)에서 복수 시점의 영상으로 분리하여 처리할 수 있으며, 믹서(340)는 OSD 생성부 (330)에서 별도로 생성된 복수 시점 영상 신호와, 포맷터(320)에서 출력되는 복수 시점의 영상 신호를 믹싱할 수 있다.
영상 처리부(310)는, 튜너(110)와 복조부(120)를 거친 방송 신호 또는 외부신호입출력부(130)를 거친 외부입력신호 중 영상 신호를 처리할 수 있다.
한편, 영상 처리부(310)에 입력되는 신호는 상술한 바와 같이, 스트림 신호가 역다중화된 신호일수 있다.
예를 들어, 역다중화된 영상 신호가 MPEG-2 규격의 부호화된 2D 영상 신호인 경우, MPEG-2 디코더에 의해 복호화될 수 있다.
또한, 예를 들어, 역다중화된 2D 영상 신호가, DMB(Digital Multimedia Broadcasting) 방식 또는 DVB-H에 따른 H.264 규격의 부호화된 영상 신호인 경우, H.264 디코더에 의해 복호화될 수 있다.
또한, 예를 들어, 역다중화된 영상 신호가, MPEC-C part 3 의 깊이(depth) 영상인 경우, MPEC-C 디코더에 의해 복호화될 수 있다. 또한, 시차(disparity) 정보가 복호화될 수도 있다.
또한, 예를 들어, 역다중화된 영상 신호가 MVC (Multi-view Video Coding)에 따른 멀티 시점 영상인 경우 MVC 디코더에 의해 복호화될 수 있다.
또한, 예를 들어, 역다중화된 영상 신호가 FTV(Free-viewpoint TV)에 따른 자유 시점 영상인 경우, FTV 디코더에 의해 복호화될 수 있다.
한편, 영상 처리부(310)에서 복호화된 영상 신호는, 2D 영상 신호만 있는 경우, 2D 영상 신호와 3D 영상 신호가 혼합된 경우, 및 3D 영상 신호만 있는 경우로 구분될 수 있다.
한편, 영상 처리부(310)에서 복호화된 영상 신호는, 상술한 바와 같이, 다양한 포맷의 3D 영상 신호일 수 있다. 예를 들어, 색차 영상(color image) 및 깊이 영상(depth image)으로 이루어진 3D 영상 신호일 수 있으며, 또는 복수 시점 영상 신호로 이루어진 3D 영상 신호 등일 수 있다. 복수 시점 영상 신호는, 예를 들어, 좌안 영상 신호와 우안 영상 신호를 포함할 수 있다.
여기서, 3D 영상 신호의 포맷은, 도 5와 같이, 좌안 영상 신호(L)와 우안 영상 신호(R)를 좌,우로 배치하는 사이드 바이 사이드(Side by Side) 포맷(도 5a), 상,하로 배치하는 탑 다운(Top / Down) 포맷(도 5b), 시분할로 배치하는 프레임 시퀀셜(Frame Sequential) 포맷(도 5c), 좌안 영상 신호와 우안 영상 신호를 라인 별로 혼합하는 인터레이스 (Interlaced) 포맷(도 5d), 좌안 영상 신호와 우안 영상 신호를 박스 별로 혼합하는 체커 박스(Checker Box) 포맷(도 5e) 등일 수 있다.
한편, 영상 처리부(310)는, 복호화된 영상 신호에 캡션 또는 데이터 방송 등과 관련된 영상 신호가 포함된 경우, 이를 분리하여, OSD 생성부(330)로 출력할 수 있다. 캡션 또는 데이터 방송 등과 관련된 영상 신호는, OSD 생성부(330)에서 3D 오브젝트로 생성될 수 있다.
포맷터(320)는, 복호화된 영상 신호를 입력 받아, 2D 영상 신호와 3D 영상 신호를 분리할 수 있다. 그리고, 3D 영상 신호를 복수 시점의 영상 신호로 분리할 수 있다. 예를 들어, 좌안 영상 신호와 우안 영상 신호로 분리할 수 있다.
복호화된 영상 신호가 2D 영상 신호인지 또는 3D 영상 신호인지 여부는, 해당 영상 신호가 3D 영상임을 나타내는 스트림의 헤더(header) 내의 3D 영상 플래그(flag) 또는 3D 영상 메타 데이터(meta data) 또는 3D 영상의 포맷 정보(format information) 등을 참조하여 판단할 수 있다.
이러한 3D 영상 플래그, 3D 영상 메타 데이터는, 또는 3D 영상의 포맷 정보는, 3D 영상 정보 외에, 3D 영상의 위치 정보, 영역 정보 또는 크기 정보를 포함할 수도 있다.
한편, 3D 영상 플래그, 3D 영상 메타 데이터 또는 3D 영상의 포맷 정보는, 스트림 역다중화시에 복호화되어 포맷터(320)에 입력될 수 있다.
포맷터(320)는, 3D 영상 플래그, 3D 영상 메타 데이터 또는 3D 영상의 포맷 정보를 이용하여, 복호화된 영상 신호로부터 3D 영상 신호를 분리할 수 있다.
그리고, 포맷터(320)는, 3D 영상의 포맷 정보를 기반으로, 소정 포맷의 3D 영상 신호를 재조합하여, 복수 시점의 3D 영상 신호를 생성할 수 있다. 예를 들어, 좌 영상 신호와 우안 영상 신호로 분리할 수 있다.
포맷터(175)는 입력되는 영상신호의 포맷을 영상신호와 관련된 데이터신호를 참조하여 판별할 수 있다. 포맷터(175)는 입력되는 영상신호를 디스플레이부(180)에 적합한 포맷으로 변환하여 디스플레이부(180)로 출력할 수 있다.
도 4는, 영상처리부(310)에서 수신되는 복호화된 영상 신호로부터 2D 영상 신호와 3D 영상 신호가 분리되고, 포맷터(320)에서 3D 영상 신호가 재조합되어 좌완 영상 신호와 우안 영상 신호로로 분리되는 것을 보여준다.
먼저 도 4(a)와 같이, 제1 영상 신호(410)가 2D 영상 신호이고, 제2 영상 신호(420)가 3D 영상 신호인 경우, 포맷터(320)는 제1 영상 신호(410)와 제2 영상 신호(420)를 분리하며, 다시 제2 영상 신호를 좌안 영상 신호(423)와 우안 영상 신호(426)로 분리할 수 있다. 한편, 제1 영상 신호(410)는, 디스플레이(180)에 표시되는 메인 영상에 대응할 수 있으며, 제2 영상 신호(420)는, 디스플레이(180)에 표시되는 PIP 영상에 대응할 수 있다.
다음, 도 4(b)와 같이, 제1 영상 신호(410) 및 제2 영상 신호(420) 모두가 3D 영상 신호인 경우, 포맷터(320)는 이를 각각 분리하고, 제1 영상 신호(410) 및 제2 영상 신호(420) 각각을 좌안 영상 신호(413,423)와 우안 영상 신호(416,426)로 분리할 수 있다.
다음, 도 4(c)와 같이, 제1 영상 신호(410)가 3D 영상 신호이고, 제2 영상 신호(420)가 2D 영상 신호인 경우, 포맷터(320)는 제1 영상 신호(410)을 좌안 영상 신호(413)와 우안 영상 신호(416)로 분리할 수 있다.
다음, 도 4(d) 및 도 4(e)와 같이, 제1 영상 신호(410) 및 제2 영상 신호(420) 중 어느 하나가 3D 영상 신호이고, 다른 하나가 2D 영상 신호인 경우, 2D 영상 신호는 3D 영상 신호로 전환될 수 있다. 이러한 전환은 사용자의 입력에 따라 수행될 수 있다.
예를 들어, 3D 영상 생성 알고리즘에 따라 2D 영상 신호 내에서 에지(edge)를 검출하고, 검출된 에지(edge)에 따른 오브젝트를 3D 영상 신호로 분리하여 생성할 수 있다. 또한, 예를 들어, 3D 영상 생성 알고리즘에 따라 2D 영상 신호 내에서, 선택 가능한 오브젝트를 검출하고, 해당 오브젝트를 3D 영상 신호로 분리하여 생성하는 것도 가능하다. 이때, 생성된 3D 영상 신호는 상술한 바와 같이, 좌안 영상 신호(L)와 우안 영상 신호(R)로 분리될 수 있다. 한편, 2D 영상 신호 중 3D 영상 신호로 생성된 오브젝트 영역을 제외한 부분은 새로운 2D 영상 신호로 출력될 수 있다.
한편, 제1 영상 신호(410) 및 제2 영상 신호(420) 모두가 2D 영상 신호인 경우, 도 4(f)와 같이 어느 하나의 2D 영상 신호만 3D 영상 생성 알고리즘에 따라 3D 영상 신호로 전환될 수 있다. 또는 도 4(g)와 같이 모든 2D 영상 신호가 3D 영상 생성 알고리즘에 따라 3D 영상 신호로 전환될 수도 있다.
한편, 포맷터(320)는, 3D 영상 플래그, 3D 영상 메타 데이터 또는 3D 영상의 포맷 정보가 있는 경우, 이를 이용하여 3D 영상 신호 인지 등을 판별하며, 3D 영상 플래그, 3D 영상 메타 데이터 및 3D 영상의 포맷 정보가 없는 경우, 상술한 바와 같이 3D 영상 생성 알고리즘을 이용하여 3D 영상 신호 인지 등을 판별할 수 있다.
한편, 포맷터(320)에서 출력되는 3D 영상 신호는 좌안 영상 신호(413 또는 423)와 우안 영상(416 또는 426) 신호로 분리되고, 도 5에 예시된 포맷 중 어느 하나의 포맷으로 출력될 수 있다. 이때, 2D 영상 신호는, 포맷터(320)에서 별도의 신호처리 없이 그대로 출력되거나 또는 3D 영상 신호의 포맷에 따라 해당 포맷으로 변형되어 출력될 수도 있다.
도 5는 본 실시예의 포맷터(320)를 통하여 생성될 수 있는 3D 영상 신호 포맷에 관한 설명에 참조되는 도이다. 본 실시예의 포맷터(320)는 좌안 영상 신호(L)과 우안 영상 신호(R)를 좌,우로 배치하는 사이드 바이 사이드(Side by Side) 포맷a), 상,하로 배치하는 탑 다운(Top / Down) 포맷(b), 시분할로 배치하는 프레임 시퀀셜(Frame Sequential) 포맷(c), 좌안 영상 신호와 우안 영상 신호를 라인 별로 혼합하는 인터레이스 (Interlaced) 포맷(d), 좌안 영상 신호와 우안 영상 신호를 박스 별로 혼합하는 체커 박스(Checker Box) 포맷(e) 등 다양한 포맷의 3D 영상 신호를 출력할 수 있다.
한편, 사용자는 도 5에 예시된 포맷 중 어느 하나를 출력 포맷으로 선택할 수도 있다. 사용자가 탑 다운(Top / Down) 포맷을 포맷터(320)의 출력 포맷으로 선택한 경우, 포맷터(320)는 입력되는 다른 포맷, 예를 들어 사이드 바이 사이드(Side by Side) 포맷의 3D 영상 신호를 재조합하여, 좌안 영상 신호와 우안 영상 신호로 분리한 후, 탑 다운(Top / Down) 포맷으로 변형하여 출력할 수 있다.
한편, 포맷터(320)에 입력되는 3D 영상 신호는 방송 영상 신호 또는 외부 입력 신호일수 있으며, 그 자체로 소정 깊이(depth)를 갖는 3D 영상 신호일 수 있다. 이에 따라, 포맷터(320)는, 해당 깊이를 갖는 3D 영상 신호를 좌안 영상 신호와 우안 영상 신호로 분리할 수 있다.
한편, 서로 다른 깊이를 가지는 3D 영상 신호는 깊이 차이로 인하여 서로 다른 좌안 영상 신호와 우안 영상 신호로 분리될 수 있다. 즉, 3D 영상 신호의 깊이에 따라 좌안 영상 신호와 우안 영상 신호는 변경될 수 있다.
한편, 사용자의 입력 또는 설정에 따라, 3D 영상 신호의 깊이를 변경하는 경우, 포맷터(320)는, 변경된 깊이에 따라 각각 해당하는 좌안 영상 신호와 우안 영상 신호로 분리할 수 있다.
또한, 포맷터(320)는, 3D 영상 신호를 스케일링할 수 있다. 구체적으로는 3D 영상 신호 내의 3D 오브젝트를 스케일링할 수 있다.
도 6을 참조하면, 포맷터(320)는 3D 영상 신호를 다양한 방식으로 스케일링할 수 있다.
도 6(a)와 같이, 3D 영상 신호 또는 3D 영상 신호 내의 3D 오브젝트를 일정 비율로 전체적으로 확대 또는 축소할 수 있으며, 또한 도 6(b)와 같이, 3D 오브젝트를 부분적으로 확대 또는 축소(사다리꼴 형태)할 수도 있다. 또한, 도 6(c)와 같이, 3D 오브젝트를 적어도 일부를 회전(평행 사변형 형태)시킬 수도 있다. 이러한 스케일링을 통해, 3D 영상 신호 또는 3D 영상 신호 내의 3D 오브젝트에 입체감 즉, 3D 효과(effect)를 강조할 수 있게 된다.
한편, 도 6의 3D 영상 신호는 도 4(a)의 제2 영상 신호에 대응하는 좌안 영상 신호 또는 우안 영상 신호일 수 있다. 즉, PIP 영상에 대응하는 좌안 영상 신호또는 우안 영상 신호일 수 있다.
결국, 포맷터(320)는, 복호화된 영상 신호를 수신하여, 2D 영상 신호 또는 3D 영상 신호를 분리하며, 3D 영상 신호를 좌안 영상 신호와 우안 영상 신호으로 다시 분리할 수 있다. 그리고, 좌안 영상 신호와 우안 영상 신호를 스케일링하여, 도 5와 같은 소정 포맷으로 출력할 수 있다. 한편, 스케일링은 출력 포맷 형성 후 수행되는 것도 가능하다.
OSD 생성부(330)는, 사용자 입력에 따라 또는 자체적으로 OSD 신호를 생성한다. 생성되는 OSD 신호는, 2D OSD 오브젝트 또는 3D OSD 오브젝트를 포함할 수 있다.
2D OSD 오브젝트 또는 3D OSD 오브젝트 인지 여부는, 사용자 입력에 따라 또는 오브젝트의 크기 또는 선택 가능한 오브젝트인지 여부 등에 따라 결정될 수 있다.
OSD 생성부(330)는, 복호화된 영상 신호를 입력받아 처리하는 포맷터(320)와 달리, 바로 2D OSD 오브젝트 또는 3D OSD 오브젝트를 생성하여 출력할 수 있다. 한편, 3D OSD 오브젝트는 도 6과 같이, 다양한 방식으로 스케일링되어 출력될 수 있다. 또한, 깊이에 따라 출력되는 3D OSD 오브젝트는 가변할 수 있다.
출력시의 포맷은, 도 5에 도시된 바와 같이, 좌안용과 우안용이 결합된 다양한 포맷 중 어느 하나일 수 있다. 이때 출력 포맷은 포맷터(320)의 출력 포맷과 동일하게 된다. 예를 들어, 사용자가 탑 다운(Top / Down) 포맷을 포맷터(320)의 출력 포맷으로 선택한 경우, OSD 생성부(330)의 출력 포맷은 탑 다운(Top / Down) 포맷으로 결정된다.
한편, OSD 생성부(330)는, 영상 처리부(310)로부터, 캡션 또는 데이터 방송 등과 관련된 영상 신호를 입력받아, 캡션 또는 데이터 방송 등과 관련된 OSD 신호를 출력할 수도 있다. 이때의 OSD 신호는, 상술한 바와 같이, 2D OSD 오브젝트 또는 3D OSD 오브젝트일 수 있다.
믹서(340)는, 포맷터(340)에서 출력되는 영상 신호와 OSD 생성부에서 출력되는 OSD 신호를 믹싱하여 출력한다. 출력되는 영상 신호는 디스플레이(180)에 입력된다.
한편, 제어부(170) 내부의 내부 블록도는 도 3(b)와 같이 구성될 수도 있다. 도 3(b)의 영상처리부(310), 포맷터(320), 및 OSD 생성부(330), 및 믹서(340)는 도 3(a)와 유사하며, 이하에서는 그 차이점을 기술한다.
일단, 믹서(340)는, 영상처리부(310)로부터의 복호화된 영상 신호와 OSD 생성부(330)에서 생성된 OSD 신호를 믹싱한다. 믹서(340)의 출력을 포맷터(320)에서 입력 받아 처리하므로, 3D 오브젝트 자체를 생성하고 해당 포맷에 맞게 출력하는 도 3(a)의 OSD 생성부(330)와 달리, 도 3(b)의 OSD 생성부(330)는 3D 오브젝트에 대응하는 OSD 신호를 생성하면 충분하다.
포맷터(320)는, 이러한 OSD 신호와 복호화된 영상 신호를 입력받아, 상술한 바와 같이, 3D 영상 신호를 분리하고, 3D 영상 신호를 복수 시점 영상 신호로 분리한다. 예를 들어, 3D 영상 신호는 좌안 영상 신호와 우안 영상 신호로 분리될 수 있으며, 분리된 좌안 영상 신호와 우안 영상 신호는 도 6과 같이 스케일링 처리되어 도 5에 도시된 소정 포맷으로 출력될 수 있다.
한편, 도 3에 도시된 제어부(170)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 제어부(170)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 7은 도 1의 영상표시장치에 표시되는 영상의 일 예를 도시한 도면이다.
도면을 참조하면, 영상표시장치(100)는 도 5에 도시된 3D 영상 포맷 중 탑 다운 방식에 적합하도록 3D 영상을 표시할 수 있다.
도 7a는, 영상표시장치(100)에서 영상 재생이 중단된 경우, 디스플레이(180)에 표시되는 영상을 도시한다. 탑 다운 포맷은 도시된 바와 같이 상하로 복수시점 영상을 배열한다. 따라서, 영상 재생이 중단된 경우, 도 7a에 도시된 바와 같이, 상하가 분리된 영상(351, 352)이 디스플레이(180)에 표시된다.
한편, 예를 들어, 편광 안경 등 추가 디스플레이 방식에 의하여 3D 영상 등을 표시하는 경우, 사용자가 편광 안경 등을 착용하지 아니하면, 시청하는 영상의 초점이 맞지 아니한다.
즉, 도 7b에 도시된 바와 같이, 편광 안경 등을 착용하지 않고 시청하는 경우, 3D 오브젝트(353a, 353b, 353c)의 초점이 맞지 아니할 수 있다. 디스플레이(180)에 표시되는 영상(353)도 그러할 수 있다.
도 7c는 도 7b에 도시된 영상표시장치(100)의 화면을 편광 안경 등을 착용하고 시청하는 경우, 사용자에게 보여지는 영상(354) 및 3D 오브젝트(354a, 354b, 354c)의 초점이 맞는 것을 보여준다. 이때, 3D 오브젝트(354a, 354b, 354c)는 사용자를 향하여 돌출되도록 보이게 된다.
한편, 단독 디스플레이 방식에 따라 3D 영상을 표시하는 영상표시장치의 경우, 사용자가 편광 안경 등을 착용하지 않아도 사용자에게 보여지는 영상 및 3D 오브젝트는 도 7c와 같을 수 있다.
한편, 본 명세서에서의 오브젝트는, 오브젝트는 영상표시장치(100)의 음성 출력 레벨, 채널 정보, 현재 시간 등 영상표시장치(100)에 관한 정보 또는 영상표시장치(100)에서 표시하고 있는 영상에 관한 정보를 나타내는 이미지 또는 텍스트를 포함할 수 있다.
일예로, 오브젝트는 영상표시장치(100)의 디스플레이(180)에 표시되는 볼륨 조절 버튼, 채널 조절 버튼, 영상표시장치 제어 메뉴, 아이콘, 네비게이션 탭, 스크롤 바, 프로그래시브 바, 텍스트 박스, 윈도우 중 하나일 수 있다.
이러한 오브젝트를 통해, 사용자는 영상표시장치(100)에 관한 정보 또는 영상표시장치(100)에서 표시하고 있는 영상에 관한 정보를 인지할 수 있다. 또한 영상표시장치(100)에 표시된 오브젝트를 통하여 영상표시장치(100)로 명령을 입력할 수 있다.
한편, 본 명세서에서는 사용자 방향으로 돌출되는 3D 오브젝트의 깊이(depth)는 (+)로 설정하며, 디스플레이(180) 또는 디스플레이(180)에 표시되는 2D 영상 또는 3D 영상의 깊이(depth)는 0 으로 설정한다. 그 외 디스플레이(180) 내로 오목하게 표현되는 3D 오브젝트의 깊이(depth)는 (-)로 설정한다. 결국, 그 시청자 방향으로 돌출될수록 그 깊이(depth)는 더 커지는 것으로 한다.
한편, 본 명세서에서의 3D 오브젝트는, 입체감을 가지도록 처리된 오브젝트로서, 도 6에서 예시된 스케일링에 의해 입체감을 갖는 오브젝트 또는 깊이를 달리 갖는 오브젝트를 포함한다.
한편, 도 7c에서는 3D 오브젝트의 예로, PIP 영상 등을 예시하나, 이에 한정되지 않으며, 방송 프로그램 정보를 나타내는 EPG, 영상표시장치의 다양한 메뉴, 위젯, 아이콘 등이 될 수 있다.
도 8은 본 발명의 일 실시예에 따른 영상표시장치의 동작 방법을 나타낸 흐름도이다.
앞서 설명한 바와 같이, 본 발명의 실시예에 따른 영상표시장치는 입체 영상의 표시를 위해 좌안 영상과 우안 영상을 생성하거나, 좌안 영상을 위한 좌안 영상 신호 및 우안 영상을 위한 우안 영상 신호를 수신한다. 그런데 좌안 영상과 우안 영상의 히스토그램이 상이한 경우, 화질이 더 좋은 영상을 기준으로 영상의 픽셀값을 보정함으로서 입체 영상의 화질을 개선시킬 수 있다.
이를 위해 먼저 제어부(170)는 좌안 영상과 상기 우안 영상의 히스토그램(Histogram)을 추출한다(S810). 히스토그램은 일반적으로 도수분포를 나타내기 위해, 관측한 데이터의 분포의 특징이 한눈에 보이도록 나타낸 그래프를 의미한다. 그러나 본 발명의 실시예에서 히스토그램은 이러한 그래프의 일종으로 영상 히스토그램(Image Histogram)을 의미한다. 이하에서 설명할 히스토그램에서 가로축(x-axis)은 0 내지 255까지의 픽셀값을, 세로축(y-axis)은 픽셀(pixel)의 개수를 나타낸다. 즉 특정 영상 내에서 각각의 픽셀값을 가지는 픽셀들이 몇 개씩 있는지를 나타낸 그래프로서 해당 영상의 색조의 다양성(total variation), 색조나 명암의 분포 상태가 히스토그램에 나타난다. 예컨대, 가로축을 따라 픽셀값 0 주변에 픽셀의 수가 많이 분포된 히스토그램을 보이는 영상일수록 전체적으로 어두운 톤을 가지는 영상이고, 반대로 픽셀값 255 주변에 많은 픽셀수가 분포된 히스토그램을 보이는 영상일수록 전체적으로 밝은 톤을 가지는 영상일 수 있다.
상술한 과정을 통해 양안 영상에 대한 히스토그램이 도출되면, 좌안 영상의 히스토그램과 우안 영상의 히스토그램을 비교한다(S820). 비교 결과, 두 영상의 히스토그램이 상이하다면, 영상 내에서 동일한 위치에 있으나 서로 다른 픽셀값을 가지는 지점에 대해 픽셀값을 보정한다(S830). 여기서, 영상 내에서 동일한 위치에 있는 지점 또는 그 픽셀을 대응 픽셀이라고 지칭하도록 한다. 특히 좌안 영상 내에 있는 대응 픽셀을 좌안 영상 대응 픽셀, 우안 영상 내에 있는 대응 픽셀을 우안 영상 대응 픽셀이라고 지칭할 수 있다.
좌안 영상 대응 픽셀과 우안 영상 대응 픽셀은 영상 출력 시 입체 영상 내에서 동일한 지점을 나타내게 되는 두 픽셀이다. 따라서 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀은 좌안 영상과 우안 영상 내에서 각각 동일한 좌표값을 가진다. 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀이 서로 다른 픽셀값을 가지는 경우, 이러한 대응 픽셀들이 픽셀값 보정의 대상이 되며, 이러한 대응 픽셀들을 탐색하는 단계가 추가될 수 있다.
제어부(170)는 서로 다른 픽셀값을 가지는 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀이 발견된 경우, 좌안 영상 대응 픽셀 및/또는 우안 영상 대응 픽셀의 픽셀값을 동일하게 보정한다. 보다 상세하게는, 제어부(170)의 역다중화부(미도시) 또는 영상 처리부(310)가 영상 신호와 그 영상에 대한 데이터 신호를 분리하는데, 여기서 각 픽셀의 픽셀값 정보는 분리된 데이터 신호에 포함된다. 그리고 픽셀값의 보정에 따라 수정된 데이터 신호는 포맷터(320)로 전달된다. 픽셀값의 보정을 위한 영상 보정부(미도시)가 별도로 마련될 수 있다. 포맷터(320)는 보정된 픽셀값 정보를 포함하는 데이터 신호와 영상 신호를 수신하여 디스플레이(180)의 규격에 맞게 영상 신호를 처리함과 동시에 좌안 영상과 우안 영상을 보정 또는 재생성하게 된다.
어떤 값을 기준으로 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀의 픽셀값을 보정할 것인지에 대해서는 다양한 예가 있을 수 있다. 예컨대 좌안 영상과 우안 영상 중 화질이 더 좋은 영상을 기준으로 나머지 한 영상의 대응 픽셀의 픽셀값을 보정하면 입체 영상의 화질을 개선할 수 있다. 이 외에도 전술한 바와 같이, 좌안 영상과 우안 영상 중 화질이 더 좋은 영상을 기준으로 나머지 한 영상의 대응 픽셀의 픽셀값을 보정하거나, 두 픽셀의 픽셀값의 평균값으로 두 픽셀의 픽셀값을 보정할 수도 있다. 좌안 영상 대응 픽셀 또는 우안 영상 대응 픽셀의 픽셀값을 보정하는 방법에 대해서는 이후 다른 실시예들을 더 참조하여 보다 상세하게 설명하도록 한다.
포맷터(320)는 보정된 좌안 영상 신호와 우안 영상 신호를 디스플레이(180)로 출력한다. 그러면 디스플레이(180)는 보정된 좌안 영상과 우안 영상을 표시하여, 입체감 있는 영상을 표시할 수 있게 된다(S840).
도 9는 본 발명의 다른 실시예에 따른 영상표시장치의 동작 방법을 나타낸 흐름도이다.
입체 영상을 표시하기 위한 영상 신호(여기서, 영상 신호는 좌안 영상 신호와 우안 영상 신호를 포함함)가 생성 또는 수신되면, 제어부(170)는 좌안 영상과 우안 영상의 히스토그램을 비교한다(S910). 양 영상의 히스토그램이 상이한 경우, 제어부(170)는 좌안 영상과 우안 영상 중 영상의 계조 또는 명암비 중 하나 이상이 더 높은 영상을 선택한다(S920).
계조는 영상에서 농도가 가장 짙은 부분에서 가장 옅은 유효농도부까지의 농도 이행단계를 의미한다. 영상의 계조가 좋을수록, 명암의 단계가 세분화되어 있으므로 영상의 어두운 부분에서 밝은 부분까지의 변화가 순차적으로 자연스럽게 표현될 수 있다. 좌안 영상과 우안 영상의 계조를 비교하기 위해, 영상의 계조를 수치화하여 계조값으로 환산한 후, 좌안 영상의 계조값과 우안 영상의 계조값을 서로 비교할 수 있다. 여기서는 계조값이 더 높은 영상이 계조가 더 좋은 영상으로 판단될 수 있다.
그리고 명암비는 영상의 가장 밝은 곳과 어두운 곳 사이에 드러나는 밝은 정도의 차이를 의미한다. 즉, 영상의 명암비는 해당 영상 내에서 가장 어두운 부분(가장 검게 보이는 부분)과 가장 밝은 부분 화면(가장 희게 보이는 부분)간의 광도의 차이를 나타낸다. 따라서 좌안 영상과 우안 영상의 명암비에 따라 양 영상의 선명도가 다르게 보일 수 있다
즉 도 9를 참조하여 설명하는 실시예에 따르면, 계조가 더 좋은 영상 또는 명암비에 따른 선명도가 더 높은 영상을 기준으로 픽셀값을 보정할 수 있다. 더 높은 계조값을 가지는 영상을 기준으로 상기 좌안 영상 대응 픽셀의 픽셀값 또는 상기 우안 영상 대응 픽셀의 픽셀값 중 하나를 보정한다. 예컨대 좌안 영상의 계조값이 더 높거나 명암비가 더 높은 경우, 좌안 영상 대응 픽셀의 픽셀값을 기준으로 다른 픽셀값을 가지는 우안 영상 대응 픽셀의 픽셀값을 보정한다. 마찬가지로, 우안 영상의 계조값 또는 명암비가 더 높은 경우, 좌안 영상 대응 픽셀의 픽셀값을 우안 영상 대응 픽셀의 픽셀값으로 보정한다(S930). 결과적으로, 도 9를 참조하여 설명하는 실시예에 따르면 좌안 영상과 우안 영상 중 하나의 영상에 대해서만 대응 픽셀의 픽셀값 보정이 수행된다.
좌안 영상 또는 우안 영상의 픽셀값들이 보정되면, 보정된 좌안 영상 또는 우안 영상을 디스플레이(180)가 표시한다(S940).
도 10은 본 발명의 또 다른 실시예에 따른 영상표시장치의 동작 방법을 나타낸 흐름도이다.
입체 영상을 표시하기 위한 영상 신호(여기서, 영상 신호는 좌안 영상 신호와 우안 영상 신호를 포함할 수 있음)가 생성 또는 수신되면, 제어부(170)는 좌안 영상과 우안 영상의 히스토그램을 비교한다(S1010). 양 영상의 히스토그램이 상이한 경우, 제어부(170)는 서로 다른 픽셀값을 가지는 좌안 영상 대응 픽셀 및/또는 우안 영상 대응 픽셀의 픽셀값들을 보정한다. 픽셀값의 보정을 위해 제어부(170)는 서로 다른 값을 가지는 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀을 탐색한다(S1020).
탐색 결과, 서로 다른 픽셀값을 가지는, 즉 픽셀값 보정의 대상이 되는 대응 픽셀들을 픽셀값의 영역에 따라 다른 방법으로 픽셀값을 보정할 수 있는데, 제어부(170)는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 범위에 따라 상기 좌안 영상 대응 픽셀의 픽셀값, 상기 우안 영상 대응 픽셀의 픽셀값, 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 평균값 중 하나의 값을 기준으로 상기 픽셀값을 보정하게 된다. 여기서는 일 예로, 픽셀값의 총 범위인 0에서 255를 3개의 영역으로 나누어 생각하기로 한다. 픽셀값의 범위는 0에서 제1 기준치, 제1 기준치에서 제2 기준치, 제2 기준치에서 255의 세 영역으로 구분하도록 한다. 픽셀값의 총 영역을 몇 개의 영역으로 구분하여 픽셀값 보정의 방법을 달리할 것인지는 실시예에 따라 달라질 수 있으며, 이로 인해 본 발명의 권리 범위가 제한되지 아니함은 물론이다.
제어부(170)는 보정 대상이 되는 좌안 영상 대응 픽셀 또는 우안 영상 대응 픽셀의 픽셀값이 0보다 크거나 같고 제1 기준치보다 작은지 판단한다(S1030). 이 경우에는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 더 작은값을 기준으로 한다. 즉 영상 내에서 어둡게 표현된 부분에 대한 픽셀들은 더 어두운 픽셀값으로 보정된다.
좌안 영상 대응 픽셀과 우안 영상 대응 픽셀의 픽셀값이 0보다 크거나 같고 제1 기준치보다 작으며, 예컨대 좌안 영상 대응 픽셀의 픽셀값이 우안 영상 대응 픽셀의 픽셀값보다 작은 경우, 제어부(170)는 우안 영상 대응 픽셀의 픽셀값을 좌안 영상 대응 픽셀의 픽셀값으로 수정한다. 이 경우, 어두운 영역은 더 어둡게 표시된다. 우안 영상 대응 픽셀의 픽셀값이 더 작은 경우에도 마찬가지의 규칙에 따라, 좌안 영상 대응 픽셀의 픽셀값이 수정된다(S1040).
보정 대상이 되는 좌안 영상 대응 픽셀 또는 우안 영상 대응 픽셀의 픽셀값이 제1 기준치보다 작은 경우, 제어부(170)는 보정 대상이 되는 픽셀값들이 제1 기준치보다 크거나 같고 제2 기준치보다 작은지 판단한다(S1050). 물론 단계 S1030, 단계 S1050 및 단계 S1070은 서로 반드시 종속될 필요가 없고 이들 단계 간에 순서나 우열이 순서가 정해져 있을 필요도 없다. 제어부(170)는 이들 단계(S1030, S1050 및 S1080)를 동시에 독립적으로 수행할 수도 있고, 순차적으로 수행할 수도 있다.
보정 대상이 되는 좌안 영상 대응 픽셀 또는 우안 영상 대응 픽셀의 픽셀값이 제1 기준치보다 크거나 같고 제2 기준치보다 작다면, 이 경우에는 좌안 영상 대응 픽셀의 픽셀값과 우안 영상 대응 픽셀의 픽셀값의 평균값이 픽셀값 보정의 기준이 된다. 즉 영상 내에서 중간 정도의 밝기를 가지는 부분에 대한 픽셀에 대해 픽셀값이 보정되는 경우, 이 부분에 대해서는 픽셀값의 보정을 통해 좌안 영상과 우안 영상의 중간 정도의 밝기로 통일된다.
이를 위해 좌안 영상 대응 픽셀의 픽셀값과 우안 영상 대응 픽셀의 픽셀값의 평균값을 산출하는 단계가 더 포함될 수 있다(S1060). 평균값은 산술 평균, 기하 평균, 조화 평균 등에 따른 평균값 중 어느 하나일 수 있는데, 평균값을 산출하는 방법에 특별한 제한은 없다.
즉, 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀의 픽셀값이 제1 기준치보다 크거나 같고 제2 기준치보다 작은 경우 제어부(170)는 좌안 영상 대응 픽셀의 픽셀값과 우안 영상 대응 영상의 픽셀값을 모두 평균값으로 수정한다(S1070).
제어부(170)는 보정 대상이 되는 좌안 영상 대응 픽셀 또는 우안 영상 대응 픽셀의 픽셀값이 제2 기준치보다 크거나 같은지 판단한다(S1080). 즉 보정 대상이 되는 픽셀값의 범위가 제2 기준치보다 크거나 같고 255 이하인 경우가 이에 해당된다. 제어부(170)는 좌안 영상 대응 픽셀의 픽셀값과 우안 영상 대응 픽셀의 픽셀값 중 큰값으로 나머지 픽셀값을 보정한다(S1090). 즉 좌안 영상 대응 픽셀의 픽셀값이 더 크다면 좌안 영상 대응 픽셀의 픽셀값으로 우안 영상 대응 픽셀의 픽셀값을 수정하고, 우안 영상 대응 픽셀의 픽셀값이 더 크다면 우안 영상 대응 픽셀의 픽셀값으로 좌안 영상 대응 픽셀의 픽셀값을 수정한다.
즉, 영상 내에서 밝게 표시되는 부분에 대하여 좌안 영상과 우안 영상 간에 차이가 있다면, 그 부분에 관한 한 보다 밝은 쪽을 기준으로 나머지 영상의 픽셀값을 보정하게 된다. 이에 따라 화면 전체적인 명암비가 증가하게 되고, 화면의 선명도나 대비(contrast)가 증가할 수 있다. 디스플레이(180)는 보정된 좌안 영상과 보정된 우안 영상을 이용하여 입체 영상을 표시할 수 있다(S1095).
도 11 및 도 12는 보정 전의 좌안 영상, 우안 영상 및 각각의 히스토그램을 예시한 도면이다. 그리고 도 13은 도 10을 참조하여 설명한 실시예에 따른 영상표시장치 및 그 동작 방법에 의해 보정된 좌안 영상, 우안 영상 및 각각의 히스토그램을 예시한 도면이다.
도 11은 좌안 영상 대응 픽셀의 추출 및 픽셀값 보정 전의 좌안 영상 및 해당 좌안 영상의 보정 전 히스토그램을 나타낸다. 좌안 영상의 히스토그램에는 좌안 제1 영역(1110) 및 좌안 제2 영역(1115)이 도시되어 있다. 그리고 도 12는 우안 영상 대응 픽셀의 추출 및 픽셀값 보정 전의 우안 영상 및 해당 우안 영상의 보정 전 히스토그램을 나타낸다. 우안 영상의 히스토그램에는 우안 제1 영역(1210) 및 우안 제2 영역(1215)이 도시되어 있다. 좌안 제1 영역(1110) 및 우안 제1 영역(1210)은, 0 이상 제1 기준치 이하의 픽셀값을 가지는 픽셀들에 대한 히스토그램이 나타난 영역을 나타내며, 좌안 제2 영역(1115) 및 우안 제2 영역(1215)은 제2 기준치 이상 255 이하의 픽셀값을 가지는 픽셀들에 대한 히스토그램이 나타난 영역을 나타낸다.
그리고 도 13은 좌안 영상 및 우안 영상 내 대응 픽셀들의 픽셀값이 동일하게 보정 된 후의 좌/우안 영상 및 그 히스토그램을 나타낸다. 보정 후에는 좌안 영상 및 우안 영상이 동일하게 되므로 보정 후 영상은 좌안 영상과 우안 영상을 별도로 도시하지 아니한다. 도 13에도 보정된 영상 내에서 제1 기준치 이하의 픽셀값을 가지는 픽셀들에 대한 히스토그램인 보정 제1 영역(1310) 및 보정된 영상 내에서 제2 기준치 이상의 픽셀값을 가지는 픽셀들에 대한 히스토그램인 보정 제2 영역(1315)이 표시되어 있다.
즉, 좌안 제1 영역(1110), 우안 제1 영역(1210) 및 보정 제1 영역(1310)은 입체 영상 내에서 어두운 부분을 나타내는 픽셀들을, 좌안 제2 영역(1115), 우안 제2 영역(1215) 및 보정 제2 영역(1315)은 입체 영상 내에서 밝은 부분을 나타내는 픽셀들에 대한 히스토그램이다.
좌안 제1 영역(1110)과 우안 제1 영역(1210)을 비교하면, 좌안 영상에 제1 기준치 이하의 픽셀값을 가지는 픽셀들이 더 많을 것을 알 수 있다. 그런데 도 10을 참조하여 설명한 실시예에 따르면, 제1 기준치 이하의 픽셀값을 가지는 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀 중에서는 더 낮은 픽셀값을 가지는 대응 픽셀의 픽셀값이 보정의 기준이 되었다. 따라서 제1 기준치 이하의 픽셀값을 가지는 픽셀들에 대해서는 좌안 영상 대응 픽셀의 픽셀값이 보정의 기준값이 된다. 따라서 보정된 영상의 어두운 부분과 그 히스토그램, 즉 보정 제1 영역(1310)은 좌안 제1 영역(1110)에 가깝게 보정되게 된다.
마찬가지로 좌안 제2 영역(1115)과 우안 제2 영역(1215)을 비교하면, 우안 영상에 제2 기준치 이상의 픽셀값을 가지는 픽셀들이 더 많을 것을 알 수 있다. 그런데 도 10을 참조하여 설명한 실시예에 따르면, 제2 기준치 이상의 픽셀값을 가지는 좌안 영상 대응 픽셀과 우안 영상 대응 픽셀 중에서는 더 높은 픽셀값을 가지는 대응 픽셀의 픽셀값이 보정의 기준이 되었다. 따라서 제2 기준치 이상의 픽셀값을 가지는 픽셀들에 대해서는 우안 영상 대응 픽셀의 픽셀값이 보정의 기준값이 된다. 따라서 보정된 영상의 밝은 부분과 그 히스토그램, 즉 보정 제2 영역(1315)은 우안 제1 영역(1215)에 가깝게 보정되었다.
결과적으로 보정 영상의 보정 제1 영역은 좌안 제1 영역에 따라, 보정 제2 영역은 우안 제2 영역에 따라 보정되며, 픽셀값 보정으로 인해 히스토그램에 나타난 보정 영상의 명암비가 더 뚜렷해짐을 예상할 수 있다.
110 : 튜너부
120 : 복조부
130 : 외부신호입출력부
140 : 저장부
150 : 인터페이스부
170 : 제어부
180 : 디스플레이

Claims (18)

  1. 좌안 영상과 우안 영상을 이용하여 입체 영상을 표시하는 영상표시장치의 동작 방법에 있어서,
    상기 좌안 영상과 상기 우안 영상의 히스토그램을 추출하는 단계 ;
    상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램이 상이한 경우, 상기 좌안 영상의 좌안 영상 대응 픽셀과 상기 우안 영상의 우안 영상 대응 픽셀의 픽셀값을 동일하게 보정하는 단계; 및
    상기 픽셀값이 보정된 좌안 영상과 우안 영상을 출력하는 단계를 포함하되,
    상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀은 각각 상기 좌안 영상과 상기 우안 영상 내에서 좌표값이 서로 동일하고 픽셀값이 서로 상이한 것을 특징으로 하는 영상표시장치의 동작 방법.
  2. 제1항에 있어서,
    상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램을 비교한 후, 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램을 이용하여 상기 좌안 영상과 상기 우안 영상 내에서 각각 상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀을 찾아내는 단계를 더 포함하는
  3. 제1항에 있어서,
    상기 픽셀값을 보정하는 단계는,
    상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 어느 하나의 픽셀값으로 나머지 하나의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  4. 제3항에 있어서,
    상기 좌안 영상과 상기 우안 영상 중 더 높은 계조값을 가지는 영상을 기준으로 상기 좌안 영상 대응 픽셀의 픽셀값 또는 상기 우안 영상 대응 픽셀의 픽셀값 중 하나를 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  5. 제3항에 있어서,
    상기 좌안 영상과 상기 우안 영상 중 명암비가 더 높은 영상을 기준으로 상기 좌안 영상 대응 픽셀의 픽셀값 또는 상기 우안 영상 대응 픽셀의 픽셀값 중 하나를 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  6. 제1항에 있어서,
    상기 픽셀값을 보정하는 단계는,
    상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 범위에 따라 상기 좌안 영상 대응 픽셀의 픽셀값, 상기 우안 영상 대응 픽셀의 픽셀값, 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 평균값 중 하나의 값을 기준으로 상기 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  7. 제6항에 있어서,
    상기 픽셀값을 보정하는 단계는,
    상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값이 0보다 크거나 같고 제1 기준치보다 작은 경우에는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 작은값으로 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 하나 이상의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  8. 제6항에 있어서,
    상기 픽셀값을 보정하는 단계는,
    상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값이 상기 제1 기준치보다 크거나 같고 제2 기준치보다 작은 경우 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 평균값으로 상기 좌안 영상 대응 픽셀 및 상기 우안 영상 대응 픽셀의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  9. 제6항에 있어서,
    상기 픽셀값을 보정하는 단계는,
    상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값이 상기 제2 기준치보다 크거나 같고 255보다 작거나 같은 경우 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 큰값으로 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 하나 이상의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치의 동작 방법.
  10. 좌안 영상과 우안 영상을 이용하여 입체 영상을 표시하는 영상표시장치에 있어서,
    상기 좌안 영상과 상기 우안 영상의 히스토그램을 추출하고 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램이 상이한 경우, 상기 좌안 영상의 좌안 영상 대응 픽셀과 상기 우안 영상의 우안 영상 대응 픽셀의 픽셀값을 동일하게 보정하는 제어부; 및
    상기 픽셀값이 보정된 좌안 영상과 우안 영상을 출력하는 디스플레이부를 포함하되,
    상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀은 각각 상기 좌안 영상과 상기 우안 영상 내에서 좌표값이 서로 동일하고 픽셀값이 서로 상이한 것을 특징으로 하는 영상표시장치.
  11. 제10항에 있어서,
    상기 제어부는 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램을 비교하고, 상기 좌안 영상의 히스토그램과 상기 우안 영상의 히스토그램을 이용하여 상기 좌안 영상과 상기 우안 영상 내에서 각각 상기 좌안 영상 대응 픽셀과 상기 우안 영상 대응 픽셀을 찾아내는 것을 특징으로 하는 영상표시장치.
  12. 제10항에 있어서,
    상기 제어부는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 어느 하나의 픽셀값으로 나머지 하나의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치.
  13. 제12항에 있어서,
    상기 제어부는 상기 좌안 영상과 상기 우안 영상 중 더 높은 계조값을 가지는 영상을 기준으로 상기 좌안 영상 대응 픽셀의 픽셀값 또는 상기 우안 영상 대응 픽셀의 픽셀값 중 하나를 보정하는 것을 특징으로 하는 영상표시장치.
  14. 제12항에 있어서,
    상기 제어부는 상기 좌안 영상과 상기 우안 영상 중 명암비가 더 높은 영상을 기준으로 상기 좌안 영상 대응 픽셀의 픽셀값 또는 상기 우안 영상 대응 픽셀의 픽셀값 중 하나를 보정하는 것을 특징으로 하는 영상표시장치.
  15. 제10항에 있어서,
    상기 제어부는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 범위에 따라 상기 좌안 영상 대응 픽셀의 픽셀값, 상기 우안 영상 대응 픽셀의 픽셀값, 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 평균값 중 하나의 값을 기준으로 상기 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치.
  16. 제15항에 있어서,
    상기 제어부는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값이 0보다 크거나 같고 제1 기준치보다 작은 경우에는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 작은값으로 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 하나 이상의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치.
  17. 제15항에 있어서,
    상기 제어부는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값이 상기 제1 기준치보다 크거나 같고 제2 기준치보다 작은 경우 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값의 평균값으로 상기 좌안 영상 대응 픽셀 및 상기 우안 영상 대응 픽셀의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치.
  18. 제15항에 있어서,
    상기 제어부는 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값이 상기 제2 기준치보다 크거나 같고 255보다 작거나 같은 경우 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 큰값으로 상기 좌안 영상 대응 픽셀의 픽셀값과 상기 우안 영상 대응 픽셀의 픽셀값 중 하나 이상의 픽셀값을 보정하는 것을 특징으로 하는 영상표시장치.
KR1020100010548A 2010-02-04 2010-02-04 영상표시장치 및 그 동작방법 KR20110090640A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100010548A KR20110090640A (ko) 2010-02-04 2010-02-04 영상표시장치 및 그 동작방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100010548A KR20110090640A (ko) 2010-02-04 2010-02-04 영상표시장치 및 그 동작방법

Publications (1)

Publication Number Publication Date
KR20110090640A true KR20110090640A (ko) 2011-08-10

Family

ID=44928385

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100010548A KR20110090640A (ko) 2010-02-04 2010-02-04 영상표시장치 및 그 동작방법

Country Status (1)

Country Link
KR (1) KR20110090640A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101581586B1 (ko) 2014-10-13 2016-01-11 이화여자대학교 산학협력단 깊이 영상의 노이즈를 보정하는 방법
US9253467B2 (en) 2012-11-09 2016-02-02 Electronics And Telecommunications Research Institute Method and apparatus for correcting errors in multiple stream-based 3D images
KR101878184B1 (ko) * 2012-03-08 2018-07-13 엘지디스플레이 주식회사 재깅영역검출방법 및 재깅영역검출장치
KR101988551B1 (ko) * 2018-01-15 2019-06-12 충북대학교 산학협력단 스테레오 비전의 깊이 추정을 이용한 효율적 객체 검출 및 매칭 시스템 및 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101878184B1 (ko) * 2012-03-08 2018-07-13 엘지디스플레이 주식회사 재깅영역검출방법 및 재깅영역검출장치
US9253467B2 (en) 2012-11-09 2016-02-02 Electronics And Telecommunications Research Institute Method and apparatus for correcting errors in multiple stream-based 3D images
KR101581586B1 (ko) 2014-10-13 2016-01-11 이화여자대학교 산학협력단 깊이 영상의 노이즈를 보정하는 방법
KR101988551B1 (ko) * 2018-01-15 2019-06-12 충북대학교 산학협력단 스테레오 비전의 깊이 추정을 이용한 효율적 객체 검출 및 매칭 시스템 및 방법

Similar Documents

Publication Publication Date Title
US8896672B2 (en) Image display device capable of three-dimensionally displaying an item or user interface and a method for operating the same
KR101647722B1 (ko) 영상표시장치 및 그 동작방법
US8872900B2 (en) Image display apparatus and method for operating the same
KR101349276B1 (ko) 영상표시장치 및 그 동작방법
KR20110053734A (ko) 영상표시장치 및 그 동작방법
KR20110120825A (ko) 디스플레이장치 및 그의 음성신호 출력 방법
US20120242808A1 (en) Image display apparatus and method for operating the same
KR20110052306A (ko) 영상표시장치 및 그 동작방법
KR20110086415A (ko) 3d 영상의 화질을 설정할 수 있는 영상표시장치 및 그 동작 제어방법
KR101635567B1 (ko) 영상표시장치 및 그 동작방법
KR20110082380A (ko) 영상표시장치 및 그 동작방법
US20130291017A1 (en) Image display apparatus and method for operating the same
KR20110090640A (ko) 영상표시장치 및 그 동작방법
KR20110111136A (ko) 음향 설정에 대응하는 3d 오브젝트를 제공하는 영상표시장치 및 그 동작 제어방법
KR101730424B1 (ko) 영상표시장치 및 그 동작방법
KR20120062428A (ko) 영상표시장치 및 그 동작방법
KR101176500B1 (ko) 영상표시장치 및 그 동작방법
KR101657564B1 (ko) 영상표시장치 및 그 동작방법
KR20120029783A (ko) 영상표시장치 및 그 동작방법
KR101638536B1 (ko) 영상표시장치 및 그 제어방법
KR20110134087A (ko) 영상표시장치 및 그 동작방법
KR101716144B1 (ko) 영상표시장치 및 그 동작방법
KR101737367B1 (ko) 영상표시장치 및 그 동작방법
KR20120034836A (ko) 영상표시장치 및 그 동작방법
KR101730423B1 (ko) 영상표시장치 및 그 동작 방법

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination