KR20120039703A

KR20120039703A - 3차원 사용자 인터페이스 출력 방법

Info

Publication number: KR20120039703A
Application number: KR1020127003270A
Authority: KR
Inventors: 최성호
Original assignee: 엘지전자 주식회사
Priority date: 2009-07-07
Filing date: 2010-05-31
Publication date: 2012-04-25
Also published as: EP2452506A4; WO2011004963A3; US9549165B2; CN102474641B; WO2011004963A2; US20110010666A1; CN102474641A; EP2452506A2; KR20140010171A

Abstract

본 발명에 따른 사용자 인터페이스 출력 방법의 일 예는, 제1 영상 데이터 또는 제2 영상 데이터 중 적어도 하나 이상을 이용하여 적어도 하나 이상의 메뉴 항목을 포함하는 사용자 인터페이스를 출력하는 단계; 적어도 하나 이상의 메뉴 항목에 관련된 신호를 수신하는 단계; 및 사용자에 의해 인지된 적어도 하나 이상의 아이템의 뎁쓰 변경을 위한 수신된 신호에 반응하여 스크린상에 출력되는 제1 영상 데이터와 제2 영상 데이터의 간격을 변경하는 단계;를 포함하여 이루어진다.

Description

3차원 사용자 인터페이스 출력 방법{METHOD FOR DISPLAYING THREE-DIMENSIONAL USER INTERFACE}

본 발명은 3차원(3-dimensional, 3D) 사용자 인터페이스(user interface, UI) 출력 방법 및 영상 신호 처리 장치에 관한 것이다. 더욱 상세하게는, 본 발명의 실시 예들은 시인성을 높이는 계층적인 3D UI로부터 선택된 아이템을 지시하는 3D UI 출력 방법 및 장치에 관련될 수 있다.

디지털 방송이 활성화되면서 아날로그 방송에 비하여 컨텐츠의 양이 증가하였을 뿐만 아니라 종류도 매우 다양해졌다.

관련하여, 종래 대부분의 컨텐츠는 2D 영상 컨텐츠였으나 최근에는 좀 더 입체감과 실재감을 주는 3D 영상 컨텐츠가 많이 제작되고 있다. 이러한 추세를 볼 때 향후에는 3D 영상 컨텐츠를 집에서 수신기를 통해 시청하게 될 것이다.

방송 수신기와 컨텐츠를 액세스하고 제어하는 UI는 2D 형태로만 이용되고 있다. 그러나, 시청자가 3D 컨텐트나 3D 모드를 선택하면, 시청자는 제공되는 2D UI때문에 혼동을 느끼거나 불편함을 느낄 수 있다.

수신된 컨텐츠에 2D 컨텐츠 뿐만 아니라 3D 영상 컨텐츠도 존재하는 경우, 수신기는 3D 컨텐츠를 식별하거나 지시할 수 없어 시청자에게 컨텐트에 관한 정보를 제공할 수 없다. 따라서, 시청자가 수신기에서 제공한 정보에 기반하여 특정 컨텐츠를 선택하고 선택된 컨텐츠가 3D 영상 컨텐츠인 경우에는, 사전에 해당 컨텐츠에 관한 정보가 없어 적절한 시청 모드로 시청할 수 없어 영상이 깨져 보이거나 또는 깜빡거리는 등 시청자에게 혼동을 주어 불편을 끼치는 문제점이 있었다.

상기와 같은 문제점을 해결하기 위하여, 본 발명에서는 3D UI에서 선택된 아이템에 다른 뎁쓰 레벨을 적용함으로써 계층적인 3D UI로부터 선택된 아이템의 시인성을 높이는 3D UI 출력 방법 및 영상 신호 처리 장치를 제공하는 것을 일 과제로 한다.

본 발명에서는, 결정된 3D 컨텐츠가 다른 컨텐츠와 차별화되도록 지시하는 방법 및 장치를 제공하는 것을 다른 과제로 한다.

본 발명에 따른 사용자 인터페이스 출력 방법의 다른 예는, 제1 영상 데이터 또는 제2 영상 데이터의 적어도 하나 이상을 이용하여 적어도 하나 이상의 메뉴 항목을 포함하는 사용자 인터페이스를 출력하는 단계; 적어도 하나 이상의 메뉴 항목에 관련된 신호를 수신하는 단계; 및 시청자에 의해 인지된 적어도 하나 이상의 메뉴 항목의 뎁쓰 변경을 위하여 수신된 신호에 반응하여 서로 관련된 스크린상에 출력되는 제1 영상 데이터와 제2 영상 데이터를 이동하는 단계;를 포함하여 이루어진다.

본 발명에 따른 사용자 인터페이스 출력 방법의 일 예는, 수신 유닛에서, 적어도 하나 이상의 항목을 포함하는 사용자 인터페이스를 출력하는 요청을 수신하는 단계; 사용자 인터페이스 제어부에서, 상기 요청에 기초하여 사용자 인터페이스상에 디스플레이된 항목 정보의 뎁쓰를 제공하는 단계; 및 디스플레이 유닛에서, 변경되는 뎁쓰를 가진 항목 정보를 출력하는 단계;를 포함하여 이루어진다.

본 발명에 따르면,

3D UI 내 웨이티드 UI 뎁쓰(weighted UI depth)를 가진 사용자 선택 부분을 점진적으로 디스플레이할 수 있다. 만약 웨이트가 사용자 선택 영역에 뎁쓰를 적용하는 것이면, 사용자는 선택된 부분의 정보를 더욱 정확하게 인식할 수 있게 된다.

도 1은 본 발명에 따라 좌영상 데이터와 우영상 데이터의 시차에 따른 원근감을 설명하기 위해 도시한 것,
도 2와 3은 본 발명에 따라 3D 메뉴 UI의 뎁쓰를 조절하는 방법의 제1 실시 예를 설명하기 위해 도시한 도면,
도 4는 본 발명에 따라 3D 메뉴 UI의 뎁쓰를 조절하는 방법의 제2 실시 예를 설명하기 위해 도시한 도면,
도 5와 6은 2D 메뉴 UI와 본 발명에 따라 뎁쓰가 적용된 3D 메뉴 UI의 일 예를 설명하기 위해 도시한 것,
도 7은 본 발명에 따라 3D 메뉴 UI 상에서 수치 변환에 대한 볼륨감을 표현하는 방법의 일 예를 도시한 것,
도 8은 본 발명에 따라 3D 메뉴 UI 상에서 수치 변환에 대한 볼륨감을 표현하는 방법의 다른 예를 도시한 것,
도 9 내지 10은 본 발명에 따라 디스플레이 타임에 따라 서서히 입체감을 주도록 3D 메뉴 UI를 구성하는 방법을 설명하기 위해 도시한 것,
도 11은 본 발명에 따라 뎁쓰가 적용된 3D 메뉴 UI의 다른 예를 설명하기 위해 도시한 것,
도 12는 본 발명에 따른 영상신호 처리장치의 일 예에 대한 구성 블록도를 도시한 것,
도 13은 본 발명에 따라 3D 메뉴 UI를 구성하고 출력하는 영상신호 처리장치에 대한 블록도, 그리고
도 14에서는 본 발명에 따른 영상신호 처리방법의 일 예를 설명하기 위해 도시한 순서도이다.

이하 본 발명에 따른 3차원(3-dimensional, 이하 '3D') 사용자 인터페이스(user interface, 이하 'UI') 출력 방법을 위하여 영상신호 처리방법 및 영상신호 처리장치에 대해 첨부된 도면을 참조하여 더욱 상세하게 설명하면, 다음과 같다.

이하에서는 본 발명에 따라 신호 처리를 위한 3차원사용자 인터페이스 디스플레이 방법 및 장치의 다양한 실시 예들을 상세하게 설명한다.

3D 메뉴 UI 디스플레이 방법

신호 처리 장치는, 스테레오스코픽 원리(stereoscopic principle)에 기초하여 3D 영상 데이터를 처리한다. 더욱 상세하게는, 하나의 객체를 서로 다른 위치의 2개의 카메라로 촬영하여 좌영상 데이터(left image data)(또는 제1 영상 데이터(first image data))와 우영상 데이터(right image data)(또는 제2 영상 데이터(second image data))를 생성하고, 생성된 각 영상 데이터가 사람의 좌안과 우안에 각각 서로 직교하도록 분리하여 입력하면, 시청자의 두뇌에서 좌안과 우안에 각각 입력된 영상 데이터가 결합되어 3D 영상이 생성되도록 하는 원리이다.　상기에서 좌영상 데이터와 우영상 데이터가 서로 직교하도록 입력된다는 의미는, 상기 입력되는 데이터가 서로 간섭을 일으키지 않는다는 것을 의미한다.

도 1은 본 발명에 따라 좌영상 데이터와 우영상 데이터의 시차에 따른 원근감을 설명하기 위해 도시한 것이다.

도 1(a)는 우영상 데이터(101)와 좌영상 데이터(102)의 시차가 작은 경우에 상기 양 데이터가 겹합되어 맺히는 상의 위치(103)를 설명하고, 도 1(b)는 우영상 데이터(111)와 좌영상 데이터(112)의 시차가 큰 경우에 맺히는 상의 위치(113)를 설명하고 있다.

도 1(a) 내지 1(b)는, 영상신호 처리장치에서 좌영상 데이터와 우영상 데이터의 시차(distance)에 따라 서로 다른 위치에서 상이 맺히는 원근감의 정도를 나타낸다.

도 1(a)에서 도시된 바와 같이, 상은 우안으로 우영상 데이터(101)의 일측과 다른 측을 바라보는 연장선(R1,R2)을 그리고, 좌안으로 좌영상 데이터(102)의 일 측과 다른 측을 바라보는 연장선(L1,L2)을 그릴 때, 상기 우영상 데이터에 대한 연장선(R1)과 좌영상 데이터에 대한 연장선(L1)이 우안 및 좌안으로부터 일정 거리(d1)에서 서로 교차되는 지점(103)에 맺힌다.

도 1(b)에 도시된 바와 같이, 연장선(R3,R4)과 연장성(L3,L4)에 대하여 도 1(a)에서 전술한 내용을 기초로 하면, 상은 우영상 데이터에 대한 연장선(R3)과 좌영상 데이터에 대한 연장선(L3)이 우안 및 좌안으로부터 일정 거리(d2)에서 서로 교차되는 지점(113)에서 맺힌다.

여기서, 좌안 및 우안으로부터 상이 맺히는 위치(103,113)까지의 거리를 나타내는 도 1(a)에서 d1과 도 1(b)에서 d2를 비교하면, 상기 d1이 d2보다 거리가 더 멀다. 즉, 도 1(a)에서의 상이 도 1(b)에서의 상보다 좌안 및 우안으로부터 보다 먼 거리에서 맺힌다.

이는 우영상 데이터와 좌영상 데이터의 시차(도면을 기준으로 동서 방향에서의)에서 기인한다.

예를 들면, 도 1(a)에서의 우영상 데이터(101)와 좌영상 데이터(102)의 시차는, 도 1(b)에서의 우영상 데이터(103)와 좌영상 데이터(104)의 시차에 비하여 상대적으로 작다.

그러므로, 도 1(a) 및 1(b)에 근거하여 유추하면, 각 영상 데이터의 시차가 작을수록 좌영상 데이터와 우영상 데이터의 결합에 의해 맺혀지는 상은 사람의 눈으로부터 먼 거리에서 맺혀 멀게 느껴진다.

이러한 원리는 후술하는 3D 메뉴 UI를 구성함에 있어서 뎁쓰(depth)를 형성하는 데에 응용할 수 있다.

도 2와 3은 본 발명에 따라 3D 메뉴 UI의 뎁쓰를 조절하는 방법의 제1 실시 예를 설명하기 위해 도시한 도면이다. 다만, 본 발명의 범위가 후술하는 실시예와 구성들에 한정되는 것은 아니다.

도 2(a)의 3D 메뉴 UI를 구성하는 좌영상 데이터(210)와 우영상 데이터(220)의 시차는, 상대적으로 도 3(a)의 3D 메뉴 UI를 구성하는 좌영상 데이터(310)와 우영상 데이터(320)의 시차에 비해 작다. 달리 말하면, 도 3(a)의 각 영상 데이터의 시차가 도 2(a)의 각 영상 데이터의 시차에 비해 크다.

따라서, 전술한 바와 같이, 좌영상 데이터와 우영상 데이터의 시차에 따라 상기 두 데이터의 결합에 의해 맺히는 상은 사람의 눈에 원근감 있게 표현된다.

도 2(a)에 도시된 좌영상 데이터(210)와 우영상 데이터(220)의 시차에 따라 상기 각 영상 데이터의 결합에 의해 상이 맺히면, 사람의 눈에는 도 2(b)의 3D 메뉴 UI(230)와 같이 보인다.

또한, 도 3(a)에 도시된 좌영상 데이터(310)와 우영상 데이터(320)의 시차에 따라 상기 각 영상 데이터의 결합에 의해 상이 맺히면, 사람의 눈에는 도 3(b)의 3D 메뉴 UI(330)와 같이 보인다.

전술한 도 2(b)의 3D 메뉴 UI(230)와 도 3(b)의 3D 메뉴 UI(330)를 비교하면, 도 3(b)의 3D 메뉴 UI(330)가 도 2(b)의 3D 메뉴 UI(230)에 비해 사람의 눈으로부터 상대적으로 더 가깝게 느껴진다. 즉, 도 3(b)의 3D 메뉴 UI(330)의 뎁쓰가 도 2(b)의 3D 메뉴 UI(230)의 뎁쓰에 비해 더 깊어 상대적으로 더 튀어 나와 보인다.

도 4는 본 발명에 따라 3D 메뉴 UI의 뎁쓰를 조절하는 방법의 다른 실시 예를 설명하기 위해 도시한 도면이다.

도 4에 도시된 3D 메뉴 UI는 전술한 도 2(a) 및 도 3(a)과 유사하게 좌영상 데이터(410)와 우영상 데이터(420)의 시차에 따른 뎁쓰의 정도가 달라지는 원리를 응용하되, 도 2(a) 및 도 3(a)에서와 달리 각 영상 데이터의 모든 항목이 서로 시차를 가지는 것이 아니라 원하는 항목의 데이터 부분만을 시차를 가지도록 하는 것이다.

사용자가 메뉴 UI에서 예를 들어, 색 보정 항목을 선택하는 경우, 이를 3D 포맷으로 표현하기 위하여 도 4(a)와 같이 다른 항목의 데이터는 좌영상 데이터와 우영상 데이터가 시차를 가지지 않고 색 보정 항목만을 시차를 가지도록 함으로써 도 4(b)와 같은 3D 메뉴 UI를 구현할 수 있다.

도 4(b)를 참조하면, 색 보정 항목만이 다른 메뉴 항목에 비해 뎁쓰를 가지는 것을 알 수 있다.

전술한 도 1 내지 4의 내용을 근거로 하여 본 발명에 따라 2D 메뉴 UI와 3D 메뉴 UI를 비교하면 다음과 같다.

도 5와 6은 2D 메뉴 UI와 본 발명에 따라 뎁쓰가 적용된 3D 메뉴 UI의 일 예를 설명하기 위해 도시한 것이다. 뎁쓰는, 디스플레이 스크린에 기초하여 사용자 또는 시청자에 의해 인식되는 뎁쓰를 의미할 수 있다.

도 5는 1차 메뉴(Primary Menu)만 구현된 예이고, 도 6에서는 상기 1차 메뉴에 따른 2차 메뉴(Secondary Menu)가 구현되었다. 상기에서 1차 메뉴는 최상위 계층의 기본 메뉴일 수 있으며, 2차 메뉴는 1차 메뉴의 하위 메뉴일 수 있다.

도 5(a)를 참조하면, 1차 메뉴(510)만 구현된 2D 메뉴 UI가 도시되었다. 상기 1차 메뉴(510)에는 메뉴 1 내지 메뉴 4(511 내지 514) 4개의 메뉴 항목이 포함되었다.

이때, 만약 메뉴 1 항목(511)이 사용자 등에 의해 선택되면, 2D 메뉴 UI에서는 일반적으로 선택된 메뉴 1 항목(511)의 컬러를 변경하거나 음영을 줌으로써 해당 메뉴가 선택되었음을 표시한다. 또한, 상기 선택된 메뉴 1 항목(511)의 하위 항목이 있으면 도 6(a)와 같이 2차 메뉴를 구현하여 디스플레이한다.

도 5(b)를 참조하면, 도 5(a)에서와 같이 1차 메뉴(550)만 구현된 3D 메뉴 UI가 도시되었다. 다만, 도 5(b)는 전술한 2D 메뉴 UI와 달리 구현된 1차 메뉴 항목(551 내지 554 즉, 메뉴 1 내지 4)이 소정의 뎁쓰를 가지고 있다.

이때, 만약 메뉴 1 항목이 사용자 등에 의해 선택되면, 선택된 메뉴 1 항목(도 6(b)의 551’)은 소정을 뎁쓰를 가지고 하이라이트(highlighted) 되어 화면상에서 튀어나오게 보인다. 또한, 상기 선택된 메뉴 1 항목(650)의 하위 메뉴가 있으면, 도 6(b)와 같이 2차 메뉴와 함께 구현되어 디스플레이된다.

다만, 이 경우에 2차 메뉴 항목(651 내지 654 즉, 메뉴 1-1 내지 1-4) 역시 소정의 뎁쓰를 가진다. 또한, 2차 메뉴의 뎁쓰 레벨은, 반드시 1차 메뉴의 뎁쓰 레벨과 동일할 필요는 없다. 여기서, 2차 메뉴(650)를 구성하는 메뉴 1-1 내지 메뉴 1-4(651 내지 654) 항목들 중 예를 들어, 메뉴 1-1 항목이 선택되면 도 6(b)에 도시된 바와 같이 다른 메뉴 항목(메뉴 1-2 내지 1-4)과는 다른 뎁쓰를 가지도록 구성될 수 있다.

전체적으로 2D 메뉴 UI의 경우에는 선택된 메뉴 항목을 평면상에서 색깔 등으로 구분함에 비하여, 3D 메뉴 UI의 경우에는 선택된 메뉴 항목을 좌영상 데이터와 우영상 데이터의 시차에 따른 뎁쓰의 정도로 구분할 수 있도록 표현할 수 있다.

도 6(b)에 도시된 바와 같이, 선택된 메뉴 항목이 다른 메뉴 항목과 뎁쓰레벨을 다르게 구성하는 것은 예를 들어, 전술한 도 4와 같이 다른 메뉴 항목에 비하여 선택된 메뉴 항목의 좌영상 데이터와 우영상 데이터의 시차를 다르게 함으로써 구현될 수 있다. 동시에 선택되지 않은 메뉴 항목의 뎁쓰는, 선택되지 않은 메뉴 항목을 위한 영상 데이터 간격을 유지함으로써 유지될 수 있다.

도 7은 본 발명에 따라 3D 메뉴 UI 상에서 수치 변환에 대한 볼륨감을 표현하는 방법의 일 예를 도시한 것이다.

수치 변환이 가능한 메뉴 항목은 다양하나 여기서는 음량을 예로 하여 설명한다.

도 7(a)의 경우에는 음량 레벨을 10으로 설정된 경우를 도시하였고, 도 7(b)는 음량 레벨을 100으로 설정된 경우를 도시하였다.

도 7에서는 사용자가 음량을 가변함에 따라 음량의 크기에 비례하여 입체감이 형성될 수 있도록 음량의 크기를 나타내는 원추형의 좌영상 데이터와 우영상 데이터를 상기 사용자의 가변의 정도에 비례하도록 시차를 형성함으로써 튀어나오게 구성한 것이다.

도 8은 본 발명에 따라 3D 메뉴 UI 상에서 수치 변환에 대한 볼륨감을 표현하는 방법의 다른 예를 도시한 것이다.

도 7에서는 전술한 바와 같이 수치 변환에 대한 볼륨감을 원추형으로 표현하였다.

도 8에서는 도 7의 다른 형태로 바(Bar) 형태로 볼륨감을 표현하는 예시이다. 도 8은 리모컨의 사용에 의한 것과 같은 볼륨 변경과 관련된다.

도 8(a)에 도시된 바와 같이, 2D 메뉴(800)에는, 명암 항목, 밝기 항목, 선명도 항목, 색농도 항목 및 색상 항목이 포함되고, 각 항목에 대하여 수치 변환에 따라 평면적으로 색깔을 이용하여 그 변환된 정도를 나타내고 있다.

도 8(b)에 도시된 바와 같이, 본 발명에 따라 메뉴(800)를 구성하는 각 항목의 수치 변환의 정도를 상기 정도에 대응되는 뎁쓰를 주어 바가 화면상에서 튀어나오게 보이도록 메뉴를 구성한 것이다.

이는 볼륨감이 최소 0에서 최대 100의 범위라고 가정할 때, 사용자에 의해 설정되는 값에 따라 시차에 따른 뎁쓰의 정도를 다르게 줌으로써 구현될 수 있다. 예를 들어, 메뉴 항목의 값을 증가시키면, 메뉴 항목은 더 높은 뎁쓰 레벨을 가지고, 화면상에서 더 튀어나오는 것처럼 인식된다. 이는 좌영상 데이터와 우영상 데이터가 점진적으로 서로 간의 간격이 더 넓어짐을 의미한다.

도 8(c)는, 도 8(a)와 8(b)의 결합된 형태로서, 설정된 값에 따라 뎁쓰의 정도 및 컬러를 이용하여 구현된 것이다.

여기서, 도 8(c)의 경우에 각 메뉴 항목의 동일한 정도의 뎁쓰를 가지도록 구성하되 컬러를 이용하여 구분할 수 있도록 구성할 수도 있다.

도 8(d)는 도 7을 응용하여 각 항목이 도 8(b) 내지 (c)와 같이 수평(horizontal) 방향의 바 형태가 아니라 수직(vertical) 방향의 바 내지 원추형 형태를 가지도록 구성한 것이다.

도 7 내지 8에서는 원추형 내지 바 형태를 예시하였으나, 본 발명의 권리범위는 이에 한정되는 것은 아니며 삼각뿔 형태 등 다양한 형태로 구현 가능한 범위에까지 미친다.

도 9 및 10은 본 발명에 따라 디스플레이 타임에 따라 서서히 입체감을 주도록 3D 메뉴 UI를 구성하는 방법을 설명하기 위해 도시한 것이다.

도 9는 시간에 따라 서서히 입체감을 주기 위하여 가중치(weight)의 개념을 사용한다. 여기서, 가중치의 개념은 설정된 뎁쓰 레벨이 한 번에 세팅되어 화면에 나타내는 것이 아니라 시간에 따라 서서히 설정된 가중치에 해당하는 정도로 세팅되도록 구성하는 경우를 구분하기 위해 사용된다.

도 9(a) 내지 9(d)에는 각각 가중치 1 내지 가중치 4가 도시되었다. 예를 들어, 메뉴 바가 최대로 입체 효과를 나타낼 수 있는 수치가 100이라고 할 때, 설정하기 나름이나 100 단계로 뎁쓰의 정도를 달리할 수 있다.

다만, 여기서는 메뉴의 단계마다 특정 단계와 가중치를 서로 연관시켜 가중치 1은 뎁쓰 레벨 25 단계(즉, 3D 효과 레벨 25), 가중치 2는 뎁쓰 레벨 50 단계(즉, 3D 효과 레벨 50), 가중치 3은 뎁쓰 레벨 75 단계(즉, 3D 효과 레벨 75) 그리고 가중치 4는 뎁쓰 레벨 100 단계(즉, 3D 효과 레벨 100)로 미리 설정한다.

이후 어떤 메뉴 항목이 선택되고, 선택된 메뉴의 가중치가 1 즉, 입체 효과가 25 단계라면, 전술한 바와 같이 한 번에 25 단계로 세팅되는 것이 아니라 0 단계에서부터 시작하여 25 단계까지 순차로 뎁쓰를 가지도록 처리함으로써 서서히 튀어나와 보이게 하는 것이다.

도 10을 참조하면, 10(a)에서와 같이 원형의 좌영상 데이터(1010)와 우영상 데이터(1020)를 중앙에서 가장자리로 각각 위치시켜 즉, 시차를 크게 하면 10(b)에 도시된 바와 같이 결과 이미지(1030)는 기준면으로부터 점차 튀어나와 보이게 된다. 다시 말하면, 뎁쓰는 사용자가 인지할 수 있도록 이미지가 디스플레이 스크린으로부터 튀어나와 보이게 된다.

도 11은 본 발명에 따라 뎁쓰가 적용된 3D 메뉴 UI의 다른 예를 설명하기 위해 도시한 것이다.

도 11은 시간에 따라 선택된 메뉴 항목이 서서히 튀어나와 보이게 하는 경우를 도시한 것이다.

도 11(a)에서는 하나의 메뉴(1100)에 메뉴 1-1 항목(1110) 내지 메뉴 1-4 항목(1140)이 존재하고, 메뉴 1-1 항목이 선택되어 다른 메뉴 항목(1120 내지 1140)과 다른 뎁쓰 레벨을 가진다.

여기서, 만약 도 11(b)와 같이 리모콘 등에 의해 상기 도 11(a)에서 선택된 메뉴 1-1 아래 메뉴 항목(1120-1) 즉, 메뉴 1-2 항목이 선택되면, 도 11(c)와 같이 이전 선택된 메뉴 1-1 항목의 뎁쓰 레벨이 줄어들면서 비활성(inactive) 상태로 돌아간다.

또한, 선택된 메뉴 1-2 항목(1120-1)의 경우에는 최초 뎁쓰가 0에서 시간의 경과에 따라 뎁쓰가 점점 깊어져 도 11(d)에 도시된 메뉴 1-2 항목(1120-2)과 같이 점점 튀어나와 보이게 구성할 수도 있다. 다만, 이 경우에 뎁쓰가 변화하는 시간은 0.1초 내지 1초 사이로 하는 것이 적당하다.

영상신호 처리장치

도 12는 본 발명에 따른 영상신호 처리장치의 일 예에 대한 구성 블록도를 도시한 것이다.

도 12를 참조하면, 본 발명에 따른 영상신호 처리장치는, 크게 DTV 메인 보드(main board)부(1210), 3D 포맷터부(1220) 및 디스플레이부(1230)를 포함할 수 있다.

DTV 메인 보드부(1210)는, 수신된 신호 내 영상 데이터를 1차 처리(primary process)한다. 예를 들어, 상기 DTV 메인 보드부(1210)는, 일반적인 디지털 방송 신호를 처리하는 디지털 텔레비전 수신기(digital television receiver)일 수 있다. 이때, 상기 1차 처리라 함은, 본 명세서에서 임의로 정의한 것으로 이러한 1차 처리는 예를 들어, 영상 데이터를 포함한 디지털 방송 신호가 전송되는 채널을 튜닝(tunning)하여 튜닝된 채널을 통하여 상기 디지털 방송 신호(digital broadcast signal)를 수신하고, 상기 수신된 디지털 방송 신호를 복조(demodulating) 및 역다중화(demultiplexing)하고, 역다중화된 디지털 방송 신호로부터 영상 데이터를 디코딩(decoding)하는 일련의 처리 과정을 총칭할 수 있다.

DTV 메인 보드부(1210)는, 본 발명에 따른 3D 메뉴 UI를 구현하기 위한 UI 제어부(1211)와 FRC(Frame Rate Converter)부(1212)를 포함할 수 있다. 상기 FRC부(1212)는, 경우에 따라서는 DTV 메인 보드부(1210)와 별개로 구성될 수 있으며, 3D 포맷터부(1220)와 하나의 모듈로 병합될 수도 있다.

UI 제어부(1211)는, 디스플레이 모듈(1230) 상에 구성될 3D 메뉴 UI를 제어한다. 이때, UI 제어부(1211)는, 본 발명에 따라 전술한 도 1 내지 11에 도시된 바와 같이, 뎁쓰를 가지도록 제어하며, 그 경우 시간에 따라 뎁쓰의 정도가 변화되도록 제어할 수도 있다.

FRC부(1212)는, 입력되는 영상 신호 및 UI 제어부(1211)의 제어 신호를 수신하여 디스플레이 모듈(1230)의 출력 주파수에 대응되도록 처리한다. 예를 들어, 상기 DTV 메인 보드부(1210)로부터 출력되는 영상 신호의 주파수가 60Hz이고, 디스플레이 모듈(1230)의 출력 주파수가 240Hz라면, 상기 FRC부(1212)는 상기 영상 신호(60Hz)를 출력 주파수인 240Hz에 대응되도록 기 정의된 방식으로 처리한다. 여기서, 상기 기 정의된 방식에는 예를 들어, 입력되는 영상 신호를 템퍼럴 인터폴레이션(temporal interpolation) 하는 방법과 입력되는 영상 신호의 프레임을 단순 반복하는 방법이 있다.

이하에서는 설명의 편의를 위해 디스플레이 모듈(1230)의 출력 주파수가 240Hz라고 가정하여 설명한다. 다만, 본 발명은 상기 주파수에 한정되는 것은 아니다.

템퍼럴 인터폴레이션 방법은, 입력되는 60Hz의 영상 신호를 4등분(0, 0.25, 0.5, 0.75) 함으로써 240Hz의 영상 신호가 되도록 처리하는 방법이다.

또한, 프레임을 단순 반복하는 방법은, 입력되는 60Hz의 영상 신호의 각 프레임을 4번 반복함으로써 각 프레임의 주파수가 240Hz가 되도록 처리한다.

상술한 각 방법은 입력되는 3D 영상의 포맷에 따라 적절하게 선택되어 FRC부(1212)에서 수행될 수 있다.

이하에서는 본 발명에 따라 상기 DTV 메인 보드부(1210)에서 1차 처리 후 입력되는 3D 영상 데이터의 처리에 대해 설명한다.

3D 포맷터(1220)는, 스위치부(1221)와 FRC부(1212)를 통해 출력 주파수에 대응되도록 처리된 3D 영상 데이터의 배열을 출력 포맷인 3D 포맷으로 구성하는 코어(1222)를 포함하여 구성된다.

스위치부(1221)는, DTV 메인 보드부(1210)는 3D 영상 데이터뿐만 아니라 2D 영상 데이터도 수신하여 처리할 수 있는바, 상기 DTV 메인 보드부(1210)로부터 3D 영상 데이터가 아닌 2D 영상 데이터가 입력되면, 코어(1222)에서 처리하지 않고 바이패스(bypass)되도록 한다. 그러나 스위치부(1221)는 입력되는 영상 데이터의 포맷이 3D이면 코어(1222)에서 처리되도록 연결한다.

또한, 3D 포맷터(1220)는, 구성된 3D 영상 데이터를 디스플레이 모듈(1230)로 출력하고, 출력되는 3D 영상 데이터를 예를 들어, 셔터 안경(shutter glasses or ***s)(미도시)으로 시청시에 동기가 맞도록 상기 배열 변경된 입체 영상 데이터에 관한 동기 신호(V_sync)를 생성하여 IR 에미터(Emitter)(미도시)로 출력하여 셔터 안경에서 디스플레이 동기에 맞춰 시청 가능하도록 한다. IR 에미터는, 3D 포맷터(1220)에서 생성된 동기 신호를 수신하여 셔터 안경 내 수광부로 출력하고, 셔터 안경은 상기 수광부를 통해 IR 에미터를 거쳐 수신되는 동기 신호(V_sync)에 따라 셔터 오픈 주기(shutter open period)를 조정함으로써, 디스플레이 모듈(1230)에서 출력되는 입체 영상 데이터의 동기에 맞출 수 있다.

도 13은 본 발명에 따라 3D 메뉴 UI를 구성하고 출력하는 영상신호 처리장치에 대한 블록도이다.

도 13을 참조하면, 본 발명에 따라 3D 메뉴 UI를 구성하고 출력하는 영상신호 처리장치(1300)는, 튜너(tuner,1301), 복조기(demodulator,1302), 역다중화기(DEMUX, demultiplexer, 1303), 외부입력 수신부(external input receiver)(1304), 제어부/MPEG 디코더(1305), 키 입력 수신부(key input receiver,1306), 3D UI 프로세서(1307), 믹서(mixer,1308), FRC부(1309), 3D 포맷터부(1310) 및 디스플레이 모듈(1311)를 포함하여 구성된다. 여기서, 이러한 영상 신호 처리 장치는 디지털 텔레비전 수신기(DTV)를 예로 들 수 있다. 따라서, 본 발명에 따른 영상 신호 처리 장치는 도시된 구성 이외에 방송 신호 처리를 위해 필요한 다른 구성도 더 포함할 수 있다.

튜너(1301)는, 영상 신호를 포함한 방송 신호를 수신하기 위하여 특정 채널을 튜닝한다.

복조기(1302)는, 수신된 방송 신호를 복조한다.

역다중화부(1303)는, 복조된 방송 신호를 PID 필터링에 의해 역다중화한다.

외부 입력 수신부(1304)는, 다양한 방식으로 외부 입력 장치와 연결되고, 연결된 상기 외부 입력 장치로부터 신호를 수신한다. 상기에서 외부 입력은, HDMI/DVI(High Definition Multimedia Interface/Digital Video Interface), 컴포넌트(Component), RGB(Red,Green,Blue) 입력이 포함될 수 있다.

키 입력 수신부(1306)는, 리모콘 또는 로컬 키를 통해 사용자의 입력을 수신한다.

제어부/MPEG 디코더(1305)는, 튜너(1301) 또는 외부 입력을 통해 수신된 신호 내 영상 데이터를 디코딩하고, 키 입력 수신부(1306)를 통해 입력되는 사용자의 제어에 따라 제어 신호를 출력한다.

3D UI 프로세서(1307)는, 본 발명에 따라 하이라이트 되는 UI 정보의 뎁쓰 정보 및 디스플레이 타임 정보를 생성하고, 그에 기초하여 UI가 3D로 보이게 한다. 즉, 계층적인 메뉴(Menu)에서 선택된 메뉴 항목에 시간의 변화에 따라 뎁쓰의 정도를 달리하여 시인성을 높이고, 사용자 설정(User Setting) 값에 따라 3D UI의 뎁쓰를 다르게 설정 되도록 하여 시인성을 극대화한다. 3D UI 처리 부분(Process Part)의 주요 기능은 기존 2D UI 파트에 다양한 깊이감을 줄 수 있도록 UI 비트맵(bitmap)과 뎁쓰에 따른 가중치 정보를 추가한다.

믹서(1308)는, 제어부/MPEG 디코더(1306)의 출력과 3D UI 프로세서(1307)의 출력을 믹스하고, 믹스된 신호를 FRC부(1309)로 출력한다.

FRC부(1309)는, 2-채널 LVDS(Low Voltage Differential Signal)를 모션 컴펜세이션(Motion Compensation)을 통해 4CH LVDS 120Hz 신호로 변환한다.

3D 포맷터부(1311)는, 2D 영상 데이터가 입력되면 바이패스하고, 3D 영상 데이터가 입력되면 3D 영상 데이터를 구성하는 좌영상 데이터와 우영상 데이터를 믹스하여 LVDS 출력 형태로 변환하여 디스플레이 모듈(1311)을 통해 출력한다.

이하에서는 상술한 본 발명에 따라 시청자에게 3D UI 또는 OSD를 제공함에 있어서, 입력 영상 컨텐츠 중 3D 영상으로 판별된 컨텐츠를 2D 영상 컨텐츠와 구분하여 표시하는 방법의 각 실시 예를 첨부된 도면을 참조하여 설명한다.

도 14는 본 발명에 따른 영상신호 처리방법의 일 예를 설명하기 위해 도시한 순서도이다.

먼저, RF 또는 외부 입력으로 영상 신호를 수신한다(S1401). 수신된 영상 신호를 복조되고 역다중화된다(S1402).

역다중화된 영상 신호를 MPEG 디코딩된다(S1403).

본 발명에 따라 하이라이트 될 UI 정보에 대한 뎁쓰 정보 및 디스플레이 타임 정보에 기초하여 3D로 보이도록 3D UI를 구성한다(S1404).

여기서, 구성되는 3D UI 정보는, 계층적인 메뉴에서 선택된 메뉴 항목에 시간의 지남에 따라 뎁쓰의 정도를 달리하여 시인성을 높이고, 사용자 설정 값에 따라 3D UI의 뎁쓰를 다르게 설정 되도록 하여 시인성을 극대화할 수 있다.

MPEG 디코딩된 영상 신호와 구성된 3D UI 정보는 믹스되고(S1405), 믹스된 영상 신호 및 3D UI 정보를 3D 포맷으로 구성(S1406)되어 디스플레이 모듈(예를 들어, LCD 모듈)을 통해 출력된다(S1407).

이상 상술한 본 발명에 따르면, 3D UI 내 웨이티드 UI 뎁쓰(weighted UI depth)를 가진 사용자 선택 부분을 점진적으로 디스플레이할 수 있다. 만약 웨이트가 사용자 선택 영역에 뎁쓰를 적용하는 것이면, 사용자는 선택된 부분의 정보를 더욱 정확하게 인식할 수 있게 된다.

위에서 설명된 본 발명의 바람직한 실시예는 예시의 목적을 위해 개시된 것이고, 본 발명에 대한 통상의 지식을 가지는 당업자라면 본 발명의 사상과 범위 안에서 다양한 수정, 변경, 부가가 가능할 것이며, 이러한 수정, 변경 및 부가는 하기의 특허청구범위에 속하는 것으로 보아야 할 것이다.

1210: DTV 메인 보드부 UI 제어부(1211)
1212: FRC(Frame Rate Converter)부 1220: 3D 포맷터부
1221: 스위치부 1222: 코어
1230: 디스플레이부
1300: 영상신호 처리장치 1301: 튜너
1302: 복조기 1303: 역다중화기
1304: 외부입력 수신부 1305: 제어부/MPEG 디코더
1306: 키 입력 수신부 1307: 3D UI 프로세서
1308: 믹서 1309: FRC부
1310: 3D 포맷터부 1311: 디스플레이 모듈

Claims

제1 영상 데이터 또는 제2 영상 데이터 중 적어도 하나 이상을 이용하여 적어도 하나 이상의 메뉴 항목을 포함하는 사용자 인터페이스를 출력하는 단계;
적어도 하나 이상의 메뉴 항목에 관련된 신호를 수신하는 단계; 및
사용자에 의해 인지된 적어도 하나 이상의 아이템의 뎁쓰 변경을 위한 수신된 신호에 반응하여 스크린상에 출력되는 제1 영상 데이터와 제2 영상 데이터의 간격을 변경하는 단계;를 포함하는 방법.
제1항에 있어서,
상기 간격 변경은,
상기 적어도 하나 이상의 메뉴 항목에 대응되는 제1 영상 데이터와 제2 영상 데이터의 측면 간격 변경을 포함하는 방법.
제1항에 있어서,
상기 제1 영상 데이터는 좌영상 데이터이고, 상기 제2 영상 데이터는 우영상 데이터인 방법.
제1항에 있어서,
상기 간격 변경은,
제2 영상 데이터로부터 제1 영상 데이터가 떨어지도록 이동하는 것을 포함하는 방법.
제1항에 있어서,
상기 간격 변경은,
선택되지 않은 메뉴 항목들을 위한 영상 데이터의 간격을 유지하는 동안 적어도 하나 이상의 메뉴 항목을 위해 이루어지는 방법.
제1항에 있어서,
상기 적어도 하나 이상의 메뉴 항목은,
사운드 볼륨에 관련되는 방법.
제6항에 있어서,
상기 수신된 신호는 사운드 볼륨 변경을 위하여 리모컨으로부터 수신되는 신호인 방법.
제1항에 있어서,
상기 적어도 하나 이상의 메뉴 항목에 해당하는 값이 증가하면, 시청자에 의해 인지된 상기 적어도 하나 이상의 메뉴 항목의 뎁쓰가 증가하는 방법.
제1항에 있어서,
상기 수신된 신호는 복수의 메뉴 항목들을 3D 이미지로 변환하는 방법.
제1 영상 데이터 또는 제2 영상 데이터의 적어도 하나 이상을 이용하여 적어도 하나 이상의 메뉴 항목을 포함하는 사용자 인터페이스를 출력하는 단계;
적어도 하나 이상의 메뉴 항목에 관련된 신호를 수신하는 단계; 및
시청자에 의해 인지된 적어도 하나 이상의 메뉴 항목의 뎁쓰 변경을 위하여 수신된 신호에 반응하여 서로 관련된 스크린상에 출력되는 제1 영상 데이터와 제2 영상 데이터를 이동하는 단계;를 포함하는 방법.
제10항에 있어서,
상기 제1 영상 데이터와 제2 영상 데이터를 이동하는 것은, 시청자에 의해 인지된 적어도 하나 이상의 메뉴 항목의 뎁쓰 변경이 크도록 서로 관련된 제1 영상 데이터와 제2 영상 데이터를 더 떨어지게 이동시키는 것을 포함하는 방법.
제10항에 있어서,
상기 제1 영상 데이터와 제2 영상 데이터를 이동하는 것은, 시청자에 의해 인지된 적어도 하나 이상의 메뉴 항목의 뎁쓰 변경이 적도록 서로 관련된 제1 영상 데이터와 제2 영상 데이터를 더 가깝게 이동시키는 것을 포함하는 방법.
제10항에 있어서,
상기 제1 영상 데이터와 제2 영상 데이터를 이동하는 것은, 선택되지 않은 메뉴 항목들을 위한 영상 데이터의 간격을 유지하는 동안 적어도 하나 이상의 메뉴 항목을 위하여 발생하는 방법.
제10항에 있어서,
상기 사용자 인터페이스의 오로지 선택된 메뉴 항목의 뎁쓰만 변경되는 방법.
제10항에 있어서,
상기 제1 영상 데이터는 좌영상 데이터이고, 상기 제2 영상 데이터는 우영상 데이터인 방법.
제10항에 있어서,
상기 적어도 하나 이상의 메뉴 항목은,
사운드 볼륨에 관련되는 방법.
제16항에 있어서,
상기 수신된 신호는 사운드 볼륨 변경을 위하여 리모컨으로부터 수신되는 신호인 방법.
제10항에 있어서,
상기 적어도 하나 이상의 메뉴 항목에 해당하는 값이 증가하면, 시청자에 의해 인지된 상기 적어도 하나 이상의 메뉴 항목의 뎁쓰가 증가하는 방법.
제10항에 있어서,
상기 수신된 신호는 복수의 메뉴 항목들을 3D 이미지로 변환하는 방법.
수신 유닛에서, 적어도 하나 이상의 항목을 포함하는 사용자 인터페이스를 출력하는 요청을 수신하는 단계;
사용자 인터페이스 제어부에서, 상기 요청에 기초하여 사용자 인터페이스상에 디스플레이된 항목 정보의 뎁쓰를 제공하는 단계; 및
디스플레이 유닛에서, 변경되는 뎁쓰를 가진 항목 정보를 출력하는 단계;를 포함하여 사용자 인터페이스를 디스플레이하는 방법.
제20항에 있어서,
사용자 인터페이스 내 오로지 선택된 항목의 뎁쓰가 변경되는 사용자 인터페이스를 디스플레이하는 방법.
제20항에 있어서,
상기 사용자 인터페이스 내 각 항목의 뎁쓰는, 각 항목에 설정된 값에 따라 차별화되는 사용자 인터페이스를 디스플레이하는 방법.
제20항에 있어서,
상기 뎁쓰는, 제1 영상 데이터와 제2 영상 데이터 사이의 간격을 조절함으로써 변경되는 사용자 인터페이스를 디스플레이하는 방법.
제23항에 있어서,
상기 간격의 조절은, 선택되지 않은 항목들을 위한 영상 데이터의 간격을 유지하는 동안 선택된 항목을 위해 발생하는 사용자 인터페이스를 디스플레이하는 방법.
제23항에 있어서,
상기 적어도 하나 이상의 항목은 사운드 볼륨에 관련되는 사용자 인터페이스를 디스플레이하는 방법.
제23항에 있어서,
상기 항목의 값이 증가하면, 사용자에 의해 인지된 항목의 뎁쓰가 증가하는 사용자 인터페이스를 디스플레이하는 방법.