KR20240079996A - 복수의 영역들 내에 미디어 콘텐트 및 사용자 인터페이스를 표시하기 위한 전자 장치 및 그 방법 - Google Patents

Abstract

일 실시예에 따른, 전자 장치의 프로세서는, 프로젝션 어셈블리로부터 방사된 광이 투사될 평면에 대한 정보를 획득할 수 있다. 상기 프로세서는, 상기 정보에 기반하여, 상기 평면으로부터, 지정된 비율을 가지는 제1 영역, 및 상기 제1 영역 보다 작은 제2 영역을 식별할 수 있다. 상기 프로세서는, 상기 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI(user interface)를 획득할 수 있다. 상기 프로세서는, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시할 수 있다. 본 문서는, 실제 객체 및 가상 객체 사이의 상호연결성을 강화하기 위한 메타버스 서비스와 관련될 수 있다. 예를 들면, 상기 메타버스 서비스는, 5G(fifth generation), 및/또는 6G(sixth generation)에 기반하는 네트워크를 통해 제공될 수 있다.

Description

복수의 영역들 내에 미디어 콘텐트 및 사용자 인터페이스를 표시하기 위한 전자 장치 및 그 방법{ELECTRONIC DEVICE FOR DISPLAYING MEDIA CONTENT AND USER INTERFACE IN PLURALITY OF AREAS AND METHOD THEREOF}

본 개시(present disclosure)는 복수의 영역들 내에 미디어 콘텐트 및 사용자 인터페이스(user interface, UI)를 표시하기 위한 전자 장치 및 그 방법에 관한 것이다.

정보를 시각화하기 위한 전자 장치가 개발되고 있다. 상기 전자 장치는, 텔레비전(television), 모니터, 전광판, 빔 프로젝터, 휴대 전화, 및/또는 태블릿 PC(personal computer)를 포함할 수 있다. 전자 장치는, 상기 전자 장치의 일 면 또는 상기 전자 장치의 외부의 일 면에, 상기 정보를 표현하는(representing) 표시 영역(displaying area)을 형성할 수 있다.

일 실시예(an embodiment)에 따른, 전자 장치(electronic device)는, 통신 회로, 프로젝션 어셈블리(projection assembly), 및 프로세서를 포함할 수 있다. 상기 프로세서는, 상기 프로젝션 어셈블리로부터 방사된 광이 투사될(projected) 평면에 대한 정보를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 정보에 기반하여, 상기 평면으로부터 지정된 비율을 가지는 제1 영역, 및 상기 제1 영역 보다 작은 제2 영역을 식별하도록, 구성될 수 있다. 상기 프로세서는, 상기 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI(user interface)를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시하도록, 구성될 수 있다.

일 실시예에 따른, 전자 장치의 방법은, 상기 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 투사될 평면에 대한 정보를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 정보에 기반하여, 상기 평면으로부터, 지정된 비율을 가지는 제1 영역, 및 상기 제1 영역 보다 작은 제2 영역을 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 전자 장치의 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시하는 동작을 포함할 수 있다.

일 실시예에 따른, 전자 장치는, 프로젝션 어셈블리, 및 프로세서를 포함할 수 있다. 상기 프로세서는, 상기 프로젝션 어셈블리로부터 방사된 광이 투사될 하나 이상의 평면들에 대한 정보를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 정보에 기반하여, 상기 하나 이상의 평면들 내에서 선택된, 제1 영역 내에 미디어 콘텐트를 표시하도록, 구성될 수 있다. 상기 프로세서는, 상기 미디어 콘텐트에 기반하여, 상기 하나 이상의 평면들 내에서, 상기 제1 영역과 구분되는 제2 영역을 식별하도록, 구성될 수 있다. 상기 프로세서는, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지고, 상기 미디어 콘텐트와 관련된 UI를 표시하도록, 구성될 수 있다.

일 실시예에 따른, 전자 장치의 방법은, 상기 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 투사될 하나 이상의 평면들에 대한 정보를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 정보에 기반하여 상기 하나 이상의 평면들 내에서 선택된, 제1 영역 내에, 미디어 콘텐트를 표시하는 동작을 포함할 수 있다. 상기 방법은, 상기 미디어 콘텐트에 기반하여, 상기 하나 이상의 평면들 내에서, 상기 제1 영역과 구분되는 제2 영역을 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지고, 상기 미디어 콘텐트와 관련된, UI(user interface)를 표시하는 동작을 포함할 수 있다.

도 1은, 일 실시예에 따른, 전자 장치가 미디어 콘텐트를 투사하는 동작의 일 예를 도시한다.
도 2는, 일 실시예에 따른, 전자 장치의 블록도의 일 예를 도시한다.
도 3은, 일 실시예에 따른, 전자 장치가 평면 내에서, 광이 투사될 복수의 영역들을 분할하는(segmenting) 동작의 일 예를 도시한다.
도 4a 내지 도 4b는, 일 실시예에 따른, 전자 장치가 복수의 영역들을 통해 미디어 콘텐트 및 상기 미디어 콘텐트와 관련된 UI(user interface)를 표시하는 동작의 일 예를 도시한다.
도 5a 내지 도 5b는, 일 실시예에 따른, 전자 장치가 제1 영역을 이용하여 미디어 콘텐트를 표시하는 동안, 제1 영역 보다 작은 제2 영역의 사이즈에 기반하여, UI를 표시하는 동작의 일 예를 도시한다.
도 6은, 일 실시예에 따른, 전자 장치가 복수의 평면들 각각에서, 미디어 콘텐트 및 UI 각각이 표시될 복수의 영역들을 분할하는 동작의 일 예를 도시한다.
도 7은, 일 실시예에 따른, 전자 장치에 대한 흐름도의 일 예를 도시한다.
도 8은, 일 실시예에 따른, 전자 장치에 대한 흐름도의 일 예를 도시한다.
도 9는, 일 실시예에 따른, 전자 장치 및 외부 전자 장치의 신호 흐름도의 일 예를 도시한다.
도 10은, 메타버스 서비스와 관련된 네트워크 환경에 대한 예시도이다.

이하, 본 문서의 다양한 실시예들이 첨부된 도면을 참조하여 설명된다.

본 문서의 다양한 실시 예들 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및/또는 B 중 적어도 하나", "A, B 또는 C" 또는 "A, B 및/또는 C 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", "첫째" 또는 "둘째" 등의 표현들은 해당 구성요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다.

본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application-specific integrated circuit)으로 구성될 수 있다.

도 1은, 일 실시예에 따른, 전자 장치(101)가 미디어 콘텐트를 투사하는 동작의 일 예를 도시한다. 도 1을 참고하면, 일 실시예에 따른, 전자 장치(101)는, 외부 공간으로 광을 방사하기(emit) 위한, 빔 프로젝터(beam projector)를 포함할 수 있다. 전자 장치(101)는, 2차원으로(two-dimensionally) 배열된 픽셀들에 의해 형성된 화면을 표현하는(representing) 상기 광을 출력할 수 있다. 전자 장치(101)로부터 출력된 상기 광은, 평면(120)과 같은 객체에 의해 반사될 수 있다. 사용자는, 상기 객체에 의해 반사된 상기 광에 기반하여, 상기 화면을 볼 수 있다.

도 1을 참고하면, 일 실시예에 따른, 전자 장치(101)는, 전자 장치(101)에 의해 방사되는 광이 도달 가능한(reachable) 외부 공간 내에서, 상기 광에 의해 표현되는 화면을 투사가능한(projectable) 적어도 하나의 평면(예, 평면(120))을 식별할 수 있다. 평면(120)은, 예를 들어, 상기 외부 공간 내에서, 상기 광에 의해 표현된 정보(예, 텍스트, 이미지 및/또는 비디오를 포함하는 화면)를 시인 가능한 밝기로 반사할 수 있는 물체를 의미할 수 있다. 평면(120)은, 예를 들어, 벽 면 및/또는 빔 스크린을 포함할 수 있다. 상기 적어도 하나의 평면을 식별하기 위하여, 전자 장치(101)는 상기 외부 공간을 스캔할 수 있다. 전자 장치(101)가 외부 공간을 스캔하는 것은, 상기 외부 공간에 포함된 적어도 하나의 객체를 인식하는 동작을 포함할 수 있다. 전자 장치(101)가 적어도 하나의 객체를 인식하는 것은, 상기 적어도 하나의 객체의 형태 및/또는 위치를 식별하는 동작을 포함할 수 있다. 상기 외부 공간을 스캔하기 위하여, 전자 장치(101)는 상기 외부 공간에 대한 적어도 하나의 이미지 및/또는 비디오를 획득할 수 있다. 획득된 이미지 및/또는 비디오에 기반하여, 전자 장치(101)는, 전자 장치(101)에 인접한 적어도 하나의 외부 객체를 식별할 수 있다.

일 실시예에 따른, 전자 장치(101)는, 전자 장치(101)와 상이한 외부 전자 장치(110)를 이용하여, 외부 공간을 스캔할 수 있다. 도 1을 참고하면, 일 실시예에 따른, 전자 장치(101)는, 외부 전자 장치(110)과, 외부 공간의 스캔을 위한 신호를 교환할 수 있다. 비록, 휴대 전화의 외관을 가지는 외부 전자 장치(110)가 예시적으로 도시되지만, 실시예가 이에 제한되는 것은 아니다. 예를 들어, 외부 전자 장치(110)는, 외부 공간에 대한 이미지 및/또는 비디오를 인식하기 위한 카메라가 포함된, 어느(any) 전자 장치(예, 디지털 카메라 및/또는 태블릿 PC(personal computer))를 포함할 수 있다. 일 실시예에 따른, 전자 장치(101) 및 상기 전자 장치(101)에 연결된 외부 전자 장치(110)에 포함된 하나 이상의 하드웨어들이 도 2를 참고하여 설명된다. 일 실시예에 따른, 전자 장치(101)는 외부 전자 장치(110)로, 전자 장치(101)로부터 출력된 빛이 전파되는(propagated) 외부 공간에 대한 정보(예, 상기 외부 공간의 적어도 일부분이 캡쳐된 이미지 및/또는 비디오)를 요청할 수 있다.

일 실시예에 따른, 전자 장치(101)는 외부 공간의 스캔에 기반하여, 전자 장치(101)로부터 방사된 광이 투사될 평면(140)을 식별할 수 있다. 전자 장치(101)는, 외부 객체(130)에 의해 가려진(occluded by) 평면(140)의 적어도 일부분 내에서, 평면(140) 내에서, 광이 투사될 하나 이상의 영역들을 선택할 수 있다. 도 1의 예시적인 케이스 내에서, 전자 장치(101)는, 외부 전자 장치(110) 및/또는 전자 장치(101)의 카메라를 통해 획득된, 평면(140)에 대한 이미지로부터, 평면(140)을 가리는 제1 외부 객체(131) 및 제2 외부 객체(132)를 식별할 수 있다. 예를 들어, 제1 외부 객체(131) 및 제2 외부 객체(132)가 평면(140) 및 전자 장치(101) 사이에 배치되기 때문에, 전자 장치(101)에서 보면(view from), 제1 외부 객체(131) 및 제2 외부 객체(132)가 평면(140)을 적어도 부분적으로 가릴 수 있다.

일 실시예에 따른, 전자 장치(101)는, 외부 객체(130)에 의해 부분적으로 가려진 평면(120)을 식별하는 것에 기반하여, 평면(120) 내에서 사각형의 형태를 가지는 하나 이상의 영역들(예, 제1 영역(141) 및 제2 영역(142))을 식별할 수 있다. 전자 장치(101)는 평면(120) 내에서 외부 객체(130)에 의해 가려진 일부분과 구분되는 다른 부분 내에서, 제1 영역(141) 및 제2 영역(142)을 선택 및/또는 분할할 수 있다. 이하에서는, 전자 장치(101)가 상기 다른 부분 내에서 사각형의 형태를 가지는 제1 영역(141) 및/또는 제2 영역(142)을 식별하는 동작이 설명되지만, 전자 장치(101)에 의해 평면(120) 내에서 형성되는 제1 영역(141) 및 제2 영역(142)의 형태가 이에 제한되는 것은 아니다.

일 실시예에 따른, 전자 장치(101)가 평면(120) 내에서 영역들을 식별하는 경우, 전자 장치(101)에 의해 식별된 상기 영역들은, 평면(120) 내에서 서로 접하거나(adjoin), 또는 이격될 수 있다. 상기 하나 이상의 영역들 내에서, 전자 장치(101)는 지정된 비율(예, 종횡 비(aspect ratio))을 가지고, 사각형의 형태를 가지는 제1 영역(141)을 식별할 수 있다. 상기 하나 이상의 영역들 내에서, 전자 장치(101)는 제1 영역(141) 보다 작은 다른 영역을, 제2 영역(142)으로 결정할 수 있다. 면적의 관점에서(in terms of), 제1 영역(141)은 주 영역(main area)으로, 제2 영역(142)은 서브 영역으로 지칭될(referred as) 수 있다.

일 실시예에 따른, 전자 장치(101)는, 전자 장치(101)로부터 방출되는 광이 평면(120) 및 전자 장치(101) 사이에 배치된 외부 객체(130)를 회피하도록, 제1 영역(141) 및 제2 영역(142)을 형성할 수 있다. 전자 장치(101)는 외부 객체(130)에 의해 가려지지 않은 평면(120) 내에서, 최대화된(maximized) 면적(extent)을 가지는 제1 영역(141)을 선택할 수 있다. 전자 장치(101)는, 상기 제1 영역(141)이 제외된 평면(120) 내에서, 외부 객체(130)에 의해 가려지지 않고, 사각형의 형태를 가지는 제2 영역(142)을 선택할 수 있다. 상기 제1 영역(141)이 상기 최대화된 면적을 가지기 때문에, 제2 영역(142)은 상기 제1 영역(141) 보다 작은 면적을 가질 수 있다. 일 실시예에 따른, 전자 장치(101)가 평면(120) 내에서 제1 영역(141) 및 제2 영역(142)을 선택하는 동작의 일 예가 도 3을 참고하여 설명된다.

도 1을 참고하면, 일 실시예에 따른, 전자 장치(101)가, 제1 외부 객체(131) 및 제2 외부 객체(132)에 의해 부분적으로 가려진 평면(120) 내에서, 제1 영역(141) 및 제2 영역(142)을 선택한 예시적인 상태가 도시된다. 도 1의 상태 내에서, 전자 장치(101)는 제2 영역(142) 보다 큰 제1 영역(141) 내에, 미디어 콘텐트를 표시할 수 있다. 전자 장치(101)는, 제1 영역(141) 보다 작은 제2 영역(142) 내에, 상기 미디어 콘텐트와 관련된 UI(user interface)를 표시할 수 있다. 전자 장치(101)는 상기 미디어 콘텐트 및 상기 UI를 실질적으로 동시에 표시할 수 있다.

일 실시예에서, 전자 장치(101)에 의해 제1 영역(141) 내에 표시되는 미디어 콘텐트는, 전자 장치(101)의 메모리 내에 저장되거나, 또는 다른 전자 장치(예, 휴대 전화인 외부 전자 장치(110), STB(set-top box), PC, 및/또는 TV)로부터 전자 장치(101)로 송신될 수 있다. 상기 미디어 콘텐트는, 이미지 및/또는 비디오를 포함할 수 있다. 상기 미디어 콘텐트는, 전자 장치(101)에 의해 연결된 네트워크로부터 스트리밍될 수 있다. 상기 미디어 콘텐트는, 비디오 및 상기 비디오에 동기화된 소리를 포함할 수 있다. 상기 미디어 콘텐트는, MPEG(motion picture expert group)에 의해 규격화된 비디오를 포함할 수 있다. 일 실시예에 따른, 전자 장치(101)는 미디어 콘텐트를 제1 영역(141) 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI를 획득할 수 있다.

일 실시예에 따른, 전자 장치(101)는 제1 영역(141) 내에 표시되는 미디어 콘텐트와 함께, 제2 영역(142) 내에 상기 미디어 콘텐트와 관련된 UI를 표시할 수 있다. 상기 UI는, 상기 미디어 콘텐트 및/또는 상기 미디어 콘텐트를 송신하기 위한 채널에 대한 정보를 포함할 수 있다. 상기 UI는, 전자 장치(101)에 의해 실행되는 소프트웨어 어플리케이션에 의해 제공된 복수의 지정된(preset) UI들 중에서 선택될 수 있다. 상기 UI는, 제1 영역(141)에 기반하는 상기 미디어 콘텐트 내 비디오의 재생을 제어하기 위한 하나 이상의 실행가능한(executable) 객체를 포함할 수 있다. 상기 UI는, 상기 미디어 콘텐트를 제공하는 콘텐트 제공자(content provider)에 의해 설정될(set by) 수 있다.

일 실시예에서, 전자 장치(101)가 제2 영역(142)을 통해 표시하는 UI는, 제2 영역(142)의 형태(예, 너비, 높이 및/또는 사이즈)에 기반하는 레이아웃을 가질 수 있다. 레이아웃은, 상기 UI 내에 포함된 적어도 하나의 시각적 객체의 크기, 및/또는 위치와 관련될 수 있다. 레이아웃은, 상기 UI 내에 포함된 복수의 시각적 객체들의 배열(arrangement)일 수 있다. 시각적 객체는, 텍스트, 이미지, 아이콘, 비디오, 버튼, 체크박스, 라디오버튼, 텍스트 박스, 및/또는 테이블과 같이, 정보의 송신 및/또는 상호작용(interaction)을 위해 화면 내에 배치될 수 있는(deployable) 객체를 의미할 수 있다. 전자 장치(101)에 의해 수행되는, 제2 영역(142)을 선택하는 동작, 및 제2 영역(142)의 형태에 기반하는 레이아웃을 가지는 UI를 표시하는 동작은 상호 연관될(interconnected) 수 있다. 예를 들어, 전자 장치(101)는, 제1 영역(141)이 제외된 평면(120) 내에서, 미디어 콘텐트와 관련된 UI를 표시하기에 적합한(suitable for) 형태에 기반하여, 제2 영역(142)을 선택할 수 있다. 일 실시예에 따른, 전자 장치(101)가 제2 영역(142) 내에 UI를 표시하는 예시적인 동작이 도 4a 내지 도 4b를 참고하여 설명된다.

일 실시예에 따른, 전자 장치(101)는 미디어 콘텐트로부터 정보를 추출할 수 있다. 전자 장치(101)는 제2 영역(142) 내에, 미디어 콘텐트로부터 추출된 상기 정보를 포함하는 UI를 표시할 수 있다. 상기 정보는, 상기 미디어 콘텐트 내 비디오의 어느 한 시점 내 장면이거나, 또는 상기 장면으로부터 추출된 텍스트를 포함할 수 있다. 일 실시예에 따른, 전자 장치(101)가 미디어 콘텐트 내 비디오에 대한 장면 인식에 기반하여, 상기 제2 영역(142) 내에 UI를 표시하는 예시적인 동작이 도 5a 내지 도 5b를 참고하여 설명된다.

비록, 평면(120) 내에서 복수의 영역들(예, 제1 영역(141) 및 제2 영역(142))을 선택하는 전자 장치(101)의 동작이 예시적으로 설명되었지만, 실시예가 이에 제한되는 것은 아니다. 예를 들어, 전자 장치(101)는, 전자 장치(101)로부터 출력된 광이 도달할 수 있는 복수의 평면들을 식별할 수 있다. 상기 복수의 평면들을 식별하는 것에 기반하여, 전자 장치(101)는 상기 복수의 평면들 내에서, 제1 영역(141) 및 제2 영역(142)과 같이, 적어도 하나의 외부 객체에 의해 가려지지 않고, 사각형의 형태를 가지는 복수의 영역들을 식별할 수 있다. 전자 장치(101)가 상기 복수의 평면들 내에서 상기 복수의 영역들을 식별하는 동작의 일 예가, 도 6을 참고하여 설명된다.

상술한 바와 같이, 일 실시예에 따른, 전자 장치(101)는, 전자 장치(101)에 인접한 환경(예, 외부 공간)을 스캔하여, 전자 장치(101)로부터 출력된 광에 기반하는 화면을 형성가능한 평면(140)을 식별할 수 있다. 평면(140)이 외부 객체(130)에 의해 가려지는 경우, 전자 장치(101)는 상기 외부 객체(130)에 의해 가려지지 않은 평면(140) 내 일부분(예, 다각형의 형태를 가지는 일부분) 내에서, 사각형의 형태를 가지는 복수의 영역들(예, 제1 영역(141) 및 제2 영역(142))을 선택할 수 있다. 전자 장치(101)는 상기 복수의 영역들 각각에, 미디어 콘텐트 및 상기 미디어 콘텐트와 관련된 UI를 표시하여, 미디어 콘텐트에 대한 정보를 추가적으로 출력할 수 있다. 전자 장치(101)로부터 상기 미디어 콘텐트와 함께 출력되는 상기 정보는, 상기 미디어 콘텐트와 관련된 사용자 경험을 강화하는데 이용될 수 있다. 전자 장치(101)는 평면(140) 내에서 복수의 영역들을 형성하여, 평면(140)을 통해 표시하는 정보의 양을 증가시킬 수 있다. 상기 정보의 양이 증가되기 때문에, 전자 장치(101)는 평면(140)을 보다 효율적으로 이용할 수 있다.

도 2는, 일 실시예에 따른, 전자 장치(101)의 블록도의 일 예를 도시한다. 도 1의 전자 장치(101)는 도 2의 전자 장치(101)의 일 예일 수 있다. 도 1의 외부 전자 장치(110)는, 도 2의 외부 전자 장치(110)의 일 예일 수 있다. 도 2를 참고하면, 전자 장치(101) 및 외부 전자 장치(110)는, 유선 네트워크 및/또는 무선 네트워크에 기반하여 서로 연결될 수 있다. 상기 유선 네트워크는, 인터넷, LAN(local area network), WAN(wide area network), 이더넷 또는 이들의 조합과 같은 네트워크를 포함할 수 있다. 상기 무선 네트워크는, LTE(long term evolution), 5g NR(new radio), WiFi(wireless fidelity), Zigbee, NFC(near field communication), Bluetooth, BLE(bluetooth low-energy) 또는 이들의 조합과 같은 네트워크를 포함할 수 있다. 비록, 전자 장치(101) 및 외부 전자 장치(110)가 직접적으로 연결된(directly connected) 것으로 도시되었으나, 전자 장치(101), 및 외부 전자 장치(110)는 중간 노드(intermediate node)(예, 라우터 및/또는 AP(access point))를 통해 간접적으로 연결될 수 있다.

도 2를 참고하면, 일 실시예에 따른, 전자 장치(101)는, 프로세서(210-1), 메모리(220-1), 통신 회로(230-1), 프로젝션 어셈블리(projection assembly), 카메라(250-1) 또는 센서(260) 중 적어도 하나를 포함할 수 있다. 프로세서(210-1), 메모리(220-1), 통신 회로(230-1), 프로젝션 어셈블리(projection assembly), 카메라(250-1) 및 센서(260)는 통신 버스(a communication bus)(202-1)와 같은 전자 부품(electronical component)에 의해 서로 전기적으로 및/또는 작동적으로 연결될 수 있다(electronically and/or operably coupled with each other). 이하에서, 하드웨어들이 작동적으로 결합된 것은, 하드웨어들 중 제1 하드웨어에 의해 제2 하드웨어가 제어되도록, 하드웨어들 사이의 직접적인 연결, 또는 간접적인 연결이 유선으로, 또는 무선으로 수립된 것을 의미할 수 있다. 상이한 블록들에 기반하여 도시되었으나, 실시예가 이에 제한되는 것은 아니며, 도 2의 하드웨어들 중 일부분(예, 프로세서(210-1), 메모리(220-1) 및 통신 회로(230-1)의 적어도 일부분)이 SoC(system on a chip)와 같이 단일 집적 회로(single integrated circuit)에 포함될 수 있다. 전자 장치(101)에 포함된 하드웨어 컴포넌트의 타입 및/또는 개수는 도 2에 도시된 바에 제한되지 않는다. 예를 들어, 전자 장치(101)는 도 2에 도시된 하드웨어 컴포넌트 중 일부만 포함할 수 있다.

일 실시예에 따른, 전자 장치(101)의 프로세서(210-1)는 하나 이상의 인스트럭션들에 기반하여 데이터를 처리하기 위한 하드웨어 컴포넌트를 포함할 수 있다. 데이터를 처리하기 위한 하드웨어 컴포넌트는, 예를 들어, ALU(arithmetic and logic unit), FPU(floating point unit), FPGA(field programmable gate array), CPU(central processing unit), 및/또는 AP(application processor)를 포함할 수 있다. 프로세서(210-1)의 개수는 하나 이상일 수 있다. 예를 들어, 프로세서(210-1)는 듀얼 코어(dual core), 쿼드 코어(quad core) 또는 헥사 코어(hexa core)와 같은 멀티-코어 프로세서의 구조를 가질 수 있다.

일 실시예에 따른, 전자 장치(101)의 메모리(220-1)는 프로세서(210-1)에 입력 및/또는 출력되는 데이터 및/또는 인스트럭션을 저장하기 위한 하드웨어 컴포넌트를 포함할 수 있다. 메모리(220-1)는, 예를 들어, RAM(random-access memory)과 같은 휘발성 메모리(volatile memory) 및/또는 ROM(read-only memory)과 같은 비휘발성 메모리(non-volatile memory)를 포함할 수 있다. 휘발성 메모리는, 예를 들어, DRAM(dynamic RAM), SRAM(static RAM), Cache RAM, PSRAM (pseudo SRAM) 중 적어도 하나를 포함할 수 있다. 비휘발성 메모리는, 예를 들어, PROM(programmable ROM), EPROM (erasable PROM), EEPROM (electrically erasable PROM), 플래시 메모리, 하드디스크, 컴팩트 디스크, SSD(solid state drive), eMMC(embedded multi media card) 중 적어도 하나를 포함할 수 있다.

일 실시예에 따른, 전자 장치(101)의 메모리(220-1) 내에서, 프로세서(210-1)가 데이터에 수행할 연산, 및/또는 동작을 나타내는 하나 이상의 인스트럭션들(또는 명령어들)이 저장될 수 있다. 하나 이상의 인스트럭션들의 집합은, 펌웨어, 운영 체제, 프로세스, 루틴, 서브-루틴 및/또는 어플리케이션으로 참조될 수 있다. 예를 들어, 전자 장치(101), 및/또는 프로세서(210-1)는, 운영체제, 펌웨어, 드라이버, 및/또는 어플리케이션 형태로 배포된 복수의 인스트럭션의 집합(set of a plurality of instructions)이 실행될 시에, 도 7 내지 도 8의 동작들 중 적어도 하나를 수행할 수 있다. 이하에서, 어플리케이션이 전자 장치(101)에 설치되었다는 것은, 어플리케이션의 형태로 제공된 하나 이상의 인스트럭션들이 전자 장치(101)의 메모리(220-1) 내에 저장된 것으로써, 상기 하나 이상의 어플리케이션들이 전자 장치(101)의 프로세서(210-1)에 의해 실행 가능한(executable) 포맷(예, 전자 장치(101)의 운영 체제에 의해 지정된 확장자를 가지는 파일)으로 저장된 것을 의미할 수 있다.

일 실시예에 따른, 전자 장치(101)의 통신 회로(230-1)는 전자 장치(101) 및 외부 전자 장치(110) 사이의 전기 신호의 송신 및/또는 수신을 지원하기 위한 하드웨어를 포함할 수 있다. 전자 장치(101)의 통신 회로(230-1)를 통해 연결된 다른 전자 장치로, 외부 전자 장치(110) 만이 도시되었으나, 실시예가 이에 제한되는 것은 아니다. 통신 회로(230-1)는, 예를 들어, 모뎀(MODEM), 안테나, O/E(optic/electronic) 변환기 중 적어도 하나를 포함할 수 있다. 통신 회로(230-1)는, 이더넷(ethernet), LAN(local area network), WAN(wide area network), WiFi(wireless fidelity), Bluetooth, BLE(bluetooth low energy), ZigBee, LTE(long term evolution), 5G NR(new radio)와 같은 다양한 타입의 프로토콜에 기반하여 전기 신호의 송신 및/또는 수신을 지원할 수 있다.

일 실시예에 따른, 전자 장치(101)는 통신 회로(230-1)를 이용하여, 미디어 콘텐트를 수신할 수 있다. 예를 들어, 전자 장치(101)는 통신 회로(230-1)를 통하여, WiDi(wireless display) 및/또는 미라캐스트와 같은 무선 통신 프로토콜에 기반하여, 상기 미디어 콘텐트를 표시하기 위한 신호를 무선으로 수신할 수 있다. 예를 들어, 전자 장치(101)는 통신 회로(230-1)를 이용하여, HDMI(high-definition multimedia interface), DP(displayport), MHL(mobile high-definition link), DVI(digital visual interface) 및/또는 D-sub(D-subminiature)와 같은 유선 통신 프로토콜(또는 유선 인터페이스)에 기반하여, 상기 미디어 콘텐트를 표시하기 위한 신호를 유선으로 수신할 수 있다.

일 실시예에 따른, 전자 장치(101)의 프로젝션 어셈블리(240)는, 2차원으로 배열된 픽셀들을 표현한 광을 방출하기 위해 조립된(assembled) 복수의 하드웨어들을 포함할 수 있다. 예를 들어, 프로젝션 어셈블리(240)는 색 공간 내 3 원색들(three primary colors) 각각의 광을 방출하기 위한 CRT들(cathode-ray tubes) 및, 상기 CRT들 각각으로부터 방출된 광을 확대하기 위한 렌즈들의 조합(combination)을 포함할 수 있다. 예를 들어, 프로젝션 어셈블리(240)는, 광을 방출하기 위한 광원(예, 램프), 상기 광을, 3 원색들 각각에 대응하는 광 경로들(light paths)로 분할하기 위한 광학 필터들, 상기 광 경로들 각각에 배치된 LCD(liquid crystal display) 패널들, 및 상기 LCD 패널들로부터 출력된 광을 합성하기 위한 프리즘 및/또는 렌즈의 조합을 포함할 수 있다. 예를 들어, 프로젝션 어셈블리(240)는, 광을 방출하기 위한 광원, 상기 광으로부터 3 원색들 중 어느 하나를 선택하는 광학 필터, 상기 광학 필터에 의해 필터링된 원색에 대한 반사를 조절하기 위한 DMD(digital mirror device), 및 상기 DMD에 의해 반사된 광을 확대하기 위한 렌즈의 조합을 포함할 수 있다. 화면의 표시를 위해 광의 투사를 요구하는 관점에서, 상기 예시된 조합들 중 적어도 하나는, 프로젝션 어셈블리(240)로 지칭될 수 있다. 일 실시예에서, 프로젝션 어셈블리(240)를 포함하는 전자 장치(101)는 빔 프로젝터(beam projector)로 지칭될 수 있다.

일 실시예에 따른, 전자 장치(101)의 카메라(250-1)는, 광의 색상 및/또는 밝기를 나타내는 전기 신호를 생성하는 하나 이상의 광 센서들(예, CCD(charged coupled device) 센서, CMOS(complementary metal oxide semiconductor) 센서)을 포함할 수 있다. 카메라(250-1) 내 복수의 광 센서들은 2차원 격자(2 dimensional array)의 형태로 배치될 수 있다. 카메라(250-1)는 복수의 광 센서들 각각의 전기 신호를 실질적으로 동시에 획득하여, 2차원 격자의 광 센서들에 도달한 빛에 대응하고, 2차원으로 배열된 복수의 픽셀들을 포함하는 이미지를 생성할 수 있다. 예를 들어, 카메라(250-1)를 이용하여 캡쳐한 사진 데이터는 카메라(250-1)로부터 획득한 하나의(a) 이미지를 의미할 수 있다. 예를 들어, 카메라(250-1)를 이용하여 캡쳐한 비디오 데이터는 카메라(250-1)로부터 지정된 프레임율(frame rate)을 따라 획득한 복수의 이미지들의 시퀀스(sequence)를 의미할 수 있다.

일 실시예에 따른, 전자 장치(101)의 센서(260)는 전자 장치(101)와 관련된 비-전기적 정보(non-electronic information)로부터 프로세서(210-1) 및/또는 메모리(220-1)에 의해 처리될 수 있는 전기적 정보를 생성할 수 있다. 예를 들어, 센서(260)는 전자 장치(101) 및 외부 객체 사이의 거리를 측정하기 위한 깊이 센서(depth sensor)를 포함할 수 있다. 상기 깊이 센서는, UWB(ultra wide band)의 주파수 대역 내 무선 신호를 이용하는 UWB 센서(또는 UWB 레이더)를 포함할 수 있다. 상기 깊이 센서는, 레이저 광 및/또는 적외선 광의 비행 시간(time-of-flight, ToF)을 측정하는 ToF 센서를 포함할 수 있다. 전자 장치(101)는 ToF 센서를 이용하여, 2차원으로 배열된 깊이 값들(depth values)을 포함하는 깊이 영상을 획득할 수 있다. 상기 ToF 센서는 적외선 다이오드, 및 적외선 광의 세기를 탐지하고, 2 차원 격자 형태로 배치된 복수의 적외선 광 센서들을 포함할 수 있다. 전자 장치(101)는 ToF 센서를 이용하여, 적외선 다이오드에서 방출된 광이 피사체로부터 반사되어 상기 복수의 적외선 광 센서들 중 적어도 하나에 도달하는 시간에 기반하는, 상기 깊이 영상을 획득할 수 있다. 전자 장치(101)는 상기 깊이 센서 외에도, 전자 장치(101)의 지리적 위치(geographic location)를 탐지하기 위한 GPS(global positioning system) 센서(또는 갈릴레오(galileo), 베이더우(beidou, compass)와 같은 GNSS(global navigation satellite system)에 기반하는 센서), 빛을 포함하는 전자기파를 탐지하기 위한 이미지 센서, 터치 센서 및/또는 조도 센서를 포함할 수 있다.

비록 도시되지 않았지만, 일 실시예에 따른 전자 장치(101)는 정보를 시각화한 형태 외에 다른 형태로 출력하기 위한 출력 수단을 포함할 수 있다. 예를 들어, 전자 장치(101)는 음성 신호(acoustic signal)를 출력하기 위한 스피커를 포함할 수 있다. 예를 들어, 전자 장치(101)는 진동에 기반하는 햅틱 피드백을 제공하기 위한 모터를 포함할 수 있다.

도 2를 참고하면, 전자 장치(101)에 연결된 외부 전자 장치(110)는, 프로세서(210-2), 메모리(220-2), 통신 회로(230-2) 또는 카메라(250-2) 중 적어도 하나를 포함할 수 있다. 프로세서(210-2), 메모리(220-2), 통신 회로(230-2) 및 카메라(250-2)는 통신 버스(202-2)에 의해 서로 전기적으로 및/또는 작동적으로 연결될 수 있다. 일 실시예에서, 외부 전자 장치(110)는, 사용자에 의해 소유되는(be owned by) 단말일 수 있다. 단말은, 예를 들어, 랩톱 및 데스크톱과 같은 개인용 컴퓨터(personal computer, PC), 스마트폰(smartphone), 스마트패드(smartpad), 태블릿 PC, 스마트워치(smartwatch) 및 HMD(head-mounted device)와 같은 스마트액세서리를 포함할 수 있다. 도 2의 외부 전자 장치(110) 내 프로세서(210-2), 메모리(220-2), 통신 회로(230-2) 및 카메라(250-2)는, 전자 장치(101) 내 프로세서(210-1), 메모리(220-1), 통신 회로(230-1) 및 카메라(250-1)에 대응할 수 있다. 설명의 반복을 줄이기 위하여, 프로세서(210-2), 메모리(220-2), 통신 회로(230-2) 및 카메라(250-2)의 설명들 중에서, 프로세서(210-1), 메모리(220-1), 통신 회로(230-1) 및 카메라(250-1)와 중복되는 설명들이 생략될 수 있다.

일 실시예에 따른, 외부 전자 장치(110) 내에, 전자 장치(101)와 통신하기 위한 어플리케이션(270)이 설치될 수 있다. 상기 어플리케이션(270)은, 전자 장치(101) 및/또는 외부 전자 장치(110) 사이의 신호 및/또는 정보의 교환을 위하여, 외부 전자 장치(110) 내에 설치될 수 있다. 외부 전자 장치(110)의 프로세서(230-2)는, 어플리케이션(270)을 실행하여, 통신 회로(230-2)를 제어할 수 있다. 통신 회로(230-2)를 통해, 외부 전자 장치(110)는 전자 장치(101)의 통신 회로(230-1)에 연결될 수 있다. 어플리케이션(270)이 실행된 상태 내에서, 전자 장치(101) 및 외부 전자 장치(110) 사이에 통신 링크가 수립될 수 있다. 외부 전자 장치(110)는 어플리케이션(270)의 실행에 기반하여, 전자 장치(101)로 송신될 정보를 획득할 수 있다. 예를 들어, 전자 장치(101)는 외부 전자 장치(110)로, 어플리케이션(270)을 실행하여, 전자 장치(101)로부터 이격된 하나 이상의 평면들에 대한 정보를 획득할 것을 지시하는 제1 신호를 송신할 수 있다. 상기 제1 신호는, 전자 장치(101)의 부팅에 기반하여 외부 전자 장치(110)로 송신될 수 있다. 외부 전자 장치(110)는 상기 제1 신호를 수신하는 것에 기반하여, 어플리케이션(270)을 실행할 수 있다. 외부 전자 장치(110)는, 어플리케이션(270)의 실행에 기반하여, 카메라(250-2)로부터, 상기 하나 이상의 평면들에 대한 적어도 하나의 이미지를 획득할 수 있다. 외부 전자 장치(110)는, 통신 회로(230-2)를 통해 전자 장치(101)로, 상기 제1 신호에 대한 응답으로(as a response to), 상기 적어도 하나의 이미지가 포함된 상기 정보가 포함된 제2 신호를 송신할 수 있다. 일 실시예에 따른, 전자 장치(101) 및 외부 전자 장치(110)의 동작의 일 예가, 도 9를 참고하여 설명된다.

일 실시예에 따른, 전자 장치(101)의 프로세서(210-1)는, 통신 회로(230-1)를 통해 수신된, 상기 제2 신호에 기반하여, 프로젝션 어셈블리(240)로부터 방사된 광이 투사될 하나 이상의 평면들에 대한 정보를 획득할 수 있다. 실시예가 이에 제한되는 것은 아니며, 카메라(250-1) 및/또는 센서(260)를 포함하는 전자 장치(101)는, 카메라(250-1) 및/또는 센서(260)를 제어하여, 상기 하나 이상의 평면들에 대한 상기 정보를 획득할 수 있다. 전자 장치(101)의 프로세서(210-1)는, 상기 정보에 기반하여 상기 하나 이상의 평면들 내에서 선택된, 제1 영역(예, 도 1의 제1 영역(141)) 내에, 미디어 콘텐트를 표시할 수 있다. 상기 미디어 콘텐트는, 통신 회로(230-1)를 통해 연결된 외부 전자 장치(110)로부터 송신되거나, 메모리(220-1) 내에 저장될 수 있다. 전자 장치(101)의 프로세서(210-1)는, 미디어 콘텐트에 기반하여, 하나 이상의 평면들 내에서, 상기 제1 영역과 구분되는 제2 영역(예, 도 1의 제2 영역(142))을 식별할 수 있다. 전자 장치(101)의 프로세서(210-1)는, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지고, 상기 미디어 콘텐트와 관련된, UI를 표시할 수 있다.

상술한 바와 같이, 일 실시예에 따른, 전자 장치(101)는 외부 전자 장치(110) 내 카메라(250-2) 및/또는 전자 장치(101)의 카메라(250-1)를 이용하여, 프로젝션 어셈블리(240)의 광이 방사될(propagated) 외부 공간에 대한 정보를 획득할 수 있다. 전자 장치(101)는 상기 정보로부터, 상기 광이 투사될 하나 이상의 평면들을 식별할 수 있다. 전자 장치(101)는 상기 하나 이상의 평면들 내에서, 적어도 하나의 외부 객체(예, 도 1의 외부 객체(130))에 의해 가려지지 않은 일부분 내에서, 상기 광이 투사될 복수의 영역들을 식별할 수 있다. 전자 장치(101)는 상기 복수의 영역들 중 적어도 두 영역들로, 상이한 화면들을 실질적으로 동시에 투사할 수 있다. 전자 장치(101)는 상기 화면들의 투사에 기반하여, 상기 하나 이상의 평면들의 사용량(usage)을 증가시킬 수 있다.

이하에서는, 도 3을 참고하여, 일 실시예에 따른, 전자 장치(101)가 일(a) 평면 내에서, 상이한 화면들(예, 미디어 콘텐트 및 미디어 콘텐트와 관련된 정보가 포함된 UI)이 표시될 복수의 영역들을 선택하는 동작의 일 예가 설명된다.

도 3은, 일 실시예에 따른, 전자 장치(101)가 평면(120) 내에서, 광이 투사될 복수의 영역들(321, 322, 323)을 분할하는(segmenting) 동작의 일 예를 도시한다. 도 2의 전자 장치(101)는 도 3의 전자 장치(101)를 포함할 수 있다. 예를 들어, 도 3을 참고하여 설명되는 전자 장치(101)의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다.

일 실시예에 따른, 전자 장치(101)는, 전자 장치(101) 내 카메라(예, 도 2의 카메라(250-1))를 이용하여, 전자 장치(101) 내 프로젝션 어셈블리(예, 도 2의 프로젝션 어셈블리(240))의 광이 방사되는 외부 공간에 대한 정보를 획득할 수 있다. 전자 장치(101) 내 상기 카메라의 방향은, 상기 정보를 획득하기 위하여, 상기 프로젝션 어셈블리의 방향과 실질적으로 평행할 수 있다. 예를 들어, 전자 장치(101)는, 도 1 내지 도 2의 외부 전자 장치(110)와 같이, 카메라(예, 도 2의 카메라(250-2))를 포함하는 외부 전자 장치로, 상기 정보의 획득을 지시하는 신호를 송신할 수 있다. 외부 전자 장치(110)는, 어플리케이션(예, 도 2의 어플리케이션(270))의 실행에 기반하여, 상기 정보를 획득하기 위한 화면을, 디스플레이 내에 표시할 수 있다. 예를 들어, 외부 전자 장치(110)는 디스플레이 내에, 상기 외부 공간에 대한 이미지의 캡쳐를 가이드하기 위한 시각적 객체(305)를 표시할 수 있다. 도 3을 참고하면, 외부 전자 장치(110)가 지정된 텍스트(예, "빔 프로젝터가 향하는 화면을 촬영해 주세요")를 포함하는 팝업 윈도우의 형태를 가지는 시각적 객체(305)를 표시하는 일 실시예가 도시된다. 외부 전자 장치(110)는 촬영 입력(shooting input)에 응답하여, 전자 장치(101)로 송신될, 이미지(예, 평면(120)이 캡쳐된 이미지)를 획득할 수 있다. 외부 전자 장치(110)는 상기 이미지를, 전자 장치(101)로 송신할 수 있다.

일 실시예에 따른, 전자 장치(101)가, 외부 전자 장치(110) 및/또는 전자 장치(101)의 카메라를 이용하여 획득하는 정보는, 전자 장치(101) 내 프로젝션 어셈블리로부터 방사된 광이 투사될 평면(120)에 대한 이미지를 포함할 수 있다. 전자 장치(101)는 상기 이미지에 대한 객체 인식(object recognition)을 수행하여, 평면(120)과 상이한 하나 이상의 외부 객체들(예, 제1 외부 객체(131) 및/또는 제2 외부 객체(132))을 식별할 수 있다. 상기 객체 인식은, 상기 이미지 내에 캡쳐된 피사체를, 지정된 카테고리들(예, 피사체의 명칭에 의해 구분되는 카테고리들) 중 어느 하나로 분류하는 동작을 포함할 수 있다. 상기 객체 인식은, 전자 장치(101)에 의해 실행되는 인공 신경망(artificial neural network, ANN)에 기반하여 수행될 수 있다. 예를 들어, 전자 장치(101)는 CNN(convolution neural network) 및/또는 LSTM(long-short term memory)와 같은 인공 신경망에 기반하여, 상기 객체 인식을 수행할 수 있다. 전자 장치(101)가 상기 하나 이상의 외부 객체들을 식별하는 것은, 상기 이미지 내에서 상기 하나 이상의 외부 객체들의 위치들 및/또는 상기 하나 이상의 외부 객체들에 의해 점유된(occupied) 상기 이미지의 적어도 일부분을 식별하는 동작을 포함할 수 있다.

일 실시예에 따른, 전자 장치(101)는, 프로젝션 어셈블리로부터 출력된 광이 하나 이상의 외부 객체들의 입체적인 형태 및/또는 색상에 의해 왜곡되는 것을 방지하기 위하여, 프로젝션 어셈블리의 광 경로를, 상기 이미지에 의해 식별된 하나 이상의 외부 객체들로부터 분리할 수 있다. 예를 들어, 전자 장치(101)는 평면(120) 내에서, 제1 외부 객체(131) 및 제2 외부 객체(132)에 의해 가려지는 부분과 구분되는, 부분(320320)을 식별할 수 있다. 일 실시예에서, 부분(320320)은, 투사 가능(projectable) 부분으로 지칭될 수 있다. 전자 장치(101)는 투사 가능 부분을 식별하기 위하여, 전자 장치(101) 및/또는 외부 전자 장치(110)의 카메라를 이용할 수 있다. 일 실시예에 따른, 전자 장치(101)는, 평면(140)에 대한 외부 객체(130)의 좌표에 기반하여, 상기 투사 가능 부분을 식별할 수 있다. 평면(120)이 사각형의 형태를 가지는 것과 독립적으로, 전자 장치(101)가 평면(120)으로부터 식별하는 부분(320)의 형태는, 평면(120) 내에 포함된 다각형 및/또는 폐곡선의 형태를 가질 수 있다. 일 실시예에서, 평면(120) 및 전자 장치(101) 사이에, 외부 객체(130)와 같은 어느 외부 객체도 존재하지 않는 경우, 전자 장치(101)는 평면(120) 전체를 투사 가능 부분으로 결정할 수 있다.

도 3을 참고하면, 일 실시예에 따른, 전자 장치(101)는 부분(320)으로부터, 사각형의 형태를 가지는 영역들(321, 322, 323)을 추출할 수 있다. 예를 들어, 전자 장치(101)는 16:9와 같은 지정된 종횡 비(aspect ratio)에 기반하여, 부분(320)과 같은 투사 가능 부분을 분할할 수 있다. 상기 투사 가능 부분이 상기 지정된 종횡 비를 가지는 사각형의 형태를 가지는 경우, 전자 장치(101)는 단일의 영역을 선택하고, 선택된 영역을 통해 미디어 콘텐트를 출력할 수 있다. 일 실시예에 따른, 전자 장치(101)는 지점들(E1, E2)과 같이, 다각형의 형태를 가지는 부분(320) 내에서, 좌상단(upper left corner) 내 지점을 식별할 수 있다. 전자 장치(101)는 지점들(E1, E2)로부터, 우하단을 향하여 확장되는 사각형의 영역에 기반하여, 영역들(321, 322, 323)을 추출할 수 있다. 전자 장치(101)는 지정된 종횡 비에 기반하여 상기 지점으로부터 우하단을 향하여 확장되는 사각형의 영역들을 식별할 수 있다. 전자 장치(101)는 상기 영역들 중에서, 최대 면적을 가지는 일 영역을, 미디어 콘텐트가 표시될 제1 영역(예, 도 1의 제1 영역(131))으로 결정할 수 있다. 이하에서는, 전자 장치(101)가 영역(321)을, 상기 제1 영역으로 결정한 것으로 가정한다. 예를 들어, 전자 장치(101)는 지정된 종횡 비를 가지는 상기 제1 영역 내에, 미디어 콘텐트를 표현하기 위한 광을 투사할 수 있다. 상기 제1 영역의 결정에 이용되는 후보의 관점에서, 영역들(321, 322, 323)은 후보 영역들로 지칭될 수 있다. 일 실시예에 따른, 전자 장치(101)는 평면(120) 내에서, 외부 객체(130)에 의해 가려진 부분과 구분되는 다른 부분(320) 내에서, 지정된 종횡 비를 가지는 후보 영역들을 식별할 수 있다. 상기 후보 영역들 중에서, 전자 장치(101)는 최대 면적을 가지는 일 후보 영역(예, 영역(321))을, 상기 제1 영역으로 결정할 수 있다.

일 실시예에 따른, 전자 장치(101)는 부분(320) 내에서 추출된 영역들(321, 322, 323) 중에서, 제1 영역으로 결정된 영역(321)을 제외한 다른 영역들(322, 323) 중에서, 상기 제1 영역을 통해 표시될 미디어 콘텐트와 관련된 UI가 표시될 제2 영역(예, 도 1의 제2 영역(132))을 선택할 수 있다. 전자 장치(101)는 상기 영역들(322, 323) 각각에, 상기 미디어 콘텐트에 기반하는 우선 순위를 할당(assign)할 수 있다. 전자 장치(101)가 상기 영역들(322, 323)로 할당하는 우선 순위는, 제1 영역으로 선택된 영역(321)을 통해 표시될 미디어 콘텐트와 관련될 수 있다. 예를 들어, 상기 미디어 콘텐트에 의해 지시되는 면적 또는 종횡 비에 기반하여, 영역들(322, 323) 각각의 우선 순위가 결정될 수 있다. 예를 들어, 면적의 내림차순(descending order)에 기반하여, 영역들(322, 323) 각각의 우선 순위가 결정되는 경우, 영역(323)의 우선 순위가 영역(322)의 우선 순위 보다 높을 수 있다. 예를 들어, 너비 및 높이 사이의 차이의 오름차순(ascending order)에 기반하여, 영역들(322, 323) 각각의 우선 순위가 결정되는 경우, 영역(323)의 우선 순위가 영역(322)의 우선 순위 보다 높을 수 있다.

일 실시예에서, 전자 장치(101)는 제1 영역으로 결정된 영역(321)을 제외한 다른 영역들(322, 323) 각각에 할당된 상기 우선 순위에 기반하여, 상기 제1 영역과 구분되는 제2 영역을 선택할 수 있다. 예를 들어, 전자 장치(101)는 영역들(322, 323) 중에서, 상기 제1 영역을 통해 표시되는 미디어 콘텐트와 관련된 UI가 표시될 제2 영역을 선택할 수 있다. 영역들(322, 323) 중 영역(323)이 상기 제2 영역으로 선택된 경우, 전자 장치(101)는 영역(323)의 너비, 높이 및/또는 면적에 기반하여, 상기 제2 영역을 통해 표시될 UI를 식별할 수 있다. 예를 들어, 전자 장치(101)는, 메모리(예, 도 2의 메모리(220-1)) 내에 저장된 지정된 UI들 중에서, 미디어 콘텐트, 영역(323)의 너비, 높이 및/또는 면적에 기반하여, 영역(323)을 통해 표시될 상기 UI를 선택할 수 있다. 상기 지정된 UI는, 하나 이상의 지정된 시각적 객체들에 기반하여 영역(321)을 통해 표시되는 미디어 콘텐트에 대한 정보를 표현할 수 있다. 상기 지정된 UI는, 제2 영역의 너비, 높이, 종횡 비 및/또는 면적 중 적어도 하나에 기반하여 레이아웃을 조절하기 위한 정보를 포함할 수 있다. 비록 전자 장치(101)가 영역들(322, 323) 중 어느 하나를 상기 제2 영역으로 선택하는 일 실시예가 설명되지만, 실시예가 이에 제한되는 것은 아니며, 전자 장치(101)는 제1 영역을 통해 표시되는 미디어 콘텐트와 관련된 복수의 UI들을, 제1 영역이 제외된 평면(120) 내에 형성된 복수의 다른 영역들을 통해 표시할 수 있다.

일 실시예에 따른, 전자 장치(101)는 제1 영역으로 결정된 영역(321)을 통해 미디어 콘텐트를 표시하는 상태 내에서, 제2 영역으로 결정된 영역(323)을 통해, 상기 UI를 표시할 수 있다. 영역(323)의 너비, 높이, 및/또는 종횡 비에 기반하여, 전자 장치(101)는 UI의 레이아웃을 조절할 수 있다. 전자 장치(101)가 상기 UI의 레이아웃을 조절하기 때문에, 영역(323)을 통해 표시되는 상기 UI는, 영역(323)에 적합한 형태를 가질 수 있다. 제2 영역의 크기에 반응하는 관점에서, 상기 제2 영역을 통해 표시되는 상기 UI는 반응형(responsive) UI로 지칭될 수 있다.

상술한 바와 같이, 일 실시예에 따른, 전자 장치(101)는, 외부 전자 장치(110) 및/또는 전자 장치(101)의 카메라를 이용하여, 평면(120) 및/또는 외부 객체(130)와 관련된 정보를 획득할 수 있다. 전자 장치(101)는 상기 정보에 기반하여, 평면(120) 내에서 외부 객체(130)에 의해 가려지지 않은 일부분과 구분되는 다른 부분(예, 부분(320)을 포함하는 투사 가능 부분) 내에서, 복수의 영역들(예, 영역들(321, 322, 323))을 구분할 수 있다. 상기 복수의 영역들 내에서, 전자 장치(101)는 미디어 콘텐트가 표시될 제1 영역(예, 도 3의 영역(321)) 및 상기 미디어 콘텐트와 관련된 UI가 표시될 제2 영역(예, 도 3의 영역(323))을 선택할 수 있다. 상기 복수의 영역들 내에서, 전자 장치(101)는 최대 면적을 가지고, 지정된 종횡 비를 가지는, 영역(321)을, 미디어 콘텐트가 표시될 상기 제1 영역으로 결정할 수 있다. 부분(320) 내에서, 영역(321)과 구분되는 다른 영역들(322, 323)은, 상기 미디어 콘텐트와 관련된 UI를 표시하기 위한 제2 영역으로 전용될(diverted) 수 있다. 부분(320) 내에서, 상기 제1 영역 및 상기 제2 영역으로 선택된 영역들(321, 323)을 이용하여, 전자 장치(101)는 평면(120)의 사용량을 증가시킬 수 있다.

이하에서는, 도 4a 내지 도 4b를 참고하여, 일 실시예에 따른, 전자 장치(101)가 평면(120) 내에서 선택된 영역들을 이용하여, 미디어 콘텐트 및 상기 미디어 콘텐트와 관련된 UI를 표시하는 동작의 일 예가 설명된다.

도 4a 내지 도 4b는, 일 실시예에 따른, 전자 장치(101)가 복수의 영역들(예, 제1 영역(141) 및/또는 제2 영역(142))을 통해 미디어 콘텐트 및 상기 미디어 콘텐트와 관련된 UI(user interface)를 표시하는 동작의 일 예를 도시한다. 도 2의 전자 장치(101)는 도 4a 내지 도 4b의 전자 장치(101)를 포함할 수 있다. 도 4a 내지 도 4b를 참고하여 설명하는 전자 장치(101)의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다.

도 4a 내지 도 4b를 참고하면, 일 실시예에 따른, 전자 장치(101)가 제1 영역(141) 및 제2 영역(142)을 동시에 제어하여, 미디어 콘텐트 및 UI를 표시하는 예시적인 상태들(401, 402)이 도시된다. 상태(401) 내에서, 전자 장치(101)는 제1 외부 객체(131) 및 제2 외부 객체(132)에 의해 가려지는 평면(120) 내 부분과 구분되는 다른 부분 내에서, 지정된 종횡 비를 가지는 복수의 후보 영역들을 식별할 수 있다. 전자 장치(101)는, 상기 복수의 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 제1 영역(141)으로 선택할 수 있다. 전자 장치(101)는 제1 영역(141) 내에, 통신 회로(예, 도 2의 통신 회로(230-1))를 통해 제공된 미디어 콘텐트를 표시할 수 있다. 제1 영역(141) 및 전자 장치(101) 사이의 위치 관계에 기반하여, 전자 장치(101)는 키스톤 조절 및/또는 렌즈 시프트와 같은 기능들 중 적어도 하나를 실행하여, 제1 영역(141)의 형태에 적합한 형태를 가지는, 상기 미디어 콘텐트를 표시할 수 있다. 일 실시예에서, 제1 영역(141)을 통해 표시되는 미디어 콘텐트는, STB에 의해 제공되는 지정된 화면(예, 홈 화면), TV 비디오 및/또는 상이한 화면들이 결합된 멀티 뷰(또는 멀티 윈도우)를 포함할 수 있다. 이하에서는, 도 4a 내지 도 4b의 상태들(401, 402) 내에서, 전자 장치(101)가 홈 쇼핑을 위한 미디어 콘텐트를, 제1 영역(141) 내에 표시하는 것으로 가정한다. 상기 미디어 콘텐트는, 전자 장치(101)에 연결된 STB를 통해, 콘텐트 제공자의 서버로부터 전자 장치(101)로 송신될 수 있다.

도 4a의 상태(401) 내에서, 일 실시예에 따른, 전자 장치(101)는, 제1 영역(141)이 분할된 평면(120) 내 상기 다른 부분 내에서, 미디어 콘텐트와 관련된 UI에 대응하는 조건에 기반하여, 상기 UI가 표시될 제2 영역(142)을 식별할 수 있다. 상기 조건은, 너비 및 높이 사이의 편차에 의해 설정된 제1 지정된 조건, 및/또는 면적에 기반하여 설정된 제2 지정된 조건 중에서 선택될 수 있다. 전자 장치(101)는, 제1 영역(141)이 제외된 상기 다른 부분 내에서, 사각형의 형태를 가지는 후보 영역들을 추출할 수 있다. 상기 후보 영역들 중에서, 전자 장치(101)는 최대 면적을 가지거나, 또는 너비 및 높이 사이의 편차가 최소인 일 후보 영역을, 상기 제2 영역(142)으로 선택할 수 있다.

도 4a를 참고하면, 전자 장치(101)가 제2 영역(142) 내에, 미디어 콘텐트와 관련된 UI를 표시하는 예시적인 상태(401)가 도시된다. 상기 UI를 통해, 전자 장치(101)는 제1 영역(141)을 통해 표시되는 미디어 콘텐트의 특정 시점(예, 현재 시점) 내 정보를 표시할 수 있다. 전자 장치(101)는 상기 정보를 표현하기 위한 복수의 지정된 UI들을 저장할 수 있다. 상기 복수의 지정된 UI들은, 알림 메시지를 표시하기 위한 UI, 팝업 윈도우의 형태를 가지는 UI, 사물 인터넷(internet of things, IoT)에 기반하여 전자 장치(101)와 구분되는 다른 전자 장치와 정보를 교환하기 위한 UI, 및/또는 대시보드(dashboard)와 같이, 전자 장치(101)에 대한 정보를 표시하기 위한 UI 중 적어도 하나를 포함할 수 있다. 상기 복수의 지정된 UI들 중에서, 전자 장치(101)는 제1 영역(141)을 통해 표시되는 미디어 콘텐트 및/또는 상기 미디어 콘텐트를 제공하는 콘텐트 제공자로부터 송신된 신호에 기반하여, 제2 영역(142)을 통해 표시되는 UI를 식별할 수 있다.

도 4a의 상태(401) 내에서, 일 실시예에 따른, 전자 장치(101)는, 홈 쇼핑을 위한 미디어 콘텐트를 제1 영역(141) 내에 표시하는 동안, 제2 영역(142) 내에, 상기 홈 쇼핑과 관련된 정보가 포함된 UI를 표시할 수 있다. 상기 UI는, 전자 장치(101) 내에 저장된, 복수의 지정된 UI들 중에서 선택될 수 있다. 전자 장치(101)는, 제2 영역(142)을 통해 표시되는 UI 내에, 제1 영역(141) 내에 표시되는 미디어 콘텐트의 채널에 대한 정보를 포함하는 시각적 객체(410)를 표시할 수 있다. 시각적 객체(410) 내에서, 전자 장치(101)는 상기 채널을 지시하는 정보(예, 채널 번호, 및/또는 채널 명칭)를 표시할 수 있다. 전자 장치(101)는 제2 영역(142)을 통해 표시되는 UI 내에, 상기 미디어 콘텐트에 포함된 상품에 대한 정보를 표시할 수 있다. 예를 들어, 전자 장치(101)는 상기 상품을 표현한 이미지를 포함하는 시각적 객체(420)를 표시할 수 있다. 전자 장치(101)는 상기 UI 내에, 상기 상품의 이름(예, "A 의류")을 포함하는 텍스트를 표시할 수 있다. 전자 장치(101)는 상기 UI 내에, 상기 상품의 거래(transaction)를 위한 시각적 객체들(430, 440)을 표시할 수 있다. 예를 들어, 전자 장치(101)는 "주문(order)"과 같은 지정된 텍스트를 포함하고, 버튼의 형태를 가지는 시각적 객체(430)를 통해, 상기 UI에 대응하는 상품의 거래(예, 구입)하기 위한 기능을 실행할 수 있다. 예를 들어, 전자 장치(101)는 "카트"와 같은 지정된 텍스트를 포함하고, 버튼의 형태를 가지는 시각적 객체(440)를 통해, 상기 UI에 대응하는 상품을, 복수의 상품들의 일괄적인 거래를 위해 형성된 리스트(예, 카트) 내에 추가하기 위한 기능을 실행할 수 있다.

일 실시예에 따른, 전자 장치(101)가 제2 영역(142)의 면적 및/또는 종횡 비에 기반하여 UI를 표시하는 것은, 상기 UI 내에 포함된 하나 이상의 시각적 객체들(예, 시각적 객체들(410, 420, 430, 440))의 레이아웃을 변경하는 동작을 포함할 수 있다. 상기 레이아웃은, 상기 하나 이상의 시각적 객체들의 위치, 형태, 사이즈 및/또는 배열을 포함할 수 있다. 도 4b를 참고하면, 일 실시예에 따른, 전자 장치(101)가 제1 외부 객체(131), 및/또는 제3 외부 객체(133)에 의해 가려지지 않은 평면(120) 내 부분 내에서, 미디어 콘텐트 및 UI가 표시될 제1 영역(141) 및 제2 영역(142) 각각을 선택한 예시적인 상태(402)가 도시된다.

도 4b의 상태(402) 내에서, 일 실시예에 따른, 전자 장치(101)는 상기 미디어 콘텐트에 의해 지시되는 종횡 비를 가지는 후보 영역들에 기반하여, 최대화된 면적을 가지는 제1 영역(141)을 선택할 수 있다. 제1 영역(141)의 선택에 기반하여, 전자 장치(101)는 제1 영역(141)과 구분되는 평면(120) 내 다른 부분 내에서, 상기 미디어 콘텐트와 관련된 UI가 표시될 제2 영역(142)을 선택할 수 있다. 상기 다른 부분은, 제1 외부 객체(131) 및 제3 외부 객체(133)에 의해 가려지지 않은 평면(120) 내 일부분을 의미할 수 있다. 도 4b를 참고하면, 일 실시예에 따른, 전자 장치(101)가 종횡 비를 이용하여 상기 제2 영역(142) 내에 표시한 UI가 예시적으로 도시된다. 상기 UI는, 도 4a의 시각적 객체들(410, 420, 430, 440))을 포함할 수 있다.

도 4a 내지 도 4b의 상태들(401, 402)을 참고하면, 시각적 객체들(410, 420, 430, 440)이 포함된 UI의 레이아웃이 다를 수 있다. 일 실시예에 따른, 전자 장치(101)는, 제2 영역(142)의 형태 및/또는 레이아웃에 기반하여, 제2 영역(142) 내 UI를 변경할 수 있다. 예를 들어, 제2 영역(142) 내 UI는, 제2 영역(142)의 너비, 높이 및/또는 너비 및 높이의 비율(예, 종횡 비) 중 적어도 하나에 종속되는 레이아웃을 가질 수 있다. 도 4a를 참고하면, 제2 영역(142)의 너비가 제2 영역(142)의 높이 보다 긴 상태(401) 내에서, 전자 장치(101)는 제2 영역(142) 내에, 상기 제2 영역(142)의 높이의 방향에 수직인 방향을 따라, 시각적 객체들(420, 430, 440)을 연속적으로 표시할 수 있다. 도 4b를 참고하면, 제2 영역(142)의 높이가 제2 영역(142)의 너비 보다 긴 상태(402) 내에서, 전자 장치(101)는 제2 영역(142) 내에, 상기 제2 영역(142)의 높이의 방향에 평행하는 방향을 따라, 시각적 객체들(420, 430, 440)을 연속적으로 표시할 수 있다. 예를 들어, 제2 영역(142)의 높이의 방향을 따라, 시각적 객체(420) 및 시각적 객체들(430, 440)을 순차적으로(sequentially) 표시할 수 있다.

일 실시예에서, 전자 장치(101)가 평면(120) 상의 상이한 영역들에 미디어 콘텐트 및 UI를 표시하는 것은, 제1 영역(141) 내지 제2 영역(142)을 구분한 도 1 내지 도 3, 도 4a 내지 도 4b의 일 실시예에 제한되지 않는다. 예를 들어, 전자 장치(101)는 평면(120) 내에서, 제1 영역(141)과 구분되는 제2 영역(142)을 식별하지 못한 경우, 전자 장치(101)는 제1 영역(141)을 통해 표시되는 미디어 콘텐트 상에, 상기 제2 영역(142)을 중첩으로 표시할 수 있다.

상술한 바와 같이, 일 실시예에 따른, 전자 장치(101)는, 가구와 같은 외부 객체(예, 제1 외부 객체(131) 내지 제3 외부 객체(133))에 의해 가려지지 않는 평면(120)의 제2 영역(142) 내에서, 상기 제2 영역(142)의 형태에 기반하여 배열된 복수의 시각적 객체들(410, 420, 430, 440)이 포함된 UI를 표시할 수 있다. 예를 들어, 상기 UI 및/또는 상기 UI 내 복수의 시각적 객체들(410, 420, 430, 440)은, 제1 영역(141)을 통해 표시되는 미디어 콘텐트에 의해 결정될 수 있다. 예를 들어, 제2 영역(142) 내에서 상기 복수의 시각적 객체들(410, 420, 430, 440)의 위치 및/또는 사이즈는, 상기 제2 영역(142)의 형태에 의해 결정될 수 있다.

비록, 전자 장치(101)가 홈 쇼핑을 위한 미디어 콘텐트를 표시하는 상태 내에서, 상기 홈 쇼핑과 관련된 정보가 포함된 UI를 표시하는 상태들(401, 402)이 예시적으로 도시되었지만 실시예가 이에 제한되는 것은 아니다. 전자 장치(101)는 상기 홈 쇼핑과 상이한 다른 타입의 미디어 콘텐트를 표시하는 동안, 상기 미디어 콘텐트의 상기 다른 타입에 기반하는 UI를 표시할 수 있다. 예를 들어, 전자 장치(101)는 영화로 분류되는 미디어 콘텐트를 표시하는 동안, 상기 영화와 관련된 정보(예, 영화의 제목, 배우, 상영 시간, 예매 정보 및/또는 스크립트)를 표시할 수 있다. 예를 들어, 전자 장치(101)는 뉴스로 분류되는 미디어 콘텐트를 표시하는 동안, 상기 뉴스와 관련된 정보(예, 뉴스 타이틀)를 표시할 수 있다. 예를 들어, 전자 장치(101)는 스포츠 경기로 분류되는 미디어 콘텐트를 표시하는 동안, 도 5a 내지 도 5b를 참고하여 후술되는 정보를 표시할 수 있다.

일 실시예에 따른, 전자 장치(101)는 미디어 콘텐트에 포함된 텍스트를 추출하여, 제2 영역(142)을 통해 표시될 UI를 획득할 수 있다. 이하에서는, 도 5a 내지 도 5b를 참고하여, 일 실시예에 따른, 전자 장치(101)가 상기 텍스트에 기반하는 상기 UI를 표시하는 동작의 일 예가 설명된다.

도 5a 내지 도 5b는, 일 실시예에 따른, 전자 장치(101)가 제1 영역(141)을 이용하여 미디어 콘텐트를 표시하는 동안, 제1 영역(141) 보다 작은 제2 영역(142)의 사이즈에 기반하여, UI를 표시하는 동작의 일 예를 도시한다. 도 2의 전자 장치(101)는 도 5a 내지 도 5b의 전자 장치(101)를 포함할 수 있다. 도 5a 내지 도 5b를 참고하여 설명되는 전자 장치(101)의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다.

도 5a 내지 도 5b를 참고하면, 일 실시예에 따른, 전자 장치(101)가 제1 영역(141) 및 제2 영역(142)을 동시에 제어하여, 미디어 콘텐트 및 UI를 표시하는 예시적인 상태들(501, 502)이 도시된다. 상태(501) 내에서, 전자 장치(101)는, 제1 외부 객체(131) 및 제2 외부 객체(132)에 의해 가려지는 평면(120) 내 부분과 구분되는 다른 부분(예, 제1 외부 객체(131) 및 제2 외부 객체(132)에 의해 가려지지 않은 평면(120) 내 부분)을 식별할 수 있다. 상기 다른 부분 내에서, 전자 장치(101)는 지정된 종횡 비를 가지는 제1 영역(141) 및 제1 영역(141)과 구분되는 제2 영역(142)을 선택할 수 있다. 제1 영역(141)은 상기 다른 부분 내에서 분할되고, 상기 지정된 종횡 비를 가지는 복수의 후보 영역들 중에서, 최대 면적을 가지는 후보 영역에 대응할 수 있다. 제2 영역(142)은, 제1 영역(141)이 제외된 상기 다른 부분 내에서, 최대 면적을 가지는 사각형의 영역에 대응하거나, 또는 제1 영역(141)이 제외된 상기 다른 부분 내에서 형성될 수 있는 사각형들 중에서, 너비 및 높이의 차이가 최소인 사각형에 매칭될 수 있다.

일 실시예에 따른, 전자 장치(101)는 제1 영역(141)을 통해 표시되는 미디어 콘텐트(예, 생방송 비디오 및/또는 OTT(over-the-top) 비디오)에 대한 장면 인식을 수행할 수 있다. 전자 장치(101)는 상기 장면 인식에 기반하여, 제2 영역(142)을 통해 표시될 UI를 획득할 수 있다. 예를 들어, 전자 장치(101)는 상기 미디어 콘텐트의 비디오에 포함된 프레임들 중 어느 하나에 기반하여, 상기 UI를 획득할 수 있다. 예를 들어, 전자 장치(101)가 스포츠 경기와 관련된 미디어 콘텐트를, 제1 영역(141)으로 투사하는 상태(501) 내에서, 전자 장치(101)는 상기 미디어 콘텐트 내 프레임들 중에서, 상기 스포츠 경기와 관련된 하나 이상의 선수들에 대한 정보가 포함된 프레임을 식별할 수 있다. 전자 장치(101)는 상태(501) 내에서, 상기 식별된 프레임을, 제2 영역(142)을 통해 표시할 수 있다. 상기 제2 영역(142)은, 상기 프레임의 종횡 비(예, 제1 영역(141)의 지정된 종횡 비)를 가질 수 있다. 실시예가 이에 제한되는 것은 아니며, 예를 들어, 전자 장치(101)는, 자막이 포함된 미디어 콘텐트를, 제1 영역(141)으로 투사하는 동안, 장면 인식에 기반하여 식별된 상기 자막을 포함하는 UI를, 상기 제2 영역(142)을 통해 표시할 수 있다.

일 실시예에 따른, 전자 장치(101)는, 제2 영역(142)의 종횡 비 및/또는 사이즈에 기반하여, 미디어 콘텐트로부터 추출된 정보가 표시될 UI의 레이아웃을 결정할 수 있다. 도 5b를 참고하면, 제2 영역(142)의 너비가 제2 영역(142)의 높이 보다 긴 도 5a의 상태(501)와 구분되는 상태(502)가 도시된다. 상태(502) 내에서, 제2 영역(142)의 높이가 제2 영역(142)의 너비 보다 긴 것으로 가정한다. 제2 영역(142)의 높이가 제2 영역(142)의 너비 보다 길기 때문에, 제2 영역(142)의 종횡 비는, 제1 영역(141)의 종횡 비와 다를 수 있다. 전자 장치(101)가 미디어 콘텐트의 비디오 내 일 프레임에 기반하여 제2 영역(142)을 통해 표시될 UI를 식별한 경우, 제1 영역(141) 및 제2 영역(142)의 종횡 비가 다르기 때문에, 상기 프레임을 제2 영역(142) 내에 표시하는 것은, 상기 프레임의 왜곡을 야기할 수 있다. 일 실시예에 따른, 전자 장치(101)는 제1 영역(141) 및 제2 영역(142)의 종횡 비들이 다르거나, 또는 상기 종횡 비들 사이의 차이가 지정된 차이를 초과하는 경우, 제2 영역(142) 내에, 상기 UI의 획득에 이용된 프레임으로부터 추출된 텍스트를 표시할 수 있다.

도 5b를 참고하면, 상태(502) 내에서, 일 실시예에 따른, 전자 장치(101)는 OCR(optical character recognition)에 기반하여 미디어 콘텐트로부터 추출된 텍스트를, 제2 영역(142) 내에 표시할 수 있다. 전자 장치(101)는, 상기 텍스트의 일부분을 상기 제2 영역(142) 내에 표시하는 동안, 상기 제2 영역(142) 내에 표시된 상기 텍스트의 일부분과 구분되는 다른 부분의 표시를 위한 시각적 객체(510)를, 제2 영역(142) 내에 표시할 수 있다. 예를 들어, 전자 장치(101)는 "다음 페이지"와 같이, 상기 다른 부분의 표시를 가이드하는 지정된 텍스트가 포함된 버튼의 형태를 가진 시각적 객체(510)를 표시할 수 있다. 시각적 객체(510)의 선택을 지시하는 입력에 응답하여, 전자 장치(101)는 제2 영역(142) 내에 상기 텍스트의 상기 다른 부분을 표시할 수 있다.

상술한 바와 같이, 일 실시예에 따른, 전자 장치(101)는 제1 영역(141)을 통해 표시되는 미디어 콘텐트 내 프레임들에 기반하여, 제2 영역(142)을 통해 표시될 UI 및/또는 상기 UI 내에 포함될 정보를 획득할 수 있다. 예를 들어, 상기 미디어 콘텐트 내에서, 전자 장치(101)에 저장된 복수의 지정된 UI들 중 적어도 하나의 선택을 지시하는 파라미터를 식별하지 못한 경우, 전자 장치(101)는 상기 미디어 콘텐트에 대한 장면 인식을 수행하여, 상기 제2 영역(142)을 통해 표시될 UI를 획득할 수 있다. 예를 들어, 전자 장치(101)는 미디어 콘텐트 내 프레임들 중 적어도 하나에 대한 OCR에 기반하여, 상기 제2 영역(142)을 통해 표시될 텍스트를 획득할 수 있다. 전자 장치(101)는 상기 제2 영역(142)의 종횡 비에 기반하여 상기 제2 영역(142)으로, 미디어 콘텐트 내 프레임들 중에서, 상기 텍스트의 획득에 이용된 일 프레임, 또는 상기 텍스트 중 어느 하나를 선택적으로 투사할 수 있다.

일 실시예에 따른, 전자 장치(101)는 평면(120)을 포함하는 복수의 평면들을 인식하여, 미디어 콘텐트가 표시될 제1 영역(141) 및 상기 미디어 콘텐트와 관련된 UI가 표시될 제2 영역(142)을 식별할 수 있다. 예를 들어, 상기 제1 영역(141) 및 상기 제2 영역(142)은, 상기 복수의 평면들 각각에서 선택될 수 있다. 이하에서는, 도 6을 참고하여, 전자 장치(101)가 복수의 평면들을 이용하여 상기 제1 영역(141) 및/또는 상기 제2 영역(142)을 식별하는 동작의 일 예가 설명된다.

도 6은, 일 실시예에 따른, 전자 장치(101)가 복수의 평면들(예, 제1 평면(611) 내지 제3 평면(613)) 각각에서, 미디어 콘텐트 및 UI 각각이 표시될 복수의 영역들(642, 652, 662)을 분할하는 동작의 일 예를 도시한다. 도 2의 전자 장치(101)는 도 6의 전자 장치(101)를 포함할 수 있다. 도 6을 참고하여 설명되는 전자 장치(101)의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다.

도 6을 참고하면, 일 실시예에 따른, 전자 장치(101)는 카메라(예, 도 2의 카메라(250-1))를 이용하여, 복수의 평면들(예, 제1 평면(611) 내지 제3 평면(613))이 포함된 외부 공간을 인식할 수 있다. 전자 장치(101)는, 모든 방향(예, 360 º)을 향하여 광을 방출할 수 있는 빔 프로젝터일 수 있다. 일 실시예에 따른, 전자 장치(101)는 상기 카메라를 이용하여, 프로젝션 어셈블리(예, 도 2의 프로젝션 어셈블리(240))를 통해 출력된 광이 도달할 수 있는 외부 공간에 대한 정보를 획득할 수 있다.

일 실시예에 따른, 전자 장치(101)는, 모든 방향에 대한 정보가 포함된 적어도 하나의 이미지를 획득할 수 있다. 도 6을 참고하면, 전자 장치(101)가 카메라를 제어하여 획득한, 제1 평면(611) 내지 제3 평면(613) 각각을 포함하는 이미지들(예, 제1 이미지(640) 내지 제3 이미지(660))이 예시적으로 도시된다. 전자 장치(101) 및 복수의 평면들 사이에, 복수의 외부 객체들(예, 제1 외부 객체(621) 내지 제3 외부 객체(623))가 배치된 도 6의 예시적인 상태 내에서, 전자 장치(101)는 이미지들(640, 650, 660)에 기반하여, 제1 평면(611) 내지 제3 평면(613) 내에서, 화면이 투사될 복수의 영역들을 획득할 수 있다.

도 6을 참고하면, 제1 평면(611)에 대한 제1 이미지(640)로부터, 전자 장치(101)는 제1 외부 객체(621)에 의해 가려진 제1 평면(611) 내 부분(641)을 식별할 수 있다. 전자 장치(101)는 제1 평면(611) 내에서, 부분(641)과 구분되는 영역(642)을 식별할 수 있다. 제2 평면(612)에 대한 제2 이미지(650)로부터, 전자 장치(101)는 제2 외부 객체(622)에 의해 가려진 제2 평면(612) 내 부분(651)을 식별할 수 있다. 전자 장치(101)는 제2 평면(612) 내에서, 부분(651)과 중첩되지 않는 영역(652)을 식별할 수 있다. 제3 평면(613)에 대한 제3 이미지(660)로부터, 전자 장치(101)는 제3 외부 객체(623)에 의해 가려진 제3 평면(613) 내 부분(661)을 식별할 수 있다. 전자 장치(101)는 제3 평면(613) 내에서 부분(661)과 상이한 영역(662)을 식별할 수 있다.

일 실시예에 따른, 전자 장치(101)는, 복수의 평면들(611, 612, 613)에서, 제1 외부 객체(621) 내지 제3 외부 객체(623)에 의해 가려지지 않은 영역들(642, 652, 662) 중에서, 미디어 콘텐트가 투사될 제1 영역 및 상기 미디어 콘텐트와 관련된 UI가 표시될 제2 영역을 선택할 수 있다. 전자 장치(101)는, 복수의 평면들(611, 612, 613)에 인접한 사용자(670)를 식별하는 것에 기반하여, 복수의 평면들(611, 612, 613) 중에서, 사용자(670)에 인접한 적어도 하나의 평면에 기반하여, 상기 제1 영역 및 상기 제2 영역을 식별할 수 있다. 도 6을 참고하면, 제1 평면(611) 및 제2 평면(612)에 인접한 사용자(670)를 식별한 예시적인 상태 내에서, 전자 장치(101)는, 제1 평면(611)으로부터 식별된 영역(642) 및 제2 평면(612)으로부터 식별된 영역(652) 중에서, 상기 제1 영역 및 상기 제2 영역을 선택할 수 있다. 예를 들어, 영역들(642, 652) 중에서 큰 영역이 상기 제1 영역으로, 영역들(642, 652) 중에서 작은 영역이 상기 제2 영역으로 선택될 수 있다. 사용자(670)의 이동을 식별하는 경우, 전자 장치(101)는, 이동된 사용자(670)의 위치에 기반하여, 영역들(642, 652, 662) 중에서 상기 제1 영역 및 상기 제2 영역을 다시 선택할 수 있다.

상술한 바와 같이, 일 실시예에 따른, 전자 장치(101)는 복수의 평면들을 향하여 광을 투사하는 경우, 상기 복수의 평면들 각각의 투사 가능 부분, 및 상기 복수의 평면들에 대한 사용자(670)의 위치에 기반하여, 미디어 콘텐트가 투사될 제1 영역 및 상기 미디어 콘텐트와 관련된 UI가 투사될 제2 영역을 선택할 수 있다. 복수의 영역들로 광을 투사하기 때문에, 전자 장치(101)는 상기 복수의 평면들의 사용량을 증가시킬 수 있다. 증가된 사용량에 기반하여, 전자 장치(101)는 사용자 경험을 개선할 수 있다.

이하에서는, 도 7 내지 도 9를 참고하여, 일 실시예에 따른, 전자 장치(101)의 동작이 설명된다.

도 7은, 일 실시예에 따른, 전자 장치에 대한 흐름도의 일 예를 도시한다. 도 2의 전자 장치(101)는, 도 7의 전자 장치를 포함할 수 있다. 예를 들어, 도 7을 참고하여 설명되는 전자 장치의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다.

도 7을 참고하면, 동작(710) 내에서, 일 실시예에 따른, 전자 장치는, 전자 장치로부터 방사된 광이 투사될 평면에 대한 정보를 획득할 수 있다. 상기 정보는, 상기 전자 장치의 카메라(예, 도 2의 카메라(250-1))를 통해 획득된 이미지를 포함할 수 있다. 상기 정보는, 상기 전자 장치의 센서(예, 도 2의 센서(260))를 이용하여 획득된 정보를 포함할 수 있다. 상기 센서를 이용하여 획득된 정보는, 예를 들어, 깊이 센서를 이용하여 획득된 깊이 이미지를 포함할 수 있다. 상기 정보는, 통신 회로(예, 도 2의 통신 회로(230-1))를 통해 외부 전자 장치(예, 도 1 내지 도 2의 외부 전자 장치(110))로부터 획득될 수 있다. 예를 들어, 상기 정보를 획득하기 위하여 전자 장치는 상기 외부 전자 장치로, 상기 정보의 요청을 지시하는 제1 신호를 송신할 수 있다. 전자 장치는 상기 외부 전자 장치로부터, 상기 제1 신호에 대한 응답으로 송신된, 제2 신호에 기반하여, 상기 정보를 식별할 수 있다.

도 7을 참고하면, 동작(720) 내에서, 일 실시예에 따른, 전자 장치는, 동작(710)의 정보에 기반하여, 적어도 하나의 외부 객체에 의해 가려진 평면 내 제1 부분을 식별할 수 있다. 전자 장치는 동작(710)의 정보에 기반하여, 전자 장치 및 평면 사이에 배치된 적어도 하나의 외부 객체를 식별할 수 있다. 전자 장치는, 상기 적어도 하나의 외부 객체에 의해 가려진 평면 내 제1 부분을 식별할 수 있다. 상기 제1 부분은, 상기 전자 장치로부터 방사된 광(예, 도 2의 프로젝션 어셈블리(240)로부터 방사된 광)이 도달할 수 없는 부분일 수 있다.

도 7을 참고하면, 동작(730) 내에서, 일 실시예에 따른, 전자 장치는, 제1 부분과 구분되는 평면 내 제2 부분 내에서, 제1 영역 및 제1 영역 보다 작은 제2 영역을 선택할 수 있다. 전자 장치는, 지정된 종횡 비(예, 16:9)를 가지는 사각형의 형태를 가지는 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 상기 제1 영역으로 결정할 수 있다. 전자 장치는, 상기 제1 영역이 제외된 상기 제2 부분 내에서, 제1 영역을 통해 표시될 미디어 콘텐트에 의해 지시되는 조건에 기반하여, 상기 제2 영역을 선택할 수 있다. 예를 들어, 전자 장치는 상기 조건에 기반하여, 제1 영역이 제외된 제2 부분 내에서 형성된, 사각형의 형태를 가지는 후보 영역들 중에서, 너비 및 높이의 차이가 최소인 후보 영역을, 제2 영역으로 결정할 수 있다. 예를 들어, 전자 장치는 상기 조건에 기반하여, 제1 영역이 제외된 제2 부분 내에서 형성된, 사각형의 형태를 가지는 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 제2 영역으로 결정할 수 있다.

도 7을 참고하면, 동작(740) 내에서, 일 실시예에 따른, 전자 장치는, 제1 영역을 통해 미디어 콘텐트를 표시하는 상태 내에서, 미디어 콘텐트와 관련되고, 제2 영역의 사이즈에 기반하는 UI를 획득할 수 있다. 전자 장치는, 복수의 지정된 UI들 중에서, 상기 미디어 콘텐트와 관련된 지정된 UI를 선택할 수 있다. 전자 장치는 지정된 UI의 레이아웃을, 동작(730)의 제2 영역의 너비, 높이 및/또는 종횡 비에 기반하여 조절하여, 동작(740)의 UI를 획득할 수 있다. 일 실시예에 따른, 전자 장치는, 미디어 콘텐트에 대한 장면 인식 및/또는 OCR에 기반하여, 상기 미디어 콘텐트로부터 정보를 추출할 수 있다. 전자 장치는 상기 추출된 정보를 표시하기 위한 UI를 획득할 수 있다. 전자 장치는 상기 정보가 포함되고, 제2 영역의 너비, 높이 및/또는 종횡 비에 기반하는 레이아웃을 가지는, UI를 획득할 수 있다.

도 7을 참고하면, 동작(750) 내에서, 일 실시예에 따른, 전자 장치는, 제2 영역을 통해 UI를 표시할 수 있다. 전자 장치는 동작(740)의 제1 영역을 통해 미디어 콘텐트를 표시하는 상태 내에서, 상기 제2 영역을 통해 상기 UI를 표시할 수 있다. 동작들(740, 750)에 기반하여, 전자 장치는 미디어 콘텐트 및 UI를 동시에 표시할 수 있다.

도 8은, 일 실시예에 따른, 전자 장치에 대한 흐름도의 일 예를 도시한다. 도 2의 전자 장치(101)는, 도 8의 전자 장치를 포함할 수 있다. 예를 들어, 도 8을 참고하여 설명되는 전자 장치의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다.

도 8을 참고하면, 동작(810) 내에서, 일 실시예에 따른, 전자 장치는, 전자 장치로부터 방사된 광이 투영될 복수의 평면들에 대한 정보를 획득할 수 있다. 예를 들어, 전자 장치는 카메라(예, 도 2의 카메라(250-1)) 및/또는 센서(예, 도 2의 센서(260))를 이용하여, 전자 장치는 상기 복수의 평면들에 대한 정보를 획득할 수 있다. 상기 정보는, 상기 복수의 평면들이 캡쳐된 하나 이상의 이미지들(예, 도 6의 이미지들(640, 650, 660))을 포함할 수 있다. 일 실시예에 따른, 전자 장치는 프로젝션 어셈블리(예, 도 2의 프로젝션 어셈블리(240))로부터 방출된 광이 도달할 수 있는 외부 공간 내에 포함된 상기 복수의 평면들(예, 도 6의 제1 평면(611) 내지 제3 평면(613))에 대한 정보를 획득할 수 있다.

도 8을 참고하면, 동작(820) 내에서, 일 실시예에 따른, 전자 장치는, 복수의 평면들 각각에서, 외부 객체에 의해 가려지는 부분과 구분되는 다른 부분 내에 포함된 후보 영역을 식별할 수 있다. 예를 들어, 전자 장치는 동작(810)의 정보에 기반하여, 상기 복수의 평면들 및 전자 장치 사이에 배치된 적어도 하나의 외부 객체를 식별할 수 있다. 전자 장치는 복수의 평면들이 캡쳐된 하나 이상의 이미지들에 기반하여, 적어도 하나의 외부 객체에 의해 가려지는 상기 부분을 식별할 수 있다. 예를 들어, 복수의 평면들 각각에서, 상기 부분과 구분되는 상기 다른 부분은, 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 도달할 수 있는 부분에 대응할 수 있다.

도 8을 참고하면, 동작(830) 내에서, 일 실시예에 따른, 전자 장치는, 복수의 평면들 각각에서 선택된 후보 영역들 중에서, 제1 영역 및 제1 영역 보다 작은 제2 영역을 선택할 수 있다. 전자 장치는 동작(810)의 정보에 기반하여, 복수의 평면들 중 적어도 하나를 열람하는 사용자(예, 도 6의 사용자(670))를 식별할 수 있다. 상기 사용자의 방향에 기반하여, 전자 장치는 상기 후보 영역들 중에서, 상기 제1 영역 및 상기 제2 영역을 선택할 수 있다. 상기 사용자의 방향은, 얼굴 인식 및/또는 동공 인식에 기반하여, 머리를 포함하는 상기 사용자의 지정된 신체 부위의 위치 및/또는 방향의 인식에 기반하여, 식별될 수 있다. 상기 제1 영역은, 상기 복수의 평면들 중에서 상기 방향과 중첩된 일 평면 내에서 식별된 후보 영역들 중에서, 지정된 종횡 비를 가진 최대 면적의 후보 영역으로 결정될 수 있다. 상기 제2 영역은, 상기 복수의 평면들 중에서 상기 방향과 중첩된 일 평면 내에서, 상기 제1 영역 보다 작은 후보 영역으로 결정될 수 있다.

도 8을 참고하면, 동작(840) 내에서, 일 실시예에 따른, 전자 장치는, 미디어 콘텐트를 제1 영역을 통해 표시하고, 미디어 콘텐트와 관련되고, 제2 영역의 사이즈에 기반하는 레이아웃을 가지는 UI를, 제2 영역을 통해 표시할 수 있다. 전자 장치는, 제1 영역 내에 미디어 콘텐트를 투사하는 것과 실질적으로 동시에, 제2 영역을 통해 UI를 투사할 수 있다. 전자 장치는, 동작(830)에 기반하여 선택된 제2 영역 내에서, 상기 제2 영역의 너비 및 높이의 비율에 의해 조절된 레이아웃을 가지는 UI를 표시할 수 있다. 예를 들어, 상기 UI 내에서, 복수의 시각적 객체들이 상기 제2 영역의 종횡 비에 기반하여 배열될 수 있다. 예를 들어, 상기 UI 내에서, 상기 복수의 시각적 객체들이, 상기 제2 영역의 사이즈에 비례하는 사이즈들을 가질 수 있다.

도 9는, 일 실시예에 따른, 전자 장치(101) 및 외부 전자 장치(110)의 신호 흐름도의 일 예를 도시한다. 도 2의 전자 장치(101) 및 외부 전자 장치(110)는, 도 9의 전자 장치(101) 및 외부 전자 장치(110)를 포함할 수 있다. 예를 들어, 도 9를 참고하여 설명되는 전자 장치(101)의 동작은, 도 2의 전자 장치(101) 및/또는 프로세서(210-1)에 의해 수행될 수 있다. 예를 들어, 도 9를 참고하여 설명되는 외부 전자 장치(110)의 동작은, 도 2의 외부 전자 장치(110) 및/또는 프로세서(210-2)에 의해 수행될 수 있다.

도 9를 참고하면, 동작(910) 내에서, 일 실시예에 따른, 전자 장치(101)는, 카메라가 포함된 외부 전자 장치로, 외부 공간에 대한 정보를 요청하기 위한 제1 신호(912)를 송신할 수 있다. 상기 제1 신호(912)는, 외부 전자 장치(110) 내에 설치된 어플리케이션(예, 도 2의 어플리케이션(270))의 실행을 지시하는 정보를 포함할 수 있다. 상기 제1 신호(912)는, 상기 어플리케이션의 실행에 기반하여 외부 공간의 적어도 일부분에 대한 이미지의 송신을 지시하는 정보를 포함할 수 있다.

도 9를 참고하면, 동작(920) 내에서, 일 실시예에 따른, 외부 전자 장치(110)는, 지정된 어플리케이션(예, 도 2의 어플리케이션(270))을 실행하여, 외부 공간의 적어도 일부분에 대한 이미지를 획득할 수 있다. 외부 전자 장치(110)는, 전자 장치(101)로부터 방사되는 광이 도달할 수 있는 외부 공간을 캡쳐하는 것을 가이드하기 위한 시각적 객체(예, 도 3의 시각적 객체(305))를 표시할 수 있다.

도 9를 참고하면, 동작(930) 내에서, 일 실시예에 따른, 외부 전자 장치(110)는, 획득된 이미지와 관련된, 외부 공간에 대한 정보가 포함된 제2 신호(932)를 송신할 수 있다. 제2 신호(932)는, 동작(920)의 이미지를 포함할 수 있다. 외부 전자 장치(110)가 복수의 이미지들을 획득한 경우, 제2 신호(932)는 상기 복수의 이미지들을 포함할 수 있다. 외부 전자 장치(110)는, 제1 신호(912)에 대한 응답으로, 전자 장치(101)로 제2 신호(932)를 송신할 수 있다. 실시예가 이에 제한되지 않으며, 예를 들어, 외부 전자 장치(110)는 동작(920)의 이미지로부터, 미디어 콘텐트 및 UI(예, 상기 미디어 콘텐트와 관련된 UI) 각각을 표시하기 위한 상이한 영역들(예, 도 1의 제1 영역(141) 내지 제2 영역(142))을 선택할 수 있다. 상기 예시 내에서, 외부 전자 장치(110)는 상기 영역들을 선택한 결과를, 제2 신호(932)를 이용하여 전자 장치(101)로 송신할 수 있다.

도 9를 참고하면, 동작(940) 내에서, 일 실시예에 따른, 전자 장치(101)는, 전자 장치로부터 방사된 광이 투사될 적어도 하나의 평면을 식별할 수 있다. 전자 장치(101)는, 외부 전자 장치(110)로부터 송신된 제2 신호(932)에 기반하여, 도 1의 평면(120)과 같이, 전자 장치(101)로부터 출력된 광을 반사할 수 있는 적어도 하나의 평면을 식별할 수 있다. 전자 장치(101)는 도 7의 동작(710)과 유사하게, 도 9의 동작들(910, 940) 중 적어도 하나를 수행할 수 있다.

도 9를 참고하면, 동작(950) 내에서, 일 실시예에 따른, 전자 장치(101)는, 평면 내에서, 적어도 하나의 외부 객체에 의해 가려진 일부분에 기반하여, 광이 투사될 복수의 영역들을 선택할 수 있다. 일 실시예에서, 전자 장치(101)는 도 7의 동작들(720, 730) 중 적어도 하나와 유사하게, 도 9의 동작(950)을 수행할 수 있다.

도 9를 참고하면, 동작(960) 내에서, 일 실시예에 따른, 전자 장치(101)는, 선택된 복수의 영역들에 기반하여, 미디어 콘텐트 및 미디어 콘텐트와 관련된 UI를 표현하는 광을 출력할 수 있다. 전자 장치(101)는 도 7의 동작(740)에 기반하여, 상기 복수의 영역들 중에서 제1 영역(예, 도 1의 제1 영역(141))을 통해 표시되는 미디어 콘텐트와 관련된 정보를 포함하는 상기 UI를 획득할 수 있다. 전자 장치(101)는 상기 제1 영역으로 상기 미디어 콘텐트를 표시하는 상태 내에서, 상기 제1 영역 보다 작은 제2 영역으로, 상기 UI를 표시할 수 있다.

일 실시예에 따른, 전자 장치는, 전자 장치로부터 방사된 광을 반사하기 위한 평면을 가리는 적어도 하나의 외부 객체를 식별할 수 있다. 전자 장치는 적어도 하나의 외부 객체에 의해 가려진 평면 내 제1 부분과 상이한 제2 부분으로, 광을 방사할 수 있다. 상기 제2 부분의 형태는, 상기 광에 포함된 사각형의 형태를 가지는 미디어 콘텐트와 다를 수 있다. 전자 장치는, 상기 제2 부분을 통해 표시되는 정보의 양을 증가시키기 위하여, 상기 제2 부분 내에서, 상기 미디어 콘텐트가 표시되는 제1 영역과 구분되는 적어도 하나의 제2 영역을 선택할 수 있다. 상기 적어도 하나의 제2 영역 내에서, 전자 장치는 상기 미디어 콘텐트와 관련된 UI를 표시할 수 있다.

도 1 내지 도 9를 참고하여 설명된, 일 실시예에 따른, 전자 장치는, 메타버스 서비스와 관련될 수 있다. 이하에서는, 도 10을 참고하여, 일 실시예에 따른, 웨어러블 장치에 기반하여 사용자에게 제공되는 메타버스 서비스의 일 예가 설명된다.

메타버스(Metaverse)는 '가상', '초월'을 뜻하는 영어 단어 '메타'(Meta)와 우주를 뜻하는 '유니버스'(Universe)의 합성어로, 현실세계와 같은 사회·경제·문화 활동이 이뤄지는 3차원의 가상세계를 가리킨다. 메타버스는 가상현실(VR, 컴퓨터로 만들어 놓은 가상의 세계에서 사람이 실제와 같은 체험을 할 수 있도록 하는 최첨단 기술)보다 한 단계 더 진화한 개념으로, 아바타를 활용해 단지 게임이나 가상현실을 즐기는 데 그치지 않고 실제 현실과 같은 사회·문화적 활동을 할 수 있다는 특징이 있다. 메타버스 서비스는, 증강 현실(augmented reality, AR), 가상 현실(virtual reality environment, VR), 혼합 현실(mixed environment, MR) 및/또는 확장 현실(extended reality, XR)에 기반하여, 상기 가상 세계에 대한 몰입을 강화하기 위한 미디어 콘텐트를 제공할 수 있다.

예를 들어, 메타버스 서비스에 의해 제공되는 미디어 콘텐트는, 아바타에 기반하는 게임, 콘서트, 파티 및/또는 회의를 포함하는 소셜 인터랙션(social interaction) 콘텐트를 포함할 수 있다. 예를 들어, 상기 미디어 콘텐트는, 광고, 사용자 제작 콘텐트(user created content) 및/또는 제작물의 판매 및/또는 쇼핑과 같은 경제 활동을 위한 정보를 포함할 수 있다. 상기 사용자 제작 콘텐트의 소유권은 블록체인 기반의 NFT(non-fungible token)에 의하여 증명될 수도 있다. 메타버스 서비스는, 실물 화폐 및/또는 암호 화폐에 기반하는 경제 활동을 지원할 수 있다. 메타버스 서비스에 의하여, 디지털 트윈(digital twin) 또는 라이프 로깅(life logging)과 같이, 현실 세계와 연계된 가상 콘텐트가 제공될 수 있다.

도 10은, 서버(1010)를 통해 메타버스 서비스를 제공받는 네트워크 환경(1001)에 대한 예시도이다.

도 10을 보면, 네트워크 환경(1001)은, 서버(1010), 사용자 단말(1020)(예, 제1 단말(1020-1) 및 제2 단말(1020-2)), 및 서버(1010) 와 사용자 단말(1020)을 연결하는 네트워크를 포함할 수 있다. 네트워크 환경(1001) 내에서, 서버(1010)는 사용자 단말(1020)로 메타버스 서비스를 제공할 수 있다. 네트워크는, AP(access point), 및/또는 기지국을 포함하는 적어도 하나의 중간 노드(1030)에 의해 형성될 수 있다. 사용자 단말(1020)은, 네트워크를 통해 서버(1020)로 접속하여, 사용자 단말(1020)의 사용자에게 메타버스 서비스와 관련된 UI(user interface)를 출력할 수 있다. 상기 UI에 기반하여, 사용자 단말(1020)은 사용자로부터 메타버스 서비스로 입력될 정보를 획득하거나, 또는 사용자에게 메타버스 서비스와 관련된 정보(예, 멀티미디어 콘텐트)를 출력할 수 있다.

이때, 서버(1010)는 가상 공간을 제공하여 사용자 단말(1020)이 가상 공간에서 활동을 할 수 있도록 한다. 또한, 사용자 단말(1020)은 서버(1010)가 제공하는 가상 공간에 접속하기 위한 S/W 에이전트를 설치하여 서버(1010)가 사용자에게 제공하는 정보를 표현하거나, 사용자가 가상 공간에서 표현하고자 하는 정보를 서버로 전송한다. 상기 S/W 에이전트는 서버(1010)를 통해서 직접 제공받거나, 공용 서버로부터 다운로드받거나, 단말 구매시에 임베딩되어 제공될 수 있다.

일 실시예에서, 메타버스 서비스는, 서버(1010)를 이용하여 사용자 단말(1020) 및/또는 사용자에게 서비스가 제공될 수 있다. 실시예가 이에 제한되는 것은 아니며, 메타버스 서비스는 사용자들 사이의 개별적인 접촉을 통해 제공될 수 있다. 예를 들어, 네트워크 환경(1001) 내에서, 메타버스 서비스는 서버(1010)와 독립적으로, 제1 단말(1020-1) 및 제2 단말(1020-2) 사이의 직접적인 연결에 의해 제공될 수 있다. 도 10을 참고하면, 네트워크 환경(1001) 내에서, 제1 단말(1020-1) 및 제2 단말(1020-2)은 적어도 하나의 중간 노드(1030)에 의해 형성된 네트워크를 통해 서로 연결될 수 있다. 제1 단말(1020-1) 및 제2 단말(1020-2)이 직접적으로 연결된 일 실시예에서, 제1 단말(1020-1) 및 제2 단말(1020-2) 중 어느 한 사용자 단말이, 서버(1010)의 역할을 수행할 수 있다. 예를 들어, 디바이스와 디바이스의 연결(예, P2P(peer-to-peer) 연결)만으로 메타버스 환경이 구성될 수 있다.

일 실시예에서, 사용자 단말(1020)(혹은 제 1 단말(1020-1), 제 2 단말(1020-2)을 포함하는 사용자 단말(1020))은 다양한 폼팩터로 만들어질 수 있으며, 사용자에게 영상 또는/및 소리를 제공하는 출력 장치와 메타버스 서비스에 정보를 입력하기 위한 입력 장치를 포함하는 것을 특징으로 한다. 사용자 단말(1020)의 다양한 폼팩터를 예시하면, 스마트폰(예, 제2 단말(1020-2)), AR 기기(예, 제1 단말(1020-1)), VR 기기, MR 기기, VST(Video See Through) 기기, OST(Optical See Through) 장치, 스마트 렌즈, 스마트 미러, 입출력 가능한 TV 또는 프로젝터를 포함할 수 있다.

네트워크(예, 적어도 하나의 중간 노드(1030)에 의해 형성된 네트워크)는 3G, 4G, 5G를 포함하는 다양한 광대역 네트워크와 Wifi, BT를 포함하는 근거리 네트워크(예, 제1 단말(1020-1), 및 제2 단말(1020-2)을 직접적으로 연결하는 유선 네트워크 또는 무선 네트워크)를 다 포함한다.

일 실시예에서, 도 10의 사용자 단말(1020)은, 도 1 내지 도 2의 전자 장치(101)를 포함할 수 있다.

일 실시예에서, 전자 장치로부터 방사된 광을 반사하는 하나 이상의 평면들을 통해 표시되는 정보의 양을 증가하는 방안이 요구될 수 있다. 상술한 바와 같은, 일 실시예에 따른, 전자 장치(electronic device)(예, 도 1 내지 도 9의 전자 장치(101))는, 통신 회로(예, 도 2의 통신 회로(230-1)), 프로젝션 어셈블리(projection assembly)(예, 도 2의 프로젝션 어셈블리(240)) 및 프로세서(예, 도 2의 프로세서(210-1))를 포함할 수 있다. 상기 프로세서는, 상기 프로젝션 어셈블리로부터 방사된 광이 투사될 평면(예, 도 1의 평면(120))에 대한 정보를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 정보에 기반하여, 상기 평면으로부터, 지정된 비율을 가지는 제1 영역(예, 도 1의 제1 영역(141)), 및 상기 제1 영역 보다 작은 제2 영역(예, 도 1의 제2 영역(142))을 식별하도록, 구성될 수 있다. 상기 프로세서는, 상기 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI(user interface)를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 정보로부터 상기 평면을 포함하는 이미지를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 이미지 내에서, 적어도 하나의 외부 객체에 의해 가려지는(occluded by) 상기 평면 내 적어도 일부분을 식별하는 것에 기반하여, 상기 적어도 일부분과 구분되는 상기 평면 내 다른 부분(예, 도 3의 부분(320))에 기반하여, 상기 제1 영역 및 상기 제2 영역을 식별하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 평면 내 상기 다른 부분 내에서, 상기 지정된 비율을 가지는 복수의 후보 영역들을 식별하도록, 구성될 수 있다. 상기 프로세서는, 상기 복수의 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 상기 제1 영역으로 선택하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 제1 영역이 분할된 상기 다른 부분 내에서, 상기 UI에 대응하는 조건에 기반하여 상기 제2 영역을 식별하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 너비 및 높이 사이의 편차에 의해 설정된 제1 지정된 조건, 또는 면적에 기반하여 설정된 제2 지정된 조건 중에서, 상기 UI에 대응하는 상기 조건을 선택하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 미디어 콘텐트의 비디오에 포함된 프레임들 중 어느 하나에 기반하여, 상기 UI를 획득하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 UI의 획득에 이용된 프레임으로부터 추출된 텍스트를, 상기 UI 내에 표시하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 통신 회로를 통해 연결된 외부 전자 장치(예, 도 1 내지 도 9의 외부 전자 장치(110))로, 상기 외부 전자 장치에 의해 실행되는 어플리케이션(예, 도 2의 어플리케이션(270))을 실행하여, 상기 평면이 포함된 이미지를 포함하는 상기 정보를 획득할 것을 지시하는 신호를 송신하도록, 구성될 수 있다.

상술한 바와 같은, 일 실시예에 따른, 전자 장치의 방법은, 상기 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 투사될 하나 이상의 평면들에 대한 정보를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 정보에 기반하여 상기 하나 이상의 평면들 내에서 선택된, 제1 영역 내에, 미디어 콘텐트를 표시하는 동작을 포함할 수 있다. 상기 방법은, 상기 미디어 콘텐트에 기반하여, 상기 하나 이상의 평면들 내에서, 상기 제1 영역과 구분되는 제2 영역을 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지고, 상기 미디어 콘텐트와 관련된, UI(user interface)를 표시하는 동작을 포함할 수 있다.

예를 들어, 상기 획득하는 동작은, 상기 전자 장치의 통신 회로를 통하여 외부 전자 장치로, 상기 외부 전자 장치의 지정된 어플리케이션을 실행하여, 상기 하나 이상의 평면들에 대한 정보를 획득할 것을 지시하는 제1 신호를 송신하는 동작을 포함할 수 있다. 상기 방법은, 상기 외부 전자 장치로부터, 상기 제1 신호에 대한 응답으로(as a response to) 송신된 제2 신호에 기반하여, 상기 하나 이상의 평면들에 대한 적어도 하나의 이미지가 포함된 상기 정보를 획득하는 동작을 포함할 수 있다.

예를 들어, 상기 미디어 콘텐트를 표시하는 동작은, 지정된 종횡 비(aspect ratio)를 가지는 상기 제1 영역 내에, 상기 미디어 콘텐트를 표현하기 위한 광을 투사하는 동작을 포함할 수 있다.

예를 들어, 상기 미디어 콘텐트를 표시하는 동작은, 상기 하나 이상의 평면들 내에서, 적어도 하나의 외부 객체에 의해 가려진 부분과 구분되는 다른 부분 내에서, 지정된 종횡 비를 가지는 후보 영역들을 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 후보 영역들 중에서, 최대 면적을 가지는 일 후보 영역을, 상기 제1 영역으로 선택하는 동작을 포함할 수 있다.

예를 들어, 상기 제2 영역을 식별하는 동작은, 상기 하나 이상의 평면들 내에서, 상기 제1 영역이 제외된 상기 다른 부분 내에서, 상기 미디어 콘텐트에 의해 지시되는 면적 또는 종횡 비를 가지는 상기 제2 영역을 선택하는 동작을 포함할 수 있다.

예를 들어, 상기 UI를 표시하는 동작은, 상기 미디어 콘텐트가 상기 제1 영역 내에 표시되는 상태 내에서, 상기 전자 장치의 메모리 내에 저장된, 지정된 UI들 중에서, 상기 미디어 콘텐트에 의해 선택된 지정된 UI(a preset UI)를, 상기 제2 영역 내에 표시하는 동작을 포함할 수 있다.

예를 들어, 상기 UI를 표시하는 동작은, 상기 제2 영역의 종횡 비에 기반하여 상기 미디어 콘텐트에 의해 선택된 상기 지정된 UI의 레이아웃을 조절하여, 상기 미디어 콘텐트와 관련된 상기 UI를 표시하는 동작을 포함할 수 있다.

상술한 바와 같은, 일 실시예에 따른, 전자 장치의 방법은, 상기 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 투사될 평면에 대한 정보를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 정보에 기반하여, 상기 평면으로부터, 지정된 비율을 가지는 제1 영역, 및 상기 제1 영역 보다 작은 제2 영역을 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 전자 장치의 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시하는 동작을 포함할 수 있다.

예를 들어, 상기 식별하는 동작은, 상기 정보로부터 상기 평면을 포함하는 이미지를 획득하는 동작을 포함할 수 있다. 상기 방법은, 상기 이미지 내에서, 적어도 하나의 외부 객체에 의해 가려지는 상기 평면 내 적어도 일부분을 식별하는 것에 기반하여, 상기 적어도 일부분과 구분되는 상기 평면 내 다른 부분에 기반하여, 상기 제1 영역 및 상기 제2 영역을 식별하는 동작을 포함할 수 있다.

예를 들어, 상기 제1 영역을 식별하는 동작은, 상기 평면 내 상기 다른 부분 내에서, 상기 지정된 비율을 가지는 복수의 후보 영역들을 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 복수의 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 상기 제1 영역으로 선택하는 동작을 포함할 수 있다.

예를 들어, 상기 제2 영역을 식별하는 동작은, 상기 제1 영역이 분할된 상기 다른 부분 내에서, 상기 UI에 대응하는 조건에 기반하여 상기 제2 영역을 식별하는 동작을 포함할 수 있다.

예를 들어, 상기 제2 영역을 식별하는 동작은, 너비 및 높이 사이의 편차에 의해 설정된 제1 지정된 조건, 또는 면적에 기반하여 설정된 제2 지정된 조건 중에서, 상기 UI에 대응하는 상기 조건을 선택하는 동작을 포함할 수 있다.

예를 들어, 상기 UI를 획득하는 동작은, 상기 미디어 콘텐트의 비디오에 포함된 프레임들 중 어느 하나에 기반하여, 상기 UI를 획득하는 동작을 포함할 수 있다.

예를 들어, 상기 UI를 표시하는 동작은, 상기 UI의 획득에 이용된 프레임으로부터 추출된 텍스트를, 상기 UI 내에 표시하는 동작을 포함할 수 있다.

예를 들어, 상기 획득하는 동작은, 상기 통신 회로를 통해 연결된 외부 전자 장치로, 상기 외부 전자 장치에 의해 실행되는 어플리케이션을 실행하여, 상기 평면이 포함된 이미지를 포함하는 상기 정보를 획득할 것을 지시하는 신호를 송신하는 동작을 포함할 수 있다.

상술한 바와 같은, 일 실시예에 따른, 전자 장치(예, 도 1 내지 도 9의 전자 장치(101))는, 프로젝션 어셈블리, 및 프로세서를 포함할 수 있다. 상기 프로세서는, 상기 프로젝션 어셈블리(예, 도 1 내지 도 9의 전자 장치(101))로부터 방사된 광이 투사될 하나 이상의 평면들에 대한 정보를 획득하도록, 구성될 수 있다. 상기 프로세서는, 상기 정보에 기반하여, 상기 하나 이상의 평면들 내에서 선택된, 제1 영역 내에 미디어 콘텐트를 표시하도록, 구성될 수 있다. 상기 프로세서는, 상기 미디어 콘텐트에 기반하여, 상기 하나 이상의 평면들 내에서, 상기 제1 영역과 구분되는 제2 영역을 식별하도록, 구성될 수 있다. 상기 프로세서는, 상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지고, 상기 미디어 콘텐트와 관련된 UI를 표시하도록, 구성될 수 있다.

예를 들어, 상기 전자 장치는 통신 회로(예, 도 1 내지 도 9의 전자 장치(101))를 포함할 수 있다. 상기 프로세서는, 상기 통신 회로를 통하여 외부 전자 장치(예, 도 1 내지 도 9의 외부 전자 장치(110))로, 상기 외부 전자 장치의 지정된 어플리케이션(예, 도 2의 어플리케이션(270))을 실행하여, 상기 하나 이상의 평면들에 대한 정보를 획득할 것을 지시하는 제1 신호(예, 도 9의 제1 신호(912))를 송신하도록, 구성될 수 있다. 상기 프로세서는, 상기 외부 전자 장치로부터, 상기 제1 신호에 대한 응답으로 송신된 제2 신호(예, 도 9의 제2 신호(932))에 기반하여, 상기 하나 이상의 평면들에 대한 적어도 하나의 이미지가 포함된 상기 정보를 획득하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 지정된 종횡 비를 가지는 상기 제1 영역 내에, 상기 미디어 콘텐트를 표현하기 위한 광을 투사하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 하나 이상의 평면들 내에서, 적어도 하나의 외부 객체에 의해 가려진 부분과 구분되는 다른 부분 내에서, 지정된 종횡 비를 가지는 후보 영역들을 식별하도록, 구성될 수 있다. 상기 프로세서는, 상기 후보 영역들 중에서, 최대 면적을 가지는 일 후보 영역을, 상기 제1 영역으로 선택하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 하나 이상의 평면들 내에서, 상기 제1 영역이 제외된 상기 다른 부분 내에서, 상기 미디어 콘텐트에 의해 지시되는 면적 또는 종횡 비를 가지는 상기 제2 영역을 선택하도록, 구성될 수 있다.

예를 들어, 상기 전자 장치는 메모리(예, 도 1의 메모리(220-1))를 더 포함할 수 있다. 상기 프로세서는, 상기 미디어 콘텐트가 상기 제1 영역 내에 표시되는 상태 내에서, 상기 메모리 내에 저장된, 지정된 UI들 중에서, 상기 미디어 콘텐트에 의해 선택된 지정된 UI를, 상기 제2 영역 내에 표시하도록, 구성될 수 있다.

예를 들어, 상기 프로세서는, 상기 제2 영역의 종횡 비에 기반하여, 상기 미디어 콘텐트에 의해 선택된 상기 지정된 UI의 레이아웃을 조절하여, 상기 미디어 콘텐트와 관련된 상기 UI를 표시하도록, 구성될 수 있다.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 컴퓨터 저장 매체 또는 장치에 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 이때, 매체는 컴퓨터로 실행 가능한 프로그램을 계속 저장하거나, 실행 또는 다운로드를 위해 임시 저장하는 것일 수도 있다. 또한, 매체는 단일 또는 수 개의 하드웨어가 결합된 형태의 다양한 기록수단 또는 저장수단일 수 있는데, 어떤 컴퓨터 시스템에 직접 접속되는 매체에 한정되지 않고, 네트워크 상에 분산 존재하는 것일 수도 있다. 매체의 예시로는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등을 포함하여 프로그램 명령어가 저장되도록 구성된 것이 있을 수 있다. 또한, 다른 매체의 예시로, 어플리케이션을 유통하는 앱 스토어나 기타 다양한 소프트웨어를 공급 내지 유통하는 사이트, 서버 등에서 관리하는 기록매체 내지 저장매체도 들 수 있다.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.

그러므로, 다른 구현들, 다른 실시예들 및 특허()와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (20)

1. 전자 장치(electronic device)(101)에 있어서,
   통신 회로(230-1);
   프로젝션 어셈블리(projection assembly)(240); 및
   프로세서(210-1)를 포함하고, 상기 프로세서는,
   상기 프로젝션 어셈블리로부터 방사된 광이 투사될 평면(120)에 대한 정보를 획득하고;
   상기 정보에 기반하여, 상기 평면으로부터, 지정된 비율을 가지는 제1 영역(141), 및 상기 제1 영역 보다 작은 제2 영역(142)을 식별하고;
   상기 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI(user interface)를 획득하고; 및
   상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시하도록, 구성된,
   전자 장치.
2. 제1항에 있어서, 상기 프로세서는,
   상기 정보로부터 상기 평면을 포함하는 이미지를 획득하고;
   상기 이미지 내에서, 적어도 하나의 외부 객체에 의해 가려지는(occluded by) 상기 평면 내 적어도 일부분을 식별하는 것에 기반하여, 상기 적어도 일부분과 구분되는 상기 평면 내 다른 부분(320)에 기반하여, 상기 제1 영역 및 상기 제2 영역을 식별하도록, 구성된,
   전자 장치.
3. 제2항에 있어서, 상기 프로세서는,
   상기 평면 내 상기 다른 부분 내에서, 상기 지정된 비율을 가지는 복수의 후보 영역들을 식별하고;
   상기 복수의 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 상기 제1 영역으로 선택하도록, 구성된,
   전자 장치.
4. 제2항에 있어서, 상기 프로세서는,
   상기 제1 영역이 분할된 상기 다른 부분 내에서, 상기 UI에 대응하는 조건에 기반하여 상기 제2 영역을 식별하도록, 구성된,
   전자 장치.
5. 제4항에 있어서, 상기 프로세서는,
   너비 및 높이 사이의 편차에 의해 설정된 제1 지정된 조건, 또는 면적에 기반하여 설정된 제2 지정된 조건 중에서, 상기 UI에 대응하는 상기 조건을 선택하도록, 구성된,
   전자 장치.
6. 제1항에 있어서, 상기 프로세서는,
   상기 미디어 콘텐트의 비디오에 포함된 프레임들 중 어느 하나에 기반하여, 상기 UI를 획득하도록, 구성된,
   전자 장치.
7. 제6항에 있어서, 상기 프로세서는,
   상기 UI의 획득에 이용된 프레임으로부터 추출된 텍스트를, 상기 UI 내에 표시하도록, 구성된,
   전자 장치.
8. 제1항에 있어서, 상기 프로세서는,
   상기 통신 회로를 통해 연결된 외부 전자 장치(110)로, 상기 외부 전자 장치에 의해 실행되는 어플리케이션(270)을 실행하여, 상기 평면이 포함된 이미지를 포함하는 상기 정보를 획득할 것을 지시하는 신호를 송신하도록, 구성된,
   전자 장치.
9. 전자 장치의 방법에 있어서,
   상기 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 투사될 하나 이상의 평면들에 대한 정보를 획득하는 동작;
   상기 정보에 기반하여 상기 하나 이상의 평면들 내에서 선택된, 제1 영역 내에, 미디어 콘텐트를 표시하는 동작;
   상기 미디어 콘텐트에 기반하여, 상기 하나 이상의 평면들 내에서, 상기 제1 영역과 구분되는 제2 영역을 식별하는 동작; 및
   상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지고, 상기 미디어 콘텐트와 관련된, UI(user interface)를 표시하는 동작을 포함하는,
   방법.
10. 제9항에 있어서, 상기 획득하는 동작은,
    상기 전자 장치의 통신 회로를 통하여 외부 전자 장치로, 상기 외부 전자 장치의 지정된 어플리케이션을 실행하여, 상기 하나 이상의 평면들에 대한 정보를 획득할 것을 지시하는 제1 신호를 송신하는 동작;
    상기 외부 전자 장치로부터, 상기 제1 신호에 대한 응답으로(as a response to) 송신된 제2 신호에 기반하여, 상기 하나 이상의 평면들에 대한 적어도 하나의 이미지가 포함된 상기 정보를 획득하는 동작을 포함하는,
    방법.
11. 제9항에 있어서, 상기 미디어 콘텐트를 표시하는 동작은,
    지정된 종횡 비(aspect ratio)를 가지는 상기 제1 영역 내에, 상기 미디어 콘텐트를 표현하기 위한 광을 투사하는 동작을 포함하는,
    방법.
12. 제9항에 있어서, 상기 미디어 콘텐트를 표시하는 동작은,
    상기 하나 이상의 평면들 내에서, 적어도 하나의 외부 객체에 의해 가려진 부분과 구분되는 다른 부분 내에서, 지정된 종횡 비를 가지는 후보 영역들을 식별하는 동작;
    상기 후보 영역들 중에서, 최대 면적을 가지는 일 후보 영역을, 상기 제1 영역으로 선택하는 동작을 포함하는,
    방법.
13. 제12항에 있어서, 상기 제2 영역을 식별하는 동작은,
    상기 하나 이상의 평면들 내에서, 상기 제1 영역이 제외된 상기 다른 부분 내에서, 상기 미디어 콘텐트에 의해 지시되는 면적 또는 종횡 비를 가지는 상기 제2 영역을 선택하는 동작을 포함하는,
    방법.
14. 제9항에 있어서, 상기 UI를 표시하는 동작은,
    상기 미디어 콘텐트가 상기 제1 영역 내에 표시되는 상태 내에서, 상기 전자 장치의 메모리 내에 저장된, 지정된 UI들 중에서, 상기 미디어 콘텐트에 의해 선택된 지정된 UI(a preset UI)를, 상기 제2 영역 내에 표시하는 동작을 포함하는,
    방법.
15. 제14항에 있어서, 상기 UI를 표시하는 동작은,
    상기 제2 영역의 종횡 비에 기반하여 상기 미디어 콘텐트에 의해 선택된 상기 지정된 UI의 레이아웃을 조절하여, 상기 미디어 콘텐트와 관련된 상기 UI를 표시하는 동작을 포함하는,
    방법.
16. 전자 장치의 방법에 있어서,
    상기 전자 장치의 프로젝션 어셈블리로부터 방사된 광이 투사될 평면에 대한 정보를 획득하는 동작;
    상기 정보에 기반하여, 상기 평면으로부터, 지정된 비율을 가지는 제1 영역, 및 상기 제1 영역 보다 작은 제2 영역을 식별하는 동작;
    상기 전자 장치의 통신 회로를 통해 식별된 미디어 콘텐트를 상기 제1 영역 내에 표시하는 상태 내에서, 상기 미디어 콘텐트와 관련된 UI를 획득하는 동작; 및
    상기 제2 영역 내에, 상기 제2 영역의 너비 및 높이에 기반하는 레이아웃을 가지는 상기 UI를 표시하는 동작을 포함하는,
    방법.
17. 제16항에 있어서, 상기 식별하는 동작은,
    상기 정보로부터 상기 평면을 포함하는 이미지를 획득하는 동작;
    상기 이미지 내에서, 적어도 하나의 외부 객체에 의해 가려지는 상기 평면 내 적어도 일부분을 식별하는 것에 기반하여, 상기 적어도 일부분과 구분되는 상기 평면 내 다른 부분에 기반하여, 상기 제1 영역 및 상기 제2 영역을 식별하는 동작을 포함하는,
    방법.
18. 제17항에 있어서, 상기 제1 영역을 식별하는 동작은,
    상기 평면 내 상기 다른 부분 내에서, 상기 지정된 비율을 가지는 복수의 후보 영역들을 식별하는 동작;
    상기 복수의 후보 영역들 중에서, 최대 면적을 가지는 후보 영역을, 상기 제1 영역으로 선택하는 동작을 포함하는, 방법.
19. 제17항에 있어서, 상기 제2 영역을 식별하는 동작은,
    상기 제1 영역이 분할된 상기 다른 부분 내에서, 상기 UI에 대응하는 조건에 기반하여 상기 제2 영역을 식별하는 동작을 포함하는,
    방법.
20. 제19항에 있어서, 상기 제2 영역을 식별하는 동작은,
    너비 및 높이 사이의 편차에 의해 설정된 제1 지정된 조건, 또는 면적에 기반하여 설정된 제2 지정된 조건 중에서, 상기 UI에 대응하는 상기 조건을 선택하는 동작을 포함하는,
    방법.
    
    

Images