KR20150122355A - 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법 - Google Patents

썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법 Download PDF

Info

Publication number
KR20150122355A
KR20150122355A KR1020140048530A KR20140048530A KR20150122355A KR 20150122355 A KR20150122355 A KR 20150122355A KR 1020140048530 A KR1020140048530 A KR 1020140048530A KR 20140048530 A KR20140048530 A KR 20140048530A KR 20150122355 A KR20150122355 A KR 20150122355A
Authority
KR
South Korea
Prior art keywords
image
hmd device
surround video
area
thumbnail image
Prior art date
Application number
KR1020140048530A
Other languages
English (en)
Inventor
조은형
박시화
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140048530A priority Critical patent/KR20150122355A/ko
Priority to US14/289,356 priority patent/US20150309310A1/en
Priority to PCT/KR2014/005076 priority patent/WO2015163529A1/en
Publication of KR20150122355A publication Critical patent/KR20150122355A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
    • H04N5/7475—Constructional details of television projection apparatus
    • H04N5/7491—Constructional details of television projection apparatus of head mounted projectors
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B2027/0192—Supplementary details
    • G02B2027/0198—System for aligning or maintaining alignment of an image in a predetermined direction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 명세서는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법에 대한 것이다.
일 실시예에 따라 HMD 디바이스의 제어 방법에 있어서, 서라운드 비디오 이미지의 일부를 디스플레이 하는 단계;로서, 상기 HMD 디바이스의 전면 방향이 제 1 방향이면 상기 서라운드 비디오 이미지 중 제 1 영역을 디스플레이하고, 상기 HMD 디바이스의 전면 방향이 제 2 방향이면 상기 서라운드 비디오 이미지 중 제 2 영역을 디스플레이하고, 상기 서라운드 비디오 이미지와 관련된 썸네일 이미지 및 상기 서라운드 비디오 이미지의 진행 상황을 나타내는 프로그래스바를 디스플레이하는 단계;로서, 상기 썸네일 이미지는 상기 서라운드 비디오 이미지의 상기 제 1 영역에 대응하는 제 1 이미지 및 상기 서라운드 비디오 이미지의 상기 제 2 영역에 대응하는 제 2 이미지를 포함할 수 있다.

Description

썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법{The Apparatus and Method for Head Mounted Display Device displaying Thumbnail image}
본 명세서는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법에 대한 것이다.
헤드 마운티드 디스플레이(Head Mounted Display, ‘HMD’) 디바이스는 유저에게 가상 현실 이미지를 제공할 수 있다. 보다 상세하게는, HMD 디바이스는 유저가 현실 세계의 리얼 오브젝트의 정보와 가상 현실 이미지를 함께 볼 수 있는 개방형 시야(open-view) 타입 또는 사용자가 가상 현실 이미지만을 볼 수 있는 폐쇄형 시야(closed-view) 타입으로 구분될 수 있다. 폐쇄형 시야 타입의 HMD 디바이스에 있어서, HMD 디바이스는 HMD 디바이스의 전면 방향에 따라 유저에게 제공하는 이미지를 다르게 설정할 수 있다. 보다 상세하게는, 개방형 시야 타입의 HMD 디바이스에 있어서, 유저는 유저의 시선 방향에 따라 다른 풍경을 볼 수 있다. 이와 동일하게, 폐쇄형 시야 타입의 HMD 디바이스는 HMD 디바이스의 전면 방향에 따라 유저에게 다른 이미지를 제공할 수 있다.
또한, HMD 디바이스는 가상 현실 이미지로서 비디오 컨텐츠를 재생할 수 있다. 이때, 비디오 컨텐츠는 시간 정보에 대응하는 비디오 이미지를 포함할 수 있다. HMD 디바이스는 비디오 컨텐츠의 진행 사항을 나타내는 프로그래스바를 디스플레이할 수 있다. 또한, HMD 디바이스는 프로그래스바에 비디오 이미지와 관련된 썸네일 이미지를 디스플레이할 수 있다.
HMD 디바이스가 프로그래스바 및 썸네일 이미지를 디스플레이하는 경우, HMD 디바이스는 HMD 디바이스의 전면 방향에 따라 다른 이미지가 제공되는 가상 현실 이미지에 대한 썸네일 이미지를 디스플레이 하는 방법이 요구된다.
본 명세서는, 썸네일 이미지를 디스플레이 하는 HMD 디바이스 및 그 제어 방법을 제공하고자 한다.
일 실시예에 따르면, 본 명세서는 HMD 디바이스가 서라운드 비디오 이미지의 이미지 타입에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 제공하고자 한다.
또한, 일 실시예에 따르면, 본 명세서는 HMD 디바이스가 썸네일 이미지의 디스플레이 속성에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 제공하고자 한다.
또한, 일 실시예에 따르면, 본 명세서는 HMD 디바이스가 썸네일 이미지를 프로그래스바에서 시간 정보에 대응하는 위치에 디스플레이 하는 방법을 제공하고자 한다.
또한, 일 실시예에 따르면, 본 명세서는 HMD 디바이스가 메인 영역 및 서브 영역을 포함하는 방법을 제공하고자 한다.
또한, 일 실시예에 따르면, 본 명세서는 HMD 디바이스가 썸네일 이미지의 메인 이미지를 포함하는 방법을 제공하고자 한다.
또한, 일 실시예에 따르면, 본 명세서는 HMD 디바이스가 프로그래스바를 이용하여 썸네일 이미지를 제어하는 방법을 제공하고자 한다.
본 명세서의 일 실시예에 따라 헤드 마운티드 디스플레이(Head Mounted Display; HMD) 디바이스에 있어서, HMD 디바이스의 전면 방향을 디텍트하는 센서 유닛, HMD 디바이스의 전면 방향에 따라 서라운드 비디오 이미지의 일부를 디스플레이 하는 디스플레이 유닛을 포함할 수 있다. 이때, 디스플레이 유닛은 HMD 디바이스의 전면 방향이 제 1 방향이면 서라운드 비디오 이미지 중 제 1 영역을 디스플레이하고, HMD 디바이스의 전면 방향이 제 2 방향이면 서라운드 비디오 이미지 중 제 2 영역을 디스플레이할 수 있다. 또한, 센서 유닛 및 상기 디스플레이 유닛을 제어하는 프로세서를 포함하는 HMD 디바이스로서, 프로세서는, 서라운드 비디오 이미지와 관련된 썸네일 이미지 및 서라운드 비디오 이미지의 진행 상황을 나타내는 프로그래스바를 디스플레이하되, 썸네일 이미지는 서라운드 비디오 이미지의 제 1 영역에 대응하는 제 1 이미지 및 서라운드 비디오 이미지의 제 2 영역에 대응하는 제 2 이미지를 포함할 수 있다.
본 명세서에 따르면, 썸네일 이미지를 디스플레이 하는 HMD 디바이스 및 그 제어 방법을 제공할 수 있다.
또한, 본 명세서에 따르면, HMD 디바이스는 서라운드 비디오 이미지의 이미지 타입에 기초하여 썸네일 이미지를 디스플레이 할 수 있다.
또한, 본 명세서에 따르면, HMD 디바이스는 썸네일 이미지의 디스플레이 속성에 기초하여 썸네일 이미지를 디스플레이 할 수 있다.
또한, 본 명세서에 따르면, HMD 디바이스는 썸네일 이미지를 프로그래스바에서 시간 정보에 대응하는 위치에 디스플레이 할 수 있다.
또한, 본 명세서에 따르면, HMD 디바이스는 메인 영역 및 서브 영역을 포함할 수 있다.
또한, 본 명세서에 따르면, HMD 디바이스는 썸네일 이미지의 메인 이미지를 포함할 수 있다.
또한, 본 명세서에 따르면, HMD 디바이스는 프로그래스바를 이용하여 썸네일 이미지를 제어할 수 있다.
도 1은 본 명세서의 일 실시예에 따른 HMD 디바이스의 블록도를 나타낸 도면이다.
도 2a 내지 도 2c는 본 명세서의 일 실시예에 따른 서라운드 비디오 이미지의 이미지 타입을 나타낸 도면이다.
도 3은 본 명세서의 일 실시예에 따른 서라운드 비디오 이미지 중 HMD 디바이스의 전면 방향에 따라 디스플레이 되는 영역을 나타낸 도면이다.
도 4a 내지 도 4c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 서라운드 비디오 이미지의 이미지 타입에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
도 5a 내지 도 5c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 썸네일 이미지의 디스플레이 속성에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
도 6은 본 명세서의 일 실시예에 따른 HMD 디바이스가 컨트롤 인풋에 기초하여 HMD 디바이스의 전면 방향에 디스플레이 되는 영역을 변경하는 방법을 나타낸 도면이다.
도 7은 본 명세서의 일 실시예에 따른 HMD 디바이스가 메인 영역을 포함하는 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
도 8a 내지 도 8c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 메인 영역에 디스플레이 되는 이미지를 변경하는 방법을 나타낸 도면이다.
도 9a 내지 도 9c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 썸네일 이미지의 시간 정보에 기초하여 프로그래스바에 인접하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
도 10a 및 도 10b은 본 명세서의 일 실시예에 따른 HMD 디바이스가 프로그래스바에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
도 11a 및 도 11b는 본 명세서의 일 실시예에 따른 HMD 디바이스가 프로그래스바를 이용하여 썸네일 이미지를 제어하는 방법을 나타낸 도면이다.
도 12는 본 명세서의 일 실시예에 따라 HMD 디바이스의 제어 방법의 순서도를 나타낸 도면이다.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 실시예를 상세하게 설명하지만, 청구하고자 하는 범위는 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
본 명세서에서 사용되는 용어는 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 명세서의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
본 명세서의 헤드 마운티드 디스플레이 디바이스(Head Mount Display Device, 이하 ‘HMD 디바이스’라 지칭하기로 한다.)는 유저에게 이미지를 제공할 수 있다. 보다 상세하게는, HMD 디바이스(100)는 HMD 디바이스(100)를 착용한 유저에게 이미지를 제공할 수 있다. 이때, 이미지는 시간 정보를 포함하는 비디오 이미지 또는 정지 이미지일 수 있다.
도 1은 본 명세서의 일 실시예에 따른 HMD 디바이스(100)의 블록도를 나타낸 도면이다. HMD 디바이스(100)는 센서 유닛(110), 디스플레이 유닛(120) 및 프로세서(130)를 포함할 수 있다.
센서 유닛(110)은 HMD 디바이스(100)의 전면 방향을 디텍트할 수 있다. 이때, HMD 디바이스(100)의 전면 방향은 HMD 디바이스(100)를 착용한 유저 시선이 향하는 방향일 수 있다. 보다 상세하게는, HMD 디바이스(100)의 전면 방향은 HMD 디바이스(100)를 착용한 유저의 움직임에 기초하여 변경되는 방향으로, HMD 디바이스(100)를 기준으로 결정될 수 있다. 즉, HMD 디바이스(100)의 전면 방향은 유저가 HMD 디바이스(100)를 착용한 상태에서 바라보는 방향일 수 있다. 또한, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 대한 기준 방향을 설정하고, HMD 디바이스(100)의 전면 방향이 변화됨을 디텍트할 수 있다. 일 예로, HMD 디바이스(100)는 유저가 HMD 디바이스(100)를 착용한 시점에서 유저가 바라보는 있는 방향을 기준 방향으로 설정할 수 있다. 이때, HMD 디바이스(100)를 착용한 유저가 고개를 돌리거나 움직이는 경우, HMD 디바이스(100)는 유저가 HMD 디바이스(100)를 착용한 시점에서의 기준 방향에 기초하여 HMD 디바이스(100)의 전면 방향의 변화를 디텍트할 수 있다.
또한, HMD 디바이스(100)는 유저가 HMD 디바이스(100)를 착용한 상태에서 서라운드 비디오 이미지를 포함하는 비디오 컨턴츠를 재생하는 시점에서 기준 방향을 설정할 수 있다. 일 예로, 유저가 HMD 디바이스(100)를 착용하고 영화 시청을 위한 영화 컨텐츠를 재생하는 경우, HMD 디바이스(100)는 유저가 비디오 컨텐츠를 재생한 시점에서의 HMD 다바이스(100)의 전면 방향을 디텍트할 수 있다. 이때, 유저가 고개를 돌리거나 움직이는 경우, HMD 디바이스(100)는 기준 방향을 기준으로 HMD 디바이스(100)의 전면 방향이 변환됨을 디텍트할 수 있다. 즉, HMD 디바이스(100)의 전면 방향은 기준 방향에 기초하여 디텍트될 수 있다. 또한, 기준 방향은 유저 또는 HMD 디바이스(100)에 의해 변경 설정될 수 있으며, 상술한 실시예로 한정되지 않는다.
또한, 센서 유닛(100)은 컨트롤 인풋을 디텍트하고, 디텍트된 컨트롤 인풋을 프로세서(130)로 전달할 수 있다. 이때, 컨트롤 인풋은 HMD 디바이스(100)를 제어하는 인풋일 수 있다. 보다 상세하게는, 컨트롤 인풋은 HMD 디바이스(100)에 디스플레이된 프로그래스바, 썸네일 이미지 및 서라운드 비디오 이미지를 제어하는 인풋일 수 있다. 이때, 센서 유닛(100)은 제스쳐 인풋, 터치 인풋, 음성 인풋 및 인풋 디바이스에 의한 인풋 중 적어도 하나를 컨트롤 인풋으로 디텍트할 수 있다. 즉, 센서 유닛(100)은 HMD 디바이스(100)에 디스플레이된 프로그래스바, 썸네일 이미지 및 서라운드 비디오 이미지를 제어하는 컨트롤 인풋을 디텍트할 수 있으며, 상술한 실시예로 한정되지 않는다. 또한, 센서 유닛(110)은 터치 센서, 근접 센서, 자이로 센서, 가속도 센서, 중력 센서, 음성 인식 센서 중 적어도 하나를 포함할 수 있으며, 상술한 실시예로 한정되지 않는다.
또한, 상술한 센서들은 별도의 엘리먼트로 HMD 디바이스(100)에 포함되거나, 적어도 하나 이상의 엘리먼트로 통합되어 포함될 수 있다.
디스플레이 유닛(110)은 서라운드 비디오 이미지를 디스플레이할 수 있다. 이때, 서라운드 비디오 이미지는 이미지, 텍스트, 동영상, 사진, 그림 등 시각적으로 인식 가능한 정보를 의미할 수 있다. 또한, 서라운드 비디오 이미지는 HMD 디바이스(100)의 전면 방향에 기초하여 다른 영역이 디스플레이 되는 이미지일 수 있으며, 이와 관련해서 도 2a 내지 도 2c에서 후술한다. 또한, 서라운드 비디오 이미지는 시간 정보에 대응되는 이미지일 수 있다. 보다 상세하게는, 서라운드 비디오 이미지는 서라운드 비디오 컨텐츠에서 시간 정보에 대응되는 이미지일 수 있다. 일 예로, 서라운드 비디오 컨텐츠는 촬영된 영상, 영화 등일 수 있다. 즉, 서라운드 비디오 이미지는 서라운드 비디오 컨텐츠 내에서 시간 정보에 대응하는 이미지일 수 있다.
디스플레이 유닛(120)은 프로그래스 바 및 썸네일 이미지를 디스플레이할 수 있다. 이때, 프로그래스 바는 서라운드 비디오 이미지의 진행 상황을 나타낼 수 있다. 보다 상세하게는, 프로그래스 바는 서라운드 비디오 컨텐츠 내에서 서라운드 비디오 이미지의 시간 정보에 기초하여 진행 상황을 나타낼 수 있다. 또한, 일 예로 프로그래스 바는 서라운드 비디오 이미지의 시간 정보에 대응하는 위치에 인디케이터를 표시할 수 있다. 이때, 프로그래스바는 인디케이터가 위치하는 지점의 시간 정보에 기초하여 서라운드 비디오 이미지를 디스플레이할 수 있다. 즉, 프로그래스 바는 서라운드 비디오 이미지의 진행 상황에 대한 정보를 포함할 수 있다. 또한, 디스플레이 유닛(110)은 썸네일 이미지를 디스플레이할 수 있다. 이때, 썸네일 이미지는 서라운드 비디오 이미지에 대응하는 이미지일 수 있다. 보다 상세하게는, 썸네일 이미지는 서라운드 비디오 이미지를 기준 비율로 축소 시킨 이미지일 수 있다. 또한, 썸네일 이미지는 서라운드 비디오 이미지와 관련된 이미지로서, 서라운드 비디오 이미지를 대표하는 이미지일 수 있다. 또한, 디스플레이 유닛(110)은 썸네일 이미지를 프로그래스 바에서 시간 정보에 대응하는 위치에 인접하여 디스플레이 할 수 있다. 보다 상세하게는, 썸네일 이미지는 서라운드 비디오 이미지 내의 시간 정보를 포함할 수 있다. 이때, 디스플레이 유닛(110)은 썸네일 이미지에 포함된 시간 정보에 대응되는 위치로서 프로그래스 바에 인접하여 썸네일 이미지를 디스플레이할 수 있다.
또한, 일 예로, 디스플레이 유닛(120)은 서라운드 비디오 이미지, 썸네일 이미지 및 프로그래스바를 동시에 디스플레이할 수 있다. 보다 상세하게는, HMD 디바이스(100)가 서라운드 비디오 이미지를 디스플레이 하는 경우, HMD 디바이스(100)는 서라운드 비디오 이미지의 시간 정보를 프로그래스 바를 통해 디스플레이 할 수 있다. 또한, HMD 디바이스(100)는 서라운드 비디오 이미지의 시간 정보에 대응하는 위치로서 프로그래스바에 인접한 위치에 썸네일 이미지를 디스플레이할 수 있다. 즉, HMD 디바이스(100)가 서라운드 비디오 이미지를 디스플레이 하는 경우, HMD 디바이스(100)는 프로그래스 바 및 썸네일 이미지를 동시에 디스플레이할 수 있다.
프로세서(130)는 서라운드 비디오 이미지와 관련된 썸네일 이미지 및 서라운드 비디오 이미지의 진행 상황을 나타내는 프로그래스 바를 디스플레이할 수 있다. 이때, 썸네일 이미지는 서라운드 비디오 이미지의 제 1 영역에 대응하는 제 1 이미지를 포함할 수 있다. 또한, 썸네일 이미지는 서라운드 비디오 이미지의 제 2 영역에 대응하는 제 2 이미지를 포함할 수 있다. 보다 상세하게는, 프로세서(130)는 HMD 디바이스(100)의 전면 방향이 제 1 방향이면 제 1 영역을 디스플레이할 수 있다. 또한, 프로세서(130)는 HMD 디바이스(100)의 전면 방향이 제 2 방향이면 제 2 영역을 디스플레이할 수 있다. 즉, 프로세서(130)는 HMD 디바이스(100)의 전면 방향에 기초하여 서라운드 비디오 이미지의 일부 영역을 디스플레이할 수 있다. 이때, 프로세서(130)가 프로그래스바 및 썸네일 이미지를 디스플레이 하는 경우, 프로세서(130)는 서라운드 비디오 이미지의 제 1 영역에 대응하는 제 1 이미지 및 서라운드 비디오 이미지의 제 2 영역에 대응하는 제 2 이미지를 포함할 수 있다. 일 예로, 프로세서(130)는 서라운드 비디오 이미지의 전체 영역에 대응하는 이미지를 썸네일 이미지로 디스플레이할 수 있다. 또한, 프로세서(130)는 서라운드 비디오 이미지의 일부 영역에 대응하는 이미지를 썸네일 이미지로 디스플레이할 수 있다. 즉, 프로세서(130)는 서라운드 비디오 이미지에 대응하는 썸네일 이미지를 디스플레이할 수 있으며, 이와 관련해서 도 4a 내지 도 4c에서 후술한다.
도 2a 내지 도 2c는 본 명세서의 일 실시예에 따른 서라운드 비디오 이미지의 이미지 타입을 나타낸 도면이다.
HMD 디바이스(100)는 센서 유닛(110)을 이용하여 HMD 디바이스(100)의 전면 방향을 디텍트할 수 있다. 상술한 바와 같이, HMD 디바이스(100)는 기준 방향에 기초하여 HMD 디바이스(100)의 전면 방향을 디텍트할 수 있다. 이때, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 기초하여 서라운드 비디오 이미지의 일부를 디스플레이할 수 있다.
이때, 서라운드 비디오 이미지는 HMD 디바이스(100)를 중심으로 일정 방향(예를 들어, 전, 후, 좌, 우, 상, 하 방향)으로 펼쳐진 이미지일 수 있다. 특히, HMD 디바이스(100)는 유저의 얼굴이 향하는 방향을 HMD 디바이스(100)의 전면 방향으로 디텍트하여 해당 방향에 대응하는 서라운드 비디오 이미지를 제공할 수 있다. 이를 통해, HMD는 유저에게 보다 실감나는 가상 환경을 제공할 수 있다는 효과가 있다.
또한, HDM 디바이스(100)는 서라운드 비디오 이미지의 이미지 타입에 기초하여 서라운드 비디오 이미지를 디스플레이할 수 있다. 이때, 일 예로, 이미지 타입은 HMD 디바이스(100)의 전면 방향에 따라 디스플레이 되는 영역에 기초하여 결정될 수 있다. 보다 상세하게는, HMD 디바이스(100)는 HMD 디바이스(100)를 기준으로 일정 방향에 서라운드 비디오 이미지의 일부를 디스플레이할 수 있다.
일 예로, 도 2a를 참조하면, 서라운드 비디오 이미지는 HMD 디바이스(100)를 기준으로 수평 방향의 전방위에 대해 이미지를 제공하는 실린더 이미지 타입(220)일 수 있다. 이때, HMD 디바이스(100)는 HMD 디바이스(100)를 기준으로 정면에서부터 수평 방향으로 360도의 방위에 대해서 서라운드 비디오 이미지를 형성할 수 있다. 즉, 서라운드 비디오 이미지는 외부에서 볼 때 실린더 형태의 이미지일 수 있다.
또한, 일 예로, 도 2b를 참조하면, 서라운드 비디오 이미지는 HMD 디바이스(100)를 기준으로 수평 방향의 전방위 및 수직 방향 중 수평면 위의 전방위에 대해 이미지를 제공하는 헤미 스피어 이미지 타입(230)일 수 있다. 이때, HMD 디바이스(100)는 HMD 디바이스(100)를 기준으로 정면에서부터 수평 방향으로 360도의 방위에 대해서 서라운드 비디오 이미지를 제공할 수 있다. 또한, HMD 디바이스(100)는 HMD 디바이스(100)를 기준으로 수평면 위의 전 방위에 대해 이미지를 제공할 수 있다. 즉, 서라운드 비디오 이미지는 외부에서 볼 때 헤미 스피어 형태의 이미지일 수 있다.
또한, 일 예로, 도 2c를 참조하면, 서라운드 비디오 이미지는 HMD 디바이스(100)를 기준으로 수평 방향의 전방위 및 수직 방향의 전방위에 대해 이미지를 제공하는 스피어 타입(240)일 수 있다. 이때, HMD 디바이스(100)는 HMD 디바이스(100)를 기준으로 정면에서부터 수평 방향으로 360도의 방위에 대해서 서라운드 비디오 이미지를 제공할 수 있다. 또한, HMD 디바이스(100)는 HMD 디바이스(100)를 기준으로 정면에서부터 수직 방향으로 360도의 방위에 대해서 서라운드 비디오 이미지를 제공할 수 있다. 즉, 서라운드 비디오 이미지는 외부에서 볼 때 스피어 형태일 수 있다.
즉, 서라운드 비디오 이미지의 이미지 타입은 HMD 디바이스(100)의 전면 방향에 대해 수평 방향 또는 수직 방향으로 이미지가 디스플레이 되는 영역에 기초하여 결정될 수 있다. 서라운드 비디오 이미지는 HMD 디바이스(100)의 전면 방향에 기초하여 변경된 이미지를 제공하는 비디오 이미지일 수 있으며, 상술한 실시예로 한정되지 않는다. 즉, HMD 디바이스(100)의 전면 방향이 바뀌는 경우, HMD 디바이스(100)는 유저에게 서라운드 비디오 이미지의 일부를 디스플레이 할 수 있다. 이때, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 따라 서라운드 비디오 이미지 중 각각 다른 영역을 디스플레이 할 수 있다.
도 3은 본 명세서의 일 실시예에 따른 서라운드 비디오 이미지 중 HMD 디바이스의 전면 방향에 따라 디스플레이 되는 영역을 나타낸 도면이다.
HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 제 1 방향이면 제 1 영역(320)을 디스플레이할 수 있다. HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 제 2 방향이면 제 2 영역(330)을 디스플레이할 수 있다.
보다 상세하게는, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 기초하여 서라운드 비디오 이미지(310)의 일부를 디스플레이할 수 있다. 이때, 상술한 바와 같이, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향을 기준 방향에 기초하여 디텍트할 수 있다. 또한, 일 예로, 기준 방향은 HMD 디바이스(100)가 서라운드 비디오 이미지(310)를 디스플레이한 시점에서의 유저 정면 방향일 수 있다. HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 제 1 방향임을 디텍트할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지(310) 중 제 1 방향에 대응하는 제 1 영역(320)을 디스플레이할 수 있다. 일 예로, HMD 디바이스(100)는 서라운드 비디오 이미지(310)를 디스플레이한 시점에서 유저의 정면 방향인 기준 방향을 제 1 방향으로 설정할 수 있다. 이때, HMD 디바이스(100)는 제 1 방향에 대응하는 제 1 영역(320)을 디스플레이할 수 있다. 그 후, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 기준 방향에서 제 2 방향으로 변경됨을 디텍트할 수 있다. 이때, 일 예로, 제 2 방향은 기준 방향에서 유저가 90도로 고개를 돌린 방향일 수 있다. HMD 디바이스(100)는 제 2 방향에 대응하는 제 2 영역(330)을 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 대응하여 서라운드 비디오 이미지(310)의 일부를 디스플레이할 수 있다.
도 4a 내지 도 4c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 서라운드 비디오 이미지의 이미지 타입에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
상술한 바와 같이, 서라운드 비디오 이미지는 실린더 이미지 타입(220), 헤미 스피어 이미지 타입(230) 및 스피어 이미지 타입(240) 중 적어도 하나일 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지와 관련된 썸네일 이미지 및 서라운드 비디오 이미지의 진행 사항을 나타내는 프로그래스바를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 서라운드 비디오 이미지를 디스플레이할 수 있다. 일 예로, HMD 디바이스(100)는 서라운드 비디오 컨텐츠의 재생 중 서러운드 비디오 이미지를 디스플레이할 수 있다.
HMD 디바이스(100)는 썸네일 이미지와 관련된 서라운드 비디오 이미지의 이미지 타입에 기초하여 썸네일 이미지를 디스플레이할 수 있다. 보다 상세하게는, HMD 디바이스(100)는 서라운드 비디오 이미지의 이미지 타입과 동일한 형태의 썸네일 이미지를 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 서라운드 비디오 이미지를 기설정된 비율로 축소하여 썸네일 이미지로서 디스플레이할 수 있다. 이때, 썸네일 이미지는 서라운드 비디오 이미지의 제 1 영역(420-1)에 대응하는 제 1 이미지(420-2) 및 제 2 영역(430-1)에 대응하는 제 2 이미지(430-2)를 포함할 수 있다. 보다 상세하게는, 썸네일 이미지는 서라운드 비디오 이미지에 포함된 전체 영역에 대응하는 이미지일 수 있다. 또한, 일 예로, 썸네일 이미지는 서라운드 비디오 이미지 중 일부 영역에 대응하는 이미지일 수 있으며 상술한 실시예로 한정되지 않는다.
또한, HMD 디바이스(100)는 썸네일 이미지를 서라운드 비디오 이미지 내에서 시간 정보에 기초하여 디스플레이 할 수 있다. 보다 상세하게는, 썸네일 이미지는 서라운드 비디오 이미지 내에서의 시간 정보를 포함할 수 있다. 이때, 시간 정보는 서라운드 비디오 이미지에서 디스플레이되는 시점에 대한 정보일 수 있다. 이때, HMD 디바이스(100)는 프로그래스 바(410)에서 시간 정보에 대응되는 위치에 썸네일 이미지를 디스플레이할 수 있다. 또한, 일 예로, HMD 디바이스(100)는 복수의 썸네일 이미지를 디스플레이할 수 있다. 보다 상세하게는, HMD 디바이스(100)는 프로그래스 바(440)에서 인디케이터가 위치하는 곳에 썸네일 이미지를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 프로그래스 바(440)에서 일정 시간 간격에 기초하여 복수의 썸네일 이미지를 디스플레이할 수 있으며, 상술한 실시예로 한정되지 않는다.
일 예로, 도 4a 및 도 4c를 참조하면, 서라운드 비디오 이미지가 실린더 이미지 타입(220)인 경우, HMD 디바이스(100)는 실린더 형태의 제 1 썸네일 이미지(410-1)를 디스플레이할 수 있다. 이때, 썸네일 이미지는 서라운드 비디오 이미지의 제 1 영역(420-1)에 대응하는 제 1 이미지(420-2) 및 제 2 영역(430-1)에 대응하는 제 2 이미지(430-2)를 포함할 수 있다. 또한, HMD 디바이스(100)는 프로그래스 바(440)에서 인디케이터(450)에 인접하여 썸네일 이미지를 디스플레이할 수 있다. 이때, 인디케이터(450)는 서라운드 비디오 이미지 내에서의 시간 정보에 대응하는 위치에 디스플레이될 수 있다. HMD 디바이스(100)는 서라운드 비디오 이미지의 시간 정보에 대응하여 썸네일 이미지를 서라운드 비디오 이미지와 동일하게 디스플레이할 수 있다.
또한, 도 4b를 참조하면, 서라운드 비디오 이미지가 헤미 스피어 타입(230)인 경우, HMD 디바이스(100)는 헤미 스피어 형태로 제 2 썸네일 이미지(410-2)를 디스플레이할 수 있다. 이때, 썸네일 이미지는 서라운드 비디오 이미지의 제 1 영역(420-1)에 대응하는 제 1 이미지(420-2) 및 제 2 영역(430-1)에 대응하는 제 2 이미지(430-2)를 포함할 수 있다.
또한, 도 4c를 참조하면, 서라운드 비디오 이미지가 스피어 타입(240)인 경우, HMD 디바이스(100)는 스피어 형태로 제 3 썸네일 이미지(410-3)를 디스플레이할 수 있다. 이때, 썸네일 이미지는 서라운드 비디오 이미지의 제 1 영역(420-1)에 대응하는 제 1 이미지(420-2) 및 제 2 영역(430-1)에 대응하는 제 2 이미지(430-2)를 포함할 수 있다.
즉, HMD 디바이스(100)는 썸네일 이미지를 서라운드 비디오 이미지의 이미지 타입에 기초하여 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지의 이미지 타입이 변경되면 변경된 이미지 타입에 기초하여 썸네일 이미지를 디스플레이할 수 있다.
도 5a 내지 도 5c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 썸네일 이미지의 디스플레이 속성에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
HMD 디바이스(100)는 썸네일 이미지의 디스플레이 속성에 기초하여 썸네일 이미지를 디스플레이할 수 있다. 이때, 디스플레이 속성은 썸네일 이미지의 모양, 크기 및 디스플레이되는 위치 중 적어도 하나를 포함할 수 있다. 보다 상세하게는, 썸네일 이미지의 디스플레이 속성은 썸네일 이미지의 형태일 수 있다. HMD 디바이스(100)는 서라운드 비디오 이미지와 관련된 썸네일 이미지를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 동일한 이미지 타입을 갖는 서라운드 비디오 이미지의 썸네일 이미지를 다양한 형태로 디스플레이할 수 있다.
일 예로, 도 5a를 참조하면, HMD 디바이스(100)는 실린더 이미지 타입인 서라운드 비디오 이미지에 대한 썸네일 이미지를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지를 기설정된 비율로 축소시킨 제 1 썸네일 이미지(510-1)를 디스플레이 할 수 있다. 즉, HMD 디바이스(100)는 서라운드 비디오 이미지와 동일한 형태일 수 있다.
또한, HMD 디바이스(100)는 제 1 이미지(540)와 제 2 이미지(550)를 오버랩하여 디스플레이하는 제 2 썸네일 이미지(510-2)를 디스플레이할 수 있다. 이때, 제 1 이미지(540)는 서라운드 비디오 이미지 중 제 1 영역에 대응하는 이미지일 수 있다. 또한, 제 2 이미지(550)는 서라운드 비디오 이미지 중 제 2 영역에 대응하는 이미지일 수 있다. 이때, 제 1 영역은 서라운드 비디오 이미지에서 유저의 정면 방향을 기준으로 스레스홀드 범위 내의 방향 중 어느 한 방향인 제 1 방향에 디스플레이된 영역일 수 있다. 또한, 제 2 영역은 서라운드 비디오 이미지에서 유저의 배면 방향을 기준으로 스레스홀드 범위 내의 방향 중 어느 한 방향인 제 2 방향에 디스플레이된 영역일 수 있다. 이때, 일 예로, HMD 디바이스(100)는 상술한 기준 방향을 기준으로 유저의 정면 방향 및 배면 방향을 결정할 수 있다. 보다 상세하게는, 제 1 영역은 HMD 디바이스(100)를 기준으로 기준 방향이 설정된 부분에서 앞쪽에 위치하는 영역이고, 제 2 영역은 HMD 디바이스(100)를 기준으로 기준 방향이 설정된 부분에서 뒤쪽에 위치하는 영역일 수 있다.
또한, 일 예로, 제 1 영역은 제 2 영역과 동일한 시간 정보에 대응하는 서라운드 비디오 이미지의 일부일 수 있다. 보다 상세하게는, HMD 디바이스(100)는 서라운드 비디오 이미지의 시간 정보에 대응하여 순차적으로 이미지를 디스플레이할 수 있다. 즉, 제 1 영역과 제 2 영역은 동일한 시간 정보에 대응하여 HMD 디바이스(100)의 전면 방향에 의해서만 변경되는 영역일 수 있다.
HMD 디바이스(100)는 제 1 영역에 대응하는 제 1 이미지(540)와 제 2 영역에 대응하는 제 2 이미지(550)를 오버랩하여 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 제 2 이미지(540)를 제 1 이미지(540) 뒤쪽에 디스플레이할 수 있다. 또한, 일 예로, HMD 디바이스(100)가 제 1 이미지(540)와 제 2 이미지(550)를 오버랩하여 디스플레이 하는 경우, HMD 디바이스(100)는 제 2 이미지(550) 앞쪽에 디스플레이 되는 제 1 이미지(540)를 투명하게 디스플레이할 수 있다.
또한, HMD 디바이스(100)는 서라운드 비디오 이미지를 펼친 전개도 이미지인 제 3 썸네일 이미지(510-3)을 디스플레이할 수 있다. 보다 상세하게는, HMD 디바이스(100)는 실린더 이미지 타입의 서라운드 비디오 이미지를 펼친 전개도를 기준 비율로 축소시킨 이미지를 썸네일 이미지로 디스플레이할 수 있다.
또한, 일 예로, 도 5b를 참조하면, HMD 디바이스(100)는 스피어 이미지 타입인 서라운드 비디오 이미지에 대한 썸네일 이미지를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지를 기준 비율로 축소시킨 제 1 썸네일 이미지(560-1)를 디스플레이 할 수 있다. 즉, HMD 디바이스(100)는 서라운드 비디오 이미지와 동일한 형태일 수 있다.
또한, HMD 디바이스(100)는 서라운드 비디오 이미지를 펼친 전개도 이미지를 제 2 썸네일 이미지(560-2)로 디스플레이할 수 있다. 이때, 제 2 썸네일 이미지(560-2)는 서라운드 비디오 이미지를 지구본 형태로 전개시킨 이미지일 수 있다.
또한, HMD 디바이스(100)는 서라운드 비디오 이미지를 정이십면체 형태로 펼친 전개도 이미지를 제 3 썸네일 이미지(560-3)로 디스플레이할 수 있다.
이때, 썸네일 이미지는 제 1 영역에 대응하는 제 1 이미지(540) 및 제 2 영역에 대응하는 제 2 이미지(550)를 포함할 수 있다.
또한, 일 예로, 도 5c를 참조하면, HMD 디바이스(100)는 헤미 스피어 이미지 타입인 서라운드 비디오 이미지에 대한 썸네일 이미지를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지를 기설정된 비율로 축소시킨 제 1 썸네일 이미지(570-1)를 디스플레이 할 수 있다. 즉, HMD 디바이스(100)는 서라운드 비디오 이미지와 동일한 형태일 수 있다.
또한, HMD 디바이스(100)는 서라운드 비디오 이미지를 펼친 전개도 이미지를 제 2 썸네일 이미지(570-2)로 디스플레이할 수 있다. 이때, 제 2 썸네일 이미지(570-2)는 서라운드 비디오 이미지를 지구본 형태로 전개시킨 이미지로서 헤미 스피어의 전개도일 수 있다.
또한, HMD 디바이스(100)는 서라운드 비디오 이미지를 바라보는 시선 방향에 기초하여 썸네일 이미지를 디스플레이할 수 있다. 일 예로, HMD 디바이스(100)는 서라운드 비디오 이미지를 위에서 바라본 형태로서 제 3 썸네일 이미지(570-3)를 디스플레이할 수 있다. 즉, 제 3 썸네일 이미지(570-3)는 원 모양으로 디스플레이될 수 있다.
도 6은 본 명세서의 일 실시예에 따른 HMD 디바이스가 컨트롤 인풋에 기초하여 HMD 디바이스의 전면 방향에 디스플레이 되는 영역을 변경하는 방법을 나타낸 도면이다.
HMD 디바이스(100)는 센서 유닛(110)을 이용하여 컨트롤 인풋을 디텍트하고, 디텍트된 컨트롤 인풋을 프로세서로 전달할 수 있다. 이때, 상술한 바와 같이, 컨트롤 인풋은 제스쳐 인풋, 터치 인풋, 음성 인풋 및 인풋 디바이스에 의한 인풋 중 적어도 하나일 수 있다. 또한, 컨트롤 인풋은 HMD 디바이스(100)에 디스플레이된 썸네일 이미지를 제어하는 인풋일 수 있다. 보다 상세하게는, HMD 디바이스(100)는 썸네일 이미지에 대한 컨트롤 인풋을 디텍트하고, 디텍트된 컨트롤 인풋에 기초하여 썸네일 이미지에 대응하는 서라운드 비디오 이미지를 제어할 수 있다. 일 예로, 도 6을 참조하면, HMD 디바이스(100)는 서라운드 비디오 이미지(610-1), 썸네일 이미지(610-2) 및 프로그래스바(640)를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지(610-1) 중 제 1 영역(620-1)을 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 서라운드 비디오 이미지에 대응하는 썸네일 이미지(610-2)를 전개도 이미지로 디스플레이할 수 있다. 이때, 썸네일 이미지(610-2)는 서라운드 비디오 이미지(610-1)의 제 1 영역(620-1)에 대응되는 제 1 이미지(620-2)를 포함할 수 있다. 또한, 썸네일 이미지(610-2)는 서라운드 비디오 이미지(610-1)의 제 2 영역(630-1)에 대응하는 제 2 이미지(630-2)를 포함할 수 있다. 또한, HMD 디바이스(100)는 썸네일 이미지(610-1)를 프로그래스바(640)에서 서라운드 비디오 이미지(610-1)의 시간 정보를 나타내는 인디케이터(650)에 인접하여 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 썸네일 이미지(610-2)에서 제 2 이미지(630-2)를 선택하는 컨트롤 인풋을 디텍트할 수 있다. HMD 디바이스(100)는 디텍트된 컨트롤 인풋에 기초하여 서라운드 비디오 이미지 중 제 2 영역(630-1)을 디스플레이할 수 있다. 일 예로, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 기준 방향이면 제 1 영역(620-1)를 디스플레이할 수 있다. 이때, HMD 디바이스는 상술한 컨트롤 인풋에 기초하여 디스플레이 되고 있던 제 1 영역(620-1)를 제 2 영역(630-1)으로 변경하여 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향을 변경하지 않고, 서라운드 비디오 이미지 중 디스플레이되는 영역을 변경할 수 있다.
도 7은 본 명세서의 일 실시예에 따른 HMD 디바이스가 메인 영역을 포함하는 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
썸네일 이미지(710)는 메인 영역(720) 및 서브 영역을 포함할 수 있다. 이때, 메인 영역(720)은 썸네일 이미지(710)를 대표하는 영역일 수 있다. 또한, 일 예로, HMD 디바이스(100)는 프로그래스 바(730)에서 시간 정보를 나타내는 인디케이터(740)를 디스플레이 할 수 있다. 이때, HMD 디바이스(100)는 썸네일 이미지(710) 중 메인 영역을 인디케이터(740)에 가장 인접하게 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 썸네일 이미지(710)에서 시야가 가장 많이 미치는 영역을 메인 영역을 설정할 수 있다. 또한, 메인 영역(720)은 유저 또는 HMD 디바이스(100)에 의해 설정될 수 있으며, 상술한 실시예로 한정하지 않는다.
또한, HMD 디바이스(100)는 메인 이미지를 포함할 수 있다. 이때, 메인 이미지는 썸네일 이미지를 대표할 수 있는 이미지일 수 있다. 또한, 메인 이미지는 서라운드 비디오 이미지 중 HMD 디바이스(100)의 전면 방향이 유저 정면일 때의 디스플레이 되는 영역에 대응하는 이미지일 수 있다. 보다 상세하게는, HMD 디바이스(100)는 상술한 기준 방향을 설정하고, 기준 방향에 기초하여 HMD 디바이스(100)의 전면 방향을 디텍트할 수 있다. 이때, 일 예로, HMD 디바이스(100)는 HMD 디바이스(100)를 착용한 시점에서의 전명 방향을 기준 방향으로서, 유저 정면 방향으로 설정할 수 있다. 이때, HMD 디바이스(100)는 서라운드 비디오 이미지 중 유저의 정면 방향에서 디스플레이 되는 영역에 대응되는 이미지를 썸네일 이미지의 메인 이미지로 설정할 수 있다. 또한, 일 예로, HMD 디바이스(100)는 서라운드 비디오 이미지를 대표할 수 있는 영역에 대응하는 이미지를 메인 이미지로 설정할 수 있다. 또한, 메인 이미지는 유저 또는 HMD 디바이스(100)에 의해 변경되어 설정될 수 있으며, 상술한 실시예로 한정되지 않는다.
일 예로, HMD 디바이스(100)가 썸네일 이미지(710)를 디스플레이하는 경우, HMD 디바이스(100)는 썸네일 이미지(710)의 메인 영역에 메인 이미지를 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 서라운드 비디오 이미지를 대표하는 이미지로서 메인 이미지를 메인 영역에 디스플레이할 수 있다.
도 8a 내지 도 8c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 메인 영역에 디스플레이 되는 이미지를 변경하는 방법을 나타낸 도면이다. HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 제 1 방향임을 디텍트하면 제 1 영역을 디스플레이할 수 있다. 그 후, HMD 디바이스(100)는 썸네일 이미지(810)를 디스플레이 할 수 있다. 이때, 썸네일 이미지(810)는 제 1 영역에 대응하는 제 1 이미지(850-1)를 포함할 수 있다. 또한, HMD 디바이스(100)는 제 1 이미지(850-1)를 썸네일 이미지의 메인 영역에 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 유저가 시청한 영역에 대응하는 이미지를 썸네일 이미지(810)의 메인 영역에 디스플레이할 수 있다.
또한, HMD 디바이스(100)는 썸네일 이미지(810)의 메인 영역에 제 1 이미지(850-1)를 디스플레이한 상태에서 썸네일 이미지(810)를 회전하는 컨트롤 인풋을 디텍트할 수 있다. 이때, 컨트롤 인풋은 슬라이드 터치 인풋 또는 제스쳐 인풋일 수 있으며, 상술한 실시예로 한정하지 않는다. HMD 디바이스(100)가 썸네일 이미지(810)를 회전하는 컨트롤 인풋을 디텍트하는 경우, HMD 디바이스(100)는 제 2 이미지(840-1)를 썸네일 이미지의 메인 영역에 디스플레이할 수 있다. 이때, 제 2 이미지(840-1)은 제 1 이미지(850-1)과 인접하는 이미지일 수 있다. 즉, HMD 디바이스(100)는 썸네일 이미지(810)가 디스플레이된 상태에서 컨트롤 인풋을 이용하여 메인 영역에 디스플레이된 이미지를 변경할 수 있다.
또한, 일 예로, HMD 디바이스(100)가 썸네일 이미지(810)를 디스플레이하고, 시간 스레스홀드 이상 컨트롤 인풋을 디텍트하지 못한 경우, HMD 디바이스(100)는 메인 영역에 디스플레이된 제 1 이미지(850-1)를 제 2 이미지(840-1)로 변경할 수 있다. 즉, HMD 디바이스(100)는 스레스홀드 이상 컨트롤 인풋을 디텍트하지 못하면 썸네일 이미지(810)를 회전시킬 수 있다. 이를 통해, HMD 디바이스(100)는 썸네일 이미지(810)의 메인 영역에 디스플레이되는 이미지를 변경할 수 있다.
또한, 일 예로, HMD 디바이스(100)는 썸네일 이미지(810), 프로그래스바(820) 및 서라운드 비디오 이미지(220)를 동시에 디스플레이할 수 있다. HMD 디바이스(100)는 썸네일 이미지(810)의 제 1 이미지(850-1)를 선택하는 컨트롤 인풋을 디텍트할 수 있다. 이때, HMD 디바이스(100)는 제 1 이미지(850-1)에 대응되는 서라운드 비디오 이미지의 제 1 영역(850-2)를 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 썸네일 이미지(810)를 이용하여 썸네일 이미지에 대응하는 서라운드 비디오 이미지(220)를 제어할 수 있다.
또한, 일 예로, HMD 디바이스(100)는 썸네일 이미지(810)의 메인 영역에 제 1 이미지(850-1)를 디스플레이한 상태에서 썸네일 이미지(810)를 회전하는 컨트롤 인풋을 디텍트할 수 있다. HMD 디바이스(100)가 썸네일 이미지(810)를 회전하는 컨트롤 인풋을 디텍트하는 경우, HMD 디바이스(100)는 제 2 이미지(840-1)를 썸네일 이미지의 메인 영역에 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 제 2 이미지(840-1)에 대응하는 서라운드 비디오 이미지의 제 2 영역(840-2)을 디스플레이할 수 있다. 이때, 제 2 영역(840-2)은 제 1 영역(850-2)와 인접한 영역일 수 있다.
도 9a 내지 도 9c는 본 명세서의 일 실시예에 따른 HMD 디바이스가 썸네일 이미지의 시간 정보에 기초하여 프로그래스바에 인접하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
HMD 디바이스(100)는 썸네일 이미지를 프로그래스바에 인접하여 디스플레이할 수 있다. 이때, 썸네일 이미지는 썸네일 이미지에 대응되는 서라운드 비디오 이미지의 시간 정보를 포함할 수 있다. 또한, HMD 디바이스(100)는 썸네일 이미지를 시간 정보에 대응하는 위치에 프로그래스 바에 인접하여 디스플레이할 수 있다. 이때, 일 예로 HMD 디바이스(100)는 썸네일 이미지를 시간 정보를 나타내는 인디케이터에 인접하여 디스플레이할 수 있다. 또한, 일 예로, HMD 디바이스(100)는 복수의 썸네일 이미지를 디스플레이할 수 있으며, 상술한 실시예로 한정되지 않는다.
또한, HMD 디바이스(100)는 시간 정보에 대응하여 디스플레이된 썸네일 이미지를 선택하는 컨트롤 인풋을 이용하여 서라운드 비디오 이미지를 디스플레이할 수 있다.
보다 상세하게는, 일 예로, HMD 디바이스(100)는 제 1 시간 정보에 대응하는 위치로서 프로그래스 바(920)에 인접하여 제 1 썸네일 이미지(910-1)를 디스플레이할 수 있다. 이때, HMD 디바이스(100)가 프로그래스 바(920)에서 제 1 시간 정보에 대응하는 위치로 인디케이터(930)를 이동하는 컨트롤 인풋을 디텍트하는 경우, HMD 디바이스(100)는 제 1 썸네일 이미지(910-1)와 관련된 제 1 서라운드 비디오 이미지(910-2)를 디스플레이 할 수 있다.
또한, 일 예로, HMD 디바이스(100)가 프로그래스 바(920)에서 제 2 시간 정보에 대응하는 위치로 인디케이터(930)를 이동하는 컨트롤 인풋을 디텍트하는 경우, HMD 디바이스(100)는 제 2 썸네일 이미지(940-1)와 관련된 제 2 서라운드 비디오 이미지(940-2)를 디스플레이할 수 있다.
즉, HMD 디바이스(100)는 프로그래스 바(920) 및 인디케이터(930)를 이용하여 썸네일 이미지 및 서라운드 비디오 이미지를 제어할 수 있다.
도 10a 및 도 10b은 본 명세서의 일 실시예에 따른 HMD 디바이스가 프로그래스바에 기초하여 썸네일 이미지를 디스플레이 하는 방법을 나타낸 도면이다.
HMD 디바이스(100)는 썸네일 이미지를 프로그래스 바에 인접하여 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 프로그래스바(1020)의 모양, 크기 또는 디스플레이되는 위치를 기초하여 썸네일 이미지를 디스플레이할 수 있다. 보다 상세하게는, HMD 디바이스(100)는 프로그래스 바의 모양, 크기 또는 디스플레이 되는 위치를 변경하여 디스플레이할 수 있다. 일 예로, HMD 디바이스(100)는 프로그래스 바(1020)를 가로 또는 세로 방향으로 디스플레이 할 수 있다. 또한, 일 예로 HMD 디바이스(100)는 프로그래스 바(1020)를 입체적으로 디스플레이 할 수 있다. 즉, HMD 디바이스(100)는 프로그래스 바(1020)를 디스플레이하는 방법을 제어할 수 있다. 이때, HMD 디바이스(100)는 프로그래스 바(1020)에 기초하여 썸네일 이미지를 디스플레이할 수 있다.
일 예로, 도 10a를 참조하면, HMD 디바이스(100)는 프로그래스 바(1020)의 제 1 측면에 인접하여 썸네일 이미지의 일부를 디스플레이하고, 제 2 측면에 인접하여 썸네일 이미지의 일부를 디스플레이할 수 있다. 또한, 일 예로, HMD 디바이스(100)는 프로그래스 바(1020)의 제 1 측면에 인접하여 썸네일 이미지의 메인 영역을 디스플레이하고, 제 2 측면에 인접하여 썸네일 이미지의 서브 영역을 디스플레이할 수 있다.
보다 상세하게는, HMD 디바이스(100)는 썸네일 이미지를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 프로그래스 바(1020) 위쪽에 제 1 내부 썸네일 이미지(1010-1)를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 프로그래스 바(1020) 아래쪽에 제 2 내부 썸네일 이미지(1010-2)를 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 썸네일 이미지를 프로그래스바를 기준으로 분리하여 디스플레이 할 수 있다.
또한, 일 예로, 도 10b를 참조하면, HMD 디바이스(100)는 프로그래스 바(1020)를 세로로 디스플레이할 수 있다. 또한, 일 예로, HMD 디바이스(100)는 썸네일 이미지(1040)를 프로그래스 바(1020)를 둘러싸도록 하여 디스플레이할 수 있다. 보다 상세하게는, HMD 디바이스(100)는 프로그래스 바(1020)를 기준으로 고리 형태로 썸네일 이미지(1040)를 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 프로그래스 바(1020)를 고려하여 썸네일 이미지를 디스플레이할 수 있으며, 상술한 실시예로 한정하지 않는다.
도 11a 및 도 11b는 본 명세서의 일 실시예에 따른 HMD 디바이스가 프로그래스바를 이용하여 썸네일 이미지를 제어하는 방법을 나타낸 도면이다.
HMD 디바이스(100)는 프로그래스 바(1120)를 제어하는 프로그래스 바 인터페이스를 실행할 수 있다. 이때, 프로그래스 바 인터페이스는 프로그래스 바(1120) 및 프로그래스 바에 인접하여 디스플레이된 썸네일 이미지를 제어하는 인터페이스일 수 있다. 일 예로, 프로그래스 바 인터페이스는 썸네일 이미지 중 메인 영역에 디스플레이된 이미지를 변경하는 인터페이스일 수 있다. 또한, 프로그래스 바 인터페이스는 썸네일 이미지를 디스플레이할지 여부를 제어하는 인터페이스일 수 있다. 또한, 프로그래스 바 인터페이스는 시간 정보에 대응하는 인디케이터(1130)를 제어하는 인터페이스일 수 있다. 즉, 프로그래스 바 인터페이스는 디스플레이된 프로그래스 바(1120) 및 썸네일 이미지를 제어하는 인터페이스일 수 있다.
이때, 일 예로, 도 11a를 참조하면, 프로그래스 바 인터페이스는 프로그래스 바(1120)를 회준축을 기준으로 회전 시키는 인터페이스일 수 있다. 보다 상세하게는, HMD 디바이스(100)는 프로그래스 바 인터페이스를 이용하여 프로그래스 바(1120)를 회전시킬 수 있다. 이때, HMD 디바이스(100)는 제 1 썸네일 이미지(1110-1)의 메인 영역에 제 1 이미지(1150-1)를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 제 2 썸네일 이미지(1110-2)의 메인 영역에 제 2 이미지(1150-2)를 디스플레이할 수 있다. 그 후, HMD 디바이스(100)가 프로그래스 바(1120)의 회전축을 기준으로 회전함을 디텍트하면, HMD 디바이스(100)는 제 1 썸네일 이미지(1110-1)의 메인 영역에 제 3 이미지(1140-1)를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 제 2 썸네일 이미지(1110-2)의 메인 영역에 제 4 이미지(1140-2)를 디스플레이할 수 있다.
즉, HMD 디바이스(100)는 프로그래스 바 인터페이스를 이용하여 복수의 썸네일 이미지 각각에 대해서 메인 영역에 디스플레이 되는 이미지를 변경할 수 있다.
또한, 일 예로, 도 11b를 참조하면, HMD 디바이스(100)가 프로그래스 바 인터페이스를 실행하는 경우, HMD 디바이스(100)는 고리 프로그래스바(1160)를 더 디스플레이할 수 있다. 이때, 고리 프로그래스바(1160)는 썸네일 이미지를 제어하는 프로그래스바일 수 있다. 보다 상세하게는, HMD 디바이스(100)는 고리 프로그래스 바(1160)를 이용하여 썸네일 이미지의 메인 영역에 디스플레이 되는 이미지를 제어할 수 있다. HMD 디바이스(100)는 제 1 썸네일 이미지(1170-1)의 메인 영역에 제 1 이미지(1190-1)를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 제 2 썸네일 이미지(1170-2)의 메인 영역에 제 2 이미지(1190-2)를 디스플레이할 수 있다. 이때, HMD 디바이스(100)가 고리 프로그래스 바(1160)가 회전함을 디텍트하는 경우, HMD 디바이스(100)는 제 1 썸네일 이미지(1170-1)의 메인 영역에 제 3 이미지(1180-1)를 디스플레이할 수 있다. 또한, HMD 디바이스(100)는 제 2 썸네일 이미지(1170-2)의 메인 영역에 제 4 이미지(1180-2)를 디스플레이할 수 있다. 즉, HMD 디바이스(100)는 고리 프로그래스 바(1160)를 회전시켜 복수의 썸네일 이미지 각각의 메인 영역에 디스플레이 되는 이미지를 변경할 수 있다.
도 12는 본 명세서의 일 실시예에 따라 HMD 디바이스의 제어 방법의 순서도를 나타낸 도면이다.
HMD 디바이스는 HMD 디바이스(100)의 전면 방향을 디텍트할 수 있다. (S1210) 이때, 도 1에서 상술한 바와 같이, HMD 디바이스(100)의 전면 방향은 HMD 디바이스(100)를 착용한 유저의 움직임에 기초하여 변경되는 방향으로 HMD 디바이스(100)를 기준으로 결정될 수 있다. 보다 상세하게는, HMD 디바이스(100)의 전면 방향은 유저가 HMD 디바이스(100)를 착용한 상태에서 바라보는 방향일 수 있다. 또한, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 대한 기준 방향을 설정할 수 있다. HMD 디바이스(100)는 기준 방향에 기초하여 HMD 디바이스(100)의 전면 방향이 변화됨을 디텍트할 수 있다. 일 예로, 유저가 HMD 디바이스(100)를 착용하고 영화 시청을 위한 서라운드 비디오 이미지를 디스플레이하는 경우, HMD 디바이스(100)는 유저가 서라운드 비디오 이미지를 디스플레이한 시점에서의 HMD 다바이스(100)의 전면 방향을 기준 방향으로 설정할 수 있다. 이때, 유저가 고개를 돌리거나 움직이는 경우, HMD 디바이스(100)는 기준 방향을 기준으로 HMD 디바이스(100)의 전면 방향이 변환됨을 디텍트할 수 있다. 즉, HMD 디바이스(100)의 전면 방향은 기준 방향에 기초하여 디텍트될 수 있다. 또한, 기준 방향은 유저 또는 HMD 디바이스(100)에 의해 설정될 수 있으며, 상술한 실시예로 한정되지 않는다.
다음으로, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 제 1 방향임을 디텍트하면 서라운드 비디오 이미지 중 제 1 영역을 디스플레이할 수 있다.(S1220) 또한, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향이 제 2 방향임을 디텍트하면 서라운드 비디오 이미지 중 제 2 영역을 디스플레이할 수 있다.(S1230) 도 2a 내지 도 2c에서 상술한 바와 같이, HMD 디바이스(100)는 HMD 디바이스(100)의 전면 방향에 기초하여 서라운드 비디오 이미지의 일부를 디스플레이 할 수 있다. 이때, 서라운드 이미지는 HMD 디바이스(100)를 중심으로 일정 방향(예를 들어, 전, 후, 좌, 우, 상, 하 방향)으로 펼쳐진 이미지일 수 있다. 특히, HMD 디바이스(100)는 유저의 얼굴이 향하는 방향을 HMD 디바이스(100)의 전면 방향으로 디텍트하여 해당 방향에 대응하는 서라운드 이미지를 제공할 수 있다. 즉, HMD 디바이스(100)는 전면 방향에 기초하여 서라운드 비디오 이미지의 일부를 디스플레이할 수 있다.
다음으로, HMD 디바이스(100)는 서라운드 비디오 이미지의 진행 상황을 나타내는 프로그래스바를 디스플레이할 수 있다.(S1240) 도 1에서 상술한 바와 같이, 프로그래스 바는 서라운드 비디오 컨텐츠 내에서 서라운드 비디오 이미지의 시간 정보에 기초하여 진행 상황을 나타낼 수 있다. 또한, 일 예로 프로그래스 바는 서라운드 비디오 이미지의 시간 정보에 대응하는 위치에 인디케이터를 표시할 수 있다. 이때, 프로그래스바는 인디케이터가 위치하는 지점의 시간 정보에 기초하여 서라운드 비디오 이미지를 디스플레이할 수 있다. 즉, 프로그래스 바는 서라운드 비디오 이미지의 진행 상황에 대한 정보를 포함할 수 있다.
다음으로, HMD 디바이스(100)는 프로그래스 바에서 서라운드 비디오 이미지의 시간 정보에 대응하는 위치에 썸네일 이미지를 디스플레이할 수 있다.(S1250) 도 1에서 상술한 바와 같이, 썸네일 이미지는 서라운드 비디오 이미지 내의 시간 정보를 포함할 수 있다. 이때, 디스플레이 유닛(110)은 썸네일 이미지에 포함된 시간 정보에 대응되는 위치로서 프로그래스 바에 인접하여 썸네일 이미지를 디스플레이할 수 있다. 또한, 일 예로, 디스플레이 유닛(120)은 서라운드 비디오 이미지, 썸네일 이미지 및 프로그래스바를 동시에 디스플레이할 수 있다.
다음으로, HMD 디바이스(100)는 서라운드 비디오 이미지의 제 1 영역에 대응하는 제 1 이미지 및 서라운드 비디오 이미지의 제 2 영역에 대응하는 제 2 이미지를 포함하는 썸네일 이미지를 썸네일 이미지의 디스플레이 속성에 기초하여 디스플레이할 수 있다.(S1260) 도 5a 내지 도 5c에서 상술한 바와 같이, HMD 디바이스(100)는 썸네일 이미지의 디스플레이 속성에 기초하여 썸네일 이미지를 디스플레이할 수 있다. 이때, 디스플레이 속성은 썸네일 이미지의 모양, 크기 및 디스플레이되는 위치 중 적어도 하나를 포함할 수 있다. 보다 상세하게는, 썸네일 이미지의 디스플레이 속성은 썸네일 이미지의 형태일 수 있다. HMD 디바이스(100)는 서라운드 비디오 이미지와 관련된 썸네일 이미지를 디스플레이할 수 있다. 이때, HMD 디바이스(100)는 동일한 이미지 타입을 갖는 서라운드 비디오 이미지의 썸네일 이미지를 다양한 형태로 디스플레이할 수 있다.
나아가, 설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.
본 명세서에 따른 HMD 디바이스(100) 및 그 제어 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 명세서의 HMD 디바이스(100) 및 제어 방법은 디바이스에 구비된 컨트롤러가 읽을 수 있는 기록매체에 컨트롤러가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컨트롤러가 읽을 수 있는 기록매체는 컨트롤러에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컨트롤러가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, 자기 테이프, 플로피디스크, 광 데이터 저장 장치 등이 있으며, 또한, 인터넷을 통한 송신 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컨트롤러가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 명세서의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 명세서는 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 명세서의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 명세서의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.
그리고 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양 발명의 설명은 보충적으로 적용될 수 있다.
100 : HMD 디바이스
110 : 센서 유닛
120 : 디스플레이 유닛
130 : 프로세서

Claims (21)

  1. 헤드 마운티드 디스플레이(Head Mounted Display; HMD) 디바이스에 있어서,
    상기 HMD 디바이스의 전면 방향을 디텍트하는 센서 유닛;
    상기 HMD 디바이스의 전면 방향에 따라 서라운드 비디오 이미지의 일부를 디스플레이 하는 디스플레이 유닛; 상기 디스플레이 유닛은 상기 HMD 디바이스의 전면 방향이 제 1 방향이면 상기 서라운드 비디오 이미지 중 제 1 영역을 디스플레이하고, 상기 HMD 디바이스의 전면 방향이 제 2 방향이면 상기 서라운드 비디오 이미지 중 제 2 영역을 디스플레이함, 및
    상기 센서 유닛 및 상기 디스플레이 유닛을 제어하는 프로세서를 포함하는 HMD 디바이스로서,
    상기 프로세서는,
    상기 서라운드 비디오 이미지와 관련된 썸네일 이미지 및 상기 서라운드 비디오 이미지의 진행 상황을 나타내는 프로그래스바를 디스플레이하되,
    상기 썸네일 이미지는 상기 서라운드 비디오 이미지의 상기 제 1 영역에 대응하는 제 1 이미지 및 상기 서라운드 비디오 이미지의 상기 제 2 영역에 대응하는 제 2 이미지를 포함하는, HMD 디바이스.
  2. 제 1 항에 있어서,
    상기 프로세서는,
    상기 서라운드 비디오 이미지의 이미지 타입(image type)에 기초하여 상기 썸네일 이미지를 디스플레이 하는, HMD 디바이스.
  3. 제 2 항에 있어서,
    상기 서라운드 비디오 이미지는,
    상기 HMD 디바이스를 기준으로 수평 방향의 전방위에 대해 이미지를 제공하는 실린더 이미지 타입(cylinder image type),
    상기 HMD 디바이스를 기준으로 수평 방향 및 수직 방향의 전방위에 대해 이미지를 제공하는, 스피어 이미지 타입(sphere image type), 및
    상기 HMD 디바이스를 기준으로 수평 방향 및 수직 방향 중 수평면 위의 전방위에 대해 이미지를 제공하는 헤미 스피어 이미지 타입(hemisphere image type) 중 어느 하나인 HMD 디바이스.
  4. 제 1 항에 있어서,
    상기 프로세서는,
    상기 썸네일 이미지의 디스플레이 속성에 기초하여 상기 썸네일 이미지를 디스플레이 하되,
    상기 디스플레이 속성은 상기 썸네일 이미지의 모양, 크기 및 디스플레이되는 위치 중 적어도 하나인, HMD 디바이스.
  5. 제 1 항에 있어서,
    상기 썸네일 이미지는 상기 서라운드 비디오 이미지를 기설정된 기준 비율로 축소시킨 이미지인, HMD 디바이스.
  6. 제 1 항에 있어서,
    상기 썸네일 이미지는 상기 서라운드 비디오 이미지를 펼친 전개도(planar figure) 이미지인, HMD 디바이스.
  7. 제 1 항에 있어서,
    상기 프로세서는,
    상기 썸네일 이미지를 디스플레이 하는 경우,
    상기 썸네일 이미지에 포함된 상기 제 1 이미지를 상기 제 2 이미지 뒤로 오버랩하여 디스플레이 하되,
    상기 제 1 이미지 앞에 디스플레이되는 제 2 이미지는 투명(transparent)한 이미지인, HMD 디바이스.
  8. 제 1 항에 있어서,
    상기 서라운드 비디오 이미지의 상기 제 1 영역은 유저의 정면 방향을 기준으로 스레스홀드 범위 내의 방향 중 어느 한 방향인 상기 제 1 방향에 디스플레이된 영역이고,
    상기 서라운드 비디오 이미지의 상기 제 2 영역은 유저의 배면 방향을 기준으로 스레스홀드 범위 내의 방향 중 어느 한 방향인 상기 제 2 방향에 디스플레이된 영역인, HMD 디바이스.
  9. 제 1 항에 있어서,
    상기 썸네일 이미지는, 상기 서라운드 비디오 이미지 내에서의 시간 정보를 포함하고,
    상기 프로세서는,
    상기 썸네일 이미지를 상기 시간 정보들에 대응하는 위치에 상기 프로그래스 바에 인접하여 디스플레이 하는, HMD 디바이스.
  10. 제 1 항에 있어서,
    상기 서라운드 비디오 이미지의 상기 제 1 영역 및 상기 서라운드 비디오 이미지의 상기 제 2 영역 각각은 동일한 시간 정보에 대응하는 서라운드 비디오 이미지의 일부인, HMD 디바이스.
  11. 제 1 항에 있어서,
    상기 센서 유닛은 컨트롤 인풋을 더 디텍트하고, 디텍트된 컨트롤 인풋을 프로세서로 전달하는, HMD 디바이스.
  12. 제 11 항에 있어서,
    상기 썸네일 이미지는 메인 영역(main region) 및 서브 영역(sub region)을 포함하는, HMD 디바이스.
  13. 제 12 항에 있어서,
    상기 프로세서는,
    상기 서라운드 비디오 이미지 중 상기 제 1 방향에 대응하는 상기 제 1 영역을 디스플레이하고,
    상기 썸네일 이미지를 디스플레이하면, 상기 썸네일 이미지 중 상기 제 1 영역에 대응하는 상기 제 1 이미지를 상기 메인 영역에 디스플레이 하는, HMD 디바이스.
  14. 제 12 항에 있어서,
    상기 프로세서는,
    상기 썸네일 이미지의 상기 메인 영역에 상기 제 1 이미지를 디스플레이 하고,
    상기 제 1 이미지를 선택하는 제 1 컨트롤 인풋을 디텍트하면 상기 제 1 이미지에 대응하는 상기 서라운드 비디오 이미지의 상기 제 1 영역을 디스플레이 하는, HMD 디바이스.
  15. 제 12 항에 있어서,
    상기 프로세서는,
    상기 썸네일 이미지의 상기 메인 영역에 상기 제 1 이미지를 디스플레이 하고,
    상기 썸네일 이미지를 회전시키는 제 2 컨트롤 인풋을 디텍트하면 상기 제 2 이미지를 상기 메인 영역에 디스플레이 하되,
    상기 제 2 이미지는 상기 제 1 이미지와 인접한 이미지인, HMD 디바이스.
  16. 제 12 항에 있어서,
    상기 프로세서는,
    상기 썸네일 이미지의 상기 메인 영역에 상기 제 1 이미지를 디스플레이 하고,
    시간 스레스홀드 이상 상기 컨트롤 인풋을 디텍트하지 못한 경우,
    상기 제 2 이미지를 상기 메인 영역에 디스플레이 하는, HMD 디바이스.
  17. 제 12 항에 있어서,
    상기 썸네일 이미지는 상기 서라운드 비디오 이미지의 메인 이미지(main image)를 포함하고,
    상기 프로세서는,
    상기 썸네일 이미지를 디스플레이 하는 경우,
    상기 썸네일 이미지의 상기 메인 영역에 상기 메인 이미지를 디스플레이 하는, HMD 디바이스.
  18. 제 17 항에 있어서,
    상기 메인 이미지는,
    상기 서라운드 비디오 이미지 중 상기 HMD 디바이스의 전면 방향이 유저의 정면 방향일때 디스플레이 되는 영역을 상기 메인 이미지로 설정하는, HMD 디바이스.
  19. 제 12 항에 있어서,
    상기 프로세서는,
    상기 프로그래스 바의 제 1 측면에 인접하여 상기 메인 영역를 디스플레이 하고,
    상기 제 1 측면의 반대편인 제 2 측면에 인접하여 상기 서브 영역을 디스플레이 하는, HMD 디바이스.
  20. 제 12 항에 있어서,
    상기 프로그래스 바를 제어하는 프로그래스바 인터페이스를 더 포함하되, 상기 프로그래스바 인터페이스는 상기 프로그래스 바를 회전축을 기준으로 회전시키는 인터페이스이고,
    상기 프로세서는,
    상기 썸네일 이미지의 상기 메인 영역에 상기 제 1 이미지를 디스플레이하고,
    상기 프로그래스바 인터페이스에 기초하여 상기 프로그래스 바가 회전축을 기준으로 회전함을 디텍트하면, 상기 제 2 이미지를 상기 메인 영역에 디스플레이 하는, HMD 디바이스.
  21. HMD 디바이스의 제어 방법에 있어서,
    서라운드 비디오 이미지의 일부를 디스플레이 하는 단계;로서, 상기 HMD 디바이스의 전면 방향이 제 1 방향이면 상기 서라운드 비디오 이미지 중 제 1 영역을 디스플레이하고, 상기 HMD 디바이스의 전면 방향이 제 2 방향이면 상기 서라운드 비디오 이미지 중 제 2 영역을 디스플레이함,
    상기 서라운드 비디오 이미지와 관련된 썸네일 이미지 및 상기 서라운드 비디오 이미지의 진행 상황을 나타내는 프로그래스바를 디스플레이하는 단계;로서, 상기 썸네일 이미지는 상기 서라운드 비디오 이미지의 상기 제 1 영역에 대응하는 제 1 이미지 및 상기 서라운드 비디오 이미지의 상기 제 2 영역에 대응하는 제 2 이미지를 포함하는, HMD 디바이스의 제어 방법.
KR1020140048530A 2014-04-23 2014-04-23 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법 KR20150122355A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140048530A KR20150122355A (ko) 2014-04-23 2014-04-23 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법
US14/289,356 US20150309310A1 (en) 2014-04-23 2014-05-28 Head mounted display device displaying thumbnail image and method of controlling therefor
PCT/KR2014/005076 WO2015163529A1 (en) 2014-04-23 2014-06-10 Head mounted display device displaying thumbnail image and method of controlling therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140048530A KR20150122355A (ko) 2014-04-23 2014-04-23 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20150122355A true KR20150122355A (ko) 2015-11-02

Family

ID=54334625

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140048530A KR20150122355A (ko) 2014-04-23 2014-04-23 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법

Country Status (2)

Country Link
US (1) US20150309310A1 (ko)
KR (1) KR20150122355A (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017091019A1 (en) * 2015-11-27 2017-06-01 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
WO2017126797A1 (ko) * 2016-01-22 2017-07-27 삼성전자 주식회사 Hmd 디바이스 및 그 제어 방법
WO2017126730A1 (ko) * 2016-01-19 2017-07-27 엘지전자 주식회사 이동단말기 및 그 제어방법
WO2018043985A1 (en) * 2016-08-30 2018-03-08 Samsung Electronics Co., Ltd. Image display apparatus and method of operating the same
EP3342162A4 (en) * 2015-11-27 2018-07-25 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
WO2022231224A1 (ko) * 2021-04-28 2022-11-03 주식회사 피앤씨솔루션 파노라마 멀티 화면을 제공하는 증강현실 글라스 및 증강현실 글라스를 위한 파노라마 멀티 화면 제공 방법

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11019258B2 (en) 2013-08-21 2021-05-25 Verizon Patent And Licensing Inc. Aggregating images and audio data to generate content
US9451162B2 (en) 2013-08-21 2016-09-20 Jaunt Inc. Camera array including camera modules
US9911454B2 (en) 2014-05-29 2018-03-06 Jaunt Inc. Camera array including camera modules
US11108971B2 (en) 2014-07-25 2021-08-31 Verzon Patent and Licensing Ine. Camera array removing lens distortion
US9363569B1 (en) 2014-07-28 2016-06-07 Jaunt Inc. Virtual reality system including social graph
US10440398B2 (en) 2014-07-28 2019-10-08 Jaunt, Inc. Probabilistic model to compress images for three-dimensional video
US10701426B1 (en) 2014-07-28 2020-06-30 Verizon Patent And Licensing Inc. Virtual reality system including social graph
US9774887B1 (en) 2016-09-19 2017-09-26 Jaunt Inc. Behavioral directional encoding of three-dimensional video
EP3112986B1 (en) * 2015-07-03 2020-02-26 Nokia Technologies Oy Content browsing
US10042604B2 (en) * 2016-07-01 2018-08-07 Metrik LLC Multi-dimensional reference element for mixed reality environments
US10681341B2 (en) * 2016-09-19 2020-06-09 Verizon Patent And Licensing Inc. Using a sphere to reorient a location of a user in a three-dimensional virtual reality video
US11032535B2 (en) * 2016-09-19 2021-06-08 Verizon Patent And Licensing Inc. Generating a three-dimensional preview of a three-dimensional video
US11032536B2 (en) 2016-09-19 2021-06-08 Verizon Patent And Licensing Inc. Generating a three-dimensional preview from a two-dimensional selectable icon of a three-dimensional reality video
US10671237B2 (en) 2017-10-16 2020-06-02 Microsoft Technology Licensing, Llc Human-machine interface for presenting a user interface on a virtual curved visual surface
CN107958030B (zh) * 2017-11-17 2021-08-24 北京奇虎科技有限公司 视频封面推荐模型优化方法及装置
KR102477523B1 (ko) * 2017-12-22 2022-12-15 삼성전자주식회사 360 비디오에서 POI(Point of Interest) 정보를 제공하기 위한 장치 및 방법
US10694167B1 (en) 2018-12-12 2020-06-23 Verizon Patent And Licensing Inc. Camera array including camera modules
JP7350511B2 (ja) * 2019-05-14 2023-09-26 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017091019A1 (en) * 2015-11-27 2017-06-01 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
EP3342162A4 (en) * 2015-11-27 2018-07-25 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
US10685465B2 (en) 2015-11-27 2020-06-16 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
US11670022B2 (en) 2015-11-27 2023-06-06 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
WO2017126730A1 (ko) * 2016-01-19 2017-07-27 엘지전자 주식회사 이동단말기 및 그 제어방법
WO2017126797A1 (ko) * 2016-01-22 2017-07-27 삼성전자 주식회사 Hmd 디바이스 및 그 제어 방법
KR20170088181A (ko) * 2016-01-22 2017-08-01 삼성전자주식회사 Hmd 디바이스 및 그 제어 방법
US10845869B2 (en) 2016-01-22 2020-11-24 Samsung Electronics Co., Ltd. HMD device and control method therefor
WO2018043985A1 (en) * 2016-08-30 2018-03-08 Samsung Electronics Co., Ltd. Image display apparatus and method of operating the same
US10453246B2 (en) 2016-08-30 2019-10-22 Samsung Electronics Co., Ltd. Image display apparatus and method of operating the same
WO2022231224A1 (ko) * 2021-04-28 2022-11-03 주식회사 피앤씨솔루션 파노라마 멀티 화면을 제공하는 증강현실 글라스 및 증강현실 글라스를 위한 파노라마 멀티 화면 제공 방법

Also Published As

Publication number Publication date
US20150309310A1 (en) 2015-10-29

Similar Documents

Publication Publication Date Title
KR20150122355A (ko) 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법
US10678340B2 (en) System and method for providing user interface tools
EP3311250B1 (en) System and method for spawning drawing surfaces
KR20150132923A (ko) 썸네일 이미지를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법
Jo et al. Aroundplot: Focus+ context interface for off-screen objects in 3D environments
US20240029373A1 (en) 3d captions with face tracking
US20200227009A1 (en) Hmd device and method for controlling same
JP4413203B2 (ja) 画像呈示装置
US20200387286A1 (en) Arm gaze-driven user interface element gating for artificial reality systems
US10438411B2 (en) Display control method for displaying a virtual reality menu and system for executing the display control method
KR101920983B1 (ko) 헤드 마운트형 디스플레이 상에서의 정보의 디스플레이
KR102632795B1 (ko) 컨텐츠와 연관된 네비게이터 표시 방법 및 이를 구현한 전자 장치
US11023035B1 (en) Virtual pinboard interaction using a peripheral device in artificial reality environments
US10379345B2 (en) Virtual expansion of desktop
US20180005440A1 (en) Universal application programming interface for augmented reality
US10976804B1 (en) Pointer-based interaction with a virtual surface using a peripheral device in artificial reality environments
JP6332652B1 (ja) 表示制御装置、及びプログラム
KR102297514B1 (ko) 디스플레이 장치 및 그 제어 방법
US20240103680A1 (en) Devices, Methods, and Graphical User Interfaces For Interacting with Three-Dimensional Environments
US11023036B1 (en) Virtual drawing surface interaction using a peripheral device in artificial reality environments
US20230316634A1 (en) Methods for displaying and repositioning objects in an environment
US20230100689A1 (en) Methods for interacting with an electronic device
CN107982916B (zh) 信息处理方法、装置、电子设备及存储介质
JP6275809B1 (ja) 表示制御方法および当該表示制御方法をコンピュータに実行させるためのプログラム
US20240103681A1 (en) Devices, Methods, and Graphical User Interfaces for Interacting with Window Controls in Three-Dimensional Environments

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid