KR20150001425A - Head mount display apparatus and method for operating the same - Google Patents

Head mount display apparatus and method for operating the same Download PDF

Info

Publication number
KR20150001425A
KR20150001425A KR1020130074639A KR20130074639A KR20150001425A KR 20150001425 A KR20150001425 A KR 20150001425A KR 1020130074639 A KR1020130074639 A KR 1020130074639A KR 20130074639 A KR20130074639 A KR 20130074639A KR 20150001425 A KR20150001425 A KR 20150001425A
Authority
KR
South Korea
Prior art keywords
user
image
head
resolution
display
Prior art date
Application number
KR1020130074639A
Other languages
Korean (ko)
Other versions
KR102155001B1 (en
Inventor
김형준
손종현
조택일
최은지
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020130074639A priority Critical patent/KR102155001B1/en
Publication of KR20150001425A publication Critical patent/KR20150001425A/en
Application granted granted Critical
Publication of KR102155001B1 publication Critical patent/KR102155001B1/en

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0176Head mounted characterised by mechanical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02Viewing or reading apparatus
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02Viewing or reading apparatus
    • G02B27/06Viewing or reading apparatus with moving picture effect
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Abstract

The present invention relates to a head mount display device and a method for operating the same. The method for operating a head mount display device according to an embodiment of the present invention comprises the steps of: receiving an image of a first resolution; displaying some regions of the image of the first resolution according to a display mode of a second resolution lower than the first resolution; sensing the movement of a user′s head; and displaying other regions of the image of the first resolution according to the sensed movement of the user′s head, thereby improving user convenience.

Description

헤드 마운트 디스플레이 장치 및 그 동작방법{Head mount display apparatus and method for operating the same}[0001] The present invention relates to a head mount display apparatus and a method of operating the same,

본 발명은 헤드 마운트 디스플레이 장치 및 그 동작방법에 관한 것이며, 더욱 상세하게는 사용자 이용 편의성이 향상시킬 수 있는 헤드 마운트 디스플레이 장치 및 그 동작방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a head-mounted display device and a method of operating the same, and more particularly, to a head-mounted display device and a method of operating the same.

헤드 마운트 디스플레이 장치는 사용자의 머리에 착용하여 영상을 볼 수 있는 장치이다. 한편, 헤드 마운트 디스플레이 장치는, 사용자의 머리에 착용하므로, 사용자 입력을 수신하기 위한 수단이 제한적이다. A head-mounted display device is a device that can be worn on a user's head to view an image. On the other hand, since the head-mounted display device is worn on the head of the user, the means for receiving user input is limited.

이에 따라, 헤드 마운트 디스플레이 장치에서 사용자 입력을 위한 다양한 연구가 진행되고 있다. Accordingly, various studies for user input in a head mount display device are under way.

본 발명의 목적은, 사용자 이용 편의성이 향상시킬 수 있는 헤드 마운트 디스플레이 장치 및 그 동작방법을 제공함에 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a head-mounted display device and a method of operating the same, which can improve convenience for the user.

상기 목적을 달성하기 위한 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치의 동작방법은, 제1 해상도의 영상을 수신하는 단계와, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하는 단계와, 사용자의 머리의 움직임을 감지하는 단계와, 감지되는 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method of operating a head-mounted display device, the method comprising: receiving an image having a first resolution; Displaying a partial area of the image, detecting movement of the user's head, and displaying another part of the image of the first resolution according to the head movement of the user.

한편, 상기 목적을 달성하기 위한 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치는, 소정 영상을 표시하는 디스플레이와, 디스플레이에 표시되는 영상을 확대하는 렌즈부와, 사용자의 머리의 움직임을 감지하는 센서부와, 제1 해상도의 영상을 수신하며, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하도록 제어하며, 감지되는 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하도록 제어하는 프로세서를 포함한다. According to another aspect of the present invention, there is provided a head-mounted display device including a display for displaying a predetermined image, a lens unit for enlarging an image displayed on the display, And controls to display a part of the image of the first resolution according to the second resolution display mode which is smaller than the first resolution, And controlling the display unit to display a part of the image of the resolution.

본 발명의 일 실시예에 따른 헤드 마운트 디스플레이 장치는, 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시한 상태에서, 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시할 수 있다. 이에 의해, 고해상도 영상에 대한 다운 스케일링 없이, 신속하게, 해당 영상을 재생하여 표시할 수 있게 된다. 이에 따라, 사용자의 이용 편의성이 증대될 수 있다.The head-mounted display device according to an embodiment of the present invention displays a part of the image of the first resolution according to the second resolution display mode, Some areas can be displayed. This makes it possible to reproduce and display the image quickly without downscaling the high-resolution image. Accordingly, the usability of the user can be increased.

특히, 사용자의 머리의 상,하,좌, 또는 우 움직임에 대응하여, 표시 영상 영역을 이동하거나, 사용자의 머리의 앞 또는 뒤 움직임에 대응하여, 표시 영상을 줌인 또는 줌아웃할 수 있게 되어, 사용자가 원하는 영상 영역을 시청할 수 있게 된다.Particularly, in response to the upward, downward, leftward, or rightward movement of the user's head, the display image area can be moved or the display image can be zoomed in or out corresponding to the movement of the front or back of the user's head, The user can view the desired video area.

한편, 사용자의 시선에 대응하여, 메뉴 표시 위치를 가변할 수 있어, 사용자의 이용 편의성이 증대될 수 있다.On the other hand, the menu display position can be changed in accordance with the user's gaze, and the user's convenience of use can be increased.

도 1은 본 발명의 일 실시예에 따른 헤드 마운트 디스플레이 장치의 정면도이다.
도 2는 도 1의 헤드 마운트 디스플레이 장치의 배면도이다.
도 3은 도 1의 헤드 마운트 디스플레이 장치의 단면도이다.
도 4는 도 1의 헤드 마운트 디스플레이 장치의 간략한 내부 블록도이다.
도 5는 본 발명의 일실시예에 따른 헤드 마운트 디스플레이 장치의 동작 방법을 보여주는 순서도이다.
도 6 내지 도 16은 도 5의 동작 방법을 설명하기 위해 참조되는 도면이다.
1 is a front view of a head-mounted display device according to an embodiment of the present invention.
Fig. 2 is a rear view of the head-mounted display device of Fig. 1;
3 is a cross-sectional view of the head-mounted display device of Fig.
4 is a simplified internal block diagram of the head-mounted display device of Fig.
5 is a flowchart illustrating an operation method of a head-mounted display apparatus according to an exemplary embodiment of the present invention.
6 to 16 are drawings referred to explain the operation method of Fig.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다. Hereinafter, the present invention will be described in detail with reference to the drawings.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.The suffix "module" and " part "for components used in the following description are given merely for convenience of description, and do not give special significance or role in themselves. Accordingly, the terms "module" and "part" may be used interchangeably.

본 명세서에서 기술되는 헤드 마운트 디스플레이 장치는, 사용자의 머리에 착용가능한 헤드 마운트 디스플레 장치로서, 소정 영상을 표시할 수 있다. 특히, 영상을 표시하는 디스플레이와, 표시되는 영상을 확대하는 렌즈부를 구비하여, 사용자가, 디스플레이에 표시되는 영상을 확대된 영상으로 인식하도록 할 수 있다.The head mount display device described in this specification can display a predetermined image as a head mount display device that can be worn on a user's head. Particularly, a display for displaying an image and a lens unit for enlarging the displayed image are provided, so that the user can recognize the image displayed on the display as an enlarged image.

이하에서는 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치에 대해 기술한다. Hereinafter, a head-mounted display device according to an embodiment of the present invention will be described.

도 1은 본 발명의 일 실시예에 따른 헤드 마운트 디스플레이 장치의 정면도이고, 도 2는 도 1의 헤드 마운트 디스플레이 장치의 배면도이고, 도 3은 도 1의 헤드 마운트 디스플레이 장치의 단면도이다. Fig. 1 is a front view of a head-mounted display device according to an embodiment of the present invention, Fig. 2 is a rear view of the head-mounted display device of Fig. 1, and Fig. 3 is a sectional view of the head-

도면을 참조하면, 사용자(700)는, 헤드 마운트 디스플레이 장치(100)를 머리에 착용할 수 있다. 도 1과 같이, 눈을 덮는 형태로, 착용 가능하며, 표시 영상의 몰입감 향상을 위해, 외부광 등은 차단되도록 하는 것이 바람직하다.Referring to the drawings, the user 700 can wear the head-mounted display device 100 on the head. As shown in Fig. 1, it can be worn in the form of covering the eyes. In order to improve the immersion feeling of the display image, it is preferable that external light is blocked.

이러한 헤드 마운트 디스플레이 장치(100)를 착용한 사용자(700)는, 눕거나 앉아서, 재생되는 영상을 시청할 수 있게 된다. The user 700 wearing the head-mounted display device 100 can lie down or sit back and watch the reproduced image.

한편, 도 2와 같이, 헤드 마운트 디스플레이 장치(100)는 렌즈부(195L,195R)를 구비하며, 사용자의 눈에, 렌즈부(195L,195R)를 통해 확대되는 영상을 제공한다.2, the head-mounted display device 100 includes lens units 195L and 195R and provides an image enlarged to the user's eyes through the lens units 195L and 195R.

도 3은, 헤드 마운트 디스플레이 장치(100)의 상측 단면도를 나타낸다. 사용자(700)의 양안(710L,710R)에 일정 간격 이격되어, 헤드 마운트 디스플레이 장치(100)의 렌즈부(195L,195R)가 위치하며, 디스플레이(300L,300R)에서 각각 표시되는 영상은, 렌즈부(195L,195R)를 거쳐 확대되어, 사용자 양안(710L,710R)에 입사된다. 이에 따라, 사용자(700)는, 도면과 같이, 확대된 영상(300L,300R)을 인식할 수 있게 된다. 이때의 확대된 영상(300L,300R)은 허상 영상(virtual image)이다.Fig. 3 shows an upper cross-sectional view of the head-mounted display device 100. Fig. The images displayed on the displays 300L and 300R are respectively displayed on the display unit 300L and the display unit 300R by the lens units 195L and 195R of the head-mounted display device 100, which are spaced apart from the two eyes 710L and 710R of the user 700, Portions 195L and 195R, and is incident on the user's eyes 710L and 710R. As a result, the user 700 can recognize the enlarged images 300L and 300R. The enlarged images 300L and 300R at this time are virtual images.

도 4는 도 1의 헤드 마운트 디스플레이 장치의 간략한 내부 블록도이다.4 is a simplified internal block diagram of the head-mounted display device of Fig.

도면을 참조하면, 헤드 마운트 디스플레이 장치(100)는, 센서부(130), 통신 모듈(135), 메모리(140), 오디오 출력부(160), 프로세서(170), 디스플레이(180), 전원 공급부(190), 구동부(193) 및 렌즈부(195)를 구비할 수 있다. Referring to the drawings, a head-mounted display device 100 includes a sensor unit 130, a communication module 135, a memory 140, an audio output unit 160, a processor 170, a display 180, A driving unit 190, a driving unit 193, and a lens unit 195.

센서부(130)는, 헤드 마운트 디스플레이 장치(100)의 움직임 정보, 특히, 사용자의 머리의 움직임 정보를 감지하고, 센싱 신호를 발생시킬 수 있다.The sensor unit 130 may sense motion information of the head-mounted display device 100, in particular, motion information of the user's head, and generate a sensing signal.

예를 들어, 센서부(130)는, 모션 센서(미도시), 근접센서(미도시), 압력센서(미도시) 등 중 적어도 하나를 구비할 수 있다. For example, the sensor unit 130 may include at least one of a motion sensor (not shown), a proximity sensor (not shown), and a pressure sensor (not shown).

모션 센서(미도시)는 가속도 센서, 자이로 센서 등을 이용하여 헤드 마운트 디스플레이 장치(100)의 위치나 움직임 등을 감지한다. A motion sensor (not shown) senses the position, motion, and the like of the head mount display device 100 using an acceleration sensor, a gyro sensor, or the like.

가속도 센서는, X축, Y축, Z축 방향에 대한 가속도 센서를 구비할 수 있다. 한편, 자이로 센서는 각속도를 측정하는 센서로서, 기준 방향에 대해 돌아간 방향을 감지할 수 있다. The acceleration sensor may include an acceleration sensor for the X-axis, Y-axis, and Z-axis directions. On the other hand, the gyro sensor is a sensor for measuring angular velocity, and it can sense the direction of rotation about the reference direction.

근접센서(미도시)는 헤드 마운트 디스플레이 장치(100)로 접근하는 물체나, 헤드 마운트 디스플레이 장치(100)의 근방에 존재하는 물체의 유무 등을 기계적 접촉이 없이 검출할 수 있다.The proximity sensor (not shown) can detect an object approaching the head-mounted display device 100 or the presence of an object in the vicinity of the head-mounted display device 100 without mechanical contact.

압력센서(미도시)는 헤드 마운트 디스플레이 장치(100)에 압력이 가해지는지 여부와, 그 압력의 크기 등을 검출할 수 있다. 예를 들어, 사용자 손에 의한 압력을 감지할 수 있다.A pressure sensor (not shown) can detect whether pressure is applied to the head-mounted display device 100, the magnitude of the pressure, and the like. For example, it is possible to detect pressure by the user's hand.

통신 모듈(135)은, 외부 장치와의 통신을 위한 인터페이스를 제공할 수 있다. 이를 위해, 통신 모듈(135)은, 이동통신 모듈(미도시), 무선 인터넷 모듈(미도시), 근거리 통신 모듈(미도시), 및 GPS 모듈(미도시) 등 중 적어도 하나를 포함할 수 있다. 예를 들어, 무선 인터넷 모듈(미도시)을 통해, WiFi 통신을 수행할 수 있으며, 근거리 통신 모듈(미도시)를 통해, NFC(Near Field Communication) 통신을 수행할 수 있다.The communication module 135 may provide an interface for communication with an external device. The communication module 135 may include at least one of a mobile communication module (not shown), a wireless Internet module (not shown), a short distance communication module (not shown), and a GPS module (not shown) . For example, WiFi communication can be performed through a wireless Internet module (not shown), and NFC (Near Field Communication) communication can be performed through a short distance communication module (not shown).

한편, 통신 모듈(135)은, 이동 단말기(미도시) 또는 외부 서버(미도시)와, 데이터를 교환할 수 있다. 구체적으로, 통신 모듈(135)은, 이동 단말기로부터, 영상 컨텐츠 등 각종 데이터를 수신할 수 있다. 한편, 이동 단말기로, 헤드 마운트 디스플레이 장치(100)의 상태 정보 등을 전송할 수도 있다.Meanwhile, the communication module 135 can exchange data with a mobile terminal (not shown) or an external server (not shown). Specifically, the communication module 135 can receive various data such as image contents from the mobile terminal. On the other hand, status information of the head mounted display device 100 and the like may be transmitted to the mobile terminal.

한편, 통신 모듈(135)은, 이동 단말기(미도시) 또는 외부 서버(미도시)로부터, 사용자(700)의 시력 정보를 수신할 수 있다.On the other hand, the communication module 135 can receive the vision information of the user 700 from a mobile terminal (not shown) or an external server (not shown).

메모리(140)는, 헤드 마운트 디스플레이 장치(100) 내의 프로세서(170)의 처리 또는 제어를 위한 프로그램이 저장될 수도 있고, 입력되거나 출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. The memory 140 may store a program for processing or control of the processor 170 in the head mounted display device 100 and may perform functions for temporary storage of input or output data.

한편, 메모리(140)는, 외부 장치에서 수신되는 컨텐츠 데이터를 일시적으로 또는 일정 기간 동안 저장할 수 있다. Meanwhile, the memory 140 may store the content data received from the external device temporarily or for a predetermined period of time.

오디오 출력부(160)는, 오디오 신호를 출력할 수 있다. 예를 들어, 디스플레이(180)에서 재생되는 컨텐츠의 오디오 신호를 출력할 수 있다. 한편, 오디오 출력부(160)는, 스피커를 구비할 수 있으며, 또는, 외부로 오디오 출력을 위한 오디오 출력 단자를 구비할 수도 있다.The audio output unit 160 can output an audio signal. For example, the audio signal of the content reproduced on the display 180 can be output. The audio output unit 160 may include a speaker or an audio output terminal for audio output to the outside.

프로세서(170)는, 헤드 마운트 디스플레이 장치(100) 내의 각 유닛의 전반적인 동작을 제어한다. The processor 170 controls the overall operation of each unit in the head mounted display device 100. [

예를 들어, 프로세서(170)는, 사용자 입력에 기초하여, 메모리(140)에 저장된 또는 통신 모듈(1345)을 통해 수신되는 영상 컨텐츠를 재생하여, 해당 비디오 신호와 오디오 신호를, 각각 디스플레이(180)와 오디오 출력부(160)에 출력할 수 있다.For example, the processor 170 may play back video content stored in the memory 140 or received via the communication module 1345 based on the user input, and output the video and audio signals to the display 180 And the audio output unit 160, as shown in FIG.

다른 예로, 프로세서(170)는, 센서부(130)에서 감지되는, 헤드 마운트 디스플레이 장치(100)의 움직임 정보, 특히, 사용자의 머리의 움직임 정보에 기초하여, 대응하는 동작을 수행하도록 제어할 수 있다.As another example, the processor 170 may control to perform a corresponding operation based on motion information of the head-mounted display device 100, in particular, motion information of the user's head, which is sensed by the sensor unit 130 have.

본 발명의 실시예와 관련하여, 프로세서(170)는, 제1 해상도의 영상을 수신하며, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하도록 제어하며, 감지되는 사용자(700) 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하도록 제어할 수 있다.In accordance with an embodiment of the present invention, the processor 170 receives an image of a first resolution and controls to display some of the images of the first resolution in accordance with a second resolution display mode that is smaller than the first resolution , It is possible to control to display a different part of the image of the first resolution according to the head movement of the user 700 to be sensed.

예를 들어, 프로세서(170)는, 사용자(700) 머리의 상,하,좌, 또는 우 움직임에 대응하여, 제1 해상도의 영상의 다른 일부 영역을 표시하도록 제어할 수 있다.For example, the processor 170 may control to display another partial area of the image of the first resolution, corresponding to the up, down, left, or right movement of the head of the user 700. [

다른 예로, 프로세서(170)는, 사용자(700) 머리의 앞 또는 뒤 움직임에 대응하여, 표시되는 제1 해상도의 일부 영역을 줌인 하거나 줌아웃하여 표시하도록 제어할 수 있다.As another example, the processor 170 may control to zoom in or zoom out a portion of the displayed first resolution, corresponding to the forward or backward movement of the user 700 head.

한편, 프로세서(170)는, 메뉴 표시 모드에서, 사용자(700)의 시선에 대응하는 영역에, 메뉴를 표시하도록 제어할 수 있다.On the other hand, the processor 170 can control to display a menu in an area corresponding to the line of sight of the user 700 in the menu display mode.

한편, 프로세서(170)는, 감지되는 사용자(700) 머리 움직임에 따라, 출력되는 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변할 수 있다.Meanwhile, the processor 170 may change at least one of the frequency, the magnitude, and the phase of the audio signal to be output according to the motion of the user 700 sensed.

한편, 프로세서(170)는, 통신 모듈(135)을 통해 수신되는 사용자(700)의 시력 정보에 기초하여, 표시할 영상의 포커싱을 조절할 수 있다.On the other hand, the processor 170 can adjust the focusing of the image to be displayed based on the vision information of the user 700 received via the communication module 135. [

한편, 프로세서(170)는, 디스플레이(180)에 표시되는 영상의 컨텐츠 종류에 따라, 사용자(700)의 움직임에 대응하는 동작을 가변할 수 있다.The processor 170 may vary the operation corresponding to the motion of the user 700 according to the type of the image displayed on the display 180. [

한편, 프로세서(170)는, 프로세서(170)는, 사용자(700) 눈과 렌즈부(195) 사이의 거리를 가변하도록 제어할 수 있다. On the other hand, the processor 170 of the processor 170 may control the distance between the eye of the user 700 and the lens unit 195 to be variable.

디스플레이(180)는, 텍스트 또는 이미지 등을 표시할 수 있다. 특히, 디스플레이(180)는, 소정 영상을 표시할 수 있다. The display 180 may display text, images, and the like. In particular, the display 180 can display a predetermined image.

한편, 디스플레이(180)는, 메뉴 표시 모드에서, 사용자(700)의 시선에 대응하는 영역에, 메뉴를 표시할 수 있다.On the other hand, in the menu display mode, the display 180 can display a menu in an area corresponding to the line of sight of the user 700. [

전원 공급부(190)는, 프로세서(170)의 제어에 의해, 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다.The power supply unit 190 can supply power necessary for the operation of each component under the control of the processor 170. [

한편, 구동부(193)는, 프로세서(170)의 제어에 의해, 사용자(700) 눈과 렌즈부(195) 사이의 거리를 가변할 수 있다. 이를 위해, 구동부(193)는, 스텝핑 모터 등과 같은, 렌즈부 이동 부재(미도시)를 구비할 수 있다. 이러한 모터의 동작에 의해, 사용자(700) 눈과 렌즈부(195) 사이의 거리가 가변될 수 있다.On the other hand, the driving unit 193 can vary the distance between the eyes of the user 700 and the lens unit 195 under the control of the processor 170. [ To this end, the driving unit 193 may include a lens unit moving member (not shown) such as a stepping motor or the like. The distance between the eye of the user 700 and the lens portion 195 can be varied by the operation of this motor.

도 5는 본 발명의 일실시예에 따른 헤드 마운트 디스플레이 장치의 동작 방법을 보여주는 순서도이고, 도 6 내지 도 16은 도 5의 동작 방법을 설명하기 위해 참조되는 도면이다.5 is a flowchart showing an operation method of a head-mounted display apparatus according to an embodiment of the present invention, and FIGS. 6 to 16 are views referred to explain the operation method of FIG.

먼저, 헤드 마운트 디스플레이 장치(100)는, 제1 해상도의 영상을 수신한다(S510).First, the head-mounted display device 100 receives an image having a first resolution (S510).

헤드 마운트 디스플레이 장치(100)의 통신 모듈(135)은 외부 장치로부터 제1 해상도의 영상을 수신한다. 그리고, 수신되는 제1 해상도의 영상을 프로세서(170)로 전송한다.The communication module 135 of the head mounted display device 100 receives an image of the first resolution from the external device. Then, the received image having the first resolution is transmitted to the processor 170.

예를 들어, 제1 해상도의 영상은, UD(Ultra Definition) 영상, 파노라마(panorama) 영상, 21:9의 해상도를 가지는 와이드 시네마(wide cinema) 영상 등일 수 있다.For example, the image having the first resolution may be a UD (Ultra Definition) image, a panorama image, a wide cinema image having a resolution of 21: 9, and the like.

한편, 헤드 마운트 디스플레이 장치(100) 내의 디스플레이(180)가, UD 영상, 파노라마 영상, 21:9의 해상도 영상을 지원하지 않는 경우, 이러한 영상을 수신하는 프로세서(170)는 스케일링 작업을 통해, 디스플레이(180) 해상도로 다운 스케일링(down scaling)을 수행하여야 한다. 이러한 경우, 다운 스케일링으로 인한 재생 시간 지연 요소가 발생할 수 있다. On the other hand, if the display 180 in the head-mounted display device 100 does not support a UD image, a panoramic image, or a 21: 9 resolution image, the processor 170, which receives the image, It is necessary to perform down scaling with a resolution of (180). In this case, a playback time delay element due to downscaling may occur.

본 발명에서는 이러한 점을 해결하기 위해, 프로세서(170)에서, 별도의 스케일링 없이, 제1 해상도의 영상 중 일부 영역을 디스플레이(180)에 표시하도록, 일부 영역을 출력하는 것으로 한다.In order to solve this problem, in the present invention, the processor 170 outputs a part of the image so that a part of the image of the first resolution is displayed on the display 180 without scaling.

예를 들어, 디스플레이(180)가 1920X1080의 HD 영상의 표시가 가능하다면, 프로세서(170)는, 3840X2160의 UD 해상도의 영상을 수신하는 경우, UD 영상을 HD 영상으로 다운 스케일링하지 않고, UD 영상 중 HD 영상 영역에 대응하거나 그 이하인, UD 영상을 일부 영상 영역을 출력할 수 있다. For example, if the display 180 is capable of displaying an HD image of 1920 x 1080, the processor 170, when receiving an image of the UD resolution of 3840X2160, does not downscale the UD image into an HD image, It is possible to output a partial image region of the UD image corresponding to or below the HD image region.

다음, 헤드 마운트 디스플레이 장치(100)는, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시한다(S520). Next, the head-mounted display device 100 displays a part of the image of the first resolution according to the second resolution display mode which is smaller than the first resolution (S520).

헤드 마운트 디스플레이 장치(100)의 디스플레이(180)는, 표시 가능한 해상도에 맞게, 프로세서(170)에서, 출력되는 제1 해상도의 영상 중 일부 영역만을 표시할 수 있다.The display 180 of the head mounted display apparatus 100 can display only a part of the image of the first resolution outputted by the processor 170 in accordance with the displayable resolution.

상술한 바와 같이, 프로세서(170)에서 UD 영상의 일부 영역이 출력되는 경우, 디스플레이(180)는, UD 영상의 일부 영역만을 표시할 수 있다. 이에 따라, 사용자는, 입력되는 영상 중 일부 영역만을 시청할 수 있게 된다.As described above, when the processor 170 outputs a partial area of the UD image, the display 180 can display only a partial area of the UD image. Accordingly, the user can view only a part of the input image.

도 6은 사용자(700)가 헤드 마운트 디스플레이 장치(100)를 착용하여, 제1 해상도의 영상(610) 중 일부 영역에 해당하는 영상(620)을 표시하는 것을 예시한다. 이때, 일부 영역에 해당하는 영상(620)의 가로 크기는 S1인 것을 알 수 있다.6 illustrates that the user 700 wears the head-mounted display device 100 to display an image 620 corresponding to a part of the image 610 having the first resolution. At this time, it can be seen that the horizontal size of the image 620 corresponding to a certain area is S1.

한편, 도 6에서는, 디스플레이(180)에 제1 해상도의 영상 중 일부 영역에 해당하는 영상(620)과 함께, 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(625)가 표시되는 것을 예시한다. 이에 의해, 사용자는, 시청하고 있는 영상이, 전체 영상 영역 중 일부 영상 영역인 것을 인식할 수 있게 된다.6 illustrates an example in which an object 625 indicating a partial display mode or a second resolution display mode is displayed on the display 180 together with an image 620 corresponding to a partial region of the image having the first resolution . As a result, the user can recognize that the video that the user is viewing is a partial video region of the entire video region.

다음, 헤드 마운트 디스플레이 장치(100)는, 사용자(700) 머리의 움직임을 감지한다(S530).Next, the head-mounted display device 100 senses the movement of the head of the user 700 (S530).

센서부(130)는, 사용자(700)의 머리의 움직임을 감지할 수 있다. 구체적으로, 가속도 센서를 통해, X축, Y축, Z축 방향에 대한 가속도를 감지하고, 자이로 센서를 통해, 각속도를 감지할 수 있다.The sensor unit 130 can sense the movement of the head of the user 700. More specifically, the acceleration sensor senses the acceleration in the X-axis, Y-axis, and Z-axis directions, and the angular velocity can be sensed through the gyro sensor.

프로세서(170)는, 센서부(130)에서 감지되는 센싱 신호에 기초하여, 사용자(700)의 머리의 움직임이, 상,하,좌, 또는 우로 이동인지, 앞, 뒤로 움직인지, 회전 움직임인 지 여부를 판단할 수 있다.The processor 170 determines whether the movement of the head of the user 700 is upward, downward, leftward, or rightward movement, forward, backward movement, or rotational movement based on the sensing signal sensed by the sensor unit 130 Or not.

다음, 헤드 마운트 디스플레이 장치(100)는, 감지되는 사용자(700) 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시한다(S540).Next, the head-mounted display device 100 displays another part of the image of the first resolution according to the head movement of the user 700 sensed (S540).

프로세서(170)는, 감지되는 사용자의 머리 움직임에 따라, 대응하는 동작을 수행한다. The processor 170 performs a corresponding operation in accordance with the head movement of the user to be sensed.

특히, 프로세서(170)는, 제1 해상도의 영상 중 일부 영역을 디스플레이(180)에 출력하고 있는 상태에서, 사용자의 머리 움직임이 감지되면, 제1 해상도의 영상 중 다른 일부 영역을 디스플레이(180)에 출력할 수 있다.In particular, when the head movement of the user is detected, the processor 170 outputs some of the images of the first resolution to the display 180 in a state where some of the images of the first resolution are being output to the display 180, .

구체적으로, 프로세서(170)는, 사용자(700) 머리의 상,하,좌, 또는 우 움직임에 대응하여, 제1 해상도의 영상의 다른 일부 영역을 표시하도록 제어할 수 있다.Specifically, the processor 170 may control to display another partial area of the image of the first resolution, corresponding to the up, down, left, or right movement of the head of the user 700. [

도 6은, 사용자(700)의 머리(705)의 움직임이, 상,하,좌, 또는 우로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상 영역이 그에 대응하여, 상,하,좌, 또는 우로 이동하는 것을 예시한다. 이에 의해, 사용자는, 제1 해상도의 영상 중 미쳐 시청하고 있지 못한 영역 영역을 간단하게 확인할 수 있게 된다.6 illustrates that when the movement of the head 705 of the user 700 is an upward, downward, left, or right movement, the image area displayed on the display 180 corresponds to the upper, Or moving to the right. Thereby, the user can easily check the area of the image of the first resolution that has not been viewed and watched.

도 7은 도 6과 같이, 제1 해상도의 영상(610) 중 일부 영역의 영상(9670)이 표시되나, 그 일부 영역의 수직 크기는, 제1 해상도 영상의 수직 크기와 동일하나, 수평 크기(S2)가 더 작은 것을 예시한다.7, an image 9670 of a partial region of the image 610 having the first resolution is displayed, but the vertical size of the partial region is equal to the vertical size of the first resolution image, S2) are smaller.

이러한 상태에서, 사용자(700)의 머리(705)의 움직임이, 좌 또는 우로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상 영역이 그에 대응하여, 좌 또는 우로 이동하는 것을 예시한다. In this state, it is illustrated that when the movement of the head 705 of the user 700 is to the left or to the right, the image area displayed on the display 180 moves to the left or right correspondingly.

한편, 프로세서(170)는, 사용자(700) 머리의 상 또는 하 움직임에 대응하여, 표시되는 영상 영역이 좌 또는 우로 이동하도록 제어할 수 있다.On the other hand, the processor 170 can control the displayed image area to move left or right corresponding to the upward or downward movement of the head of the user 700. [

구체적으로, 사용자(700)의 머리(705)의 움직임이, 상 또는 하로 이동인 경우, 좌 또는 우로 이동인 경우와 마찬가지로, 디스플레이(180)에 표시되고 있는 영상 영역이 좌 또는 우로 이동하는 것도 가능하다.Specifically, when the movement of the head 705 of the user 700 is an upward or downward movement, it is also possible for the image area displayed on the display 180 to move left or right similarly to the case of moving left or right Do.

한편, 도 7에서는, 디스플레이(180)에 제1 해상도의 영상 중 일부 영역에 해당하는 영상(670)과 함께, 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(675)가 표시되는 것을 예시한다. 이에 의해, 사용자는, 시청하고 있는 영상이, 전체 영상 영역 중 일부 영상 영역인 것을 인식할 수 있게 된다.7 illustrates an example in which an object 675 representing a partial display mode or a second resolution display mode is displayed on the display 180 together with an image 670 corresponding to a part of the image of the first resolution . As a result, the user can recognize that the video that the user is viewing is a partial video region of the entire video region.

한편, 프로세서(170)는, 사용자(700) 머리의 앞 또는 뒤 움직임에 대응하여, 표시되는 제1 해상도의 일부 영역을 줌인 하거나 줌아웃하여 표시하도록 제어할 수 있다.On the other hand, the processor 170 can control to zoom in or zoom out a part of the displayed first resolution corresponding to the movement of the user 700 in front of or behind the head.

한편, 도 6 및 도 7에서는 도시하지 않았지만, 사용자(700)가 현재 시청하고 있는 영상 영역 외의 영역에, 사용자가 관심 있어 하는 다른 영상 영역, 또는 전체 영상 영역 중 중요한 영상 영역이 존재하는 경우, 프로세서(170)는, 사용자의 시청 유도를 위한, 인디케이터를 표시하도록 제어할 수도 있다. 이에 의해, 사용자 관심 영역 또는 중요 영역에 대한 시청이 가능하게 된다. 6 and 7, when there is an important image area among other image areas or entire image areas that the user is interested in in an area other than the image area currently viewed by the user 700, The controller 170 may control to display an indicator for inducing the user to watch. Thereby, it becomes possible to view the user interest area or the important area.

도 8은, 사용자(700)의 머리(705)의 움직임이, 뒤로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌아웃하여 표시하는 것을 예시한다. 8 illustrates an example in which the image displayed on the display 180 is zoomed out and displayed when the movement of the head 705 of the user 700 is the backward movement.

즉, 제1 해상도의 영상(610) 중 일부 영역에 해당하는 영상(620)이 표시되다가, 뒤로 이동 움직임에 따라, 제1 해상도의 영상의 전 영역에 해당하는 영상(622)이 표시될 수 있다.That is, the image 620 corresponding to a part of the image 610 having the first resolution is displayed, and the image 622 corresponding to the entire region of the image having the first resolution can be displayed in accordance with the backward movement .

도면에서는 일부 영역에 해당하는 영상(620)의 가로 크기를 S1으로 하고, 전 영역에 해당하는 영상(622)의 가로 크기를 S3로 하여, S3의 크기가 더 큰 것으로 도시하나, 이와 달리, 그 크기는 동일한 것도 가능하다. 즉, 전 영역에 해당하는 영상(622)이 다운 스케일링되어, 표시되는 것이 가능하다.In the drawing, the horizontal size of the image 620 corresponding to a certain region is denoted by S1, the horizontal size of the image 622 corresponding to the entire region is denoted by S3, and the size of S3 is shown as being larger. The same size is possible. That is, the image 622 corresponding to the entire area can be down-scaled and displayed.

이와 같이, 사용자가 제1 해상도 영상의 전 영역의 영상(622)을 시청할 수 있게 되어, 사용자의 이용 편의성이 증대된다.In this manner, the user can view the entire region 622 of the first resolution image, thereby increasing the usability of the user.

한편, 도면과 달리, 사용자(700)의 머리(705)의 움직임이, 뒤로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌인하는 것도 가능하다. On the other hand, unlike the drawing, it is also possible to zoom in the image displayed on the display 180 when the movement of the head 705 of the user 700 is the backward movement.

다음, 도 9는, 사용자(700)의 머리(705)의 움직임이, 앞으로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌인하여 표시하는 것을 예시한다. Next, FIG. 9 illustrates that the image displayed on the display 180 is zoomed in and displayed when the movement of the head 705 of the user 700 is forward movement.

즉, 제1 해상도의 영상(610)의 전 영역에 해당하는 영상(622)이 표시되다가, 앞으로 이동 움직임에 따라, 제1 해상도의 영상(610) 중 일부 영역에 해당하는 영상(620)이 표시될 수 있다.That is, the image 622 corresponding to the entire area of the image 610 having the first resolution is displayed, and the image 620 corresponding to a part of the image 610 having the first resolution is displayed .

한편, 도면과 달리, 사용자(700)의 머리(705)의 움직임이, 앞으로로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌아웃하는 것도 가능하다. On the other hand, unlike the drawing, it is also possible to zoom out the image displayed on the display 180 when the movement of the head 705 of the user 700 is to move forward.

한편, 프로세서(170)는, 감지되는 사용자(700) 머리 움직임에 따라, 출력되는 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변할 수 있다.Meanwhile, the processor 170 may change at least one of the frequency, the magnitude, and the phase of the audio signal to be output according to the motion of the user 700 sensed.

도 10은, 사용자(700)의 머리(705)의 움직임이, 앞으로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌인하여 표시되고, 그에 따라 출력되는 오디오 신호의 크기가 커지는 것을 예시한다.10 illustrates that the image displayed on the display 180 is zoomed in and displayed when the movement of the head 705 of the user 700 moves forward and the size of the output audio signal is increased accordingly .

도면과 같이, 영상 줌인시, 사용자 몰입감을 증대시키기 위해, 헤드 마운트 디스플레이 장치(100)의 오디오 출력부(170)는, 제1 사운드(sound 1) 보다 크기(amplitude)가 더 큰 제2 사운드(sound 2)를 출력할 수 있다. 그 외, 주파수를 증가시키거나, 도플러 효과와 같이, 위상 차이를 점차적으로 감소시키거나, 이들의 조합도 가능하다.As shown in the drawing, the audio output unit 170 of the head-mounted display device 100 may include a second sound (sound 1) having a larger amplitude than the first sound (sound 1) sound 2) can be output. In addition, it is also possible to increase the frequency, to gradually decrease the phase difference, such as the Doppler effect, or a combination thereof.

한편, 사용자(700)의 머리(705)의 움직임이, 도 9와 같은 뒤로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌아웃하고, 그에 따라 출력되는 오디오 신호의 크기를 작게하거나, 주파수를 작게하거나, 위상 차이를 크게하거나, 또는 이들의 조합도 가능하다.On the other hand, when the movement of the head 705 of the user 700 is the backward movement as shown in Fig. 9, the image displayed on the display 180 is zoomed out, the size of the output audio signal is reduced, The phase difference may be increased, or a combination thereof may be possible.

한편, 사용자(700)의 머리(705)의 움직임이, 도 7 또는 도 8과 같은 상,하,좌, 또는 우 움직임인 경우, 프로세서(170)는, 오디오 출력부(170)에서 출력되는 오디오 신호의, 주파수, 크기, 위상 중 적어도 하나늘 가변할 수 있다.7 or 8, the processor 170 determines whether or not the audio output from the audio output unit 170 is an audio output from the audio output unit 170, At least one of the frequency, the magnitude, and the phase of the signal can be varied.

특히, 방향성 있는 오디오 신호를 출력할 수 있다. 예를 들어, 오디오 신호의 주파수 대역에서의 채널 간의 부호를 바꾸거나, 채널간의 Complex value를 조절하거나, 채널 간의 위상을 조절하거나, 각 주파수별 게인을 조절할 수 있다.In particular, a directional audio signal can be output. For example, it is possible to change the sign between the channels in the frequency band of the audio signal, adjust the complex value between the channels, adjust the phase between the channels, or adjust the gain for each frequency.

한편, 프로세서(170)는, 사용자(700)의 머리(705)의 움직임이, 도 7 또는 도 8과 같은 상,하,좌, 또는 우 움직임인 경우, 표시되는 영상의 오브젝트 변동에 따라, 해당 오브젝트에 대한 오디오 신호를 출력하도록 제어할 수 있다. On the other hand, when the movement of the head 705 of the user 700 is an upward, downward, left, or right movement as shown in FIG. 7 or 8, It is possible to control to output an audio signal for the object.

재생되는 영상 컨텐츠의 오디오 부호화시, 오브젝트별 코딩이 수행되고, 오브젝트별 코딩이 수행된, 오디오 데이터가, 헤드 마운트 디스플레이 장치(100)에 수신되는 경우, 프로세서(170)는, 사용자(700)의 머리(705)의 움직임에 대응하여, 오브젝트별 오디오 신호 재생을 수행할 수 있다.When the head-mounted display device 100 receives audio data, in which the object-based coding is performed and the object-specific coding is performed in audio coding of the reproduced image content, In response to the movement of the head 705, audio signals can be reproduced for each object.

도 11은 사용자(700)의 머리(705)의 움직임이 좌 이동인 경우, 표시되는 영상(620)을 좌로 이동시켜, 특정 오브젝트를 포함하는 영상(1120)을 표시하는 것을 예시한다. 11 illustrates an example of displaying the image 1120 including a specific object by moving the displayed image 620 to the left when the movement of the head 705 of the user 700 is the leftward movement.

이때, 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(1125)가 함께 표시될 수 있다. 이에 의해, 사용자는, 시청하고 있는 영상이, 전체 영상 영역 중 일부 영상 영역인 것을 인식할 수 있게 된다.At this time, an object 1125 indicating some display mode or second resolution display mode may be displayed together. As a result, the user can recognize that the video that the user is viewing is a partial video region of the entire video region.

도면을 참조하면, 좌 이동 전 표시되는 영상(620)은, 자동차의 일부 영역을 포함하는 영상이고, 좌 이동 후 표시되는 영상(1120)은, 기타 연주자를 포함하는 영상임을 알 수 있다. Referring to the drawing, it can be seen that the image 620 displayed before the left movement is an image including a part of the automobile, and the image 1120 displayed after the left movement is the image including the guitar player.

영상 컨텐츠에 대한 오디오 코딩이, 자동차, 기타 연주자 별로, 오브젝트 코딩이 수행된 경우, 프로세서(170)는, 좌 이동 전 표시되는 영상(620)에 대응하여, 자동차와 관련 있는 제3 사운드(sound 3)를 출력할 수 있으며, 좌 이동 후 표시되는 영상(1120)에 대응하여, 기타 연주자와 관련 있는 제4 사운드(sound 4)를 출력할 수 있다.When the object coding is performed for the audio content of the video content by the car or the guitar player, the processor 170 generates a third sound (sound 3) related to the car, corresponding to the video 620 displayed before the left movement, And output a fourth sound (sound 4) related to the guitar player corresponding to the displayed image 1120 after the left movement.

한편, 오브젝트 코딩이 수행되지 않은 경우라도, 프로세서(170)는, 사용자(700)의 머리(705)의 움직임이, 도 7 또는 도 8과 같은 상,하,좌, 또는 우 움직임인 경우, 표시되는 영상의 이동에 맞추어, 출력되는 오디오 신호의, 주파수, 크기, 위상 중 적어도 하나를 가변할 수 있다.On the other hand, even when object coding is not performed, the processor 170 determines whether the motion of the head 705 of the user 700 is an upward, downward, leftward, or rightward motion as shown in FIG. 7 or 8, At least one of the frequency, the size, and the phase of the audio signal to be output can be varied in accordance with the movement of the image.

도 12는 복수의 헤드 마운트 디스플레이 장치의 사용 예를 예시한다.12 illustrates an example of use of a plurality of head-mounted display devices.

제1 사용자(700a)와 제2 사용자(700b) 사이에서, 동일 컨텐츠를 재생하여 실행하는 경우, 예를 들어, 2인용 게임 컨텐츠를 실행하는 경우, 제1 사용자(700a)가 착용한 제1 헤드 마운트 디스플레이 장치(100a)와 제2사용자(700b) 착용한 제2 헤드 마운트 디스플레이 장치(100b)는,서로 또는 경유하에 데이터를 교환할 수 있다.For example, when playing the same contents between the first user 700a and the second user 700b and executing the same contents, for example, when the game contents for two players are executed, the first user 700a worn by the first user 700a The mount display apparatus 100a and the second head mounted display apparatus 100b worn by the second user 700b can exchange data with each other or via the network.

그리고, 동일 컨텐츠의 영상 해상도가 제1 해상도인 경우, 각 헤드 마운트 디스플레이 장치(100a,100b)는 제1 해상도 보다 낮은 제2 해상도의 영상을 표시할 수 있다. 특히, 해당 사용자가 실행하고 있는 게임 영상을 표시할 수 있다.When the image resolution of the same content is the first resolution, each of the head-mounted display devices 100a and 100b can display an image having a second resolution lower than the first resolution. In particular, a game image being executed by the user can be displayed.

도면과 같이, 2인용 게임 컨텐츠의 전체 영상(1210)이, 제1 사용자용 영상과 제2 사용자용 영상을 포함하는 경우, 제1 헤드 마운트 디스플레이 장치(100a)는, 제1 사용자용 영상(1220)을 표시하고, 제2 헤드 마운트 디스플레이 장치(100b)는, 제2 사용자용 영상(1230)을 표시할 수 이따.As shown in the drawing, when the entire image 1210 of the game contents for two users includes the first user image and the second user image, the first head-mounted display device 100a displays the first user image 1220 And the second head mounted display device 100b can display the second user image 1230,

이때, 제1 사용자용 영상(1220), 제2 사용자용 영상(1230)과 함께, 각각 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(1225,1235)가, 각각 표시될 수 있다. 이에 의해, 2인용 영상 중 어느 사용자를 위한 영상인 지를 확인할 수 있게 된다.At this time, objects 1225 and 1235 indicating a partial display mode or a second resolution display mode, respectively, can be displayed together with the first user image 1220 and the second user image 1230, respectively. As a result, it can be confirmed which one of the two-person images is the image for the user.

한편, 도 12에서, 각 사용자를 위한, 일부 영상이 표시된 상태에서, 도 6 또는 도 7과 같은, 상,하,좌, 또는 우 움직임이 있는 경우, 다른 사용자를 위한 영상이 표시되는 것도 가능하다. 즉, 제1 사용자(700a)가 머리(705)를 우로 이동하는 경우, 제1 헤드 마운트 디스플레이 장치(100a)는, 제1 사용자용 영상(1220)을 제2 사용자용 영상(1230)으로 교체하여 표시할 수 있다.On the other hand, in FIG. 12, it is also possible for an image for another user to be displayed when there is an upward, downward, leftward, or rightward motion as shown in FIG. 6 or 7 while a partial image for each user is displayed . That is, when the first user 700a moves head 705 to the right, the first head-mounted display device 100a replaces the first user image 1220 with the second user image 1230 Can be displayed.

한편, 줌인, 줌아웃도 가능하다. 즉, 도 8과 같이, 뒤로 이동 움직임이 있는 경우, 제1 헤드 마운트 디스플레이 장치(100a)는, 제1 사용자용 영상(1220)을 표시하다가, 줌아웃하여, 전체 영상(1210)을 표시할 수도 있다.On the other hand, it is possible to zoom in and zoom out. 8, the first head-mounted display device 100a may display the first user image 1220 and then zoom out to display the entire image 1210 .

한편, 헤드 마운트 디스플레이 장치(100)는, 사용자(700)의 머리(705)에 착용 가능한 디스플레이 장치이므로, 사용자 시력에 따른, 영상 표시를 수행하는 것이 바람직하다.Meanwhile, since the head mount display device 100 is a display device that can be worn on the head 705 of the user 700, it is preferable to perform image display according to the user's visual acuity.

사용자 시력에 대응하는 영상 표시의 일 방법으로는, 도 4의 설명에서 언급한 바와 같이, 렌즈부(195)의 위치를 이동시켜, 사용자 눈과, 렌즈부(195)의 위치를 가변하는 방법이 있다. One method of displaying an image corresponding to the user's visual acuity is to change the position of the user's eyes and the lens unit 195 by moving the position of the lens unit 195, have.

다른 방법으로는, 렌즈부(195)의 위치 이동 없이, 표시할 영상에 대한 신호 처리를 수행하는 방법이 있다.Alternatively, there is a method of performing signal processing on the image to be displayed without moving the lens unit 195.

이러한 방법들은 모두, 사용자의 시력 정보를 기반으로 수행되는 것이 바람직하다. All of these methods are preferably performed based on the user's vision information.

이에, 본 발명의 실시예에서는, 사용자의 시력 정보를, 외부 장치로부터 수신하고, 시력 정보에 기초하여, 표시할 영상에 대한 신호 처리를 수행하는 방안을 제시한다.Therefore, in the embodiment of the present invention, a method of receiving the visual acuity information of the user from an external device and performing signal processing on the video to be displayed based on the visual acuity information is presented.

도 13은, 사용자 시력 정보를 외부 장치(1300)로부터 수신하고, 수신되는 시력 정보에 따라, 컨텐츠의 포커싱을 조정하는 것을 예시한다.13 illustrates receiving user vision information from the external device 1300 and adjusting the focusing of the content according to the received vision information.

도 13(a)과 같이, 표시되는 영상(1310) 중 일부 영역(1315)에 대한 초점이 맞지 않는 경우, 사용자(700)는 이를 잘 인식할 수 없게 된다.As shown in FIG. 13 (a), when the focus on a part of the area 1315 of the displayed image 1310 is out of focus, the user 700 can not recognize it.

헤드 마운트 디스플레이 장치(100)는, 영상 컨텐츠 재생을 위해, 외부 장치(1300)로 시력 정보 전송 요청을 수행할 수 있으며, 외부 장치(1300)로부터 대응하는 사용자의 시력 정보(1305)를 통신 모듈(135)을 통해 수신할 수 있다.The head mount display apparatus 100 may request the external device 1300 to transmit the visual information to the external device 1300 and reproduce the corresponding visual information 1305 of the user from the external device 1300 to the communication module 135). ≪ / RTI >

이때의 외부 장치(1300)는, 사용자의 시력 정보, 예를 들어, 디옵터 정보를 저장하고 있는 이동 단말기(미도시) 또는 서버(미도시) 등일 수 있다.The external device 1300 at this time may be a mobile terminal (not shown) or a server (not shown) that stores vision information of the user, for example, diopter information.

프로세서(170)는, 수신되는 시력 정보(1305)에 대응하여, 재생할 영상에 대한 영상 신호 처리를 수행할 수 있다.The processor 170 may perform video signal processing on an image to be reproduced corresponding to the received visual acuity information 1305. [

예를 들어, 프로세서(170)는, 사용자 시력 정보에 대응하여, 영상 내에 포커싱할 영역을 결정하고, 결정된 포커싱 영역에 대한, 샤프니스 등을 강화하여, 포커싱을 강조할 수 있다.For example, the processor 170 can determine the focusing area in the image in response to the user's vision information, and enhance the sharpness and the like for the determined focusing area, thereby emphasizing the focusing.

포커싱 영역 결정시, 프로세서(170)는, 영상 내의 깊이를 산출하고, 산출되는 깊이에 따라, 포커싱 영역을 결정할 수 있다. 예를 들어, 사용자가 시력이 안 좋을수록, 먼 영상이 잘 안 보이므로, 깊이가 작은, 영상 영역을 선택하여, 포커싱을 수행할 수 있다. Upon determining the focusing area, the processor 170 can calculate the depth in the image and determine the focusing area according to the calculated depth. For example, as the user has poor visual acuity, distant images can not be seen easily, so that focusing can be performed by selecting an image area having a small depth.

한편, 프로세서(170)는, 메뉴 표시 모드에서, 사용자(700)의 시선에 대응하는 영역에, 메뉴를 표시하도록 제어할 수 있다.On the other hand, the processor 170 can control to display a menu in an area corresponding to the line of sight of the user 700 in the menu display mode.

도 2의 헤드 마운트 디스플레이 장치(100)의 배면도에서는 도시하지 않았지만, 좌안 렌즈부(195L)와 우안 렌즈부(195R) 사이에, 사용자 시선을 촬영하기 위한 카메라(미도시)가 더 배치될 수 있다.Although not shown in the rear view of the head mount display device 100 of Fig. 2, a camera (not shown) for photographing the user's eyes can be further disposed between the left eye lens unit 195L and the right eye lens unit 195R have.

프로세서(170)는, 카메라로부터 사용자 시선을 촬영을 수신하고, 사용자의 눈동자의 움직임을 파악할 수 있다.The processor 170 can receive the user's gaze from the camera and grasp the movement of the user's pupil.

그리고, 프로세서(170)는, 도 14와 같이, 사용자 시선의 움직임에 따라, 메뉴 표시 영역을 결정하고, 해당 영역에 메뉴를 표시하도록 제어할 수 있다.14, the processor 170 can determine the menu display area in accordance with the movement of the user's line of sight and control the display of the menu in the area.

도 14(a)는, 사용자의 좌안(710L)과 우안(710R)의 각 눈동자(701L,701R)가 모두 우측으로 이동하는 경우, 표시 영상(1410)의 우측 영역(1420)에 메뉴(1425)가 표시되는 것을 예시한다. 이에 따라, 사용자 이용 편의성이 증대될 수 있다.14A shows a menu 1425 in the right area 1420 of the display image 1410 when the eyes 701L and 701R of the left eye 710L and right eye 710R of the user move to the right, Is displayed. Thus, the convenience for the user can be increased.

그리고, 프로세서(170)는, 메뉴가 표시된 상태에서, 사용자의 머리 움직임에 기초하여, 해당 항목을 선택할 수 있다.Then, the processor 170 can select the item on the basis of the head movement of the user while the menu is displayed.

프로세서(170)는, 도 14(b)와 같이, 사용자(700)가 머리(705)를 끄덕이면, 메뉴 내의 포커싱된 항목을 선택하는 것으로 판단할 수 있다. The processor 170 may determine that the user 700 selects the focused item in the menu if the user nudges the head 705 as shown in FIG.

한편, 프로세서(170)는, 도 14(c)와 같이, 사용자(700)가 머리(705)를 상 또는 하로 움직이면, 메뉴 내의 포커싱을 상 또는 하로 이동시키는 것으로 판단할 수 있다. 이에 의해, 사용자가 간편하게, 메뉴 내의 원하는 항목을 선택할 수 있게 된다. On the other hand, when the user 700 moves the head 705 upward or downward, the processor 170 can determine that the focusing in the menu is moved up or down, as shown in Fig. 14 (c). Thereby, the user can easily select a desired item in the menu.

한편, 프로세서(170)는, 재생되어 표시되는 컨텐츠 종류에 따라, 사용자의 움직임에 대응하는 동작을 가변할 수 있다.On the other hand, the processor 170 can vary the operation corresponding to the user's movement according to the kind of the content that is reproduced and displayed.

도 15(a)는 영화 컨텐츠(1510)와 컨텐츠 종류를 나타내는 오브젝트(1515)가 함꼐 표시되는 것을 예시한다.FIG. 15A illustrates that the movie content 1510 and the object 1515 representing the content type are displayed together.

이때, 프로세서(170)는, 도 15(b)와 같이, 사용자(700)가 머리(705)를 끄덕이면, 'yes', 도 15(c)와 같이, 사용자(700)가 머리(705)를 가로 저으면, 'no', 도 15(d)와 같이, 좌로 이동하면, '이전 시점으로 이동 재생', 도 15(e)와 같이 우로 이동하면, '이후 시점으로 이동 재생' 등의 동작을 수행하도록 제어할 수 있다. 15B, when the user 700 nods the head 705, the processor 170 determines that the user 700 is in the head 705, as shown in FIG. 15C, The user can move to the previous time by moving to the left as shown in FIG. 15 (d), move to the next time as shown in FIG. 15 (e) As shown in FIG.

도 16(a)는 방송 영상(1610)와 컨텐츠 종류를 나타내는 오브젝트(1615)가 함꼐 표시되는 것을 예시한다.16 (a) illustrates that a broadcast image 1610 and an object 1615 indicating a content type are displayed together.

이때, 프로세서(170)는, 도 16(b)와 같이, 사용자(700)가 머리(705)를 하로 이동하면, '볼륨 다운', 도 16(c)와 같이, 사용자(700)가 머리(705)를 상으로 이동하면, '볼륨 업', 도 16(d)와 같이, 좌로 이동하면, '이전 채널 이동', 도 16(e)와 같이 우로 이동하면, '이후 채널 이동' 등의 동작을 수행하도록 제어할 수 있다. 16 (b), when the user 700 moves the head 705 downward, the processor 170 displays 'volume down', as shown in FIG. 16 (c) The user can move to the previous channel by moving to the left as shown in FIG. 16 (d) or move to the next channel as shown in FIG. 16 (e) As shown in FIG.

한편, 도 15와 도 16에 대한 도면 및 설명은, 해상도에 따른, 일부 영역 이동 표시와는 구분될 수 있다.15 and FIG. 16 can be distinguished from the partial area moving display according to the resolution.

즉, 도 15와 도 16의 컨텐츠가 HD 컨텐트인 경우, 도 5 또는 도 6과 같은, UD 영상의 일부 영역 이동 표시와 달리, 컨텐츠 종류에 따른, 다른 동작이 수행될 수 있다.In other words, in the case where the contents of FIGS. 15 and 16 are HD contents, unlike the partial region moving display of the UD image as shown in FIG. 5 or 6, another operation according to the content type can be performed.

본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치 및 그 동작방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The head-mounted display device and the method of operating the same according to the exemplary embodiment of the present invention are not limited to the configuration and method of the embodiments described above, All or a part of the above-described elements may be selectively combined.

한편, 본 발명의 헤드 마운트 디스플레이 장치의 동작방법은 헤드 마운트 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the method of operating the head-mounted display device of the present invention can be implemented as a code readable by a processor on a processor-readable recording medium provided in the head-mounted display device. The processor-readable recording medium includes all kinds of recording apparatuses in which data that can be read by the processor is stored. Examples of the recording medium that can be read by the processor include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may also be implemented in the form of a carrier wave such as transmission over the Internet . In addition, the processor-readable recording medium may be distributed over network-connected computer systems so that code readable by the processor in a distributed fashion can be stored and executed.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and detail may be made therein without departing from the spirit and scope of the present invention.

Claims (17)

사용자의 머리에 착용 가능한 헤드 마운트 디스플레이 장치의 동작방법에 있어서,
제1 해상도의 영상을 수신하는 단계;
상기 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 상기 제1 해상도의 영상 중 일부 영역을 표시하는 단계;
상기 사용자의 머리의 움직임을 감지하는 단계;
상기 감지되는 사용자의 머리 움직임에 따라, 상기 제1 해상도의 영상 중 다른 일부 영역을 표시하는 단계;를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
A method of operating a head-mounted display device worn on a user's head,
Receiving an image of a first resolution;
Displaying a part of the image of the first resolution according to a second resolution display mode which is smaller than the first resolution;
Sensing movement of the user's head;
And displaying another part of the image of the first resolution according to the head movement of the user who is being sensed.
제1항에 있어서,
상기 다른 일부 영역 표시 단계는,
상기 사용자의 머리의 상,하,좌, 또는 우 움직임에 대응하여, 상기 제1 해상도의 영상의 상기 다른 일부 영역을 표시하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
The other partial region displaying step may include:
And displays the other part of the image of the first resolution in correspondence with the upward, downward, leftward, or rightward movement of the head of the user.
제1항에 있어서,
상기 다른 일부 영역 표시 단계는,
상기 사용자의 머리의 앞 또는 뒤 움직임에 대응하여, 상기 표시되는 제1 해상도의 일부 영역을 줌인 하거나 줌아웃하여 표시하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
The other partial region displaying step may include:
And zooming in or zooming out a part of the displayed first resolution corresponding to the movement of the user's head in front of or behind the head.
제1항에 있어서,
메뉴 표시 모드에서, 상기 사용자의 시선에 대응하는 영역에, 메뉴를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
And displaying the menu in an area corresponding to the user's gaze in the menu display mode.
제1항에 있어서,
상기 감지되는 사용자의 머리 움직임에 따라, 출력되는 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
Wherein at least one of a frequency, a magnitude, and a phase of an output audio signal is varied according to a head movement of the user.
제1항에 있어서,
외부로부터 사용자의 시력 정보를 수신하는 단계;
상기 수신되는 시력 정보에 기초하여, 표시할 영상의 포커싱을 조절하는 단계;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
Receiving visual information of a user from outside;
And adjusting the focusing of the image to be displayed based on the received visual acuity information.
제1항에 있어서,
상기 제1 해상도 영상의 컨텐츠 종류에 따라, 상기 사용자의 움직임에 대응하는 동작을 가변하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
Wherein the operation corresponding to the movement of the user is changed according to the content type of the first resolution image.
제1항에 있어서,
상기 일부 영역 표시시, 상기 다른 일부 영역을 시청을 위한 인디케이터를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.
The method according to claim 1,
And displaying an indicator for viewing the other part of the area when the part of the area is displayed.
사용자의 머리에 착용 가능한 헤드 마운트 디스플레이 장치에 있어서,
소정 영상을 표시하는 디스플레이;
상기 디스플레이에 표시되는 영상을 확대하는 렌즈부;
상기 사용자의 머리의 움직임을 감지하는 센서부;
제1 해상도의 영상을 수신하며, 상기 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 상기 제1 해상도의 영상 중 일부 영역을 표시하도록 제어하며, 상기 감지되는 사용자의 머리 움직임에 따라, 상기 제1 해상도의 영상 중 다른 일부 영역을 표시하도록 제어하는 프로세서;를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
A head-mounted display device that is wearable on a user's head,
A display for displaying a predetermined image;
A lens unit for enlarging an image displayed on the display;
A sensor unit for sensing movement of the head of the user;
And controls the display unit to display a part of the image of the first resolution according to a second resolution display mode which is smaller than the first resolution, And controlling the display unit to display another part of the image of the first resolution.
제9항에 있어서,
상기 프로세서는,
상기 사용자의 머리의 상,하,좌, 또는 우 움직임에 대응하여, 상기 제1 해상도의 영상의 상기 다른 일부 영역을 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
The processor comprising:
And controls to display the other partial area of the image of the first resolution corresponding to the upward, downward, leftward, or rightward movement of the head of the user.
제9항에 있어서,
상기 프로세서는,
상기 사용자의 머리의 앞 또는 뒤 움직임에 대응하여, 상기 표시되는 제1 해상도의 일부 영역을 줌인 하거나 줌아웃하여 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
The processor comprising:
And controls to zoom in or zoom out a part of the displayed first resolution corresponding to the movement of the user's head in front of or behind the head.
제9항에 있어서,
상기 프로세서는,
메뉴 표시 모드에서, 상기 사용자의 시선에 대응하는 영역에, 메뉴를 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
The processor comprising:
And controls the display unit to display a menu in an area corresponding to the line of sight of the user in the menu display mode.
제9항에 있어서,
상기 프로세서는,
상기 감지되는 사용자의 머리 움직임에 따라, 출력되는 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
The processor comprising:
Wherein the controller changes at least one of a frequency, a magnitude, and a phase of the audio signal to be output according to the head movement of the user.
제9항에 있어서,
외부로부터 사용자의 시력 정보를 수신하는 통신 모듈;을 더 포함하고,
상기 프로세서는,
상기 수신되는 시력 정보에 기초하여, 표시할 영상의 포커싱을 조절하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
And a communication module for receiving the user's vision information from the outside,
The processor comprising:
And controls the focusing of an image to be displayed based on the received visual acuity information.
제9항에 있어서,
상기 프로세서는,
상기 제1 해상도 영상의 컨텐츠 종류에 따라, 상기 사용자의 움직임에 대응하는 동작을 가변하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
The processor comprising:
Wherein the operation corresponding to the movement of the user is changed according to the content type of the first resolution image.
제9항에 있어서,
상기 사용자 눈과 상기 렌즈부 사이의 거리를 가변하는 구동부;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
And a driving unit for changing a distance between the user's eye and the lens unit.
제9항에 있어서,
상기 프로세서는,
상기 일부 영역 표시시, 상기 다른 일부 영역을 시청을 위한 인디케이터를 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.
10. The method of claim 9,
The processor comprising:
And controls to display an indicator for viewing the other part of the area when displaying the part of the area.
KR1020130074639A 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same KR102155001B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130074639A KR102155001B1 (en) 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130074639A KR102155001B1 (en) 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same

Publications (2)

Publication Number Publication Date
KR20150001425A true KR20150001425A (en) 2015-01-06
KR102155001B1 KR102155001B1 (en) 2020-09-11

Family

ID=52475187

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130074639A KR102155001B1 (en) 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same

Country Status (1)

Country Link
KR (1) KR102155001B1 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016126110A1 (en) * 2015-02-05 2016-08-11 계명대학교 산학협력단 Electrically stimulating head-mounted display device for reducing virtual reality motion sickness
WO2017082457A1 (en) * 2015-11-11 2017-05-18 엘지전자 주식회사 Hmd and method for controlling same
KR20170077912A (en) * 2015-12-28 2017-07-07 엘지디스플레이 주식회사 Display device for personal immersion apparatus
WO2018030567A1 (en) * 2016-08-10 2018-02-15 주식회사 씽크브릿지 Hmd and control method therefor
WO2018097632A1 (en) * 2016-11-25 2018-05-31 Samsung Electronics Co., Ltd. Method and device for providing an image
US9997197B2 (en) 2015-03-31 2018-06-12 Xiaomi Inc. Method and device for controlling playback
US10257494B2 (en) 2014-09-22 2019-04-09 Samsung Electronics Co., Ltd. Reconstruction of three-dimensional video
US11049218B2 (en) 2017-08-11 2021-06-29 Samsung Electronics Company, Ltd. Seamless image stitching
US11205305B2 (en) 2014-09-22 2021-12-21 Samsung Electronics Company, Ltd. Presentation of three-dimensional video
US11347052B2 (en) * 2017-10-23 2022-05-31 Sony Corporation Display control apparatus, head mounted display, and display control method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1195155A (en) * 1997-09-18 1999-04-09 Nec Software Kyushu Ltd Head up display device
KR20090084399A (en) * 2008-02-01 2009-08-05 주식회사 이엠디티 A headmounted display system with an enhancing visual acuity methods
JP2009181209A (en) * 2008-01-29 2009-08-13 Funai Electric Co Ltd Contents storage and reproduction device and network system
JP2012008290A (en) * 2010-06-23 2012-01-12 Softbank Mobile Corp Spectacle type display device and server

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1195155A (en) * 1997-09-18 1999-04-09 Nec Software Kyushu Ltd Head up display device
JP2009181209A (en) * 2008-01-29 2009-08-13 Funai Electric Co Ltd Contents storage and reproduction device and network system
KR20090084399A (en) * 2008-02-01 2009-08-05 주식회사 이엠디티 A headmounted display system with an enhancing visual acuity methods
JP2012008290A (en) * 2010-06-23 2012-01-12 Softbank Mobile Corp Spectacle type display device and server

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10750153B2 (en) 2014-09-22 2020-08-18 Samsung Electronics Company, Ltd. Camera system for three-dimensional video
US11205305B2 (en) 2014-09-22 2021-12-21 Samsung Electronics Company, Ltd. Presentation of three-dimensional video
US10313656B2 (en) 2014-09-22 2019-06-04 Samsung Electronics Company Ltd. Image stitching for three-dimensional video
US10547825B2 (en) 2014-09-22 2020-01-28 Samsung Electronics Company, Ltd. Transmission of three-dimensional video
US10257494B2 (en) 2014-09-22 2019-04-09 Samsung Electronics Co., Ltd. Reconstruction of three-dimensional video
WO2016126110A1 (en) * 2015-02-05 2016-08-11 계명대학교 산학협력단 Electrically stimulating head-mounted display device for reducing virtual reality motion sickness
US9997197B2 (en) 2015-03-31 2018-06-12 Xiaomi Inc. Method and device for controlling playback
WO2017082457A1 (en) * 2015-11-11 2017-05-18 엘지전자 주식회사 Hmd and method for controlling same
KR20170077912A (en) * 2015-12-28 2017-07-07 엘지디스플레이 주식회사 Display device for personal immersion apparatus
WO2018030567A1 (en) * 2016-08-10 2018-02-15 주식회사 씽크브릿지 Hmd and control method therefor
WO2018097632A1 (en) * 2016-11-25 2018-05-31 Samsung Electronics Co., Ltd. Method and device for providing an image
US11068048B2 (en) 2016-11-25 2021-07-20 Samsung Electronics Co., Ltd. Method and device for providing an image
US11049218B2 (en) 2017-08-11 2021-06-29 Samsung Electronics Company, Ltd. Seamless image stitching
US11347052B2 (en) * 2017-10-23 2022-05-31 Sony Corporation Display control apparatus, head mounted display, and display control method
US11971543B2 (en) 2017-10-23 2024-04-30 Sony Group Corporation Display control apparatus, head mounted display, and display control method

Also Published As

Publication number Publication date
KR102155001B1 (en) 2020-09-11

Similar Documents

Publication Publication Date Title
KR102155001B1 (en) Head mount display apparatus and method for operating the same
US10534428B2 (en) Image processing device and image processing method, display device and display method, and image display system
US11024083B2 (en) Server, user terminal device, and control method therefor
US9858643B2 (en) Image generating device, image generating method, and program
US10009603B2 (en) Method and system for adaptive viewport for a mobile device based on viewing angle
KR20170013737A (en) Head mount display apparatus and method for operating the same
EP2843513A1 (en) Wearable device and method of outputting content thereof
JP2011210239A (en) Vehicle user interface unit for vehicle electronic device
US10607410B2 (en) Displaying visual information of views captured at geographic locations
KR102431712B1 (en) Electronic apparatus, method for controlling thereof and computer program product thereof
EP3671408B1 (en) Virtual reality device and content adjusting method therefor
KR20150006128A (en) Head mount display apparatus and method for operating the same
JP2017181666A (en) Information processing device, information processing method, and program
CN110622110B (en) Method and apparatus for providing immersive reality content
US10771707B2 (en) Information processing device and information processing method
JP2017134716A (en) Virtual reality space providing method and virtual reality space providing program
WO2019142432A1 (en) Information processing device, information processing method, and recording medium
US11106915B1 (en) Generating in a gaze tracking device augmented reality representations for objects in a user line-of-sight
JP2018525750A (en) Auxiliary item selection for see-through glass
KR20170007341A (en) Method and apparatus for processing broadcast data by using external device
US11443487B2 (en) Methods, apparatus, systems, computer programs for enabling consumption of virtual content for mediated reality
WO2018216402A1 (en) Information processing apparatus, information processing method, and program
KR102140077B1 (en) Master device, slave device and control method thereof
JP7168969B2 (en) Heat map presentation device and heat map presentation program
WO2015099215A1 (en) Head-mounted display apparatus and method for operating same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant