KR20170000808A - Method for displaying augmented information without double vision in three dimensional display device - Google Patents

Method for displaying augmented information without double vision in three dimensional display device Download PDF

Info

Publication number
KR20170000808A
KR20170000808A KR1020160079414A KR20160079414A KR20170000808A KR 20170000808 A KR20170000808 A KR 20170000808A KR 1020160079414 A KR1020160079414 A KR 1020160079414A KR 20160079414 A KR20160079414 A KR 20160079414A KR 20170000808 A KR20170000808 A KR 20170000808A
Authority
KR
South Korea
Prior art keywords
image
enhancement information
user
body part
coordinates
Prior art date
Application number
KR1020160079414A
Other languages
Korean (ko)
Inventor
김석중
Original Assignee
주식회사 브이터치
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 브이터치 filed Critical 주식회사 브이터치
Publication of KR20170000808A publication Critical patent/KR20170000808A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359Switching between monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/0454
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/0044
    • H04N13/0456
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/158Switching image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/361Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

Disclosed is a method for displaying augmented information via a binocular disparity-based 3D display device without double vision, which enables augmented information to be displayed in a three-dimensional space via a binocular disparity-based 3D display device without a problem of double vision. According to an aspect of the present invention, a method for displaying augmented information via a binocular disparity-based 3D display device without double vision comprises the steps of: generating first and second images adapted to be viewed via respective eyes of a user in order to provide a 3D image to the user by using binocular disparity; generating an image including augmented information; and displaying the image, including augmented information, via any one of a display screen displaying the first image and a display screen displaying the second image.

Description

복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법{METHOD FOR DISPLAYING AUGMENTED INFORMATION WITHOUT DOUBLE VISION IN THREE DIMENSIONAL DISPLAY DEVICE}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a three-dimensional display device,

본 발명은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법에 관한 것으로서, 보다 상세하게는 양안시차 기반 3차원 디스플레이 장치에서 증강정보가 3차원 공간 상에 복시의 문제없이 표시되도록 하는 증강정보 표시 방법에 관한 것이다.The present invention relates to a method of displaying an enhancement information of a binocular parallax-based three-dimensional display device in which a binocular disparity is eliminated, and more particularly, to a method of displaying enhancement information in a binocular parallax- And a method of displaying the enhancement information.

사람의 눈은 초점거리(Focal Distance)가 맞지 않는 위치의 사물은 흐릿하게 인지하게 된다. 한편, 사람의 눈은 주시 거리(Convergence Distance)가 서로 다른 두 사물 중 어느 하나를 주시할 때에는 다른 사물은 둘로 겹쳐 보이는, 이른바 복시(Double Vision) 문제가 발생한다. 이는 사람의 두 눈 사이에 양안시차(Binocular Disparity)가 존재하기 때문이다. The human eye becomes blurred when the focal distance is not right. On the other hand, when the human eye observes one of two objects with different convergence distances, there occurs a so-called double vision problem in which the other objects overlap in two. This is because Binocular Disparity exists between two eyes of a person.

종래의 양안시차 기반 3차원 디스플레이 장치에서 증강정보를 제공하는 경우에는, 사용자가 특정 물체에 초점을 맞추는 경우, 초점이 맞지 않는 증강정보에 나타나는 복시의 문제를 해결하지 못하였다. 따라서 증강정보를 정상적으로 인지하지 못하는 문제가 있었다. In the case of providing the augmentation information in the conventional binocular parallax based three-dimensional display device, when the user focuses on a specific object, the problem of the eyesight appearing in the unfocused augmentation information can not be solved. Therefore, there is a problem that the augmentation information is not normally recognized.

도 1은 종래의 양안시차 기반 3차원 디스플레이 장치의 문제점을 예시한 도면이다. FIG. 1 is a view illustrating a problem of a conventional binocular parallax-based three-dimensional display device.

도 1은 사용자에게 가상현실(VR) 디스플레이 화면을 통하여 서로 다른 주시거리를 갖는, 자동차(12) 및 속도계(10)의 시각적 인지 상태를 나타낸다. 여기에서 속도계(10)는 사용자에게 "증강정보"로서 제공된다. 1 shows a visual perception state of a car 12 and a speedometer 10, which have different viewing distances to a user through a virtual reality (VR) display screen. Here, the speed meter 10 is provided to the user as "reinforcement information ".

도 1에서 나타낸 바와 같이, 사용자가 전방 풍경의 자동차(12)를 응시하는 경우에는 양안시차로 인하여 왼눈(100)에서는 속도계(103)가 자동차(102)의 우측에 위치하고(101), 오른눈(110)에서는 속도계(113)가 자동차(112)의 좌측에 위치한다(111). 따라서 전방 풍경을 응시하는 운전자는 전방 풍경의 자동차(122)의 좌우에 각각 속도계(123,124)가 나타나, 속도 정보를 잘 알아볼 수 없게 되는 문제가 생긴다. 1, when the user gazes at the forward-looking car 12, the speedometer 103 is positioned on the right side of the car 102 in the left eye 100 due to the binocular parallax, 110, the speedometer 113 is located on the left side of the car 112 (111). Therefore, the driver looking at the forward scenery has the speed meters 123 and 124 displayed on the left and right sides of the front scenery car 122, respectively, so that the speed information can not be well recognized.

나아가, 증강정보는 (현실 또는 가상의) 물체 또는 콘텐트로부터 쉽게 구별 가능하여야 한다. 그러나 종래의 양안시차 기반 3차원 디스플레이 기술로는 증강정보를 (현실 또는 가상의) 물체 또는 콘텐트로부터 쉽게 구별할 수 있는 방법이 없었다.Furthermore, enhancement information should be readily distinguishable from (real or imaginary) objects or content. However, in the conventional binocular disparity-based three-dimensional display technology, there is no method that can easily distinguish the enhancement information from the (real or virtual) object or the content.

본 발명은 상기와 같은 문제점을 해결하기 위하여 착안된 것으로서, 양안시차 기반 3차원 디스플레이 장치에서 증강정보가 3차원 공간 상에 복시의 문제없이 표시될 수 있는 증강정보 표시 방법을 제공하는 것을 목적으로 한다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a method for displaying an enhancement information in a binocular parallax based three-dimensional display device in which enhancement information can be displayed on a three-dimensional space .

발명의 일 측면에 따르면, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법은, 양안시차를 이용하여 사용자에게 3차원 영상을 제공하기 위하여, 사용자의 두 눈에 각각 보여지는 제1 영상 및 제2 영상을 생성하는 단계; 증강정보를 포함하는 영상을 생성하는 단계; 및 상기 증강정보를 포함하는 영상이 상기 제1 영상을 표시하는 디스플레이 화면과 상기 제2 영상을 표시하는 디스플레이 화면 중 하나에만 표시되는 단계;를 포함한다. According to an aspect of the present invention, a method of displaying augmented information of a binocular parallax-based three-dimensional display device in which a diplopia is eliminated is characterized in that in order to provide a three-dimensional image to a user using binocular parallax, Generating an image and a second image; Generating an image including enhancement information; And an image including the enhancement information is displayed on only one of a display screen displaying the first image and a display screen displaying the second image.

이 때, 상기 증강정보를 포함하는 영상을 생성하는 단계 후에, 상기 제1 영상 및 상기 제2 영상 중 어느 하나에 상기 증강정보를 포함하는 영상이 오버레이되는 단계;를 더 포함할 수 있다. The method may further include overlaying an image including the enhancement information on one of the first image and the second image after the step of generating an image including the enhancement information.

또한, 상기 증강정보를 포함하는 영상을 생성하는 단계 후에, 상기 증강정보를 포함하는 영상과 함께 표시될 영상을 상기 제1 영상과 상기 제2 영상 중에서 선택하는 단계;를 더 포함할 수 있다. The method may further include selecting an image to be displayed together with the image including the enhancement information from among the first image and the second image after the step of generating an image including the enhancement information.

이 때, 상기 증강정보를 포함하는 영상과 함께 표시될 영상은, 상기 사용자의 우세안측에 보여지는 영상일 수 있다. At this time, the image to be displayed together with the image including the enhancement information may be an image displayed on the inner side of the user.

나아가, 상기 사용자의 상기 우세안을 결정하는 단계;를 더 포함할 수 있다. Further, the method may further include determining the dominant direction of the user.

더 나아가, 상기 우세안을 결정하는 단계는, 기준포인트가 디스플레이 화면에 표시되는 단계; 사용자가 기준포인트와 일치하도록 배치한 제1 신체부위의 좌표를 획득하는 단계; 상기 제1 신체부위 및 상기 사용자의 두 눈을 각각 잇는 두 개의 직선을 생성하는 단계; 상기 두 개의 직선 중 실질적으로 상기 제1 신체부위의 좌표를 지나가는 직선과 만나는 눈을 상기 우세안으로 결정하는 단계;를 더 포함할 수 있다. Further, the step of determining the dominant eye may include: displaying a reference point on a display screen; Obtaining coordinates of a first body part arranged so that a user coincides with a reference point; Creating two straight lines connecting the first body part and the two eyes of the user, respectively; Determining an eye that meets a straight line passing through the coordinates of the first body part of the two straight lines as the dominant eye.

또한, 상기 제1 신체부위의 좌표와 상기 두 개의 직선 중 어느 한 직선 사이의 거리가 소정의 임계값보다 작다면, 상기 제1 신체부위가 실질적으로 상기 직선과 만나는 것으로 간주할 수 있다. In addition, if the distance between the coordinates of the first body part and a straight line of any one of the two straight lines is smaller than a predetermined threshold value, the first body part may be considered to substantially meet the straight line.

발명의 다른 측면에 따르면, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치는, 영상에 포함하고자 하는 증강정보를 2D 영상의 형태로 생성하는 증강정보 생성부; 사용자에게 3차원 영상을 제공하기 위한 제1 영상 및 제2 영상을 생성하는 3차원 영상 생성부; 및 증강정보를 상기 제1 영상 및 상기 제2 영상 중 하나와만 오버레이하는 증강정보 오버레이부;를 포함한다. According to another aspect of the present invention, there is provided a binocular parallax-based three-dimensional display apparatus which eliminates the diplopia, comprising: an augmented information generating unit for generating augmented information to be included in an image in the form of a 2D image; A three-dimensional image generation unit for generating a first image and a second image for providing a three-dimensional image to a user; And an enhancement information overlay unit for overlaying the enhancement information with only one of the first image and the second image.

또한, 사용자의 각 신체부위의 좌표를 획득하는 신체좌표 획득부; 상기 신체좌표 획득부가 획득한 상기 사용자의 두 눈의 좌표 및 상기 사용자의 제1 신체좌표에 기초하여 우세안을 결정하는 우세안 판단부;를 더 포함하고, 상기 증강정보 오버레이부는, 상기 제1 영상 및 상기 제2 영상 중 상기 우세안에 보여지는 쪽의 영상을 상기 증강정보와 함께 표시할 수 있다. A body coordinate acquiring unit for acquiring coordinates of each body part of the user; And a dominant eye determiner for determining a dominant eye based on coordinates of two eyes of the user obtained by the body coordinate acquiring unit and first body coordinates of the user, wherein the augmentation information overlay unit comprises: An image of the side of the second image which is visible in the dominant direction can be displayed together with the augmentation information.

또한, 상기 우세안 판단부는, 기준포인트와 상기 두 눈을 각각 잇는 두 개의 직선을 생성하는 직선생성부; 및 상기 사용자가 상기 기준포인트와 일치하도록 배치한 제1 신체부위와 상기 두 개의 직선 사이의 거리를 측정하는 거리 측정부;를 더 포함할 수 있다. The dominant eye determination unit may include: a straight line generation unit for generating two straight lines connecting the reference point and the two eyes; And a distance measuring unit for measuring a distance between the first body part and the two straight lines arranged so that the user coincides with the reference point.

양안시차 기반 3차원 디스플레이 장치에서, 증강정보가 3차원 공간 상에 복시의 문제없이 표시될 수 있는 효과가 있다. In the binocular parallax-based three-dimensional display device, the enhancement information can be displayed on the three-dimensional space without a problem of the display.

또한, 양안시차 기반 3차원 디스플레이 장치에서, 사용자가 증강정보가 표시되는 쪽의 눈을 감는 간단한 동작만으로 현실(또는 가상의) 물체 또는 콘텐트로부터 증강정보를 쉽게 구별할 수 있는 효과가 있다. In addition, in the binocular parallax-based three-dimensional display device, the user can easily distinguish the augmentation information from the real (or virtual) object or the content by simply operating the eyes of the side on which the augmentation information is displayed.

도 1은 종래의 양안시차 기반 3차원 디스플레이 장치의 문제점을 예시한 도면이다.
도 2는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치에서 증강정보가 표시된 모습을 예시한 도면이다.
도 3은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법의 일례를 나타낸 흐름도이다.
도 4는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법의 다른 예를 나타낸 흐름도이다.
도 5는 우세안을 결정하는 방법의 일례를 나타낸 흐름도이다.
도 6은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법을 이용한 경우 사용자의 시각적 인지 상태를 예시한 도면이다.
도 7은 가상현실(VR) 장치 및 증강현실(AR) 장치에서 우세안을 판단하는 방법을 예시한 도면이다.
도 8은 3D 텔레비전에서 우세안을 판단하는 방법을 예시한 도면이다.
도 9는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 일례를 나타낸 블록도이다.
도 10은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 다른 예를 나타낸 블록도이다.
도 11은 도 10의 우세안 판단부를 더욱 상세히 나타낸 블록도이다.
FIG. 1 is a view illustrating a problem of a conventional binocular parallax-based three-dimensional display device.
FIG. 2 is a diagram illustrating a state in which enhancement information is displayed in a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.
3 is a flowchart illustrating an example of a method of displaying enhancement information of a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.
4 is a flowchart illustrating another example of a method for displaying enhancement information in a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.
Fig. 5 is a flowchart showing an example of a method for determining the dominant insignificance.
FIG. 6 is a diagram illustrating a visual perception state of a user when using a method of displaying an enhancement information of a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.
7 is a diagram illustrating a method of determining dominance in a virtual reality (VR) device and an augmented reality (AR) device.
Fig. 8 is a diagram illustrating a method of determining dominance in a 3D television.
9 is a block diagram showing an example of a binocular disparity-based three-dimensional display device in which the decryption is eliminated.
10 is a block diagram showing another example of a binocular disparity-based three-dimensional display device in which the decryption is eliminated.
11 is a block diagram showing the dominant deciding unit of Fig. 10 in more detail.

이하 도면 및 다양한 실시예를 바탕으로 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법을 설명한다. Hereinafter, a method for displaying augmented information of a binocular parallax based three-dimensional display device in which a double-view is eliminated based on drawings and various embodiments will be described.

도 2는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치에서 증강정보가 표시된 모습을 예시한 도면이다.FIG. 2 is a diagram illustrating a state in which enhancement information is displayed in a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.

도 2에서 나타낸 바와 같이, 양안시차 기반 3차원 디스플레이 장치는 왼눈쪽 표시화면(20)과 오른눈쪽 표시화면(21)의 두 화면을 갖는다. 이들 표시화면(20,21)은 미세하게 다른 영상을 표시함으로써, 사용자가 3차원 영상인 것으로 인지하도록 한다. 2, the binocular parallax-based three-dimensional display device has two screens of a left-eye display screen 20 and a right-eye display screen 21. These display screens 20 and 21 display a different image slightly so that the user recognizes that the image is a three-dimensional image.

이러한 양안시차 기반 3차원 디스플레이 장치에서 복시를 해소하기 위하여, 증강정보(200,210)는 왼눈쪽 표시화면(20)과 오른눈쪽 표시화면(21) 중 어느 하나에만 표시된다. 도 2의 실시예에서는 오른눈쪽 표시화면(21)을 통해서 증강정보(200,210)가 표시되는 경우를 예시하였다. In order to eliminate the diplopia in the binocular disparity-based three-dimensional display device, the augmentation information 200 and 210 are displayed on only one of the left-eye display screen 20 and the right-eye display screen 21. In the embodiment of FIG. 2, the case where the enhancement information 200, 210 is displayed through the right-eye display screen 21 is illustrated.

사용자는 두 눈을 통하여 표시화면(20,21)을 각각 받아들인 후, 3차원 영상 내에서 증강정보(200,210)가 각각 단일한 상으로 표시되는 것으로 인지하게 된다. After the user accepts the display screens 20 and 21 through the two eyes, the user recognizes that the enhancement information 200 and 210 are displayed as a single image in the three-dimensional image.

도 3은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법의 일례를 나타낸 흐름도이다.3 is a flowchart illustrating an example of a method of displaying enhancement information of a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.

도 3에서 나타낸 바와 같이, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법은, 각각 왼눈과 오른눈을 통하여 보여지는 두 개의 3차원 디스플레이용 영상 중에서, 하나의 영상에만 증강정보를 포함시키는 단계를 수행하여 이루어진다(300). As shown in FIG. 3, the enhancement information display method of the binocular parallax-based three-dimensional display device in which the ambiguity is eliminated is characterized in that the enhancement information is displayed only in one image out of two 3D display images viewed through the left eye and the right eye, (300). ≪ / RTI >

이 단계(300)에서, 3차원 디스플레이용 영상에 증강정보를 포함시키는 구체적인 방법은 이미 알려진 다양한 기법이 널리 적용될 수 있다. 예컨대, 증강정보가 포함된 2차원 영상 레이어를 한쪽의 3차원 디스플레이용 영상의 레이어에 오버레이될 수 있다. 또는, 증강정보가 한쪽의 3차원 디스플레이용 영상의 단일 레이어 내에 합성이 되도록 할 수도 있다. In this step 300, various techniques known in the art can be widely applied as specific methods of including the enhancement information in the image for three-dimensional display. For example, a two-dimensional image layer including enhancement information can be overlaid on one layer of a three-dimensional display image. Alternatively, the enhancement information may be synthesized in a single layer of the image for one three-dimensional display.

도 4는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법의 다른 예를 나타낸 흐름도이다.4 is a flowchart illustrating another example of a method for displaying enhancement information in a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.

사람은 한쪽 눈만 사용하는 작업을 할 경우에 일반적으로 두 눈 중 정해진 눈을 사용하는 경향이 있다. 이처럼 주로 사용되는 눈을 우세안(dominant eye)이라고 한다. 다른쪽 눈을 비우세안 또는 열세안이라고 부르기도 한다. A person generally tends to use one of two eyes when working with only one eye. This type of dominant eye is called the dominant eye. The other eye is sometimes referred to as emptying or cheeky.

예컨대, 작은 구멍을 들여다 본다든가 사격을 하기 위하여 조준경을 주시할 때 또는 렌즈가 하나인 현미경을 관찰할 때 등 한쪽 눈만으로 작업을 수행할 때 무의식으로 선택되는 눈이 우세안이다.For example, when looking at a small hole or looking at a sight to make a shot, or when observing a microscope with a single lens, the eyes that unconsciously select are dominant when working with only one eye.

도 4의 실시예에서는 양안시차 기반 3차원 디스플레이 장치에서 우세안측 디스플레이 화면에 증강정보가 표시되도록 한다. In the embodiment of FIG. 4, enhancement information is displayed on the dominant side display screen in the binocular parallax based three-dimensional display device.

이를 위하여, 사용자의 우세안을 판단하는 단계(40)가 수행되고, 어느쪽 눈이 우세안인지 결정되면, 두 개의 3차원 디스플레이용 영상중 우세안쪽으로 표시되는 영상에만 증강정보를 포함시키는 단계(41)가 수행된다. For this, a step 40 of judging the dominance of the user is performed, and if either eye is dominant, the step of including reinforcement information only in the images displayed inside the dominant one of the two images for three- ) Is performed.

이처럼 우세안측 디스플레이 화면에 증강정보가 표시되도록 하면, 사용자가 증강정보를 더욱 분명하게 인지할 수 있는 효과를 기대할 수 있다. By displaying the augmented information on the dominant display screen, it is possible to expect the effect that the user can more clearly recognize the augmented information.

도 5는 우세안을 결정하는 방법의 일례를 나타낸 흐름도이다.Fig. 5 is a flowchart showing an example of a method for determining the dominant insignificance.

도 5에서 나타낸 바와 같이, 우세안을 결정하기 위해서 먼저 양안시차 기반 3차원 디스플레이 장치에서 기준포인트가 디스플레이 화면에 표시된다(400). As shown in FIG. 5, in order to determine the dominant eye, the reference point is first displayed on the display screen in the binocular disparity-based three-dimensional display device (400).

다음으로, 사용자는 기준포인트를 "제1 신체부위"(예컨대 특정 손가락 끝)를 기준포인트에 일치하도록 가리킨다. 이에 따라, 사용자를 신체부위의 좌표를 획득할 수 있는 장치, 예컨대 사용자를 촬영하고 있는 3차원 카메라를 통하여 제1 신체부위의 좌표가 획득된다(410). Next, the user points the reference point to "first body part" (e.g., a specific fingertip) to match the reference point. Accordingly, the coordinates of the first body part are obtained (410) through a device capable of acquiring the coordinates of the body part, for example, a three-dimensional camera photographing the user.

다음으로, 기준포인트와 사용자의 두 눈을 잇는 두 개의 직선이 각각 생성된다(420). Next, two straight lines connecting the reference point and the user's eyes are generated (420), respectively.

만약 두 직선 중 어느 하나의 직선이 제1 신체부위와 만난다면, 그 직선이 지나가는 쪽의 눈이 우세안이 된다. 실제로는 오차를 고려하여야 하므로, 제1 신체부위의 좌표와 어느 한 직선 간의 거리가 소정의 임계값보다 작다면, 사실상 그 신체부위가 그 직선과 만나는 것으로 간주하게 된다(430). If any one of the two straight lines meets the first body part, the eye on which the straight line passes is dominant. Actually, the error should be considered, so that if the distance between the coordinates of the first body part and a straight line is smaller than the predetermined threshold value, the body part is actually regarded as meeting the straight line (430).

한편, 제1 신체부위의 좌표와 직선 간의 거리는 다양한 계산방법을 통하여 구할 수 있다. 이 때, 다음과 같이 거리를 구할 수도 있다. On the other hand, the distance between the coordinates of the first body part and the straight line can be obtained through various calculation methods. At this time, the distance may be obtained as follows.

먼저, 제1 신체부위(Q)의 공간 상에서의 좌표를 직교좌표계로 (p, q, r)라고 한다. 또한, 직선 위의 점(P)을 t로 매개화할 때, 점(P)의 좌표는 (a1t+b1, a2t+b2, a3t+b3)로 나타낼 수 있다. First, the coordinate in the space of the first body part Q is referred to as (p, q, r) in the orthogonal coordinate system. In addition, when the point P on the straight line is mediated by t, the coordinates of the point P can be expressed as (a 1 t + b 1 , a 2 t + b 2 , a 3 t + b 3 ).

직선의 방향벡터(a1, a2, a3)와 벡터PQ가 직교할 때, 선분 PQ의 길이가 최소가 된다. 이 길이가 바로 제1 신체부위(Q)와 직선 사이의 거리가 된다.When the direction vector (a 1 , a 2 , a 3 ) of the straight line and the vector PQ are orthogonal, the length of the line segment PQ becomes minimum. This length is the distance between the first body part Q and the straight line.

PQ벡터를 (a1t+p', a2t+q', a3t+r')라 하면, 직선의 방향벡터(a1, a2, a3)와 벡터PQ가 직교할 때 수학식 1이 성립한다. The PQ vector (a 1 t + p ', a 2 t + q', a 3 t + r ') d If the vector direction of a straight line (a 1, a 2, a 3) and vector mathematics when PQ is to orthogonal Equation 1 holds.

[수학식 1][Equation 1]

Figure pat00001
Figure pat00001

이를 만족하는 t값에 대해 PQ의 길이를 구하면 수학식 2와 같다. If the length of PQ is found with respect to the t value satisfying this, the following equation (2) is obtained.

[수학식 2]&Quot; (2) "

Figure pat00002
Figure pat00002

도 6은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법을 이용한 경우 사용자의 시각적 인지 상태를 예시한 도면이다.FIG. 6 is a diagram illustrating a visual perception state of a user when using a method of displaying an enhancement information of a binocular parallax-based three-dimensional display device in which the ambiguity is eliminated.

도 1의 경우와 달리, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법이 적용된 도 6에서는 증강정보로 제공되는 속도계(60)의 상이 하나로 인식된다. Unlike the case of FIG. 1, in the binarized binocular parallax based three-dimensional display device in which the enhancement information is displayed, the image of the speedometer 60 provided as enhancement information is recognized as one.

이처럼 복시를 해소하기 위하여, 3차원 디스플레이 장치를 이루는 두 화면(601,611) 중 하나의 화면(601)에만 증강정보(603)가 표시되도록 한다. 도 6의 실시예에서는 왼눈쪽 화면(601)에 증강정보(603)가 표시되는 경우를 나타내었다. In order to solve such a problem, the enhancement information 603 is displayed only on one screen 601 of the two screens 601 and 611 constituting the three-dimensional display device. In the embodiment of FIG. 6, the case where the enhancement information 603 is displayed on the left-eye screen 601 is shown.

3차원으로 보여지는 대상인 자동차(62)는 각각의 화면(601,611) 내에서 양안시차가 반영되어 미세하게 다른 자동차의 영상(602,612)으로 표시된다. The automobile 62, which is an object to be viewed in three dimensions, is displayed in the images 602 and 612 of the automobile which are slightly different from each other by reflecting the binocular parallax in each of the screens 601 and 611.

사용자는, 3차원의 자동차(622)의 옆에 단일한 상으로 표시되는 속도계(624)가 증강정보로서 더 제공되는 것으로 인지하게 된다(620). The user is recognized 620 that a speedometer 624, which is represented by a single image next to the three-dimensional vehicle 622, is further provided as the augmentation information.

도 7은 가상현실(VR) 장치 및 증강현실(AR) 장치에서 우세안을 판단하는 방법을 예시한 도면이다.7 is a diagram illustrating a method of determining dominance in a virtual reality (VR) device and an augmented reality (AR) device.

가상현실 장치나 증강현실 장치는 두 개의 디스플레이 화면(71,72)을 포함하여 이루어진다. 두 개의 디스플레이 화면(71,72)은 각각 한쪽 눈(76,77)에 보여진다. The virtual reality device or the augmented reality device includes two display screens 71 and 72. The two display screens 71 and 72 are shown on one eye 76,77, respectively.

우세안을 결정하기 위해서 먼저 양안시차 기반 3차원 디스플레이 장치에서 왼눈쪽 기준포인트(710)가 왼눈쪽 디스플레이 화면(71)에, 오른눈쪽 기준포인트(720)가 오른눈쪽 디스플레이 화면(72)에 각각 표시된다. 사용자는 기준포인트(710,720)를 하나의 3차원 기준포인트(730)로 인지하게 된다. The left-eye reference point 710 is displayed on the left-eye display screen 71 and the right-eye reference point 720 is displayed on the right-eye display screen 72 in the binocular parallax-based three-dimensional display device . The user recognizes the reference points 710 and 720 as one three-dimensional reference point 730. [

다음으로, 사용자는 "제1 신체부위"(예컨대 특정 손가락 끝)(75)를 기준포인트(730)에 일치하도록 가리킨다. Next, the user indicates that the "first body part" (e.g., a specific fingertip) 75 corresponds to the reference point 730.

이때, 사용자를 신체부위의 좌표를 획득할 수 있는 장치, 예컨대 사용자를 촬영하고 있는 3차원 카메라(70)를 통하여 제1 신체부위의 좌표가 획득된다. At this time, the coordinates of the first body part are obtained through a device capable of acquiring the coordinates of the body part, for example, the three-dimensional camera 70 photographing the user.

다음으로, 기준포인트(730)와 사용자의 두 눈(76,77)을 잇는 두 개의 직선(73,74)이 각각 생성된다. Next, two straight lines 73 and 74 connecting the reference point 730 and the user's two eyes 76 and 77, respectively, are generated.

만약 두 직선 중 어느 하나의 직선이 제1 신체부위와 만난다면, 그 직선이 지나가는 쪽의 눈이 우세안이 된다.If any one of the two straight lines meets the first body part, the eye on which the straight line passes is dominant.

도 7의 실시예에서는 오른눈(77)과 기준포인트(730)를 잇는 직선(74)이 제1 신체부위(75)와 만나므로, 오른눈(77)이 우세안이 된다. 7, since the straight line 74 connecting the right eye 77 and the reference point 730 meets the first body part 75, the right eye 77 dominates.

실제로는 오차를 고려하여야 하므로, 제1 신체부위의 좌표와 어느 한 직선 간의 거리가 소정의 임계값보다 작다면, 사실상 그 신체부위가 그 직선과 만나는 것으로 간주하게 된다. In reality, since the error must be considered, if the distance between the coordinates of the first body part and a straight line is smaller than a predetermined threshold value, the body part is regarded as actually meeting the straight line.

한편, 3차원 카메라(70)는 기기 외부로부터 사용자의 각 신체부위의 좌표를 제공하는 수단으로서, 사용자의 각 신체부위의 좌표를 수집할 수 있는 것이라면 어떠한 위치에 배치되어도 무방하다. 나아가, 3차원 카메라가 아닌 외부 기기라도 사용자의 각 신체부위의 좌표를 수집하여 제공할 수 있는 것이라면 어떠한 기기로도 대체 가능하다. On the other hand, the three-dimensional camera 70 may be arranged at any position as long as it can collect coordinates of each body part of the user as means for providing coordinates of each body part of the user from the outside of the apparatus. Furthermore, even if an external device other than the three-dimensional camera is used, it can be replaced by any device that can collect and provide coordinates of each body part of the user.

예컨대, 3차원 카메라(70)는, 외부에서 사용자의 신체좌표의 위치를 검출하는 3D 카메라(ToF, Structured Light, Stereo, Dual Aperture), Radar, Lidar 등의 장치가 될 수 있다. 또한, 3차원 카메라를 대체하여 사용자의 각 신체의 좌표를 제공하는 외부기기는, 사용자가 착용한 센서로부터 신체의 3차원 좌표를 검출하는 GPS(Global Positioning System), IPS(Indoor Positioning System), RSSI(Received Signal Strength Indication), 자이로 센서, 가속도 센서, 자기장 센서 등이 될 수도 있다. For example, the 3D camera 70 may be a device such as a 3D camera (ToF, Structured Light, Stereo, Dual Aperture), Radar, or Lidar that detects the position of the user's body coordinates from the outside. The external device that provides the coordinates of each body of the user in place of the three-dimensional camera includes a GPS (Global Positioning System), an IPS (Indoor Positioning System), and an RSSI (Received Signal Strength Indication), a gyro sensor, an acceleration sensor, a magnetic field sensor, or the like.

도 8은 3D 텔레비전에서 우세안을 판단하는 방법을 예시한 도면이다.Fig. 8 is a diagram illustrating a method of determining dominance in a 3D television.

3D 텔레비전은 하나의 디스플레이 화면(81)을 포함하여 이루어진다. 다만, 3D 텔레비전의 특성 상 왼눈(86)에 보여지는 영상과 오른눈(87)에 보여지는 영상은 미세하게 차이가 생긴다. The 3D television comprises a single display screen 81. However, due to the characteristics of the 3D television, the image displayed on the left eye 86 and the image displayed on the right eye 87 are slightly different from each other.

우세안을 결정하기 위해서 먼저 디스플레이 화면(81)에 왼눈쪽 기준포인트(810)와 오른눈쪽 기준포인트(820)가 표시된다. 사용자는 3D 텔레비전의 특성상 왼눈쪽 기준포인트(810)는 왼눈으로만, 오른눈쪽 기준포인트(820)는 오른눈으로만 볼 수 있다. 그 결과, 기준포인트(810,820)를 하나의 3차원 기준포인트(830)로 인지하게 된다. The left-eye reference point 810 and the right-eye reference point 820 are displayed on the display screen 81 in order to determine the dominant eye. The user can see only the left eye reference point 810 as the left eye and the right eye reference point 820 as the right eye only because of the characteristics of the 3D television. As a result, the reference points 810 and 820 are recognized as one three-dimensional reference point 830.

다음으로, 사용자는 "제1 신체부위"(예컨대 특정 손가락 끝)(85)를 기준포인트(830)에 일치하도록 가리킨다. Next, the user indicates that the "first body part" (e.g., a specific fingertip) 85 coincides with the reference point 830.

이때, 사용자를 신체부위의 좌표를 획득할 수 있는 장치, 예컨대 사용자를 촬영하고 있는 3차원 카메라(80)를 통하여 제1 신체부위의 좌표가 획득된다. At this time, the coordinates of the first body part are obtained through a device capable of acquiring the coordinates of the body part, for example, the three-dimensional camera 80 photographing the user.

다음으로, 기준포인트(830)와 사용자의 두 눈(86,87)을 잇는 두 개의 직선(83,84)이 각각 생성된다. Next, two straight lines 83,84 connecting the reference point 830 and the user's two eyes 86,87, respectively, are generated.

만약 두 직선 중 어느 하나의 직선이 제1 신체부위와 만난다면, 그 직선이 지나가는 쪽의 눈이 우세안이 된다.If any one of the two straight lines meets the first body part, the eye on which the straight line passes is dominant.

도 8의 실시예에서는 오른눈(87)과 기준포인트(830)를 잇는 직선(84)이 제1 신체부위(85)와 만나므로, 오른눈(87)이 우세안이 된다. In the embodiment of FIG. 8, the straight line 84 connecting the right eye 87 and the reference point 830 meets the first body part 85, so that the right eye 87 dominates.

실제로는 오차를 고려하여야 하므로, 제1 신체부위의 좌표와 어느 한 직선 간의 거리가 소정의 임계값보다 작다면, 사실상 그 신체부위가 그 직선과 만나는 것으로 간주하게 된다. In reality, since the error must be considered, if the distance between the coordinates of the first body part and a straight line is smaller than a predetermined threshold value, the body part is regarded as actually meeting the straight line.

도 9는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 일례를 나타낸 블록도이다.9 is a block diagram showing an example of a binocular disparity-based three-dimensional display device in which the decryption is eliminated.

도 9에서 예시하는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치(90)는, 증강정보 생성부(900), 3차원 영상 생성부(910), 증강정보 오버레이부(920) 및 영상출력부(930)를 포함하여 이루어진다. The binocular parallax-based three-dimensional display device 90 eliminates the example of the binocular parallax based display shown in FIG. 9, and includes an enhancement information generation unit 900, a three-dimensional image generation unit 910, an enhancement information overlay unit 920, 930).

증강정보 생성부(900)는 영상에 포함하고자 하는 증강정보를 2D 영상의 형태로 생성한다. The augmentation information generation unit 900 generates the augmentation information to be included in the image in the form of a 2D image.

3차원 영상 생성부(910)는 사용자에게 3차원 영상을 제공하기 위한 왼눈쪽 영상 및 오른눈쪽 영상을 각각 생성한다. 이를 위하여, 3차원 영상 생성부(910)는 왼눈쪽 영상을 생성하는 제1 영상 생성부(912)와 오른눈쪽 영상을 생성하는 제2 영상 생성부(914)를 더 포함할 수 있다. The three-dimensional image generation unit 910 generates a left-eye image and a right-eye image for providing a three-dimensional image to a user. For this, the three-dimensional image generation unit 910 may further include a first image generation unit 912 for generating a left-eye image and a second image generation unit 914 for generating a right-eye image.

증강정보 오버레이부(920)는 증강정보 생성부(900)에서 생성된 2D 영상의 형태의 증강정보를 왼눈쪽 영상과 오른눈쪽 영상 중 어느 하나에만 포함시킨다. 이를 통하여, 3차원 영상에 증강정보가 더 표시될 수 있게 된다. The enhancement information overlay unit 920 includes enhancement information in the form of a 2D image generated by the enhancement information generation unit 900 in either the left eye image or the right eye image. Through this, additional information can be displayed on the three-dimensional image.

영상출력부(930)는 증강정보가 포함된 3차원 영상이 외부 기기, 예컨대 디스플레이 패널에 표시될 수 있도록 하는 입출력 인터페이스이다. The image output unit 930 is an input / output interface that allows a three-dimensional image including enhancement information to be displayed on an external device such as a display panel.

도 10은 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 다른 예를 나타낸 블록도이다.10 is a block diagram showing another example of a binocular disparity-based three-dimensional display device in which the decryption is eliminated.

앞서 도 4의 실시예에서 설명하였듯이, 증강정보가 사용자의 우세안쪽 화면에 표시되도록 할 수 있다. 도 10은 이를 위한 디스플레이 장치이다. As described above with reference to the embodiment of FIG. 4, the augmentation information can be displayed on the inner screen of the user. 10 is a display device for this purpose.

도 10에서 예시하는 복시를 해소한 양안시차 기반 3차원 디스플레이 장치(1000)는, 증강정보 생성부(1010), 3차원 영상 생성부(1020), 증강정보 오버레이부(1030), 신체좌표 획득부(1040), 우세안 판단부(1050) 및 영상출력부(1060)를 포함하여 이루어진다. The binocular parallax-based three-dimensional display apparatus 1000, which is illustrated in FIG. 10, includes an enhancement information generation unit 1010, a three-dimensional image generation unit 1020, an enhancement information overlay unit 1030, A display unit 1040, a dominance determination unit 1050, and a video output unit 1060.

증강정보 생성부(1010)는 영상에 포함하고자 하는 증강정보를 2D 영상의 형태로 생성한다. The enhancement information generation unit 1010 generates enhancement information to be included in the image in the form of a 2D image.

3차원 영상 생성부(1020)는 사용자에게 3차원 영상을 제공하기 위한 왼눈쪽 영상 및 오른눈쪽 영상을 각각 생성한다. 이를 위하여, 3차원 영상 생성부(1020)는 왼눈쪽 영상을 생성하는 제1 영상 생성부(1022)와 오른눈쪽 영상을 생성하는 제2 영상 생성부(1024)를 더 포함할 수 있다. The three-dimensional image generating unit 1020 generates a left-eye image and a right-eye image for providing a three-dimensional image to a user. For this, the three-dimensional image generation unit 1020 may further include a first image generation unit 1022 for generating a left-eye image and a second image generation unit 1024 for generating a right-eye image.

신체좌표 획득부(1040)는 사용자를 촬영하는 3D 카메라 등의 외부 기기로부터 사용자의 각 신체부위의 좌표를 획득한다. 신체좌표 획득부(1040)는 외부에서 사용자의 신체좌표의 위치를 검출하는 3D 카메라(ToF, Structured Light, Stereo, Dual Aperture), Radar, Lidar 등의 장치가 제공하는 사용자의 각 신체부위의 좌표를 획득한다. 또는 사용자가 착용한 센서로부터 신체의 3차원 좌표를 검출할 수 있도록, 외부의 GPS(Global Positioning System), IPS(Indoor Positioning System), RSSI(Received Signal Strength Indication), 자이로 센서, 가속도 센서, 자기장 센서등이 제공하는 사용자의 각 신체부위의 좌표를 획득할 수도 있다.The body coordinate acquisition unit 1040 acquires the coordinates of each body part of the user from an external device such as a 3D camera that captures a user. The body coordinate acquisition unit 1040 may acquire coordinates of each body part provided by a device such as a 3D camera (ToF, Structured Light, Stereo, Dual Aperture), Radar, or Lidar that detects the position of the user's body coordinates from outside . (Global Positioning System), an IPS (Indoor Positioning System), a Received Signal Strength Indication (RSSI), a gyro sensor, an acceleration sensor, a magnetic field sensor And the coordinates of each body part of the user provided by the user.

우세안 판단부(1050)는 신체좌표 획득부(1040)가 획득한 사용자의 두 눈의 좌표, 특정 손가락 끝의 좌표 등을 이용하여, 사용자의 우세안을 결정한다. The dominant decider 1050 determines the user's dominance using the coordinates of the user's two eyes and the coordinates of the specific finger obtained by the body coordinate acquiring unit 1040.

증강정보 오버레이부(1030)는 증강정보 생성부(1010)에서 생성된 2D 영상의 형태의 증강정보를 사용자의 우세안쪽에 보여지는 영상에만 포함시킨다. 이를 통하여, 3차원 영상에 증강정보가 더 표시될 수 있게 된다. The augmenting information overlaying unit 1030 includes the augmenting information of the shape of the 2D image generated by the augmenting information generating unit 1010 only in the image shown inside the user's dominance. Through this, additional information can be displayed on the three-dimensional image.

영상출력부(1060)는 증강정보가 포함된 3차원 영상이 외부 기기, 예컨대 디스플레이 패널에 표시될 수 있도록 하는 입출력 인터페이스이다. The image output unit 1060 is an input / output interface that allows a three-dimensional image including enhancement information to be displayed on an external device, e.g., a display panel.

도 11은 도 10의 우세안 판단부를 더욱 상세히 나타낸 블록도이다.11 is a block diagram showing the dominant deciding unit of Fig. 10 in more detail.

우세안 판단부는 앞서 도 5 및 이에 관한 설명과 수학식 1 및 수학식 2에서 설명한 내용에 기초하여 사용자의 우세안을 판단한다.The dominant deciding unit judges the dominance of the user on the basis of FIG. 5 and the description thereof and the contents of Equations (1) and (2).

이를 위하여, 직선생성부(1052)는 사용자의 두 눈의 좌표를 이용하여, 기준포인트와 두 눈을 잇는 두 개의 직선을 생성한다. For this purpose, the straight line generation unit 1052 generates two straight lines connecting the reference point and the eyes using the coordinates of the user's two eyes.

거리 측정부(1054)는, 두 개의 직선과 제1 신체좌표(즉, 기준포인트를 가리킨 신체부위의 좌표) 사이의 거리를 측정한다. The distance measuring unit 1054 measures the distance between the two straight lines and the first body coordinate (i.e., the coordinates of the body part indicating the reference point).

직선과 제1 신체좌표 사이의 거리가 0이라는 것은 정확하게 제1 신체좌표를 직선이 지나감을 의미한다. 나아가, 0에 충분히 가까운 소정의 임계값보다 계산된 거리가 작은 경우에는, 직선이 제1 신체좌표를 지나가는 것으로 간주할 수 있다. The fact that the distance between the straight line and the first body coordinate is zero means that the straight line passes through the first body coordinate exactly. Furthermore, if the calculated distance is smaller than a predetermined threshold close enough to zero, the straight line can be regarded as passing through the first body coordinate.

또한, 기준포인트와 왼눈을 잇는 직선(l1)과 제1 신체좌표의 거리(d1)와, 기준포인트와 오른눈을 잇는 직선(l2)과 제1 신체좌표의 거리(d2)를 비교할 때, 두 거리(d1,d2) 중에서 작은 값을 갖는 쪽의 직선은 언제나 우세안을 지난다.Further, the reference point and the straight line connecting the oennun (l 1) and the length of the first body coordinates (d 1) and a straight line (l 2) connecting the right eye and the reference point and the length of the first body coordinates (d 2) In comparison, the straight line with the smaller of the two distances (d 1 , d 2 ) always passes through the dominant line.

한편, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법 및 장치에서는 증강정보가 그 밖의 (현실 또는 가상의) 물체 또는 콘텐트로부터 쉽게 구별 가능하다. On the other hand, the enhancement information can be easily distinguished from other (real or virtual) objects or contents in the enhancement information display method and apparatus of the binocular parallax based three-dimensional display device in which the ambiguity is eliminated.

발명에 따르면 증강정보는 언제나 한쪽 화면에만 표시된다. 따라서, 양쪽 화면에 모두 표시되는 그 밖의 물체 또는 콘텐트로부터 구별하기 위해서는 단지 증강정보가 표시되는 쪽의 눈만 감는 것으로 충분하다. According to the invention, the enhancement information is always displayed on only one screen. Therefore, in order to distinguish from other objects or contents displayed on both screens, it is sufficient to wind only the eye on which the augmentation information is displayed.

이상과 같이 발명의 상세한 내용을 도면 및 다양한 실시예를 통하여 살펴보았다. The present invention has been described in detail with reference to the drawings and various embodiments.

그러나, 이와 같은 내용은 발명을 설명하기 위한 예시에 불과한 것이다. 즉, 발명은 도면과 실시예들의 경우만으로 한정되는 것이 아니며, 특허청구범위에 속하는 실시예 및 그 밖의 어떠한 변형 실시예도 발명의 권리범위에 속하는 것은 자명하다.However, such contents are only examples for explaining the invention. That is, the invention is not limited to the drawings and the embodiments, and it is obvious that the embodiments and other modified embodiments belonging to the claims belong to the scope of the invention.

Claims (10)

양안시차를 이용하여 사용자에게 3차원 영상을 제공하기 위하여, 사용자의 두 눈에 각각 보여지는 제1 영상 및 제2 영상을 생성하는 단계;
증강정보를 포함하는 영상을 생성하는 단계; 및
상기 증강정보를 포함하는 영상이 상기 제1 영상을 표시하는 디스플레이 화면과 상기 제2 영상을 표시하는 디스플레이 화면 중 하나에만 표시되는 단계;를 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
Generating a first image and a second image that are respectively displayed on two eyes of a user to provide a three-dimensional image to a user using a binocular disparity;
Generating an image including enhancement information; And
And displaying the image including the enhancement information on only one of a display screen displaying the first image and a display screen displaying the second image. Augmentation information display method.
제1항에 있어서,
상기 증강정보를 포함하는 영상을 생성하는 단계 후에,
상기 제1 영상 및 상기 제2 영상 중 어느 하나에 상기 증강정보를 포함하는 영상이 오버레이되는 단계;를 더 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
The method according to claim 1,
After generating the image including the enhancement information,
Further comprising overlaying an image including the enhancement information on either the first image or the second image, wherein the enhancement information is displayed on the display.
제1항에 있어서,
상기 증강정보를 포함하는 영상을 생성하는 단계 후에,
상기 증강정보를 포함하는 영상과 함께 표시될 영상을 상기 제1 영상과 상기 제2 영상 중에서 선택하는 단계;를 더 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
The method according to claim 1,
After generating the image including the enhancement information,
And selecting the image to be displayed together with the image including the enhancement information from among the first image and the second image, wherein the enhancement information is displayed on the display unit.
제3항에 있어서,
상기 증강정보를 포함하는 영상과 함께 표시될 영상은, 상기 사용자의 우세안측에 보여지는 영상인, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
The method of claim 3,
Wherein the image to be displayed together with the image including the augmentation information is a video displayed on the inner side of the dominant side of the user.
제4항에 있어서,
상기 사용자의 상기 우세안을 결정하는 단계;를 더 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
5. The method of claim 4,
And determining the dominant eye of the user. The method of claim 1, further comprising:
제5항에 있어서,
상기 우세안을 결정하는 단계는,
기준포인트가 디스플레이 화면에 표시되는 단계;
사용자가 기준포인트와 일치하도록 배치한 제1 신체부위의 좌표를 획득하는 단계;
상기 제1 신체부위 및 상기 사용자의 두 눈을 각각 잇는 두 개의 직선을 생성하는 단계;
상기 두 개의 직선 중 실질적으로 상기 제1 신체부위의 좌표를 지나가는 직선과 만나는 눈을 상기 우세안으로 결정하는 단계;를 더 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
6. The method of claim 5,
The step of determining the dominance may comprise:
Displaying a reference point on a display screen;
Obtaining coordinates of a first body part arranged so that a user coincides with a reference point;
Creating two straight lines connecting the first body part and the two eyes of the user, respectively;
And determining an eye that meets a straight line passing through the coordinates of the first body part substantially among the two straight lines as the dominant eye, wherein the enhancement information display method of the binocular parallax-based three-dimensional display device eliminates the ambiguity.
제6항에 있어서,
상기 제1 신체부위의 좌표와 상기 두 개의 직선 중 어느 한 직선 사이의 거리가 소정의 임계값보다 작다면, 상기 제1 신체부위가 실질적으로 상기 직선과 만나는 것으로 간주하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치의 증강정보 표시 방법.
The method according to claim 6,
The binocular disparity in which the first body part is considered to substantially meet the straight line if the coordinates of the first body part and the distance between any one of the two straight lines is smaller than a predetermined threshold, Based display device.
영상에 포함하고자 하는 증강정보를 2D 영상의 형태로 생성하는 증강정보 생성부;
사용자에게 3차원 영상을 제공하기 위한 제1 영상 및 제2 영상을 생성하는 3차원 영상 생성부; 및
증강정보를 상기 제1 영상 및 상기 제2 영상 중 하나와만 오버레이하는 증강정보 오버레이부;를 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치.
An enhancement information generation unit for generating enhancement information to be included in an image in the form of a 2D image;
A three-dimensional image generation unit for generating a first image and a second image for providing a three-dimensional image to a user; And
And an enhancement information overlay unit for overlaying the enhancement information with only one of the first image and the second image.
제8항에 있어서,
사용자의 각 신체부위의 좌표를 획득하는 신체좌표 획득부;
상기 신체좌표 획득부가 획득한 상기 사용자의 두 눈의 좌표 및 상기 사용자의 제1 신체좌표에 기초하여 우세안을 결정하는 우세안 판단부;를 더 포함하고,
상기 증강정보 오버레이부는, 상기 제1 영상 및 상기 제2 영상 중 상기 우세안에 보여지는 쪽의 영상을 상기 증강정보와 함께 표시하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치.
9. The method of claim 8,
A body coordinate acquiring unit for acquiring coordinates of each body part of the user;
And a dominant eye determination unit for determining a dominant eye based on the coordinates of the two eyes of the user and the first body coordinates of the user acquired by the body coordinate acquiring unit,
Wherein the enhancement information overlaying unit displays an image of the side of the first image and the second image that is viewed in the dominant direction together with the enhancement information.
제9항에 있어서,
상기 우세안 판단부는,
기준포인트와 상기 두 눈을 각각 잇는 두 개의 직선을 생성하는 직선생성부; 및
상기 사용자가 상기 기준포인트와 일치하도록 배치한 제1 신체부위와 상기 두 개의 직선 사이의 거리를 측정하는 거리 측정부;를 더 포함하는, 복시를 해소한 양안시차 기반 3차원 디스플레이 장치.
10. The method of claim 9,
The dominant-
A straight line generating unit for generating two straight lines connecting the reference point and the two eyes; And
And a distance measurement unit for measuring a distance between the first body part and the two straight lines arranged so that the user coincides with the reference point.
KR1020160079414A 2015-06-24 2016-06-24 Method for displaying augmented information without double vision in three dimensional display device KR20170000808A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20150089929 2015-06-24
KR1020150089929 2015-06-24

Publications (1)

Publication Number Publication Date
KR20170000808A true KR20170000808A (en) 2017-01-03

Family

ID=57586665

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160079414A KR20170000808A (en) 2015-06-24 2016-06-24 Method for displaying augmented information without double vision in three dimensional display device

Country Status (2)

Country Link
KR (1) KR20170000808A (en)
WO (1) WO2016209030A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102165807B1 (en) * 2019-09-04 2020-10-14 주식회사 브이터치 Method, system and non-transitory computer-readable recording medium for determining a dominant eye

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020130821A1 (en) * 2001-03-16 2002-09-19 Barry Bronson Method and apparatus for displaying images

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007034628A (en) * 2005-07-26 2007-02-08 Canon Inc Method and system for image processing
JP4764854B2 (en) * 2007-05-22 2011-09-07 富士フイルム株式会社 Imaging apparatus, image reproducing apparatus, imaging method, system, and program
JP2009033538A (en) * 2007-07-27 2009-02-12 Sea Phone Co Ltd Stereoscopic image display device and stereoscopic image display method
JP2009128565A (en) * 2007-11-22 2009-06-11 Toshiba Corp Display device, display method and head-up display
JP6337418B2 (en) * 2013-03-26 2018-06-06 セイコーエプソン株式会社 Head-mounted display device and method for controlling head-mounted display device

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020130821A1 (en) * 2001-03-16 2002-09-19 Barry Bronson Method and apparatus for displaying images

Also Published As

Publication number Publication date
WO2016209030A1 (en) 2016-12-29

Similar Documents

Publication Publication Date Title
US10029700B2 (en) Infotainment system with head-up display for symbol projection
JP4793451B2 (en) Signal processing apparatus, image display apparatus, signal processing method, and computer program
JP6304628B2 (en) Display device and display method
US20160307374A1 (en) Method and system for providing information associated with a view of a real environment superimposed with a virtual object
KR970004916A (en) A stereoscopic CG image generating apparatus and stereoscopic television apparatus
JPWO2017183346A1 (en) Information processing apparatus, information processing method, and program
GB2556910A (en) Virtual reality display
EP2402906A2 (en) Apparatus and method for providing 3D augmented reality
US9338426B2 (en) Three-dimensional image processing apparatus, three-dimensional imaging apparatus, and three-dimensional image processing method
EP2728888A2 (en) Multi-view display apparatus and image processing therefor
US20190043245A1 (en) Information processing apparatus, information processing system, information processing method, and program
KR20160094190A (en) Apparatus and method for tracking an eye-gaze
EP2631696A2 (en) Image generator
JP6820561B2 (en) Image processing device, display device, navigation system, image processing method and program
JP2013168063A (en) Image processing device, image display system, and image processing method
KR20150121127A (en) Binocular fixation imaging method and apparatus
JP2012223446A (en) Stereoscopic endoscope apparatus
KR20130059650A (en) Focus control device for contents of head up display and method for the same
JP2018500690A (en) Method and system for generating magnified 3D images
JP2019102936A (en) Display device, electronic mirror, control method of display device, and display control program
CN102799378B (en) A kind of three-dimensional collision detection object pickup method and device
US20190166358A1 (en) Display device, electronic mirror and method for controlling display device
US20140049540A1 (en) Image Processing Device, Method, Computer Program Product, and Stereoscopic Image Display Device
US20200257360A1 (en) Method for calculating a gaze convergence distance
KR20170000808A (en) Method for displaying augmented information without double vision in three dimensional display device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application