KR20200086513A - Non-eyeglass integrated image display method and system using micro mirror array - Google Patents

Non-eyeglass integrated image display method and system using micro mirror array Download PDF

Info

Publication number
KR20200086513A
KR20200086513A KR1020190002795A KR20190002795A KR20200086513A KR 20200086513 A KR20200086513 A KR 20200086513A KR 1020190002795 A KR1020190002795 A KR 1020190002795A KR 20190002795 A KR20190002795 A KR 20190002795A KR 20200086513 A KR20200086513 A KR 20200086513A
Authority
KR
South Korea
Prior art keywords
image
mirror array
integrated
integrated image
micro
Prior art date
Application number
KR1020190002795A
Other languages
Korean (ko)
Other versions
KR102241060B1 (en
Inventor
신동학
Original Assignee
주식회사 홀로랩
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 홀로랩 filed Critical 주식회사 홀로랩
Priority to KR1020190002795A priority Critical patent/KR102241060B1/en
Publication of KR20200086513A publication Critical patent/KR20200086513A/en
Application granted granted Critical
Publication of KR102241060B1 publication Critical patent/KR102241060B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/322—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

The present invention relates to a non-eyeglasses integrated image display system using a micro mirror array, comprising: an integrated image pickup unit; an integrated image reproduction unit; and a micro mirror array device unit. In addition, the present invention places the micro mirror array device, which is able to optically perform PO conversion, which correctly converts a pseudoscopic image into an orthoscopic image, in the integrated image configured by a display panel and a lens array, thereby optically performing PO conversion, and reproducing a three-dimensional image with the pseudoscopic phenomenon resolved. According to the present invention, the non-eyeglasses integrated image display system comprises the integrated image pickup unit, the integrated image reproduction unit, and the micro mirror array device unit, thereby having a structure in which an image is formed symmetrically with the micro mirror array device as a reference surface. Accordingly, the present invention has remarkable effects in performing PO conversion, which changes the depth by 180 degrees, obtains an orthoscopic image, and provides a correct image.

Description

미소거울배열을 이용하는 무안경 집적 영상 디스플레이 방법 및 시스템 { Non-eyeglass integrated image display method and system using micro mirror array }{Non-eyeglass integrated image display method and system using micro mirror array}

본 발명은 미소미러배열을 이용하는 무안경 집적 영상 디스플레이 방법 및 시스템에 관한 것으로 더욱 상세히는 렌티큘러 렌즈나 렌즈어레이를 이용하는 무안경 집적 영상 디스플레이 방식에 있어서 미소미러배열 소자를 사용하여 깊이 반전된 영상을 공간 홀로그램 영상으로 표시하는 방법 및 시스템에 관한 것이다.The present invention relates to a method and system for autostereoscopic image display using a micromirror array, and more specifically, to a depth-inverted image using a micromirror array element in a autostereoscopic image display method using a lenticular lens or a lens array. It relates to a method and system for displaying as a holographic image.

지난 한세기 동안 3차원(Three-dimensional: 3D) 정보를 기록하고 재생하는 3D 이미징 기술이 큰 관심을 받았다. 그중에서도 특히 집적영상(Integral imaging: InIm) 기술이 이를 대표하는 차세대 기술로 각광받고 있다. 이 컨셉은 G. Lippmann 에 의해 1908년에 처음으로 제안 되었다. 그는 구체형 디옵터(Spherical diopter) 배열을 활용하여 3D 정보를 획득 및 재구성 할수 있는 방법을 제시 하였으며, 이러한 그의 연구는 인테그럴 포토그래피(Integral Photography: IP) 라고도 잘 알려져있다 [Lippmann ]. 최근에는 구체형 디옵터 대신, 반구형의 볼록렌즈들이 가로세로 배열을 이루는 렌즈어레이(Lens array) 를 활용하고, 2차원(Two-dimensional: 2D) 이미징 센서(e.g: CMOS, CCD) 로 3D 영상을 획득하는 방식으로 발전되어 현재까지도 꾸준한 연구가 진행되고 있다.Over the past century, 3D imaging technology that records and reproduces three-dimensional (3D) information has been of great interest. Among them, integrated imaging (InIm) technology has been spotlighted as a representative next-generation technology. The concept was first proposed in 1908 by G. Lippmann. He proposed a method for acquiring and reconstructing 3D information using a spherical diopter arrangement, and his work is also known as Integral Photography (IP) [Lippmann]. Recently, instead of a spherical diopter, a lens array in which hemispherical convex lenses are arranged horizontally and vertically is utilized, and a 3D image is acquired by a two-dimensional (2D) imaging sensor (eg CMOS, CCD). It has been developed in a manner that continues to be studied.

이렇게 획득 된 영상은 작은 영상들의 배열로 이루어져있는데, 각각의 작은 영상들을 요소영상 이미지 (Elemental image: EI), 그리고 이들의 배열을 집적영상 이미지(Integral image: II) 라고 한다. 흥미로운점은 획득된 모든 요소영상 이미지들은 공간정보(spatial information) 와 각도정보(angular information)를 동시에 가지고 있다. 즉, 요소영상 이미지 각각의 픽셀은 렌즈어레이를 통과한 빛의 다양한 입사를 통해 기록되는 빛의 세기들을 모은 다차원 정보이기 때문이다. 한편, 이렇게 기록된 집적영상 이미지는 촬영의 역순으로 재생이 된다. 촬영된 집적영상 이미지를 재생할 디스플레이 장치 앞에 렌즈어레이를 배치함으로써 실상과 허상으로 구성된 3차원 정보가 복원된다. 이렇게 재생된 영상은 상하좌우의 연속적인 시점과 깊이감을 가지는 다시점 3D 컬러영상이 된다. The image thus obtained consists of an array of small images, each of which is called an elemental image (EI), and their arrangement is called an integrated image (II). Interestingly, all acquired element image images have both spatial information and angular information. That is, each pixel of the element image is multi-dimensional information gathering light intensities recorded through various incidences of light passing through the lens array. On the other hand, the recorded integrated video image is reproduced in the reverse order of shooting. By placing the lens array in front of the display device to reproduce the captured integrated image image, 3D information composed of real images and virtual images is restored. The reproduced image becomes a multi-view 3D color image with continuous viewpoints of top, bottom, left, and right.

일반적으로 3차원 물체에 대해서 렌즈배열 (렌티큘러 시트도 사용가능함)을 카메라에 앞에 위치시켜서 3차원 영상의 정보를 픽업하는 영상픽업부, 상기 영상픽업부에서 픽업된 요소영상을 렌즈배열(또는 렌티큘러시트)이 부착된 디스플레이패널로 구성되며 슈도스코픽 3D 영상을 재생하는 집적영상 재생부 및 상기 슈도스코픽 3D 영상에 대해서 깊이 반전 기능을 통하여 올바른 오쏘스코픽 3D 영상을 공간에 투영하는 미소거울배열소자부로 구성된다.In general, a lens pickup (or a lenticular sheet) of an image pickup unit for picking up information of a 3D image by placing a lens array (a lenticular sheet can also be used) on a 3D object in front of the camera. It is composed of a display panel attached with) and is composed of an integrated image reproducing unit for reproducing pseudoscopic 3D images and a micro-mirror array element unit for projecting the correct orthoscopic 3D images into space through a depth inversion function for the pseudoscopic 3D images. .

특히, 종래기술로서 등록특허공보 등록번호 제10-1238824호의 인터렉티브한 3차원 디스플레이 시스템에는, 디스플레이패널로부터 출사되는 빛이 투과되는 개구(aperture)와 상기 빛을 차단하는 장벽(barrier)이 반복 배열되어 형성된 시차장벽패널이 상기 디스플레이패널의 전방에 배치되며, 상기 개구를 통해 합성된 입체영상을 분리 관측하게 하여 입체감을 느끼게 하는 무안경식 3차원 영상표시장치; 상기 무안경식 3차원 영상표시장치로부터 상기 디스플레이패널의 크기, 해상도, 단위화소의 폭(p), 각 단위화소 사이에 위치한 전극의 폭(M) 및 상기 시차장벽패널과 디스플레이패널사이의 거리(d), 개구폭(A) 및 장벽의 폭(B)에 대한 디스플레이 정보를 비롯하여 기설정된 총 시점수, 각 단위화소당 점광원의 수, 상기 시차장벽패널과 관찰면사이의 관찰거리(V) 및 관찰면에서 형성되는 각 시점영상의 시역중심간 거리(B.D)에 대한 시점 정보를 제공받아 디스플레이의 단위화소를 이루는 미소면적의 점광원에서 출발하는 광이 개구를 통과하여 각 시점에 도착하는 전체 시역폭(Intensity distribution)을 연산하여 기설정된 관찰면에서 수평방향의 관찰범위내의 시역분포데이터를 획득하는 제어장치; 및 상기 제어장치로부터 획득된 시역분포 데이터를 제공받아 상기 디스플레이패널의 수평방향에 대한 각 시점별 광량의 크기로 이루어진 최적시청영역 영상을 관찰자가 시각적으로 알 수 있도록 관찰공간상의 바닥면에 출력하는 빔 프로젝트 장치를 포함하는 인터렉티브한 3차원 디스플레이 시스템이라고 기재되어 있다.Particularly, in the interactive 3D display system of Patent No. 10-1238824 registered as a prior art, an aperture through which light emitted from a display panel is transmitted and a barrier that blocks the light are repeatedly arranged. The formed parallax barrier panel is disposed in front of the display panel, and the three-dimensional image synthesized through the opening is observed separately, so that an autostereoscopic 3D image display device is provided. The display panel size, resolution, unit pixel width (p), electrode width (M) between each unit pixel and the distance between the parallax barrier panel and the display panel from the autostereoscopic 3D image display device (d) ), display information for the opening width (A) and the width (B) of the barrier, a predetermined total number of viewpoints, the number of point light sources per unit pixel, the observation distance (V) between the parallax barrier panel and the observation surface, and The entire viewing area where light from a point light source of a small area forming a unit pixel of a display passes through an opening by receiving viewpoint information on a distance (BD) between centers of view of each viewpoint image formed on the observation surface. A control device that calculates the width (Intensity distribution) to obtain visual field distribution data within a horizontal observation range on a predetermined observation surface; And a beam that receives the viewing area distribution data obtained from the control device and outputs an image of the optimal viewing area, which is the size of the amount of light for each view point in the horizontal direction of the display panel, to the bottom surface on the viewing space so that the viewer can visually know. It is described as an interactive three-dimensional display system that includes a project device.

다른 종래기술로서 등록특허공보 등록번호 제10-1288120호의 관찰자에게 최적시청영역을 표시해주는 3차원 디스플레이 시스템에는, 개구를 포함하는 시차장벽이 디스플레이패널의 전방에 배치되는 무안경식 3차원 영상표시장치; 상기 3차원 영상표시장치의 전방에 위치한 적어도 하나 이상의 관찰자를 포함한 실제 관찰영역에 대한 배경영상정보를 획득하기 위한 카메라; 상기 카메라로부터 획득된 배경영상 정보를 제공받아 스테레오 정합을 이용하여 관찰자 위치에 대한 3차원 영상 및 위치 정보데이터를 획득하는 3차원 영상획득부; 및 상기 무안경식 3차원 영상표시장치의 각각의 광원에서 출발하는 광이 관찰면을 기준으로 수평축의 x방향 및 수직축의 z방향으로 확장된 관찰영역에서 각 시점에 도착하는 확장된 전체 시역폭(Extended intensity distribution)을 연산하여, 관찰면에서 수평 및 수직방향의 관찰범위내의 시역분포 데이터를 획득함과 아울러, 상기 시역분포 데이터를 이용하여 상기 디스플레이패널의 수평 및 수직방향에 대한 각 시점별 광량의 크기로 이루어진 최적시청영역 영상을 획득하며, 상기 최적시청영역 영상에 상기 3차원 영상획득부로부터 획득된 관찰자의 3차원 영상 및 위치 정보데이터를 합성하여 관찰자가 시각적으로 알 수 있도록 상기 디스플레이패널에 표시해주는 제어장치를 포함하는 3차원 디스플레이 시스템이라고 기재되어 있다.As another conventional technique, a three-dimensional display system for displaying an optimal viewing area to an observer of Patent Registration No. 10-1288120 includes: an autostereoscopic 3D image display device in which a parallax barrier including an opening is disposed in front of a display panel; A camera for acquiring background image information on an actual observation area including at least one observer located in front of the 3D image display device; A 3D image acquisition unit that receives the background image information obtained from the camera and acquires a 3D image and location information data about an observer's position using stereo matching; And an extended total viewing width at which light originating from each light source of the autostereoscopic 3D image display device arrives at each point in an observation area extending in the x-direction of the horizontal axis and the z-direction of the vertical axis based on the observation plane. intensity distribution) to obtain visual field distribution data within the horizontal and vertical observation ranges on the observation surface, and the size of the light quantity for each view point in the horizontal and vertical direction of the display panel using the visual field distribution data. Obtain an optimal viewing area image consisting of, and synthesize the observer's 3D image and location information data obtained from the 3D image acquisition unit on the optimal viewing area image to display it on the display panel so that the viewer can visually know It is described as a three-dimensional display system including a control device.

한편, 이러한 집적영상 기술에는 치명적인 문제점이 존재한다. 일반적인 집적영상 재생 방식은 객체의 집적 영상이 공간상에서 표시될때, 관측자가 객체의 집적 영상을 관측하는 모습이, 관측자가 객체를 직접 관측하는 모습과는 정반대의 원근 관계로 나타나는, 즉, 멀리있는 사물이 가까이 보이거나, 가까이 있는 사물이 멀리보이는 슈도스코픽(Pseudoscopic) 현상이 발생한다. On the other hand, there is a fatal problem with the integrated image technology. In a general integrated image reproduction method, when an integrated image of an object is displayed in space, an observer's observation of the object's integrated image appears in the opposite perspective to that of the observer directly observing the object, that is, a distant object. Pseudoscopic phenomena occur when this object is visible or objects nearby are visible.

이는 도 1에서 보여지듯이 영상의 획득과 재생이 서로 반대 방향에서 이루어지기 때문에 발생하는 현상인데, 카메라로 획득할때 가까이 있던 물체는 재생될때도 마찬가지로 디스플레이 장치의 가까운곳에 재생되고, 결과적으로 이를 바라보는 관측자는 획득된 영상의 180도 회전된 뒷면을 관측하게 된다. This is a phenomenon that occurs because the acquisition and reproduction of images are made in opposite directions, as shown in FIG. 1, when objects acquired by the camera are reproduced, they are also reproduced in the vicinity of the display device as well, and consequently looking at them The observer observes the back side rotated 180 degrees of the acquired image.

따라서, 재생되는 영상은 원근감이 반전되어 보여지는 현상이 발생하게 되는것이다. 해당 문제를 해결하기 위한 방법으로 흔히 슈도스코픽의 오소스코픽 변환 기법(Pseudoscopic-to-orthoscopic conversion: PO conversion)이 제시된다. Therefore, a phenomenon in which the perspective of the reproduced image is shown in reverse is generated. As a method to solve the problem, pseudoscopic-to-orthoscopic conversion (PO conversion) is often proposed.

이러한 문제를 해결하기 위해 다양한 곳에서 연구와 개발이 현재까지 지속적으로 이뤄지고 있지만, 여전히 개선할점들이 많은 상황이다 [ AIRR, SPOC, Okano’s method, etc.. ].In order to solve these problems, research and development have been continuously conducted in various places to date, but there are still many improvements [AIRR, SPOC, Okano’s method, etc. ].

따라서 본 발명은 상기와 같은 문제점을 해결하고자 안출된 것으로, 본발명은 집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성되어, 상기 미소미러배열소자를 기준면으로 해서 대칭적으로 영상이 결상되는 구조를 가짐으로써 깊이를 180도 바꾸는 PO conversion 기능이 수행되고, 오쏘스코픽 영상이 얻어지므로 올바른 영상을 제공하는 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 시스템 및 방법을 제공하고자 하는 것이다.Therefore, the present invention has been devised to solve the above problems, and the present invention is composed of an integrated image pickup unit, an integrated image playback unit, and a micromirror array element, so that the image is symmetrically based on the micromirror array element as a reference plane. It is intended to provide an autostereoscopic integrated image display system and method using a micro-mirror array that provides a correct image because a PO conversion function that changes the depth by 180 degrees by having an imaged structure is performed and an orthoscopic image is obtained.

본발명은 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 시스템에 관한 것으로, 집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성되는 것을 특징으로 한다.The present invention relates to a glasses-free integrated image display system using a micro-mirror array, and is characterized by comprising an integrated image pickup unit, an integrated image playback unit, and a micro-mirror array element unit.

그리고 본발명은 디스플레이 패널과 렌즈어레이로 구성된 집적 영상 구성에 슈도스코픽 영상을 오쏘스코픽 영상으로 올바르게 변환하는 PO conversion을 광학적으로 수행할 수 있는 미소거울배열소자를 배치함으로써 PO converion이 광학적으로 수행되고, 슈도스코픽 현상이 해결된 3차원 영상을 재생하는 것을 특징으로 하는 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 방법을 특징으로 한다.In addition, the present invention is performed by optical converion by arranging a micro-mirror array element capable of optically performing a PO conversion that correctly converts a pseudoscopic image into an orthoscopic image in an integrated image configuration consisting of a display panel and a lens array, Characterized by a method for displaying a glasses-free integrated image using a micro-mirror array, characterized by reproducing a 3D image in which pseudoscopic phenomenon is solved.

따라서 본발명은 집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성되어, 상기 미소미러배열소자를 기준면으로 해서 대칭적으로 영상이 결상되는 구조를 가짐으로써 깊이를 180도 바꾸는 PO conversion 기능이 수행되고, 오쏘스코픽 영상이 얻어지므로 올바른 영상을 제공하는 현저한 효과가 있다.Therefore, the present invention is composed of an integrated image pickup unit, an integrated image playback unit, and a micromirror array element unit, and has a structure in which an image is symmetrically formed using the micromirror array element as a reference plane to change the depth by 180 degrees. Since this is performed and an orthoscopic image is obtained, there is a remarkable effect of providing a correct image.

도 1. 집적 영상 기술의 구성도 (픽업과 재생부)
도 2. 전체 시스템 구조
도 3. 직접영상픽업부의 구조
도 4. 직접영상재생부의 구조
도 5. 미소거울배열소자부의 구조 및 결상의 원리
도 6. 전체 디스플레이 시스템의 구조
도 7. 실험 데모를 위한 집적영상 픽업부의 3D 영상 획득 실험 구조
도 8. 집적영상재생부에서 재생된 슈도스코픽 3D영상 표시
도 9. 미소거울배열부에서 재생된 오쏘스코픽 3D영상 표시Figure 1. Structure of integrated video technology (pickup and playback unit)
Figure 2. Overall system structure
Figure 3. Structure of the direct video pickup unit
Figure 4. Structure of the direct video playback unit
Fig. 5. Structure and imaging principle of the micro-mirror array element
Figure 6. Structure of the entire display system
7. Experimental structure of 3D image acquisition of integrated image pickup for demonstration
Fig. 8. Pseudoscopic 3D image displayed in the integrated image playback unit
Fig. 9 Display of orthoscopic 3D images reproduced in a micromirror array

본발명은 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 시스템에 관한 것으로,The present invention relates to a glasses-free integrated video display system using a micro-mirror array,

집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성되는 것을 특징으로 한다.It is characterized by being composed of an integrated image pickup unit, an integrated image playback unit, and a micromirror array element unit.

또한, 상기 영상픽업부는 3차원 물체에 대해서 렌즈배열 또는 렌티큘러 시트를 카메라에 앞에 위치시켜서 3차원 영상의 정보를 픽업하는 것이며, 집적영상 재생부는 상기 영상픽업부에서 픽업된 요소영상을 렌즈배열 또는 렌티큘러시트가 부착된 디스플레이패널로 구성되며 슈도스코픽 3D 영상을 재생하는 것이며, 상기 미소거울배열소자부는 슈도스코픽 3D 영상에 대해서 깊이 반전 기능을 통하여 올바른 오쏘스코픽 3D 영상을 공간에 투영하는 것을 특징으로 한다.In addition, the image pickup unit is to place a lens array or a lenticular sheet on a 3D object in front of the camera to pick up information on a 3D image, and the integrated image playback unit performs lens array or lenticular on the element image picked up by the image pickup unit. It consists of a display panel with a sheet attached to it and reproduces a pseudoscopic 3D image, and the micro-mirror array element unit is characterized by projecting a correct orthoscopic 3D image into space through a depth inversion function for the pseudoscopic 3D image.

그리고 본발명은 디스플레이 패널과 렌즈어레이로 구성된 집적 영상 구성에 슈도스코픽 영상을 오쏘스코픽 영상으로 올바르게 변환하는 PO conversion을 광학적으로 수행할 수 있는 미소거울배열소자를 배치함으로써 PO converion이 광학적으로 수행되고, 슈도스코픽 현상이 해결된 3차원 영상을 재생하는 것을 특징으로 하는 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 방법을 특징으로 한다.In addition, the present invention is performed by optical converion by arranging a micro-mirror array element capable of optically performing a PO conversion that correctly converts a pseudoscopic image into an orthoscopic image in an integrated image configuration consisting of a display panel and a lens array, Characterized by a method for displaying a glasses-free integrated image using a micro-mirror array, characterized by reproducing a 3D image in which pseudoscopic phenomenon is solved.

본발명을 첨부도면에 의해 상세히 설명하면 다음과 같다. 도 1. 집적 영상 기술의 구성도 (픽업과 재생부), The present invention will be described in detail with reference to the accompanying drawings. Fig. 1. Configuration diagram of integrated video technology (pickup and playback section),

도 2. 전체 시스템 구조도, 도 3. 직접영상픽업부의 구조, 도 4. 직접영상재생부의 구조도, 도 5. 미소거울배열소자부의 구조 및 결상의 원리도, 도 6. 전체 디스플레이 시스템의 구조도, 도 7. 실험 데모를 위한 집적영상 픽업부의 3D 영상 획득 실험 구조도,Fig. 2. Overall system structure diagram, Fig. 3. Structure of the direct image pickup section, Fig. 4. Structure diagram of the direct image playback section, Fig. 5. Structure and imaging principle of the micro-mirror array element section, Fig. 6. Structure of the entire display system Figure 7, Figure 3 3D image acquisition experiment structure diagram of the integrated image pickup for the demonstration,

도 8. 집적영상재생부에서 재생된 슈도스코픽 3D영상 표시도,Figure 8. Pseudoscopic 3D image display diagram reproduced in the integrated image playback unit,

도 9. 미소거울배열부에서 재생된 오쏘스코픽 3D영상 표시도이다.9 is a view showing an orthoscopic 3D image reproduced in a micromirror array.

본 발명의 구성은 도 2와 같이 집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성된다. The configuration of the present invention is composed of an integrated image pickup unit, an integrated image playback unit, and a micromirror array element unit as shown in FIG. 2.

집적영상픽업부에 대해 설명하면, If you explain the integrated video pickup,

집적 영상 기술을 이용하여 영상 픽업을 위해서는 도 2와 같이 구성한다. 도 3에서 픽업할 3D 물체 앞에 렌즈어레이를 배치하고, 2D 카메라로 해당 렌즈어레이에 카메라의 초점을 둔 후 영상을 획득한다. 이렇게 촬영된 영상은 요소영상 되는데, 오목렌즈의 특성상 상하좌우로 반전이 되어 획득이 된다. For image pickup using the integrated image technology, it is configured as shown in FIG. 2. In FIG. 3, a lens array is placed in front of a 3D object to be picked up, and the image is acquired after focusing the camera on the lens array with a 2D camera. The photographed image is an elemental image, and is obtained by inverting it up, down, left, and right due to the characteristics of the concave lens.

집적영상재생부에 대해 설명하면,If you explain the integrated video playback unit,

상기에서 기록된 요소 영상을 공간 3D 영상으로 변환하기 위해서는 특정구조의 광학 디스플레이 장치가 필요하다. 도 4와 같이 디스플레이 패널에 앞에서 기록된 요소영상을 표시하고 렌즈어레이를 배치한다. 이때 렌즈어레이와 패널사이의 거리는 렌즈어레이의 기초 렌즈의 초점거리와 같다. 그러면 충분히 넓은 깊이 영역의 3D 영상을 얻을 수 있다. 한편, 획득된 요소 영상을 PO conversion을 적용하지 않은 채 그대로 사용하게 될 시, 상기에서 말한 슈도스코틱 현상이 발생하여 깊이감이 반전된 영상이 재생되는 문제점이 있다.In order to convert the element image recorded above into a spatial 3D image, an optical display device having a specific structure is required. As shown in FIG. 4, the element image recorded above is displayed on the display panel and a lens array is disposed. At this time, the distance between the lens array and the panel is equal to the focal length of the basic lens of the lens array. Then, a sufficiently wide depth region 3D image can be obtained. On the other hand, when the obtained element image is used as it is without applying PO conversion, there is a problem in that the pseudoscopic phenomenon described above occurs and an image in which depth is reversed is reproduced.

미소거울배열소자부에 대해 설명하면,When explaining the micro-mirror array element,

본 발명에서는 슈도스코픽 영상을 오쏘스코픽 영상으로 올바르게 변환하는 PO conversion을 광학적으로 수행할 수 있는 미소거울배열소자를 이용한다. 미소거울배열소자의 구조는 도 5과 같은 구조를 가진다. In the present invention, a micro-mirror array element capable of optically performing PO conversion for correctly converting a pseudoscopic image into an orthoscopic image is used. The structure of the micro-mirror array element has a structure as shown in FIG. 5.

미소거울배열소자에 의한 PO conversion을 설명하기 위해서는 도 5와 같이 2개의 점광원 P1과 P2를 고려하자. P1과 P2는 미소거울배열소자로 부터 서로 다른 거리에 위치해 있다. 먼저 점광원 P1에서 출발하는 광원들은 미소거울배열소자에 포함되어있는 수직미러들에 의해서 도와 같이 P1'의 위치로 결상되게 된다. 그리고 광원 P2는 미소거울배열소자를 통하여 P2'의 위치로 결상된다. 이와 같이 미소거울배열소자를 기준면으로 해서 대칭적으로 영상이 결상되는 구조를 가짐을 알 수 있다. 따라서, 이러한 원리를 통해서 깊이를 180도 바꾸는 PO conversion 기능이 수행된다.To explain the PO conversion by the micro-mirror array element, consider two point light sources P1 and P2 as shown in FIG. 5. P1 and P2 are located at different distances from the micromirror array element. First, the light sources starting from the point light source P1 are imaged to the position of P1' with the help of vertical mirrors included in the micro-mirror array element. And the light source P2 is imaged to the position of P2' through the micro-mirror array element. As described above, it can be seen that the micro mirror array element has a structure in which an image is formed symmetrically as a reference plane. Therefore, the PO conversion function of changing the depth by 180 degrees is performed through this principle.

본 발명에서 제안하는 3D 집적 영상 디스플레이 방식의 유용함을 보이기 위한 기초 광학 실험을 수행하였다. 도 5에 나타난 PO conversion을 포함하는 집적 영상 디스플레이 시스템의 구조도는 아래 도 6과 같다. 디스플레이 패널과 렌즈어레이로 구성된 전통적인 집적 영상 방식에 미소거울배열소자를 도와 같이 45도 기울여 배치함으로써 PO converion이 광학적으로 수행되고, 결과적으로 슈도스코픽 현상이 해결된 3차원 영상을 재생할 수 있다. Basic optical experiments were performed to show the usefulness of the 3D integrated image display method proposed in the present invention. The structure diagram of the integrated video display system including the PO conversion shown in FIG. 5 is shown in FIG. 6 below. In a traditional integrated imaging method consisting of a display panel and a lens array, the PO mirror is arranged at an angle of 45 degrees with the help of a micro-mirror array, and PO converion is performed optically, and as a result, a pseudoscopic phenomenon is solved.

이렇게 얻어진 집적영상 이미지를 3D 영상으로 복원하는 실험을 수행하기 위하여 도 6과 같은 시스템을 구성하였다.The system as shown in FIG. 6 was constructed to perform the experiment of restoring the obtained integrated image image into a 3D image.

먼저 3D 영상을 픽업하였다. 3D 영상은 링영상과 아이콘 영상으로 구성하였으며, 아이콘 영상이 링영상보다 앞쪽에 위치하도록 하여 촬영을 하였다.First, a 3D image was picked up. The 3D image was composed of a ring image and an icon image, and the icon image was placed in front of the ring image.

도 7에서 얻어진 요소영상을 도6의 시스템에 표시하였다. 이 경우에 집적영상재생부에서 재생되는 영상의 경우에는 도8과 같이 좌우 영상을 통해서 슈도스코픽 영상이 발생함을 알 수 있다. 슈도스코픽 영상은 올바른 영상이 아니기때문에 왼쪽으로 관측자가 이동하면 두 영상의 차이가 늘어나야하지만 줄어들게 된다. The element image obtained in FIG. 7 was displayed in the system of FIG. 6. In this case, it can be seen that, in the case of the image reproduced by the integrated image reproducing unit, a pseudoscopic image is generated through the left and right images as shown in FIG. 8. Since pseudoscopic images are not correct images, if the observer moves to the left, the difference between the two images should increase but decrease.

이와는 반대로 도 9와 같이 미소거울배열부를 통과한 영상은 도8의 영상과는 반대로 동작함을 알 수 있다. 즉 오쏘스코픽 영상이 얻어진다. 그러므로 본 발명의 방식이 올바른 영상을 제공함을 알 수 있다.On the contrary, it can be seen that the image passing through the micro-mirror array as shown in FIG. 9 operates in contrast to the image in FIG. 8. That is, an orthoscopic image is obtained. Therefore, it can be seen that the method of the present invention provides a correct image.

따라서 본발명은 집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성되어, 상기 미소미러배열소자를 기준면으로 해서 대칭적으로 영상이 결상되는 구조를 가짐으로써 깊이를 180도 바꾸는 PO conversion 기능이 수행되고, 오쏘스코픽 영상이 얻어지므로 올바른 영상을 제공하는 현저한 효과가 있다.Therefore, the present invention is composed of an integrated image pickup unit, an integrated image playback unit, and a micromirror array element unit, and has a structure in which an image is symmetrically formed using the micromirror array element as a reference plane to change the depth by 180 degrees. Since this is performed and an orthoscopic image is obtained, there is a remarkable effect of providing a correct image.

Claims (3)

집적영상픽업부, 집적영상재생부, 미소미러배열소자부로 구성되는 것을 특징으로 하는 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 시스템Glasses-free integrated video display system using a micro-mirror array, characterized in that it consists of an integrated image pickup unit, an integrated image playback unit, a micro-mirror array element unit 제1항에 있어서, 상기 영상픽업부는 3차원 물체에 대해서 렌즈배열 또는 렌티큘러 시트를 카메라에 앞에 위치시켜서 3차원 영상의 정보를 픽업하는 것이며,
집적영상 재생부는 상기 영상픽업부에서 픽업된 요소영상을 렌즈배열 또는 렌티큘러시트가 부착된 디스플레이패널로 구성되며 슈도스코픽 3D 영상을 재생하는 것이며,
상기 미소거울배열소자부는 슈도스코픽 3D 영상에 대해서 깊이 반전 기능을 통하여 올바른 오쏘스코픽 3D 영상을 공간에 투영하는 것을 특징으로 하는 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 시스템The method of claim 1, wherein the image pickup unit picks up information of a 3D image by placing a lens array or a lenticular sheet in front of the camera for a 3D object,
The integrated image reproducing unit is composed of a display panel with a lens array or a lenticular sheet attached to the element image picked up from the image pickup unit and reproduces pseudoscopic 3D images,
The micro-mirror array element unit is a glasses-free integrated image display system using a micro-mirror array characterized in that the correct orthoscopic 3D image is projected to the space through a depth inversion function for the pseudoscopic 3D image. 디스플레이 패널과 렌즈어레이로 구성된 집적 영상 구성에 슈도스코픽 영상을 오쏘스코픽 영상으로 올바르게 변환하는 PO conversion을 광학적으로 수행할 수 있는 미소거울배열소자를 배치함으로써 PO converion이 광학적으로 수행되고, 슈도스코픽 현상이 해결된 3차원 영상을 재생하는 것을 특징으로 하는 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 방법The PO converion is performed optically and the pseudoscopic phenomenon is performed by arranging a micro-mirror array element that can optically perform the PO conversion that correctly converts the pseudoscopic image into an orthoscopic image in an integrated image configuration consisting of a display panel and a lens array. Glasses-free integrated image display method using a micro-mirror array characterized by reproducing a resolved 3D image
KR1020190002795A 2019-01-09 2019-01-09 Non-eyeglass integrated image display method using micro mirror KR102241060B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190002795A KR102241060B1 (en) 2019-01-09 2019-01-09 Non-eyeglass integrated image display method using micro mirror

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190002795A KR102241060B1 (en) 2019-01-09 2019-01-09 Non-eyeglass integrated image display method using micro mirror

Publications (2)

Publication Number Publication Date
KR20200086513A true KR20200086513A (en) 2020-07-17
KR102241060B1 KR102241060B1 (en) 2021-05-12

Family

ID=71832161

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190002795A KR102241060B1 (en) 2019-01-09 2019-01-09 Non-eyeglass integrated image display method using micro mirror

Country Status (1)

Country Link
KR (1) KR102241060B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090112498A (en) * 2008-04-24 2009-10-28 경희대학교 산학협력단 Reflection-type screen used in projection-type 3D integral imaging display system
KR20130130334A (en) * 2012-05-22 2013-12-02 경희대학교 산학협력단 Depth-fused three dimensional display method and apparatus using multi layer
KR20150120029A (en) * 2014-04-16 2015-10-27 광운대학교 산학협력단 Depth convertion method of 3D images interal imaging system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090112498A (en) * 2008-04-24 2009-10-28 경희대학교 산학협력단 Reflection-type screen used in projection-type 3D integral imaging display system
KR20130130334A (en) * 2012-05-22 2013-12-02 경희대학교 산학협력단 Depth-fused three dimensional display method and apparatus using multi layer
KR20150120029A (en) * 2014-04-16 2015-10-27 광운대학교 산학협력단 Depth convertion method of 3D images interal imaging system

Also Published As

Publication number Publication date
KR102241060B1 (en) 2021-05-12

Similar Documents

Publication Publication Date Title
KR101629479B1 (en) High density multi-view display system and method based on the active sub-pixel rendering
JP5238429B2 (en) Stereoscopic image capturing apparatus and stereoscopic image capturing system
JP4635403B2 (en) Stereoscopic image creation method and apparatus
CN102164298B (en) Method for acquiring element image based on stereo matching in panoramic imaging system
KR20080103407A (en) 3d image display method and system thereof
JP4928476B2 (en) Stereoscopic image generating apparatus, method thereof and program thereof
JP6300346B2 (en) IP stereoscopic image estimation apparatus and program thereof
KR100950628B1 (en) Integral imaging display system using real and virtual modes
WO2004038486A1 (en) Image display and method for displaying image
JP2009048033A (en) Stereoscopic image taking apparatus
JP3810624B2 (en) 3D image display system that combines light beam reproduction and shadow-type multi-view parallax
US9565421B2 (en) Device for creating and enhancing three-dimensional image effects
JP3676916B2 (en) Stereoscopic imaging device and stereoscopic display device
KR102241060B1 (en) Non-eyeglass integrated image display method using micro mirror
JP2010231192A (en) Stereoscopic imaging apparatus
JP5088973B2 (en) Stereo imaging device and imaging method thereof
US20060083437A1 (en) Three-dimensional image display apparatus
KR101608753B1 (en) Method and apparatus for generating three dimensional contents using focal plane sweeping
KR100897305B1 (en) Three-dimensional integral display method and system using elemental images and computer readable record-medium on which program for executing method thereof
JP2585614B2 (en) Stereoscopic image output device
KR20120072178A (en) Autostereoscopic multi-view or super multi-view image realization system
JP2012008298A (en) Three dimensional picture display device
KR101883883B1 (en) method for glass-free hologram display without flipping images
KR100652204B1 (en) Method for displaying volumetric image and apparatus thereof
Hill Scalable multi-view stereo camera array for real world real-time image capture and three-dimensional displays

Legal Events

Date Code Title Description
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right