KR20200061416A - 3차원 가상 및 증강 현실 디스플레이 시스템 - Google Patents

3차원 가상 및 증강 현실 디스플레이 시스템 Download PDF

Info

Publication number
KR20200061416A
KR20200061416A KR1020207014691A KR20207014691A KR20200061416A KR 20200061416 A KR20200061416 A KR 20200061416A KR 1020207014691 A KR1020207014691 A KR 1020207014691A KR 20207014691 A KR20207014691 A KR 20207014691A KR 20200061416 A KR20200061416 A KR 20200061416A
Authority
KR
South Korea
Prior art keywords
projection device
image
eye
viewer
modes
Prior art date
Application number
KR1020207014691A
Other languages
English (en)
Other versions
KR102227381B1 (ko
Inventor
존 그라함 맥나마라
Original Assignee
매직 립, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 매직 립, 인코포레이티드 filed Critical 매직 립, 인코포레이티드
Priority to KR1020217006982A priority Critical patent/KR102376368B1/ko
Publication of KR20200061416A publication Critical patent/KR20200061416A/ko
Application granted granted Critical
Publication of KR102227381B1 publication Critical patent/KR102227381B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/24Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/388Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/39Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the picture elements emitting light at places where a pair of light beams intersect in a transparent material
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/34Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
    • G02B30/52Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels the 3D volume being constructed from a stack or sequence of 2D planes, e.g. depth sampling systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/18Diffraction gratings
    • G02B5/1876Diffractive Fresnel lenses; Zone plates; Kinoforms
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/08Stereoscopic photography by simultaneous recording
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/18Stereoscopic photography by simultaneous viewing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/322Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/388Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0132Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/18Diffraction gratings
    • G02B5/1828Diffraction gratings having means for producing variable diffraction

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

시스템은, 뷰어의 눈에 관련하여 공간적으로 투사 디바이스 위치로부터 뷰어의 눈을 향하여 이미지를 투사하기 위한 선택적으로 투명한 투사 디바이스 ― 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 투사 디바이스에 커플링되고, 투사 디바이스에 의해 투사되는 이미지와 상관된 차폐 패턴(occluding pattern)으로, 투사 디바이스의 대향하는 하나 또는 둘 이상의 위치들로부터 눈을 향하여 이동하는 광을, 뷰어의 눈으로부터 선택적으로 블록킹하도록 구성되는 차폐 마스크 디바이스(occlusion mask device); 및 뷰어의 눈과 투사 디바이스 사이에 개재되고, 투사 디바이스로부터의 광이 눈으로 이동할 때, 상기 투사 디바이스로부터의 광이, 선택가능 기하학적 구조를 갖는 회절 패턴을 통과하게 하도록 구성된 존 플레이트 회절 패터닝 디바이스를 포함할 수 있다.

Description

3차원 가상 및 증강 현실 디스플레이 시스템 {THREE DIMENSIONAL VIRTUAL AND AUGMENTED REALITY DISPLAY SYSTEM}
관련된 출원 데이터
본원은 35 U.S.C. §119 하에서, 2011년 11월 23일 출원된 미국 가출원 번호 제 61/563,403호를 우선권으로 주장한다. 상기 미국 가출원은 이로써 그 전체 내용이 인용에 의해 본원에 포함된다.
본 발명은 가상 현실 및 증강 현실 이미징 및 시각화 시스템들에 관한 것이다.
3D 디스플레이가 진짜 깊이 느낌(true sensation of depth), 더욱 구체적으로는 시뮬레이팅된 표면 깊이 느낌을 생성하도록 하기 위해, 디스플레이의 시야(visual field)의 각각의 포인트가 그의 가상 깊이(virtual depth)에 대응하는 조절 반응(accommodative response)을 발생하는 것이 바람직하다. 디스플레이 포인트에 대한 조절 반응이, 수렴(convergence) 및 입체성(stereopsis)의 양안 깊이 단서(binocular depth cue)들에 의해 결정된 바와 같은 그러한 포인트의 가상 깊이에 대응하지 않는 경우, 인간의 눈은 조절 충돌(accommodation conflict)을 경험할 수 있어서, 불안정한 이미징, 해로운 눈 피로감, 두통들, 그리고 조절 정보의 부재시 표면 깊이의 거의 완전한 결여를 초래한다. 도 1을 참조하면, 증강 현실 시나리오(8)는, 공원 환경(park setting)의 콘크리트 스테이지 대상물(concrete stage object)(1120)을 포함하는 조경 아이템(landscaping item)들과 같은, 사용자의 현실 내의 실제 대상물들의 사용자에 대한 뷰들, 및 또한 "증강(augmented)" 현실 뷰를 생성하기 위해 상기 사용자의 뷰들에 부가된 가상의 대상물들의 뷰들을 이용하여 도시되고; 여기서, 스테이지 대상물(1120) 위에 가상으로 서있는 로봇 조각상(1110)이 도시되고, 사용자의 머리 가까이의 공간에서 날고 있는 벌 캐릭터(2)가 도시된다. 바람직하게, 증강 현실 시스템은 3-D 가능하고(3-D capable), 이러한 경우, 상기 증강 현실 시스템은 사용자에게, 조각상(1110)이 스테이지(1120) 위에 서 있다는 지각(perception), 및 벌 캐릭터(2)가 사용자의 머리 가까이 날고 있다는 지각을 제공한다. 이러한 지각은, 가상의 대상물들(2, 1110)이 상이한 초점 깊이들을 갖고, 로봇 조각상(1110)에 대한 초점 반경들 또는 초점 깊이가 스테이지(1120)에 대한 초점 반경들 또는 초점 깊이와 거의 동일하다는, 사용자의 눈 및 뇌에 대한 시각적 조절 단서들을 활용함으로써 매우 향상될 수 있다. 도 2에 도시된 것과 같은 통상의 입체영상 3-D 시뮬레이션 디스플레이 시스템들은 통상적으로, 고정 반경 초점 거리(10)에 있는 2개의 디스플레이들(74, 76) ― 각각의 눈에 대해 하나의 디스플레이 ― 을 갖는다. 상기 명시된 바와 같이, 이러한 통상의 기술은, 눈을 이용하여 상이한 초점 깊이에 도달하기 위해 복잡한 눈 내의 수정체의 눈의 재위치지정(repositioning)과 연관되는 조절 단서를 포함하여, 3차원에서 깊이를 검출 및 해석하기 위해 인간의 눈 및 뇌에 의해 활용되는 많은 귀중한 단서들을 놓친다. 복잡한, 인간의 눈/뇌 이미지 프로세싱의 조절 양상들을 고려하는 조절 정밀 디스플레이 시스템(accommodation accurate display system)에 대한 필요성이 존재한다.
일 실시예는 3-차원 이미지 시각화 시스템에 관한 것으로, 상기 3-차원 이미지 시각화 시스템은, 뷰어의 눈에 관련하여 공간적으로 투사 디바이스 위치로부터 뷰어의 눈을 향하여 이미지를 투사하기 위한 선택적으로 투명한 투사 디바이스 ― 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 투사 디바이스에 커플링되고, 투사 디바이스에 의해 투사되는 이미지와 상관된 차폐 패턴(occluding pattern)으로, 투사 디바이스의 대향하는 하나 또는 둘 이상의 위치들로부터 눈을 향하여 이동하는 광을, 뷰어의 눈으로부터 선택적으로 블록킹하도록 구성되는 차폐 마스크 디바이스(occlusion mask device); 및 뷰어의 눈과 투사 디바이스 사이에 개재되고, 투사 디바이스로부터의 광이 눈으로 이동할 때, 상기 투사 디바이스로부터의 광이 선택가능 기하학적 구조(geometry)를 갖는 회절 패턴(diffraction pattern)을 통과하게, 그리고 회절 패턴의 선택가능 기하학적 구조에 적어도 부분적으로 기초하여 눈으로부터의 시뮬레이팅된 초점 거리로 눈에 진입하게 하도록 구성된 존 플레이트 회절 패터닝 디바이스(zone plate diffraction patterning device)를 포함한다. 시스템은 투사 디바이스, 차폐 마스크 디바이스, 및 존 플레이트 회절 패터닝 디바이스에 동작가능하게 커플링되고, 선택가능 기하학적 구조의 회절 패턴의 개재뿐만 아니라 이미지의 투사 및 연관된 차폐 패턴을 조정(coordinate)하도록 구성된 제어기를 더 포함할 수 있다. 제어기는 마이크로프로세서를 포함할 수 있다. 투사 디바이스는 디스플레이 플레인(display plane)을 실질적으로 점유하는 실질적으로 평면형의 투명 디지털 디스플레이를 포함할 수 있다. 디스플레이 플레인은 뷰어의 눈의 시축(visual axis)으로부터 실질적으로 수직으로 배향될 수 있다. 실질적으로 평면형의 투명 디지털 디스플레이는 액정 디스플레이를 포함할 수 있다. 실질적으로 평면형의 투명 디지털 디스플레이는 유기 발광 다이오드 디스플레이를 포함할 수 있다. 투사 디바이스는, 뷰어의 눈에 대한 초점 깊이가 무한 초점 깊이이도록 콜리메이팅(collimate)된 형태로 눈을 향하여 이미지를 투사하도록 구성될 수 있다. 투사 디바이스는, 뷰어의 눈으로의 전달 전에 이미지의 크기를 확대하도록 구성된 기판-가이드 지연 엑시트 동공 익스팬더 디바이스(substrate-guided delay exit pupil expander device)에 커플링된 고속 소형-투사기를 포함할 수 있다. 소형-투사기는 뷰어의 눈의 시축에 실질적으로 수직으로 장착될 수 있고, 기판-가이드 지연 엑시트 동공 익스팬더 디바이스는, 소형-투사기로부터 이미지를 수신하여, 상기 수신된 이미지를 존 플레이트 회절 패터닝 디바이스에 그리고 눈의 시축과 실질적으로 정렬된 배향으로, 확대된 크기로, 뷰어의 눈에 전달하도록 구성된다. 존 플레이트 회절 패터닝 디바이스 및 투사 디바이스는 적어도 하나의 공통 구조를 포함할 수 있다. 투사 디바이스가, 도파관(waveguide)에 커플링되고 이미지가 뷰어의 눈으로 가는 도중에 도파관을 빠져나가기 전에 이미지를 회절 패턴에 통과시키도록 구성된 고속 소형-투사기를 포함하도록, 존 플레이트 회절 패터닝 디바이스가 도파관에 통합될 수 있다. 소형-투사기는 뷰어의 눈의 시축에 실질적으로 수직으로 장착될 수 있고, 도파관은 소형-투사기로부터 이미지를 수신하여, 상기 이미지를, 눈의 시축과 실질적으로 정렬된 배향으로, 확대된 크기로, 뷰어의 눈에 전달하도록 구성될 수 있다. 차폐 마스크 디바이스는, 각각의 부분에서 광을 차폐 또는 통과시키라는 적절한 명령에 따라, 디스플레이의 복수의 부분들 각각에서 광을 차폐 또는 통과시키도록 구성된 디스플레이를 포함할 수 있다. 차폐 마스크 디바이스는 하나 또는 둘 이상의 액정 디스플레이들을 포함할 수 있다. 존 플레이트 회절 패터닝 디바이스는, 각각의 부분에서 광을 차폐 또는 통과시키라는 적절한 명령에 따라, 디스플레이의 복수의 부분들 각각에서 광을 차폐 또는 통과시키도록 구성된 고주파 바이너리 디스플레이(high-frequency binary display)를 포함할 수 있다. 존 플레이트 회절 패터닝 디바이스는 약 500㎐ 내지 약 2,000㎐의 리프레시 레이트(refresh rate)를 가질 수 있다. 존 플레이트 회절 패터닝 디바이스는 약 720㎐의 리프레시 레이트를 가질 수 있다. 제어기는, 초당 약 30 내지 약 60 프레임들에서 투사 디바이스 및 차폐 마스크 디바이스를 동작시키도록, 그리고 투사 디바이스 및 차폐 마스크 디바이스의 각각의 프레임에 대해 약 12개까지의 상이한 회절 패턴들을 디지털로 디스플레이하기 위해 존 플레이트 회절 패터닝 디바이스를 동작시키도록 구성될 수 있다. 투사 디바이스, 차폐 마스크 디바이스, 및 존 플레이트 회절 패터닝 디바이스는 집합적으로, 뷰어의 단일 눈을 위한 이미징 모듈을 포함할 수 있고, 시스템은 뷰어의 다른 눈을 위한 제 2 이미징 모듈을 더 포함할 수 있다.
도 1은 사람에 의해 뷰잉되는 특정 실제 현실 대상물들 및 특정 가상 현실 대상물들을 이용한 증강 현실 시나리오의 예시를 도시한다.
도 2는 사용자를 위해 3차원 이미징을 시뮬레이팅하는 통상의 입체영상(stereoscopy) 시스템을 예시한다.
도 3a 및 도 3b는 조절 정밀 디스플레이 구성의 양상들을 예시한다.
도 4a-도 4c는 곡률 반경과 초점 반경 사이의 관계들을 예시한다.
도 5-도 6c는 대상(subject) 구성들에 적용되는 바와 같은 회절 격자(diffraction grating)들의 양상들을 예시한다.
도 7a-도 7c는 3개의 상이한 초점 메커니즘들을 예시한다.
도 7d는 프레넬 존 플레이트(Fresnel zone plate)를 예시한다.
도 8a-도 8c는 회절 시스템 초점조정(focusing) 이슈들의 다양한 양상들을 예시한다.
도 9는 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 10은 하나의 모드가 도파관을 탈출하고, 그리고 다른 모드들은 도파관에 트랩(trap)되어 유지되도록 하기 위해 설계된 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 11a 및 도 11b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 12a 및 도 12b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 13a 및 도 13b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 3a 및 도 3b를 참조하면, AAD 시스템의 다양한 양상들이 도시된다. 도 3a를 참조하면, 단순 예시는, 입체영상(도 2)에서와 같은 2개의 통상의 디스플레이들의 위치에서, 지각되는 이미지 내에 3차원 깊이 레이어링의 지각을 각각의 눈에 제공하기 위해, 각각의 이미지의 다양한 양상들(14)에 대해 다양한 반경 초점 깊이들(12)을 갖는 2개의 복합 이미지들 ― 각각의 눈에 대해 하나의 복합 이미지 ― 이 활용될 수 있다는 것을 보여준다.
도 3b를 참조하면, 본 발명자들은, 통상의 인간의 눈이, 반경 거리에 기초하여 대략 12개의 깊이의 레이어들(도 3b의 레이어들(L1-L12) - 도면 엘리먼트 16)을 해석(interpret)할 수 있다고 결정하였다. 약 0.25 미터의 근거리 필드 한계(near field limit)(78)는 가장 가까운 초점 깊이에 관한 것이며; 약 3 미터의 원거리-필드 한계(far-field limit)(80)는, 인간의 눈으로부터 약 3 미터보다 더 멀리 있는 임의의 아이템은 무한 초점(infinite focus)을 받는다는 것을 의미한다. 눈에 더 가까워질수록, 초점 레이어들이 더욱더 얇아지는데; 즉, 눈은, 상대적으로 눈에 가까운 초점 거리에서 상당히 작은 차이들을 지각할 수 있고, 도 3b에 도시된 바와 같이, 이러한 효과는 대상물들이 눈으로부터 더 멀어져 갈수록 소멸된다. 엘리먼트(82)는 무한의 대상물 위치에서, 초점 깊이 / 굴절광학 간격 값(depth of focus / dioptric spacing value)이 약 1/3 디옵터(diopters)라는 것을 예시한다. 도 3b의 중요성을 기술하는 하나의 다른 방식은: 사용자의 눈과 무한대(infinity) 사이에 약 12개의 초점 플레인들이 존재한다는 것이다. 이들 초점 플레인들, 및 도시된 관계들 내의 데이터는, 사용자의 뷰잉을 위한 증강 현실 시나리오 내에서 가상 엘리먼트들을 위치지정하기 위해 활용될 수 있는데, 그 이유는, 인간의 눈은 깊이를 지각하기 위해 초점 플레인들을 활용하기 위해 끊임없이 주위를 훑기(sweep) 때문이다.
도 4a-도 4c를 참조하면, K(R)가, 1/R과 동등한 곡률에 대한 동적 파라미터인 경우 ― 여기서, R은 표면에 관한 아이템의 초점 반경임 ―, 반경이 증가함에 따라(R3, R2로, R1까지), K(R)가 감소된다. 포인트에 의해 생성된 광 필드는 구면 곡률을 갖고, 이는 포인트가 사용자의 눈으로부터 얼마나 멀리 떨어져 있는지의 함수이다. 이러한 관계는 또한, AAD 시스템들을 위해 활용될 수 있다.
도 5를 참조하면, 통상의 회절 격자(22)가 도시되고, 이때 광이 각도(세타(theta)-20)에서 격자 간격(18)을 통과하고, 이는 회절 차수(diffraction order)(n), 공간 주파수, 1/d와 동등한 K 팩터와 관련되며, 다음의 식: d*sin(세타)=n*파장(또는 대안적으로 K 팩터를 대체하여, sin(세타)=n*파장*K)을 이용한다. 도 6a-도 6c는 회절 패턴(22, 24, 26)에서 간격(18, 28, 30)이 감소함에 따라, 각도(20, 32, 34)가 더 커진다는 것을 예시한다.
도 7a 내지 도 7c를 참조하면, 3개의 상이한 초점조정(focusing) 메커니즘들 - 렌즈(36)를 통한 굴절, 만곡형 거울(curved mirror)(38)을 이용한 반사, 및 도 7d(40)에 또한 도시된 프레넬 존 플레이트(40)를 이용한 회절이 도시된다.
도 8a를 참조하면, N=-1 모드는 가상 이미지에 대응할 수 있고; N=+1 모드는 실제 이미지에 대응할 수 있고, N=0 모드는 무한에 초점 맞춰진 이미지(focused-at-infinity image)에 대응할 수 있다는 것을 예시하기 위해 단순화된 버전의 회절이 도시된다. 이들 이미지들은 인간의 눈 및 뇌를 혼란시킬 수 있고, 도 8b에 도시된 바와 같이, 모두가 온-축(on-axis) 초점 맞춰지는 경우 특히 문제가 된다. 도 8c를 참조하면, 오프-축(off-axis) 초점 구성은, 원하지 않는 모드들/이미지들의 블록킹을 허용하기 위해 활용될 수 있다. 예를 들어, 시준(collimate)된(r=무한대) 이미지는 N=0 모드에 의해 형성될 수 있고; 분기 가상 이미지(divergent virtual image)는 N=-1 모드에 의해 형성될 수 있고; 수렴 이미지(convergent image)는 N=+1 모드에 의해 형성될 수 있다. 이들 모드들/이미지들의 공간 위치 및 이들의 궤적들에서의 차이는, 오버레잉(overlaying), 고스팅(ghosting), 및 "다중 노출" 지각 영향들과 같은 회절 이미징과 연관된 상술된 문제점들을 방지하기 위해 필터링 제거(filtering out) 또는 분리하는 것을 허용한다.
도 9를 참조하면, 임베딩된 회절 격자를 갖는 도파관이 도시되고; 이러한 도파관들은 예를 들어, 영국 런던의 BAE Systems PLC와 같은 공급자들로부터 입수가능하며, 도시된 바와 같이, 도 9의 좌측으로부터 이미지를 인테이크(intake)하고, 임베딩된 회절 격자(44)를 통해 이미지를 전달하고, 결과적인 이미지를 각도에서 밖으로 전달한다(도 9에서, 예를 들어, 도파관의 측면을 통해). 따라서, 방향수정(redirection) 및 회절의 이중의 사용이 이러한 엘리먼트를 이용하여 달성된다. 실제로, 오프-축 초점 기법들, 이를 테면, 도 8c와 관련하여 기술된 것들은, 도 10에 도시된 것과 같은 구성을 초래하기 위해 도 9에 도시된 것과 같은 회절 도파관 엘리먼트들과 결합될 수 있고, 방향수정 및 회절뿐만 아니라, 필터링도 달성되는데, 그 이유는 도시된 실시예에서, N=-1 모드(가상 이미지라 함)는 도파관으로부터 사용자의 눈으로 전달되고, 다른 2개의 모드들(N=0 및 N=+1)은 반사에 의해 도파관 내부에 트랩되도록, 회절 도파관의 기하학적 구조가 되기 때문이다.
도 11a-도 13c를 참조하면, 상술된 개념들이 다양한 증강 현실 디스플레이 구성들을 이용하여 시연된다.
도 11a를 참조하면, AAD 시스템은 각각의 눈(4, 6) 전방에 이미징 모듈(46, 48)을 포함하고, 이를 통해 사용자가 세계(world)를 본다. 도 11b는, 자신의 연관된(도시된 전자 제어 리드들을 통해 커플링된; 리드들은 또한 무선일 수 있음) 제어기(66) ― 상기 제어기(66)는 마이크로프로세서, 마이크로제어기, FPGA(field programmable gate array), ASIC(application specific integrated circuit) 등일 수 있음 ― 를 갖는 모듈(46)의 확대도를 예시한다. 제어기는 바람직하게 전원 및 또한, 외부 세계와 제어기(66) 사이의 정보의 교환을 허용하기 위해, 정보 교환 디바이스, 이를 테면, 무선 인터넷 또는 블루투스 어댑터에 커플링된다. 시스템은 초당 30 내지 60 프레임들의 레이트와 같은 이미지 리프레시 레이트(image refresh rate)에서 동작하도록 구성될 수 있다. 제어기는, 12개 정도의 깊이 레이어들 각각에 적절한 다양한 존 플레이트 기하학적 구조들을 신속하게 연속적으로 디스플레이하기 위해, 높은-리프레시 레이트 디지털 고해상도 디스플레이(high-refresh rate digital high resolution display)(52), 이를 테면, 페로-리퀴드(ferro-liquid), 블루페이즈(bluephase), 또는 벤트-코어(bent-core) 디스플레이를 동작시키도록 구성될 수 있다. 예를 들어, 초당 60 프레임들의, 전체적인 성능이 요구되는 실시예에서, 존 플레이트 디스플레이(52)는, 도 3b에 도시된 바와 같은 12개의 깊이 레이어들 각각에 대해 시뮬레이팅된 조절을 제공할 수 있도록, 상기 60 프레임의 12배 또는 720㎐로 동작될 수 있다. 차폐 마스크 디스플레이(54)는, 그 전에 투명 투사 레이어(56) 상에 디스플레이된 이미지에 기하학적으로 대응하는 블랙 아웃(black out)된 이미지를 디스플레이하도록 구성된다 ― 차폐 마스크 디스플레이의 다른 측으로부터의 광이, 투사기 레이어(56)에서 원하는 가상 또는 증강 이미지의 디스플레이와 간섭하는 또는 블리딩 스루(bleed through)하는 것을 방지하기 위해 블랙 아웃되었음 ―. 따라서, 증강 현실 구성에서, 도시된 바와 같이, 실제 배경으로부터의 광은 차폐 마스크(54)의 비-마스킹(non-masked) 부분들을 통해, 투명 투사기 레이어(56)의 투명한(즉, 이미지의 부분을 브로드캐스팅하지 않는) 부분들을 통해, 그리고 조절 처리를 위해 존 플레이트 레이어(52)로 전달되며; 투사 레이어(56)에 투사된 이미지들은, 차폐 레이어(54)에서 배경 광으로부터 마스크 블록킹을 받고, 조절 처리를 위해 존 플레이트 레이어(52)로 투사 포워딩된다. 이들의 결합, 또는 사용자에 대한 증강 현실의 연관된 지각은 "진짜 3-D(true 3-D)"에 매우 가깝다.
도 12a-도 12b는 다른 실시예를 도시하고, 여기서 이미징 모듈(58)은, 눈의 시축에 거의 수직하는 각도로 배향된 고해상도 소형 투사기를 포함하고; 기판-가이드 지연 엑시트 동공 익스팬더 디바이스(70)를 포함하는 도파관은 작은 소형 투사기로부터의 이미지를 확대하여, 존 플레이트 레이어(52)로 방향수정하고; 차폐 레이어(54)는, 투사된 이미지들의 지각을 배경 조명으로부터 보호하기 위해 유사한 마스킹 기능들을 제공한다.
도 13a-도 13b는, 존 플레이트 및 투사 레이어가 본질적으로 동일한 통합 모듈(integrated module: 72) 내에 하우징되도록, 엘리먼트들(52 및 70)이 결합되는 다른 실시예를 도시하고, 상기 모듈(72)은, 눈으로의 통과(passage)를 위해, 소형 투사기(68)로부터 작은 이미지를 인테이크(intake)하고, 상기 작은 이미지를 방향수정(redirect) 및 확대하고, 그리고 또한 이를 회절하며; 차폐 레이어(54)는 투사된 이미지들의 지각을 배경 조명으로부터 보호하기 위해 유사한 마스킹 기능들을 제공한다.
본 발명의 다양한 전형적인 실시예들이 본 명세서에서 설명된다. 이들 예들에 대한 참조는 비-제한적인 의미로 이루어진다. 이들은 본 발명의 더욱 광범위하게 적용가능한 양상들을 예시하기 위해 제공된다. 본 발명의 진짜 사상 및 범주로부터 벗어남이 없이, 설명된 본 발명에 대한 다양한 변경들이 이루어질 수 있고, 동등물들이 대체될 수 있다. 부가하여, 특정 상황, 재료, 물질의 조성, 프로세스, 프로세스 동작(들), 또는 단계(들)를 본 발명의 목적(들), 사상, 또는 범주에 적응시키기 위해 많은 수정들이 이루어질 수 있다. 추가로, 당업자들에 의해 이해될 바와 같이, 본 발명들의 범주 또는 사상으로부터 벗어남이 없이, 본 명세서에서 설명 및 예시된 개개의 변형들 각각은, 다른 여러 실시예들 중 임의의 실시예의 피쳐들과 용이하게 분리 또는 결합될 수 있는 개별 컴포넌트들 및 피쳐들을 갖는다. 모든 이러한 수정들은, 본원과 연관된 청구항들의 범주 내에 있도록 의도된다.
본 발명은 대상 디바이스들을 이용하여 수행될 수 있는 방법들을 포함한다. 방법들은 이러한 적합한 디바이스를 제공하는 동작을 포함할 수 있다. 이러한 제공은 최종 사용자에 의해 수행될 수 있다. 다시 말해, 대상 방법에서 필수 디바이스를 제공하기 위해, "제공하는" 동작은 단지, 최종 사용자가 획득, 액세스, 접근, 위치지정, 셋-업, 활성화, 파워-업하거나 또는 다른 방식으로 동작할 것을 요구한다. 본 명세서에서 열거된 방법들은, 열거된 순서의 이벤트들에서뿐만 아니라, 논리적으로 가능한 임의의 순서의 열거된 이벤트들에서 수행될 수 있다.
재료 선택 및 제조에 관한 세부사항들과 함께, 본 발명의 전형적인 양상들이 위에서 전개되었다. 본 발명의 다른 세부사항들에 대해서와 같이, 이들은 당업자들에 의해 이해되거나 또는 일반적으로 알려져 있을 뿐만 아니라, 위에서-인용된 특허들 및 공보들과 관련하여 이해될 수 있다. 동일한 내용이, 공통으로 또는 논리적으로 사용되는 바와 같은 부가의 동작들의 측면에서 본 발명의 방법-기반 양상들에 대해 유효할 수 있다.
부가하여, 본 발명이 다양한 피쳐들을 선택적으로 포함하는 여러 예들을 참조하여 설명되었지만, 본 발명은 본 발명의 각각의 변형에 대하여 고려된 바와 같이 설명되거나 또는 표시된 것으로 제한되지 않을 것이다. 본 발명의 진짜 사상 및 범주로부터 벗어남이 없이, 설명된 본 발명에 대한 다양한 변경들이 이루어질 수 있고, 동등물들(본 명세서에서 열거되든 또는 어떤 간결성을 위해 포함되지 않든)이 대체될 수 있다. 부가하여, 값들의 범위가 제공되는 경우, 그러한 범위 및 임의의 다른 명시된 또는 그러한 명시된 범위의 중간 값의 상한치와 하한치 사이의 모든 각각의 중간 값이 본 발명 내에 포함된다는 것이 이해된다.
또한, 설명된 본 발명의 변형들의 임의의 선택적 피쳐가 본 명세서에서 설명된 피쳐들 중 임의의 하나 또는 둘 이상과 독립적으로 또는 결합하여 전개 및 청구될 수 있다는 것이 고려된다. 단일 아이템에 대한 참조는 복수의 동일한 아이템들이 존재할 가능성을 포함한다. 더욱 구체적으로, 본 명세서에서 그리고 그에 연관된 청구항들에서 사용된 바와 같이, 단수 표현들("하나의","상기", 및 "그")은 구체적으로 달리 명시되지 않는 한, 복수의 지시 대상들을 포함한다. 다시 말해, 관사들의 사용은 상기 설명뿐만 아니라 이러한 기재와 연관된 청구항들에서 대상 아이템 중 "적어도 하나"를 허용한다. 이러한 청구항들이 임의의 선택적 엘리먼트를 배제하도록 드래프트될 수 있음이 추가로 유의된다. 이와 같이, 이러한 서술은, 청구항 엘리먼트들의 열거 또는 "네거티브" 제한의 사용과 관련하여 "오로지", "단지" 등으로서 이러한 배타적 용어의 사용을 위해 선행하는 기초로서 기능하도록 의도된다.
이러한 배타적 용어의 사용 없이, 이러한 기재와 연관된 청구항들에서 용어 "포함하는"은 임의의 부가의 엘리먼트의 포함 ― 주어진 수의 엘리먼트들이 이러한 청구항들에 열거되는지와 무관하게 ― 을 허용하거나, 또는 피쳐의 부가는 이러한 청구항들에서 전개되는 엘리먼트의 특성을 전환하는 것으로서 간주될 수 있다. 본 명세서에서 구체적으로 규정되는 바를 제외하고, 본 명세서에 사용된 모든 기술적 및 과학적 용어들은, 청구항 유효함을 유지하면서, 가능한 한 넓은, 공통으로 이해되는 의미로서 주어질 것이다.
본 발명의 폭넓음은 제공된 예들 및/또는 대상 명세서로 제한되는 것이 아니라, 오히려 이러한 기재와 연관된 청구항 언어의 범위에 의해서만 제한된다.

Claims (8)

  1. 3차원 이미지 시각화 시스템으로서,
    통합 모듈(integrated module); 및
    차폐 마스크 디바이스(occlusion mask device)
    를 포함하고,
    상기 통합 모듈은:
    입력 이미지 광을 수신하고 뷰어의 눈에 대한 공간 내의 투사 디바이스 위치로부터 상기 뷰어의 눈을 향하여 상기 입력 이미지 광과 연관된 이미지를 투사하도록 구성된 선택적으로 투명한 투사 디바이스 ― 상기 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 및
    상기 입력 이미지 광을 복수의 모드들로 분할하도록 구성된 회절 엘리먼트 ― 상기 복수의 모드들 각각은 상이한 각도로 지향됨 ―
    를 포함하고,
    상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 제 1 모드로 하여금 상기 눈을 향하여 상기 선택적으로 투명한 투사 디바이스를 나가게(exit) 하도록 구성되고, 상기 제 1 모드는 상기 회절 엘리먼트의 선택가능 기하구조(geometry)에 부분적으로 기초하는 시뮬레이팅된 초점 거리를 가지며,
    상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 적어도 제 2 모드를 상기 선택적으로 투명한 투사 디바이스 내에 가두도록(trap) 구성되며,
    상기 차폐 마스크 디바이스는 상기 투사 디바이스에 커플링되고, 상기 뷰어의 눈으로부터 상기 차폐 마스크의 반대측에 위치된 하나 또는 둘 이상의 위치들로부터 상기 눈을 향하여 이동하는 광을 상기 투사 디바이스에 의해 투사되는 상기 이미지와 상관된(correlated) 차폐 패턴(occluding pattern)으로 선택적으로 블록킹하도록 구성되는,
    3차원 이미지 시각화 시스템.
  2. 제 1 항에 있어서,
    상기 투사 디바이스는 상기 이미지가 무한대에 포커싱되도록 상기 이미지를 상기 눈을 향하여 시준된(collimated) 형태로 투사하도록 구성되는,
    3차원 이미지 시각화 시스템.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 차폐 마스크 디바이스는 상기 디스플레이를 포함하며, 상기 디스플레이는 상기 디스플레이의 복수의 부분들 중 각각의 부분에서 광을 차폐하거나 또는 통과시키라는 관련된 명령에 따라서 각각의 부분에서 광을 차폐하거나 또는 통과시키도록 구성되는,
    3차원 이미지 시각화 시스템.
  4. 제 1 항 또는 제 2 항에 있어서,
    상기 차폐 마스크 디바이스는 하나 또는 둘 이상의 액정 디스플레이를 포함하는,
    3차원 이미지 시각화 시스템.
  5. 제 1 항 또는 제 2 항에 있어서,
    상기 복수의 모드들 중 상기 제 2 모드는 0차의 회절을 포함하는,
    3차원 이미지 시각화 시스템.
  6. 3차원 이미지 시각화 시스템으로서,
    통합 모듈; 및
    차폐 마스크 디바이스
    를 포함하고,
    상기 통합 모듈은:
    입력 이미지 광을 수신하도록 구성되고 뷰어의 눈에 대해 공간 내의 투사 디바이스 위치로부터 상기 뷰어의 눈을 향하여 상기 입력 이미지 광과 연관된 이미지를 투사하도록 구성된 선택적으로 투명한 투사 디바이스 ― 상기 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 및
    상기 선택적으로 투명한 투사 디바이스내에 통합되며 상기 입력 이미지 광을 복수의 모드들로 분할하도록 구성된 회절 엘리먼트 ― 상기 복수의 모드들 각각은 상이한 각도로 지향됨 ―
    를 포함하고,
    상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 적어도 제 1 모드로 하여금 상기 눈을 향하여 상기 선택적으로 투명한 투사 디바이스를 나가게 하도록 구성되고, 상기 적어도 하나의 모드는 상기 회절 엘리먼트의 선택가능 기하구조에 부분적으로 기초하는 시뮬레이팅된 초점 거리를 가지며,
    상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 적어도 제 2 모드를 상기 선택적으로 투명한 투사 디바이스 내에 가두도록 구성되며,
    상기 차폐 마스크 디바이스는 상기 투사 디바이스에 커플링되고, 상기 뷰어의 눈으로부터 상기 차폐 마스크의 반대측에 위치된 하나 또는 둘 이상의 위치들로부터 상기 눈을 향하여 이동하는 광을 상기 투사 디바이스에 의해 투사되는 상기 이미지와 상관된 차폐 패턴으로 선택적으로 블록킹하도록 구성되는,
    3차원 이미지 시각화 시스템.
  7. 제 6 항에 있어서,
    상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 제 3 모드를 상기 선택적으로 투명한 투사 디바이스 내에 가두도록 추가로 구성되는,
    3차원 이미지 시각화 시스템.
  8. 제 7 항에 있어서,
    상기 제 3 모드는 1차의 회절의 부분을 포함하는,
    3차원 이미지 시각화 시스템.
KR1020207014691A 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템 KR102227381B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020217006982A KR102376368B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161563403P 2011-11-23 2011-11-23
US61/563,403 2011-11-23
PCT/US2012/000560 WO2013077895A1 (en) 2011-11-23 2012-11-23 Three dimensional virtual and augmented reality display system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020147017217A Division KR102116697B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020217006982A Division KR102376368B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Publications (2)

Publication Number Publication Date
KR20200061416A true KR20200061416A (ko) 2020-06-02
KR102227381B1 KR102227381B1 (ko) 2021-03-11

Family

ID=48426562

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020217006982A KR102376368B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227030044A KR102513896B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020207014691A KR102227381B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020177030366A KR102095220B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020147017217A KR102116697B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227008484A KR102440195B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020217006982A KR102376368B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227030044A KR102513896B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020177030366A KR102095220B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020147017217A KR102116697B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227008484A KR102440195B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Country Status (11)

Country Link
US (8) US8950867B2 (ko)
EP (3) EP2783352B1 (ko)
JP (5) JP6250547B2 (ko)
KR (6) KR102376368B1 (ko)
CN (2) CN107664847B (ko)
AU (5) AU2012341069B2 (ko)
BR (1) BR112014012615A2 (ko)
CA (2) CA2858208C (ko)
IL (2) IL232746A (ko)
RU (1) RU2628164C2 (ko)
WO (1) WO2013077895A1 (ko)

Families Citing this family (231)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0522968D0 (en) 2005-11-11 2005-12-21 Popovich Milan M Holographic illumination device
GB0718706D0 (en) 2007-09-25 2007-11-07 Creative Physics Ltd Method and apparatus for reducing laser speckle
US11726332B2 (en) 2009-04-27 2023-08-15 Digilens Inc. Diffractive projection apparatus
US9335604B2 (en) 2013-12-11 2016-05-10 Milan Momcilo Popovich Holographic waveguide display
US11204540B2 (en) 2009-10-09 2021-12-21 Digilens Inc. Diffractive waveguide providing a retinal image
WO2012136970A1 (en) 2011-04-07 2012-10-11 Milan Momcilo Popovich Laser despeckler based on angular diversity
US10670876B2 (en) 2011-08-24 2020-06-02 Digilens Inc. Waveguide laser illuminator incorporating a despeckler
WO2016020630A2 (en) 2014-08-08 2016-02-11 Milan Momcilo Popovich Waveguide laser illuminator incorporating a despeckler
EP2995986B1 (en) 2011-08-24 2017-04-12 Rockwell Collins, Inc. Data display
WO2013102759A2 (en) 2012-01-06 2013-07-11 Milan Momcilo Popovich Contact image sensor using switchable bragg gratings
CN106125308B (zh) 2012-04-25 2019-10-25 罗克韦尔柯林斯公司 用于显示图像的装置和方法
US9456744B2 (en) 2012-05-11 2016-10-04 Digilens, Inc. Apparatus for eye tracking
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9933684B2 (en) 2012-11-16 2018-04-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration
US11504051B2 (en) 2013-01-25 2022-11-22 Wesley W. O. Krueger Systems and methods for observing eye and head information to measure ocular parameters and determine human health status
US11490809B2 (en) 2013-01-25 2022-11-08 Wesley W. O. Krueger Ocular parameter-based head impact measurement using a face shield
US10209517B2 (en) 2013-05-20 2019-02-19 Digilens, Inc. Holographic waveguide eye tracker
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
WO2015006784A2 (en) * 2013-07-12 2015-01-15 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US10228242B2 (en) 2013-07-12 2019-03-12 Magic Leap, Inc. Method and system for determining user input based on gesture
WO2015015138A1 (en) 2013-07-31 2015-02-05 Milan Momcilo Popovich Method and apparatus for contact image sensing
US9701530B2 (en) 2013-11-22 2017-07-11 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9633504B2 (en) 2013-11-22 2017-04-25 Michael J Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9527716B2 (en) 2013-11-22 2016-12-27 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9857591B2 (en) 2014-05-30 2018-01-02 Magic Leap, Inc. Methods and system for creating focal planes in virtual and augmented reality
EP4220999A3 (en) * 2013-11-27 2023-08-09 Magic Leap, Inc. Virtual and augmented reality systems and methods
CN103676175A (zh) * 2013-12-26 2014-03-26 无锡锡飞光电科技有限公司 裸眼3d显示方法
KR102177133B1 (ko) 2014-01-31 2020-11-10 매직 립, 인코포레이티드 멀티-포컬 디스플레이 시스템 및 방법
CA3089749A1 (en) * 2014-01-31 2015-08-06 Magic Leap, Inc. Multi-focal display system and method
US11138793B2 (en) 2014-03-14 2021-10-05 Magic Leap, Inc. Multi-depth plane display system with reduced switching between depth planes
US10430985B2 (en) 2014-03-14 2019-10-01 Magic Leap, Inc. Augmented reality systems and methods utilizing reflections
WO2015161307A1 (en) * 2014-04-18 2015-10-22 Magic Leap, Inc. Systems and methods for augmented and virtual reality
JP6648041B2 (ja) 2014-05-30 2020-02-14 マジック リープ, インコーポレイテッドMagic Leap,Inc. 仮想および拡張現実のためのアドレス可能焦点を伴う自由形状光学システムを用いて立体視を表示する方法およびシステム
CN112987307B (zh) 2014-05-30 2022-06-28 奇跃公司 用于在虚拟和增强现实中产生焦平面的方法和***
WO2016020632A1 (en) 2014-08-08 2016-02-11 Milan Momcilo Popovich Method for holographic mastering and replication
US10241330B2 (en) 2014-09-19 2019-03-26 Digilens, Inc. Method and apparatus for generating input images for holographic waveguide displays
WO2016046514A1 (en) 2014-09-26 2016-03-31 LOKOVIC, Kimberly, Sun Holographic waveguide opticaltracker
KR102417136B1 (ko) * 2014-09-29 2022-07-05 매직 립, 인코포레이티드 상이한 파장의 광을 도파관 밖으로 출력하기 위한 아키텍쳐 및 방법
WO2016109599A1 (en) * 2014-12-29 2016-07-07 Magic Leap, Inc. Light projector using an acousto-optical control device
US20180275402A1 (en) 2015-01-12 2018-09-27 Digilens, Inc. Holographic waveguide light field displays
EP3245444B1 (en) 2015-01-12 2021-09-08 DigiLens Inc. Environmentally isolated waveguide display
EP3248026B1 (en) 2015-01-20 2019-09-04 DigiLens Inc. Holographic waveguide lidar
US10657780B1 (en) 2015-01-29 2020-05-19 Transparensee Llc System, method, and apparatus for mixing, blending, dispensing, monitoring, and labeling products
US9632226B2 (en) 2015-02-12 2017-04-25 Digilens Inc. Waveguide grating device
US11468639B2 (en) 2015-02-20 2022-10-11 Microsoft Technology Licensing, Llc Selective occlusion system for augmented reality devices
US10838207B2 (en) 2015-03-05 2020-11-17 Magic Leap, Inc. Systems and methods for augmented reality
AU2016225963B2 (en) 2015-03-05 2021-05-13 Magic Leap, Inc. Systems and methods for augmented reality
US10180734B2 (en) 2015-03-05 2019-01-15 Magic Leap, Inc. Systems and methods for augmented reality
US10459145B2 (en) 2015-03-16 2019-10-29 Digilens Inc. Waveguide device incorporating a light pipe
NZ773834A (en) 2015-03-16 2022-07-01 Magic Leap Inc Methods and systems for diagnosing and treating health ailments
US10404975B2 (en) 2015-03-20 2019-09-03 Tilt Five, Inc Retroreflective light field display
US10591756B2 (en) 2015-03-31 2020-03-17 Digilens Inc. Method and apparatus for contact image sensing
CN106293561B (zh) 2015-05-28 2020-02-28 北京智谷睿拓技术服务有限公司 显示控制方法和装置、显示设备
CN106303498B (zh) 2015-05-30 2018-10-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
CN106303315B (zh) 2015-05-30 2019-08-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
CN106303499B (zh) 2015-05-30 2018-10-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
AU2016278013B2 (en) 2015-06-15 2021-10-21 Magic Leap, Inc. Display system with optical elements for in-coupling multiplexed light streams
US10176642B2 (en) 2015-07-17 2019-01-08 Bao Tran Systems and methods for computer assisted operation
US10335572B1 (en) 2015-07-17 2019-07-02 Naveen Kumar Systems and methods for computer assisted operation
US10149958B1 (en) 2015-07-17 2018-12-11 Bao Tran Systems and methods for computer assisted operation
US10685488B1 (en) 2015-07-17 2020-06-16 Naveen Kumar Systems and methods for computer assisted operation
US10492981B1 (en) 2015-07-17 2019-12-03 Bao Tran Systems and methods for computer assisted operation
EP3671317B1 (en) 2015-07-20 2021-11-10 Magic Leap, Inc. Collimating fiber scanner design with inward pointing angles in virtual/augmented reality system
CN109409251B (zh) 2015-08-18 2023-05-16 奇跃公司 虚拟和增强现实***和方法
US10146997B2 (en) 2015-08-21 2018-12-04 Magic Leap, Inc. Eyelid shape estimation using eye pose measurement
AU2016310452B2 (en) 2015-08-21 2021-04-22 Magic Leap, Inc. Eyelid shape estimation
EP4254145A3 (en) 2015-09-16 2023-11-01 Magic Leap, Inc. Head pose mixing of audio files
US10466478B2 (en) 2015-09-23 2019-11-05 Magic Leap, Inc. Eye imaging with an off-axis imager
EP3359999A1 (en) 2015-10-05 2018-08-15 Popovich, Milan Momcilo Waveguide display
IL294587A (en) 2015-10-05 2022-09-01 Magic Leap Inc Microlens collimator for optical fiber scanning in a virtual/augmented reality system
CN108139518B (zh) 2015-10-06 2024-03-29 奇跃公司 具有反向角衍射光栅的虚拟/增强现实***
AU2016340222B2 (en) 2015-10-16 2021-07-01 Magic Leap, Inc. Eye pose identification using eye features
CA3002369A1 (en) 2015-10-20 2017-04-27 Magic Leap, Inc. Selecting virtual objects in a three-dimensional space
US9709807B2 (en) 2015-11-03 2017-07-18 Motorola Solutions, Inc. Out of focus notifications
WO2017079333A1 (en) 2015-11-04 2017-05-11 Magic Leap, Inc. Light field display metrology
US11231544B2 (en) 2015-11-06 2022-01-25 Magic Leap, Inc. Metasurfaces for redirecting light and methods for fabricating
WO2017096396A1 (en) 2015-12-04 2017-06-08 Magic Leap, Inc. Relocalization systems and methods
NZ743884A (en) 2016-01-07 2019-11-29 Magic Leap Inc Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes
CN108431669A (zh) * 2016-01-07 2018-08-21 奇跃公司 动态菲涅尔投影仪
WO2017127571A1 (en) 2016-01-19 2017-07-27 Magic Leap, Inc. Augmented reality systems and methods utilizing reflections
US10466778B2 (en) 2016-01-19 2019-11-05 Magic Leap, Inc. Eye image selection
AU2017209171B2 (en) 2016-01-20 2021-10-21 Magic Leap, Inc. Polarizing maintaining optical fiber in virtual/augmented reality system
JP7012017B2 (ja) 2016-01-29 2022-01-27 マジック リープ, インコーポレイテッド 3次元画像のためのディスプレイ
US10983340B2 (en) 2016-02-04 2021-04-20 Digilens Inc. Holographic waveguide optical tracker
WO2017147527A1 (en) 2016-02-24 2017-08-31 Magic Leap, Inc. Polarizing beam splitter with low light leakage
KR20180116347A (ko) 2016-02-24 2018-10-24 매직 립, 인코포레이티드 광 이미터에 대한 로우 프로파일 인터커넥트
NZ745379A (en) 2016-02-26 2020-01-31 Magic Leap Inc Display system having a plurality of light pipes for a plurality of light emitters
IL261148B2 (en) 2016-02-26 2023-12-01 Magic Leap Inc Light output system with reflector and lenses for high spatially uniform light output
NZ757279A (en) 2016-03-01 2022-10-28 Magic Leap Inc Reflective switching device for inputting different wavelengths of light into waveguides
NZ745738A (en) 2016-03-04 2020-01-31 Magic Leap Inc Current drain reduction in ar/vr display systems
KR102358677B1 (ko) * 2016-03-07 2022-02-03 매직 립, 인코포레이티드 생체 인증 보안을 위한 청색 광 조정
CN109154983B (zh) 2016-03-22 2022-06-24 奇跃公司 被配置为交换生物测定信息的头戴式显示***
WO2017162999A1 (en) 2016-03-24 2017-09-28 Popovich Milan Momcilo Method and apparatus for providing a polarization selective holographic waveguide device
US10698215B2 (en) 2016-03-25 2020-06-30 Magic Leap, Inc. Virtual and augmented reality systems and methods
CA3018758A1 (en) 2016-03-31 2017-10-05 Magic Leap, Inc. Interactions with 3d virtual objects using poses and multiple-dof controllers
CN114236812A (zh) 2016-04-08 2022-03-25 奇跃公司 具有可变焦透镜元件的增强现实***和方法
WO2017178781A1 (en) 2016-04-11 2017-10-19 GRANT, Alastair, John Holographic waveguide apparatus for structured light projection
KR102548818B1 (ko) 2016-04-21 2023-06-28 매직 립, 인코포레이티드 시야 주위의 시각적 아우라
EP3458167B1 (en) 2016-04-26 2022-10-19 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems
US10046229B2 (en) 2016-05-02 2018-08-14 Bao Tran Smart device
KR20230159898A (ko) 2016-05-06 2023-11-22 매직 립, 인코포레이티드 광을 재지향시키기 위한 비대칭 격자들을 가진 메타표면들 및 제조를 위한 방법들
AU2017264695B2 (en) 2016-05-09 2022-03-31 Magic Leap, Inc. Augmented reality systems and methods for user health analysis
NZ748013A (en) 2016-05-12 2023-05-26 Magic Leap Inc Distributed light manipulation over imaging waveguide
KR20230113663A (ko) 2016-05-20 2023-07-31 매직 립, 인코포레이티드 사용자 인터페이스 메뉴의 콘텍추얼 인식
CN116778367A (zh) 2016-06-03 2023-09-19 奇跃公司 增强现实身份验证
CN117028910A (zh) 2016-06-10 2023-11-10 奇跃公司 纹理投射灯泡的积分点光源
WO2017222997A1 (en) 2016-06-20 2017-12-28 Magic Leap, Inc. Augmented reality display system for evaluation and modification of neurological conditions, including visual processing and perception conditions
EP3479160A4 (en) 2016-06-30 2020-03-25 Magic Leap, Inc. ESTIMATE OF THE POSE IN A 3D SPACE
US10922393B2 (en) 2016-07-14 2021-02-16 Magic Leap, Inc. Deep neural network for iris identification
KR102442569B1 (ko) 2016-07-14 2022-09-08 매직 립, 인코포레이티드 각막 곡률을 이용한 홍채 경계 추정
KR102577634B1 (ko) 2016-07-25 2023-09-11 매직 립, 인코포레이티드 증강 현실 및 가상 현실 안경류를 사용한 이미징 수정, 디스플레이 및 시각화
KR102669685B1 (ko) 2016-07-25 2024-05-29 매직 립, 인코포레이티드 광 필드 프로세서 시스템
JP6851458B2 (ja) 2016-07-29 2021-03-31 マジック リープ, インコーポレイテッドMagic Leap,Inc. 暗号論的に署名された記録のセキュアな交換
AU2017305227B2 (en) 2016-08-02 2021-12-16 Magic Leap, Inc. Fixed-distance virtual and augmented reality systems and methods
WO2018031621A1 (en) 2016-08-11 2018-02-15 Magic Leap, Inc. Automatic placement of a virtual object in a three-dimensional space
CN117198277A (zh) 2016-08-12 2023-12-08 奇跃公司 单词流注释
JP6993405B2 (ja) 2016-08-22 2022-01-13 マジック リープ, インコーポレイテッド ウェアラブルディスプレイデバイスのためのディザリング方法および装置
CA3034644A1 (en) 2016-08-22 2018-03-01 Magic Leap, Inc. Augmented reality display device with deep learning sensors
CN106131541A (zh) * 2016-08-26 2016-11-16 广州巧瞳科技有限公司 基于增强现实的智能显示装置及方法
AU2017328161B2 (en) 2016-09-13 2022-02-17 Magic Leap, Inc. Sensory eyewear
CA3037044A1 (en) 2016-09-21 2018-03-29 Magic Leap, Inc. Systems and methods for optical systems with exit pupil expander
KR102266343B1 (ko) 2016-09-22 2021-06-17 매직 립, 인코포레이티드 증강 현실 분광기
CN114706478A (zh) 2016-09-26 2022-07-05 奇跃公司 虚拟现实或增强现实显示***中磁传感器和光学传感器的校准
JP6964132B2 (ja) 2016-09-28 2021-11-10 マジック リープ, インコーポレイテッドMagic Leap, Inc. ウェアラブルデバイスによる顔モデル捕捉
RU2016138608A (ru) 2016-09-29 2018-03-30 Мэджик Лип, Инк. Нейронная сеть для сегментации изображения глаза и оценки качества изображения
CA3038967A1 (en) 2016-10-04 2018-04-12 Magic Leap, Inc. Efficient data layouts for convolutional neural networks
JP7090601B2 (ja) 2016-10-05 2022-06-24 マジック リープ, インコーポレイテッド 複合現実較正のための眼球周囲試験
IL302405B1 (en) 2016-10-21 2024-04-01 Magic Leap Inc System and method for displaying image content on multiple depth planes by providing multiple intrapupillary parallax fields of view
CN106657970A (zh) * 2016-10-25 2017-05-10 乐视控股(北京)有限公司 一种深度图成像装置
WO2018089691A1 (en) 2016-11-11 2018-05-17 Magic Leap, Inc. Periocular and audio synthesis of a full face image
US10621747B2 (en) 2016-11-15 2020-04-14 Magic Leap, Inc. Deep learning system for cuboid detection
KR102595171B1 (ko) 2016-11-16 2023-10-26 매직 립, 인코포레이티드 웨어러블 컴포넌트들을 위한 열 관리 시스템들
US11067860B2 (en) 2016-11-18 2021-07-20 Magic Leap, Inc. Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same
KR20240056787A (ko) 2016-11-18 2024-04-30 매직 립, 인코포레이티드 공간 가변적 액정 회절 격자들
AU2017363078B2 (en) 2016-11-18 2022-09-29 Magic Leap, Inc. Waveguide light multiplexer using crossed gratings
KR102506485B1 (ko) 2016-11-18 2023-03-03 매직 립, 인코포레이티드 넓은 입사 각도 범위들의 광을 방향전환시키기 위한 다중층 액정 회절 격자들
WO2018102834A2 (en) 2016-12-02 2018-06-07 Digilens, Inc. Waveguide device with uniform output illumination
US10531220B2 (en) 2016-12-05 2020-01-07 Magic Leap, Inc. Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems
CA3045664A1 (en) 2016-12-05 2018-06-14 Magic Leap, Inc. Virtual user input controls in a mixed reality environment
EP3552057B1 (en) 2016-12-08 2022-01-05 Magic Leap, Inc. Diffractive devices based on cholesteric liquid crystal
CA3046399A1 (en) 2016-12-13 2018-06-21 Magic Leap, Inc. 3d object rendering using detected features
AU2017376453B2 (en) 2016-12-14 2022-09-29 Magic Leap, Inc. Patterning of liquid crystals using soft-imprint replication of surface alignment patterns
US10371896B2 (en) 2016-12-22 2019-08-06 Magic Leap, Inc. Color separation in planar waveguides using dichroic filters
US10746999B2 (en) 2016-12-28 2020-08-18 Magic Leap, Inc. Dual depth exit pupil expander
CA3051060A1 (en) 2016-12-29 2018-07-05 Magic Leap, Inc. Automatic control of wearable display device based on external conditions
US10545346B2 (en) 2017-01-05 2020-01-28 Digilens Inc. Wearable heads up displays
WO2018129151A1 (en) 2017-01-05 2018-07-12 Magic Leap, Inc. Patterning of high refractive index glasses by plasma etching
US10812936B2 (en) 2017-01-23 2020-10-20 Magic Leap, Inc. Localization determination for mixed reality systems
CA3051239C (en) 2017-01-23 2023-12-19 Magic Leap, Inc. Eyepiece for virtual, augmented, or mixed reality systems
US10841724B1 (en) 2017-01-24 2020-11-17 Ha Tran Enhanced hearing system
WO2018140651A1 (en) 2017-01-27 2018-08-02 Magic Leap, Inc. Diffraction gratings formed by metasurfaces having differently oriented nanobeams
CN110476090B (zh) 2017-01-27 2023-04-25 奇跃公司 用于超表面的抗反射涂层
US11347054B2 (en) 2017-02-16 2022-05-31 Magic Leap, Inc. Systems and methods for augmented reality
IL311431A (en) 2017-02-23 2024-05-01 Magic Leap Inc Display system with variable power reflector
KR102297359B1 (ko) 2017-03-14 2021-09-01 매직 립, 인코포레이티드 광 흡수막들을 갖는 도파관들 및 이를 형성하기 위한 프로세스들
JP7055815B2 (ja) 2017-03-17 2022-04-18 マジック リープ, インコーポレイテッド 仮想コンテンツをワーピングすることを伴う複合現実システムおよびそれを使用して仮想コンテンツを生成する方法
US10861237B2 (en) 2017-03-17 2020-12-08 Magic Leap, Inc. Mixed reality system with multi-source virtual content compositing and method of generating virtual content using same
JP6929953B2 (ja) 2017-03-17 2021-09-01 マジック リープ, インコーポレイテッドMagic Leap,Inc. 部屋レイアウト推定方法および技法
CN117873313A (zh) 2017-03-17 2024-04-12 奇跃公司 具有彩色虚拟内容扭曲的混合现实***及使用该***生成虚拟内容的方法
AU2018237067B2 (en) 2017-03-21 2022-11-10 Magic Leap, Inc. Depth sensing techniques for virtual, augmented, and mixed reality systems
KR102576133B1 (ko) 2017-03-21 2023-09-07 매직 립, 인코포레이티드 회절 광학 엘리먼트들을 이용한 눈-이미징 장치
IL269290B1 (en) 2017-03-21 2024-05-01 Magic Leap Inc Methods, devices and systems for illuminating spatial light modulators
CA3056899C (en) 2017-03-21 2023-09-19 Magic Leap, Inc. Low-profile beam splitter
CN110679147B (zh) 2017-03-22 2022-03-08 奇跃公司 用于显示***的基于深度的凹式渲染
US10436968B2 (en) 2017-04-18 2019-10-08 Magic Leap, Inc. Waveguides having reflective layers formed by reflective flowable materials
AU2018256365A1 (en) 2017-04-19 2019-10-31 Magic Leap, Inc. Multimodal task execution and text editing for a wearable system
US10453273B2 (en) * 2017-04-25 2019-10-22 Microsoft Technology Licensing, Llc Method and system for providing an object in virtual or semi-virtual space based on a user characteristic
WO2018201067A1 (en) 2017-04-27 2018-11-01 Magic Leap, Inc. Light-emitting user input device
US10412378B2 (en) 2017-05-08 2019-09-10 Microsoft Technology Licensing, Llc Resonating optical waveguide using multiple diffractive optical elements
US10222615B2 (en) 2017-05-26 2019-03-05 Microsoft Technology Licensing, Llc Optical waveguide with coherent light source
AU2018277530B2 (en) 2017-05-30 2024-02-22 Magic Leap, Inc. Power supply assembly with fan assembly for electronic device
AU2018277842A1 (en) 2017-05-31 2019-12-19 Magic Leap, Inc. Eye tracking calibration techniques
US10859834B2 (en) 2017-07-03 2020-12-08 Holovisions Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear
US10338400B2 (en) 2017-07-03 2019-07-02 Holovisions LLC Augmented reality eyewear with VAPE or wear technology
US10908680B1 (en) 2017-07-12 2021-02-02 Magic Leap, Inc. Pose estimation using electromagnetic tracking
WO2019022849A1 (en) 2017-07-26 2019-01-31 Magic Leap, Inc. FORMATION OF A NEURONAL NETWORK WITH REPRESENTATIONS OF USER INTERFACE DEVICES
WO2019023489A1 (en) 2017-07-28 2019-01-31 Magic Leap, Inc. FAN ASSEMBLY FOR DISPLAYING IMAGE
US10521661B2 (en) 2017-09-01 2019-12-31 Magic Leap, Inc. Detailed eye shape model for robust biometric applications
AU2018337653A1 (en) 2017-09-20 2020-01-16 Magic Leap, Inc. Personalized neural network for eye tracking
AU2018338222A1 (en) 2017-09-21 2020-03-19 Magic Leap, Inc. Augmented reality display with waveguide configured to capture images of eye and/or environment
KR102481884B1 (ko) 2017-09-22 2022-12-28 삼성전자주식회사 가상 영상을 표시하는 방법 및 장치
CN107682686B (zh) * 2017-10-11 2019-03-12 京东方科技集团股份有限公司 一种虚拟现实显示装置、显示设备及显示方法
US10942430B2 (en) 2017-10-16 2021-03-09 Digilens Inc. Systems and methods for multiplying the image resolution of a pixelated display
CN111133362B (zh) 2017-10-22 2021-12-28 鲁姆斯有限公司 采用光具座的头戴式增强现实设备
CN111373419A (zh) 2017-10-26 2020-07-03 奇跃公司 用于深度多任务网络中自适应损失平衡的梯度归一化***和方法
US10852547B2 (en) 2017-12-15 2020-12-01 Magic Leap, Inc. Eyepieces for augmented reality display system
US10914950B2 (en) 2018-01-08 2021-02-09 Digilens Inc. Waveguide architectures and related methods of manufacturing
CN115356905A (zh) 2018-01-08 2022-11-18 迪吉伦斯公司 波导单元格中全息光栅高吞吐量记录的***和方法
US11567627B2 (en) 2018-01-30 2023-01-31 Magic Leap, Inc. Eclipse cursor for virtual content in mixed reality displays
US10540941B2 (en) 2018-01-30 2020-01-21 Magic Leap, Inc. Eclipse cursor for mixed reality displays
CN108366250B (zh) * 2018-02-06 2020-03-17 深圳市鹰硕技术有限公司 影像显示***、方法以及数字眼镜
WO2019156992A2 (en) 2018-02-06 2019-08-15 Magic Leap, Inc. Systems and methods for augmented reality
US10735649B2 (en) 2018-02-22 2020-08-04 Magic Leap, Inc. Virtual and augmented reality systems and methods using display system control information embedded in image data
CA3139648A1 (en) 2018-03-07 2019-09-12 Magic Leap, Inc. Visual tracking of peripheral devices
EP4372451A2 (en) 2018-03-16 2024-05-22 Digilens Inc. Holographic waveguides incorporating birefringence control and methods for their fabrication
WO2019178566A1 (en) 2018-03-16 2019-09-19 Magic Leap, Inc. Depth based foveated rendering for display systems
US11480467B2 (en) 2018-03-21 2022-10-25 Magic Leap, Inc. Augmented reality system and method for spectroscopic analysis
US11157159B2 (en) 2018-06-07 2021-10-26 Magic Leap, Inc. Augmented reality scrollbar
USD875729S1 (en) 2018-06-27 2020-02-18 Magic Leap, Inc. Portion of an augmented reality headset
WO2020018938A1 (en) 2018-07-19 2020-01-23 Magic Leap, Inc. Content interaction driven by eye metrics
US10753579B2 (en) 2018-07-20 2020-08-25 Flex-N-Gate Advanced Product Development, Llc Animated 3D image multiplier
EP3824622A4 (en) 2018-07-20 2021-09-08 Flex-N-gate Advanced Product Development, LLC FLOATING IMAGE GENERATION
US10916064B2 (en) 2018-07-23 2021-02-09 Magic Leap, Inc. Method and system for resolving hemisphere ambiguity using a position vector
JP7413345B2 (ja) 2018-07-23 2024-01-15 マジック リープ, インコーポレイテッド フィールド順次ディスプレイにおけるフィールド内サブコードタイミング
WO2020023383A1 (en) 2018-07-23 2020-01-30 Magic Leap, Inc. Mixed reality system with virtual content warping and method of generating virtual content using same
USD924204S1 (en) 2018-07-24 2021-07-06 Magic Leap, Inc. Totem controller having an illumination region
USD918176S1 (en) 2018-07-24 2021-05-04 Magic Leap, Inc. Totem controller having an illumination region
USD930614S1 (en) 2018-07-24 2021-09-14 Magic Leap, Inc. Totem controller having an illumination region
CN112689869A (zh) 2018-07-24 2021-04-20 奇跃公司 用于确定显示器与用户的眼睛之间的配准的显示***和方法
WO2020023779A1 (en) 2018-07-25 2020-01-30 Digilens Inc. Systems and methods for fabricating a multilayer optical structure
US11914148B2 (en) 2018-09-07 2024-02-27 Adeia Semiconductor Inc. Stacked optical waveguides
US11141645B2 (en) 2018-09-11 2021-10-12 Real Shot Inc. Athletic ball game using smart glasses
US11103763B2 (en) 2018-09-11 2021-08-31 Real Shot Inc. Basketball shooting game using smart glasses
CN113227879A (zh) 2018-10-26 2021-08-06 奇跃公司 用于电磁跟踪的环境电磁失真校正
WO2020096743A1 (en) 2018-11-09 2020-05-14 Beckman Coulter, Inc. Service glasses with selective data provision
CN113302546A (zh) 2018-11-20 2021-08-24 奇跃公司 用于增强现实显示***的目镜
EP3924759A4 (en) 2019-02-15 2022-12-28 Digilens Inc. METHODS AND APPARATUS FOR MAKING A HOLOGRAPHIC WAVEGUIDE DISPLAY WITH INTEGRATED GRIDINGS
US11287657B2 (en) 2019-02-28 2022-03-29 Magic Leap, Inc. Display system and method for providing variable accommodation cues using multiple intra-pupil parallax views formed by light emitter arrays
JP2022525165A (ja) 2019-03-12 2022-05-11 ディジレンズ インコーポレイテッド ホログラフィック導波管バックライトおよび関連する製造方法
EP3956858A1 (en) 2019-04-18 2022-02-23 Beckman Coulter, Inc. Securing data of objects in a laboratory environment
USD962981S1 (en) 2019-05-29 2022-09-06 Magic Leap, Inc. Display screen or portion thereof with animated scrollbar graphical user interface
US20200386947A1 (en) 2019-06-07 2020-12-10 Digilens Inc. Waveguides Incorporating Transmissive and Reflective Gratings and Related Methods of Manufacturing
EP3987343A4 (en) 2019-06-20 2023-07-19 Magic Leap, Inc. EYEWEARS FOR AUGMENTED REALITY DISPLAY SYSTEM
WO2020261279A1 (en) 2019-06-27 2020-12-30 Lumus Ltd. Apparatus and methods for eye tracking based on eye imaging via a light-guide optical element
US11681143B2 (en) 2019-07-29 2023-06-20 Digilens Inc. Methods and apparatus for multiplying the image resolution and field-of-view of a pixelated display
EP4022370A4 (en) 2019-08-29 2023-08-30 Digilens Inc. VACUUM BRAGG GRATINGS AND METHODS OF MANUFACTURING
IL294102A (en) 2019-12-25 2022-08-01 Lumus Ltd Optical systems and methods for tracking eyes based on directing light from the eye through an optical arrangement associated with a light-directing optical element
US11998275B2 (en) 2020-07-15 2024-06-04 Magic Leap, Inc. Eye tracking using aspheric cornea model
TW202323949A (zh) * 2021-09-30 2023-06-16 以色列商魯姆斯有限公司 用於控制有源遮擋子系統的裝置、方法和電腦可讀存儲裝置
KR20230103379A (ko) 2021-12-31 2023-07-07 삼성전자주식회사 Ar 처리 방법 및 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010014282A (ko) * 1997-06-28 2001-02-26 스켈톤 에스. 알. 자동입체 디스플레이 장치
US20100149611A1 (en) * 2007-05-16 2010-06-17 Seereal Technologies S.A. Method and Apparatus for Reconstructing a Three-Dimensional Scene in a Holographic Display

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2728994B2 (ja) 1991-07-30 1998-03-18 三菱電機株式会社 開閉機器の動作異常検出装置
JP2786352B2 (ja) * 1991-10-02 1998-08-13 シャープ株式会社 焦点可変光学装置
JPH0536327U (ja) * 1991-10-21 1993-05-18 三菱電機株式会社 撮像装置
JPH05328260A (ja) * 1992-05-26 1993-12-10 Olympus Optical Co Ltd 頭部装着式ディスプレイ装置
US5572343A (en) 1992-05-26 1996-11-05 Olympus Optical Co., Ltd. Visual display having see-through function and stacked liquid crystal shutters of opposite viewing angle directions
JP3630746B2 (ja) * 1994-12-05 2005-03-23 キヤノン株式会社 画像観察装置
JP3556389B2 (ja) * 1996-05-01 2004-08-18 日本電信電話株式会社 ヘッドマウントディスプレイ装置
EP0785457A3 (en) 1996-01-17 1998-10-14 Nippon Telegraph And Telephone Corporation Optical device and three-dimensional display device
DE69709709D1 (de) * 1996-03-15 2002-02-21 Retinal Display Cayman Ltd Verfahren und vorrichtung zur betrachtung eines bildes
US20040108971A1 (en) * 1998-04-09 2004-06-10 Digilens, Inc. Method of and apparatus for viewing an image
JP2000171750A (ja) * 1998-12-03 2000-06-23 Sony Corp ヘッドマウントディスプレイ、表示方法、および提供媒体
US6546438B1 (en) 1999-06-08 2003-04-08 Siemens Energy & Automation System for interfacing components
US6456438B1 (en) * 1999-08-12 2002-09-24 Honeywell Inc. Variable immersion vignetting display
GB0000589D0 (en) 2000-01-13 2000-03-01 Guiver Matthew Cutting guide
FI114945B (fi) * 2002-09-19 2005-01-31 Nokia Corp Sähköisesti säädettävä diffraktiivinen hilaelementti
US7821715B2 (en) * 2005-02-22 2010-10-26 Nikon Corporation Diffractive optical element
DE102005045174A1 (de) 2005-09-21 2007-03-22 Bayer Cropscience Ag Steigerung der Pathogenabwehr in Pflanzen
WO2007037089A1 (ja) * 2005-09-27 2007-04-05 Konica Minolta Holdings, Inc. 頭部装着型映像表示装置
JP4810949B2 (ja) * 2005-09-29 2011-11-09 ソニー株式会社 光学装置及び画像表示装置
US7702468B2 (en) 2006-05-03 2010-04-20 Population Diagnostics, Inc. Evaluating genetic disorders
US7936489B2 (en) * 2007-02-09 2011-05-03 GM Global Technology Operations LLC Holographic information display
CN101029968A (zh) * 2007-04-06 2007-09-05 北京理工大学 可寻址光线屏蔽机制光学透视式头盔显示器
WO2008148927A1 (en) 2007-06-04 2008-12-11 Nokia Corporation A diffractive beam expander and a virtual display based on a diffractive beam expander
BRPI0701380E2 (pt) 2007-06-29 2009-10-06 Valmor Da Cunha Gravio redutor mecánico de velocidade por correia
RU2482018C2 (ru) 2007-07-31 2013-05-20 Б/Е Аэроспейс, Инк. Дверь для летательного аппарата
RU2359297C1 (ru) * 2007-12-21 2009-06-20 Олег Леонидович Головков Виртуальный шлем
US20100011368A1 (en) 2008-07-09 2010-01-14 Hiroshi Arakawa Methods, systems and programs for partitioned storage resources and services in dynamically reorganized storage platforms
US20100011036A1 (en) 2008-07-09 2010-01-14 The Go Daddy Group, Inc. Document storage access on a per-approval basis
CN103119512A (zh) * 2008-11-02 2013-05-22 大卫·乔姆 近眼式显示***和装置
EP2376971B1 (en) * 2008-12-12 2019-02-20 BAE Systems PLC Improvements in or relating to waveguides
JP4674634B2 (ja) * 2008-12-19 2011-04-20 ソニー株式会社 頭部装着型ディスプレイ
JP5316391B2 (ja) * 2009-08-31 2013-10-16 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
JP5333067B2 (ja) * 2009-08-31 2013-11-06 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
KR101099137B1 (ko) 2010-01-29 2011-12-27 주식회사 팬택 이동 통신 시스템에서 증강 현실 정보를 제공하기 위한 장치 및 방법
US20110213664A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
KR101479262B1 (ko) 2010-09-02 2015-01-12 주식회사 팬택 증강현실 정보 이용 권한 부여 방법 및 장치
KR101260576B1 (ko) 2010-10-13 2013-05-06 주식회사 팬택 Ar 서비스를 제공하기 위한 사용자 단말기 및 그 방법
KR101407670B1 (ko) 2011-09-15 2014-06-16 주식회사 팬택 증강현실 기반 모바일 단말과 서버 및 그 통신방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010014282A (ko) * 1997-06-28 2001-02-26 스켈톤 에스. 알. 자동입체 디스플레이 장치
US20100149611A1 (en) * 2007-05-16 2010-06-17 Seereal Technologies S.A. Method and Apparatus for Reconstructing a Three-Dimensional Scene in a Holographic Display

Also Published As

Publication number Publication date
US10191294B2 (en) 2019-01-29
JP6785277B2 (ja) 2020-11-18
US8950867B2 (en) 2015-02-10
IL232746A0 (en) 2014-07-31
US10670881B2 (en) 2020-06-02
CN104067316B (zh) 2017-10-27
US20170023794A1 (en) 2017-01-26
KR20140101385A (ko) 2014-08-19
US11822102B2 (en) 2023-11-21
EP3503035B1 (en) 2022-03-23
US20190339539A1 (en) 2019-11-07
EP3503035A1 (en) 2019-06-26
RU2628164C2 (ru) 2017-08-15
CA3024054C (en) 2020-12-29
US20230004018A1 (en) 2023-01-05
JP6422518B2 (ja) 2018-11-14
BR112014012615A2 (pt) 2017-06-13
KR20220036997A (ko) 2022-03-23
CA2858208A1 (en) 2013-05-30
US10444527B2 (en) 2019-10-15
WO2013077895A1 (en) 2013-05-30
CN107664847A (zh) 2018-02-06
JP2017108444A (ja) 2017-06-15
IL252284A0 (en) 2017-07-31
EP2783352A4 (en) 2015-07-22
JP2020181225A (ja) 2020-11-05
AU2018203315A1 (en) 2018-05-31
NZ625509A (en) 2015-03-27
AU2020257062A1 (en) 2020-11-19
EP4036862A1 (en) 2022-08-03
AU2012341069A1 (en) 2014-06-12
EP2783352A1 (en) 2014-10-01
RU2014125226A (ru) 2015-12-27
US20240027785A1 (en) 2024-01-25
KR102227381B1 (ko) 2021-03-11
IL232746A (en) 2017-06-29
CA3024054A1 (en) 2013-05-30
CN107664847B (zh) 2021-04-06
US20130128230A1 (en) 2013-05-23
AU2022202379B2 (en) 2023-08-17
JP2018207542A (ja) 2018-12-27
CA2858208C (en) 2019-01-15
KR102440195B1 (ko) 2022-09-02
JP2018151674A (ja) 2018-09-27
EP2783352B1 (en) 2019-03-27
AU2018203318B2 (en) 2020-03-12
US20190072775A1 (en) 2019-03-07
US11474371B2 (en) 2022-10-18
JP6250547B2 (ja) 2017-12-20
KR102376368B1 (ko) 2022-03-17
KR102513896B1 (ko) 2023-03-23
KR20210029842A (ko) 2021-03-16
AU2020257062B2 (en) 2022-02-03
CN104067316A (zh) 2014-09-24
KR102116697B1 (ko) 2020-05-29
AU2012341069B2 (en) 2018-04-05
US20150124317A1 (en) 2015-05-07
IL252284B (en) 2018-07-31
AU2022202379A1 (en) 2022-05-05
JP2015501101A (ja) 2015-01-08
KR102095220B1 (ko) 2020-03-31
JP6646712B2 (ja) 2020-02-14
KR20220124294A (ko) 2022-09-13
KR20170122285A (ko) 2017-11-03
US20200233232A1 (en) 2020-07-23
AU2018203318A1 (en) 2018-05-31
AU2018203315B2 (en) 2020-07-23

Similar Documents

Publication Publication Date Title
US11822102B2 (en) Three dimensional virtual and augmented reality display system

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant