KR20200061416A - 3차원 가상 및 증강 현실 디스플레이 시스템 - Google Patents
3차원 가상 및 증강 현실 디스플레이 시스템 Download PDFInfo
- Publication number
- KR20200061416A KR20200061416A KR1020207014691A KR20207014691A KR20200061416A KR 20200061416 A KR20200061416 A KR 20200061416A KR 1020207014691 A KR1020207014691 A KR 1020207014691A KR 20207014691 A KR20207014691 A KR 20207014691A KR 20200061416 A KR20200061416 A KR 20200061416A
- Authority
- KR
- South Korea
- Prior art keywords
- projection device
- image
- eye
- viewer
- modes
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title description 12
- 230000002596 correlated effect Effects 0.000 claims abstract description 4
- 238000012800 visualization Methods 0.000 claims description 13
- 238000000034 method Methods 0.000 claims description 12
- 239000004973 liquid crystal related substance Substances 0.000 claims description 3
- 238000000059 patterning Methods 0.000 abstract description 11
- 238000003384 imaging method Methods 0.000 description 11
- 230000000007 visual effect Effects 0.000 description 8
- 230000008447 perception Effects 0.000 description 7
- 210000004556 brain Anatomy 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 3
- 230000004308 accommodation Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000000873 masking effect Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 206010019233 Headaches Diseases 0.000 description 1
- 230000002350 accommodative effect Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 208000003464 asthenopia Diseases 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000875 corresponding effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 231100000869 headache Toxicity 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011112 process operation Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/22—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
- G02B30/24—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
- H04N13/39—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the picture elements emitting light at places where a pair of light beams intersect in a transparent material
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/34—Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/50—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
- G02B30/52—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels the 3D volume being constructed from a stack or sequence of 2D planes, e.g. depth sampling systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/18—Diffraction gratings
- G02B5/1876—Diffractive Fresnel lenses; Zone plates; Kinoforms
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B35/00—Stereoscopic photography
- G03B35/08—Stereoscopic photography by simultaneous recording
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B35/00—Stereoscopic photography
- G03B35/18—Stereoscopic photography by simultaneous viewing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/322—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
- H04N13/395—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/18—Diffraction gratings
- G02B5/1828—Diffraction gratings having means for producing variable diffraction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Devices For Indicating Variable Information By Combining Individual Elements (AREA)
Abstract
시스템은, 뷰어의 눈에 관련하여 공간적으로 투사 디바이스 위치로부터 뷰어의 눈을 향하여 이미지를 투사하기 위한 선택적으로 투명한 투사 디바이스 ― 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 투사 디바이스에 커플링되고, 투사 디바이스에 의해 투사되는 이미지와 상관된 차폐 패턴(occluding pattern)으로, 투사 디바이스의 대향하는 하나 또는 둘 이상의 위치들로부터 눈을 향하여 이동하는 광을, 뷰어의 눈으로부터 선택적으로 블록킹하도록 구성되는 차폐 마스크 디바이스(occlusion mask device); 및 뷰어의 눈과 투사 디바이스 사이에 개재되고, 투사 디바이스로부터의 광이 눈으로 이동할 때, 상기 투사 디바이스로부터의 광이, 선택가능 기하학적 구조를 갖는 회절 패턴을 통과하게 하도록 구성된 존 플레이트 회절 패터닝 디바이스를 포함할 수 있다.
Description
관련된 출원 데이터
본원은 35 U.S.C. §119 하에서, 2011년 11월 23일 출원된 미국 가출원 번호 제 61/563,403호를 우선권으로 주장한다. 상기 미국 가출원은 이로써 그 전체 내용이 인용에 의해 본원에 포함된다.
본 발명은 가상 현실 및 증강 현실 이미징 및 시각화 시스템들에 관한 것이다.
3D 디스플레이가 진짜 깊이 느낌(true sensation of depth), 더욱 구체적으로는 시뮬레이팅된 표면 깊이 느낌을 생성하도록 하기 위해, 디스플레이의 시야(visual field)의 각각의 포인트가 그의 가상 깊이(virtual depth)에 대응하는 조절 반응(accommodative response)을 발생하는 것이 바람직하다. 디스플레이 포인트에 대한 조절 반응이, 수렴(convergence) 및 입체성(stereopsis)의 양안 깊이 단서(binocular depth cue)들에 의해 결정된 바와 같은 그러한 포인트의 가상 깊이에 대응하지 않는 경우, 인간의 눈은 조절 충돌(accommodation conflict)을 경험할 수 있어서, 불안정한 이미징, 해로운 눈 피로감, 두통들, 그리고 조절 정보의 부재시 표면 깊이의 거의 완전한 결여를 초래한다. 도 1을 참조하면, 증강 현실 시나리오(8)는, 공원 환경(park setting)의 콘크리트 스테이지 대상물(concrete stage object)(1120)을 포함하는 조경 아이템(landscaping item)들과 같은, 사용자의 현실 내의 실제 대상물들의 사용자에 대한 뷰들, 및 또한 "증강(augmented)" 현실 뷰를 생성하기 위해 상기 사용자의 뷰들에 부가된 가상의 대상물들의 뷰들을 이용하여 도시되고; 여기서, 스테이지 대상물(1120) 위에 가상으로 서있는 로봇 조각상(1110)이 도시되고, 사용자의 머리 가까이의 공간에서 날고 있는 벌 캐릭터(2)가 도시된다. 바람직하게, 증강 현실 시스템은 3-D 가능하고(3-D capable), 이러한 경우, 상기 증강 현실 시스템은 사용자에게, 조각상(1110)이 스테이지(1120) 위에 서 있다는 지각(perception), 및 벌 캐릭터(2)가 사용자의 머리 가까이 날고 있다는 지각을 제공한다. 이러한 지각은, 가상의 대상물들(2, 1110)이 상이한 초점 깊이들을 갖고, 로봇 조각상(1110)에 대한 초점 반경들 또는 초점 깊이가 스테이지(1120)에 대한 초점 반경들 또는 초점 깊이와 거의 동일하다는, 사용자의 눈 및 뇌에 대한 시각적 조절 단서들을 활용함으로써 매우 향상될 수 있다. 도 2에 도시된 것과 같은 통상의 입체영상 3-D 시뮬레이션 디스플레이 시스템들은 통상적으로, 고정 반경 초점 거리(10)에 있는 2개의 디스플레이들(74, 76) ― 각각의 눈에 대해 하나의 디스플레이 ― 을 갖는다. 상기 명시된 바와 같이, 이러한 통상의 기술은, 눈을 이용하여 상이한 초점 깊이에 도달하기 위해 복잡한 눈 내의 수정체의 눈의 재위치지정(repositioning)과 연관되는 조절 단서를 포함하여, 3차원에서 깊이를 검출 및 해석하기 위해 인간의 눈 및 뇌에 의해 활용되는 많은 귀중한 단서들을 놓친다. 복잡한, 인간의 눈/뇌 이미지 프로세싱의 조절 양상들을 고려하는 조절 정밀 디스플레이 시스템(accommodation accurate display system)에 대한 필요성이 존재한다.
일 실시예는 3-차원 이미지 시각화 시스템에 관한 것으로, 상기 3-차원 이미지 시각화 시스템은, 뷰어의 눈에 관련하여 공간적으로 투사 디바이스 위치로부터 뷰어의 눈을 향하여 이미지를 투사하기 위한 선택적으로 투명한 투사 디바이스 ― 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 투사 디바이스에 커플링되고, 투사 디바이스에 의해 투사되는 이미지와 상관된 차폐 패턴(occluding pattern)으로, 투사 디바이스의 대향하는 하나 또는 둘 이상의 위치들로부터 눈을 향하여 이동하는 광을, 뷰어의 눈으로부터 선택적으로 블록킹하도록 구성되는 차폐 마스크 디바이스(occlusion mask device); 및 뷰어의 눈과 투사 디바이스 사이에 개재되고, 투사 디바이스로부터의 광이 눈으로 이동할 때, 상기 투사 디바이스로부터의 광이 선택가능 기하학적 구조(geometry)를 갖는 회절 패턴(diffraction pattern)을 통과하게, 그리고 회절 패턴의 선택가능 기하학적 구조에 적어도 부분적으로 기초하여 눈으로부터의 시뮬레이팅된 초점 거리로 눈에 진입하게 하도록 구성된 존 플레이트 회절 패터닝 디바이스(zone plate diffraction patterning device)를 포함한다. 시스템은 투사 디바이스, 차폐 마스크 디바이스, 및 존 플레이트 회절 패터닝 디바이스에 동작가능하게 커플링되고, 선택가능 기하학적 구조의 회절 패턴의 개재뿐만 아니라 이미지의 투사 및 연관된 차폐 패턴을 조정(coordinate)하도록 구성된 제어기를 더 포함할 수 있다. 제어기는 마이크로프로세서를 포함할 수 있다. 투사 디바이스는 디스플레이 플레인(display plane)을 실질적으로 점유하는 실질적으로 평면형의 투명 디지털 디스플레이를 포함할 수 있다. 디스플레이 플레인은 뷰어의 눈의 시축(visual axis)으로부터 실질적으로 수직으로 배향될 수 있다. 실질적으로 평면형의 투명 디지털 디스플레이는 액정 디스플레이를 포함할 수 있다. 실질적으로 평면형의 투명 디지털 디스플레이는 유기 발광 다이오드 디스플레이를 포함할 수 있다. 투사 디바이스는, 뷰어의 눈에 대한 초점 깊이가 무한 초점 깊이이도록 콜리메이팅(collimate)된 형태로 눈을 향하여 이미지를 투사하도록 구성될 수 있다. 투사 디바이스는, 뷰어의 눈으로의 전달 전에 이미지의 크기를 확대하도록 구성된 기판-가이드 지연 엑시트 동공 익스팬더 디바이스(substrate-guided delay exit pupil expander device)에 커플링된 고속 소형-투사기를 포함할 수 있다. 소형-투사기는 뷰어의 눈의 시축에 실질적으로 수직으로 장착될 수 있고, 기판-가이드 지연 엑시트 동공 익스팬더 디바이스는, 소형-투사기로부터 이미지를 수신하여, 상기 수신된 이미지를 존 플레이트 회절 패터닝 디바이스에 그리고 눈의 시축과 실질적으로 정렬된 배향으로, 확대된 크기로, 뷰어의 눈에 전달하도록 구성된다. 존 플레이트 회절 패터닝 디바이스 및 투사 디바이스는 적어도 하나의 공통 구조를 포함할 수 있다. 투사 디바이스가, 도파관(waveguide)에 커플링되고 이미지가 뷰어의 눈으로 가는 도중에 도파관을 빠져나가기 전에 이미지를 회절 패턴에 통과시키도록 구성된 고속 소형-투사기를 포함하도록, 존 플레이트 회절 패터닝 디바이스가 도파관에 통합될 수 있다. 소형-투사기는 뷰어의 눈의 시축에 실질적으로 수직으로 장착될 수 있고, 도파관은 소형-투사기로부터 이미지를 수신하여, 상기 이미지를, 눈의 시축과 실질적으로 정렬된 배향으로, 확대된 크기로, 뷰어의 눈에 전달하도록 구성될 수 있다. 차폐 마스크 디바이스는, 각각의 부분에서 광을 차폐 또는 통과시키라는 적절한 명령에 따라, 디스플레이의 복수의 부분들 각각에서 광을 차폐 또는 통과시키도록 구성된 디스플레이를 포함할 수 있다. 차폐 마스크 디바이스는 하나 또는 둘 이상의 액정 디스플레이들을 포함할 수 있다. 존 플레이트 회절 패터닝 디바이스는, 각각의 부분에서 광을 차폐 또는 통과시키라는 적절한 명령에 따라, 디스플레이의 복수의 부분들 각각에서 광을 차폐 또는 통과시키도록 구성된 고주파 바이너리 디스플레이(high-frequency binary display)를 포함할 수 있다. 존 플레이트 회절 패터닝 디바이스는 약 500㎐ 내지 약 2,000㎐의 리프레시 레이트(refresh rate)를 가질 수 있다. 존 플레이트 회절 패터닝 디바이스는 약 720㎐의 리프레시 레이트를 가질 수 있다. 제어기는, 초당 약 30 내지 약 60 프레임들에서 투사 디바이스 및 차폐 마스크 디바이스를 동작시키도록, 그리고 투사 디바이스 및 차폐 마스크 디바이스의 각각의 프레임에 대해 약 12개까지의 상이한 회절 패턴들을 디지털로 디스플레이하기 위해 존 플레이트 회절 패터닝 디바이스를 동작시키도록 구성될 수 있다. 투사 디바이스, 차폐 마스크 디바이스, 및 존 플레이트 회절 패터닝 디바이스는 집합적으로, 뷰어의 단일 눈을 위한 이미징 모듈을 포함할 수 있고, 시스템은 뷰어의 다른 눈을 위한 제 2 이미징 모듈을 더 포함할 수 있다.
도 1은 사람에 의해 뷰잉되는 특정 실제 현실 대상물들 및 특정 가상 현실 대상물들을 이용한 증강 현실 시나리오의 예시를 도시한다.
도 2는 사용자를 위해 3차원 이미징을 시뮬레이팅하는 통상의 입체영상(stereoscopy) 시스템을 예시한다.
도 3a 및 도 3b는 조절 정밀 디스플레이 구성의 양상들을 예시한다.
도 4a-도 4c는 곡률 반경과 초점 반경 사이의 관계들을 예시한다.
도 5-도 6c는 대상(subject) 구성들에 적용되는 바와 같은 회절 격자(diffraction grating)들의 양상들을 예시한다.
도 7a-도 7c는 3개의 상이한 초점 메커니즘들을 예시한다.
도 7d는 프레넬 존 플레이트(Fresnel zone plate)를 예시한다.
도 8a-도 8c는 회절 시스템 초점조정(focusing) 이슈들의 다양한 양상들을 예시한다.
도 9는 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 10은 하나의 모드가 도파관을 탈출하고, 그리고 다른 모드들은 도파관에 트랩(trap)되어 유지되도록 하기 위해 설계된 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 11a 및 도 11b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 12a 및 도 12b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 13a 및 도 13b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 2는 사용자를 위해 3차원 이미징을 시뮬레이팅하는 통상의 입체영상(stereoscopy) 시스템을 예시한다.
도 3a 및 도 3b는 조절 정밀 디스플레이 구성의 양상들을 예시한다.
도 4a-도 4c는 곡률 반경과 초점 반경 사이의 관계들을 예시한다.
도 5-도 6c는 대상(subject) 구성들에 적용되는 바와 같은 회절 격자(diffraction grating)들의 양상들을 예시한다.
도 7a-도 7c는 3개의 상이한 초점 메커니즘들을 예시한다.
도 7d는 프레넬 존 플레이트(Fresnel zone plate)를 예시한다.
도 8a-도 8c는 회절 시스템 초점조정(focusing) 이슈들의 다양한 양상들을 예시한다.
도 9는 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 10은 하나의 모드가 도파관을 탈출하고, 그리고 다른 모드들은 도파관에 트랩(trap)되어 유지되도록 하기 위해 설계된 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 11a 및 도 11b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 12a 및 도 12b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 13a 및 도 13b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 3a 및 도 3b를 참조하면, AAD 시스템의 다양한 양상들이 도시된다. 도 3a를 참조하면, 단순 예시는, 입체영상(도 2)에서와 같은 2개의 통상의 디스플레이들의 위치에서, 지각되는 이미지 내에 3차원 깊이 레이어링의 지각을 각각의 눈에 제공하기 위해, 각각의 이미지의 다양한 양상들(14)에 대해 다양한 반경 초점 깊이들(12)을 갖는 2개의 복합 이미지들 ― 각각의 눈에 대해 하나의 복합 이미지 ― 이 활용될 수 있다는 것을 보여준다.
도 3b를 참조하면, 본 발명자들은, 통상의 인간의 눈이, 반경 거리에 기초하여 대략 12개의 깊이의 레이어들(도 3b의 레이어들(L1-L12) - 도면 엘리먼트 16)을 해석(interpret)할 수 있다고 결정하였다. 약 0.25 미터의 근거리 필드 한계(near field limit)(78)는 가장 가까운 초점 깊이에 관한 것이며; 약 3 미터의 원거리-필드 한계(far-field limit)(80)는, 인간의 눈으로부터 약 3 미터보다 더 멀리 있는 임의의 아이템은 무한 초점(infinite focus)을 받는다는 것을 의미한다. 눈에 더 가까워질수록, 초점 레이어들이 더욱더 얇아지는데; 즉, 눈은, 상대적으로 눈에 가까운 초점 거리에서 상당히 작은 차이들을 지각할 수 있고, 도 3b에 도시된 바와 같이, 이러한 효과는 대상물들이 눈으로부터 더 멀어져 갈수록 소멸된다. 엘리먼트(82)는 무한의 대상물 위치에서, 초점 깊이 / 굴절광학 간격 값(depth of focus / dioptric spacing value)이 약 1/3 디옵터(diopters)라는 것을 예시한다. 도 3b의 중요성을 기술하는 하나의 다른 방식은: 사용자의 눈과 무한대(infinity) 사이에 약 12개의 초점 플레인들이 존재한다는 것이다. 이들 초점 플레인들, 및 도시된 관계들 내의 데이터는, 사용자의 뷰잉을 위한 증강 현실 시나리오 내에서 가상 엘리먼트들을 위치지정하기 위해 활용될 수 있는데, 그 이유는, 인간의 눈은 깊이를 지각하기 위해 초점 플레인들을 활용하기 위해 끊임없이 주위를 훑기(sweep) 때문이다.
도 4a-도 4c를 참조하면, K(R)가, 1/R과 동등한 곡률에 대한 동적 파라미터인 경우 ― 여기서, R은 표면에 관한 아이템의 초점 반경임 ―, 반경이 증가함에 따라(R3, R2로, R1까지), K(R)가 감소된다. 포인트에 의해 생성된 광 필드는 구면 곡률을 갖고, 이는 포인트가 사용자의 눈으로부터 얼마나 멀리 떨어져 있는지의 함수이다. 이러한 관계는 또한, AAD 시스템들을 위해 활용될 수 있다.
도 5를 참조하면, 통상의 회절 격자(22)가 도시되고, 이때 광이 각도(세타(theta)-20)에서 격자 간격(18)을 통과하고, 이는 회절 차수(diffraction order)(n), 공간 주파수, 1/d와 동등한 K 팩터와 관련되며, 다음의 식: d*sin(세타)=n*파장(또는 대안적으로 K 팩터를 대체하여, sin(세타)=n*파장*K)을 이용한다. 도 6a-도 6c는 회절 패턴(22, 24, 26)에서 간격(18, 28, 30)이 감소함에 따라, 각도(20, 32, 34)가 더 커진다는 것을 예시한다.
도 7a 내지 도 7c를 참조하면, 3개의 상이한 초점조정(focusing) 메커니즘들 - 렌즈(36)를 통한 굴절, 만곡형 거울(curved mirror)(38)을 이용한 반사, 및 도 7d(40)에 또한 도시된 프레넬 존 플레이트(40)를 이용한 회절이 도시된다.
도 8a를 참조하면, N=-1 모드는 가상 이미지에 대응할 수 있고; N=+1 모드는 실제 이미지에 대응할 수 있고, N=0 모드는 무한에 초점 맞춰진 이미지(focused-at-infinity image)에 대응할 수 있다는 것을 예시하기 위해 단순화된 버전의 회절이 도시된다. 이들 이미지들은 인간의 눈 및 뇌를 혼란시킬 수 있고, 도 8b에 도시된 바와 같이, 모두가 온-축(on-axis) 초점 맞춰지는 경우 특히 문제가 된다. 도 8c를 참조하면, 오프-축(off-axis) 초점 구성은, 원하지 않는 모드들/이미지들의 블록킹을 허용하기 위해 활용될 수 있다. 예를 들어, 시준(collimate)된(r=무한대) 이미지는 N=0 모드에 의해 형성될 수 있고; 분기 가상 이미지(divergent virtual image)는 N=-1 모드에 의해 형성될 수 있고; 수렴 이미지(convergent image)는 N=+1 모드에 의해 형성될 수 있다. 이들 모드들/이미지들의 공간 위치 및 이들의 궤적들에서의 차이는, 오버레잉(overlaying), 고스팅(ghosting), 및 "다중 노출" 지각 영향들과 같은 회절 이미징과 연관된 상술된 문제점들을 방지하기 위해 필터링 제거(filtering out) 또는 분리하는 것을 허용한다.
도 9를 참조하면, 임베딩된 회절 격자를 갖는 도파관이 도시되고; 이러한 도파관들은 예를 들어, 영국 런던의 BAE Systems PLC와 같은 공급자들로부터 입수가능하며, 도시된 바와 같이, 도 9의 좌측으로부터 이미지를 인테이크(intake)하고, 임베딩된 회절 격자(44)를 통해 이미지를 전달하고, 결과적인 이미지를 각도에서 밖으로 전달한다(도 9에서, 예를 들어, 도파관의 측면을 통해). 따라서, 방향수정(redirection) 및 회절의 이중의 사용이 이러한 엘리먼트를 이용하여 달성된다. 실제로, 오프-축 초점 기법들, 이를 테면, 도 8c와 관련하여 기술된 것들은, 도 10에 도시된 것과 같은 구성을 초래하기 위해 도 9에 도시된 것과 같은 회절 도파관 엘리먼트들과 결합될 수 있고, 방향수정 및 회절뿐만 아니라, 필터링도 달성되는데, 그 이유는 도시된 실시예에서, N=-1 모드(가상 이미지라 함)는 도파관으로부터 사용자의 눈으로 전달되고, 다른 2개의 모드들(N=0 및 N=+1)은 반사에 의해 도파관 내부에 트랩되도록, 회절 도파관의 기하학적 구조가 되기 때문이다.
도 11a-도 13c를 참조하면, 상술된 개념들이 다양한 증강 현실 디스플레이 구성들을 이용하여 시연된다.
도 11a를 참조하면, AAD 시스템은 각각의 눈(4, 6) 전방에 이미징 모듈(46, 48)을 포함하고, 이를 통해 사용자가 세계(world)를 본다. 도 11b는, 자신의 연관된(도시된 전자 제어 리드들을 통해 커플링된; 리드들은 또한 무선일 수 있음) 제어기(66) ― 상기 제어기(66)는 마이크로프로세서, 마이크로제어기, FPGA(field programmable gate array), ASIC(application specific integrated circuit) 등일 수 있음 ― 를 갖는 모듈(46)의 확대도를 예시한다. 제어기는 바람직하게 전원 및 또한, 외부 세계와 제어기(66) 사이의 정보의 교환을 허용하기 위해, 정보 교환 디바이스, 이를 테면, 무선 인터넷 또는 블루투스 어댑터에 커플링된다. 시스템은 초당 30 내지 60 프레임들의 레이트와 같은 이미지 리프레시 레이트(image refresh rate)에서 동작하도록 구성될 수 있다. 제어기는, 12개 정도의 깊이 레이어들 각각에 적절한 다양한 존 플레이트 기하학적 구조들을 신속하게 연속적으로 디스플레이하기 위해, 높은-리프레시 레이트 디지털 고해상도 디스플레이(high-refresh rate digital high resolution display)(52), 이를 테면, 페로-리퀴드(ferro-liquid), 블루페이즈(bluephase), 또는 벤트-코어(bent-core) 디스플레이를 동작시키도록 구성될 수 있다. 예를 들어, 초당 60 프레임들의, 전체적인 성능이 요구되는 실시예에서, 존 플레이트 디스플레이(52)는, 도 3b에 도시된 바와 같은 12개의 깊이 레이어들 각각에 대해 시뮬레이팅된 조절을 제공할 수 있도록, 상기 60 프레임의 12배 또는 720㎐로 동작될 수 있다. 차폐 마스크 디스플레이(54)는, 그 전에 투명 투사 레이어(56) 상에 디스플레이된 이미지에 기하학적으로 대응하는 블랙 아웃(black out)된 이미지를 디스플레이하도록 구성된다 ― 차폐 마스크 디스플레이의 다른 측으로부터의 광이, 투사기 레이어(56)에서 원하는 가상 또는 증강 이미지의 디스플레이와 간섭하는 또는 블리딩 스루(bleed through)하는 것을 방지하기 위해 블랙 아웃되었음 ―. 따라서, 증강 현실 구성에서, 도시된 바와 같이, 실제 배경으로부터의 광은 차폐 마스크(54)의 비-마스킹(non-masked) 부분들을 통해, 투명 투사기 레이어(56)의 투명한(즉, 이미지의 부분을 브로드캐스팅하지 않는) 부분들을 통해, 그리고 조절 처리를 위해 존 플레이트 레이어(52)로 전달되며; 투사 레이어(56)에 투사된 이미지들은, 차폐 레이어(54)에서 배경 광으로부터 마스크 블록킹을 받고, 조절 처리를 위해 존 플레이트 레이어(52)로 투사 포워딩된다. 이들의 결합, 또는 사용자에 대한 증강 현실의 연관된 지각은 "진짜 3-D(true 3-D)"에 매우 가깝다.
도 12a-도 12b는 다른 실시예를 도시하고, 여기서 이미징 모듈(58)은, 눈의 시축에 거의 수직하는 각도로 배향된 고해상도 소형 투사기를 포함하고; 기판-가이드 지연 엑시트 동공 익스팬더 디바이스(70)를 포함하는 도파관은 작은 소형 투사기로부터의 이미지를 확대하여, 존 플레이트 레이어(52)로 방향수정하고; 차폐 레이어(54)는, 투사된 이미지들의 지각을 배경 조명으로부터 보호하기 위해 유사한 마스킹 기능들을 제공한다.
도 13a-도 13b는, 존 플레이트 및 투사 레이어가 본질적으로 동일한 통합 모듈(integrated module: 72) 내에 하우징되도록, 엘리먼트들(52 및 70)이 결합되는 다른 실시예를 도시하고, 상기 모듈(72)은, 눈으로의 통과(passage)를 위해, 소형 투사기(68)로부터 작은 이미지를 인테이크(intake)하고, 상기 작은 이미지를 방향수정(redirect) 및 확대하고, 그리고 또한 이를 회절하며; 차폐 레이어(54)는 투사된 이미지들의 지각을 배경 조명으로부터 보호하기 위해 유사한 마스킹 기능들을 제공한다.
본 발명의 다양한 전형적인 실시예들이 본 명세서에서 설명된다. 이들 예들에 대한 참조는 비-제한적인 의미로 이루어진다. 이들은 본 발명의 더욱 광범위하게 적용가능한 양상들을 예시하기 위해 제공된다. 본 발명의 진짜 사상 및 범주로부터 벗어남이 없이, 설명된 본 발명에 대한 다양한 변경들이 이루어질 수 있고, 동등물들이 대체될 수 있다. 부가하여, 특정 상황, 재료, 물질의 조성, 프로세스, 프로세스 동작(들), 또는 단계(들)를 본 발명의 목적(들), 사상, 또는 범주에 적응시키기 위해 많은 수정들이 이루어질 수 있다. 추가로, 당업자들에 의해 이해될 바와 같이, 본 발명들의 범주 또는 사상으로부터 벗어남이 없이, 본 명세서에서 설명 및 예시된 개개의 변형들 각각은, 다른 여러 실시예들 중 임의의 실시예의 피쳐들과 용이하게 분리 또는 결합될 수 있는 개별 컴포넌트들 및 피쳐들을 갖는다. 모든 이러한 수정들은, 본원과 연관된 청구항들의 범주 내에 있도록 의도된다.
본 발명은 대상 디바이스들을 이용하여 수행될 수 있는 방법들을 포함한다. 방법들은 이러한 적합한 디바이스를 제공하는 동작을 포함할 수 있다. 이러한 제공은 최종 사용자에 의해 수행될 수 있다. 다시 말해, 대상 방법에서 필수 디바이스를 제공하기 위해, "제공하는" 동작은 단지, 최종 사용자가 획득, 액세스, 접근, 위치지정, 셋-업, 활성화, 파워-업하거나 또는 다른 방식으로 동작할 것을 요구한다. 본 명세서에서 열거된 방법들은, 열거된 순서의 이벤트들에서뿐만 아니라, 논리적으로 가능한 임의의 순서의 열거된 이벤트들에서 수행될 수 있다.
재료 선택 및 제조에 관한 세부사항들과 함께, 본 발명의 전형적인 양상들이 위에서 전개되었다. 본 발명의 다른 세부사항들에 대해서와 같이, 이들은 당업자들에 의해 이해되거나 또는 일반적으로 알려져 있을 뿐만 아니라, 위에서-인용된 특허들 및 공보들과 관련하여 이해될 수 있다. 동일한 내용이, 공통으로 또는 논리적으로 사용되는 바와 같은 부가의 동작들의 측면에서 본 발명의 방법-기반 양상들에 대해 유효할 수 있다.
부가하여, 본 발명이 다양한 피쳐들을 선택적으로 포함하는 여러 예들을 참조하여 설명되었지만, 본 발명은 본 발명의 각각의 변형에 대하여 고려된 바와 같이 설명되거나 또는 표시된 것으로 제한되지 않을 것이다. 본 발명의 진짜 사상 및 범주로부터 벗어남이 없이, 설명된 본 발명에 대한 다양한 변경들이 이루어질 수 있고, 동등물들(본 명세서에서 열거되든 또는 어떤 간결성을 위해 포함되지 않든)이 대체될 수 있다. 부가하여, 값들의 범위가 제공되는 경우, 그러한 범위 및 임의의 다른 명시된 또는 그러한 명시된 범위의 중간 값의 상한치와 하한치 사이의 모든 각각의 중간 값이 본 발명 내에 포함된다는 것이 이해된다.
또한, 설명된 본 발명의 변형들의 임의의 선택적 피쳐가 본 명세서에서 설명된 피쳐들 중 임의의 하나 또는 둘 이상과 독립적으로 또는 결합하여 전개 및 청구될 수 있다는 것이 고려된다. 단일 아이템에 대한 참조는 복수의 동일한 아이템들이 존재할 가능성을 포함한다. 더욱 구체적으로, 본 명세서에서 그리고 그에 연관된 청구항들에서 사용된 바와 같이, 단수 표현들("하나의","상기", 및 "그")은 구체적으로 달리 명시되지 않는 한, 복수의 지시 대상들을 포함한다. 다시 말해, 관사들의 사용은 상기 설명뿐만 아니라 이러한 기재와 연관된 청구항들에서 대상 아이템 중 "적어도 하나"를 허용한다. 이러한 청구항들이 임의의 선택적 엘리먼트를 배제하도록 드래프트될 수 있음이 추가로 유의된다. 이와 같이, 이러한 서술은, 청구항 엘리먼트들의 열거 또는 "네거티브" 제한의 사용과 관련하여 "오로지", "단지" 등으로서 이러한 배타적 용어의 사용을 위해 선행하는 기초로서 기능하도록 의도된다.
이러한 배타적 용어의 사용 없이, 이러한 기재와 연관된 청구항들에서 용어 "포함하는"은 임의의 부가의 엘리먼트의 포함 ― 주어진 수의 엘리먼트들이 이러한 청구항들에 열거되는지와 무관하게 ― 을 허용하거나, 또는 피쳐의 부가는 이러한 청구항들에서 전개되는 엘리먼트의 특성을 전환하는 것으로서 간주될 수 있다. 본 명세서에서 구체적으로 규정되는 바를 제외하고, 본 명세서에 사용된 모든 기술적 및 과학적 용어들은, 청구항 유효함을 유지하면서, 가능한 한 넓은, 공통으로 이해되는 의미로서 주어질 것이다.
본 발명의 폭넓음은 제공된 예들 및/또는 대상 명세서로 제한되는 것이 아니라, 오히려 이러한 기재와 연관된 청구항 언어의 범위에 의해서만 제한된다.
Claims (8)
- 3차원 이미지 시각화 시스템으로서,
통합 모듈(integrated module); 및
차폐 마스크 디바이스(occlusion mask device)
를 포함하고,
상기 통합 모듈은:
입력 이미지 광을 수신하고 뷰어의 눈에 대한 공간 내의 투사 디바이스 위치로부터 상기 뷰어의 눈을 향하여 상기 입력 이미지 광과 연관된 이미지를 투사하도록 구성된 선택적으로 투명한 투사 디바이스 ― 상기 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 및
상기 입력 이미지 광을 복수의 모드들로 분할하도록 구성된 회절 엘리먼트 ― 상기 복수의 모드들 각각은 상이한 각도로 지향됨 ―
를 포함하고,
상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 제 1 모드로 하여금 상기 눈을 향하여 상기 선택적으로 투명한 투사 디바이스를 나가게(exit) 하도록 구성되고, 상기 제 1 모드는 상기 회절 엘리먼트의 선택가능 기하구조(geometry)에 부분적으로 기초하는 시뮬레이팅된 초점 거리를 가지며,
상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 적어도 제 2 모드를 상기 선택적으로 투명한 투사 디바이스 내에 가두도록(trap) 구성되며,
상기 차폐 마스크 디바이스는 상기 투사 디바이스에 커플링되고, 상기 뷰어의 눈으로부터 상기 차폐 마스크의 반대측에 위치된 하나 또는 둘 이상의 위치들로부터 상기 눈을 향하여 이동하는 광을 상기 투사 디바이스에 의해 투사되는 상기 이미지와 상관된(correlated) 차폐 패턴(occluding pattern)으로 선택적으로 블록킹하도록 구성되는,
3차원 이미지 시각화 시스템. - 제 1 항에 있어서,
상기 투사 디바이스는 상기 이미지가 무한대에 포커싱되도록 상기 이미지를 상기 눈을 향하여 시준된(collimated) 형태로 투사하도록 구성되는,
3차원 이미지 시각화 시스템. - 제 1 항 또는 제 2 항에 있어서,
상기 차폐 마스크 디바이스는 상기 디스플레이를 포함하며, 상기 디스플레이는 상기 디스플레이의 복수의 부분들 중 각각의 부분에서 광을 차폐하거나 또는 통과시키라는 관련된 명령에 따라서 각각의 부분에서 광을 차폐하거나 또는 통과시키도록 구성되는,
3차원 이미지 시각화 시스템. - 제 1 항 또는 제 2 항에 있어서,
상기 차폐 마스크 디바이스는 하나 또는 둘 이상의 액정 디스플레이를 포함하는,
3차원 이미지 시각화 시스템. - 제 1 항 또는 제 2 항에 있어서,
상기 복수의 모드들 중 상기 제 2 모드는 0차의 회절을 포함하는,
3차원 이미지 시각화 시스템. - 3차원 이미지 시각화 시스템으로서,
통합 모듈; 및
차폐 마스크 디바이스
를 포함하고,
상기 통합 모듈은:
입력 이미지 광을 수신하도록 구성되고 뷰어의 눈에 대해 공간 내의 투사 디바이스 위치로부터 상기 뷰어의 눈을 향하여 상기 입력 이미지 광과 연관된 이미지를 투사하도록 구성된 선택적으로 투명한 투사 디바이스 ― 상기 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 및
상기 선택적으로 투명한 투사 디바이스내에 통합되며 상기 입력 이미지 광을 복수의 모드들로 분할하도록 구성된 회절 엘리먼트 ― 상기 복수의 모드들 각각은 상이한 각도로 지향됨 ―
를 포함하고,
상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 적어도 제 1 모드로 하여금 상기 눈을 향하여 상기 선택적으로 투명한 투사 디바이스를 나가게 하도록 구성되고, 상기 적어도 하나의 모드는 상기 회절 엘리먼트의 선택가능 기하구조에 부분적으로 기초하는 시뮬레이팅된 초점 거리를 가지며,
상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 적어도 제 2 모드를 상기 선택적으로 투명한 투사 디바이스 내에 가두도록 구성되며,
상기 차폐 마스크 디바이스는 상기 투사 디바이스에 커플링되고, 상기 뷰어의 눈으로부터 상기 차폐 마스크의 반대측에 위치된 하나 또는 둘 이상의 위치들로부터 상기 눈을 향하여 이동하는 광을 상기 투사 디바이스에 의해 투사되는 상기 이미지와 상관된 차폐 패턴으로 선택적으로 블록킹하도록 구성되는,
3차원 이미지 시각화 시스템. - 제 6 항에 있어서,
상기 선택적으로 투명한 투사 디바이스는 상기 복수의 모드들 중 제 3 모드를 상기 선택적으로 투명한 투사 디바이스 내에 가두도록 추가로 구성되는,
3차원 이미지 시각화 시스템. - 제 7 항에 있어서,
상기 제 3 모드는 1차의 회절의 부분을 포함하는,
3차원 이미지 시각화 시스템.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020217006982A KR102376368B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161563403P | 2011-11-23 | 2011-11-23 | |
US61/563,403 | 2011-11-23 | ||
PCT/US2012/000560 WO2013077895A1 (en) | 2011-11-23 | 2012-11-23 | Three dimensional virtual and augmented reality display system |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020147017217A Division KR102116697B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020217006982A Division KR102376368B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200061416A true KR20200061416A (ko) | 2020-06-02 |
KR102227381B1 KR102227381B1 (ko) | 2021-03-11 |
Family
ID=48426562
Family Applications (6)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020217006982A KR102376368B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020227030044A KR102513896B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020207014691A KR102227381B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020177030366A KR102095220B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020147017217A KR102116697B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020227008484A KR102440195B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020217006982A KR102376368B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020227030044A KR102513896B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020177030366A KR102095220B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020147017217A KR102116697B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
KR1020227008484A KR102440195B1 (ko) | 2011-11-23 | 2012-11-23 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
Country Status (11)
Country | Link |
---|---|
US (8) | US8950867B2 (ko) |
EP (3) | EP2783352B1 (ko) |
JP (5) | JP6250547B2 (ko) |
KR (6) | KR102376368B1 (ko) |
CN (2) | CN107664847B (ko) |
AU (5) | AU2012341069B2 (ko) |
BR (1) | BR112014012615A2 (ko) |
CA (2) | CA2858208C (ko) |
IL (2) | IL232746A (ko) |
RU (1) | RU2628164C2 (ko) |
WO (1) | WO2013077895A1 (ko) |
Families Citing this family (231)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0522968D0 (en) | 2005-11-11 | 2005-12-21 | Popovich Milan M | Holographic illumination device |
GB0718706D0 (en) | 2007-09-25 | 2007-11-07 | Creative Physics Ltd | Method and apparatus for reducing laser speckle |
US11726332B2 (en) | 2009-04-27 | 2023-08-15 | Digilens Inc. | Diffractive projection apparatus |
US9335604B2 (en) | 2013-12-11 | 2016-05-10 | Milan Momcilo Popovich | Holographic waveguide display |
US11204540B2 (en) | 2009-10-09 | 2021-12-21 | Digilens Inc. | Diffractive waveguide providing a retinal image |
WO2012136970A1 (en) | 2011-04-07 | 2012-10-11 | Milan Momcilo Popovich | Laser despeckler based on angular diversity |
US10670876B2 (en) | 2011-08-24 | 2020-06-02 | Digilens Inc. | Waveguide laser illuminator incorporating a despeckler |
WO2016020630A2 (en) | 2014-08-08 | 2016-02-11 | Milan Momcilo Popovich | Waveguide laser illuminator incorporating a despeckler |
EP2995986B1 (en) | 2011-08-24 | 2017-04-12 | Rockwell Collins, Inc. | Data display |
WO2013102759A2 (en) | 2012-01-06 | 2013-07-11 | Milan Momcilo Popovich | Contact image sensor using switchable bragg gratings |
CN106125308B (zh) | 2012-04-25 | 2019-10-25 | 罗克韦尔柯林斯公司 | 用于显示图像的装置和方法 |
US9456744B2 (en) | 2012-05-11 | 2016-10-04 | Digilens, Inc. | Apparatus for eye tracking |
US9671566B2 (en) | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
US9933684B2 (en) | 2012-11-16 | 2018-04-03 | Rockwell Collins, Inc. | Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration |
US11504051B2 (en) | 2013-01-25 | 2022-11-22 | Wesley W. O. Krueger | Systems and methods for observing eye and head information to measure ocular parameters and determine human health status |
US11490809B2 (en) | 2013-01-25 | 2022-11-08 | Wesley W. O. Krueger | Ocular parameter-based head impact measurement using a face shield |
US10209517B2 (en) | 2013-05-20 | 2019-02-19 | Digilens, Inc. | Holographic waveguide eye tracker |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
US9874749B2 (en) | 2013-11-27 | 2018-01-23 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
WO2015006784A2 (en) * | 2013-07-12 | 2015-01-15 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
US10228242B2 (en) | 2013-07-12 | 2019-03-12 | Magic Leap, Inc. | Method and system for determining user input based on gesture |
WO2015015138A1 (en) | 2013-07-31 | 2015-02-05 | Milan Momcilo Popovich | Method and apparatus for contact image sensing |
US9701530B2 (en) | 2013-11-22 | 2017-07-11 | Michael J. Kline | System, method, and apparatus for purchasing, dispensing, or sampling of products |
US9633504B2 (en) | 2013-11-22 | 2017-04-25 | Michael J Kline | System, method, and apparatus for purchasing, dispensing, or sampling of products |
US9527716B2 (en) | 2013-11-22 | 2016-12-27 | Michael J. Kline | System, method, and apparatus for purchasing, dispensing, or sampling of products |
US9857591B2 (en) | 2014-05-30 | 2018-01-02 | Magic Leap, Inc. | Methods and system for creating focal planes in virtual and augmented reality |
EP4220999A3 (en) * | 2013-11-27 | 2023-08-09 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
CN103676175A (zh) * | 2013-12-26 | 2014-03-26 | 无锡锡飞光电科技有限公司 | 裸眼3d显示方法 |
KR102177133B1 (ko) | 2014-01-31 | 2020-11-10 | 매직 립, 인코포레이티드 | 멀티-포컬 디스플레이 시스템 및 방법 |
CA3089749A1 (en) * | 2014-01-31 | 2015-08-06 | Magic Leap, Inc. | Multi-focal display system and method |
US11138793B2 (en) | 2014-03-14 | 2021-10-05 | Magic Leap, Inc. | Multi-depth plane display system with reduced switching between depth planes |
US10430985B2 (en) | 2014-03-14 | 2019-10-01 | Magic Leap, Inc. | Augmented reality systems and methods utilizing reflections |
WO2015161307A1 (en) * | 2014-04-18 | 2015-10-22 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
JP6648041B2 (ja) | 2014-05-30 | 2020-02-14 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 仮想および拡張現実のためのアドレス可能焦点を伴う自由形状光学システムを用いて立体視を表示する方法およびシステム |
CN112987307B (zh) | 2014-05-30 | 2022-06-28 | 奇跃公司 | 用于在虚拟和增强现实中产生焦平面的方法和*** |
WO2016020632A1 (en) | 2014-08-08 | 2016-02-11 | Milan Momcilo Popovich | Method for holographic mastering and replication |
US10241330B2 (en) | 2014-09-19 | 2019-03-26 | Digilens, Inc. | Method and apparatus for generating input images for holographic waveguide displays |
WO2016046514A1 (en) | 2014-09-26 | 2016-03-31 | LOKOVIC, Kimberly, Sun | Holographic waveguide opticaltracker |
KR102417136B1 (ko) * | 2014-09-29 | 2022-07-05 | 매직 립, 인코포레이티드 | 상이한 파장의 광을 도파관 밖으로 출력하기 위한 아키텍쳐 및 방법 |
WO2016109599A1 (en) * | 2014-12-29 | 2016-07-07 | Magic Leap, Inc. | Light projector using an acousto-optical control device |
US20180275402A1 (en) | 2015-01-12 | 2018-09-27 | Digilens, Inc. | Holographic waveguide light field displays |
EP3245444B1 (en) | 2015-01-12 | 2021-09-08 | DigiLens Inc. | Environmentally isolated waveguide display |
EP3248026B1 (en) | 2015-01-20 | 2019-09-04 | DigiLens Inc. | Holographic waveguide lidar |
US10657780B1 (en) | 2015-01-29 | 2020-05-19 | Transparensee Llc | System, method, and apparatus for mixing, blending, dispensing, monitoring, and labeling products |
US9632226B2 (en) | 2015-02-12 | 2017-04-25 | Digilens Inc. | Waveguide grating device |
US11468639B2 (en) | 2015-02-20 | 2022-10-11 | Microsoft Technology Licensing, Llc | Selective occlusion system for augmented reality devices |
US10838207B2 (en) | 2015-03-05 | 2020-11-17 | Magic Leap, Inc. | Systems and methods for augmented reality |
AU2016225963B2 (en) | 2015-03-05 | 2021-05-13 | Magic Leap, Inc. | Systems and methods for augmented reality |
US10180734B2 (en) | 2015-03-05 | 2019-01-15 | Magic Leap, Inc. | Systems and methods for augmented reality |
US10459145B2 (en) | 2015-03-16 | 2019-10-29 | Digilens Inc. | Waveguide device incorporating a light pipe |
NZ773834A (en) | 2015-03-16 | 2022-07-01 | Magic Leap Inc | Methods and systems for diagnosing and treating health ailments |
US10404975B2 (en) | 2015-03-20 | 2019-09-03 | Tilt Five, Inc | Retroreflective light field display |
US10591756B2 (en) | 2015-03-31 | 2020-03-17 | Digilens Inc. | Method and apparatus for contact image sensing |
CN106293561B (zh) | 2015-05-28 | 2020-02-28 | 北京智谷睿拓技术服务有限公司 | 显示控制方法和装置、显示设备 |
CN106303498B (zh) | 2015-05-30 | 2018-10-16 | 北京智谷睿拓技术服务有限公司 | 视频显示控制方法和装置、显示设备 |
CN106303315B (zh) | 2015-05-30 | 2019-08-16 | 北京智谷睿拓技术服务有限公司 | 视频显示控制方法和装置、显示设备 |
CN106303499B (zh) | 2015-05-30 | 2018-10-16 | 北京智谷睿拓技术服务有限公司 | 视频显示控制方法和装置、显示设备 |
AU2016278013B2 (en) | 2015-06-15 | 2021-10-21 | Magic Leap, Inc. | Display system with optical elements for in-coupling multiplexed light streams |
US10176642B2 (en) | 2015-07-17 | 2019-01-08 | Bao Tran | Systems and methods for computer assisted operation |
US10335572B1 (en) | 2015-07-17 | 2019-07-02 | Naveen Kumar | Systems and methods for computer assisted operation |
US10149958B1 (en) | 2015-07-17 | 2018-12-11 | Bao Tran | Systems and methods for computer assisted operation |
US10685488B1 (en) | 2015-07-17 | 2020-06-16 | Naveen Kumar | Systems and methods for computer assisted operation |
US10492981B1 (en) | 2015-07-17 | 2019-12-03 | Bao Tran | Systems and methods for computer assisted operation |
EP3671317B1 (en) | 2015-07-20 | 2021-11-10 | Magic Leap, Inc. | Collimating fiber scanner design with inward pointing angles in virtual/augmented reality system |
CN109409251B (zh) | 2015-08-18 | 2023-05-16 | 奇跃公司 | 虚拟和增强现实***和方法 |
US10146997B2 (en) | 2015-08-21 | 2018-12-04 | Magic Leap, Inc. | Eyelid shape estimation using eye pose measurement |
AU2016310452B2 (en) | 2015-08-21 | 2021-04-22 | Magic Leap, Inc. | Eyelid shape estimation |
EP4254145A3 (en) | 2015-09-16 | 2023-11-01 | Magic Leap, Inc. | Head pose mixing of audio files |
US10466478B2 (en) | 2015-09-23 | 2019-11-05 | Magic Leap, Inc. | Eye imaging with an off-axis imager |
EP3359999A1 (en) | 2015-10-05 | 2018-08-15 | Popovich, Milan Momcilo | Waveguide display |
IL294587A (en) | 2015-10-05 | 2022-09-01 | Magic Leap Inc | Microlens collimator for optical fiber scanning in a virtual/augmented reality system |
CN108139518B (zh) | 2015-10-06 | 2024-03-29 | 奇跃公司 | 具有反向角衍射光栅的虚拟/增强现实*** |
AU2016340222B2 (en) | 2015-10-16 | 2021-07-01 | Magic Leap, Inc. | Eye pose identification using eye features |
CA3002369A1 (en) | 2015-10-20 | 2017-04-27 | Magic Leap, Inc. | Selecting virtual objects in a three-dimensional space |
US9709807B2 (en) | 2015-11-03 | 2017-07-18 | Motorola Solutions, Inc. | Out of focus notifications |
WO2017079333A1 (en) | 2015-11-04 | 2017-05-11 | Magic Leap, Inc. | Light field display metrology |
US11231544B2 (en) | 2015-11-06 | 2022-01-25 | Magic Leap, Inc. | Metasurfaces for redirecting light and methods for fabricating |
WO2017096396A1 (en) | 2015-12-04 | 2017-06-08 | Magic Leap, Inc. | Relocalization systems and methods |
NZ743884A (en) | 2016-01-07 | 2019-11-29 | Magic Leap Inc | Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes |
CN108431669A (zh) * | 2016-01-07 | 2018-08-21 | 奇跃公司 | 动态菲涅尔投影仪 |
WO2017127571A1 (en) | 2016-01-19 | 2017-07-27 | Magic Leap, Inc. | Augmented reality systems and methods utilizing reflections |
US10466778B2 (en) | 2016-01-19 | 2019-11-05 | Magic Leap, Inc. | Eye image selection |
AU2017209171B2 (en) | 2016-01-20 | 2021-10-21 | Magic Leap, Inc. | Polarizing maintaining optical fiber in virtual/augmented reality system |
JP7012017B2 (ja) | 2016-01-29 | 2022-01-27 | マジック リープ, インコーポレイテッド | 3次元画像のためのディスプレイ |
US10983340B2 (en) | 2016-02-04 | 2021-04-20 | Digilens Inc. | Holographic waveguide optical tracker |
WO2017147527A1 (en) | 2016-02-24 | 2017-08-31 | Magic Leap, Inc. | Polarizing beam splitter with low light leakage |
KR20180116347A (ko) | 2016-02-24 | 2018-10-24 | 매직 립, 인코포레이티드 | 광 이미터에 대한 로우 프로파일 인터커넥트 |
NZ745379A (en) | 2016-02-26 | 2020-01-31 | Magic Leap Inc | Display system having a plurality of light pipes for a plurality of light emitters |
IL261148B2 (en) | 2016-02-26 | 2023-12-01 | Magic Leap Inc | Light output system with reflector and lenses for high spatially uniform light output |
NZ757279A (en) | 2016-03-01 | 2022-10-28 | Magic Leap Inc | Reflective switching device for inputting different wavelengths of light into waveguides |
NZ745738A (en) | 2016-03-04 | 2020-01-31 | Magic Leap Inc | Current drain reduction in ar/vr display systems |
KR102358677B1 (ko) * | 2016-03-07 | 2022-02-03 | 매직 립, 인코포레이티드 | 생체 인증 보안을 위한 청색 광 조정 |
CN109154983B (zh) | 2016-03-22 | 2022-06-24 | 奇跃公司 | 被配置为交换生物测定信息的头戴式显示*** |
WO2017162999A1 (en) | 2016-03-24 | 2017-09-28 | Popovich Milan Momcilo | Method and apparatus for providing a polarization selective holographic waveguide device |
US10698215B2 (en) | 2016-03-25 | 2020-06-30 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
CA3018758A1 (en) | 2016-03-31 | 2017-10-05 | Magic Leap, Inc. | Interactions with 3d virtual objects using poses and multiple-dof controllers |
CN114236812A (zh) | 2016-04-08 | 2022-03-25 | 奇跃公司 | 具有可变焦透镜元件的增强现实***和方法 |
WO2017178781A1 (en) | 2016-04-11 | 2017-10-19 | GRANT, Alastair, John | Holographic waveguide apparatus for structured light projection |
KR102548818B1 (ko) | 2016-04-21 | 2023-06-28 | 매직 립, 인코포레이티드 | 시야 주위의 시각적 아우라 |
EP3458167B1 (en) | 2016-04-26 | 2022-10-19 | Magic Leap, Inc. | Electromagnetic tracking with augmented reality systems |
US10046229B2 (en) | 2016-05-02 | 2018-08-14 | Bao Tran | Smart device |
KR20230159898A (ko) | 2016-05-06 | 2023-11-22 | 매직 립, 인코포레이티드 | 광을 재지향시키기 위한 비대칭 격자들을 가진 메타표면들 및 제조를 위한 방법들 |
AU2017264695B2 (en) | 2016-05-09 | 2022-03-31 | Magic Leap, Inc. | Augmented reality systems and methods for user health analysis |
NZ748013A (en) | 2016-05-12 | 2023-05-26 | Magic Leap Inc | Distributed light manipulation over imaging waveguide |
KR20230113663A (ko) | 2016-05-20 | 2023-07-31 | 매직 립, 인코포레이티드 | 사용자 인터페이스 메뉴의 콘텍추얼 인식 |
CN116778367A (zh) | 2016-06-03 | 2023-09-19 | 奇跃公司 | 增强现实身份验证 |
CN117028910A (zh) | 2016-06-10 | 2023-11-10 | 奇跃公司 | 纹理投射灯泡的积分点光源 |
WO2017222997A1 (en) | 2016-06-20 | 2017-12-28 | Magic Leap, Inc. | Augmented reality display system for evaluation and modification of neurological conditions, including visual processing and perception conditions |
EP3479160A4 (en) | 2016-06-30 | 2020-03-25 | Magic Leap, Inc. | ESTIMATE OF THE POSE IN A 3D SPACE |
US10922393B2 (en) | 2016-07-14 | 2021-02-16 | Magic Leap, Inc. | Deep neural network for iris identification |
KR102442569B1 (ko) | 2016-07-14 | 2022-09-08 | 매직 립, 인코포레이티드 | 각막 곡률을 이용한 홍채 경계 추정 |
KR102577634B1 (ko) | 2016-07-25 | 2023-09-11 | 매직 립, 인코포레이티드 | 증강 현실 및 가상 현실 안경류를 사용한 이미징 수정, 디스플레이 및 시각화 |
KR102669685B1 (ko) | 2016-07-25 | 2024-05-29 | 매직 립, 인코포레이티드 | 광 필드 프로세서 시스템 |
JP6851458B2 (ja) | 2016-07-29 | 2021-03-31 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 暗号論的に署名された記録のセキュアな交換 |
AU2017305227B2 (en) | 2016-08-02 | 2021-12-16 | Magic Leap, Inc. | Fixed-distance virtual and augmented reality systems and methods |
WO2018031621A1 (en) | 2016-08-11 | 2018-02-15 | Magic Leap, Inc. | Automatic placement of a virtual object in a three-dimensional space |
CN117198277A (zh) | 2016-08-12 | 2023-12-08 | 奇跃公司 | 单词流注释 |
JP6993405B2 (ja) | 2016-08-22 | 2022-01-13 | マジック リープ, インコーポレイテッド | ウェアラブルディスプレイデバイスのためのディザリング方法および装置 |
CA3034644A1 (en) | 2016-08-22 | 2018-03-01 | Magic Leap, Inc. | Augmented reality display device with deep learning sensors |
CN106131541A (zh) * | 2016-08-26 | 2016-11-16 | 广州巧瞳科技有限公司 | 基于增强现实的智能显示装置及方法 |
AU2017328161B2 (en) | 2016-09-13 | 2022-02-17 | Magic Leap, Inc. | Sensory eyewear |
CA3037044A1 (en) | 2016-09-21 | 2018-03-29 | Magic Leap, Inc. | Systems and methods for optical systems with exit pupil expander |
KR102266343B1 (ko) | 2016-09-22 | 2021-06-17 | 매직 립, 인코포레이티드 | 증강 현실 분광기 |
CN114706478A (zh) | 2016-09-26 | 2022-07-05 | 奇跃公司 | 虚拟现实或增强现实显示***中磁传感器和光学传感器的校准 |
JP6964132B2 (ja) | 2016-09-28 | 2021-11-10 | マジック リープ, インコーポレイテッドMagic Leap, Inc. | ウェアラブルデバイスによる顔モデル捕捉 |
RU2016138608A (ru) | 2016-09-29 | 2018-03-30 | Мэджик Лип, Инк. | Нейронная сеть для сегментации изображения глаза и оценки качества изображения |
CA3038967A1 (en) | 2016-10-04 | 2018-04-12 | Magic Leap, Inc. | Efficient data layouts for convolutional neural networks |
JP7090601B2 (ja) | 2016-10-05 | 2022-06-24 | マジック リープ, インコーポレイテッド | 複合現実較正のための眼球周囲試験 |
IL302405B1 (en) | 2016-10-21 | 2024-04-01 | Magic Leap Inc | System and method for displaying image content on multiple depth planes by providing multiple intrapupillary parallax fields of view |
CN106657970A (zh) * | 2016-10-25 | 2017-05-10 | 乐视控股(北京)有限公司 | 一种深度图成像装置 |
WO2018089691A1 (en) | 2016-11-11 | 2018-05-17 | Magic Leap, Inc. | Periocular and audio synthesis of a full face image |
US10621747B2 (en) | 2016-11-15 | 2020-04-14 | Magic Leap, Inc. | Deep learning system for cuboid detection |
KR102595171B1 (ko) | 2016-11-16 | 2023-10-26 | 매직 립, 인코포레이티드 | 웨어러블 컴포넌트들을 위한 열 관리 시스템들 |
US11067860B2 (en) | 2016-11-18 | 2021-07-20 | Magic Leap, Inc. | Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same |
KR20240056787A (ko) | 2016-11-18 | 2024-04-30 | 매직 립, 인코포레이티드 | 공간 가변적 액정 회절 격자들 |
AU2017363078B2 (en) | 2016-11-18 | 2022-09-29 | Magic Leap, Inc. | Waveguide light multiplexer using crossed gratings |
KR102506485B1 (ko) | 2016-11-18 | 2023-03-03 | 매직 립, 인코포레이티드 | 넓은 입사 각도 범위들의 광을 방향전환시키기 위한 다중층 액정 회절 격자들 |
WO2018102834A2 (en) | 2016-12-02 | 2018-06-07 | Digilens, Inc. | Waveguide device with uniform output illumination |
US10531220B2 (en) | 2016-12-05 | 2020-01-07 | Magic Leap, Inc. | Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems |
CA3045664A1 (en) | 2016-12-05 | 2018-06-14 | Magic Leap, Inc. | Virtual user input controls in a mixed reality environment |
EP3552057B1 (en) | 2016-12-08 | 2022-01-05 | Magic Leap, Inc. | Diffractive devices based on cholesteric liquid crystal |
CA3046399A1 (en) | 2016-12-13 | 2018-06-21 | Magic Leap, Inc. | 3d object rendering using detected features |
AU2017376453B2 (en) | 2016-12-14 | 2022-09-29 | Magic Leap, Inc. | Patterning of liquid crystals using soft-imprint replication of surface alignment patterns |
US10371896B2 (en) | 2016-12-22 | 2019-08-06 | Magic Leap, Inc. | Color separation in planar waveguides using dichroic filters |
US10746999B2 (en) | 2016-12-28 | 2020-08-18 | Magic Leap, Inc. | Dual depth exit pupil expander |
CA3051060A1 (en) | 2016-12-29 | 2018-07-05 | Magic Leap, Inc. | Automatic control of wearable display device based on external conditions |
US10545346B2 (en) | 2017-01-05 | 2020-01-28 | Digilens Inc. | Wearable heads up displays |
WO2018129151A1 (en) | 2017-01-05 | 2018-07-12 | Magic Leap, Inc. | Patterning of high refractive index glasses by plasma etching |
US10812936B2 (en) | 2017-01-23 | 2020-10-20 | Magic Leap, Inc. | Localization determination for mixed reality systems |
CA3051239C (en) | 2017-01-23 | 2023-12-19 | Magic Leap, Inc. | Eyepiece for virtual, augmented, or mixed reality systems |
US10841724B1 (en) | 2017-01-24 | 2020-11-17 | Ha Tran | Enhanced hearing system |
WO2018140651A1 (en) | 2017-01-27 | 2018-08-02 | Magic Leap, Inc. | Diffraction gratings formed by metasurfaces having differently oriented nanobeams |
CN110476090B (zh) | 2017-01-27 | 2023-04-25 | 奇跃公司 | 用于超表面的抗反射涂层 |
US11347054B2 (en) | 2017-02-16 | 2022-05-31 | Magic Leap, Inc. | Systems and methods for augmented reality |
IL311431A (en) | 2017-02-23 | 2024-05-01 | Magic Leap Inc | Display system with variable power reflector |
KR102297359B1 (ko) | 2017-03-14 | 2021-09-01 | 매직 립, 인코포레이티드 | 광 흡수막들을 갖는 도파관들 및 이를 형성하기 위한 프로세스들 |
JP7055815B2 (ja) | 2017-03-17 | 2022-04-18 | マジック リープ, インコーポレイテッド | 仮想コンテンツをワーピングすることを伴う複合現実システムおよびそれを使用して仮想コンテンツを生成する方法 |
US10861237B2 (en) | 2017-03-17 | 2020-12-08 | Magic Leap, Inc. | Mixed reality system with multi-source virtual content compositing and method of generating virtual content using same |
JP6929953B2 (ja) | 2017-03-17 | 2021-09-01 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 部屋レイアウト推定方法および技法 |
CN117873313A (zh) | 2017-03-17 | 2024-04-12 | 奇跃公司 | 具有彩色虚拟内容扭曲的混合现实***及使用该***生成虚拟内容的方法 |
AU2018237067B2 (en) | 2017-03-21 | 2022-11-10 | Magic Leap, Inc. | Depth sensing techniques for virtual, augmented, and mixed reality systems |
KR102576133B1 (ko) | 2017-03-21 | 2023-09-07 | 매직 립, 인코포레이티드 | 회절 광학 엘리먼트들을 이용한 눈-이미징 장치 |
IL269290B1 (en) | 2017-03-21 | 2024-05-01 | Magic Leap Inc | Methods, devices and systems for illuminating spatial light modulators |
CA3056899C (en) | 2017-03-21 | 2023-09-19 | Magic Leap, Inc. | Low-profile beam splitter |
CN110679147B (zh) | 2017-03-22 | 2022-03-08 | 奇跃公司 | 用于显示***的基于深度的凹式渲染 |
US10436968B2 (en) | 2017-04-18 | 2019-10-08 | Magic Leap, Inc. | Waveguides having reflective layers formed by reflective flowable materials |
AU2018256365A1 (en) | 2017-04-19 | 2019-10-31 | Magic Leap, Inc. | Multimodal task execution and text editing for a wearable system |
US10453273B2 (en) * | 2017-04-25 | 2019-10-22 | Microsoft Technology Licensing, Llc | Method and system for providing an object in virtual or semi-virtual space based on a user characteristic |
WO2018201067A1 (en) | 2017-04-27 | 2018-11-01 | Magic Leap, Inc. | Light-emitting user input device |
US10412378B2 (en) | 2017-05-08 | 2019-09-10 | Microsoft Technology Licensing, Llc | Resonating optical waveguide using multiple diffractive optical elements |
US10222615B2 (en) | 2017-05-26 | 2019-03-05 | Microsoft Technology Licensing, Llc | Optical waveguide with coherent light source |
AU2018277530B2 (en) | 2017-05-30 | 2024-02-22 | Magic Leap, Inc. | Power supply assembly with fan assembly for electronic device |
AU2018277842A1 (en) | 2017-05-31 | 2019-12-19 | Magic Leap, Inc. | Eye tracking calibration techniques |
US10859834B2 (en) | 2017-07-03 | 2020-12-08 | Holovisions | Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear |
US10338400B2 (en) | 2017-07-03 | 2019-07-02 | Holovisions LLC | Augmented reality eyewear with VAPE or wear technology |
US10908680B1 (en) | 2017-07-12 | 2021-02-02 | Magic Leap, Inc. | Pose estimation using electromagnetic tracking |
WO2019022849A1 (en) | 2017-07-26 | 2019-01-31 | Magic Leap, Inc. | FORMATION OF A NEURONAL NETWORK WITH REPRESENTATIONS OF USER INTERFACE DEVICES |
WO2019023489A1 (en) | 2017-07-28 | 2019-01-31 | Magic Leap, Inc. | FAN ASSEMBLY FOR DISPLAYING IMAGE |
US10521661B2 (en) | 2017-09-01 | 2019-12-31 | Magic Leap, Inc. | Detailed eye shape model for robust biometric applications |
AU2018337653A1 (en) | 2017-09-20 | 2020-01-16 | Magic Leap, Inc. | Personalized neural network for eye tracking |
AU2018338222A1 (en) | 2017-09-21 | 2020-03-19 | Magic Leap, Inc. | Augmented reality display with waveguide configured to capture images of eye and/or environment |
KR102481884B1 (ko) | 2017-09-22 | 2022-12-28 | 삼성전자주식회사 | 가상 영상을 표시하는 방법 및 장치 |
CN107682686B (zh) * | 2017-10-11 | 2019-03-12 | 京东方科技集团股份有限公司 | 一种虚拟现实显示装置、显示设备及显示方法 |
US10942430B2 (en) | 2017-10-16 | 2021-03-09 | Digilens Inc. | Systems and methods for multiplying the image resolution of a pixelated display |
CN111133362B (zh) | 2017-10-22 | 2021-12-28 | 鲁姆斯有限公司 | 采用光具座的头戴式增强现实设备 |
CN111373419A (zh) | 2017-10-26 | 2020-07-03 | 奇跃公司 | 用于深度多任务网络中自适应损失平衡的梯度归一化***和方法 |
US10852547B2 (en) | 2017-12-15 | 2020-12-01 | Magic Leap, Inc. | Eyepieces for augmented reality display system |
US10914950B2 (en) | 2018-01-08 | 2021-02-09 | Digilens Inc. | Waveguide architectures and related methods of manufacturing |
CN115356905A (zh) | 2018-01-08 | 2022-11-18 | 迪吉伦斯公司 | 波导单元格中全息光栅高吞吐量记录的***和方法 |
US11567627B2 (en) | 2018-01-30 | 2023-01-31 | Magic Leap, Inc. | Eclipse cursor for virtual content in mixed reality displays |
US10540941B2 (en) | 2018-01-30 | 2020-01-21 | Magic Leap, Inc. | Eclipse cursor for mixed reality displays |
CN108366250B (zh) * | 2018-02-06 | 2020-03-17 | 深圳市鹰硕技术有限公司 | 影像显示***、方法以及数字眼镜 |
WO2019156992A2 (en) | 2018-02-06 | 2019-08-15 | Magic Leap, Inc. | Systems and methods for augmented reality |
US10735649B2 (en) | 2018-02-22 | 2020-08-04 | Magic Leap, Inc. | Virtual and augmented reality systems and methods using display system control information embedded in image data |
CA3139648A1 (en) | 2018-03-07 | 2019-09-12 | Magic Leap, Inc. | Visual tracking of peripheral devices |
EP4372451A2 (en) | 2018-03-16 | 2024-05-22 | Digilens Inc. | Holographic waveguides incorporating birefringence control and methods for their fabrication |
WO2019178566A1 (en) | 2018-03-16 | 2019-09-19 | Magic Leap, Inc. | Depth based foveated rendering for display systems |
US11480467B2 (en) | 2018-03-21 | 2022-10-25 | Magic Leap, Inc. | Augmented reality system and method for spectroscopic analysis |
US11157159B2 (en) | 2018-06-07 | 2021-10-26 | Magic Leap, Inc. | Augmented reality scrollbar |
USD875729S1 (en) | 2018-06-27 | 2020-02-18 | Magic Leap, Inc. | Portion of an augmented reality headset |
WO2020018938A1 (en) | 2018-07-19 | 2020-01-23 | Magic Leap, Inc. | Content interaction driven by eye metrics |
US10753579B2 (en) | 2018-07-20 | 2020-08-25 | Flex-N-Gate Advanced Product Development, Llc | Animated 3D image multiplier |
EP3824622A4 (en) | 2018-07-20 | 2021-09-08 | Flex-N-gate Advanced Product Development, LLC | FLOATING IMAGE GENERATION |
US10916064B2 (en) | 2018-07-23 | 2021-02-09 | Magic Leap, Inc. | Method and system for resolving hemisphere ambiguity using a position vector |
JP7413345B2 (ja) | 2018-07-23 | 2024-01-15 | マジック リープ, インコーポレイテッド | フィールド順次ディスプレイにおけるフィールド内サブコードタイミング |
WO2020023383A1 (en) | 2018-07-23 | 2020-01-30 | Magic Leap, Inc. | Mixed reality system with virtual content warping and method of generating virtual content using same |
USD924204S1 (en) | 2018-07-24 | 2021-07-06 | Magic Leap, Inc. | Totem controller having an illumination region |
USD918176S1 (en) | 2018-07-24 | 2021-05-04 | Magic Leap, Inc. | Totem controller having an illumination region |
USD930614S1 (en) | 2018-07-24 | 2021-09-14 | Magic Leap, Inc. | Totem controller having an illumination region |
CN112689869A (zh) | 2018-07-24 | 2021-04-20 | 奇跃公司 | 用于确定显示器与用户的眼睛之间的配准的显示***和方法 |
WO2020023779A1 (en) | 2018-07-25 | 2020-01-30 | Digilens Inc. | Systems and methods for fabricating a multilayer optical structure |
US11914148B2 (en) | 2018-09-07 | 2024-02-27 | Adeia Semiconductor Inc. | Stacked optical waveguides |
US11141645B2 (en) | 2018-09-11 | 2021-10-12 | Real Shot Inc. | Athletic ball game using smart glasses |
US11103763B2 (en) | 2018-09-11 | 2021-08-31 | Real Shot Inc. | Basketball shooting game using smart glasses |
CN113227879A (zh) | 2018-10-26 | 2021-08-06 | 奇跃公司 | 用于电磁跟踪的环境电磁失真校正 |
WO2020096743A1 (en) | 2018-11-09 | 2020-05-14 | Beckman Coulter, Inc. | Service glasses with selective data provision |
CN113302546A (zh) | 2018-11-20 | 2021-08-24 | 奇跃公司 | 用于增强现实显示***的目镜 |
EP3924759A4 (en) | 2019-02-15 | 2022-12-28 | Digilens Inc. | METHODS AND APPARATUS FOR MAKING A HOLOGRAPHIC WAVEGUIDE DISPLAY WITH INTEGRATED GRIDINGS |
US11287657B2 (en) | 2019-02-28 | 2022-03-29 | Magic Leap, Inc. | Display system and method for providing variable accommodation cues using multiple intra-pupil parallax views formed by light emitter arrays |
JP2022525165A (ja) | 2019-03-12 | 2022-05-11 | ディジレンズ インコーポレイテッド | ホログラフィック導波管バックライトおよび関連する製造方法 |
EP3956858A1 (en) | 2019-04-18 | 2022-02-23 | Beckman Coulter, Inc. | Securing data of objects in a laboratory environment |
USD962981S1 (en) | 2019-05-29 | 2022-09-06 | Magic Leap, Inc. | Display screen or portion thereof with animated scrollbar graphical user interface |
US20200386947A1 (en) | 2019-06-07 | 2020-12-10 | Digilens Inc. | Waveguides Incorporating Transmissive and Reflective Gratings and Related Methods of Manufacturing |
EP3987343A4 (en) | 2019-06-20 | 2023-07-19 | Magic Leap, Inc. | EYEWEARS FOR AUGMENTED REALITY DISPLAY SYSTEM |
WO2020261279A1 (en) | 2019-06-27 | 2020-12-30 | Lumus Ltd. | Apparatus and methods for eye tracking based on eye imaging via a light-guide optical element |
US11681143B2 (en) | 2019-07-29 | 2023-06-20 | Digilens Inc. | Methods and apparatus for multiplying the image resolution and field-of-view of a pixelated display |
EP4022370A4 (en) | 2019-08-29 | 2023-08-30 | Digilens Inc. | VACUUM BRAGG GRATINGS AND METHODS OF MANUFACTURING |
IL294102A (en) | 2019-12-25 | 2022-08-01 | Lumus Ltd | Optical systems and methods for tracking eyes based on directing light from the eye through an optical arrangement associated with a light-directing optical element |
US11998275B2 (en) | 2020-07-15 | 2024-06-04 | Magic Leap, Inc. | Eye tracking using aspheric cornea model |
TW202323949A (zh) * | 2021-09-30 | 2023-06-16 | 以色列商魯姆斯有限公司 | 用於控制有源遮擋子系統的裝置、方法和電腦可讀存儲裝置 |
KR20230103379A (ko) | 2021-12-31 | 2023-07-07 | 삼성전자주식회사 | Ar 처리 방법 및 장치 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010014282A (ko) * | 1997-06-28 | 2001-02-26 | 스켈톤 에스. 알. | 자동입체 디스플레이 장치 |
US20100149611A1 (en) * | 2007-05-16 | 2010-06-17 | Seereal Technologies S.A. | Method and Apparatus for Reconstructing a Three-Dimensional Scene in a Holographic Display |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2728994B2 (ja) | 1991-07-30 | 1998-03-18 | 三菱電機株式会社 | 開閉機器の動作異常検出装置 |
JP2786352B2 (ja) * | 1991-10-02 | 1998-08-13 | シャープ株式会社 | 焦点可変光学装置 |
JPH0536327U (ja) * | 1991-10-21 | 1993-05-18 | 三菱電機株式会社 | 撮像装置 |
JPH05328260A (ja) * | 1992-05-26 | 1993-12-10 | Olympus Optical Co Ltd | 頭部装着式ディスプレイ装置 |
US5572343A (en) | 1992-05-26 | 1996-11-05 | Olympus Optical Co., Ltd. | Visual display having see-through function and stacked liquid crystal shutters of opposite viewing angle directions |
JP3630746B2 (ja) * | 1994-12-05 | 2005-03-23 | キヤノン株式会社 | 画像観察装置 |
JP3556389B2 (ja) * | 1996-05-01 | 2004-08-18 | 日本電信電話株式会社 | ヘッドマウントディスプレイ装置 |
EP0785457A3 (en) | 1996-01-17 | 1998-10-14 | Nippon Telegraph And Telephone Corporation | Optical device and three-dimensional display device |
DE69709709D1 (de) * | 1996-03-15 | 2002-02-21 | Retinal Display Cayman Ltd | Verfahren und vorrichtung zur betrachtung eines bildes |
US20040108971A1 (en) * | 1998-04-09 | 2004-06-10 | Digilens, Inc. | Method of and apparatus for viewing an image |
JP2000171750A (ja) * | 1998-12-03 | 2000-06-23 | Sony Corp | ヘッドマウントディスプレイ、表示方法、および提供媒体 |
US6546438B1 (en) | 1999-06-08 | 2003-04-08 | Siemens Energy & Automation | System for interfacing components |
US6456438B1 (en) * | 1999-08-12 | 2002-09-24 | Honeywell Inc. | Variable immersion vignetting display |
GB0000589D0 (en) | 2000-01-13 | 2000-03-01 | Guiver Matthew | Cutting guide |
FI114945B (fi) * | 2002-09-19 | 2005-01-31 | Nokia Corp | Sähköisesti säädettävä diffraktiivinen hilaelementti |
US7821715B2 (en) * | 2005-02-22 | 2010-10-26 | Nikon Corporation | Diffractive optical element |
DE102005045174A1 (de) | 2005-09-21 | 2007-03-22 | Bayer Cropscience Ag | Steigerung der Pathogenabwehr in Pflanzen |
WO2007037089A1 (ja) * | 2005-09-27 | 2007-04-05 | Konica Minolta Holdings, Inc. | 頭部装着型映像表示装置 |
JP4810949B2 (ja) * | 2005-09-29 | 2011-11-09 | ソニー株式会社 | 光学装置及び画像表示装置 |
US7702468B2 (en) | 2006-05-03 | 2010-04-20 | Population Diagnostics, Inc. | Evaluating genetic disorders |
US7936489B2 (en) * | 2007-02-09 | 2011-05-03 | GM Global Technology Operations LLC | Holographic information display |
CN101029968A (zh) * | 2007-04-06 | 2007-09-05 | 北京理工大学 | 可寻址光线屏蔽机制光学透视式头盔显示器 |
WO2008148927A1 (en) | 2007-06-04 | 2008-12-11 | Nokia Corporation | A diffractive beam expander and a virtual display based on a diffractive beam expander |
BRPI0701380E2 (pt) | 2007-06-29 | 2009-10-06 | Valmor Da Cunha Gravio | redutor mecánico de velocidade por correia |
RU2482018C2 (ru) | 2007-07-31 | 2013-05-20 | Б/Е Аэроспейс, Инк. | Дверь для летательного аппарата |
RU2359297C1 (ru) * | 2007-12-21 | 2009-06-20 | Олег Леонидович Головков | Виртуальный шлем |
US20100011368A1 (en) | 2008-07-09 | 2010-01-14 | Hiroshi Arakawa | Methods, systems and programs for partitioned storage resources and services in dynamically reorganized storage platforms |
US20100011036A1 (en) | 2008-07-09 | 2010-01-14 | The Go Daddy Group, Inc. | Document storage access on a per-approval basis |
CN103119512A (zh) * | 2008-11-02 | 2013-05-22 | 大卫·乔姆 | 近眼式显示***和装置 |
EP2376971B1 (en) * | 2008-12-12 | 2019-02-20 | BAE Systems PLC | Improvements in or relating to waveguides |
JP4674634B2 (ja) * | 2008-12-19 | 2011-04-20 | ソニー株式会社 | 頭部装着型ディスプレイ |
JP5316391B2 (ja) * | 2009-08-31 | 2013-10-16 | ソニー株式会社 | 画像表示装置及び頭部装着型ディスプレイ |
JP5333067B2 (ja) * | 2009-08-31 | 2013-11-06 | ソニー株式会社 | 画像表示装置及び頭部装着型ディスプレイ |
KR101099137B1 (ko) | 2010-01-29 | 2011-12-27 | 주식회사 팬택 | 이동 통신 시스템에서 증강 현실 정보를 제공하기 위한 장치 및 방법 |
US20110213664A1 (en) | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
KR101479262B1 (ko) | 2010-09-02 | 2015-01-12 | 주식회사 팬택 | 증강현실 정보 이용 권한 부여 방법 및 장치 |
KR101260576B1 (ko) | 2010-10-13 | 2013-05-06 | 주식회사 팬택 | Ar 서비스를 제공하기 위한 사용자 단말기 및 그 방법 |
KR101407670B1 (ko) | 2011-09-15 | 2014-06-16 | 주식회사 팬택 | 증강현실 기반 모바일 단말과 서버 및 그 통신방법 |
-
2012
- 2012-11-23 KR KR1020217006982A patent/KR102376368B1/ko active IP Right Grant
- 2012-11-23 KR KR1020227030044A patent/KR102513896B1/ko active IP Right Grant
- 2012-11-23 EP EP12851157.3A patent/EP2783352B1/en active Active
- 2012-11-23 BR BR112014012615A patent/BR112014012615A2/pt not_active Application Discontinuation
- 2012-11-23 JP JP2014543465A patent/JP6250547B2/ja active Active
- 2012-11-23 CN CN201710904801.4A patent/CN107664847B/zh active Active
- 2012-11-23 RU RU2014125226A patent/RU2628164C2/ru not_active IP Right Cessation
- 2012-11-23 AU AU2012341069A patent/AU2012341069B2/en active Active
- 2012-11-23 EP EP19154686.0A patent/EP3503035B1/en active Active
- 2012-11-23 WO PCT/US2012/000560 patent/WO2013077895A1/en active Application Filing
- 2012-11-23 KR KR1020207014691A patent/KR102227381B1/ko active IP Right Grant
- 2012-11-23 KR KR1020177030366A patent/KR102095220B1/ko active IP Right Grant
- 2012-11-23 US US13/684,489 patent/US8950867B2/en active Active
- 2012-11-23 KR KR1020147017217A patent/KR102116697B1/ko active IP Right Grant
- 2012-11-23 CA CA2858208A patent/CA2858208C/en active Active
- 2012-11-23 EP EP22163415.7A patent/EP4036862A1/en active Pending
- 2012-11-23 KR KR1020227008484A patent/KR102440195B1/ko active IP Right Grant
- 2012-11-23 CA CA3024054A patent/CA3024054C/en active Active
- 2012-11-23 CN CN201280067730.2A patent/CN104067316B/zh active Active
-
2014
- 2014-05-22 IL IL232746A patent/IL232746A/en active IP Right Grant
-
2015
- 2015-01-07 US US14/591,543 patent/US20150124317A1/en not_active Abandoned
-
2016
- 2016-10-06 US US15/286,695 patent/US10191294B2/en active Active
-
2017
- 2017-02-10 JP JP2017022805A patent/JP6422518B2/ja active Active
- 2017-05-15 IL IL252284A patent/IL252284B/en active IP Right Grant
-
2018
- 2018-05-11 AU AU2018203315A patent/AU2018203315B2/en active Active
- 2018-05-11 AU AU2018203318A patent/AU2018203318B2/en active Active
- 2018-07-04 JP JP2018127444A patent/JP6646712B2/ja active Active
- 2018-10-04 JP JP2018189007A patent/JP6785277B2/ja active Active
- 2018-11-07 US US16/183,619 patent/US10444527B2/en active Active
-
2019
- 2019-07-15 US US16/511,488 patent/US10670881B2/en active Active
-
2020
- 2020-04-09 US US16/844,464 patent/US11474371B2/en active Active
- 2020-08-13 JP JP2020136613A patent/JP2020181225A/ja not_active Withdrawn
- 2020-10-20 AU AU2020257062A patent/AU2020257062B2/en active Active
-
2022
- 2022-04-11 AU AU2022202379A patent/AU2022202379B2/en active Active
- 2022-08-02 US US17/816,902 patent/US11822102B2/en active Active
-
2023
- 2023-10-04 US US18/481,090 patent/US20240027785A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010014282A (ko) * | 1997-06-28 | 2001-02-26 | 스켈톤 에스. 알. | 자동입체 디스플레이 장치 |
US20100149611A1 (en) * | 2007-05-16 | 2010-06-17 | Seereal Technologies S.A. | Method and Apparatus for Reconstructing a Three-Dimensional Scene in a Holographic Display |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11822102B2 (en) | Three dimensional virtual and augmented reality display system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
A107 | Divisional application of patent | ||
GRNT | Written decision to grant |