CN113196132A - 可操纵定位元件 - Google Patents

可操纵定位元件 Download PDF

Info

Publication number
CN113196132A
CN113196132A CN201980080626.9A CN201980080626A CN113196132A CN 113196132 A CN113196132 A CN 113196132A CN 201980080626 A CN201980080626 A CN 201980080626A CN 113196132 A CN113196132 A CN 113196132A
Authority
CN
China
Prior art keywords
steerable
display
display system
field
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980080626.9A
Other languages
English (en)
Inventor
A·M·伊什
A·J·格罗斯
C·D·韦斯特拉
D·S·德瓦尔德
E·唐
J·R·***
K·W·金
W·C·韦尔奇
E·R·D·弗雷希
D·A·亨德森
Q·许
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Avegant Corp
Original Assignee
Avegant Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Avegant Corp filed Critical Avegant Corp
Publication of CN113196132A publication Critical patent/CN113196132A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16MFRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/02Heads
    • F16M11/04Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand
    • F16M11/06Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting
    • F16M11/12Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting in more than one direction
    • F16M11/121Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting in more than one direction constituted of several dependent joints
    • F16M11/123Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting in more than one direction constituted of several dependent joints the axis of rotation intersecting in a single point, e.g. by using gimbals
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16MFRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/02Heads
    • F16M11/18Heads with mechanism for moving the apparatus relatively to the stand
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0176Head mounted characterised by mechanical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0127Head-up displays characterised by optical features comprising devices increasing the depth of field
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Mechanical Light Control Or Optical Switches (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一种显示***,其包含可操纵显示器,所述可操纵显示器具有至少1度的单目视场,所述单目视场位于至少20度的可扫描视场内,所述可操纵显示器针对用户可移动地定位。在一个实施例中,所述可操纵显示器针对所述用户的中央凹定位。

Description

可操纵定位元件
相关申请
本申请要求于2018年12月7日提交的美国临时专利申请第62/777,061号和2019年9月17日提交的美国临时专利申请第62/902,377号的优先权,这两个申请以全文引用的方式并入。
技术领域
本申请涉及近眼显示***,尤其涉及近眼显示器中的可操纵定位元件。
背景技术
近眼显示器具有在大视场(FOV)上以高分辨率显示图像的竞争要求。对于虚拟和增强现实中的许多应用,视场应该大于90度,并且理想地,双目视场将延伸超过180度。同时,显示器的分辨率应当与人类视觉***的分辨率相匹配,使得在虚拟图像中很少或没有感知到像素化。在单个***中组合这两个要求提出了许多挑战。为了避免像素化的出现,分辨率需要每个像素有0.01-0.02度的数量级。在90度正方形视场上,这对应于每只眼睛4.5k×4.5k像素或更高。实现这样的分辨率在面板、驱动电子器件和再现流水线的级别上具有挑战性。
另外,还难以设计能够在整个视场上以足够高的分辨率向用户投影宽FOV图像的光学***。能够在宽视场上向用户呈现高分辨率图像,同时降低渲染、数据速率和面板要求的***体系结构将实现增强和虚拟现实***的新应用。
附图说明
在附图中以举例而非限制的方式绘示了本发明,在附图中,相似的附图标记表示相似的元件,并且在附图中:
图1A是可操纵定位元件的第一实施例的图示。
图1B和1C是可操纵定位元件的另一实施例的透视图和截面图。
图1D是可操纵定位元件的另一实施例的图示。
图1E是可操纵定位元件的另一元件的图示。
图1F是图1E的实施例的横截面。
图2是***的一个实施例的框图。
图3是可操纵定位元件的一个实施例的框图。
图4A是使用可操纵定位元件的一个实施例的流程图。
图4B是可操纵定位元件的定位验证的一个实施例的流程图。
图4C是可操纵显示器中的显示器移动的一个实施例的图示。
图5是使用可操纵定位元件的另一实施例的流程图。
图6是控制可操纵元件的使用的一个实施例的流程图。
具体实施方式
本申请公开了一种可操纵定位元件,其可用于实现可操纵显示器。在一个实施例中,可操纵定位元件可以是镜、透镜、棱镜、分色镜、可切换晶体或其它定位元件。在一个实施例中,可操纵显示器被设计为可定位以在用户的中央凹所在的区域提供高分辨率显示。“中央凹”是眼睛的视网膜中的小凹陷,在那里,视力最高。在另一个实施例中,可操纵显示器可以被定位成在特定位置提供平视显示或子画面。该位置可以基于用户的周围环境、用户的凝视、其它外部数据或其它因素。在一个实施例中,可操纵显示器可用于虚拟现实和/或增强现实显示器中。可操纵显示器还可以用于任何其它目的,其中高分辨率显示器被设计成被定位。
本发明的实施例的以下详细描述参考附图,其中相同的附图标记指示相似的元件,以说明的方式示出实践本发明的特定实施例。这些实施例的描述足够详细,以使本领域技术人员能够实施本发明。本领域技术人员理解,在不脱离本发明的范围的情况下,可以利用其它实施例,并且可以进行逻辑的、机械的、电的、功能的和其它的改变。因此,下面的详细描述不是限制性的,本发明的范围仅由所附权利要求限定。
图1A示出了可操纵定位元件的一个实施例。在一个实施例中,***110包括由万向节155和支撑结构柱125支撑的显示元件120。
显示元件120可沿两个轴枢转。在一个实施例中,***包括两个万向节155,每个万向节都提供沿一个轴线的枢转。显示元件120的枢转由安装到柔性臂130的压电元件135控制,柔性臂用作X轴控制器和Y轴控制器。在一个实施例中,柔性臂130由金属制成。在一个实施例中,柔性臂支撑压电元件135。柔性臂130对组件的侧面提供静态力,以确保当压电元件135在致动时,压电元件135施加垂直于显示元件120的驱动表面的力,并在所述压电元件静止时保持与显示元件120接触。
在一个实施例中,显示元件120的运动范围可以是沿X和Y轴的+/-10度。驱动器145驱动压电元件135以控制运动。
在一个实施例中,微控制器147从***接收控制数据,并控制驱动器145驱动压电元件135,以移动显示元件120。
在一个实施例中,位置传感器140用于验证显示元件120的实际位置。在一个实施例中,位置传感器140可以是能够感测与显示装置相关联的一个或多个磁体的磁场的相对变化的一个或多个磁传感器。在一个实施例中,磁***于显示元件120的外径附近。在一个实施例中,两个磁体定位成径向分开90度。在一个实施例中,磁体和相关联的磁传感器定位成与驱动表面相对。这实现了最小的交叉耦合和最精确的测量。
在一个实施例中,驱动元件的重量由显示元件120上的磁体的重量平衡。在一个实施例中,磁体可以是稀土磁体。磁传感器靠近磁体放置。在另一个实施例中,可以使用四个磁体。在一个实施例中,在四磁体配置中,两个磁体定位成与驱动元件相对,并且两个额外磁体定位成更远离显示元件。这给***增加了更多的质量,但是提供了消除空间中的其它磁场(包括地球磁场)的能力,以便基于显示元件120的移动更精确地测量磁场的变化。在一个实施例中,磁传感器是霍尔效应传感器。在一个实施例中,磁传感器是磁力计。
在一个实施例中,使用一个或多个额外的磁传感器来测量地球磁场或其它环境磁场。在一个实施例中,减去环境磁场的影响,以抵消其对显示元件位置测量的影响。在一个实施例中,额外传感器被定向为与组件上的测量传感器大致对准。在一个实施例中,可以使用单个3轴磁传感器。在一个实施例中,可以使用差分传感器。
在一个实施例中,将实际位置与指示位置进行比较的计算发生在处理器上,如将参考图2所述。在另一实施例中,可使用不利用微控制器147的模拟控制电路来控制定位元件。
显示元件120可以是镜、透镜、棱镜、全息光学元件(HOE)、液晶聚合物和/或用于为可操纵显示器引导光的另一元件。在一个实施例中,显示元件120可以是菲涅耳反射器、衍射元件、表面起伏光栅、光导、波导或体积全息图。
在一个实施例中,压电元件135是移动显示元件120的致动器。可替换地,压电元件135可以替换为磁性和/或感应元件、纳米马达、静电元件或其它能够以显示***所需的精度和速度移动显示元件120的装置。
图1B是图1A的可操纵定位元件的顶视图。
图1C是可操纵定位元件的另一实施例,其中添加了柔性印刷电路板152,并且将微控制器移动到单独的板。在一个实施例中,柔性印刷电路板152编织在其中,如图所示。这使得可操纵定位元件稍微轻一些。
下表说明了可操纵定位元件的一个实施例的光学和物理特性的示范性配置。注意,虽然这些表格示出了测量值,并且在一些情况下,示出了优选实施例的范围,但是当可能时,可以优选这些范围的变化,并且尤其是额外的精度。此外,在一个实施例中,虽然提供了一些范围,但***不限于这些范围。
在一个实施例中,***可以包括两个镜。
在一个实施例中,快速移动元件可以被设计成在速度上匹配眼睛的移动,其中小角度移动范围为在300μs内0.3°,并且大角度移动范围为在300μs内2°-20°。这种快速移动元件可以移动每个帧并且可以忽略眼迅速扫视,因为移动速度足够快,所以用户不能察觉它。
在一个实施例中,中等快速移动显示元件也可以移动每一帧,其中小角度移动范围为在4ms内0.3°,并且大角度移动范围为在8ms-50ms内2°-20°的。在一个实施例中,该配置允许眼迅速扫视在眼睛稳定时间开始时稳定。
在一个实施例中,中慢速镜的小角度移动范围为在9ms内0.6°,大角度移动范围为在8ms-50ms内2°-20°。在一个实施例中,中慢镜在较大角度上以与中快镜大致相同的速度移动,但在较小角度上移动得较慢。然而,在一个实施例中,甚至中慢镜也可以移动每一帧。
慢镜的小角度移动范围为在16毫秒(ms)内0.15°,大角度移动范围为在20ms–100ms内2°-20°。在一个实施例中,由于其较慢的速度,慢速镜在移动期间利用空白帧。在一个实施例中,消隐帧可以是能够进行子帧消隐的显示器的子帧。在一个实施例中,慢镜利用扫视掩蔽(saccadic masking),并且依赖于眼睛稳定时间(settling time)来确保用户感觉不到由镜控制显示器的运动。
在一个实施例中,***被设计成在显示器关闭期间移动镜。对于大多数基于OLED的VR显示器,占空比在20%的范围内(即,显示器本身仅开启20%的帧时间)。可操纵显示器可以在显示器关闭期间移动。所讨论的具体角度、速度和配置细节当然仅是示范性的。可以使用具有不同规格的更快、更慢或中间镜。
下表应视为示范性配置。本领域技术人员将理解,在不脱离本发明的范围的情况下可以改变这些方面。
图1D示出了可操纵定位元件111的另一实施例。在一个实施例中,***111包括由柔性臂170和支撑结构底座160支撑的显示元件174。
显示元件174可沿两个轴枢转。显示元件174的枢转由压电元件172控制。在一个实施例中,运动范围可以是沿X和Y轴的+/-18度。驱动器164驱动压电元件172以控制运动。
微控制器176从***接收控制数据并控制驱动器移动显示元件174。位置传感器168用于验证显示元件174的实际位置。在一个实施例中,比较实际位置和指示位置的计算发生在处理器上,如下所述。
显示元件174可以是镜、透镜、棱镜、全息光学元件(HOE)、液晶聚合物、可调节镜、可调节棱镜、声光调制器、可调节显示面板、曲面镜、衍射元件、菲涅耳反射器和/或用于为可操纵显示器引导光的另一元件。在一个实施例中,显示元件174可以是菲涅耳反射器、衍射元件、表面起伏光栅、光导、波导或体积全息图。
在一个实施例中,压电元件172是移动显示元件174的致动器。可替换地,压电元件172可以替换为磁性和/或感应元件、纳米马达、静电元件或其它能够以显示***所需的精度和速度移动显示元件174的装置。
图1E和1F是可操纵定位元件的另一实施例的透视图和截面图。显示元件180由多个定位柱184支撑就位。定位柱185使得显示元件180能够移动。定位柱185由底座结构182支撑。尽管未示出,该实施例还包括微控制器和位置传感器。
图1F中的截面示出了图1E的实施例的定位柱185和中心支撑件188的元件。在一个实施例中,***包括两个或多个定位柱192和中心支撑件188。在一个实施例中,中心支撑件188位于显示元件180的中心,并提供一个稳定点,显示元件围绕其倾斜。在一个实施例中,每个定位柱192都包括致动器198、移动支撑结构196和倾斜顶部194。
在一个实施例中,致动器198是使移动支撑结构196上下移动的压电元件。或者,致动器198可以是磁性和/或感应元件、纳米马达、静电元件或其它致动器机构,其使得移动支撑结构196能够以显示***所需的精度和速度移动。
移动支撑结构196上下移动并且连接有倾斜顶部194。在一个实施例中,倾斜顶部194是圆形的或具有装配到显示元件180中的凹口190中的圆形顶部。在一个实施例中,移动支撑结构196和倾斜顶部194之间的连接是磁性的。
倾斜顶部194使得显示元件180能够通过上下移动而倾斜。因为倾斜顶部194是平滑的并且装配到凹口190中,所以倾斜顶部保持与显示元件180接触。
在一个实施例中,倾斜顶部194是自由旋转的球体,通过磁力连接到移动支撑结构196和凹口190。这样,***可以利用具有快速上下运动能力的致动器来向显示元件180提供运动范围。下面参照表5至6讨论显示元件的运动范围和能力。
表1和2示出了可操纵镜的第一配置的示范性光学、物理和其它特性。
表1:
Figure BDA0003100674820000061
表2:
其它特性 一个实施例 注释
占用面积 8mm×8mm 最大12mm×12mm
高度 2mm 最大5mm
扫描或即瞄即拍? 即瞄即拍
机械夹紧 包装中的边缘槽 备用螺钉
重力影响
磁屏蔽 不需要
光学 一个实施例 注释
镜涂层 受保护的银或增强的铝
光功率 LED照明,mW范围 可包括激光照明
控制接口 SPI、I2S、I2C、PWM
功耗 <50mW(DC) <10mW(DC)
工作温度 -20℃至65℃ 至少0℃至40℃
储存温度 -40℃至85℃
冲击和振动要求 根据DIN EN 60068-2-27的冲击
循环寿命 220M全周期 至少95M全周期
寿命 7年 3年
符合 RoHS
表3和4示出了与图1A的可操纵定位元件相关联的第二配置的示范性光学、物理和其它特性。
表3:
Figure BDA0003100674820000071
表3:续
Figure BDA0003100674820000081
表4:
Figure BDA0003100674820000091
表5和6示出了与图1E和1F的可操纵定位元件相关联的第三配置的示范性光学、物理和其它特性。
表5:
Figure BDA0003100674820000101
表5:续
Figure BDA0003100674820000102
Figure BDA0003100674820000111
表6:
Figure BDA0003100674820000112
注意,上述表格描述了机械、光学和物理特性的实施例,这些实施例描述了使用可操纵显示元件的各种配置的一组实施例,所述可操纵显示元件使用镜作为定位元件。本领域技术人员将理解可以对不同定位元件的上述范围进行修改。
图2示出了示范性光学***210、280和相关联的处理***238的一个实施例。在一个实施例中,处理***可以在包括处理器的计算机***中实现。在一个实施例中,处理***238可以是显示***的一部分。在另一个实施例中,处理***238可以是远程的。在一个实施例中,光学***210、280可以在诸如头戴式显示器之类的可穿戴***中实现。可操纵显示图像通过引导可操纵显示器的右眼可操纵显示器220和左眼可操纵显示器230呈现给用户的眼睛。在一个实施例中,可操纵显示器220、230将可操纵显示图像主要导向用户眼睛的视场中心。在另一个实施例中,图像可以被导向不同的位置,如下所述。在一个实施例中,可操纵显示图像是高分辨率图像。在一个实施例中,可操纵显示图像是可变分辨率图像。在一个实施例中,可变分辨率对应于用户眼睛感知的最大分辨率的变化,当用户眼睛更远离中心时,最大分辨率下降。
使用第一显示元件222创建右眼的图像。在一个实施例中,显示元件是数字微镜装置(DMD)。在一个实施例中,显示元件222是扫描微镜装置。在一个实施例中,显示元件222是扫描光纤装置。在一个实施例中,显示元件是有机发光二极管(OLED)。在一个实施例中,显示元件222是硅基液晶(LCOS)面板。在一个实施例中,显示元件222是液晶显示(LCD)面板。在一个实施例中,显示元件222是微LED或微发光二极管(μLED)面板。在一个实施例中,显示元件是扫描激光***。在一个实施例中,***是具有离轴全息光学元件(HOE)的混合***。在一个实施例中,***包括波导。在一个实施例中,波导是多层波导。在一个实施例中,显示元件可以包括此类元件的组合。下图3更详细地讨论了显示元件。
在一个实施例中,第一显示元件222位于诸如眼镜或护目镜之类的近眼装置中。
使用中间光学元件224来设置可操纵显示器的焦点和视场。中间光学元件224可以包括但不限于透镜、镜和衍射光学元件。在一个实施例中,虚像的焦点设置为无限远。在另一实施例中,虚像的焦点设置得比无限远更近。在一个实施例中,可以改变虚像的焦点。在一个实施例中,虚像可以具有两个或多个同时感知的焦距。
在一个实施例中,可操纵显示图像主要被导向用户眼睛的视场中心。在一个实施例中,可操纵显示图像的视场(FOV)大于1度。在一个实施例中,可操纵显示图像的FOV在1度和20度之间。在一个实施例中,可操纵显示图像可以大于5度,以解决眼睛跟踪中的不精确性,提供成功混合所需的区域,使得用户不能察觉到该混合,并且考虑对于各种类型的眼睛移动重新定位可操纵显示器所花费的时间。
在一个实施例中,该***还包括具有20-220度视场的低分辨率场显示图像。
在一个实施例中,使用一组一个或多个完全或部分透明的定位元件226将可操纵显示图像直接投影到用户的眼睛上。在一个实施例中,定位元件226包括可操纵镜,例如图1A所示的可操纵定位元件。在一个实施例中,定位元件226包括曲面镜。在一个实施例中,定位元件226包括菲涅耳反射器。在一个实施例中,定位元件226包括衍射元件。在一个实施例中,衍射元件是表面起伏光栅。在一个实施例中,衍射元件是体积全息图。在一个实施例中,显示器220可以包括焦点调节器223,其使得显示器能够在同一帧中以多个焦距显示图像元素。在一个实施例中,焦点调节器223可以是光路长度扩展器,如在2016年8月12日提交的美国专利申请第15/236,101号中所述。
对于左眼可操纵显示器230,存在类似的一组元件。在一个实施例中,右眼可操纵显示器220和左眼可操纵显示器230是匹配的。在另一个实施例中,它们可以包括不同的元件。
在一个实施例中,眼睛***240跟踪用户的凝视向量,例如眼睛正在看的地方。在一个实施例中,眼睛跟踪***是基于摄像机的眼睛跟踪***240。在一个实施例中,基于摄像机的眼睛跟踪***240包括全息光学元件。在一个实施例中,眼睛跟踪***240是具有接收传感器的红外扫描激光器。在一个实施例中,红外扫描激光眼睛跟踪***240包括全息光学元件。在一个实施例中,眼睛跟踪***240是光学流量传感器。可以使用其它眼睛跟踪机构。位置计算器245基于来自眼睛跟踪***240的数据确定用户视场的中心。
在一个实施例中,可调节定位元件226、236用于调节右眼可操纵显示器220和左眼可操纵显示器230,以将图像定位成主要导向用户眼睛的视场中心。在一个实施例中,可调节位置元件226、236用于调节右眼可操纵显示器220和左眼可操纵显示器230,以将眼动范围(eye box)或出射光瞳朝向用户眼睛的视场中心定位。在一个实施例中,通过改变镜、位置元件226、236中的一个的角度来调整图像的方向。在一个实施例中,通过使用电磁力来改变镜的角度。在一个实施例中,通过使用静电力来改变镜的角度。在一个实施例中,如图1A所示,通过使用压电力来改变镜的角度。在一个实施例中,可调节元件是图像源或移动以定位图像的显示元件222、232。在一个实施例中,图像被定位成导向用户眼睛的视场的中心。在另一个实施例中,可以改变另一个位置元件226、236,例如转向元件226、236。
场显示器280经由通信逻辑270、290与处理***238通信。在一个实施例中,可以有多个显示器。这里,示出了两个场显示器,场显示器285和***显示器288。还示出了额外的分辨率等级。在一个实施例中,场显示器280可以包括由用户的双眼观看的单个场显示器285,或者每只眼睛一个场显示器。在一个实施例中,场显示器280可以具有可变分辨率。在一个实施例中,分辨率向显示器280的外部下降,对应于眼睛所感知的最大分辨率的下降。
在一个实施例中,当场显示器280是单独的***时,同步信号发生器292用于使独立可操纵显示器210的显示与场显示器280的显示同步。在一个实施例中,同步信号发生器292用于使可调镜或可操纵显示器的其它定位元件与场显示器同步。这导致显示器的同步。在一个实施例中,场显示器280包括混合器***294,用于将可操纵显示图像的边缘与场显示图像混合,以确保过渡是平滑的。
在一个实施例中,利用完全或部分透明的光学***向用户呈现较低分辨率的场显示图像。在一个实施例中,该部分透明***包括波导光学***。在一个实施例中,该部分透明***包括可以是平的或具有光功率的部分镜。在一个实施例中,该部分透明***包括衍射光学元件。在一个实施例中,该图像通过直视光学***呈现给用户。在一个实施例中,该部分透明的***包括反射或散射光的内含物。
在场显示器280的一个实施例中,额外显示子***用于在单视***显示器288的区域中显示图像。在一个实施例中,该子***是LED(发光二极管)阵列。在一个实施例中,该子***是OLED(有机LED)阵列。在一个实施例中,该显示子***使用扫描激光器。在一个实施例中,该子***使用LCD(液晶显示器)面板。在一个实施例中,场显示器280是LCOS(硅基液晶)显示器。在一个实施例中,场显示器是DLP(数字光处理)显示器。在一个实施例中,该子***没有中间光学元件来操纵图像的FOV或焦点。在一个实施例中,该子***具有中间光学元件。在一个实施例中,这些中间光学元件包括微透镜阵列。
由可操纵显示器210和场显示器280显示的图像数据由处理***238生成。在一个实施例中,该***包括眼睛***240。在一个实施例中,眼睛***240跟踪用户的凝视向量,例如眼睛正在看的地方。在一个实施例中,眼睛跟踪***是基于摄像机的眼睛跟踪***240。或者,眼睛跟踪***240可以是基于红外激光器的。中央凹位置计算器245基于来自眼睛跟踪***240的数据确定用户视场的中心。在一个实施例中,中央凹位置计算器245另外使用来自滑移检测***的数据。在一个实施例中,滑移检测***检测头戴式耳机/护目镜在用户头部的移动,并且检测用户眼睛的真实位置相对于所计算的位置的滑移或其它移位。在一个实施例中,中央凹位置计算器245可以通过调整所计算的中央凹位置来补偿这种滑移,该中央凹位置由***用来定位可操纵显示器。
在一个实施例中,处理***238还包括中央凹位置验证器247,其验证位置元件226、236的定位,以确保显示器220、230被正确定位。在一个实施例中,这包括根据可操纵显示器的移动来重新评估可操纵显示器相对于用户眼睛的视场中心的位置。在一个实施例中,中央凹位置验证器247使用感测机构,提供反馈以验证定位元件已到达其目标位置。在一个实施例中,感测机构可以是摄像机。在一个实施例中,感测机构可以是传动装置。位置验证器247中的感测机构可以是磁传感器。感测机构可以是能够确定光学元件位置的另一种类型的传感器。在一个实施例中,如果可操纵显示器的实际位置不是目标位置,则中央凹位置验证器247可改变显示器以提供正确的图像数据。这在下面更详细地描述。
在一个实施例中,眼睛移动分类器260可以用于预测用户的凝视向量将向哪里移动。预测***265可以使用该数据来基于用户的凝视向量的下一位置,移动可操纵显示器220、230。在一个实施例中,智能***267可以利用诸如眼睛移动分类和眼睛跟踪之类的用户数据来预测地定位显示器220、230。在一个实施例中,智能***267可以另外使用关于要显示的帧中即将到来的数据的数据来识别显示器220、230的最佳定位。在一个实施例中,智能***267可以将显示器220、230定位在未由凝视向量指示的位置。例如,如果所显示的帧数据仅具有少量的相关数据(例如,在另外的暗屏幕上照亮的蝴蝶),或者帧的意图是使观看者观看特定位置。
处理***238还可以包括切出(cut-out)逻辑250。切出逻辑250定义可操纵显示器220、230的位置,并将具有切出的显示信息提供给相关联的场显示器280。场显示器280呈现该数据以生成较低分辨率的场显示图像,该较低分辨率的场显示图像包括场显示器中的图像的相应部分的切出。这确保了可操纵显示图像和场图像之间没有干扰。在一个实施例中,当存在切出时,混合器逻辑255将切出的边缘与可操纵图像混合,以确保过渡是平滑的。在另一实施例中,可操纵显示器可用于显示子画面,即覆盖在较低分辨率场图像上的较亮元素。在这种情况下,切出逻辑250和混合器逻辑255两者都不是必需的。在一个实施例中,可以根据需要选择性地激活切出逻辑250和混合器逻辑255。
在一个实施例中,***可以使可操纵显示器210与独立的场显示器280同步。在这种情况下,在一个实施例中,同步逻辑272使显示器同步。在一个实施例中,独立场显示器280与可调节镜或可操纵显示器210的其它定位元件同步。这导致显示器的同步。场显示器280可以接收定位数据。在一个实施例中,在这种情况下可以没有切出。
在一个实施例中,处理***238可以包括用于可操纵显示器210的光学失真***275,其失真从图像的中心到边缘增加。这种有意的失真将导致从图像中心移动到边缘的像素的感知尺寸增大。这种感知分辨率的变化将减少所需的处理量,因为需要更少的像素来覆盖可操纵显示图像的相同角度区域。光学失真可以有助于可操纵显示器210和场显示器280之间的混合。在另一个实施例中,包括光学失真***275的可操纵显示器210可以在没有场显示器的情况下使用。它还提供了更容易的光学设计,并且节省了对混合的处理。
在一个实施例中,可变分辨率高失真图像在中心和边缘之间具有大的比率。该显示器的总FOV将很大(至多180度)。
在一个实施例中,滚降(roll-off)逻辑277在显示器的边缘提供滚降。在一个实施例中,滚降可以包括分辨率滚降(朝向显示区域的边缘降低分辨率)。在一个实施例中,这可以通过光学失真***275的放大来实现。滚降在一个实施例中包括亮度和/或对比度滚降(朝向边缘降低亮度和/或对比度)。这种滚降被设计成减小显示器边缘的陡度。在一个实施例中,滚降可以被设计成滚降到“无”,即从全亮度/对比度逐渐降低到灰色或黑色或环境色。在一个实施例中,当没有相关联的场显示器时,可操纵显示器210可以使用滚降逻辑277。在一个实施例中,当***中有场显示器时,滚降逻辑297可以是场显示280的一部分。
图3示出了位置元件300的一个实施例。在一个实施例中,位置元件包括用于用户的右眼和左眼的单独的位置元件。在一个实施例中,***可以为每只眼睛使用两个或多个可操纵元件310,而不是为每只眼睛使用一个可操纵元件310。在一个实施例中,双元件***可以包括用于每只眼睛的X轴移动和Y轴移动的分离的可操纵元件310。在一个实施例中,可以使用两个或多个可操纵元件310,每个可操纵元件310具有一个或多个可操纵轴。
可操纵元件310可以包含镜、棱镜、菲涅耳透镜或其它元件中的一个或多个,其位置使得光可以被引导到特定位置。在一个实施例中,可操纵元件310是曲面镜。
X轴附件320提供用于绕X轴旋转的物理移动元件,而Y轴附件350提供用于绕Y轴枢转的移动元件。在一个实施例中,移动元件是枢轴150和万向节155。
X轴控制器330和Y轴控制器360控制移动,而X轴致动器340和Y轴致动器370提供物理移动。一个实施例中的压电元件是控制器。移动数据来自微处理器390。在一个实施例中,微处理器390是可操纵显示器的主控制电路的一部分。
在一个实施例中,该***还包括位置验证器380,其验证可操纵元件310沿X和Y轴的实际位置。在一个实施例中,验证器380包含磁传感器,其感测与可移动元件相关联的磁体的移动。在另一个实施例中,验证器380可以耦合到致动器340、370或附件320、350,并且基于支撑可操纵元件310的元件的物理位置来确定可操纵元件310的位置。可以使用确定可操纵元件310的实际位置的其它方法。
在一个实施例中,验证器380向微处理器390提供数据。微处理器可以将来自控制器330、360的数据与来自位置验证器380的数据进行比较。这可以用于重新校准,以及识别可操纵元件310的定位问题。在一个实施例中,为了启用位置验证器380,可操纵元件310的底部具有由位置验证器380用来确定可操纵元件310的实际位置的标记。
图4C示出了显示器随时间移动的一个实施例。在一个实施例中,当用户的眼睛移动时,移动可以对应于用户的中央凹的位置。在任何时刻,都存在一个小区域,图像被显示到该小区域。高分辨率的5度显示器(在一个实施例中)的位置聚焦在用户视场的中心。在一个实施例中,低分辨率场图像提供大视场。但是因为中央凹区域之外的眼睛的相对分辨率较低,所以用户感觉到该组合图像,包括小的高分辨率可操纵图像和较大的低分辨率场图像,作为大视场上的高分辨率。
图4A是利用可操纵显示器的一个实施例的流程图。该过程开始于框410。在一个实施例中,在该过程开始之前,将显示***与用户匹配。该初始设置包括确定瞳孔间距(IPD)和所需的任何处方,以确保用户的“基线”显示是准确的。
在框415,跟踪用户的眼睛。在一个实施例中,IR摄像机用于跟踪眼睛。在一个实施例中,眼睛跟踪识别用户的凝视向量,例如用户正在关注的地方。
在框420,***计算用户的凝视向量。眼睛跟踪可以识别左眼和右眼凝视向量/角度以及凝视中心(从L/R眼睛凝视向量导出)。在一个实施例中,眼睛跟踪可以确定左眼和右眼相对于基线参考系的位置(X、Y、Z)和定向(滚动、俯仰、偏航)。在一个实施例中,当显示器最初与用户匹配并且确定用户的瞳孔间距、屈光度和其它相关数据时,确定基线参考帧。
在框420,基于凝视向量数据来确定中央凹的位置。在一个实施例中,中央凹位置包括每只眼睛的坐标(X、Y、Z)和定向(滚动、俯仰、偏航)。
在框425,该过程确定可操纵显示器是否应当被重新定位。这是基于将可操纵显示器的当前位置与用户的凝视向量或图像的预期位置进行比较。如果它们未对准,则***确定可操纵显示器应该被重新定位。如果是,则在框430,重新定位显示器。显示器的重新定位被设计成使得可操纵显示器的移动不被用户感知。在一个实施例中,这可以这样来实现:通过使用足够快的反镜以用户不能察觉的方式完成移动。在一个实施例中,这可以通过将移动定时为用户的眨眼或眼睛移动来实现。在一个实施例中,如果预期的显示被移动超过特定距离,则显示器在移动期间黑屏(blanked)。这确保用户不会察觉到移动。在一个实施例中,特定距离大于0.5度。在一个实施例中,如果在用户眨眼的同时发生移动,则预期显示不黑屏。注意,尽管使用了术语“重新定位”,但是这对应于定位元件的移动,以调整显示器的位置。
然后过程继续到框435,无论显示器是否被重新定位。
在框435,任选地,***切出场显示图像的将被定位在与可操纵显示图像相同的位置的部分。这防止场显示器干扰可操纵显示器。在一个实施例中,在渲染引擎处执行切出。在另一个实施例中,图像可以是一个子画面或其它明亮的图像元素,它不需要切出即可清楚。在这种情况下,可以跳过该框。在一个实施例中,如果用户眼睛跟踪指示用户的凝视已经从基线参考移动很远,则跳过切出。基线参考是用户的默认凝视位置,从该位置跟踪凝视的移动。从基线参考的实质移动意味着***不能确定用户的正确凝视位置。在这种情况下,在一个实施例中,可操纵显示图像可以被丢弃,或者可操纵显示器可以被暂时关闭。在一个实施例中,这可以通过使可操纵显示器黑屏以使得用户看不到来实现。在各种实施例中,这可通过禁用背光、禁用激光器或LED照明源、消隐像素或通过另一方法来实现。
在框440,在一个实施例中,混合可操纵显示图像和场图像之间的边缘。这确保了场图像和可操纵显示图像之间的平滑和不可察觉的过渡。在框445,向用户显示混合图像,从而合并可操纵显示器和场显示器。该过程然后返回到框410以继续跟踪和显示。注意,虽然该描述讨论了可操纵显示图像和场图像,但是所考虑的图像包括视频的连续图像。还要注意,虽然本说明书在一些实施例中利用可操纵显示器和场显示器的组合,但是可操纵显示器可以在不存在场显示器的情况下使用。在这些情况下,该过程可以仅包括框415至430。
图4B示出了当显示器位置验证指示可操纵显示器的实际位置与预期位置不匹配时可以采取的校正动作的一个实施例。该过程开始于框450。
在框452,启动可操纵显示器定位。在一个实施例中,这对应于图4A的框430。回到图4B,在框454,验证可操纵显示器的实际位置。在一个实施例中,使用一个或多个传感器来确定可操纵显示器的位置和定向。在一个实施例中,传感器可以包括摄像机、检测可调镜或其它定位元件的位置的机械元件等。在一个实施例中,这由图3的位置验证器380完成。
在框456,该过程确定可操纵显示器是否被正确定位。在所计算的位置中正确定位具有可操纵显示器,以为用户在适当的位置显示图像。如果可操纵显示器被正确定位,则在框464,显示图像。在一个实施例中,这包括显示混合图像,该混合图像包括在所计算的位置处的可操纵显示图像和相关联的场显示图像,如以上关于图4A所讨论的。然后过程在框475结束。
如果在框456,过程确定可操纵显示器未被正确定位,则过程继续到框458。
在框458,过程确定是否有足够的时间来重新定位可操纵显示器。该确定基于需要移动的距离、移动速度和直到处理***发送下一图像的时间。
在一个实施例中,它还取决于用户的眼睛移动。在一个实施例中,当没有感知到图像时,***优选地在用户眨眼时移动可操纵显示器。在一个实施例中,重新定位发生在显示器的黑屏周期内。例如,沿一个坐标仅移动一度比在三维中显著地移动可操纵显示器花费更少的时间。如果有足够的时间,则过程返回到框452以重新定位可操纵显示器。否则,过程继续到框460。
在框460,过程确定可操纵显示器的实际位置是否在预期位置的范围内。在一个实施例中,上下文中的“在范围内”意味着***能够针对差异调整显示。如果在范围内,则过程继续到框462。
在框462,调整被处理用于在可操纵图像上显示的数据,以便呈现在实际位置。然后在框464显示调整后的图像。例如,在一个实施例中,如果位置差异非常小,则原始计算的图像可能被呈现在错误的位置,而不引起视觉伪像。在另一实施例中,可以调整图像以在实际位置适当地呈现。例如,图像可以被剪裁、变亮、扭曲、对比度调整、色度坐标(白点)调整、剪裁和横向移动以考虑位置差异。
在一个实施例中,对于混合显示,可以移动或改变边缘混合的径向位置。在一个实施例中,***可以过渲染(over-render),例如为5度可操纵显示器渲染5.5度的可视图像,允许0.5度的偏移而不需要重新渲染。
如果可操纵显示器不在范围内,则在框466,在一个实施例中,将帧数据发送到场显示器以供呈现。在框468,在一个实施例中,不显示可操纵显示图像。在一个实施例中,帧被丢弃。在另一实施例中,可操纵显示器暂时黑屏。在一个实施例中,如果用户眼睛跟踪指示用户的凝视已经移动到基线参考之外太远,则可操纵显示器不被认为在范围内。
在框470,在一个实施例中,场显示图像被渲染,而没有图像切出并且没有可操纵显示图像的显示或渲染。在框472,显示场显示图像。然后该过程结束。
图5是利用可操纵显示器的一个实施例的流程图,其中定位不依赖于用户的凝视向量。例如,当显示器是平视型显示器,或子画面,或其它暗显示器上的唯一亮元件时,这可以适用。可以发现提供不基于用户凝视向量的定位的其它原因。在一个实施例中,该配置可以与上述图4A的配置组合,其中定位基于凝视向量。即,同一***可以在基于凝视向量和不基于凝视向量之间变化。
该过程开始于框510。在一个实施例中,在该过程开始之前,将显示***与用户匹配。
在框515,确定可操纵显示器的位置。该确定可以基于外部数据(例如在虚拟现实显示器中)或其它确定来进行。在一个实施例中,可以基于处理器数据做出该决定。
在框520,该过程确定可操纵显示器的当前位置。
在框525,该过程确定可操纵显示器是否应当被重新定位。这是基于将可操纵显示器的当前位置与图像的预期位置进行比较。如果它们未对准,则***确定可操纵显示器应该被重新定位。如果是,则在框530,触发显示器重新定位。在一个实施例中,显示器的重新定位被设计为使得可操纵显示器的移动不被用户感知。在一个实施例中,如上所述,这可以这样来实现:通过使用足够快的反镜以用户不能察觉的方式完成移动。在一个实施例中,这可以通过将移动定时为用户的眨眼或眼睛移动来实现。在一个实施例中,如果预期的显示被移动超过特定距离,则显示器在移动期间黑屏。这确保用户不会察觉到移动。在一个实施例中,特定距离大于0.5度。在一个实施例中,如果在用户眨眼的同时发生移动,则预期显示不黑屏。注意,尽管使用了术语“重新定位”,但是这对应于定位元件的移动,以调整显示器的位置。
然后过程继续到框535,无论显示器是否被重新定位。
在框535,任选地,***切出场显示图像的将被定位在与可操纵显示图像相同的位置的部分。这防止场显示器干扰可操纵显示器。
在一个实施例中,在渲染引擎处执行切出。在另一个实施例中,图像可以是一个子画面或其它明亮的图像元素,它不需要切出即可清楚。在这种情况下,可以跳过该框。
在框540,在一个实施例中,***确定可操纵显示图像和现场图像之间的边缘是否应当被混合。这确保了场图像和可操纵显示图像之间的平滑和不可察觉的过渡。当没有场显示器时,或者当可操纵显示器是子画面或其它覆盖元素时,这可能不相关。如果***确定应当混合边缘,则在框545,混合边缘。
在框550,向用户显示来自可操纵显示器的图像,从而任选地合并来自场显示器的数据。该过程然后返回到框510以继续跟踪和显示。注意,虽然该描述讨论了可操纵显示图像和场图像,但是所考虑的图像包括视频的连续图像。还要注意,虽然本说明书在一些实施例中利用可操纵显示器和场显示器的组合,但是可操纵显示器可以在不存在场显示器的情况下使用。
图6是控制可操纵元件的使用的一个实施例的流程图。在一个实施例中,***确定眼睛移动的类型:眼迅速扫视或平滑追踪。对于平滑追踪,在一个实施例中,***一次移动一个帧,并且匹配眼睛移动,使得可操纵显示器可以在移动期间打开。在一个实施例中,这可以在每帧移动至多3度时完成。对于更快的眼睛移动,在一个实施例中,可操纵显示器可以黑屏。对于眼迅速扫视移动,在一个实施例中,***使可操纵显示器在移动时暂时黑屏,以避免视觉像差。***被设计成具有比用户眼睛快的稳定时间。因此,显示器被设计成在眼迅速扫视移动之后眼睛已经稳定时再次激活,并且返回到全分辨率。图6示出了为眼迅速扫视或其它快速移动而移动可操纵显示器的一个实施例。
该过程开始于框605。在一个实施例中,只要可操纵显示器是活动的,该过程就运行。在框610,针对可操纵显示器,监视用户凝视位置。在一个实施例中,可操纵显示器被导向用户的中央凹。
在框615,确定新的凝视位置。在一个实施例中,使用对准用户眼睛的摄像机来识别凝视位置。
在框620,识别可操纵显示器匹配新凝视向量所需的移动程度。
在框625,确定将可操纵显示器移动到新位置的时间。在一个实施例中,使用查找表。在一个实施例中,所确定的“凝视向量”可以是在某一时间内的多个凝视向量,如在平滑追踪眼睛移动中。
在框630,可操纵显示器黑屏,并且开始移动。在一个实施例中,移动仅在可操纵显示器黑屏之后开始。在一个实施例中,可操纵显示器可以通过关闭光源而黑屏。在另一个实施例中,可操纵显示器可以通过使镜黑屏来关闭。在另一实施例中,可操纵显示器可以通过禁用背光或照明来黑屏。在另一实施例中,可操纵显示器可以通过将像素设置为黑色来黑屏。
在框635,移动可操纵显示器。在此期间,由于可操纵显示器黑屏了,在一个实施例中,填充场显示器以覆盖整个显示区域。在另一个实施例中,可能没有场显示器,在这种情况下这是不适用的。
在一个实施例中,在框640,该过程确定完成所计算的移动的时间是否已经过去。如果否,则过程在框635继续移动。
在一个实施例中,如果时间已经过去,则在框645,***提供激活可操纵显示器的信号。在另一个实施例中,信号定时可以基于来自微处理器和位置验证器的移动数据。
当在框645接收到激活显示器的信号时,在框650,该过程验证显示器已停止移动并已稳定。“稳定”意味着显示器是稳定的并且不会由于移动而振动。在一个实施例中,这是由显示器中的微处理器做出的闭环确定。
如果显示器已经稳定,则在框655,可操纵显示器被激活。在一个实施例中,如果存在场显示器,则可以针对其中示出可操纵显示图像的区域将其切出。该过程然后继续到框610,以继续监视用户的凝视位置,并确定新的凝视位置。这样,可操纵显示器被移动以匹配用户的凝视,同时不提供移动的视觉指示。
在前述说明书中,已经参考本发明的具体示范性实施例描述了本发明。然而,显而易见的是,在不脱离如所附权利要求中阐述的本发明的更宽的精神和范围的情况下,可以对其进行各种修改和改变。因此,说明书和附图被认为是说明性的而不是限制性的。

Claims (19)

1.一种可操纵显示***,其包含:
显示元件;
位置元件,其用于定位由所述显示元件生成的图像,所述位置元件包含:
可操纵元件;
X轴控制器,其用于使所述可操纵元件绕X轴枢转;
Y轴控制器,其用于使所述可操纵元件绕Y轴枢转;
其中,所述可操纵元件的移动使得用户不会察觉到运动;
使得所述可操纵元件具有使可操纵显示器能够被定位和重新定位在所述用户的视场内的多个位置处的运动范围。
2.根据权利要求1所述的可操纵显示***,其进一步包含:
位置验证器,其用于验证所述可操纵元件的实际位置,并在所述实际位置不是预期位置时调整可操纵显示图像数据。
3.根据权利要求1所述的可操纵显示***,其中,所述可操纵元件包含以下中的一个或多个:可调镜、可调棱镜、声光调制器、可调显示面板、曲面镜、衍射元件和菲涅耳反射器。
4.根据权利要求1所述的可操纵显示***,其中:
所述可操纵显示器具有至少1度的单目视场,所述单目视场位于至少20度的可扫描视场内。
5.根据权利要求1所述的可操纵显示***,其进一步包含:
致动器,其用于移动所述可操纵元件,所述致动器包含压电元件、磁性元件、纳米马达中的一个。
6.根据权利要求5所述的可操纵显示***,其中,所述致动器具有+/-0.75弧分的绝对精度和0.06弧分的相对精度。
7.根据权利要求5所述的可操纵显示***,其中,稳定时间小于2ms。
8.根据权利要求1所述的可操纵显示***,其中,所述可操纵元件是直径在5mm和15mm之间的镜。
9.根据权利要求1所述的可操纵显示***,其中,所述位置元件小于5mm×12mm×12mm。
10.一种可操纵显示***,其包含:
可移动的显示元件;
位置元件,其用于移动所述显示元件以定位由所述显示元件生成的图像,所述位置元件包含:
柔性臂,其支撑所述可移动的显示元件;
控制器,其使用所述柔性臂使可操纵元件围绕轴线枢转;
其中,所述可操纵元件的移动使得用户不会察觉到运动;
使得所述可操纵元件具有使可操纵显示器能够被定位和重新定位在所述用户的视场内的多个位置处的运动范围。
11.根据权利要求10所述的可操纵显示***,其进一步包含:
位置验证器,其用于验证所述可操纵元件的实际位置,并在所述实际位置不是预期位置时调整可操纵显示图像数据。
12.根据权利要求10所述的可操纵显示***,其中,所述可操纵元件包含以下中的一个或多个:可调镜、可调棱镜、声光调制器、可调显示面板、曲面镜、衍射元件和菲涅耳反射器。
13.根据权利要求10所述的可操纵显示***,其中:
所述可操纵显示器具有至少1度的单目视场,所述单目视场位于至少20度的可扫描视场内。
14.根据权利要求10所述的可操纵显示***,其进一步包含:
致动器,其用于移动所述可操纵元件,所述致动器包含压电元件、磁性元件、纳米马达中的一个。
15.根据权利要求14所述的可操纵显示***,其中,所述致动器具有+/-0.75弧分的绝对精度和0.06弧分的相对精度。
16.根据权利要求14所述的可操纵显示***,其中,稳定时间小于2ms。
17.根据权利要求10所述的可操纵显示***,其中,所述可操纵元件是直径在5mm和15mm之间的镜。
18.根据权利要求10所述的可操纵显示***,其中,所述位置元件小于5mm×12mm×12mm。
19.一种可操纵显示***,其包含:
显示元件;
两个枢轴,所述显示元件能够围绕所述枢轴在所有方向上移动;
压电元件,其驱动所述枢轴,以移动所述显示元件;
磁体和相关联的磁传感器,其用于确定所述显示元件的位置;
其中所述磁体的位置使所述压电元件平衡,使得所述显示元件在重量上平衡。
CN201980080626.9A 2018-12-07 2019-12-06 可操纵定位元件 Pending CN113196132A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201862777061P 2018-12-07 2018-12-07
US62/777,061 2018-12-07
US201962902377P 2019-09-18 2019-09-18
US62/902,377 2019-09-18
PCT/US2019/065101 WO2020118276A1 (en) 2018-12-07 2019-12-06 Steerable positioning element

Publications (1)

Publication Number Publication Date
CN113196132A true CN113196132A (zh) 2021-07-30

Family

ID=70970446

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980080626.9A Pending CN113196132A (zh) 2018-12-07 2019-12-06 可操纵定位元件

Country Status (7)

Country Link
US (2) US11169383B2 (zh)
EP (1) EP3891546A4 (zh)
JP (1) JP2022514217A (zh)
KR (1) KR20210097190A (zh)
CN (1) CN113196132A (zh)
CA (1) CA3122089A1 (zh)
WO (1) WO2020118276A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11181979B2 (en) * 2019-01-08 2021-11-23 Avegant Corp. Sensor-based eye-tracking using a holographic optical element

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080015553A1 (en) * 2006-07-12 2008-01-17 Jaime Zacharias Steering laser treatment system and method of use
US20130114146A1 (en) * 2011-11-04 2013-05-09 Honeywell International Inc. Steerable near-to-eye display and steerable near-to-eye display system
US20130208330A1 (en) * 2012-02-14 2013-08-15 Fujifilm Corporation Mirror driving device and method of controlling the device
CN103261943A (zh) * 2010-12-28 2013-08-21 洛克希德马丁公司 采用一个或多个菲涅尔透镜的头戴式显示装置
US20160363841A1 (en) * 2015-06-09 2016-12-15 Seiko Epson Corporation Optical device and image display apparatus
CN108474949A (zh) * 2015-12-24 2018-08-31 星风Ip公司 虚拟现实头戴式显示器
US20180284451A1 (en) * 2017-03-27 2018-10-04 Avegant Corp. Steerable High-Resolution Display

Family Cites Families (98)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4924522A (en) 1987-08-26 1990-05-08 Ncr Corporation Method and apparatus for displaying a high resolution image on a low resolution CRT
US5035500A (en) 1988-08-12 1991-07-30 Rorabaugh Dale A Automated ocular perimetry, particularly kinetic perimetry
US6008781A (en) 1992-10-22 1999-12-28 Board Of Regents Of The University Of Washington Virtual retinal display
JPH08313843A (ja) * 1995-05-16 1996-11-29 Agency Of Ind Science & Technol 視線追従方式による広視野高解像度映像提示装置
US8330812B2 (en) 1995-05-30 2012-12-11 Simulated Percepts, Llc Method and apparatus for producing and storing, on a resultant non-transitory storage medium, computer generated (CG) video in correspondence with images acquired by an image acquisition device tracked in motion with respect to a 3D reference frame
US6204974B1 (en) 1996-10-08 2001-03-20 The Microoptical Corporation Compact image display system for eyeglasses or other head-borne frames
US6097353A (en) 1998-01-20 2000-08-01 University Of Washington Augmented retinal display with view tracking and data positioning
JP2003502711A (ja) 1999-06-21 2003-01-21 ザ マイクロオプティカル コーポレイション 軸から外れている光学設計を使用する接眼レンズ・ディスプレイ・レンズ・システム
US6275326B1 (en) * 1999-09-21 2001-08-14 Lucent Technologies Inc. Control arrangement for microelectromechanical devices and systems
US6411751B1 (en) * 1999-10-08 2002-06-25 Lucent Technologies Inc. System and method for training an optical cross-connect comprising steerable switching elements
US6744173B2 (en) * 2000-03-24 2004-06-01 Analog Devices, Inc. Multi-layer, self-aligned vertical combdrive electrostatic actuators and fabrication methods
JP4374708B2 (ja) 2000-03-30 2009-12-02 株式会社デンソー 網膜走査ディスプレイ装置及び光走査装置
US7009752B1 (en) * 2003-01-21 2006-03-07 Lockheed Martin Corporation Actively-supported multi-degree of freedom steerable mirror apparatus and method
NZ537849A (en) 2005-01-21 2007-09-28 Peter James Hilton Direct Retinal Display projecting a scanned optical beam via diverging and converging reflectors
US8203702B1 (en) * 2005-06-13 2012-06-19 ARETé ASSOCIATES Optical system
JP4735234B2 (ja) 2005-12-19 2011-07-27 ブラザー工業株式会社 画像表示システム
US8246170B2 (en) 2007-11-21 2012-08-21 Panasonic Corporation Display apparatus
IL196078A (en) 2007-12-20 2014-09-30 Raytheon Co Imaging system
WO2009094587A1 (en) * 2008-01-23 2009-07-30 Deering Michael F Eye mounted displays
JP2009182754A (ja) 2008-01-31 2009-08-13 Sanyo Electric Co Ltd 画像処理装置
WO2009131626A2 (en) * 2008-04-06 2009-10-29 David Chaum Proximal image projection systems
US20100149073A1 (en) * 2008-11-02 2010-06-17 David Chaum Near to Eye Display System and Appliance
US7786648B2 (en) 2008-08-18 2010-08-31 New Scale Technologies Semi-resonant driving systems and methods thereof
US20110075257A1 (en) 2009-09-14 2011-03-31 The Arizona Board Of Regents On Behalf Of The University Of Arizona 3-Dimensional electro-optical see-through displays
US20110141225A1 (en) 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama Imaging Based on Low-Res Images
US9128281B2 (en) 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
TW201222009A (en) * 2010-05-21 2012-06-01 Corning Inc Systems and methods for reducing speckle using diffusing surfaces
US9632315B2 (en) 2010-10-21 2017-04-25 Lockheed Martin Corporation Head-mounted display apparatus employing one or more fresnel lenses
US9690099B2 (en) 2010-12-17 2017-06-27 Microsoft Technology Licensing, Llc Optimized focal area for augmented reality displays
US9513490B2 (en) 2011-01-10 2016-12-06 Eastman Kodak Company Three channel delivery of stereo images
BR112014005192A2 (pt) 2011-09-07 2017-03-21 Improved Vision Systems (I V S ) Ltd método e sistema para o tratamento de deficiência visual
US20130100176A1 (en) 2011-10-21 2013-04-25 Qualcomm Mems Technologies, Inc. Systems and methods for optimizing frame rate and resolution for displays
US9779643B2 (en) 2012-02-15 2017-10-03 Microsoft Technology Licensing, Llc Imaging structure emitter configurations
US20130286053A1 (en) 2012-04-25 2013-10-31 Rod G. Fleck Direct view augmented reality eyeglass-type display
US9435520B2 (en) * 2012-08-16 2016-09-06 Ascendant Engineering Solutions Gimbal systems providing high-precision imaging capabilities in a compact form-factor
IL221863A (en) * 2012-09-10 2014-01-30 Elbit Systems Ltd Digital video photography system when analyzing and displaying
US9788714B2 (en) 2014-07-08 2017-10-17 Iarmourholdings, Inc. Systems and methods using virtual reality or augmented reality environments for the measurement and/or improvement of human vestibulo-ocular performance
WO2014155288A2 (en) 2013-03-25 2014-10-02 Ecole Polytechnique Federale De Lausanne (Epfl) Method and apparatus for head worn display with multiple exit pupils
DE102013208625A1 (de) 2013-05-10 2014-11-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiapertur-projektionsdisplay und einzelbilderzeuger für ein solches
GB2510001A (en) * 2013-07-05 2014-07-23 Digital Barriers Services Ltd Terahertz detector scanning mechanism
US10228242B2 (en) 2013-07-12 2019-03-12 Magic Leap, Inc. Method and system for determining user input based on gesture
US9335548B1 (en) 2013-08-21 2016-05-10 Google Inc. Head-wearable display with collimated light source and beam steering mechanism
US11402629B2 (en) 2013-11-27 2022-08-02 Magic Leap, Inc. Separated pupil optical systems for virtual and augmented reality and methods for displaying images using same
JP2015132747A (ja) 2014-01-15 2015-07-23 セイコーエプソン株式会社 プロジェクター
US9766463B2 (en) 2014-01-21 2017-09-19 Osterhout Group, Inc. See-through computer display systems
US10203762B2 (en) 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US10068311B2 (en) 2014-04-05 2018-09-04 Sony Interacive Entertainment LLC Varying effective resolution by screen location by changing active color sample count within multiple render targets
US9588408B1 (en) 2014-05-15 2017-03-07 Autofuss Methods and systems for projecting a target portion of an image at a higher resolution
US9874744B2 (en) 2014-06-25 2018-01-23 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays
EP3163422B1 (en) 2014-06-30 2020-02-12 Sony Corporation Information processing device, information processing method, computer program, and image processing system
US20160077338A1 (en) 2014-09-16 2016-03-17 Steven John Robbins Compact Projection Light Engine For A Diffractive Waveguide Display
GB201417208D0 (en) 2014-09-30 2014-11-12 Ibvision Ltd Method Software And Apparatus For Testing A Patiants Visual Field
IL235073A (en) 2014-10-07 2016-02-29 Elbit Systems Ltd Head-mounted view of enlarged images that are locked on an object of interest
EP3006975A3 (en) 2014-10-08 2016-05-25 Optotune AG Device for tilting an optical element, particularly a mirror
EP3234642B1 (en) * 2014-12-19 2020-02-19 Windar Photonics A/S Lidar based on mems
KR20180035934A (ko) 2014-12-23 2018-04-06 메타 컴퍼니 관심 객체의 임의의 깊이에 있는 동일한 평면으로 시각적 조절과 시각적 수렴을 결합시키는 장치, 방법 및 시스템
US10241328B2 (en) 2014-12-26 2019-03-26 Cy Vision Inc. Near-to-eye display device with variable resolution
US10013808B2 (en) 2015-02-03 2018-07-03 Globus Medical, Inc. Surgeon head-mounted display apparatuses
US10284118B2 (en) 2015-02-06 2019-05-07 New Scale Technologies, Inc. Two-axis angular pointing device and methods of use thereof
EP3256900A4 (en) 2015-02-12 2018-10-31 Google LLC Combining a high resolution narrow field display and a mid resolution wide field display
US10078922B2 (en) 2015-03-11 2018-09-18 Oculus Vr, Llc Eye tracking for display resolution adjustment in a virtual reality system
US20160274365A1 (en) 2015-03-17 2016-09-22 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays with heterogeneous display quality
US10210844B2 (en) 2015-06-29 2019-02-19 Microsoft Technology Licensing, Llc Holographic near-eye display
JP2017028510A (ja) 2015-07-23 2017-02-02 日本放送協会 多視点映像生成装置及びそのプログラム、並びに、多視点映像生成システム
KR102000888B1 (ko) 2015-08-07 2019-10-01 애플 인크. 이미지들의 스트림을 디스플레이하기 위한 시스템 및 방법
EP4380150A3 (en) 2015-10-08 2024-07-24 InterDigital VC Holdings, Inc. Methods and systems of automatic calibration for dynamic display configurations
US10726619B2 (en) 2015-10-29 2020-07-28 Sony Interactive Entertainment Inc. Foveated geometry tessellation
US11109916B2 (en) 2015-11-09 2021-09-07 Digital Surgicals Pte Ltd Personalized hand-eye coordinated digital stereo microscopic systems and methods
US20170188021A1 (en) 2015-12-24 2017-06-29 Meta Company Optical engine for creating wide-field of view fovea-based display
WO2017113117A1 (zh) * 2015-12-29 2017-07-06 深圳市柔宇科技有限公司 头戴式显示设备
EP3405828A1 (en) 2016-01-22 2018-11-28 Corning Incorporated Wide field personal display
US20170255020A1 (en) 2016-03-04 2017-09-07 Sharp Kabushiki Kaisha Head mounted display with directional panel illumination unit
US20170255012A1 (en) 2016-03-04 2017-09-07 Sharp Kabushiki Kaisha Head mounted display using spatial light modulator to move the viewing zone
US10089453B2 (en) 2016-03-07 2018-10-02 Magic Leap, Inc. Blue light adjustment for biometric identification
US10438400B2 (en) 2016-03-08 2019-10-08 Nvidia Corporation Perceptually-based foveated rendering using a contrast-enhancing filter
US10192528B2 (en) 2016-03-31 2019-01-29 Sony Interactive Entertainment Inc. Real-time user adaptive foveated rendering
US10460704B2 (en) 2016-04-01 2019-10-29 Movidius Limited Systems and methods for head-mounted display adapted to human visual mechanism
GB2553744B (en) 2016-04-29 2018-09-05 Advanced Risc Mach Ltd Graphics processing systems
US20190278102A1 (en) * 2016-07-25 2019-09-12 Optotune Ag Optical device for enhancing resolution of an image using multistable states
US20180031849A1 (en) * 2016-07-29 2018-02-01 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Augmented reality head-up display road correction
US10255714B2 (en) 2016-08-24 2019-04-09 Disney Enterprises, Inc. System and method of gaze predictive rendering of a focal area of an animation
US9779478B1 (en) 2016-10-04 2017-10-03 Oculus Vr, Llc Rendering composite content on a head-mounted display including a high resolution inset
US10140695B2 (en) 2016-10-04 2018-11-27 Facebook Technologies, Llc Head-mounted compound display including a high resolution inset
EP3542359A4 (en) 2016-11-16 2019-12-18 Magic Leap, Inc. DISPLAY ARRANGEMENT WITH MULTIPLE RESOLUTION FOR HEAD-MOUNTED DISPLAY SYSTEMS
US9711072B1 (en) 2016-12-01 2017-07-18 Varjo Technologies Oy Display apparatus and method of displaying using focus and context displays
US9711114B1 (en) 2016-12-01 2017-07-18 Varjo Technologies Oy Display apparatus and method of displaying using projectors
US11050364B2 (en) 2016-12-09 2021-06-29 New Scale Technologies, Inc. Semi-resonant motion devices and methods thereof
US10162356B2 (en) * 2016-12-15 2018-12-25 Futurewei Technologies, Inc. Path selection for autonomous vehicles
GB2560306B (en) 2017-03-01 2020-07-08 Sony Interactive Entertainment Inc Image processing
US20180262758A1 (en) 2017-03-08 2018-09-13 Ostendo Technologies, Inc. Compression Methods and Systems for Near-Eye Displays
US20180269266A1 (en) 2017-03-16 2018-09-20 Intel Corporation Foveated displays for virtual and augmented reality
US11644669B2 (en) 2017-03-22 2023-05-09 Magic Leap, Inc. Depth based foveated rendering for display systems
WO2019104046A1 (en) 2017-11-27 2019-05-31 University Of Central Florida Research Optical display system, method, and applications
JP7225233B2 (ja) 2017-12-11 2023-02-20 マジック リープ, インコーポレイテッド 導波管照明器
US20210293931A1 (en) * 2018-07-26 2021-09-23 Innoviz Technologies Ltd. Lidar system having a mirror with a window
US11209650B1 (en) 2018-09-06 2021-12-28 Facebook Technologies, Llc Waveguide based display with multiple coupling elements for artificial reality
US10866422B2 (en) 2019-02-21 2020-12-15 Microsoft Technology Licensing, Llc Micro LED display system

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080015553A1 (en) * 2006-07-12 2008-01-17 Jaime Zacharias Steering laser treatment system and method of use
CN103261943A (zh) * 2010-12-28 2013-08-21 洛克希德马丁公司 采用一个或多个菲涅尔透镜的头戴式显示装置
US20130114146A1 (en) * 2011-11-04 2013-05-09 Honeywell International Inc. Steerable near-to-eye display and steerable near-to-eye display system
US20130208330A1 (en) * 2012-02-14 2013-08-15 Fujifilm Corporation Mirror driving device and method of controlling the device
US20160363841A1 (en) * 2015-06-09 2016-12-15 Seiko Epson Corporation Optical device and image display apparatus
CN108474949A (zh) * 2015-12-24 2018-08-31 星风Ip公司 虚拟现实头戴式显示器
US20180284451A1 (en) * 2017-03-27 2018-10-04 Avegant Corp. Steerable High-Resolution Display

Also Published As

Publication number Publication date
US11169383B2 (en) 2021-11-09
US20220099982A1 (en) 2022-03-31
EP3891546A1 (en) 2021-10-13
JP2022514217A (ja) 2022-02-10
US11927762B2 (en) 2024-03-12
EP3891546A4 (en) 2022-08-24
KR20210097190A (ko) 2021-08-06
WO2020118276A1 (en) 2020-06-11
US20200183173A1 (en) 2020-06-11
CA3122089A1 (en) 2020-06-11

Similar Documents

Publication Publication Date Title
KR102578929B1 (ko) 조향 가능한 중심와 디스플레이
JP6423945B2 (ja) 表示装置、およびプロジェクタを用いた表示方法
EP3330771B1 (en) Display apparatus and method of displaying using focus and context displays
US9851565B1 (en) Increasing effective eyebox size of an HMD
KR101844883B1 (ko) 관심 객체의 임의의 깊이에 있는 동일한 평면으로 시각적 조절과 시각적 수렴을 결합시키는 장치, 방법 및 시스템
US11480784B2 (en) Binocular display with digital light path length modulation
US8619005B2 (en) Switchable head-mounted display transition
JP2023504373A (ja) 電子ディスプレイの中心窩レンダリングのための予測視線追跡システムおよび方法
KR101895085B1 (ko) 시스루 헤드 마운트 디스플레이용 불투명도 필터
US10873742B2 (en) Head mounted display and image formation optical system
EP3548955B1 (en) Display apparatus and method of displaying using image renderers and optical combiners
CN113412442A (zh) 控制***和渲染管道
CN109997067B (zh) 使用便携式电子设备的显示装置和方法
US11927762B2 (en) Steerable positioning element
JP6741643B2 (ja) 表示装置、およびコンテキストディスプレイとプロジェクタを用いた表示方法
JP2004280112A (ja) 画像表示装置
US10620432B1 (en) Devices and methods for lens position adjustment based on diffraction in a fresnel lens
US10520729B1 (en) Light scattering element for providing optical cues for lens position adjustment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination