CN114730010A - 利用飞行时间信息增强基于三角测量的三维距离测量 - Google Patents

利用飞行时间信息增强基于三角测量的三维距离测量 Download PDF

Info

Publication number
CN114730010A
CN114730010A CN202080083436.5A CN202080083436A CN114730010A CN 114730010 A CN114730010 A CN 114730010A CN 202080083436 A CN202080083436 A CN 202080083436A CN 114730010 A CN114730010 A CN 114730010A
Authority
CN
China
Prior art keywords
light
distance
estimated distance
processing system
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202080083436.5A
Other languages
English (en)
Other versions
CN114730010B (zh
Inventor
木村昭辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Magik Eye Inc
Original Assignee
Magik Eye Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Magik Eye Inc filed Critical Magik Eye Inc
Publication of CN114730010A publication Critical patent/CN114730010A/zh
Application granted granted Critical
Publication of CN114730010B publication Critical patent/CN114730010B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/46—Indirect determination of position data
    • G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • G01B11/026—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring distance between sensor and object
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2513—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/08—Systems determining position data of a target for measuring distance only
    • G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483—Details of pulse systems
    • G01S7/486—Receivers
    • G01S7/4865—Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Measurement Of Optical Distance (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

一种示例方法包括使距离传感器将光图案投影到物体上，使距离传感器获取物体上的光图案的图像，检测成像传感器上的图案的第一光点的图像位置，基于图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离，使距离传感器朝向物体发射光脉冲，使距离传感器获取光脉冲的反射部分的图像，基于脉冲的飞行时间计算距离传感器与物体之间的第三估计距离，以及基于第一估计距离、第二估计距离和第三估计距离计算距离传感器与物体之间的第四估计距离。

Description

利用飞行时间信息增强基于三角测量的三维距离测量
相关申请的交叉引用
本申请要求2019年12月1日提交的美国临时专利申请序列号62/942,137的优先权，该申请通过引用以其整体并入本文中。
技术领域
本发明一般涉及距离测量，并且更特别地涉及利用飞行时间（TOF）信息增强基于三角测量的三维距离测量。
背景技术
美国专利申请序列号14/920,246、15/149,323和15/149,429描述了距离传感器的各种配置。这样的距离传感器可能在各种各样的应用、包括安全、游戏、无人驾驶车辆的控制以及其它应用中是有用的。
在这些申请中描述的距离传感器包括光投影***（例如，包括激光器、衍射光学元件和/或其它协作组件），其将对于人眼大体上不可见的波长（例如，红外）中的光束投影到视场中。光束展开以创建可以被适当的光接收***（例如，透镜、图像捕获设备和/或其它组件）检测到的点图案（圆点、虚线或其它诸如此类）。当图案入射在视场中的物体上时，从传感器到物体的距离可以基于视场的一个或多个图像中图案的外观（例如，点的位置关系）来计算，所述一个或多个图像可以由传感器的光接收***捕获。也可以确定物体的形状和尺寸。
例如，图案的外观可以随着到物体的距离而改变。作为示例，如果图案包括圆点的图案，则当物体更接近传感器时，圆点可以看起来彼此更接近，并且当物体更远离传感器时，圆点可以看起来彼此更远离。
发明内容
在一个示例中，一种由包括至少一个处理器的处理***施行的方法包括：使距离传感器的光投影***将光图案投影到物体上，其中光图案包括共同形成图案的多个光点；使距离传感器的光接收***获取投影到物体上的光图案的图像；检测光接收***的成像传感器上的所述多个光点中的第一光点的图像位置；基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离；使距离传感器的光投影***朝向物体发射光脉冲；使光接收***获取被物体反射的光脉冲的一部分的图像；基于光脉冲的飞行时间计算距离传感器与物体之间的第三估计距离；以及基于第一估计距离、第二估计距离和第三估计距离来计算距离传感器与物体之间的第四估计距离。
在另一示例中，一种非暂时性机器可读存储介质编码有由包括至少一个处理器的处理***可执行的指令。当被执行时，所述指令使处理***施行操作，所述操作包括：使距离传感器的光投影***将光图案投影到物体上，其中光图案包括共同形成图案的多个光点；使距离传感器的光接收***获取投影到物体上的光图案的图像；检测光接收***的成像传感器上的所述多个光点中的第一光点的图像位置；基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离；使距离传感器的光投影***朝向物体发射光脉冲；使光接收***获取被物体反射的光脉冲的一部分的图像；基于光脉冲的飞行时间计算距离传感器与物体之间的第三估计距离；以及基于第一估计距离、第二估计距离和第三估计距离来计算距离传感器与物体之间的第四估计距离。
在另一示例中，一种装置包括：包括至少一个处理器的处理***和编码有由处理***可执行的指令的非暂时性机器可读存储介质。当被执行时，所述指令使处理***执行操作，所述操作包括：使距离传感器的光投影***将光图案投影到物体上，其中光图案包括共同形成图案的多个光点；使距离传感器的光接收***获取投影到物体上的光图案的图像；检测光接收***的成像传感器上的所述多个光点中的第一光点的图像位置；基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离；使距离传感器的光投影***朝向物体发射光脉冲；使光接收***获取被物体反射的光脉冲的一部分的图像；基于光脉冲的飞行时间计算距离传感器与物体之间的第三估计距离；以及基于第一估计距离、第二估计距离和第三估计距离来计算距离传感器与物体之间的第四估计距离。
附图说明
图1A是图示了光点在距离传感器的成像传感器上的图像位置与物距之间的关系的示例图表；
图1B是图示了物距与基于飞行时间的距离计算的距离测量准确度之间的关系的示例图表；
图2例如图示了用于测量到物体的距离的距离传感器的简化示例；
图3是图示了当轨迹重叠时点的图像位置与物距之间的关系的示意图，并且进一步图示了如何可以与经由基于三角测量的测量技术获得的测距结果同时地获得经由基于飞行时间的测量技术获得的测距结果；
图4更详细地图示了图2的成像传感器的示例；
图5是图示了根据本公开的示例的用于计算到物体的距离的示例方法的流程图；以及
图6描绘了用于计算从传感器到物体的距离的示例电子设备的高级框图。
具体实施方式
本公开广义地描述了用于利用飞行时间（TOF）信息增强基于三角测量的三维距离测量的装置、方法和非暂时性计算机可读介质。如上面所讨论的，诸如美国专利申请序列号14/920,246、15/149,323和15/149,429中描述的那些距离传感器之类的距离传感器通过投影光束来确定到物体的距离（以及潜在地，物体的形状和尺寸），该光束展开以在包括物体的视场中创建点图案（例如，圆点、虚线或诸如此类）。光束可以从一个或多个激光光源投影，所述激光光源发射对于人眼大体上不可见但是对于适当的检测器（例如，光接收***的检测器）可见的波长的光。然后，可以使用三角测量技术，基于图案对于检测器的外观，计算到物体的三维距离。
通过三角测量的三维距离测量已经被证明在近范围处是高度准确的，并且因此对于诸如面部认证（例如，基于个体面部特征与授权用户的面部特征的匹配，将个体认证为设备或服务的授权用户）之类的应用是有用的。然而，在较长的距离处，由于难以标识个体光点（即，标识图案中的光点与创建点的光束之间的对应关系，这对于确定光点的位置关系是必要的），因此三角测量可能更容易出错。
例如，如上面所讨论的，投影到物体中的图案中的个体光点的图像位置（即，由成像传感器上的点反射的光的位置）可以基于到物体的距离而变化。作为示例，当物体更接近传感器时，光点可能看起来彼此更接近，并且当物体更远离传感器时，光点可能看起来彼此更远离。个体光点的潜在图像位置的范围可以被称为光点的“轨迹”，并且该轨迹往往是固定的。随着图案中光点数量的增加，个体光点轨迹将重叠的可能性也增加，从而使得更难以确定哪个光点对应于距离传感器投影的哪个光束。如果不能确定光点对应的光束，则那么通过三角测量进行距离测量就变得更加困难。
图1A是图示了光点在距离传感器的成像传感器上的图像位置与物距（即，从距离传感器到其距离正在被测量的物体的距离）之间的关系的示例图表100。特别地，图表100的x轴绘制了光点的位置分辨率，而图表100的y轴绘制了距离分辨率。如上面所讨论的，知道点图像位置与物距之间的关系是能够使用三角测量技术计算物距的关键。
如图1A中可以看到的，轨迹（或者在其内点的图像位置可以移动的范围）随着到物体的距离增加而减小。这意味着，对于基于三角测量的距离测量技术，距离测量可以在更长距离下以高分辨率进行，因为图像位置的移动量在近范围内更大。
图1B是图示了物距与基于飞行时间的距离计算的距离测量准确度之间的关系的示例图表102。特别地，图表102的x轴绘制了时间测量分辨率（即，飞行的往返时间），而图表102的y轴绘制了距离分辨率。如从图1B可以看到的，对于任何物距，基于飞行时间的距离测量计算的测距分辨率（或准确度）是恒定的。
因此，当一起审查图1A和图1B时，可以看到基于三角测量的距离测量技术的距离测量分辨率远远超过基于飞行时间的距离测量技术的距离测量分辨率，至少高达某个物距。
本公开的示例利用基于飞行时间（TOF）的距离测量技术来增强基于三角测量的三维距离测量，以获得改进的准确度。TOF通常通过将调制光投影到物体上并跟踪投影光作为反射光返回所花费的时间来工作；到物体的距离可以作为发射投影光与反射光在传感器上成像之间经过的时间的函数来计算。以这种方式，无论距离如何，都可以以某个分辨率测量距离。尽管该分辨率对于依赖于高级细节的诸如面部认证之类的应用来说通常太粗糙，但是它在确认基于三角测量的结果时可以是有用的。
特别地，在一个示例中，使用基于三角测量的技术进行的距离测量计算可以标识在其中两个相邻轨迹重叠的投影图案区域内检测到的投影图案中的光点。单独使用基于三角测量的距离测量技术，可能难以确定该光点属于哪个轨迹（并且因此属于哪个投影光束）。然而，通过利用基于飞行时间的距离测量计算进行增强，辨别光点所属的轨迹可以是可能的。
图2例如图示了用于测量到物体210的距离的距离传感器200的简化示例。如图示的，距离传感器200一般包括处理器202、包括至少包括第一投影点204的多个投影点的光投影***、以及至少包括成像传感器206和相机透镜214的光接收***206。
投影点204可以包括多个组件，包括光源和衍射光学元件。光源可以包括激光光源，其能够发射对于人眼大体上不可见的波长（例如，红外波长）的光。光源可以发射单个光束，该单个光束被衍射光学元件分成从公共中心点或原点散开的多个光束。
如图示的，投影点204可以将多个光束2081-208n（在下文中单独称为“光束208”或统称为“光束208”）投影到物体210上。当光束208入射到物体210上时，这在物体210上创建多个光点2121-212n（在下文中单独称为“点212”或统称为“点212”），即每个光束208一个光点。光点212共同形成其尺寸已知的预定义图案（诸如网格）。
从距离传感器200到物体210的距离可以变化。图2示出了在第一距离Da和第二距离Db处的物体210。如所示出的，光点212可以在距离Da或Db处入射到物体210上；然而，如上面所讨论的，改变距离将改变由光点212创建的图案的外观。特别地，点的反射图像在成像传感器206上的位置将如所示出的那样变化。
插图218示出了对应于点2121-212n的轨迹2161-216n（在下文中单独称为“轨迹216”或统称为“轨迹216”）如何在成像传感器的表面上重叠。成像传感器的中心被指定为C用于参考。由于轨迹216的重叠，光的给定点212可能出现在成像传感器206上被两个相邻且重叠的轨迹216覆盖的位点上，使得难以肯定地确定给定点212属于哪个轨迹216（并且因此属于哪个光束208）。
图3是图示了当轨迹216重叠时点212的图像位置与物距D之间的关系的示意图，并且进一步图示了如何可以与经由基于三角测量的测量技术获得的测距结果同时地获得经由基于飞行时间的测量技术获得的测距结果。
图3示出了类似于图1A中所图示的多个图像位置-物距曲线，但针对图2中所图示的光点212。例如，曲线3001对应于点2121，曲线3002对应于点2122，并且曲线300n对应于点212n。曲线3001-300n可以单独称为“曲线300”，或者统称为“曲线300”。曲线300之间的间隔或距离由点212之间的角度间隔确定，并且对应于范围302。
图3中的Rt表示基于飞行时间的测量的分辨率。更具体地，Rt指示，对于指定的最近图像位置，当物体（例如，物体210）离距离传感器的距离为Rt时，图像位置移动达Rt。因此，Rt1指示点2121的分辨率，Rt2指示点2122的分辨率，并且Rtn指示点212n的分辨率。
如图示的，点212的轨迹216重叠。因此，当在位置P处检测到给定光点时，所计算的物距将取决于给定光点是否属于轨迹2161、2162或216n而不同。另一方面，由于在位置P处使用飞行时间技术计算的物距是已知的，因此该知识可以帮助标识给定光点属于哪个轨迹216。此外，由于基于飞行时间的测量的分辨率是Rt，因此可以利用飞行时间的分辨率可靠地确定点212的物距。
图4更详细地图示了图2的成像传感器206的示例。更特别地，图4示出了成像传感器206上的图像位置与飞行时间检测位置之间的关系。如图示的，成像传感器206包括布置在网格或矩阵中的多个像素4001-400m（下文中单独称为“像素400”或统称为“像素400”）。每个像素400可以包括例如光电检测器，并且可以进一步包括将反射光聚焦到光电检测器上的透镜（例如，微透镜）和允许特定波长的光穿过到达光电检测器的滤光器。
如图示的，光点402可以被成像到成像传感器206上。（如由基于三角测量的测量技术确定的）光点402的位置可以与成像传感器206的一个或多个像素400重叠。在图4中，阴影像素400表示点402的飞行时间检测位置，而圆形轮廓表示如使用基于三角测量的测量技术所检测的点402的图像位置。还图示了点402所属的轨迹404。在一个示例中，取决于从距离传感器到物体的距离，属于轨迹404的点402可以被成像在落入轨迹404内的成像传感器206上的任何地方。
图5是图示了根据本公开的示例的用于计算到物体的距离的示例方法500的流程图。方法500可以例如由包括至少一个处理器的处理***（诸如距离传感器的处理***）来施行。为了举例，方法500被描述为由处理***施行。
方法500可以在步骤502中开始。在步骤504中，处理***可以使距离传感器的光投影***将光图案投影到物体上，其中光图案包括共同形成图案的多个光点。例如，处理***可以向光投影***发送电子信号，其中电子信号编码指令。如上面所讨论的，光可以具有对于人眼大体上不可见的波长，但是可被距离传感器的成像传感器检测到（例如，红外光）。
光图案可以由距离传感器的光投影***投影的多个光束创建。多个光束可以将多个光点投影到物体上，其中多个光点共同形成光图案或“投影图案”。在一个示例中，多个光点可以布置成包括多行和多列的网格图案。
在另外的示例中，行和列的布置可以是交错的。例如，可以布置行，使得每隔一行的光点沿着在y或垂直方向上穿过光点中心的假想线对齐或共线。相反，任何两个直接相邻的行中的光点将不会对齐（例如，在y或垂直方向上将不存在穿过两行光点中心的假想线）。
类似地，可以布置列，使得每隔一列的光点沿着在x或水平方向上穿过光点中心的假想线对齐或共线。相反，任何两个直接相邻的列的光点将不会对齐（例如，在x或水平方向上将不存在穿过两列光点中心的假想线）。
在步骤506中，处理***可以使距离传感器的光接收***获取物体上的投影图案的图像。例如，处理***可以向光接收***发送电子信号，其中电子信号编码指令。如上面所讨论的，尽管投影图案（例如，形成投影图案的光）对于人眼来说可能是不可见的，但是它对于光接收***的图像传感器来说可能是可见的。
在步骤508中，处理***可以检测光接收***的成像传感器上的多个光点中的第一光点的图像位置。检测第一光点的图像位置可以包括确定由对应于（即产生的）第一光点的光投影***的投影点所投影的第一光束（其中第一光束是从投影点投影的多个光束之一）。
在一个示例中，检测第一光点的图像位置可以包括确定第一光点的图像位置位于其中第一轨迹和第二轨迹重叠的成像传感器区域中。因此，从在步骤206中获取的图像来看，可能不清楚第一光点属于哪个轨迹（并且因此属于多个光束中的哪个光束）。
例如，考虑落在图2中轨迹2161、2162和216n重叠的区域内的位置P处的光点。点P可能潜在地被标识为轨迹2161上的点P1、轨迹2162上的点P2或轨迹216n上的点Pn。取决于P1、P2或Pn中的哪一个点被确定为点P，所计算的物距将是不同的（即，对于点P1物距将是D1，对于点P2物距将是D2，并且对于点Pn物距将是Dn）。
在步骤510中，处理***可以基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离。例如，处理***可以使用三角测量技术来计算第一估计距离和第二估计距离。作为示例，可以以美国专利申请序列号14/920,246、15/149,323和15/149,429中讨论的任何方式计算距离。
在一个示例中，可以基于第一轨迹对应于第一光点的假设来计算第一估计距离，而可以基于第二轨迹对应于第二光点的假设来计算第二估计距离。因此，可以为与成像传感器上第一光点的位点重叠的每个轨迹计算基于三角测量的距离测量。例如，遵循上面对于点P的示例，取决于哪个轨迹被标识为对应于点P，第一估计距离可以被计算为D1、D2或D3。
在步骤512中，处理***可以使距离传感器的光投影***朝向物体发射光脉冲。例如，处理***可以向光投影***发送电子信号，其中电子信号编码指令。如上面所讨论的，光可以具有对于人眼大体上不可见的波长，但是该波长可被距离传感器的成像传感器检测到（例如，红外光）。在一个示例中，步骤512与步骤504同时施行。
在步骤514中，处理***可以使距离传感器的光接收***获取被物体反射的光脉冲的一部分的图像。例如，处理***可以向光接收***发送电子信号，其中电子信号编码指令。如上面所讨论的，尽管光脉冲（以及被反射的光脉冲部分）可能对于人眼是不可见的，但是它可能对于光接收***的图像传感器是可见的。在一个示例中，步骤514与步骤506同时施行。
在步骤516中，处理***可以基于光脉冲的飞行时间来计算距离传感器与物体之间的第三估计距离。例如，处理***可以基于当光投影***发射光脉冲时的时间与当光接收***的成像传感器检测到被物体反射的光脉冲部分时的时间之间经过的时间来计算第三估计距离。例如，对于成像传感器上位置P处的光点，第二估计距离可以计算为Dt(P)。
在步骤518中，处理***可以基于第一估计距离、第二估计距离和第三估计距离计算距离传感器与物体之间的第四估计距离。特别地，使用基于飞行时间的距离测量技术计算的第三估计距离可以用于确定第一估计距离和第二估计距离中的哪一个是正确的（例如，在某个阈值容限内匹配第三估计距离或者更接近第三估计距离）。例如，参考回图4，如果点402表示第一光点，则那么点402周围的像素400的距离测量可以被用作点402的距离测量。然后，基于第三估计距离，第一估计距离和第二估计距离中被确定为正确的无论哪个可以被输出或存储为从距离传感器到物体的距离。
方法500可以在步骤520中结束。
应当注意，尽管没有明确指定，但是上面描述的方法500的一些框、功能或操作可以包括针对特定应用的存储、显示和/或输出。换句话说，取决于特定的应用，方法500中讨论的任何数据、记录、字段和/或中间结果可以被存储、显示和/或输出到另一个设备。此外，图5中陈述确定操作或涉及决策的框、功能或操作并不意味着确定操作的两个分支都被实践。换句话说，取决于确定操作的结果，可以不施行确定操作的分支之一。
图6描绘了用于计算从传感器到物体的距离的示例电子设备600的高级框图。照此，电子设备600可以被实现为电子设备或***的处理器，诸如距离传感器。
如图6中所描绘的，电子设备600包括：硬件处理器元件602，例如中央处理单元（CPU）、微处理器或多核处理器；存储器604，例如随机存取存储器（RAM）和/或只读存储器（ROM）；用于计算从传感器到物体的距离的模块605；以及各种输入/输出设备606，例如存储设备，包括但不限于磁带驱动器、软盘驱动器、硬盘驱动器或压缩盘驱动器、接收器、发射器、显示器、输出端口、输入端口和用户输入设备，诸如键盘、小键盘、鼠标、麦克风、相机、激光光源、LED光源以及诸如此类。
尽管示出了一个处理器元件，但是应当注意，电子设备600可以采用多个处理器元件。此外，尽管在图中示出了一个电子设备600，但是如果对于特定的说明性示例，以分布式或并行的方式来实现如上面所讨论的（一种或多种）方法，即，跨多个或并行的电子设备来实现上面（一种或多种）方法的框或整个（一种或多种）方法，则那么该图的电子设备600意图表示那些多个电子设备中的每一个。
应当注意，本公开可以通过机器可读指令和/或机器可读指令和硬件的组合来实现，例如，使用专用集成电路（ASIC）、包括现场可编程门阵列（FPGA）的可编程逻辑阵列（PLA）、或部署在硬件设备上的状态机、通用计算机或任何其它硬件等同物，例如，与上面讨论的（一种或多种）方法相关的计算机可读指令可以用于配置硬件处理器来施行上面公开的（一种或多种）方法的框、功能和/或操作。
在一个示例中，用于计算从传感器到物体的距离的本模块或过程605的指令和数据（例如机器可读指令）可以被加载到存储器604中，并由硬件处理器元件602执行，以实现如上面结合方法500讨论的框、功能或操作。此外，当硬件处理器执行指令来施行“操作”时，这可以包括硬件处理器直接施行操作和/或促进、引导另一硬件设备或组件（例如，协处理器以及诸如此类）或者与之协作来施行操作。
执行与上面描述的（一种或多种）方法相关的机器可读指令的处理器可以被视为编程处理器或专用处理器。照此，本公开的用于计算从传感器到物体的距离的本模块605可以存储在有形的或物理的（广义上非暂时性的）计算机可读存储设备或介质上，例如易失性存储器、非易失性存储器、ROM存储器、RAM存储器、磁性或光学驱动器、设备或磁盘以及诸如此类。更具体地，计算机可读存储设备可以包括提供存储信息的能力的任何物理设备，所述信息诸如要由处理器或电子设备（诸如计算机或安全性传感器***的控制器）访问的数据和/或指令。
将领会的是，上面公开的变体以及其它特征和功能或其替代物可以组合到许多其它不同的***或应用中。随后可以在其中进行各种目前未预见或未预料到的替代、修改或变化，这也意图被以下权利要求涵盖。

Claims (20)

1.一种方法，包括：
由距离传感器的处理***使距离传感器的光投影***将光图案投影到物体上，其中光图案包括共同形成图案的多个光点；
由处理***使距离传感器的光接收***获取投影到物体上的光图案的图像；
由处理***检测光接收***的成像传感器上的所述多个光点中的第一光点的图像位置；
由处理***基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离；
由处理***使距离传感器的光投影***朝向物体发射光脉冲；
由处理***使光接收***获取被物体反射的光脉冲的一部分的图像；
由处理***基于光脉冲的飞行时间计算距离传感器与物体之间的第三估计距离；以及
由处理***基于第一估计距离、第二估计距离和第三估计距离来计算距离传感器与物体之间的第四估计距离。
2.根据权利要求1所述的方法，其中计算第一估计距离和第二估计距离包括：
由处理***标识在图像位置的位点中重叠的第一轨迹和第二轨迹；
由处理***基于光点属于第一轨迹的假设来计算第一估计距离；以及
由处理***基于光点属于第二轨迹的假设来计算第二估计距离。
3.根据权利要求2所述的方法，其中所述第一轨迹包括属于第一轨迹的所述多个光点中的一个光点的图像位置的潜在范围的第一范围，并且第二轨迹包括属于第一轨迹的所述多个光点中的一个光点的潜在图像位置的第二范围。
4.根据权利要求3所述的方法，其中所述第一估计距离和第二估计距离是使用三角测量来计算的。
5. 根据权利要求3所述的方法，其中计算第四距离包括：
由处理***确定第一估计距离比第二估计距离更接近第三估计距离；和
由处理***将第四估计距离设置为等于第一估计距离。
6.根据权利要求1所述的方法，其中使光投影***投影光图案与使光投影***发射光脉冲同时施行。
7.根据权利要求6所述的方法，其中使光接收***获取投影图案的图像与使光接收***获取光脉冲部分的图像同时施行。
8.根据权利要求1所述的方法，其中所述多个光点和光脉冲包括对于人眼不可见的波长的光。
9.根据权利要求8所述的方法，其中所述多个光点和光脉冲包括红外光。
10.根据权利要求1所述的方法，其中所述光图案包括具有已知尺寸的预定义图案。
11.一种编码有由包括至少一个处理器的处理***可执行的指令的非暂时性机器可读存储介质，其中，当由处理***执行时，所述指令使处理***施行操作，所述操作包括：
使距离传感器的光投影***将光图案投影到物体上，其中所述光图案包括共同形成图案的多个光点；
使距离传感器的光接收***获取投影到物体上的光图案的图像；
检测光接收***的成像传感器上的所述多个光点中的第一光点的图像位置；
基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离；
使距离传感器的光投影***朝向物体发射光脉冲；
使光接收***获取被物体反射的光脉冲的一部分的图像；
基于光脉冲的飞行时间计算距离传感器与物体之间的第三估计距离；以及
基于第一估计距离、第二估计距离和第三估计距离来计算距离传感器与物体之间的第四估计距离。
12.根据权利要求11所述的非暂时性机器可读存储介质，其中计算第一估计距离和第二估计距离包括：
标识在图像位置的位点中重叠的第一轨迹和第二轨迹；
基于光点属于第一轨迹的假设来计算第一估计距离；以及
基于光点属于第二轨迹的假设来计算第二估计距离。
13.根据权利要求12所述的非暂时性机器可读存储介质，其中所述第一轨迹包括属于第一轨迹的所述多个光点中的一个光点的图像位置的潜在范围的第一范围，并且第二轨迹包括属于第一轨迹的所述多个光点中的一个光点的潜在图像位置的第二范围，并且第一估计距离和第二估计距离是使用三角测量来计算的。
14. 根据权利要求13所述的非暂时性机器可读存储介质，其中计算第四距离包括：
由处理***确定第一估计距离比第二估计距离更接近第三估计距离；和
由处理***将第四估计距离设置为等于第一估计距离。
15.根据权利要求11所述的非暂时性机器可读存储介质，其中使光投影***投影光图案与使光投影***发射光脉冲同时施行。
16.根据权利要求15所述的非暂时性机器可读存储介质，其中使光接收***获取投影图案的图像与使光接收***获取光脉冲部分的图像同时施行。
17.根据权利要求11所述的非暂时性机器可读存储介质，其中所述多个光点和光脉冲包括对于人眼不可见的波长的光。
18.根据权利要求17所述的非暂时性机器可读存储介质，其中所述多个光点和光脉冲包括红外光。
19.根据权利要求11所述的非暂时性机器可读存储介质，其中所述光图案包括具有已知尺寸的预定义图案。
20. 一种装置，包括：
处理***；和
编码有由处理***可执行的指令的非暂时性机器可读存储介质，其中，当被执行时，所述指令使处理***施行操作，所述操作包括：
使距离传感器的光投影***将光图案投影到物体上，其中所述光图案包括共同形成图案的多个光点；
使距离传感器的光接收***获取投影到物体上的光图案的图像；
检测光接收***的成像传感器上的所述多个光点中的第一光点的图像位置；
基于第一光点的图像位置计算距离传感器与物体之间的第一估计距离和第二估计距离；
使距离传感器的光投影***朝向物体发射光脉冲；
使光接收***获取被物体反射的光脉冲的一部分的图像；
基于光脉冲的飞行时间计算距离传感器与物体之间的第三估计距离；以及
基于第一估计距离、第二估计距离和第三估计距离来计算距离传感器与物体之间的第四估计距离。
CN202080083436.5A 2019-12-01 2020-11-25 利用飞行时间信息增强基于三角测量的三维距离测量 Active CN114730010B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962942137P 2019-12-01 2019-12-01
US62/942,137 2019-12-01
PCT/US2020/062138 WO2021113135A1 (en) 2019-12-01 2020-11-25 Enhancing triangulation-based three-dimensional distance measurements with time of flight information

Publications (2)

Publication Number Publication Date
CN114730010A true CN114730010A (zh) 2022-07-08
CN114730010B CN114730010B (zh) 2024-05-31

Family

ID=76091996

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080083436.5A Active CN114730010B (zh) 2019-12-01 2020-11-25 利用飞行时间信息增强基于三角测量的三维距离测量

Country Status (5)

Country Link
US (1) US11320537B2 (zh)
EP (1) EP4065929A4 (zh)
JP (1) JP2023504157A (zh)
CN (1) CN114730010B (zh)
WO (1) WO2021113135A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI773133B (zh) * 2020-07-10 2022-08-01 大陸商廣州印芯半導體技術有限公司 測距裝置以及測距方法
CN114371483B (zh) * 2022-03-21 2022-06-10 深圳市欢创科技有限公司 激光雷达的测距方法、装置、激光雷达及机器人

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4914460A (en) * 1987-05-29 1990-04-03 Harbor Branch Oceanographic Institution Inc. Apparatus and methods of determining distance and orientation
US20150062558A1 (en) * 2013-09-05 2015-03-05 Texas Instruments Incorporated Time-of-Flight (TOF) Assisted Structured Light Imaging
US20160306044A1 (en) * 2014-08-11 2016-10-20 Gerard Dirk Smits Three-dimensional triangulation and time-of-flight based tracking systems and methods
US20170097417A1 (en) * 2015-10-21 2017-04-06 Samsung Electronics Co., Ltd. Apparatus for and method of range sensor based on direct time-of-flight and triangulation
CN109729721A (zh) * 2017-08-29 2019-05-07 深圳市汇顶科技股份有限公司 光学测距方法以及光学测距装置
CN110462438A (zh) * 2019-06-24 2019-11-15 深圳市汇顶科技股份有限公司 结构光投射装置、结构光投射方法及三维测量***

Family Cites Families (163)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4954962A (en) 1988-09-06 1990-09-04 Transitions Research Corporation Visual navigation and obstacle avoidance structured light system
JPH0451112A (ja) 1990-06-19 1992-02-19 Fujitsu Ltd マルチスリット投光器
US5061062A (en) 1990-07-02 1991-10-29 General Electric Company Focus spot size controller for a variable depth range camera
JPH08555A (ja) 1994-06-16 1996-01-09 Fuji Photo Optical Co Ltd 内視鏡の照明装置
US5699444A (en) 1995-03-31 1997-12-16 Synthonics Incorporated Methods and apparatus for using image data to determine camera location and orientation
JP3328111B2 (ja) 1995-08-23 2002-09-24 日本電気株式会社 空間距離測定方法及び空間距離測定装置
US6038415A (en) 1997-07-18 2000-03-14 Minolta Co., Ltd. Image forming apparatus and image-carrier cartridge device which is employed in the same
DE69823116D1 (de) 1997-08-05 2004-05-19 Canon Kk Bildverarbeitungsverfahren und -gerät
US5980454A (en) 1997-12-01 1999-11-09 Endonetics, Inc. Endoscopic imaging system employing diffractive optical elements
US5870136A (en) 1997-12-05 1999-02-09 The University Of North Carolina At Chapel Hill Dynamic generation of imperceptible structured light for tracking and acquisition of three dimensional scene geometry and surface characteristics in interactive three dimensional computer graphics applications
AUPP299498A0 (en) 1998-04-15 1998-05-07 Commonwealth Scientific And Industrial Research Organisation Method of tracking and sensing position of objects
US7193645B1 (en) 2000-07-27 2007-03-20 Pvi Virtual Media Services, Llc Video system and method of operating a video system
JP2002056348A (ja) 2000-08-07 2002-02-20 Tohken Co Ltd オートフォーカス機能を有する手持ち式読取装置及びオートフォーカス方法、並び距離計測方法
US6937350B2 (en) 2001-06-29 2005-08-30 Massachusetts Institute Of Technology Apparatus and methods for optically monitoring thickness
US7940299B2 (en) 2001-08-09 2011-05-10 Technest Holdings, Inc. Method and apparatus for an omni-directional video surveillance system
GB2395261A (en) 2002-11-11 2004-05-19 Qinetiq Ltd Ranging apparatus
TWI247104B (en) 2003-02-26 2006-01-11 Hon Hai Prec Ind Co Ltd A measuring method for pattern of light guide plate
DE10308383A1 (de) 2003-02-27 2004-09-16 Storz Endoskop Produktions Gmbh Verfahren und optisches System zur Vermessung der Topographie eines Meßobjekts
US20070165243A1 (en) 2004-02-09 2007-07-19 Cheol-Gwon Kang Device for measuring 3d shape using irregular pattern and method for the same
WO2005124675A2 (en) 2004-06-16 2005-12-29 Ids Scheer Aktiengesellschaft Systems and methods for integrating business process documentation with work environments
US7191056B2 (en) 2005-01-04 2007-03-13 The Boeing Company Precision landmark-aided navigation
JP2006313116A (ja) 2005-05-09 2006-11-16 Nec Viewtechnology Ltd 距離傾斜角度検出装置および該検出装置を備えたプロジェクタ
JP4644540B2 (ja) 2005-06-28 2011-03-02 富士通株式会社 撮像装置
US20070091174A1 (en) 2005-09-30 2007-04-26 Topcon Corporation Projection device for three-dimensional measurement, and three-dimensional measurement system
JP4760391B2 (ja) 2006-01-13 2011-08-31 カシオ計算機株式会社 測距装置及び測距方法
JP4799216B2 (ja) 2006-03-03 2011-10-26 富士通株式会社 距離測定機能を有する撮像装置
US7375803B1 (en) 2006-05-18 2008-05-20 Canesta, Inc. RGBZ (red, green, blue, z-depth) filter system usable with sensor systems, including sensor systems with synthetic mirror enhanced three-dimensional imaging
JP4889373B2 (ja) 2006-05-24 2012-03-07 ローランドディー．ジー．株式会社 ３次元形状測定方法およびその装置
US8471892B2 (en) 2006-11-23 2013-06-25 Z. Jason Geng Wide field-of-view reflector and method of designing and making same
KR20100017234A (ko) 2007-04-23 2010-02-16 캘리포니아 인스티튜트 오브 테크놀로지 편광 감지 센서와 연결된 편광 코드화 개구 마스크를 사용하는 단일-렌즈, 3-ｄ 영상화 장치
TWI320480B (en) 2007-04-23 2010-02-11 Univ Nat Formosa One diffraction 6 degree of freedom optoelectronic measurement system
DE102007054906B4 (de) 2007-11-15 2011-07-28 Sirona Dental Systems GmbH, 64625 Verfahren zur optischen Vermessung der dreidimensionalen Geometrie von Objekten
US9170097B2 (en) 2008-04-01 2015-10-27 Perceptron, Inc. Hybrid system
WO2009124601A1 (en) * 2008-04-11 2009-10-15 Ecole Polytechnique Federale De Lausanne Epfl Time-of-flight based imaging system using a display as illumination source
US8187097B1 (en) 2008-06-04 2012-05-29 Zhang Evan Y W Measurement and segment of participant's motion in game play
DE102008031942A1 (de) 2008-07-07 2010-01-14 Steinbichler Optotechnik Gmbh Verfahren und Vorrichtung zur 3D-Digitalisierung eines Objekts
US8531650B2 (en) 2008-07-08 2013-09-10 Chiaro Technologies LLC Multiple channel locating
US8334900B2 (en) 2008-07-21 2012-12-18 The Hong Kong University Of Science And Technology Apparatus and method of optical imaging for medical diagnosis
JP2010091855A (ja) 2008-10-09 2010-04-22 Denso Corp レーザビーム照射装置
JP5251419B2 (ja) 2008-10-22 2013-07-31 日産自動車株式会社 距離計測装置および距離計測方法
CN101794065A (zh) 2009-02-02 2010-08-04 中强光电股份有限公司 投影显示***
US20100223706A1 (en) 2009-03-03 2010-09-09 Illinois Tool Works Inc. Welding helmet audio communication systems and methods with bone conduction transducers
JP5484098B2 (ja) 2009-03-18 2014-05-07 三菱電機株式会社 投写光学系及び画像表示装置
JP4991787B2 (ja) 2009-04-24 2012-08-01 パナソニック株式会社 反射型光電センサ
US9091536B2 (en) 2009-06-01 2015-07-28 Dentsply International Inc. Method and device for three-dimensional surface detection with a dynamic reference frame
GB0921461D0 (en) 2009-12-08 2010-01-20 Qinetiq Ltd Range based sensing
US8320621B2 (en) 2009-12-21 2012-11-27 Microsoft Corporation Depth projector system with integrated VCSEL array
US20110188054A1 (en) 2010-02-02 2011-08-04 Primesense Ltd Integrated photonics module for optical projection
JP2011169701A (ja) 2010-02-17 2011-09-01 Sanyo Electric Co Ltd 物体検出装置および情報取得装置
JP5612916B2 (ja) 2010-06-18 2014-10-22 キヤノン株式会社 位置姿勢計測装置、その処理方法、プログラム、ロボットシステム
JP5499985B2 (ja) 2010-08-09 2014-05-21 ソニー株式会社 表示装置組立体
WO2012023256A2 (en) 2010-08-19 2012-02-23 Canon Kabushiki Kaisha Three-dimensional measurement apparatus, method for three-dimensional measurement, and computer program
JP5163713B2 (ja) 2010-08-24 2013-03-13 カシオ計算機株式会社 距離画像センサ及び距離画像生成装置並びに距離画像データ取得方法及び距離画像生成方法
US8830637B2 (en) 2010-08-31 2014-09-09 Texas Instruments Incorporated Methods and apparatus to clamp overvoltages for alternating current systems
US20120056982A1 (en) 2010-09-08 2012-03-08 Microsoft Corporation Depth camera based on structured light and stereo vision
US8593535B2 (en) 2010-09-10 2013-11-26 Apple Inc. Relative positioning of devices based on captured images of tags
JP2012068762A (ja) 2010-09-21 2012-04-05 Sony Corp 検出装置、検出方法、プログラム、及び電子機器
EP2433716A1 (en) 2010-09-22 2012-03-28 Hexagon Technology Center GmbH Surface spraying device with a nozzle control mechanism and a corresponding method
WO2012057008A1 (en) 2010-10-27 2012-05-03 Nikon Corporation Profile measuring apparatus, method for manufacturing structure, and structure manufacturing system
TWI428558B (zh) 2010-11-10 2014-03-01 Pixart Imaging Inc 測距方法、測距系統與其處理軟體
JP5815940B2 (ja) 2010-12-15 2015-11-17 キヤノン株式会社 距離計測装置、距離計測方法、およびプログラム
US9888225B2 (en) 2011-02-04 2018-02-06 Koninklijke Philips N.V. Method of recording an image and obtaining 3D information from the image, camera system
JP5746529B2 (ja) 2011-03-16 2015-07-08 キヤノン株式会社 三次元距離計測装置、三次元距離計測方法、およびプログラム
WO2012123948A1 (en) 2011-03-17 2012-09-20 Mirobot Ltd. System and method for three dimensional teat modeling for use with a milking system
JP2014122789A (ja) 2011-04-08 2014-07-03 Sanyo Electric Co Ltd 情報取得装置、投射装置および物体検出装置
JP5830270B2 (ja) 2011-05-24 2015-12-09 オリンパス株式会社 内視鏡装置および計測方法
CA2835306C (en) 2011-06-07 2016-11-15 Creaform Inc. Sensor positioning for 3d scanning
KR101974651B1 (ko) 2011-06-22 2019-05-02 성균관대학교산학협력단 경계선 상속을 통하여 계층적으로 직교화된 구조광을 디코딩하는 방법 및 이를 이용하는 3차원 거리 영상 측정 시스템
US10054430B2 (en) 2011-08-09 2018-08-21 Apple Inc. Overlapping pattern projector
JP2014238259A (ja) 2011-09-28 2014-12-18 三洋電機株式会社 情報取得装置および物体検出装置
KR101605224B1 (ko) 2011-10-05 2016-03-22 한국전자통신연구원 패턴 광을 이용한 깊이 정보 획득 장치 및 방법
DE102012108567B4 (de) 2011-10-05 2017-04-27 Electronics And Telecommunications Research Institute Verfahren zum Erlangen von Tiefeninformationen unter Verwendung eines Lichtmusters
TW201329509A (zh) 2012-01-10 2013-07-16 Walsin Lihwa Corp 立體掃瞄裝置及其立體掃瞄方法
US9986208B2 (en) 2012-01-27 2018-05-29 Qualcomm Incorporated System and method for determining location of a device using opposing cameras
BR112014018573A8 (pt) 2012-01-31 2017-07-11 3M Innovative Properties Company Método e aparelho para medição da estrutura tridimensional de uma superfície
EP2821748B1 (en) 2012-03-01 2019-07-31 Nissan Motor Co., Ltd Range finding device and range finding method
KR101630558B1 (ko) 2012-03-28 2016-06-14 후지쯔 가부시끼가이샤 촬상 장치
US9590122B2 (en) 2012-05-18 2017-03-07 Siemens Healthcare Diagnostics Inc. Fish eye lens analyzer
US8699005B2 (en) 2012-05-27 2014-04-15 Planitar Inc Indoor surveying apparatus
EP2872030B1 (en) 2012-07-10 2016-12-07 WaveLight GmbH Process and apparatus for determining optical aberrations of an eye
US20140016113A1 (en) 2012-07-13 2014-01-16 Microsoft Corporation Distance sensor using structured light
JP2014020978A (ja) 2012-07-20 2014-02-03 Fujitsu Ltd 照射装置、距離測定装置、照射装置のキャリブレーションプログラム及びキャリブレーション方法
EP2696590B1 (en) 2012-08-06 2014-09-24 Axis AB Image sensor positioning apparatus and method
JP2014044113A (ja) 2012-08-27 2014-03-13 Sanyo Electric Co Ltd 情報取得装置および物体検出装置
US9036243B2 (en) * 2012-09-24 2015-05-19 Alces Technology, Inc. Digital drive signals for analog MEMS ribbon arrays
US9275459B2 (en) 2012-10-05 2016-03-01 Qualcomm Incorporated Method and apparatus for calibrating an imaging device
US9741184B2 (en) 2012-10-14 2017-08-22 Neonode Inc. Door handle with optical proximity sensors
CN110749951B (zh) 2012-10-24 2022-12-30 视瑞尔技术公司 照明设备
US9285893B2 (en) 2012-11-08 2016-03-15 Leap Motion, Inc. Object detection and tracking with variable-field illumination devices
JP6241793B2 (ja) 2012-12-20 2017-12-06 パナソニックＩｐマネジメント株式会社 ３次元測定装置および３次元測定方法
US10466359B2 (en) 2013-01-01 2019-11-05 Inuitive Ltd. Method and system for light patterning and imaging
US9691163B2 (en) 2013-01-07 2017-06-27 Wexenergy Innovations Llc System and method of measuring distances related to an object utilizing ancillary objects
US8768559B1 (en) 2013-01-22 2014-07-01 Qunomic Virtual Technology, LLC Line projection system
US9142019B2 (en) 2013-02-28 2015-09-22 Google Technology Holdings LLC System for 2D/3D spatial feature processing
US10105149B2 (en) 2013-03-15 2018-10-23 Board Of Regents Of The University Of Nebraska On-board tool tracking system and methods of computer assisted surgery
US9364167B2 (en) 2013-03-15 2016-06-14 Lx Medical Corporation Tissue imaging and image guidance in luminal anatomic structures and body cavities
US20140320605A1 (en) 2013-04-25 2014-10-30 Philip Martin Johnson Compound structured light projection system for 3-D surface profiling
US9536339B1 (en) 2013-06-13 2017-01-03 Amazon Technologies, Inc. Processing unordered point cloud
JP6211876B2 (ja) 2013-10-01 2017-10-11 株式会社トプコン 測定方法及び測定装置
CN103559735B (zh) 2013-11-05 2017-03-01 重庆安钻理科技股份有限公司 一种三维重建方法及***
WO2015103595A1 (en) 2014-01-06 2015-07-09 Eyelock, Inc. Methods and apparatus for repetitive iris recognition
GB2522248A (en) 2014-01-20 2015-07-22 Promethean Ltd Interactive system
KR102166691B1 (ko) 2014-02-27 2020-10-16 엘지전자 주식회사 객체의 3차원 형상을 산출하는 장치 및 방법
US9526427B2 (en) 2014-03-21 2016-12-27 Hypermed Imaging, Inc. Compact light sensors with symmetrical lighting
US9307231B2 (en) 2014-04-08 2016-04-05 Lucasfilm Entertainment Company Ltd. Calibration target for video processing
JP6002275B2 (ja) 2014-04-30 2016-10-05 シナノケンシ株式会社 計測装置
JP5829306B2 (ja) 2014-05-12 2015-12-09 ファナック株式会社 レンジセンサの配置位置評価装置
US10207193B2 (en) 2014-05-21 2019-02-19 Universal City Studios Llc Optical tracking system for automation of amusement park elements
US20150347833A1 (en) 2014-06-03 2015-12-03 Mark Ries Robinson Noncontact Biometrics with Small Footprint
US9699393B2 (en) 2014-06-26 2017-07-04 Semiconductor Components Industries, Llc Imaging systems for infrared and visible imaging with patterned infrared cutoff filters
WO2016024200A2 (en) 2014-08-12 2016-02-18 Mantisvision Ltd. Structured light projection and imaging
KR20160020323A (ko) 2014-08-13 2016-02-23 옥은호 평행 적외선 투사기와 카메라 모듈로 구성되는 거리 측정 센서
JP6370177B2 (ja) 2014-09-05 2018-08-08 株式会社Ｓｃｒｅｅｎホールディングス 検査装置および検査方法
EP3209523A4 (en) 2014-10-24 2018-04-25 Magik Eye Inc. Distance sensor
EP3167430A4 (en) 2014-11-04 2017-08-16 SZ DJI Technology Co., Ltd. Camera calibration
US20160128553A1 (en) 2014-11-07 2016-05-12 Zheng Jason Geng Intra- Abdominal Lightfield 3D Endoscope and Method of Making the Same
WO2016094439A1 (en) 2014-12-08 2016-06-16 Munoz Luis Daniel Device, system and methods for assessing tissue structures, pathology, and healing
KR102369792B1 (ko) 2015-03-05 2022-03-03 한화테크윈 주식회사 촬영 장치 및 촬영 방법
JP6484072B2 (ja) 2015-03-10 2019-03-13 アルプスアルパイン株式会社 物体検出装置
WO2016151918A1 (ja) 2015-03-26 2016-09-29 富士フイルム株式会社 距離画像取得装置及び距離画像取得方法
JP6247793B2 (ja) 2015-03-27 2017-12-13 富士フイルム株式会社 距離画像取得装置
US9694498B2 (en) 2015-03-30 2017-07-04 X Development Llc Imager for detecting visual light and projected patterns
WO2016157600A1 (ja) 2015-03-30 2016-10-06 富士フイルム株式会社 距離画像取得装置及び距離画像取得方法
US10488192B2 (en) 2015-05-10 2019-11-26 Magik Eye Inc. Distance sensor projecting parallel patterns
TWI687652B (zh) 2015-05-10 2020-03-11 美商麥吉克艾公司 距離感測器（二）
DE102015209143B4 (de) 2015-05-19 2020-02-27 Esaote S.P.A. Verfahren zur Bestimmung einer Abbildungsvorschrift und bildgestützten Navigation sowie Vorrichtung zur bildgestützten Navigation
JP6548727B2 (ja) 2015-05-29 2019-07-24 オリンパス株式会社 照明装置及び計測装置
US20160377414A1 (en) 2015-06-23 2016-12-29 Hand Held Products, Inc. Optical pattern projector
KR20170005649A (ko) 2015-07-06 2017-01-16 엘지전자 주식회사 3차원 깊이 카메라 모듈 및 이를 구비하는 이동 단말기
US10223793B1 (en) 2015-08-05 2019-03-05 Al Incorporated Laser distance measuring method and system
DE102015115011A1 (de) 2015-09-08 2017-03-09 Valeo Schalter Und Sensoren Gmbh Laserscanner für Kraftfahrzeuge
US9989357B2 (en) 2015-09-09 2018-06-05 Faro Technologies, Inc. Aerial device that cooperates with an external projector to measure three-dimensional coordinates
CA2999485A1 (en) 2015-09-23 2017-03-30 East Carolina University Methods, systems and computer program products for determining object distances and target dimensions using light emitters
US20170094251A1 (en) 2015-09-30 2017-03-30 Faro Technologies, Inc. Three-dimensional imager that includes a dichroic camera
US10176554B2 (en) 2015-10-05 2019-01-08 Google Llc Camera calibration using synthetic images
JP6597150B2 (ja) 2015-10-09 2019-10-30 富士通株式会社 距離測定装置、距離測定方法、距離測定プログラムおよびテーブルの作成方法
FR3042610B1 (fr) 2015-10-14 2018-09-07 Quantificare Dispositif et procede pour reconstruire en trois dimensions la tete et le corps
US10225544B2 (en) 2015-11-19 2019-03-05 Hand Held Products, Inc. High resolution dot pattern
DE112015007146T5 (de) 2015-11-25 2018-08-02 Mitsubishi Electric Corporation Vorrichtung und verfahren zur dreidimensionalen bildmessung
KR20170094968A (ko) 2016-02-12 2017-08-22 엘지이노텍 주식회사 피사체 거리 측정 부재, 이를 갖는 카메라 모듈
US11030775B2 (en) 2016-03-17 2021-06-08 Flir Systems, Inc. Minimal user input video analytics systems and methods
CN113727000A (zh) 2016-05-27 2021-11-30 松下知识产权经营株式会社 摄像***
US9686539B1 (en) 2016-06-12 2017-06-20 Apple Inc. Camera pair calibration using non-standard calibration objects
JP7133554B2 (ja) 2016-12-07 2022-09-08 マジック アイ インコーポレイテッド 焦点調整可能な画像センサを含む距離センサ
US20180227566A1 (en) 2017-02-06 2018-08-09 Microsoft Technology Licensing, Llc Variable field of view and directional sensors for mobile machine vision applications
JP6410203B1 (ja) 2017-02-21 2018-10-24 株式会社ナノルクス 固体撮像素子及び撮像装置
US10810753B2 (en) * 2017-02-27 2020-10-20 Microsoft Technology Licensing, Llc Single-frequency time-of-flight depth computation using stereoscopic disambiguation
US11025887B2 (en) 2017-02-27 2021-06-01 Sony Corporation Field calibration of stereo cameras with a projector
WO2018211588A1 (ja) 2017-05-16 2018-11-22 オリンパス株式会社 撮像装置、撮像方法及びプログラム
US10769914B2 (en) 2017-06-07 2020-09-08 Amazon Technologies, Inc. Informative image data generation using audio/video recording and communication devices
JP2020537237A (ja) 2017-10-08 2020-12-17 マジック アイ インコーポレイテッド 縦グリッドパターンを使用した距離測定
EP3692501A4 (en) 2017-10-08 2021-07-07 Magik Eye Inc. CALIBRATION OF A SENSOR SYSTEM INCLUDING MULTIPLE MOBILE SENSORS
US10679076B2 (en) 2017-10-22 2020-06-09 Magik Eye Inc. Adjusting the projection system of a distance sensor to optimize a beam layout
EP3769121A4 (en) 2018-03-20 2021-12-29 Magik Eye Inc. Distance measurement using projection patterns of varying densities
CN112119628B (zh) 2018-03-20 2022-06-03 魔眼公司 调整相机曝光以用于三维深度感测和二维成像
JP7039388B2 (ja) 2018-05-24 2022-03-22 株式会社トプコン 測量装置
KR20210008025A (ko) 2018-06-06 2021-01-20 매직 아이 인코포레이티드 고밀도 프로젝션 패턴들을 사용한 거리 측정 방법
WO2020033169A1 (en) 2018-08-07 2020-02-13 Magik Eye Inc. Baffles for three-dimensional sensors having spherical fields of view
US10916023B2 (en) * 2018-09-14 2021-02-09 Facebook Technologies, Llc Depth measurement assembly with a structured light source and a time of flight camera
US10638104B2 (en) 2018-09-14 2020-04-28 Christie Digital Systems Usa, Inc. Device, system and method for generating updated camera-projector correspondences from a reduced set of test patterns
US20200182974A1 (en) 2018-12-08 2020-06-11 Magik Eye Inc. Vertical cavity surface emitting laser-based projector
CN113272624A (zh) 2019-01-20 2021-08-17 魔眼公司 包括具有多个通带的带通滤波器的三维传感器
JP2020139869A (ja) 2019-02-28 2020-09-03 キヤノン株式会社 計測装置、算出方法、システム及びプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4914460A (en) * 1987-05-29 1990-04-03 Harbor Branch Oceanographic Institution Inc. Apparatus and methods of determining distance and orientation
US20150062558A1 (en) * 2013-09-05 2015-03-05 Texas Instruments Incorporated Time-of-Flight (TOF) Assisted Structured Light Imaging
US20160306044A1 (en) * 2014-08-11 2016-10-20 Gerard Dirk Smits Three-dimensional triangulation and time-of-flight based tracking systems and methods
US20170097417A1 (en) * 2015-10-21 2017-04-06 Samsung Electronics Co., Ltd. Apparatus for and method of range sensor based on direct time-of-flight and triangulation
CN109729721A (zh) * 2017-08-29 2019-05-07 深圳市汇顶科技股份有限公司 光学测距方法以及光学测距装置
CN110462438A (zh) * 2019-06-24 2019-11-15 深圳市汇顶科技股份有限公司 结构光投射装置、结构光投射方法及三维测量***

Also Published As

Publication number Publication date
US20210165098A1 (en) 2021-06-03
WO2021113135A1 (en) 2021-06-10
EP4065929A4 (en) 2023-12-06
US11320537B2 (en) 2022-05-03
EP4065929A1 (en) 2022-10-05
JP2023504157A (ja) 2023-02-01
CN114730010B (zh) 2024-05-31

Similar Documents

Publication Publication Date Title
CN112513565B (zh) 使用高密度投影图案的距离测量
US11475584B2 (en) Baffles for three-dimensional sensors having spherical fields of view
JP2020500310A5 (zh)
CN114730010B (zh) 利用飞行时间信息增强基于三角测量的三维距离测量
US11580662B2 (en) Associating three-dimensional coordinates with two-dimensional feature points
US11019249B2 (en) Mapping three-dimensional depth map data onto two-dimensional images
JP6606930B2 (ja) 撮影装置
US20210325686A1 (en) Diffractive optical element with collimator function
US7420196B2 (en) Multiple axis multipoint non-contact measurement system
CN115298514A (zh) 包括补充准确度数据的距离测量
KR20220080359A (ko) 라이다 장치
CN111147839A (zh) 深度获取装置、深度获取方法及终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant