CN109597211A - 一种投影模组、深度相机以及深度图像获取方法 - Google Patents

一种投影模组、深度相机以及深度图像获取方法 Download PDF

Info

Publication number
CN109597211A
CN109597211A CN201811589922.5A CN201811589922A CN109597211A CN 109597211 A CN109597211 A CN 109597211A CN 201811589922 A CN201811589922 A CN 201811589922A CN 109597211 A CN109597211 A CN 109597211A
Authority
CN
China
Prior art keywords
light
light source
sub
module group
projective module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811589922.5A
Other languages
English (en)
Other versions
CN109597211B (zh
Inventor
许星
陈醒身
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Orbbec Co Ltd
Original Assignee
Shenzhen Orbbec Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Orbbec Co Ltd filed Critical Shenzhen Orbbec Co Ltd
Priority to CN201811589922.5A priority Critical patent/CN109597211B/zh
Publication of CN109597211A publication Critical patent/CN109597211A/zh
Application granted granted Critical
Publication of CN109597211B publication Critical patent/CN109597211B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/42Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect
    • G02B27/4205Diffraction optics, i.e. systems including a diffractive element being designed for providing a diffractive effect having a diffractive optical element [DOE] contributing to image formation, e.g. whereby modulation transfer function MTF or optical aberrations are relevant
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/55Details of cameras or camera bodies; Accessories therefor with provision for heating or cooling, e.g. in aircraft
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/521Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

本发明涉及光学及电子技术领域,提供了一种投影模组、结构光深度相机以及结构光图像获取方法,投影模组包括沿光路设置的光源、光学透镜以及衍射光学元件,光源包括多个子光源,每个子光源包括多个发光元件,多个子光源用于在一个投影周期内交替产生图案化光束;衍射光学元件分别接收多个子光源交替产生的图案化光束,并对应产生可相互叠加的子结构光图案;在一个投影周期内,多个子光源交替产生图案化光束,无需同时点亮光源中的所有发光元件,从而会大大降低整体功率;由于多个子光源是分时点亮,而每个子光源的点亮时间并不会持续一个投影周期,因而光源的功耗大大降低,可以有效满足采用该投影模组的智能设备对低功耗的要求。

Description

一种投影模组、深度相机以及深度图像获取方法
技术领域
本发明涉及光学及电子技术领域,更具体地说,是涉及一种投影模组、深度相机以及深度图像获取方法。
背景技术
随着智能设备(例如移动终端)对3D成像功能的需求愈发迫切,深度相机将被越来越多地嵌入到智能设备中,这也要求深度相机向小体积、高性能的方向发展。投影模组是深度相机中的核心元器件之一,也是影响深度相机性能最为主要的因素。投影模组通常由激光光源、透镜以及其他光学元件构成,用于向空间中投影出光束。
随着智能设备对功耗的控制越来越严格,需要对深度相机中投影模组的功耗进行控制。传统方案通过降低光源数量或者光源功率的方式来降低功耗,然而这种方式会导致深度相机的性能下降,例如结构光的分辨率降低,进而导致所获取的深度图像的精度下降,无法满足使用需求。因此,目前仍缺乏一种同时具备低功耗以及高性能的方案。
发明内容
本发明的目的在于提供一种投影模组,以解决现有深度相机无法同时满足低功耗以及高性能的技术问题。
为实现上述目的,本发明采用的技术方案是:提供一种投影模组,包括沿光路设置的光源、光学透镜以及衍射光学元件;
所述光源包括多个子光源,每个所述子光源包括多个发光元件,多个所述子光源用于在一个投影周期内交替产生图案化光束;
所述衍射光学元件分别接收多个所述子光源交替产生的所述图案化光束,并对应产生可相互叠加的子结构光图案。
在一个实施例中,多个所述子结构光图案部分重叠;
或者,
多个所述子结构光图案互补。
在一个实施例中,所述光源包括第一子光源和第二子光源,所述第一子光源包括多个第一发光元件,所述第二子光源包括多个第二发光元件;
所述第一发光元件用于产生第一图案化光束,所述第二发光元件用于产生第二图案化光束,所述第一图案化光束和所述第二图案化光束交替产生;
所述衍射光学元件分别接收所述第一图案化光束和第二图案化光束,并对应产生可相互叠加的第一结构光图案和第二结构光图案。
在一个实施例中,所述第一发光元件包括发光二极管、边缘发射激光二极管和垂直腔面发射激光器中的至少一种;
所述第二发光元件包括发光二极管、边缘发射激光二极管和垂直腔面发射激光中的至少一种。
在一个实施例中,所述第一子光源和所述第二子光源至少部分重合,所述第一发光元件和所述第二发光元件交错分布;
或者,所述第一子光源和所述第二子光源相互不重合。
本发明的目的还在于提供一种深度相机,包括上述的投影模组、成像模组以及处理器;
所述处理器与所述成像模组和所述投影模组均连接;
所述处理器用于控制所述投影模组中多个子光源交替产生图案化光束,以及控制所述成像模组分别获取多个子结构光图案,以获得结构光图案。
在一个实施例中,所述深度相机还包括散热片,所述多个子光源分别与所述散热片导热连接。
在一个实施例中,所述深度相机还包括彩色相机模组,所述彩色相机模组与所述处理器连接,用于采集彩色图案。
本发明的目的还在于提供一种深度图像获取方法,包括:
通过第一组时序控制信号控制投影模组交替投射可相互叠加的多组子结构光图案;
通过第二组时序控制信号控制成像模组采集所述多组子结构光图案,所述第一组时序控制信号和所述第二组时序控制信号周期相同;
根据所述多组子结构光图案的叠加区域,获得结构光图案。
在一个实施例中,所述子结构图案的数量为两个,所述第一组时序控制信号包括第一时序信号和第二时序信号;
所述通过第一组时序控制信号控制投影模组交替投射可相互叠加的多组结构光图案步骤包括:
通过所述第一时序信号控制投影模组中第一发光元件产生第一图案化光束;
通过所述第二时序信号控制投影模组中第二发光元件产生第二图案化光束,所述第一图案化光束和所述第二图案化光束交替产生;
通过所述投影模组中衍射光学元件分别接收所述第一图案化光束和第二图案化光束,并对应产生第一结构光图案和第二结构光图案。
本发明提供的一种投影模组的有益效果在于:通过将光源分成多个子光源进行分别控制,在一个投影周期内,多个子光源交替产生图案化光束,因此每一时刻光源投射图案化光束时,最多仅有一个子光源中发光元件被点亮,而无需同时点亮光源中的所有发光元件,因此会大大降低整体功率,从而降低了配套驱动电路等的设计要求。不仅如此,由于多个子光源是分时点亮,而每个子光源的点亮时间并不会持续一个投影周期,因此光源在一个周期内的功耗会大大降低,可以有效满足采用该投影模组的智能设备对低功耗的要求。因此,不仅可以获得较高的分辨率,而且可以有效降低投影模组的功耗。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的深度相机的结构示意图;
图2为本发明实施例提供的投影模组的结构示意图;
图3为本发明实施例提供的投影模组中光源的结构示意图一;
图4为本发明实施例提供的投影模组中光源的结构示意图二;
图5为本发明实施例提供的深度相机中处理器发送的时序控制信号的结构示意图;
图6为本发明实施例提供的深度相机中成像模组获取的叠加图像的结构示意图一;
图7为本发明实施例提供的深度相机中成像模组获取的叠加图像的结构示意图二;
图8为本发明实施例提供的深度图像获取方法的流程示意图;
图9为本发明实施例提供的深度图像获取方法中步骤S10的流程示意图。
其中,图中各附图标记:
10-投影模组; 100-窗口;
11-光源; 111-第一子光源;
1110-第一发光元件; 112-第二子光源;
1120-第二发光元件; 12-光学透镜;
13-衍射光学元件; 14-镜座;
20-成像模组; 30-控制电路板;
40-处理器; 50-彩色相机模组。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
需要说明的是,当部件被称为“固定于”或“设置于”另一个部件,它可以直接或者间接位于该另一个部件上。当一个部件被称为“连接于”另一个部件,它可以是直接或者间接连接至该另一个部件上。术语“上”、“下”、“左”、“右”、“前”、“后”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置为基于附图所示的方位或位置,仅是为了便于描述,不能理解为对本技术方案的限制。术语“第一”、“第二”仅用于便于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明技术特征的数量。“多个”的含义是两个或两个以上,除非另有明确具体的限定。
请参阅图2至图4,一种投影模组10,包括沿光路设置的光源11、光学透镜12以及衍射光学元件(DOE)13,光源11包括多个子光源,每个子光源包括多个发光元件,多个子光源用于在一个投影周期内交替产生图案化光束;衍射光学元件13分别接收多个子光源交替产生的图案化光束,并对应产生可相互叠加的子结构光图案。子光源的数量可以根据需要进行设置,此处不做限制。
请参阅图1,在一个实施例中,投影模组10可应用于深度相机中,用于投射结构光图案。多个子光源交替产生图案化光束指的是在一个投影周期内,各个子光源依次产生图案化光束,而这些依次产生的图案化光束会依次到达衍射光学元件13,衍射光学元件13则根据接收的图案化光束依次向前投射子结构光图案,这些子结构光图案可以依次被深度相机中的成像模组20在一个采集周期内接收,最终获得经子结构光图案叠加的结构光图案。
目前投影模组10在产生图案化光束、以获得结构光图案时,在成像模组20的一个采集周期内,投影模组10中的所有光源均同时打开,且时间持续为一个投影周期,投影周期与采集周期相匹配。一方面,为了获得较高的分辨率,投影模组10中的光源11通常包含大量的发光元件,因此大量发光元件的整体功率较大,对于配套的驱动电路等的设计要求更高;另一方面,由于投影模组10中的光源的点亮时间需要持续一个投影周期,会导致投影模组10的功耗大大增加,当智能设备采用该投影模组10时,无法满足智能设备对于低功耗的要求。
本实施例则提出了一种全新的设计方式,不仅可以获得较高的分辨率,而且可以有效降低投影模组10的功耗。通过将光源11分成多个子光源进行分别控制,在一个投影周期内,多个子光源交替产生图案化光束,因此每一时刻光源投射图案化光束时,最多仅有一个子光源中发光元件被点亮,而无需同时点亮光源中的所有发光元件,因此会大大降低整体功率,从而降低了配套驱动电路等的设计要求。不仅如此,由于多个子光源是分时点亮,而每个子光源的点亮时间并不会持续一个投影周期,因此光源在一个周期内的功耗会大大降低,可以有效满足采用该投影模组10的智能设备对低功耗的要求。
在一个实施例中,投影模组10用于深度相机中。图1给出了本实施例提供的一种深度相机的结构示意图。深度相机包括投影模组10、成像模组20、控制电路板30以及处理器40,投影模组10、成像模组20以及处理器40均集成在控制电路板30上。其中,控制电路板30可以为PCB板(印制电路板),用于为投影模组10,成像模组20以及处理器40提供支撑以及电连接。处理器40经由控制电路板30以相应的接口实现对投影模组10和成像模组20的控制,这里的接口包括各种接口,例如I2C接口等。可以理解的是,控制电路板30也可以为其他任何类型,比如柔性电路板(FPC),软硬结合板,或者由其他金属、陶瓷、半导体材料、SOI(Silicon-On-Insulator,绝缘体上硅)等材料组合而成。
请参阅图2,在一个实施例中,投影模组10还包括镜座14,光源11、光学透镜12和衍射光学元件13均设于镜座14中,从而确保固定良好。光源11还包括半导体衬底,其中多个子光源均分布于该半导体衬底上,半导体衬底通过电连接设置在控制电路板30上。可以理解的是,该电连接以及控制电路板30可通过导线与光源11耦合,从而可以对光源11的工作状态进行控制,并提供促使光源11发出图案化光束的电流源。
请参阅图3,在一个实施例中,光源11包括两个可独立控制的第一子光源111和第二子光源112,第一子光源111和第二子光源112可以设置在相同或不同的半导体衬底上。第一子光源111包括多个第一发光元件1110,第二子光源112包括多个第二发光元件1120,每个子光源上的发光元件被整体控制且同步开启或关闭。如图3所示,第一发光元件1110和第二发光元件1120的形状不相同,旨在视觉上做出区别,实际上,第一发光元件1110和第二发光元件1120的形状可以相同,也可以不相同,可根据实际需要进行设置,此处不做限制。
其中第一发光元件1110用于产生第一图案化光束,第二发光元件1120用于产生第二图案化光束,通过对第一子光源111和第二子光源112的单独控制,第一图案化光束和第二图案化光束交替产生。可选地,第一发光元件1110发出的图案化光束的波长与第二发光元件1120发出的图案化光束的波长相同。
衍射光学元件13分别接收第一图案化光束和第二图案化光束,并对应产生可相互叠加的第一结构光图案和第二结构光图案。请参阅图5,例如,在需要投射结构光图案时,处理器40向投影模组10中的光源11发出第一组时序控制信号S51,第一组时序控制信号S51通过脉冲形式发出,其每个投影周期中均包括依次发出的第一时序信号S511和第二时序信号S512,其中第一时序信号S511用于控制第一子光源111发光第一图案化光束,第二时序信号S512用于控制第二子光源112发出第二图案化光束,从而第一组时序控制信号S51可以控制光源11交替产生第一图案化光束和第二图案化光束。处理器40向成像模组20发出第二组时序控制信号S52,第二组时序控制信号S52通过脉冲形式发出,其中第二组时序控制信号S52和第一组时序控制信号S51同步,且第二组时序控制信号S52的每个采集周期与投影周期相同。因此,在一个采集周期内,成像模组20可以分别获取第一结构光图案和第二结构光图案,从而获得经第一结构光图案和第二结构光图案叠加的结构光图案。当然,在其他实施例中,处理器40发出的时序控制信号也可以采取其他合适形式的信号。
当第一时序信号S511处在高电平时,第一子光源111中的第一发光元件1110发出图案化光束;当第二时序信号S512处在高电平时,第二子光源112中的第二发光元件1120发出图案化光束。可以理解的是,第一发光元件1110与第二发光元件1120发出的图案化光束可以是可见光、红外光、紫外光或其他波段的光等。投影模组10投射的图案也可以包括不同图案组成的编码投射方案,如散斑状、块状、十字状、条纹状、特定符号等图案。例如,在一个实施例中,投影模组10投影出的结构光图案为红外散斑图案,红外散斑图案具备高度不相关性以及分布均匀的特点。
当第二组时序控制信号S52处于高电平时,成像模组20被开启,以采集投影模组10投影的结构光图案。由于第一时序信号S511与第二时序信号S512是与第二组时序控制信号S52同步的,且在成像模组10的单帧周期内交替发出的,因此,成像模组20最后形成的结构光图案同时包含第一发光元件1110以及第二发光元件1120所产生的子结构光图案的叠加部分。其叠加的方式可以根据需要进行设置,以下提供两种可能的叠加方式。
请参阅图6,第一种叠加方式:
通过对光源11和衍射光学元件13的合理设计,使得第一发光元件1110开启期间,投影模组10所投射的第一结构光图案601由图中的多个子单元A组成(例如16个子单元A排成4行4列的形式);第二发光元件1120开启期间,投影模组10所投射的第二结构图案602由图中的多个子单元B组成(例如16个子单元B排成4行4列的形式)。由于在一个采集周期内连续打开第一发光元件1110和第二发光元件1120,因此最终形成的结构光图案603为第一结构光图案601和第二结构光图案602叠加的部分,叠加后的结构光图案603的密度比独立打开第一发光元件1110和第二发光元件1120所形成的结构光图案密度都大。
请参阅图7,第二种叠加方式:
通过对光源11和衍射光学元件13的合理设计,使得第一发光元件1110开启期间,投影模组10所投射的第一结构光图案701由图中的多个子单元A组成(例如由8个子单元A排成4行,每行设置两个子单元A,同行的两个子单元A之间有间隙);第二发光元件1120开启期间,投影模组10所投影的第二结构光图案702由图中的多个子单元B组成(例如由8个子单元B排成4行,每行设置两个子单元B,同行的两个子单元B之间有间隙,且与子单元A交替错开,使得两个子单元A之间的间隙正好可以形成一个子单元B,而两个子单元B之间的间隙正好可以形成一个子单元A)。由于在一个采集周期内连续打开第一发光元件1110和第二发光元件1120,因此最终形成的结构光图案703将是两种子结构光图案的叠加,叠加的效果是子单元A和子单元B进行互补以填充空隙区域。
可以理解的是,上述两种叠加方式仅作示意,并不对叠加方式进行限制。叠加最终所形成的结构光图案由具体的方案决定。
在一个实施例中,第一发光元件1110与第二发光元件1120包括发光二极管、边缘发射激光二极管、VCSEL(垂直腔面发射激光器)中的至少一种,且第一发光元件1110和第二发光元件1120的类型可以相同,也可以不同。例如,第一发光元件1110为VCSEL阵列,以不规则的二维图案分布在半导体衬底上;第二发光元件1120为LED阵列,以不规则的二维图案分布在半导体衬底上。再如,第一发光元件1110与第二发光元件1120都为VCSEL阵列,以规则或不规则的二维图案分布在半导体衬底上。应当理解的是,以上内容仅做示例,并不能作为限制性内容。
可以理解的是,第一发光元件1110的功率可以与第二发光元件1120的功率相同或不相同,可根据实际需要进行设置;同样地,第一发光元件1110的数量可以与第二发光元件1120的数量相同或不相同。可以理解的,第一发光元件1110的排列与第二发光元件1120的排列至少部分互补,当第一发光元件1110与第二发光元件1120在成像模组20的单帧采集周期内交替打开时,第一发光元件1110发射的图案化光束与第二发光元件1120发射的图案化光束所形成的子结构光图案在成像模组20中互相交叉排列,以产生部分重叠或互补的叠加图案,从而获得结构光图案。例如,请参阅图3,第一子光源111中多个第一发光元件1110和第二子光源112中多个子光源1120交错分布,从而两者的排列部分互补,可以产生相互重叠或互补的叠加图案。再如,请参阅图4,第一子光源111和第二子光源112相互不重合(例如在两并排设置的区域内分别排布第一发光元件1110和第二发光元件1120),此时两者可以形成互补的叠加图案,也可以获得所需的结构光图案。
成像模组20包括图像传感器以及其它光学元件的组合(例如设于图像传感器的入光路径上的透镜单元),图像传感器可以是CCD(电荷耦合器件)图像传感器、CMOS(Complementary Metal Oxide Semiconductor,互补金属氧化物半导体)图像传感器或其他类型,此处不做限制。图像传感器与处理器40连接,用于在处理器40发出的第二组时序控制信号S52的控制下在一个采集周期内分别采集上述第一发光元件1110和第二发光元件1120交替产生的子结构光图案,并生成结构光图案。可以理解的是,可以在图像传感器的入光路径上设置滤波器,以仅允许投影模组10投射的结构光图案通过,从而避免环境光的干扰。例如,当投影模组10投影的结构光图案为红外散斑图案时,可以在图像传感器的入光面设置红外滤光片,以使得图像传感器仅采集该红外散斑图案。
请参阅图1,在一个实施例中,为了让深度相机拥有更多的功能,深度相机中还可以配备彩色相机模组50,用于采集彩色图案。投影模组10、成像模组20以及彩色相机模组50一般被安装在深度相机的同一个平面上,且处于同一条基线,上述每个模组都对应一个窗口100,便于光线的入射或出射。其中,彩色相机模组50安装在投影模组10与成像模组20之间,且更加靠近投影模组10。在一个实施例中,彩色相机模组50可以是RGB相机。由此可知,配置了彩色相机模组50的深度相机拥有了同步获取深度图案以及RGB图案的能力。成像模组20采集的结构光图案和彩色相机模组50采集的彩色图像可以进一步传输给处理器40,处理器40可以根据接收的上述结构光图案与彩色图案来进行进一步的处理,例如计算深度图像等,并可以根据上述深度图像进行人脸检测、人脸识别、安全支付等操作。
在一些实施例中,为了加速深度相机的散热,还可以在投影模组10的发热处粘贴散热片。例如当投影模组10的光源为VCSEL阵列时,可以在支撑投影模组10的控制电路板30上开设孔,以允许散热片接触VCSEL下的陶瓷,起到散热的作用,这样不仅可以避免VCSEL的工作温度过高,延长了投影模组10的使用寿命,而且加速了深度相机的散热,为深度相机集成到各种移动终端提供了优势。可以理解的是,散热片粘贴在投影模组10的发热处,因此,散热片的体积是非常小的,并不会对增加深度相机的体积有实质性影响。散热片可以采用铝制材料,也可以为其他材料,此处不做限制。
请参阅图8,本实施例的目的还在于提供一种深度图像获取方法,包括以下步骤:
步骤S10:通过第一组时序控制信号控制投影模组交替投射可相互叠加的多组子结构光图案。
投影模组10包括光源11,光源11包括多个相互独立控制的子光源,深度相机中的处理器40可独立控制每个子光源,使得多个子光源在一个投射周期内交替投射子结构光图案,且多个子结构光图案可相互叠加。
例如,子结构光图案的数量为两个,此时光源11包括第一子光源111和第二子光源112,第一子光源111包括多个第一发光元件1110,多个第一发光元件1110统一控制;第二子光源112包括多个第二发光元件1120,多个第二发光元件1120统一控制。处理器40发出的第一组时序控制信号S51包括第一时序信号S511和第二时序信号S512,以分别对第一发光元件1110和第二发光元件1120进行控制。请参阅图9,此时步骤S10可包括:
步骤S101:通过第一时序信号控制投影模组中第一发光元件产生第一图案化光束;
步骤S102:通过第二时序信号控制投影模组中第二发光元件产生第二图案化光束,第一图案化光束和第二图案化光束交替产生;
步骤S103:通过投影模组中衍射光学元件分别接收第一图案化光束和第二图案化光束,并对应产生第一结构光图案和第二结构光图案。
当然,光源11中子光源的数量还可以为其他值,并不仅限于上述的两个的情形,此处不做限制。
处理器40在控制投影模组10向空间分别投射多个子结构光图案时,其也同步控制成像模组20采集多个子结构光图案。例如请参阅图8:
步骤S20:通过第二组时序控制信号控制成像模组采集多组子结构光图案,第一组时序控制信号和所述第二组时序控制信号周期相同,且同步。
当光源11包括第一子光源111和第二子光源112时,成像模组20在第二组时序控制信号S52的控制下,在一个采集周期内分别获取第一结构光图案和第二结构光图案,从而获得经第一结构光图案和第二结构光图案叠加得到的结构光图案。为了确保成像模组20在一个采集周期内可以采集到第一结构光图案和第二结构光图案,第一组时序控制信号S51的一个周期内包括第一时序信号S511和第二时序信号S512,同时第一组时序控制信号S51和第二组时序控制信号S52同步且周期相同。当然,在其他实施例中,处理器40发出的时序控制信号也可以采取其他合适形式的信号。
步骤S30:根据多组子结构光图案的叠加区域,获得结构光图案。其叠加的方式可以根据需要进行设置,例如可以相互重叠的方式,重叠的区域则为结构光图案;也可以为互补的方式,互补的区域则为结构光图案。
本实施例提供的深度图像获取方法中,通过将光源11分成多个子光源进行分别控制,处理器40通过第一时序控制信号S51控制多个子光源在一个投影周期内交替产生图案化光束,因此每一时刻光源投射图案化光束时,最多仅有一个子光源中发光元件被点亮,而无需同时点亮光源中的所有发光元件,因此会大大降低整体功率,从而降低了配套驱动电路等的设计要求。不仅如此,由于多个子光源是分时点亮,而每个子光源的点亮时间并不会持续一个投影周期,因此光源在一个周期内的功耗会大大降低,可以有效满足采用该投影模组10的智能设备对低功耗的要求。因此,通过本实施例的深度图像获取方法,不仅可以获得较高的分辨率,而且可以有效降低投影模组10的功耗。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种投影模组,其特征在于:包括沿光路设置的光源、光学透镜以及衍射光学元件;
所述光源包括多个子光源,每个所述子光源包括多个发光元件,多个所述子光源用于在一个投影周期内交替产生图案化光束;
所述衍射光学元件分别接收多个所述子光源交替产生的所述图案化光束,并对应产生可相互叠加的子结构光图案。
2.如权利要求1所述的投影模组,其特征在于:多个所述子结构光图案部分重叠;
或者,多个所述子结构光图案互补。
3.如权利要求1所述的投影模组,其特征在于:所述光源包括第一子光源和第二子光源,所述第一子光源包括多个第一发光元件,所述第二子光源包括多个第二发光元件;
所述第一发光元件用于产生第一图案化光束,所述第二发光元件用于产生第二图案化光束,所述第一图案化光束和所述第二图案化光束交替产生;
所述衍射光学元件分别接收所述第一图案化光束和第二图案化光束,并对应产生可相互叠加的第一结构光图案和第二结构光图案。
4.如权利要求3所述的投影模组,其特征在于:所述第一发光元件包括发光二极管、边缘发射激光二极管和垂直腔面发射激光器中的至少一种;
所述第二发光元件包括发光二极管、边缘发射激光二极管和垂直腔面发射激光中的至少一种。
5.如权利要求3所述的投影模组,其特征在于:所述第一子光源和所述第二子光源至少部分重合,所述第一发光元件和所述第二发光元件交错分布;
或者,所述第一子光源和所述第二子光源相互不重合。
6.一种深度相机,其特征在于,包括权利要求1~5任一项所述的投影模组、成像模组以及处理器;
所述处理器与所述成像模组和所述投影模组均连接;
所述处理器用于控制所述投影模组中多个子光源交替产生图案化光束,以及控制所述成像模组分别获取多个子结构光图案,以获得结构光图案。
7.如权利要求6所述的深度相机,其特征在于:所述深度相机还包括散热片,所述多个子光源分别与所述散热片导热连接。
8.如权利要求6所述的深度相机,其特征在于:所述深度相机还包括彩色相机模组,所述彩色相机模组与所述处理器连接,用于采集彩色图案。
9.一种深度图像获取方法,其特征在于,包括:
通过第一组时序控制信号控制投影模组交替投射可相互叠加的多组子结构光图案;
通过第二组时序控制信号控制成像模组采集所述多组子结构光图案,所述第一组时序控制信号和所述第二组时序控制信号周期相同;
根据所述多组子结构光图案的叠加区域,获得结构光图案。
10.如权利要求9所述的深度图像获取方法,其特征在于:所述子结构光图案的数量为两个,所述第一组时序控制信号包括第一时序信号和第二时序信号;
所述通过第一组时序控制信号控制投影模组交替投射可相互叠加的多组结构光图案步骤包括:
通过所述第一时序信号控制投影模组中第一发光元件产生第一图案化光束;
通过所述第二时序信号控制投影模组中第二发光元件产生第二图案化光束,所述第一图案化光束和所述第二图案化光束交替产生;
通过所述投影模组中衍射光学元件分别接收所述第一图案化光束和第二图案化光束,并对应产生第一结构光图案和第二结构光图案。
CN201811589922.5A 2018-12-25 2018-12-25 一种投影模组、深度相机以及深度图像获取方法 Active CN109597211B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811589922.5A CN109597211B (zh) 2018-12-25 2018-12-25 一种投影模组、深度相机以及深度图像获取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811589922.5A CN109597211B (zh) 2018-12-25 2018-12-25 一种投影模组、深度相机以及深度图像获取方法

Publications (2)

Publication Number Publication Date
CN109597211A true CN109597211A (zh) 2019-04-09
CN109597211B CN109597211B (zh) 2022-01-14

Family

ID=65964269

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811589922.5A Active CN109597211B (zh) 2018-12-25 2018-12-25 一种投影模组、深度相机以及深度图像获取方法

Country Status (1)

Country Link
CN (1) CN109597211B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110221309A (zh) * 2019-04-30 2019-09-10 深圳市光鉴科技有限公司 基于异步ToF离散点云的3D成像装置及电子设备
CN110244318A (zh) * 2019-04-30 2019-09-17 深圳市光鉴科技有限公司 基于异步ToF离散点云的3D成像方法
CN110275381A (zh) * 2019-06-26 2019-09-24 业成科技(成都)有限公司 结构光发射模组及应用其的深度感测设备
CN110290376A (zh) * 2019-05-24 2019-09-27 深圳市光鉴科技有限公司 具有3d摄像模组的显示装置及电子设备
CN111246073A (zh) * 2020-03-23 2020-06-05 维沃移动通信有限公司 成像装置、方法及电子设备
CN111398977A (zh) * 2020-04-10 2020-07-10 深圳市灵明光子科技有限公司 一种可提高分辨率的成像装置及其成像方法和探测设备
WO2023083337A1 (zh) * 2021-11-12 2023-05-19 先临三维科技股份有限公司 一种结构光投影模组及三维扫描装置

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1727988A (zh) * 2004-07-28 2006-02-01 三洋电机株式会社 照明装置以及投影型显示装置
US20060023172A1 (en) * 2004-07-28 2006-02-02 Sanyo Electric Co. Illuminating device and projection type video display
CN101737701A (zh) * 2010-01-07 2010-06-16 苏州佳世达光电有限公司 发光二级体照明***及其控制方法
CN101937162A (zh) * 2009-06-30 2011-01-05 卡西欧计算机株式会社 光源装置、投影装置以及投影方法
CN102007339A (zh) * 2008-04-21 2011-04-06 奥林巴斯株式会社 照明装置以及照明摄像装置
CN103309137A (zh) * 2012-03-15 2013-09-18 普莱姆森斯有限公司 结构光的投影机
US20160377414A1 (en) * 2015-06-23 2016-12-29 Hand Held Products, Inc. Optical pattern projector
JP2017058569A (ja) * 2015-09-18 2017-03-23 カシオ計算機株式会社 光源装置及び投影装置
CN106813110A (zh) * 2015-11-27 2017-06-09 高准精密工业股份有限公司 发光装置
CN106997603A (zh) * 2017-05-19 2017-08-01 深圳奥比中光科技有限公司 基于vcsel阵列光源的深度相机
CN107424188A (zh) * 2017-05-19 2017-12-01 深圳奥比中光科技有限公司 基于vcsel阵列光源的结构光投影模组
US9946089B2 (en) * 2015-10-21 2018-04-17 Princeton Optronics, Inc. Generation of coded structured light patterns using VCSEL arrays
CN108388071A (zh) * 2018-02-07 2018-08-10 深圳奥比中光科技有限公司 深度相机及其投影模组
CN108594453A (zh) * 2018-03-23 2018-09-28 深圳奥比中光科技有限公司 一种结构光投影模组和深度相机
CN108828887A (zh) * 2018-06-05 2018-11-16 深圳奥比中光科技有限公司 投影仪及深度相机

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1727988A (zh) * 2004-07-28 2006-02-01 三洋电机株式会社 照明装置以及投影型显示装置
US20060023172A1 (en) * 2004-07-28 2006-02-02 Sanyo Electric Co. Illuminating device and projection type video display
CN102007339A (zh) * 2008-04-21 2011-04-06 奥林巴斯株式会社 照明装置以及照明摄像装置
CN101937162A (zh) * 2009-06-30 2011-01-05 卡西欧计算机株式会社 光源装置、投影装置以及投影方法
CN101737701A (zh) * 2010-01-07 2010-06-16 苏州佳世达光电有限公司 发光二级体照明***及其控制方法
CN103309137A (zh) * 2012-03-15 2013-09-18 普莱姆森斯有限公司 结构光的投影机
US20160377414A1 (en) * 2015-06-23 2016-12-29 Hand Held Products, Inc. Optical pattern projector
JP2017058569A (ja) * 2015-09-18 2017-03-23 カシオ計算機株式会社 光源装置及び投影装置
US9946089B2 (en) * 2015-10-21 2018-04-17 Princeton Optronics, Inc. Generation of coded structured light patterns using VCSEL arrays
CN106813110A (zh) * 2015-11-27 2017-06-09 高准精密工业股份有限公司 发光装置
CN106997603A (zh) * 2017-05-19 2017-08-01 深圳奥比中光科技有限公司 基于vcsel阵列光源的深度相机
CN107424188A (zh) * 2017-05-19 2017-12-01 深圳奥比中光科技有限公司 基于vcsel阵列光源的结构光投影模组
CN108388071A (zh) * 2018-02-07 2018-08-10 深圳奥比中光科技有限公司 深度相机及其投影模组
CN108594453A (zh) * 2018-03-23 2018-09-28 深圳奥比中光科技有限公司 一种结构光投影模组和深度相机
CN108828887A (zh) * 2018-06-05 2018-11-16 深圳奥比中光科技有限公司 投影仪及深度相机

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110221309B (zh) * 2019-04-30 2021-08-17 深圳市光鉴科技有限公司 基于异步ToF离散点云的3D成像装置及电子设备
CN110244318A (zh) * 2019-04-30 2019-09-17 深圳市光鉴科技有限公司 基于异步ToF离散点云的3D成像方法
CN110244318B (zh) * 2019-04-30 2021-08-17 深圳市光鉴科技有限公司 基于异步ToF离散点云的3D成像方法
CN110221309A (zh) * 2019-04-30 2019-09-10 深圳市光鉴科技有限公司 基于异步ToF离散点云的3D成像装置及电子设备
CN110290376A (zh) * 2019-05-24 2019-09-27 深圳市光鉴科技有限公司 具有3d摄像模组的显示装置及电子设备
CN110290376B (zh) * 2019-05-24 2023-08-08 深圳市光鉴科技有限公司 具有3d摄像模组的显示装置及电子设备
CN110275381A (zh) * 2019-06-26 2019-09-24 业成科技(成都)有限公司 结构光发射模组及应用其的深度感测设备
CN110275381B (zh) * 2019-06-26 2021-09-21 业成科技(成都)有限公司 结构光发射模组及应用其的深度感测设备
CN111246073A (zh) * 2020-03-23 2020-06-05 维沃移动通信有限公司 成像装置、方法及电子设备
WO2021190099A1 (zh) * 2020-03-23 2021-09-30 维沃移动通信有限公司 成像装置、方法及电子设备
CN111246073B (zh) * 2020-03-23 2022-03-25 维沃移动通信有限公司 成像装置、方法及电子设备
CN111398977A (zh) * 2020-04-10 2020-07-10 深圳市灵明光子科技有限公司 一种可提高分辨率的成像装置及其成像方法和探测设备
WO2023083337A1 (zh) * 2021-11-12 2023-05-19 先临三维科技股份有限公司 一种结构光投影模组及三维扫描装置

Also Published As

Publication number Publication date
CN109597211B (zh) 2022-01-14

Similar Documents

Publication Publication Date Title
CN109597211A (zh) 一种投影模组、深度相机以及深度图像获取方法
WO2018209989A1 (zh) 基于vcsel阵列光源的结构光投影模组
WO2018209988A1 (zh) 基于vcsel阵列光源的深度相机
KR101926321B1 (ko) 통합 구조화된 광 프로젝터
CN104603574B (zh) 具有多个光源的运动传感器装置
US11887321B2 (en) Three-dimensional scanning image acquisition and processing methods and apparatuses, and three-dimensional scanning device
US11546453B2 (en) Projection module and terminal
CN208351151U (zh) 投影模组、深度相机及电子设备
US20070053179A1 (en) Low profile light source utilizing a flexible circuit carrier
JP2015508509A (ja) 光電子モジュール、特にフラッシュモジュールおよびそれらの製造方法
CN106200249A (zh) 结构光和rgb传感器模组整体式集成***3d相机
CN108227231A (zh) 条纹投影模组
CN105717729B (zh) 包含荧光体板的光源装置及投影装置
CN107132720A (zh) 发光装置及其光学投影模组
CN106817794A (zh) Tof电路模块及其应用
CN108828887A (zh) 投影仪及深度相机
WO2022241778A1 (zh) 飞行时间深度检测的发射装置及电子设备
US20220268571A1 (en) Depth detection apparatus and electronic device
CN206877029U (zh) 激光投影装置
CN209435353U (zh) 投影器和深度相机
WO2021004349A1 (zh) 一种结构光测距芯片模组及电子设备
CN110233974A (zh) 移动终端及其补光方法
CN106885158A (zh) 照明模组及其应用
JP2008102199A (ja) 照明装置及び撮像装置
CN206020916U (zh) 结构光和rgb传感器模组整体式集成***3d相机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 11-13 / F, joint headquarters building, high tech Zone, 63 Xuefu Road, Yuehai street, Nanshan District, Shenzhen, Guangdong 518000

Applicant after: Obi Zhongguang Technology Group Co., Ltd

Address before: 12 / F, joint headquarters building, high tech Zone, 63 Xuefu Road, Yuehai street, Nanshan District, Shenzhen, Guangdong 518000

Applicant before: SHENZHEN ORBBEC Co.,Ltd.

GR01 Patent grant
GR01 Patent grant