CN110135278A - 一种障碍物检测方法、装置及电子设备 - Google Patents

一种障碍物检测方法、装置及电子设备 Download PDF

Info

Publication number
CN110135278A
CN110135278A CN201910329663.0A CN201910329663A CN110135278A CN 110135278 A CN110135278 A CN 110135278A CN 201910329663 A CN201910329663 A CN 201910329663A CN 110135278 A CN110135278 A CN 110135278A
Authority
CN
China
Prior art keywords
trellis
point
type
specific
specific trellis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910329663.0A
Other languages
English (en)
Other versions
CN110135278B (zh
Inventor
肖泽东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shanghai Co Ltd
Original Assignee
Tencent Technology Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shanghai Co Ltd filed Critical Tencent Technology Shanghai Co Ltd
Priority to CN201910329663.0A priority Critical patent/CN110135278B/zh
Publication of CN110135278A publication Critical patent/CN110135278A/zh
Application granted granted Critical
Publication of CN110135278B publication Critical patent/CN110135278B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)

Abstract

本发明公开了一种障碍物检测方法、装置及电子设备,其中障碍物检测方法包括:基于目标区域的深度数据确定所述目标区域的三维空间点集;将所述三维空间点集映射到所述目标区域对应的目标平面区域,得到所述目标平面区域的平面点集;所述目标平面区域包括多个预设网格;根据每个预设网格包括的平面点集中的平面点,确定所述多个预设网格的网格类型;根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍物点集,得到障碍物信息。本发明降低了由于深度数据中的噪声带来的障碍物的误检概率,提高了对障碍物检测的准确性。

Description

一种障碍物检测方法、装置及电子设备
技术领域
本发明涉及智能设备技术领域,特别涉及一种障碍物检测方法、装置及电 子设备。
背景技术
对于可自行移动的智能设备如机器人来说,准确的感知障碍物以躲避障碍 物是保证其不发生意外碰撞的重要功能。
目前,机器人检测障碍物的一种方法是通过安装在机器人上的深度摄像头 采集待检测区域的深度图像,分析处理该深度图像以得到待检测区域中的障碍 物信息。由于深度摄像头采集的深度图像中常常包含较多的噪声,现有技术在 根据深度图像确定障碍物时容易在没有障碍物的区域标记障碍物,导致障碍物 的误检,使得机器人感知障碍物的准确性低。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种障碍物检测方法、装 置及电子设备。所述技术方案如下:
一方面,提供了一种障碍物检测方法,所述方法包括:
基于目标区域的深度数据确定所述目标区域的三维空间点集;
将所述三维空间点集映射到所述目标区域对应的目标平面区域,得到所述 目标平面区域的平面点集;所述目标平面区域包括多个预设网格;
根据每个预设网格包括的平面点集中的平面点,确定所述多个预设网格的 网格类型;
根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍物点集, 得到障碍物信息。
另一方面,提供了一种障碍物检测装置,所述装置包括:
第一确定模块,用于基于目标区域的深度数据确定所述目标区域的三维空 间点集;
映射模块,用于将所述三维空间点集映射到所述目标区域对应的目标平面 区域,得到所述目标平面区域的平面点集;所述目标平面区域包括多个预设网 格;
第二确定模块,用于根据每个预设网格包括的平面点集中的平面点,确定 所述多个预设网格的网格类型;
生成模块,用于根据所述网格类型为第一网格类型的预设网格中的平面点 生成障碍物点集,得到障碍物信息。
可选的,所述生成模块包括:
均值点确定模块,用于根据每个第一网格类型的预设网格中平面点的坐标, 确定对应第一网格类型的预设网格的均值点;
生成子模块,用于根据所述第一网格类型的预设网格的均值点生成障碍物 点集,得到障碍物信息。
可选的,所述第二确定模块包括:
第一获取模块,用于获取每个预设网格包括的平面点集中平面点的点数量;
网格类型确定模块,用于根据所述点数量,确定所述多个预设网格的网格 类型。
可选的,所述网格类型确定模块包括:
第一网格类型确定模块,用于将所述点数量超过第一数量阈值的预设网格, 确定为第一网格类型;
第二网格类型确定模块,用于将所述点数量超过第二数量阈值且不超过所 述第一数量阈值的预设网格,确定为第二网格类型;
第三网格类型确定模块,用于将所述点数量不超过所述第二数量阈值的预 设网格,确定为第三网格类型;
其中,所述第一数量阈值大于所述第二数量阈值。
在一些实施例中,所述装置还包括:
第三确定模块,用于确定所述目标平面区域中位于探测范围内的探测预设 网格;
第四确定模块,用于确定所述探测预设网格中,网格类型为第一网格类型 和第二网格类型的目标预设网格;
第五确定模块,用于根据探测点和所述目标预设网格,确定所述探测预设 网格中的遮挡预设网格;
第六确定模块,用于将所述探测预设网格中除所述目标预设网格和遮挡预 设网格之外的预设网格确定为无障碍物区域;
删除模块,用于确定所述无障碍物区域中的历史障碍物信息,并删除所述 历史障碍物信息。
可选的,所述第五确定模块包括:
第七确定模块,用于确定从所述探测点出发且经过所述目标预设网格边缘 的连接线;
第八确定模块,用于确定所述探测预设网格中位于所述连接线范围内的子 探测预设网格;
第九确定模块,用于将所述目标预设网格背离所述探测点一侧的子探测预 设网格确定为遮挡预设网格。
可选的,所述第一确定模块包括:
第二获取模块,用于获取所述目标区域的深度数据;
预处理模块,用于对所述深度数据进行预处理;
第一确定子模块,用于基于预处理后的深度数据确定所述目标区域的三维 空间点集。
可选的,所述映射模块包括:
变换模块,用于将所述三维空间点集从对应的相机坐标系变换为世界坐标 系,得到变换后的三维空间点集;
映射子模块,用于将变换后的所述三维空间点集映射到所述目标平面区域, 得到所述目标平面区域的平面点集。
另一方面,提供了一种电子设备,包括处理器和存储器,所述存储器中存 储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所 述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述障 碍物检测方法。
本发明实施例提供的技术方案带来的有益效果是:
本发明实施例通过目标区域的深度数据确定该目标区域的三维空间点集, 并将该三维空间点集映射到目标区域对应的、包括多个预设网格的目标平面区 域,得到该目标平面区域的平面点集,然后根据每个预设网格包括的平面点集 中的平面点,确定多个预设网格的网格类型,并根据网格类型为第一网格类型 的预设网格中的平面点生成障碍物点集,得到障碍物信息,从而对平面点集进 行了较严格的滤波,降低了由于深度数据中的噪声带来的障碍物的误检概率, 提高了对障碍物检测的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所 需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明 的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下, 还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种应用场景的示意图;
图2是本发明实施例提供的一种障碍物检测方法的流程示意图;
图3a是本发明实施例提供的目标平面区域的一种示意图;
图3b是本发明实施例提供的映射有平面点集的目标平面区域的一种示意图;
图4是本发明实施例提供的另一种障碍物检测方法的流程示意图;
图5是本发明实施例提供的映射有平面点集的目标平面区域的俯视示意图;
图6是本发明实施例提供的根据探测点和所述目标预设网格确定所述探测 预设网格中的遮挡预设网格的一种方法流程示意图;
图7是本发明实施例提供的一种障碍物检测装置的结构示意图;
图8是本发明实施例提供的生成模块的一种结构示意图;
图9是本发明实施例提供的第二确定模块的一种结构示意图;
图10是本发明实施例提供的另一种障碍物检测装置的结构示意图;
图11是本发明实施例提供的第五确定模块的一种结构示意图;
图12是本发明实施例提供的第一确定模块的一种结构示意图;
图13是本发明实施例提供的映射模块的一种结构示意图;
图14是本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明 实施方式作进一步地详细描述。
请参阅图1,其所示为本发明实施例提供的一种应用场景的示意图,该应用 场景中机器人100能够对周围环境中的障碍物进行检测。如图1中所示,机器 人100上可以安装具有深度检测功能的传感器110,如深度相机,该深度相机可 以但不限于安装在机器人100的前方,以用于采集其前进方向上的深度图像。 机器人100还可以包括控制器120、本发明实施例的障碍物检测装置130以及电 机和转动轮140,通过本发明实施例的障碍物检测装置130准确获取障碍物信息 后,控制器120可以根据该障碍物信息来对电机进行运动控制,以控制各转动 轮140的转动,从而实现避开障碍物。需要说明的是,本发明实施例的障碍物检测装置可以如图1所示安装于机器人100上,也可以是一个独立的设备,能 够与机器人100进行通信。
其中,机器人100可以是但不限于室内移动机器人,例如会议室的自动座 椅、配送机器人等。一个具体的应用场景可以是当自动座椅的位置错乱后,自 动座椅可以自动进行归位整理。另一个具体的应用场景可以是酒店的配送机器 人从仓库取货之后再配送到客房。
请参阅图2,其所示为本发明实施例提供的一种障碍物检测方法的流程示意 图,需要说明的是,本说明书提供了如实施例或流程图所述的方法操作步骤, 但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中 列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺 序。在实际中的***或产品执行时,可以按照实施例或者附图所示的方法顺序 执行或者并行执行(例如并行处理器或者多线程处理的环境)。具体的,如图2所示,所述方法包括:
S201,基于目标区域的深度数据确定所述目标区域的三维空间点集。
在本说明书实施例中,可以在机器人上安装深度传感器,通过深度传感器 采集目标区域的深度数据,该深度数据包括深度传感器到目标区域中点的距离/ 深度。其中,深度传感器可以包括但不限于TOF或结构光等深度相机、双目摄 像头、单目摄像头、激光雷达等。其中,目标区域可以是室内区域。
应理解的,目标区域的深度数据可以是单个深度传感器采集的数据,也可 以是多个深度传感器共同采集的数据,该多个深度传感器可以设置在机器人的 不同方位,从而可以获取到目标区域中多个方位的深度数据。
具体的,在基于目标区域的深度数据确定所述目标区域的三维空间点集时, 可以获取目标区域的深度数据,对该深度数据进行预处理,然后基于预处理后 的深度数据确定目标区域的三维空间点集。其中,预处理可以包括但不限于滤 波处理、补洞处理等。通过预处理提高了三维空间点集中三维空间点的准确性, 进而有利于提高最终障碍物检测的准确性。
实际应用中,可以根据深度相机的相机内参和深度数据计算深度图像中所 有像素点在相机坐标系中的实际位置(xc,yc,zc)以得到三维空间点集,其中,xc表示像素点对应实际物体点到相机中心的横向距离,yc表示像素点对应实际物体 点到相机中心的纵向距离,zc表示像素点对应实际物体点到相机中心的深度距离。
S203,将所述三维空间点集映射到所述目标区域对应的目标平面区域,得 到所述目标平面区域的平面点集;所述目标平面区域包括多个预设网格。
在一些实施例中,步骤S201得到的三维空间点集中各点的信息是基于相机 坐标系的,因此,在将所述三维空间点集映射到所述目标区域对应的目标平面 区域,得到所述目标平面区域的平面点集时,需要将三维空间点集从对应的相 机坐标系变为世界坐标系,从而得到变换后的三维空间点集,然后将变换后的 三维空间点集映射到目标平面区域,以得到目标平面区域的平面点集。
在本说明书实施例中,所述目标平面区域包括多个预设网格,其中,目标 平面区域包括机器人当前所在平面上的指定区域,例如,机器人当前在地面上, 则目标平面区域可以是地面上的指定区域。其中,指定区域包括深度传感器的 探测范围。实际应用中,目标平面区域的形状和大小可以结合深度传感器的探 测范围以及实际需求进行设定,例如,目标平面区域可以为3mx3m的矩形区域。
在一些实施例中,在将所述三维空间点集映射到目标区域对应的目标平面 区域得到该目标平面区域的平面点集时,可以先确定目标区域对应的目标平面 区域,将三维空间点集映射到该目标平面区域,然后将映射后的目标平面区域 划分为多个预设网格,从而得到该目标平面区域的平面点集。
在另一些实施例中,在将所述三维空间点集映射到目标区域对应的目标平 面区域得到该目标平面区域的平面点集时,可以先确定目标区域对应的目标平 面区域,将该目标平面区域划分为多个预设网格,然后将三维空间点集映射到 包括多个预设网格的目标平面区域,从而得到该目标平面区域的平面点集。
以机器人上安装的深度传感器为用于采集前进方向上的深度图像的深度相 机为例,目标平面区域可以是机器人前进方向的前方地面上指定的一个矩形区 域,如图3a所示的地面上的矩形区域310,深度相机在该矩形区域内的探测范 围为深度相机水平探测范围所包括的区域。该矩形区域可以划分为多个预设网 格,每个预设网格的尺寸可以相同也可以不同,优选的,可以按照预设尺寸将 该矩形区域划分为多个相同尺寸的预设网格,其中,预设尺寸可以根据实际需 要进行设定,例如,预设尺寸设定为0.02mx0.02m,即划分后每个预设网格的尺 寸大小均为0.02mx0.02m。在本说明书实施例中,将目标平面区域的平面点集中 落在各个预设网格内的点归属到相应的预设网格,如图3b所示的平面点集320。
S205,根据每个预设网格包括的平面点集中的平面点,确定所述多个预设 网格的网格类型。
本说明书实施例中,在根据每个预设网格包括的平面点集中的平面点确定 所述多个预设网格的网格类型时,可以获取每个预设网格包括的平面点集中平 面点的点数量,根据该点数量确定所述多个预设网格的网格类型。
具体的,可以将点数量超过第一数量阈值的预设网格确定为第一网格类型; 将点数量超过第二数量阈值且不超过第一数量阈值的预设网格确定为第二网格 类型;将点数量不超过第二数量阈值的预设网格,确定为第三网格类型,其中, 第一数量阈值大于第二数量阈值,如以下公式(1)所示。
其中,nij表示目标平面区域中第i行,第j列的预设网格所包括的平面点集 中平面点的点数量;Lij表示目标平面区域中第i行,第j列的预设网格的网格类 型;NO表示第一数量阈值,NG表示第二数量阈值。
可见,第一网格类型的预设网格为包括较多平面点的网格,即其该类网格 中的平面点是障碍物的可能性很大,可以称之为显著障碍物网格。第二网格类 型的预设网格包括的平面点的数量相对于第一网格类型的预设网格来说较少, 即该类网格中的平面点是障碍物的可能性相对小一点,可以称之为一般障碍物 网格。第三网格类型的预设网格中的平面点的数量最少,即这些平面点为噪声 所产生的可能性很大。
其中,NO可以通过历史真实障碍物对应的网格中点数量的最小值或者平均 值来确定。NG可以通过历史真实无障碍物的网格中点数量的最大值或者平均值 来确定。当然,实际应用中,第一数量阈值NO和第二数量阈值NG还可以结合实 际应用中的效果进行微调。
S207,根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍 物点集,得到障碍物信息。
由于深度数据中噪声所产生的nij通常较小,远小于第一数量阈值NO,因此, 根据第一网格类型的预设网格中的平面点生成障碍物点集,从而得到障碍物信 息,可以有效的去除深度数据中噪声所带来的错误点,进而提高了对障碍物检 测的准确性。
具体的,在根据所述网格类型为第一网格类型的预设网格中的平面点生成 障碍物点集时,可以根据每个第一网格类型的预设网格中平面点的坐标,确定 对应第一网格类型的预设网格的均值点,并根据第一网格类型的预设网格的均 值点生成障碍物点集,以得到障碍物信息。
例如,第一网格类型的预设网格中包括的平面点为P={p1,p2……,pn}, pn={xn,yn},则该第一网格类型的预设网格的均值点其中,
本发明实施例通过第一网格类型的预设网格的均值点生成障碍物点集可以 去除处于同一平面但高度不一致的重复点,使得障碍物点集稀疏,有利于减少 后续对障碍物点集处理的计算量,使得机器人能够更加快速的完成障碍物的检 测,加快响应速度。
由本发明实施例的上述技术方案可见,本发明实施例通过目标区域的深度 数据确定该目标区域的三维空间点集,并将该三维空间点集映射到目标区域对 应的、包括多个预设网格的目标平面区域,得到该目标平面区域的平面点集, 然后根据每个预设网格包括的平面点集中的平面点,确定多个预设网格的网格 类型,并根据网格类型为第一网格类型的预设网格中的平面点生成障碍物点集, 得到障碍物信息,从而对平面点集进行了较严格的滤波,减小了由于深度数据 中的噪声带来的障碍物的误检概率,提高了对障碍物检测的准确性。
实际应用中,机器人在障碍物检测过程中还会对当前确定为无障碍物区域 中的历史障碍物信息进行清除,以更新对于障碍物的标记,现有技术中在进行 障碍物清除时由于确定的无障碍物区域不准确,常常存在将不该清除的历史障 碍物错误的清除掉的问题。
鉴于此,本说明书实施例在根据所述网格类型为第一网格类型的预设网格 中的平面点生成障碍物点集,得到障碍物信息之后,还可以包括如图4所示的 步骤。
S401,确定所述目标平面区域中位于探测范围内的探测预设网格。
其中,目标平面区域中的探测范围为深度传感器水平探测范围所包括的区 域。如图5所示的俯视图中,由线段1、线段2、线段3、线段4、线段5和线 段6围成的区域中的预设网格即为目标平面区域中位于探测范围内的探测预设 网格。其中,图5中的X轴为机器人的前进方向,Y轴垂直于前进方向,X轴 和Y轴与目标平面区域位于同一平面。
需要说明的是,对于探测范围边界上的预设网格即该预设网格的一部分位 于探测范围内,另一部分位于探测范围之外,在确定这类预设网格是否为探测 预设网格时,可以分别获取预设网格位于探测范围内的部分的第一面积,以及 位于探测范围外的部分的第二面积,若第一面积与第二面积的比值超过预设阈 值,则将该预设网格确定为探测预设网格。其中,预设阈值可以根据实际需要 进行设定,例如,可以将预设阈值设定为0.5或者0.7等。
S403,确定所述探测预设网格中,网格类型为第一网格类型和第二网格类 型的目标预设网格。
S405,根据探测点和所述目标预设网格,确定所述探测预设网格中的遮挡 预设网格。
其中,探测点为深度传感器原点在目标平面的投影点。具体的,所述根据 探测点和所述目标预设网格,确定所述探测预设网格中的遮挡预设网格可以采 用图6所示的方法,该方法可以包括:
S601,确定从所述探测点出发且经过所述目标预设网格边缘的连接线。
在本说明书实施例中,可以从探测点出发绘制经过目标预设网格边缘的连 接线,该连接线延伸至目标平面区域的边。如图5中所示的连接线a和连接线b。
S603,确定所述探测预设网格中位于所述连接线范围内的子探测预设网格。
如图5所示,子探测预设网格包括两部分,分别为探测点与目标预设网格 之间的子探测预设网格A和目标预设网格背离探测点一侧的子探测预设网格B。
需要说明的是,对于位于连接线范围边界的探测预设网格的处理方式可以 采取如前述位于探测范围边界的预设网格的类似处理方式,即可以分别获取边 界上探测预设网格位于连接线范围内的部分的第三面积,以及位于连接线范围 外的部分的第四面积,若第三面积与第四面积的比值超过预设阈值,则将该预 设网格确定为子探测预设网格。其中,预设阈值可以根据实际需要进行设定, 例如,可以将预设阈值设定为0.5或者0.7等。
S605,将所述目标预设网格背离所述探测点一侧的子探测预设网格确定为 遮挡预设网格。
如图5所示,将目标预设网格背离探测点一侧的子探测预设网格B确定为 遮挡预设网格。
S407,将所述探测预设网格中除所述目标预设网格和遮挡预设网格之外的 预设网格确定为无障碍物区域。
本说明书实施例中,将探测预设网格中除目标预设网格和遮挡预设网格之 外的预设网格构成的区域确定为无障碍区域。
S409,确定所述无障碍物区域中的历史障碍物信息,并删除所述历史障碍 物信息。
其中,历史障碍物信息为在当前障碍物检测之前确定的障碍物信息。具体 的,可以将当前无障碍物区域与该无障碍物区域的历史状态进行比对,若该无 障碍区域的历史状态中包括历史障碍物信息,则可以删除该历史障碍物信息。
由于第一网格类型的预设网格为显著障碍物网格,而第二网格类型的预设 网格为一般障碍物网格,本发明实施例在确定无障碍物区域时,将第一网格类 型和第二网格类型的预设网格同时考虑在内,有效的避免了对无障碍物区域的 确定错误,进而避免了对历史障碍物的错误清除。
与上述几种实施例提供的障碍物检测方法相对应,本发明实施例还提供一 种障碍物检测装置,由于本发明实施例提供的障碍物检测装置与上述几种实施 例提供的障碍物检测方法相对应,因此前述障碍物检测方法的实施方式也适用 于本实施例提供的障碍物检测装置,在本实施例中不再详细描述。
请参阅图7,其所示为本发明实施例提供的一种障碍物检测装置的结构示意 图,如图7所示,该装置可以包括:第一确定模块710、映射模块720、第二确 定模块730和生成模块740,其中,
第一确定模块710,用于基于目标区域的深度数据确定所述目标区域的三维 空间点集;
映射模块720,用于将所述三维空间点集映射到所述目标区域对应的目标平 面区域,得到所述目标平面区域的平面点集;所述目标平面区域包括多个预设 网格;
第二确定模块730,用于根据每个预设网格包括的平面点集中的平面点,确 定所述多个预设网格的网格类型;
生成模块740,用于根据所述网格类型为第一网格类型的预设网格中的平面 点生成障碍物点集,得到障碍物信息。
可选的,如图8所示,所述生成模块740可以包括:
均值点确定模块7410,用于根据每个第一网格类型的预设网格中平面点的 坐标,确定对应第一网格类型的预设网格的均值点;
生成子模块7420,用于根据所述第一网格类型的预设网格的均值点生成障 碍物点集,得到障碍物信息。
可选的,如图9所示,所述第二确定模块730可以包括:
第一获取模块7310,用于获取每个预设网格包括的平面点集中平面点的点 数量;
网格类型确定模块7320,用于根据所述点数量,确定所述多个预设网格的 网格类型。
在一些实施例中,如图9所示,网格类型确定模块7320可以包括:
第一网格类型确定模块7321,用于将所述点数量超过第一数量阈值的预设 网格,确定为第一网格类型;
第二网格类型确定模块7322,用于将所述点数量超过第二数量阈值且不超 过所述第一数量阈值的预设网格,确定为第二网格类型;
第三网格类型确定模块7323,用于将所述点数量不超过所述第二数量阈值 的预设网格,确定为第三网格类型;其中,所述第一数量阈值大于所述第二数 量阈值。
在一些实施例中,如图10提供的另一种障碍物检测装置的结构示意图,该 装置还可以包括:
第三确定模块750,用于确定所述目标平面区域中位于探测范围内的探测预 设网格;
第四确定模块760,用于确定所述探测预设网格中,网格类型为第一网格类 型和第二网格类型的目标预设网格;
第五确定模块770,用于根据探测点和所述目标预设网格,确定所述探测预 设网格中的遮挡预设网格;
第六确定模块780,用于将所述探测预设网格中除所述目标预设网格和遮挡 预设网格之外的预设网格确定为无障碍物区域;
删除模块790,用于确定所述无障碍物区域中的历史障碍物信息,并删除所 述历史障碍物信息。
可选的,如图11所示,所述第五确定模块770可以包括:
第七确定模块7710,用于确定从所述探测点出发且经过所述目标预设网格 边缘的连接线;
第八确定模块7720,用于确定所述探测预设网格中位于所述连接线范围内 的子探测预设网格;
第九确定模块7730,用于将所述目标预设网格背离所述探测点一侧的子探 测预设网格确定为遮挡预设网格。
可选的,如图12所示,第一确定模块710可以包括:
第二获取模块7110,用于获取所述目标区域的深度数据;
预处理模块7120,用于对所述深度数据进行预处理;
第一确定子模块7130,用于基于预处理后的深度数据确定所述目标区域的 三维空间点集。
可选的,如图13所示,映射模块720可以包括:
变换模块7210,用于将所述三维空间点集从对应的相机坐标系变换为世界 坐标系,得到变换后的三维空间点集;
映射子模块7220,用于将变换后的所述三维空间点集映射到所述目标平面 区域,得到所述目标平面区域的平面点集。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功 能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由 不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以 上描述的全部或者部分功能。
本发明实施例的障碍物检测装置对三维空间点集对应的平面点集进行了较 严格的滤波,减小了由于深度数据中的噪声带来的障碍物的误检概率,提高了 对障碍物检测的准确性。
此外,本发明实施例在确定无障碍物区域时,将第一网格类型和第二网格 类型的预设网格同时考虑在内,有效的避免了对无障碍物区域的确定错误,进 而避免了对历史障碍物的错误清除。
请参阅图14,其所示为本发明实施例提供的一种电子设备的结构示意图, 该电子设备用于实施上述实施例中提供的障碍物检测方法。该电子设备可以是 诸如PC(PersonalComputer,个人计算机)、手机、PDA(平板电脑)、机器人等终 端设备,也可以是诸如应用服务器、集群服务器等服务设备。请参见图14,该 电子设备的内部结构可包括但不限于:处理器、网络接口及存储器。其中,电 子设备内的处理器、网络接口及存储器可通过总线或其他方式连接,在本说明 书实施例所示图14中以通过总线连接为例。
其中,处理器(或称CPU(Central Processing Unit,中央处理器))是电子设备 的计算核心以及控制核心。网络接口可选的可以包括标准的有线接口、无线接 口(如WI-FI、移动通信接口等)。存储器(Memory)是电子设备中的记忆设备,用 于存放程序和数据。可以理解的是,此处的存储器可以是高速RAM存储设备, 也可以是非不稳定的存储设备(non-volatile memory),例如至少一个磁盘存储设 备;可选的还可以是至少一个位于远离前述处理器的存储装置。存储器提供存 储空间,该存储空间存储了电子设备的操作***,可包括但不限于:Windows ***(一种操作***),Linux(一种操作***),Android(安卓,一种移动操作***) ***、IOS(一种移动操作***)***等等,本发明对此并不作限定;并且,在该存储空间中还存放了适于被处理器加载并执行的一条或一条以上的指令,这些 指令可以是一个或一个以上的计算机程序(包括程序代码)。在本说明书实施例中, 处理器加载并执行存储器中存放的一条或一条以上指令,以实现上述方法实施 例提供的障碍物检测方法。
本发明的实施例还提供了一种存储介质,所述存储介质可设置于电子设备 之中以保存用于实现方法实施例中一种障碍物检测方法相关的至少一条指令、 至少一段程序、代码集或指令集,该至少一条指令、该至少一段程序、该代码 集或指令集由该处理器加载并执行以实现上述方法实施例提供的障碍物检测方 法。
可选地,在本实施例中,上述存储介质可以位于计算机网络的多个网络服 务器中的至少一个网络服务器。可选地,在本实施例中,上述存储介质可以包 括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器 (RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程 序代码的介质。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将 一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些 实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含” 或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过 程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他 要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有 更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要 素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相 似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。 尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较 简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过 硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于 一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或 光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的 精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的 保护范围之内。

Claims (10)

1.一种障碍物检测方法,其特征在于,所述方法包括:
基于目标区域的深度数据确定所述目标区域的三维空间点集;
将所述三维空间点集映射到所述目标区域对应的目标平面区域,得到所述目标平面区域的平面点集;所述目标平面区域包括多个预设网格;
根据每个预设网格包括的平面点集中的平面点,确定所述多个预设网格的网格类型;
根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍物点集,得到障碍物信息。
2.根据权利要求1所述的障碍物检测方法,其特征在于,所述根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍物点集,得到障碍物信息包括:
根据每个第一网格类型的预设网格中平面点的坐标,确定对应第一网格类型的预设网格的均值点;
根据所述第一网格类型的预设网格的均值点生成障碍物点集,得到障碍物信息。
3.根据权利要求1所述的障碍物检测方法,其特征在于,所述根据每个预设网格包括的平面点集中的平面点,确定所述多个预设网格的网格类型包括:
获取每个预设网格包括的平面点集中平面点的点数量;
根据所述点数量,确定所述多个预设网格的网格类型。
4.根据权利要求3所述的障碍物检测方法,其特征在于,所述根据所述点数量,确定所述多个预设网格的网格类型包括:
将所述点数量超过第一数量阈值的预设网格,确定为第一网格类型;
将所述点数量超过第二数量阈值且不超过所述第一数量阈值的预设网格,确定为第二网格类型;
将所述点数量不超过所述第二数量阈值的预设网格,确定为第三网格类型;
其中,所述第一数量阈值大于所述第二数量阈值。
5.根据权利要求4所述的障碍物检测方法,其特征在于,在根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍物点集,得到障碍物信息之后,所述方法还包括:
确定所述目标平面区域中位于探测范围内的探测预设网格;
确定所述探测预设网格中,网格类型为第一网格类型和第二网格类型的目标预设网格;
根据探测点和所述目标预设网格,确定所述探测预设网格中的遮挡预设网格;
将所述探测预设网格中除所述目标预设网格和遮挡预设网格之外的预设网格确定为无障碍物区域;
确定所述无障碍物区域中的历史障碍物信息,并删除所述历史障碍物信息。
6.根据权利要求5所述的障碍物检测方法,其特征在于,所述根据探测点和所述目标预设网格,确定所述探测预设网格中的遮挡预设网格包括:
确定从所述探测点出发且经过所述目标预设网格边缘的连接线;
确定所述探测预设网格中位于所述连接线范围内的子探测预设网格;
将所述目标预设网格背离所述探测点一侧的子探测预设网格确定为遮挡预设网格。
7.根据权利要求1所述的障碍物检测方法,其特征在于,所述基于目标区域的深度数据确定所述目标区域的三维空间点集包括:
获取所述目标区域的深度数据;
对所述深度数据进行预处理;
基于预处理后的深度数据确定所述目标区域的三维空间点集。
8.根据权利要求1所述的障碍物检测方法,其特征在于,所述将所述三维空间点集映射到所述目标区域对应的目标平面区域,得到所述目标平面区域的平面点集包括:
将所述三维空间点集从对应的相机坐标系变换为世界坐标系,得到变换后的三维空间点集;
将变换后的所述三维空间点集映射到所述目标平面区域,得到所述目标平面区域的平面点集。
9.一种障碍物检测装置,其特征在于,所述装置包括:
第一确定模块,用于基于目标区域的深度数据确定所述目标区域的三维空间点集;
映射模块,用于将所述三维空间点集映射到所述目标区域对应的目标平面区域,得到所述目标平面区域的平面点集;所述目标平面区域包括多个预设网格;
第二确定模块,用于根据每个预设网格包括的平面点集中的平面点,确定所述多个预设网格的网格类型;
生成模块,用于根据所述网格类型为第一网格类型的预设网格中的平面点生成障碍物点集,得到障碍物信息。
10.一种电子设备,其特征在于,处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1-8任一项所述的障碍物检测方法。
CN201910329663.0A 2019-04-23 2019-04-23 一种障碍物检测方法、装置及电子设备 Active CN110135278B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910329663.0A CN110135278B (zh) 2019-04-23 2019-04-23 一种障碍物检测方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910329663.0A CN110135278B (zh) 2019-04-23 2019-04-23 一种障碍物检测方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN110135278A true CN110135278A (zh) 2019-08-16
CN110135278B CN110135278B (zh) 2023-05-12

Family

ID=67570886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910329663.0A Active CN110135278B (zh) 2019-04-23 2019-04-23 一种障碍物检测方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN110135278B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111220988A (zh) * 2020-01-07 2020-06-02 上海钛米机器人科技有限公司 一种地图数据处理方法、装置、设备和介质
CN112084854A (zh) * 2020-08-04 2020-12-15 深圳市优必选科技股份有限公司 一种障碍物检测方法、障碍物检测装置及机器人
CN112605999A (zh) * 2020-12-22 2021-04-06 杭州北冥星眸科技有限公司 基于红外线深度摄像头技术的机器人障碍检测方法及***
CN113935425A (zh) * 2021-10-21 2022-01-14 中国船舶重工集团公司第七一一研究所 物体识别方法、装置、终端和存储介质
WO2022037259A1 (zh) * 2020-08-17 2022-02-24 腾讯科技(深圳)有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
US11741620B1 (en) * 2020-01-24 2023-08-29 Apple Inc. Plane detection using depth sensor and semantic information

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010018640A1 (en) * 2000-02-28 2001-08-30 Honda Giken Kogyo Kabushiki Kaisha Obstacle detecting apparatus and method, and storage medium which stores program for implementing the method
CN101419667A (zh) * 2008-12-15 2009-04-29 东软集团股份有限公司 识别图像中障碍物的方法和装置
US20120182392A1 (en) * 2010-05-20 2012-07-19 Irobot Corporation Mobile Human Interface Robot
US9910442B2 (en) * 2016-06-28 2018-03-06 Toyota Motor Engineering & Manufacturing North America, Inc. Occluded area detection with static obstacle maps
US20180260636A1 (en) * 2017-03-13 2018-09-13 Baidu Online Network Technology (Beijing) Co., Ltd. Obstacle detecting method and apparatus, device and storage medium
US20180267166A1 (en) * 2017-03-16 2018-09-20 Baidu Online Network Technology (Beijing) Co., Ltd. Obstacle detecting method and apparatus, device and storage medium
CN109141364A (zh) * 2018-08-01 2019-01-04 北京进化者机器人科技有限公司 障碍物检测方法、***及机器人

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010018640A1 (en) * 2000-02-28 2001-08-30 Honda Giken Kogyo Kabushiki Kaisha Obstacle detecting apparatus and method, and storage medium which stores program for implementing the method
CN101419667A (zh) * 2008-12-15 2009-04-29 东软集团股份有限公司 识别图像中障碍物的方法和装置
US20120182392A1 (en) * 2010-05-20 2012-07-19 Irobot Corporation Mobile Human Interface Robot
US9910442B2 (en) * 2016-06-28 2018-03-06 Toyota Motor Engineering & Manufacturing North America, Inc. Occluded area detection with static obstacle maps
US20180260636A1 (en) * 2017-03-13 2018-09-13 Baidu Online Network Technology (Beijing) Co., Ltd. Obstacle detecting method and apparatus, device and storage medium
US20180267166A1 (en) * 2017-03-16 2018-09-20 Baidu Online Network Technology (Beijing) Co., Ltd. Obstacle detecting method and apparatus, device and storage medium
CN109141364A (zh) * 2018-08-01 2019-01-04 北京进化者机器人科技有限公司 障碍物检测方法、***及机器人

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
PETRU RADU; CEZAR VALERIU REGEP: "Algorithm Fusion for Windscreen Obstruction Detection in Autonomous Driving" *
梁晋,史宝全: "《3D反求技术》", 31 January 2019 *
薛彦涛,吕洪波,孙启国: "基于Kinect深度数据的移动机器人障碍检测方法研究" *
谢宏全,韩友美,陆波,孙美萍,张世武: "《激光雷达测绘技术与应用》", 31 December 2018 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111220988A (zh) * 2020-01-07 2020-06-02 上海钛米机器人科技有限公司 一种地图数据处理方法、装置、设备和介质
CN111220988B (zh) * 2020-01-07 2023-07-14 上海钛米机器人科技有限公司 一种地图数据处理方法、装置、设备和介质
US11741620B1 (en) * 2020-01-24 2023-08-29 Apple Inc. Plane detection using depth sensor and semantic information
CN112084854A (zh) * 2020-08-04 2020-12-15 深圳市优必选科技股份有限公司 一种障碍物检测方法、障碍物检测装置及机器人
CN112084854B (zh) * 2020-08-04 2023-12-01 深圳市优必选科技股份有限公司 一种障碍物检测方法、障碍物检测装置及机器人
WO2022037259A1 (zh) * 2020-08-17 2022-02-24 腾讯科技(深圳)有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN112605999A (zh) * 2020-12-22 2021-04-06 杭州北冥星眸科技有限公司 基于红外线深度摄像头技术的机器人障碍检测方法及***
CN112605999B (zh) * 2020-12-22 2022-01-18 杭州北冥星眸科技有限公司 基于红外线深度摄像头技术的机器人障碍检测方法及***
CN113935425A (zh) * 2021-10-21 2022-01-14 中国船舶重工集团公司第七一一研究所 物体识别方法、装置、终端和存储介质

Also Published As

Publication number Publication date
CN110135278B (zh) 2023-05-12

Similar Documents

Publication Publication Date Title
CN110135278A (zh) 一种障碍物检测方法、装置及电子设备
CN103472823B (zh) 一种智能机器人用的栅格地图创建方法
EP3340106A1 (en) Method for assigning particular classes of interest within measurement data
JP2019521401A (ja) ロボットの経路計画システム、方法、ロボット及び媒体
US11438886B2 (en) System for establishing positioning map data and method for the same
CN108369419A (zh) 使用移动机器人的对象观测来生成时空对象清单并且使用该清单来确定用于移动机器人的监测参数
CN102567449A (zh) 视觉***及分析图像的方法
US8111876B2 (en) Object position estimating system, object position estimating apparatus, object position estimating method, and object position estimating program
KR102118357B1 (ko) 모바일 맵핑 또는 자율 주행용 플랫폼과 관측 데이터의 구조화를 위한 시스템
CN111475746B (zh) 兴趣点位置挖掘方法、装置、计算机设备和存储介质
CN108628296A (zh) 自主运动装置以及运动控制***
CN106954190A (zh) 一种基于指数映射域的wifi室内定位方法
CN115307641A (zh) 机器人定位方法、装置、机器人和存储介质
CN105635958B (zh) 一种定位数据采集方法和装置
CN109084804A (zh) 机器人定位精准度判定处理方法及装置
CN111080701A (zh) 智能柜物体检测方法、装置、服务器及存储介质
CN112633143B (zh) 图像处理***、方法、头戴设备、处理设备及存储介质
CN111879315B (zh) 多目标追踪***和方法
CN104596509A (zh) 一种定位方法和***、移动终端
Magin et al. A dynamic 3D environmental model with real-time access functions for use in autonomous mobile robots
CN106454725B (zh) 多实例定位引擎数据融合的防抖动方法
CN114676907B (zh) 一种区域地质灾害预警方法、装置、存储介质及设备
CN113780176B (zh) 局部遮挡对象识别方法、装置、设备及存储介质
CN108981718B (zh) 一种行人定位方法及***
CN116263598A (zh) 自移动设备的重定位方法、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant