CN114782438B - 物体点云修正方法、装置、电子设备和存储介质 - Google Patents

物体点云修正方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN114782438B
CN114782438B CN202210698046.XA CN202210698046A CN114782438B CN 114782438 B CN114782438 B CN 114782438B CN 202210698046 A CN202210698046 A CN 202210698046A CN 114782438 B CN114782438 B CN 114782438B
Authority
CN
China
Prior art keywords
point cloud
coordinate
clouds
line
object point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210698046.XA
Other languages
English (en)
Other versions
CN114782438A (zh
Inventor
曾澄
胡亘谦
蔡恩祥
黄雪峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Xinrun Fulian Digital Technology Co Ltd
Original Assignee
Shenzhen Xinrun Fulian Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Xinrun Fulian Digital Technology Co Ltd filed Critical Shenzhen Xinrun Fulian Digital Technology Co Ltd
Priority to CN202210698046.XA priority Critical patent/CN114782438B/zh
Publication of CN114782438A publication Critical patent/CN114782438A/zh
Application granted granted Critical
Publication of CN114782438B publication Critical patent/CN114782438B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/75—Determining position or orientation of objects or cameras using feature-based methods involving models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30164—Workpiece; Machine component
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30244—Camera pose

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开了一种物体点云修正方法、装置、电子设备和存储介质。其中，方法包括获取物体点云；确定所述物体点云中每行的有效点云数及有效点云集合；在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。采用本发明提供的方案能对物体振动场景下，物体三维点云存在的形变进行修正。

Description

物体点云修正方法、装置、电子设备和存储介质
技术领域
本发明涉及物体检测技术领域，尤其涉及一种物体点云修正方法、装置、电子设备和存储介质。
背景技术
随着科技的进步，越来越多的工厂生产已经用上了机器视觉替代人工进行产品瑕疵的检测，如板材、钢板生产过程中的尺寸及缺陷检测，机器视觉具有稳定、准确性高且可以二十四小时不间断工作的特点，大大提升了企业的生产效率同时避免了漏检瑕疵件造成的损失。
但运用机器视觉目前往往伴随着产线的改造，且改造期间产线需要停工，成本较大，若不做改造，传统流水线则平稳性较差，例如在通过线激光获取平整物体的三维点云时可能因为产品处于传送带造成的随机上下振动中，导致采集到的点云是有一定程度的形变的，难以用于产品的缺陷检测。
发明内容
目前，现有技术中针对物体振动场景下，物体三维点云存在形变的技术问题，主要采用对产线进行改造，提高传送带稳定性，对平整物体在传送带上进行固定，减少平整物体的振动的方式进行解决。
但上述方式，存在以下缺陷：产线改造需要投入巨大的经济成本，同时改造期间需要停产，会给企业带来巨大损失。
基于此，为解决物体振动场景下，物体三维点云存在形变的技术问题，本发明实施例提供一种物体点云修正方法、装置、电子设备和存储介质。
本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种物体点云修正方法，方法包括：
获取物体点云；
确定所述物体点云中每行的有效点云数及有效点云集合；
在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；
根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。
上述方案中，所述根据所述有效点云集合和所述基准点云，对该行物体点云进行修正，包括：
根据所述有效点云集合和所述基准点云，确定所述有效点云集合相对于所述基准点云的第一坐标夹角；
利用所述第一坐标夹角对该行物体点云进行Z坐标轴上的角度调平；
确定线激光设备参数；
根据所述线激光设备参数和所述基准点云，对该行物体点云进行X坐标轴上的角度调整。
上述方案中，所述根据所述有效点云集合和所述基准点云，确定所述有效点云集合相对于所述基准点云的第一坐标夹角，包括：
计算所述有效点云集合中位于所述基准点云之前的所有点云与所述基准点云之间组成的坐标向量与Y坐标轴之间的夹角；
确定所述夹角的平均值；
将所述平均值作为所述第一坐标夹角。
上述方案中，所述利用所述第一坐标夹角对该行物体点云进行Z坐标轴上的角度调平，包括：
计算该行物体点云中每个点云与所述基准点云之间的第一距离；
根据所述第一距离和所述第一坐标夹角，计算该行物体点云中每个点云在Z坐标轴上的调整高度；
在该行物体点云中每个点云的Z坐标值的基础上，减去所述该行物体点云中每个点云在Z坐标轴上的调整高度，对该行物体点云中每个点云进行Z坐标轴上的角度调平。
上述方案中，所述根据所述第一距离和所述第一坐标夹角，计算该行物体点云中每个点云在Z坐标轴上的调整高度，包括：
根据所述第一距离和所述第一坐标夹角，利用如下公式（1）计算该行物体点云中每个点云在Z坐标轴上的调整高度：
Figure 434342DEST_PATH_IMAGE001
公式（1）
其中，
Figure 43178DEST_PATH_IMAGE002
表示该行物体点云中每个点云在Z坐标轴上的调整高度，
Figure DEST_PATH_IMAGE003
表示该行物体点云中每个点云与基准点云之间的第一距离，
Figure 157283DEST_PATH_IMAGE004
表示第一坐标夹角。
上述方案中，所述根据所述线激光设备参数和所述基准点云，对该行物体点云进行X坐标轴上的角度调整，包括：
将所述线激光设备参数和所述基准点云坐标输入预设第一方程中，获取该行物体点云在X坐标轴上的调整高度；
在所述基准点云的Z坐标值大于0时，在该行物体点云中每个点云的X坐标值的基础上，减去所述该行物体点云在X坐标轴上的调整高度，对该行物体点云中每个点云进行X坐标轴上的调整高度；在所述基准点云的Z坐标值小于或等于0时，在该行物体点云中每个点云的X坐标值的基础上，加上所述该行物体点云在X坐标轴上的调整高度，对该行物体点云中每个点云进行X坐标轴上的调整高度。
上述方案中，所述预设第一方程为：
Figure DEST_PATH_IMAGE005
其中，
Figure 105647DEST_PATH_IMAGE006
表示该行物体点云中每个点云在Z坐标轴上的坐标值，
Figure DEST_PATH_IMAGE007
表示基准点云在Z坐标轴上的坐标值，
Figure 73603DEST_PATH_IMAGE008
和
Figure DEST_PATH_IMAGE009
表示线激光设备参数，
Figure 107418DEST_PATH_IMAGE010
表示该行物体点云在X坐标轴上的调整高度，
Figure DEST_PATH_IMAGE011
表示当前该行物体点云的列数，
Figure 819022DEST_PATH_IMAGE012
表示物体点云的总列数。
本发明实施例还提供了一种物体点云修正装置，该装置包括：
获取模块，用于获取物体点云；
确定模块，用于确定所述物体点云中每行的有效点云数及有效点云集合；
选择模块，用于在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；
修正模块，用于根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。
本发明实施例还提供了一种电子设备，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；其中，
处理器用于运行计算机程序时，执行上述任一方法的步骤。
本发明实施例还提供了一种存储介质，存储介质中存储有计算机程序，计算机程序被处理器执行时，实现上述任一方法的步骤。
本发明实施例提供的物体点云修正方法、装置、电子设备和存储介质，获取物体点云；
确定所述物体点云中每行的有效点云数及有效点云集合；在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。采用本发明提供的方案能对物体振动场景下，物体三维点云存在的形变进行修正。
附图说明
图1为本发明实施例物体点云修正方法的流程示意图；
图2为本发明应用实施例标定过程示意图；
图3为本发明实施例物体点云修正装置的结构示意图；
图4为本发明实施例计算机设备的内部结构图。
具体实施方式
下面将结合附图及实施例对本发明作进一步详细的描述。
本发明实施例提供了一种物体点云修正方法，如图1所示，该方法包括：
步骤101：获取物体点云；
步骤102：确定所述物体点云中每行的有效点云数及有效点云集合；
步骤103：在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；
步骤104：根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。
本实施例提供一种鲁棒性强的振动场景下平整物体三维点云纠正的方法，考虑相机小孔成像模型对点云进行x向纠正，实现在振动场景下也能采集出平整且正确的平整物体表面三维信息，供后续分析使用，无需对产线进行改造。
另外，需要注意的是，本实施例的方案是将物体三维点云修正成正确的形貌，与平滑点云不同，平滑点云是使点云看起来变化较为平滑，但不一定是把点云恢复成正确的形貌。
在一实施例中，所述根据所述有效点云集合和所述基准点云，对该行物体点云进行修正，包括：
根据所述有效点云集合和所述基准点云，确定所述有效点云集合相对于所述基准点云的第一坐标夹角；
利用所述第一坐标夹角对该行物体点云进行Z坐标轴上的角度调平；
确定线激光设备参数；
根据所述线激光设备参数和所述基准点云，对该行物体点云进行X坐标轴上的角度调整。
在一实施例中，所述根据所述有效点云集合和所述基准点云，确定所述有效点云集合相对于所述基准点云的第一坐标夹角，包括：
计算所述有效点云集合中位于所述基准点云之前的所有点云与所述基准点云之间组成的坐标向量与Y坐标轴之间的夹角；
确定所述夹角的平均值；
将所述平均值作为所述第一坐标夹角。
在一实施例中，所述利用所述第一坐标夹角对该行物体点云进行Z坐标轴上的角度调平，包括：
计算该行物体点云中每个点云与所述基准点云之间的第一距离；
根据所述第一距离和所述第一坐标夹角，计算该行物体点云中每个点云在Z坐标轴上的调整高度；
在该行物体点云中每个点云的Z坐标值的基础上，减去所述该行物体点云中每个点云在Z坐标轴上的调整高度，对该行物体点云中每个点云进行Z坐标轴上的角度调平。
在一实施例中，所述根据所述第一距离和所述第一坐标夹角，计算该行物体点云中每个点云在Z坐标轴上的调整高度，包括：
根据所述第一距离和所述第一坐标夹角，利用如下公式（1）计算该行物体点云中每个点云在Z坐标轴上的调整高度：
Figure DEST_PATH_IMAGE013
公式（1）
其中，
Figure 621893DEST_PATH_IMAGE014
表示该行物体点云中每个点云在Z坐标轴上的调整高度，
Figure 760751DEST_PATH_IMAGE015
表示该行物体点云中每个点云与基准点云之间的第一距离，
Figure 344179DEST_PATH_IMAGE016
表示第一坐标夹角。
在一实施例中，所述根据所述线激光设备参数和所述基准点云，对该行物体点云进行X坐标轴上的角度调整，包括：
将所述线激光设备参数和所述基准点云坐标输入预设第一方程中，获取该行物体点云在X坐标轴上的调整高度；
在所述基准点云的Z坐标值大于0时，在该行物体点云中每个点云的X坐标值的基础上，减去所述该行物体点云在X坐标轴上的调整高度，对该行物体点云中每个点云进行X坐标轴上的调整高度；在所述基准点云的Z坐标值小于或等于0时，在该行物体点云中每个点云的X坐标值的基础上，加上所述该行物体点云在X坐标轴上的调整高度，对该行物体点云中每个点云进行X坐标轴上的调整高度。
在一实施例中，所述预设第一方程为：
Figure 531578DEST_PATH_IMAGE017
其中，
Figure 516851DEST_PATH_IMAGE018
表示该行物体点云中每个点云在Z坐标轴上的坐标值，
Figure 826610DEST_PATH_IMAGE019
表示基准点云在Z坐标轴上的坐标值，
Figure 897334DEST_PATH_IMAGE008
和
Figure 622844DEST_PATH_IMAGE020
表示线激光设备参数，
Figure 462624DEST_PATH_IMAGE021
表示该行物体点云在X坐标轴上的调整高度，
Figure 943284DEST_PATH_IMAGE022
表示当前该行物体点云的列数，
Figure 438988DEST_PATH_IMAGE023
表示物体点云的总列数。
本发明实施例提供的物体点云修正方法，获取物体点云；确定所述物体点云中每行的有效点云数及有效点云集合；在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。采用本发明提供的方案能对物体振动场景下，物体三维点云存在的形变进行修正。
下面将结合应用实施例，对本发明进行详细描述。
本应用实施例提供一种鲁棒性强的振动场景下平整物体三维点云纠正的方法，考虑相机小孔成像模型对点云进行x向纠正，实现在振动场景下也能采集出平整且正确的平整物体表面三维信息，供后续分析使用，无需对产线进行改造。
具体地，方法分为标定步骤部分和纠正步骤部分：
标定步骤部分：
（1）因线激光设备的内参一般设备方不会给出，但本方法需要进行简易标定得到必要信息用于后续计算，参见图2，首先取一个边缘有棱角的物体（例如木板），将其边缘摆放于线激光视野中百分之七十左右的位置，记当前物体边缘点为位置1；
（2）用线激光采集一次点云，获得位置1的一条点云S1（包含无效点信息，无效点深度z值为-1000000000）及其对应的相机图像B1；
（3）将物体横向移动，直至物体边缘即将消失与线激光视野中，记当前物体边缘位置为位置2，位置1与位置2理想情况下高度相同，采集获得点云S2及其对应的相机图像B2；
（4）标定主要目的是获得图1中线激光相机光心距离成像面的距离d，以及线激光视野角度的一半角度θ和成像面上的实际点距dx，通过对点云S1和点云S2分别提取位置1与位置2的坐标，可得到位置1的高度值为z，位置1与位置2的x向坐标差为△x；
（5）通过图像B1和B2可得到物体处于不同位置时，其边缘在相机视野里的横坐标差值△u，通过相似三角形关系可列
Figure 296085DEST_PATH_IMAGE024
，因其中包含两个未知数d与dx，无法直接解出，所以需要重复步骤1-4于其他位置得到另一组相似三角形关系，两个方程联立即可求得d与dx。
纠正步骤部分：
（1）通过线激光传感器采集平整物体的点云S，点云S为H行W列，一共H×W个点（其中包含无效点）；
（2）建立大小为H的数组V，用于记录每行的有效点数（通常线激光设备采集点云时会给无效点一个极小的远超出其量程的z坐标，例如-100000000），对于点云S的每一行点云，统计第h行点云中z坐标有效的总点数
Figure 990372DEST_PATH_IMAGE025
，使
Figure 641933DEST_PATH_IMAGE026
；
（3）建立大小为H的数组P，用于记录每行的有效点的坐标，方法对于第h行，如果V[h]大于单行有效点个数阈值
Figure 624933DEST_PATH_IMAGE028
(根据经验设定，不小于0.1×W)，则从S[h][0]开始到S[h][W-1]结束，按顺序将有效点的行列坐标
Figure 20142DEST_PATH_IMAGE029
存入P[h]中，这样P[h]的第一个元素和最后一个元素即为第h行的有效点起始列与有效点结束列，代表了该行点云中平整物体的点云；
（4）遍历S的每一行点云，例如对于第h行点云，如果其V[h]大于行有效点阈值
Figure 568935DEST_PATH_IMAGE030
，则选取该行点云有效点数组P[h]中序号为k=0.9×V[h]（结果向下取整）的点
Figure 656977DEST_PATH_IMAGE031
作为该行的基准点，其对应的三维坐标记为
Figure 858763DEST_PATH_IMAGE032
，记为
Figure 57663DEST_PATH_IMAGE033
，然后从P[h][0]开始直到p[h][k-1]结束，对其中每个点p[h][i]从S中获取其对应的三维坐标
Figure 460963DEST_PATH_IMAGE034
，计算向量
Figure 657589DEST_PATH_IMAGE035
与Y坐标轴向量(0，1，0)所成的夹角
Figure 411918DEST_PATH_IMAGE036
，将该行所有的
Figure 148930DEST_PATH_IMAGE036
相加再除以其数量k-1，得到该行的代表角度
Figure 672316DEST_PATH_IMAGE037
；
（5）接下来通过
Figure 39843DEST_PATH_IMAGE037
对点云S的第h行点云进行角度调平，方法为对该行点云中的每个点S[h][w]，即点云S第h行的点，计算其与该行基准点的距离
Figure 15889DEST_PATH_IMAGE038
，再通过
Figure 556592DEST_PATH_IMAGE039
计算其角度调平所需调整的z向高度△z，
Figure 200063DEST_PATH_IMAGE040
，即完成角度调平；
（6）接下来基于标定得到的参数进行第h行点云每个点x坐标纠正，方法为通过相似三角形可得方程
Figure 472912DEST_PATH_IMAGE041
，方程里只有△x未知，可直接解出△x，如果
Figure 201834DEST_PATH_IMAGE042
大于0，则说明调到0平面后该行点云应拉长，则
Figure 280648DEST_PATH_IMAGE043
，否则
Figure 778626DEST_PATH_IMAGE044
；
（7）对于第6步中拉长的单条点云，可能会存在拉长后点云间距过大导致过于稀疏，通过相邻点取均值进行插值操作提高点密度；
（8）最后点云S中每个点的z向高度
Figure 222377DEST_PATH_IMAGE045
减去该行的基准点高度
Figure 438594DEST_PATH_IMAGE046
即
Figure 321100DEST_PATH_IMAGE047
，完成整个平整物体点云S的调平。
本实施例提供一种鲁棒性强的振动场景下平整物体三维点云纠正的方法，充分考虑相机小孔成像模型，解决了传送带随机抖动带来的线激光采集点云形变的问题，可以获得高准确率的的平整物体表面三维信息，之后可用于各种分析，例如尺寸检测、缺陷识别等等。
为了实现本发明实施例的方法，本发明实施例还提供了一种物体点云修正装置，如图3所示，物体点云修正装置300包括：获取模块301、确定模块302、选择模块303和修正模块304；其中，
获取模块301，用于获取物体点云；
确定模块302，用于确定所述物体点云中每行的有效点云数及有效点云集合；
选择模块303，用于在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；
修正模块304，用于根据所述有效点云集合和所述基准点云，对该行物体点云进行修正。
实际应用时，获取模块301、确定模块302、选择模块303和修正模块304可由物体点云修正装置中的处理器实现。
需要说明的是：上述实施例提供的上述装置在执行时，仅以上述各程序模块的划分进行举例说明，实际应用时，可以根据需要而将上述处理分配由不同的程序模块完成，即将终端的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分处理。另外，上述实施例提供的上述装置与上述方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
为了实现本发明实施例的方法，本发明实施例还提供了一种计算机程序产品，计算机程序产品包括计算机指令，计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取计算机指令，处理器执行计算机指令，使得计算机设备执行上述方法的步骤。
基于上述程序模块的硬件实现，且为了实现本发明实施例的方法，本发明实施例还提供了一种电子设备（计算机设备）。具体地，在一个实施例中，该计算机设备可以是终端，其内部结构图可以如图4所示。该计算机设备包括通过***总线连接的处理器A01、网络接口A02、显示屏A04、输入装置A05和存储器（图中未示出）。其中，该计算机设备的处理器A01用于提供计算和控制能力。该计算机设备的存储器包括内存储器A03和非易失性存储介质A06。该非易失性存储介质A06存储有操作***B01和计算机程序B02。该内存储器A03为非易失性存储介质A06中的操作***B01和计算机程序B02的运行提供环境。该计算机设备的网络接口A02用于与外部的终端通过网络连接通信。该计算机程序被处理器A01执行时以实现上述任意一项实施例的方法。该计算机设备的显示屏A04可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置A05可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图4中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
本发明实施例提供的设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现上述任意一项实施例的方法。
本领域内的技术人员应明白，本申请的实施例可提供为方法、***、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备（***）、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flashRAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitorymedia)，如调制的数据信号和载波。
可以理解，本发明实施例的存储器可以是易失性存储器或者非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器（ROM，ReadOnly Memory）、可编程只读存储器（PROM，Programmable Read-Only Memory）、可擦除可编程只读存储器（EPROM，Erasable Programmable Read-Only Memory）、电可擦除可编程只读存储器（EEPROM，Electrically Erasable Programmable Read-Only Memory）、磁性随机存取存储器（FRAM，ferromagnetic random access memory）、快闪存储器（Flash Memory）、磁表面存储器、光盘、或只读光盘（CD-ROM，Compact Disc Read-Only Memory）；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器（RAM，RandomAccess Memory），其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器（SRAM，Static Random Access Memory）、同步静态随机存取存储器（SSRAM，Synchronous Static Random Access Memory）、动态随机存取存储器（DRAM，Dynamic Random Access Memory）、同步动态随机存取存储器（SDRAM，SynchronousDynamic Random Access Memory）、双倍数据速率同步动态随机存取存储器（DDRSDRAM，Double Data Rate Synchronous Dynamic Random Access Memory）、增强型同步动态随机存取存储器（ESDRAM，Enhanced Synchronous Dynamic Random Access Memory）、同步连接动态随机存取存储器（SLDRAM，SyncLink Dynamic Random Access Memory）、直接内存总线随机存取存储器（DRRAM，Direct Rambus Random Access Memory）。本发明实施例描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (8)

1.一种物体点云修正方法，其特征在于，所述方法包括：
获取物体点云；
确定所述物体点云中每行的有效点云数及有效点云集合；
在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；
根据所述有效点云集合和所述基准点云，对该行物体点云进行修正；
其中，确定所述物体点云中每行的有效点云数及有效点云集合，包括：
将所述物体点云的每行点云中z坐标未超出量程的电点确定为有效点云；
获取每行有效点云的有效点云数及有效点云集合；
其中，根据所述有效点云集合和所述基准点云，对该行物体点云进行修正，包括：
计算所述有效点云集合中位于所述基准点云之前的所有点云与所述基准点云之间组成的坐标向量与Y坐标轴之间的夹角；确定所述夹角的平均值；将所述平均值作为第一坐标夹角，利用所述第一坐标夹角对该行物体点云进行z坐标轴上的角度调平；确定线激光设备参数；根据所述线激光设备参数和所述基准点云，对该行物体点云进行x坐标轴上的角度调整。
2.根据权利要求1所述的方法，其特征在于，所述利用所述第一坐标夹角对该行物体点云进行Z坐标轴上的角度调平，包括：
计算该行物体点云中每个点云与所述基准点云之间的第一距离；
根据所述第一距离和所述第一坐标夹角，计算该行物体点云中每个点云在Z坐标轴上的调整高度；
在该行物体点云中每个点云的Z坐标值的基础上，减去所述该行物体点云中每个点云在Z坐标轴上的调整高度，对该行物体点云中每个点云进行Z坐标轴上的角度调平。
3.根据权利要求2所述的方法，其特征在于，所述根据所述第一距离和所述第一坐标夹角，计算该行物体点云中每个点云在Z坐标轴上的调整高度，包括：
根据所述第一距离和所述第一坐标夹角，利用如下公式（1）计算该行物体点云中每个点云在Z坐标轴上的调整高度：
Figure 133631DEST_PATH_IMAGE001
公式（1）
其中，
Figure 332531DEST_PATH_IMAGE002
表示该行物体点云中每个点云在Z坐标轴上的调整高度，
Figure 1410DEST_PATH_IMAGE003
表示该行物体点云中每个点云与基准点云之间的第一距离，
Figure 849632DEST_PATH_IMAGE004
表示第一坐标夹角。
4.根据权利要求1所述的方法，其特征在于，所述根据所述线激光设备参数和所述基准点云，对该行物体点云进行X坐标轴上的角度调整，包括：
将所述线激光设备参数和所述基准点云坐标输入预设第一方程中，获取该行物体点云在X坐标轴上的调整高度；
在所述基准点云的Z坐标值大于0时，在该行物体点云中每个点云的X坐标值的基础上，减去所述该行物体点云在X坐标轴上的调整高度，对该行物体点云中每个点云进行X坐标轴上的调整高度；在所述基准点云的Z坐标值小于或等于0时，在该行物体点云中每个点云的X坐标值的基础上，加上所述该行物体点云在X坐标轴上的调整高度，对该行物体点云中每个点云进行X坐标轴上的调整高度。
5.根据权利要求4所述的方法，其特征在于，所述预设第一方程为：
Figure 603962DEST_PATH_IMAGE005
其中，
Figure 340974DEST_PATH_IMAGE006
表示该行物体点云中每个点云在Z坐标轴上的坐标值，
Figure 864359DEST_PATH_IMAGE007
表示基准点云在Z坐标轴上的坐标值，
Figure 169569DEST_PATH_IMAGE008
和
Figure 411195DEST_PATH_IMAGE009
表示线激光设备参数，
Figure 686318DEST_PATH_IMAGE010
表示该行物体点云在X坐标轴上的调整高度，
Figure 329789DEST_PATH_IMAGE011
表示当前该行物体点云的列数，
Figure 540322DEST_PATH_IMAGE012
表示物体点云的总列数。
6.一种物体点云修正装置，其特征在于，所述装置包括：
获取模块，用于获取物体点云；
确定模块，用于确定所述物体点云中每行的有效点云数及有效点云集合；
选择模块，用于在所述有效点云数大于预设阈值时，从所述有效点云集合中选择基准点云；
修正模块，用于根据所述有效点云集合和所述基准点云，对该行物体点云进行修正；
其中，所述确定模块，用于将所述物体点云的每行点云中z坐标未超出量程的电点确定为有效点云；获取每行有效点云的有效点云数及有效点云集合；
其中，所述修正模块，还用于计算所述有效点云集合中位于所述基准点云之前的所有点云与所述基准点云之间组成的坐标向量与Y坐标轴之间的夹角；确定所述夹角的平均值；将所述平均值作为第一坐标夹角，利用所述第一坐标夹角对该行物体点云进行z坐标轴上的角度调平；确定线激光设备参数；根据所述线激光设备参数和所述基准点云，对该行物体点云进行x坐标轴上的角度调整。
7.一种电子设备，其特征在于，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；其中，
所述处理器用于运行所述计算机程序时，执行权利要求1至5任一项所述方法的步骤。
8.一种存储介质，所述存储介质中存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现权利要求1至5任一项所述方法的步骤。
CN202210698046.XA 2022-06-20 2022-06-20 物体点云修正方法、装置、电子设备和存储介质 Active CN114782438B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210698046.XA CN114782438B (zh) 2022-06-20 2022-06-20 物体点云修正方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210698046.XA CN114782438B (zh) 2022-06-20 2022-06-20 物体点云修正方法、装置、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN114782438A CN114782438A (zh) 2022-07-22
CN114782438B true CN114782438B (zh) 2022-09-16

Family

ID=82420314

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210698046.XA Active CN114782438B (zh) 2022-06-20 2022-06-20 物体点云修正方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN114782438B (zh)

Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9530225B1 (en) * 2013-03-11 2016-12-27 Exelis, Inc. Point cloud data processing for scalable compression
GB201712922D0 (en) * 2017-08-11 2017-09-27 Canon Kk Method and corresponding device for generating a point cloud representing a 3D object
WO2018072630A1 (zh) * 2016-10-17 2018-04-26 杭州海康威视数字技术股份有限公司 一种三维场景模型构建方法及装置
WO2019133922A1 (en) * 2017-12-29 2019-07-04 Flir Systems, Inc. Point cloud denoising systems and methods
CN110942515A (zh) * 2019-11-26 2020-03-31 北京迈格威科技有限公司 基于点云的目标物体三维计算机建模方法和目标识别方法
CN111062255A (zh) * 2019-11-18 2020-04-24 苏州智加科技有限公司 三维点云的标注方法、装置、设备及存储介质
WO2020093950A1 (zh) * 2018-11-06 2020-05-14 腾讯科技（深圳）有限公司 三维物体分割方法、设备和介质
CN111210429A (zh) * 2020-04-17 2020-05-29 中联重科股份有限公司 点云数据划分方法及装置、障碍物检测方法及装置
CN111553946A (zh) * 2020-04-17 2020-08-18 中联重科股份有限公司 用于去除地面点云的方法及装置、障碍物检测方法及装置
CN111582054A (zh) * 2020-04-17 2020-08-25 中联重科股份有限公司 点云数据处理方法及装置、障碍物检测方法及装置
JP2020140697A (ja) * 2019-02-28 2020-09-03 ベイジン バイドゥ ネットコム サイエンス アンド テクノロジー カンパニー リミテッド 建設機械設備の回転角度を確定するための方法および装置
CN111699410A (zh) * 2019-05-29 2020-09-22 深圳市大疆创新科技有限公司 点云的处理方法、设备和计算机可读存储介质
WO2020206669A1 (zh) * 2019-04-09 2020-10-15 北京大学深圳研究生院 一种自适应的点云条带划分方法
CN112365529A (zh) * 2021-01-11 2021-02-12 南京邮电大学 基于重心偏离度的隧洞点云配准方法、装置
WO2021082229A1 (zh) * 2019-10-31 2021-05-06 深圳市商汤科技有限公司 数据处理方法及相关装置
CN113362363A (zh) * 2021-06-18 2021-09-07 广东工业大学 一种基于视觉slam的图像自动标注方法、装置及存储介质
WO2021179988A1 (zh) * 2020-03-09 2021-09-16 长沙智能驾驶研究院有限公司 基于三维激光的集卡防砸检测方法、装置和计算机设备
WO2021244363A1 (zh) * 2020-06-05 2021-12-09 Oppo广东移动通信有限公司 点云压缩方法、编码器、解码器及存储介质
WO2022001326A1 (zh) * 2020-06-30 2022-01-06 商汤集团有限公司 数据的处理方法、装置、设备、存储介质及程序
WO2022062519A1 (zh) * 2020-09-22 2022-03-31 上海钛米机器人股份有限公司 地面检测方法、装置、设备及存储介质
CN114440922A (zh) * 2020-10-30 2022-05-06 阿里巴巴集团控股有限公司 一种评测激光标定的方法、装置、相关设备及存储介质
WO2022099530A1 (zh) * 2020-11-12 2022-05-19 深圳元戎启行科技有限公司 点云数据运动分割方法、装置、计算机设备和存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106407408B (zh) * 2016-09-22 2019-08-16 北京数字绿土科技有限公司 一种海量点云数据的空间索引构建方法及装置
CN109285188B (zh) * 2017-07-21 2020-04-21 百度在线网络技术（北京）有限公司 用于生成目标物体的位置信息的方法和装置
FR3093215B1 (fr) * 2019-02-22 2021-08-27 Fogale Nanotech Procédé et dispositif de surveillance de l’environnement d’un robot
CN110335295B (zh) * 2019-06-06 2021-05-11 浙江大学 一种基于tof相机的植物点云采集配准与优化方法
JP2023511670A (ja) * 2020-01-21 2023-03-22 プロプリオ インコーポレイテッド 多視点カメラシステムからのデータを用いるなどで深度センサからの深度データを増強する方法及びシステム
US11703577B2 (en) * 2020-08-14 2023-07-18 Baidu Usa Llc Recalibration determination system for autonomous driving vehicles with multiple LiDAR sensors
CN113870358B (zh) * 2021-09-17 2024-05-24 聚好看科技股份有限公司 一种多个3d相机联合标定的方法及设备

Patent Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9530225B1 (en) * 2013-03-11 2016-12-27 Exelis, Inc. Point cloud data processing for scalable compression
WO2018072630A1 (zh) * 2016-10-17 2018-04-26 杭州海康威视数字技术股份有限公司 一种三维场景模型构建方法及装置
GB201712922D0 (en) * 2017-08-11 2017-09-27 Canon Kk Method and corresponding device for generating a point cloud representing a 3D object
WO2019133922A1 (en) * 2017-12-29 2019-07-04 Flir Systems, Inc. Point cloud denoising systems and methods
WO2020093950A1 (zh) * 2018-11-06 2020-05-14 腾讯科技（深圳）有限公司 三维物体分割方法、设备和介质
JP2020140697A (ja) * 2019-02-28 2020-09-03 ベイジン バイドゥ ネットコム サイエンス アンド テクノロジー カンパニー リミテッド 建設機械設備の回転角度を確定するための方法および装置
WO2020206669A1 (zh) * 2019-04-09 2020-10-15 北京大学深圳研究生院 一种自适应的点云条带划分方法
CN111699410A (zh) * 2019-05-29 2020-09-22 深圳市大疆创新科技有限公司 点云的处理方法、设备和计算机可读存储介质
WO2021082229A1 (zh) * 2019-10-31 2021-05-06 深圳市商汤科技有限公司 数据处理方法及相关装置
CN111062255A (zh) * 2019-11-18 2020-04-24 苏州智加科技有限公司 三维点云的标注方法、装置、设备及存储介质
CN110942515A (zh) * 2019-11-26 2020-03-31 北京迈格威科技有限公司 基于点云的目标物体三维计算机建模方法和目标识别方法
WO2021179988A1 (zh) * 2020-03-09 2021-09-16 长沙智能驾驶研究院有限公司 基于三维激光的集卡防砸检测方法、装置和计算机设备
CN111582054A (zh) * 2020-04-17 2020-08-25 中联重科股份有限公司 点云数据处理方法及装置、障碍物检测方法及装置
CN111553946A (zh) * 2020-04-17 2020-08-18 中联重科股份有限公司 用于去除地面点云的方法及装置、障碍物检测方法及装置
CN111210429A (zh) * 2020-04-17 2020-05-29 中联重科股份有限公司 点云数据划分方法及装置、障碍物检测方法及装置
WO2021244363A1 (zh) * 2020-06-05 2021-12-09 Oppo广东移动通信有限公司 点云压缩方法、编码器、解码器及存储介质
WO2022001326A1 (zh) * 2020-06-30 2022-01-06 商汤集团有限公司 数据的处理方法、装置、设备、存储介质及程序
WO2022062519A1 (zh) * 2020-09-22 2022-03-31 上海钛米机器人股份有限公司 地面检测方法、装置、设备及存储介质
CN114440922A (zh) * 2020-10-30 2022-05-06 阿里巴巴集团控股有限公司 一种评测激光标定的方法、装置、相关设备及存储介质
WO2022099530A1 (zh) * 2020-11-12 2022-05-19 深圳元戎启行科技有限公司 点云数据运动分割方法、装置、计算机设备和存储介质
CN112365529A (zh) * 2021-01-11 2021-02-12 南京邮电大学 基于重心偏离度的隧洞点云配准方法、装置
CN113362363A (zh) * 2021-06-18 2021-09-07 广东工业大学 一种基于视觉slam的图像自动标注方法、装置及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Rune Østergaard Pedersen等.Deriving individual tree competition indices from airborne laser scanning.《Forest Ecology and Management》.2012,第280卷第150-165页. *
归一化互相关系数与迭代最近曲面片点云配准方法;张梅等;《计算机工程》;20161031;第42卷(第10期);第271-276页 *

Also Published As

Publication number Publication date
CN114782438A (zh) 2022-07-22

Similar Documents

Publication Publication Date Title
KR100425751B1 (ko) 디지털 카메라에서 이미지 왜곡을 소프트웨어적으로보정하는 장치 및 그 방법
CN111127422A (zh) 图像标注方法、装置、***及主机
US11776217B2 (en) Method for planning three-dimensional scanning viewpoint, device for planning three-dimensional scanning viewpoint, and computer readable storage medium
CN113494893B (zh) 一种三维激光扫描***的标定方法、装置和计算机设备
CN110458772A (zh) 一种基于图像处理的点云滤波方法、装置和存储介质
CN116433737A (zh) 一种激光雷达点云与图像配准的方法、装置及智能终端
CN113470091B (zh) 轮毂点云配准方法、装置、电子设备和存储介质
JPWO2020188799A1 (ja) カメラ校正装置、カメラ校正方法、及びプログラム
US20050053304A1 (en) Method and device for the correction of a scanned image
TWI510761B (zh) 表面多點對焦系統及方法
CN109029303B (zh) 物体底面积参数的测量方法、装置、***及可读存储介质
CN114782438B (zh) 物体点云修正方法、装置、电子设备和存储介质
CN111915681A (zh) 多组3d相机群的外参标定方法、装置、存储介质及设备
CN113379745B (zh) 产品缺陷识别方法、装置、电子设备和存储介质
US5199082A (en) Method of detecting an amplitude transient in a field of elements having a multivalent amplitude distribution, device suitable for performing the method, and video system including the device
CN114529652A (zh) 点云补偿方法、装置、设备、存储介质和计算机程序产品
US20140063235A1 (en) Distance information estimating apparatus
KR101741501B1 (ko) 카메라와 객체 간 거리 추정 장치 및 그 방법
CN111462321B (zh) 点云地图处理方法、处理装置、电子装置和车辆
CN113421292A (zh) 一种三维建模细节增强方法及装置
CN115205129A (zh) 基于结构光的深度相机及使用方法
CN110827323A (zh) 一种用于水下装置定点悬停的方法和装置
CN115775282B (zh) 一种高速在线矫正图像畸变的方法、装置及存储介质
CN111949925B (zh) 基于罗德里格矩阵和最大凸包的影像相对定向方法及装置
CN117953038A (zh) 一种基于深度相机的非规则体积测量方法、***、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant