CN106041937A - 一种基于双目立体视觉的机械手抓取控制***的控制方法 - Google Patents
一种基于双目立体视觉的机械手抓取控制***的控制方法 Download PDFInfo
- Publication number
- CN106041937A CN106041937A CN201610676653.0A CN201610676653A CN106041937A CN 106041937 A CN106041937 A CN 106041937A CN 201610676653 A CN201610676653 A CN 201610676653A CN 106041937 A CN106041937 A CN 106041937A
- Authority
- CN
- China
- Prior art keywords
- camera
- workpiece
- coordinate
- point
- laser
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
- B25J9/1697—Vision controlled systems
Landscapes
- Engineering & Computer Science (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Manipulator (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
一种基于双目立体视觉的机械手抓取控制***的控制方法,包括以下步骤:标定相机参数,然后通过示教机械手,实现相机坐标系和机械手坐标系的转换;线激光做弧面扫描云运动,同时相机采集图像;对相机拍摄的图像分别提取激光线;利用亚像素算法精确定位激光线的位置;对图片中提取到的激光线进行同名点匹配;通过三角测量原理计算激光线上每个点的三维空间坐标,完成对场景内工件的扫描,获得相机视野内的点云数据;建立工件点云模板,选取机械手抓取点位,将获得的点云数据与工件点云模板匹配,并计算出两者间的转换关系;将点云模板中机械手抓取点位置换算成当前坐标,并将其转换为机械手坐标系下的坐标,然后传递给机械手,机械手执行动作。
Description
技术领域
本发明涉及机械手抓取控制领域,具体涉及一种能实时获取料箱内工件的3D点云数据,并通过模板匹配,引导机械手抓取和摆放工件的基于双目立体视觉的机械手抓取控制***的控制方法。
背景技术
目前,工业自动化装配受到越来越多的关注,由视觉引导机械手进行工业装配是实现工业自动化的重要途径。在机械手执行任务的过程中,控制机械手定位到目标位置是一个非常关键的问题。CN103963058A基于多方位视觉定位的机械手臂抓取控制方法及方法、CN104331894A一种基于双目立体视觉的机器人拆垛方法以及CN104677330A一种小型双目立体视觉测距***都公开了一种视觉引导机械手抓取方法。但这些方法都存在对不同型号产品识别率差、定位精度难以满足抓取摆放要求的缺陷。
发明内容
本发明提出了一种基于双目立体视觉的机械手抓取控制***的控制方法,由双目立体视觉***根据目标物的二维图像计算出目标物的三维坐标,然后根据此三维坐标去控制机械手自动运动到目标位置,实现料箱内任意摆放工件的抓取,进而实现工件的摆放或装配,解决工业装配或上下料的自动化问题,从而降低人力成本,提高生产效率,消除人力操作潜在的安全隐患。
本发明的目的及解决其技术问题是采用以下技术方案来实现的。依据本发明提出的一种基于双目立体视觉的机械手抓取控制***的控制方法,包括以下步骤:1)标定相机的内参数和外参数,然后通过示教机械手,实现相机坐标系和机械手坐标系的转换;2)线激光做弧面扫描运动,同时位于线激光两侧的相机分别从左右两个视角拍摄图像;3)对双相机拍摄的两幅图像分别提取激光线;4)利用亚像素算法精确定位激光线的位置;5)对两相机图片中提取到的激光线进行同名点匹配;6)通过三角测量原理计算激光线上每个点的三维空间坐标,完成对场景内工件的扫描,获得相机视野内的点云数据;7)建立工件点云模板,选取机械手抓取点位,然后将获得的点云数据与工件点云模板匹配,从而找到目标工件并计算出两者间的转换关系;8)将点云模板中设置的机械手抓取点位置通过步骤(7)计算出的转换关系换算成当前坐标,并将该坐标转换到机械手坐标系下的坐标,将坐标传递给机械手,若坐标值在机械手的运动范围之内,则机械手执行抓取工件和摆放工件的动作,然后相机开始拍摄图像,进入先一个拍摄抓取循环。
本发明的目的及解决其技术问题还可采用以下技术措施进一步实现。
前述的根据权利要求1所述的控制方法,其特征在于,其中所述的步骤1中,通过编码后的圆形标志点标定相机,示教机械手时通过示教编码后的圆形标志点的位置完成对机械手的示教,实现相机坐标系和机械手坐标系的转换。
前述的控制方法,其中所述的步骤3中,提取激光线条时,采用激光线条光照无关提取方法,即结合灰度阈值和图片每行像素最值的方法实现激光线条光照无关的初步提取。
前述的控制方法,其中所述的步骤3中,在激光线条提取过程中,采用激光线条列像素偏差限制的方法剔除因工件表面反射光线引起的激光线散乱。
前述的控制方法,其中所述的步骤4中,采用灰度重心的方法精确的定位激光线的线条中心,从而实现激光线条的亚像素的定位。
前述的控制方法,其中所述的步骤6中,通过三角测量原理计算激光线上点的三维空间坐标,具体计算过程为:
相机拍摄图像后,相机上的一个像点与相机镜头中心确定一条直线,像点与镜头中心这两点的坐标都在相机坐标系下,这两点组成的空间直线方程为:
其中,X,Y,Z为目标点的三维坐标;x,y,f为像点坐标;Xs,Ys,Zs是镜头中心坐标;ai、bi、ci为坐标系变换参数;
选取两张图像上的一对同名点,代入上述直线方程可得4个方程式组成的方程组,从而得到X,Y,Z的值,即算出激光线上点的三维空间坐标。
前述的控制方法,其中所述的步骤7具体包括以下步骤:1)启动双相机***,扫描工件点云数据,然后在界面删除错误的点云数据,即得到完成的工件点云模型;2)将步骤6得到的点云数据与所述工件点云模型依据工件表面数据的曲率信息进行点云匹配,得到目标工件;3)计算出点云数据与工件点云模型的转换关系。
本发明与现有技术相比具有明显的优点和有益效果。借由上述技术方案,本发明基于双目立体视觉的机械手抓取控制***的控制方法可达到相当的技术进步性及实用性,并具有产业上的广泛利用价值,其至少具有下列优点:1)本***通过双目视觉和线激光扫描结合的方式获得工件点云数据,并通过点云建模和匹配,得到工件抓取位置,进而指引机械手抓取和摆放工件,本***实现了机械手抓取摆放工件的自动化,提高了企业生产效率,增加企业竞争力。
2)本***通过与机械手相结合,仅需要操控人员在电脑端设定工件抓取和摆放场景,便可实现现场环境内的无人化操作,保证了操作人员的安全性。
3)本***能直观的显示点云扫描过程,以及工件扫描结果。便于操作人员了解***的运行状况,使操作人员实时掌握***的工作状态,提高了***的可维护性。
附图说明
图1为本发明***的硬件构成图;
图2为本发明标志点编码图;
图3为本发明点云模板图。
图4为本发明***的工作流程图;
图5本发明三角测量原理图。
【主要元件符号说明】
O1-xyz:相机坐标系
O2-xyz:相机坐标系
P1:相机坐标中的点
P2:相机坐标中的点
S1:相机镜头中心位置
S2:相机镜头中心位置
W:真实空间中的点
具体实施方式
为更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种基于双目立体视觉的机械手抓取控制***的控制方法其具体方法、步骤及其功效,详细说明如后。
请参阅图1-5,本发明一种基于双目立体视觉的机械手抓取控制***的控制方法,包括以下步骤:
1)标定相机的内参数和外参数,然后通过示教机械手,实现相机坐标系和机械手坐标系的转换。在本发明实施中,通过编码后的圆形标志点标定相机,示教机械手时通过对通过编码后的圆形标志点位置的示教完成对机械手的示教,实现相机坐标系和机械手坐标系的转换。
本发明实施例将8个圆形点组成一个圆形编码点组,每一组编码点位置关系均不相同,且被赋予一个唯一的编号。图2为编码点组织图,使用过程中,将编码点按照编码点组裁剪开,并粘贴到标定板上。利用编码点来标定相机的内参数和外参数,以及实现相机坐标系和机械手坐标系的转换。本方法具有高的标定精度,且能适应多种图像形变,适应多种图像形变是因为编码点提取时同时考虑了圆形点的形状和亮度信息,而高的标定精度是由于圆形点圆心的提取以圆的外边界作为支撑域,这比方格形标定板采用角点提取的方法具有更高的准确性。同时,发明中的标定方法同时矫正了相机镜头切向畸变和径向畸变,进一步保证了测量精度。
2)线激光做弧面扫描运动,同时位于线激光两侧的相机分别从左右两个视角拍摄工作。本发明机械手抓取控制***的硬件包括两个相机和一个位于两相机之间的线激光器,其构成图请参阅图1。
3)对双相机拍摄的两幅图像分别提取激光线。提取投射到工件上的激光线条时,采用激光线条光照无关提取方法,即结合灰度阈值和图片每行像素最值的方法实现激光线条光照无关的初步提取,该方法保证了在环境光照下激光线条的稳定提取,实现了激光线条提取对光照变化的弱敏感性。
在激光线条提取过程中,需要将激光线离群点移除,本发明采用激光线条列像素偏差限制的方法剔除因工件表面反射光线引起的激光线散乱,该方法有效剔除了非激光线上的离群点,为后续激光同名点的匹配提供准确的种点。
4)利用亚像素算法精确定位激光线的位置。本发明对于激光线上点的亚像素的定位,采用灰度重心的方法精确的定位激光线的线条中心,从而实现激光线条的亚像素的定位。该方法的应用提高了算法的定位精度。
5)对两相机图片中提取到的激光线进行同名点匹配。
6)通过三角测量原理计算激光线上每个点的三维空间坐标,完成对场景内工件的扫描,获得相机视野内的点云数据。
请参阅图2,O1-xyz与O2-xyz分别是两相机空间坐标系;P1,P2是一对儿同名点;S1,S2是相机镜头的中心位置;w是真实空间中的一个点。P1,S1确定了空间中一条直线,P2,S2确定了另一条直线,它们在空间中相较于W。
空间直线:相机拍摄图像后,相机CCD上的一个像点与相机镜头中心可以确定一条直线。像点与镜头中心这两点的坐标都在相机坐标系下,这两点组成的空间直线方程为:
其中,X,Y,Z为目标点的三维坐标,是未知数;
x,y,f为像点坐标,是已知量(通过分析图像得到);
Xs,Ys,Zs是镜头中心坐标,为已知量(在相机标定过程得到);
ai、bi、ci为坐标系变换参数,为已知量(在相机标定过程得到);
一张图像可以列一个直线方程,两张图像就可以列两个直线方程,共4个方程组,而式中的未知数只有三个(三维点坐标X,Y,Z),因此,可算出三个未知数。
7)建立工件点云模板,选取机械手抓取点位,然后将获得的点云数据与工件点云模板匹配,从而找到目标工件并计算出两者间的转换关系。
不同于已有***采用cad数据导入的方法,本发明采用工件点云自建模的方式设定机械手抓取工件的位置。建模过程如下:启动双相机***,扫描工件点云数据,然后在界面删除错误的点云数据,即得到完成的工件点云模型,然后从中选取机械手抓取点位,点云模板图以及设定的机械手抓取工件位置请参阅图3,该图显示的是3D点云数据的一个视角,在开发的***界面可以3D查看。
建立工件的点云模板后,就可以进行后续工件的扫描和机械手的控制。通过双目相机激光***扫面工件获得工件的3D数据,然后与点云模板自动匹配。本发明采用的匹配方法是依据工件表面数据的曲率信息进行点云匹配,进而将模板点云中设定的工件抓取位置转换到当前工件坐标系下,指引机械手抓取和摆放工件。采用工件表面点云数据的曲率信息作为匹配项是因为工件表面的曲率信息是一个不变特征,只要工件表面不发生形变,工件的曲率信息也不会发生改变。不同于已有的点、线、曲面匹配方法,本发明采用工件表面数据曲率信息匹配工件,具有不依赖于工件形状特征的优势,即使工件部分特征发生改变,只要工件部分曲率能够与模板工件相匹配,就能准确的得到变换后的工件抓取位置。最后根据点云匹配计算出点云数据与工件点云模型的转换关系。
8)将点云模板中设置的机械手抓取点位置通过步骤(7)计算出的转换关系换算成当前坐标,并将该坐标转换到机械手坐标系下的坐标,将坐标传递给机械手,若坐标值在机械手的运动范围之内,则机械手执行抓取工件和摆放工件的动作,然后相机开始拍摄图像,进入先一个拍摄抓取循环。
以上所述,仅是本发明的较佳实施例而已,并非对本发明做任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容做出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。
Claims (7)
1.一种基于双目立体视觉的机械手抓取控制***的控制方法,其特征在于,包括以下步骤:
1)标定相机的内参数和外参数,然后通过示教机械手,实现相机坐标系和机械手坐标系的转换;
2)线激光做弧面扫描运动,同时位于线激光两侧的相机分别从左右两个视角拍摄图像;
3)对双相机拍摄的两幅图像分别提取激光线;
4)利用亚像素算法精确定位激光线的位置;
5)对两相机图片中提取到的激光线进行同名点匹配;
6)通过三角测量原理计算激光线上每个点的三维空间坐标,完成对场景内工件的扫描,获得相机视野内的点云数据;
7)建立工件点云模板,选取机械手抓取点位,然后将获得的点云数据与工件点云模板匹配,从而找到目标工件并计算出两者间的转换关系;
8)将点云模板中设置的机械手抓取点位置通过步骤(7)计算出的转换关系换算成当前坐标,并将该坐标转换到机械手坐标系下的坐标,将坐标传递给机械手,若坐标值在机械手的运动范围之内,则机械手执行抓取工件和摆放工件的动作,然后相机开始拍摄图像,进入下一个拍摄抓取循环。
2.根据权利要求1所述的控制方法,其特征在于,其中所述的步骤1中,通过编码后的圆形标志点标定相机,示教机械手时通过示教该编码后圆形标志点位置完成对机械手的示教,实现相机坐标系和机械手坐标系的转换。
3.根据权利要求1所述的控制方法,其特征在于,其中所述的步骤3中,提取激光线条时,采用激光线条光照无关提取方法,即结合灰度阈值和图片每行像素最值的方法实现激光线条光照无关的初步提取。
4.根据权利要求1所述的控制方法,其特征在于,其中所述的步骤3中,在激光线条提取过程中,采用激光线条列像素偏差限制的方法剔除因工件表面反射光线引起的激光线散乱。
5.根据权利要求1所述的控制方法,其特征在于,其中所述的步骤4中,采用灰度重心的方法精确的定位激光线的线条中心,从而实现激光线条的亚像素的定位。
6.根据权利要求1所述的控制方法,其特征在于,其中所述的步骤6中,通过三角测量原理计算激光线上点的三维空间坐标,具体计算过程为:相机拍摄图像后,相机上的一个像点与相机镜头中心确定一条直线,像点与镜头中心这两点的坐标都在相机坐标系下,这两点组成的空间直线方程为:
其中,X,Y,Z为目标点的三维坐标;x,y,f为像点坐标;Xs,Ys,Zs是镜头中心坐标;ai、bi、ci为坐标系变换参数;
选取两张图像上的一对同名点,代入上述直线方程可得4个方程式组成的方程组,从而得到X,Y,Z的值,即算出激光线上点的三维空间坐标。
7.根据权利要求1所述的控制方法,其特征在于,其中所述的步骤7具体包括以下步骤:
1)启动双相机***,扫描工件点云数据,然后在界面删除错误的点云数据,即得到完成的工件点云模型;
2)将步骤6得到的点云数据与所述工件点云模型依据工件表面数据的曲率信息进行点云匹配,得到目标工件;
3)计算出点云数据与工件点云模型的转换关系。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610676653.0A CN106041937B (zh) | 2016-08-16 | 2016-08-16 | 一种基于双目立体视觉的机械手抓取控制***的控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610676653.0A CN106041937B (zh) | 2016-08-16 | 2016-08-16 | 一种基于双目立体视觉的机械手抓取控制***的控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106041937A true CN106041937A (zh) | 2016-10-26 |
CN106041937B CN106041937B (zh) | 2018-09-14 |
Family
ID=57195003
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610676653.0A Active CN106041937B (zh) | 2016-08-16 | 2016-08-16 | 一种基于双目立体视觉的机械手抓取控制***的控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106041937B (zh) |
Cited By (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106530297A (zh) * | 2016-11-11 | 2017-03-22 | 北京睿思奥图智能科技有限公司 | 基于点云配准的物体抓取区域定位方法 |
CN107030690A (zh) * | 2016-12-22 | 2017-08-11 | 中国科学院沈阳自动化研究所 | 一种基于视觉的机械臂避障方法 |
CN107192331A (zh) * | 2017-06-20 | 2017-09-22 | 佛山市南海区广工大数控装备协同创新研究院 | 一种基于双目视觉的工件抓取方法 |
CN107186708A (zh) * | 2017-04-25 | 2017-09-22 | 江苏安格尔机器人有限公司 | 基于深度学习图像分割技术的手眼伺服机器人抓取***及方法 |
CN107292930A (zh) * | 2017-07-19 | 2017-10-24 | 云南电网有限责任公司电力科学研究院 | 一种机械臂的引导方法及装置 |
CN107301666A (zh) * | 2017-06-28 | 2017-10-27 | 电子科技大学 | 机器人自动射击方法 |
CN107932502A (zh) * | 2017-11-07 | 2018-04-20 | 陕西科技大学 | 一种基于双目立体视觉的scara机器人轨迹规划方法 |
WO2018103693A1 (zh) * | 2016-12-07 | 2018-06-14 | 西安知象光电科技有限公司 | 一种三维轮廓的光学混合检测方法 |
CN108834576A (zh) * | 2018-06-07 | 2018-11-20 | 华南农业大学 | 一种基于双目视觉的柑橘采摘机器人及其实现方法 |
CN109146939A (zh) * | 2018-09-07 | 2019-01-04 | 中科新松有限公司 | 一种工件抓取模板的生成方法及*** |
CN109129480A (zh) * | 2018-08-24 | 2019-01-04 | 上海理工大学 | 一种基于双目3d定位的机械臂加工*** |
CN109202912A (zh) * | 2018-11-15 | 2019-01-15 | 太原理工大学 | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 |
CN109227205A (zh) * | 2018-11-27 | 2019-01-18 | 上海交通大学 | 一种用于双工位机器人机床上下料的控制方法及*** |
CN109297433A (zh) * | 2018-11-15 | 2019-02-01 | 青岛星晖昌达智能自动化装备有限公司 | 3d视觉引导拆垛测量***及其控制方法 |
CN109318232A (zh) * | 2018-10-22 | 2019-02-12 | 佛山智能装备技术研究院 | 一种工业机器人的多元感知*** |
CN109335649A (zh) * | 2018-09-26 | 2019-02-15 | 重庆巴奥科技有限公司 | 一种用于智能货物摆放的无规则分布抓取提炼方法 |
CN109498914A (zh) * | 2019-01-21 | 2019-03-22 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉引导的自动静脉注射***及其注射方法 |
CN109513630A (zh) * | 2018-11-14 | 2019-03-26 | 深圳蓝胖子机器人有限公司 | 包裹分拣***及其控制方法、存储介质 |
CN109513629A (zh) * | 2018-11-14 | 2019-03-26 | 深圳蓝胖子机器人有限公司 | 包裹分拣方法、装置和计算机可读存储介质 |
CN109532522A (zh) * | 2019-01-21 | 2019-03-29 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉技术的汽车无人充电***及其使用方法 |
CN109588320A (zh) * | 2019-01-21 | 2019-04-09 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉引导的无人化奶牛挤奶*** |
CN109658413A (zh) * | 2018-12-12 | 2019-04-19 | 深圳前海达闼云端智能科技有限公司 | 一种机器人目标物体抓取位置检测的方法 |
CN109671123A (zh) * | 2019-01-31 | 2019-04-23 | 泉州华中科技大学智能制造研究院 | 一种基于单目视觉的鞋底喷胶设备及方法 |
CN109814124A (zh) * | 2019-01-28 | 2019-05-28 | 河北省科学院应用数学研究所 | 一种基于结构光3d传感器的机器人定位***和方法 |
CN109940616A (zh) * | 2019-03-21 | 2019-06-28 | 佛山智能装备技术研究院 | 一种基于大脑—小脑模式的智能抓取***及方法 |
CN110091330A (zh) * | 2019-04-30 | 2019-08-06 | 深圳市视觉龙科技有限公司 | 一种MiniOCV黑色料盘视觉引导纠偏*** |
CN110340891A (zh) * | 2019-07-11 | 2019-10-18 | 河海大学常州校区 | 基于点云模板匹配技术的机械臂定位抓取***及方法 |
CN110355754A (zh) * | 2018-12-15 | 2019-10-22 | 深圳铭杰医疗科技有限公司 | 机器人手眼***、控制方法、设备及存储介质 |
CN110424754A (zh) * | 2019-07-20 | 2019-11-08 | 深圳中物智建科技有限公司 | 一种砌墙机器人对接方法及*** |
CN110517208A (zh) * | 2019-08-19 | 2019-11-29 | 东莞弓叶互联科技有限公司 | 坐标系关联方法及*** |
CN110539297A (zh) * | 2019-08-21 | 2019-12-06 | 长春工程学院 | 一种3d视觉引导的轮对配盘机械手定位方法及装置 |
CN110587616A (zh) * | 2019-08-20 | 2019-12-20 | 辽宁成大生物股份有限公司 | 细胞工厂操作工艺方法 |
CN110883774A (zh) * | 2019-11-20 | 2020-03-17 | 珠海格力智能装备有限公司 | 机器人关节角零位标定***、方法及存储介质 |
CN110881748A (zh) * | 2019-12-16 | 2020-03-17 | 埃视森智能科技(上海)有限公司 | 一种基于3d扫描的机器人鞋底自动涂胶***及方法 |
CN110988586A (zh) * | 2019-10-28 | 2020-04-10 | 国电南瑞科技股份有限公司 | 一种配网带电作业机器人作业精准定位方法及*** |
CN111067197A (zh) * | 2019-12-16 | 2020-04-28 | 河南埃尔森智能科技有限公司 | 一种基于3d扫描的机器人鞋底动态涂胶***及方法 |
CN111136656A (zh) * | 2019-12-24 | 2020-05-12 | 上海智殷自动化科技有限公司 | 一种用于机器人三维不规则物体自动识别及抓取的方法 |
CN111452036A (zh) * | 2019-03-19 | 2020-07-28 | 北京伟景智能科技有限公司 | 一种基于线激光双目立体视觉的工件抓取方法 |
CN111738971A (zh) * | 2019-03-19 | 2020-10-02 | 北京伟景智能科技有限公司 | 一种基于线激光双目立体视觉的电路板立体扫描检测方法 |
CN111872922A (zh) * | 2020-07-29 | 2020-11-03 | 江南大学 | 一种基于3d视觉传感器的三自由度并联机器人手眼标定方法 |
CN111941425A (zh) * | 2020-08-17 | 2020-11-17 | 沈阳飞机工业(集团)有限公司 | 基于激光跟踪仪和双目相机的机器人铣削***工件快速定位方法 |
CN112150439A (zh) * | 2020-09-23 | 2020-12-29 | 创新奇智(青岛)科技有限公司 | 注塑件的自动分拣设备及分拣方法 |
CN112207857A (zh) * | 2019-07-12 | 2021-01-12 | 上海智殷自动化科技有限公司 | 一种基于双目视觉***的离线示教*** |
CN112244078A (zh) * | 2020-10-15 | 2021-01-22 | 佛山松瀚智能设备有限公司 | 一种自动剥虾机的进料定位方法 |
CN112476434A (zh) * | 2020-11-24 | 2021-03-12 | 新拓三维技术(深圳)有限公司 | 一种基于协作机器人的视觉3d取放方法及*** |
CN112935562A (zh) * | 2021-01-19 | 2021-06-11 | 中国科学院云南天文台 | 基于旁轴离线测量的激光精密加工方法 |
CN113378626A (zh) * | 2021-04-22 | 2021-09-10 | 北京铁科首钢轨道技术股份有限公司 | 弹条视觉抓取方法 |
CN113989278A (zh) * | 2021-12-24 | 2022-01-28 | 湖南视比特机器人有限公司 | 抓取装置的定位方法和*** |
CN114018214A (zh) * | 2021-10-18 | 2022-02-08 | 武汉理工大学 | 一种基于硬件加速***的标志物双目亚像素测距方法 |
CN114102593A (zh) * | 2021-11-24 | 2022-03-01 | 航天晨光股份有限公司 | 基于二维低清晰度图像的机器手抓取规则物料方法 |
US11366450B2 (en) * | 2017-03-23 | 2022-06-21 | Abb Schweiz Ag | Robot localization in a workspace via detection of a datum |
CN114677429A (zh) * | 2022-05-27 | 2022-06-28 | 深圳广成创新技术有限公司 | 一种机械手的定位方法、装置、计算机设备和存储介质 |
US11446822B2 (en) * | 2018-02-19 | 2022-09-20 | Fanuc Corporation | Simulation device that simulates operation of robot |
CN115106312A (zh) * | 2022-06-13 | 2022-09-27 | 中实洛阳重型机械有限公司 | 一种基于双目相机激光引导的智能矿石分拣装置 |
WO2023019833A1 (zh) * | 2021-08-18 | 2023-02-23 | 梅卡曼德(北京)机器人科技有限公司 | 基于激光线扫的点云处理方法及装置 |
WO2023050592A1 (zh) * | 2021-09-30 | 2023-04-06 | 梅卡曼德(北京)机器人科技有限公司 | 鲍威尔棱镜、一字线激光器、激光投影模组及激光3d相机 |
CN117104831A (zh) * | 2023-09-01 | 2023-11-24 | 中信戴卡股份有限公司 | 转向节工件的机器人3d识别及加工方法与*** |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020038855A1 (en) * | 2000-09-29 | 2002-04-04 | Woo-Dong Hwang | Method for compensating position of robot using laser measuring instrument |
CN102567989A (zh) * | 2011-11-30 | 2012-07-11 | 重庆大学 | 基于双目立体视觉的空间定位方法 |
CN103247053A (zh) * | 2013-05-16 | 2013-08-14 | 大连理工大学 | 基于双目显微立体视觉的零件精确定位方法 |
CN103271784A (zh) * | 2013-06-06 | 2013-09-04 | 山东科技大学 | 基于双目视觉的人机交互式机械手控制***和控制方法 |
CN103459102A (zh) * | 2011-03-24 | 2013-12-18 | 佳能株式会社 | 机器人控制装置、机器人控制方法、程序和记录介质 |
CN103499297A (zh) * | 2013-10-25 | 2014-01-08 | 爱科维申科技(天津)有限公司 | 一种基于ccd的高精度测量方法 |
CN203557388U (zh) * | 2013-10-29 | 2014-04-23 | 中国人民解放军总装备部军械技术研究所 | 一种排爆机器人的目标位姿获取机构及目标抓取*** |
CN104331894A (zh) * | 2014-11-19 | 2015-02-04 | 山东省科学院自动化研究所 | 一种基于双目立体视觉的机器人拆垛方法 |
CN105058387A (zh) * | 2015-07-17 | 2015-11-18 | 北京航空航天大学 | 基于激光跟踪仪的一种工业机器人基坐标系标定方法 |
CN105563481A (zh) * | 2014-11-11 | 2016-05-11 | 沈阳新松机器人自动化股份有限公司 | 一种用于轴孔装配的机器人视觉引导方法 |
-
2016
- 2016-08-16 CN CN201610676653.0A patent/CN106041937B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020038855A1 (en) * | 2000-09-29 | 2002-04-04 | Woo-Dong Hwang | Method for compensating position of robot using laser measuring instrument |
CN103459102A (zh) * | 2011-03-24 | 2013-12-18 | 佳能株式会社 | 机器人控制装置、机器人控制方法、程序和记录介质 |
CN102567989A (zh) * | 2011-11-30 | 2012-07-11 | 重庆大学 | 基于双目立体视觉的空间定位方法 |
CN103247053A (zh) * | 2013-05-16 | 2013-08-14 | 大连理工大学 | 基于双目显微立体视觉的零件精确定位方法 |
CN103271784A (zh) * | 2013-06-06 | 2013-09-04 | 山东科技大学 | 基于双目视觉的人机交互式机械手控制***和控制方法 |
CN103499297A (zh) * | 2013-10-25 | 2014-01-08 | 爱科维申科技(天津)有限公司 | 一种基于ccd的高精度测量方法 |
CN203557388U (zh) * | 2013-10-29 | 2014-04-23 | 中国人民解放军总装备部军械技术研究所 | 一种排爆机器人的目标位姿获取机构及目标抓取*** |
CN105563481A (zh) * | 2014-11-11 | 2016-05-11 | 沈阳新松机器人自动化股份有限公司 | 一种用于轴孔装配的机器人视觉引导方法 |
CN104331894A (zh) * | 2014-11-19 | 2015-02-04 | 山东省科学院自动化研究所 | 一种基于双目立体视觉的机器人拆垛方法 |
CN105058387A (zh) * | 2015-07-17 | 2015-11-18 | 北京航空航天大学 | 基于激光跟踪仪的一种工业机器人基坐标系标定方法 |
Non-Patent Citations (3)
Title |
---|
涂志国等: "弧焊机器人视觉测量控制***", 《计算机测量与控制》 * |
胡勇等: "双目视觉测量传感器研究", 《传感器技术》 * |
马廷昭等: "基于激光线扫描的双目立体视觉测量方法研究", 《北京机械工业学院学报》 * |
Cited By (78)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106530297A (zh) * | 2016-11-11 | 2017-03-22 | 北京睿思奥图智能科技有限公司 | 基于点云配准的物体抓取区域定位方法 |
US11105617B2 (en) | 2016-12-07 | 2021-08-31 | Xi 'an Chishine Optoelectronics Technology Co., Ltd | Hybrid light measurement method for measuring three-dimensional profile |
WO2018103693A1 (zh) * | 2016-12-07 | 2018-06-14 | 西安知象光电科技有限公司 | 一种三维轮廓的光学混合检测方法 |
CN107030690A (zh) * | 2016-12-22 | 2017-08-11 | 中国科学院沈阳自动化研究所 | 一种基于视觉的机械臂避障方法 |
US11366450B2 (en) * | 2017-03-23 | 2022-06-21 | Abb Schweiz Ag | Robot localization in a workspace via detection of a datum |
CN107186708A (zh) * | 2017-04-25 | 2017-09-22 | 江苏安格尔机器人有限公司 | 基于深度学习图像分割技术的手眼伺服机器人抓取***及方法 |
CN107186708B (zh) * | 2017-04-25 | 2020-05-12 | 珠海智卓投资管理有限公司 | 基于深度学习图像分割技术的手眼伺服机器人抓取***及方法 |
CN107192331A (zh) * | 2017-06-20 | 2017-09-22 | 佛山市南海区广工大数控装备协同创新研究院 | 一种基于双目视觉的工件抓取方法 |
CN107301666A (zh) * | 2017-06-28 | 2017-10-27 | 电子科技大学 | 机器人自动射击方法 |
CN107292930B (zh) * | 2017-07-19 | 2020-07-14 | 云南电网有限责任公司电力科学研究院 | 一种机械臂的引导方法及装置 |
CN107292930A (zh) * | 2017-07-19 | 2017-10-24 | 云南电网有限责任公司电力科学研究院 | 一种机械臂的引导方法及装置 |
CN107932502A (zh) * | 2017-11-07 | 2018-04-20 | 陕西科技大学 | 一种基于双目立体视觉的scara机器人轨迹规划方法 |
US11446822B2 (en) * | 2018-02-19 | 2022-09-20 | Fanuc Corporation | Simulation device that simulates operation of robot |
CN108834576A (zh) * | 2018-06-07 | 2018-11-20 | 华南农业大学 | 一种基于双目视觉的柑橘采摘机器人及其实现方法 |
CN108834576B (zh) * | 2018-06-07 | 2021-03-26 | 华南农业大学 | 一种基于双目视觉的柑橘采摘机器人及其实现方法 |
CN109129480A (zh) * | 2018-08-24 | 2019-01-04 | 上海理工大学 | 一种基于双目3d定位的机械臂加工*** |
CN109146939A (zh) * | 2018-09-07 | 2019-01-04 | 中科新松有限公司 | 一种工件抓取模板的生成方法及*** |
CN109335649A (zh) * | 2018-09-26 | 2019-02-15 | 重庆巴奥科技有限公司 | 一种用于智能货物摆放的无规则分布抓取提炼方法 |
CN109318232A (zh) * | 2018-10-22 | 2019-02-12 | 佛山智能装备技术研究院 | 一种工业机器人的多元感知*** |
CN109513629A (zh) * | 2018-11-14 | 2019-03-26 | 深圳蓝胖子机器人有限公司 | 包裹分拣方法、装置和计算机可读存储介质 |
CN109513630A (zh) * | 2018-11-14 | 2019-03-26 | 深圳蓝胖子机器人有限公司 | 包裹分拣***及其控制方法、存储介质 |
CN109297433A (zh) * | 2018-11-15 | 2019-02-01 | 青岛星晖昌达智能自动化装备有限公司 | 3d视觉引导拆垛测量***及其控制方法 |
CN109202912B (zh) * | 2018-11-15 | 2020-09-11 | 太原理工大学 | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 |
CN109202912A (zh) * | 2018-11-15 | 2019-01-15 | 太原理工大学 | 一种基于单目深度传感器和机械臂配准目标轮廓点云的方法 |
CN109227205A (zh) * | 2018-11-27 | 2019-01-18 | 上海交通大学 | 一种用于双工位机器人机床上下料的控制方法及*** |
CN109658413A (zh) * | 2018-12-12 | 2019-04-19 | 深圳前海达闼云端智能科技有限公司 | 一种机器人目标物体抓取位置检测的方法 |
CN109658413B (zh) * | 2018-12-12 | 2022-08-09 | 达闼机器人股份有限公司 | 一种机器人目标物体抓取位置检测的方法 |
US11878433B2 (en) | 2018-12-12 | 2024-01-23 | Cloudminds Robotics Co., Ltd. | Method for detecting grasping position of robot in grasping object |
CN110355754B (zh) * | 2018-12-15 | 2023-09-22 | 深圳铭杰医疗科技有限公司 | 机器人手眼***、控制方法、设备及存储介质 |
CN110355754A (zh) * | 2018-12-15 | 2019-10-22 | 深圳铭杰医疗科技有限公司 | 机器人手眼***、控制方法、设备及存储介质 |
CN109532522A (zh) * | 2019-01-21 | 2019-03-29 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉技术的汽车无人充电***及其使用方法 |
CN109498914B (zh) * | 2019-01-21 | 2024-05-24 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉引导的自动静脉注射***及其注射方法 |
CN109588320A (zh) * | 2019-01-21 | 2019-04-09 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉引导的无人化奶牛挤奶*** |
CN109498914A (zh) * | 2019-01-21 | 2019-03-22 | 河南埃尔森智能科技有限公司 | 一种基于3d视觉引导的自动静脉注射***及其注射方法 |
CN109814124A (zh) * | 2019-01-28 | 2019-05-28 | 河北省科学院应用数学研究所 | 一种基于结构光3d传感器的机器人定位***和方法 |
CN109671123A (zh) * | 2019-01-31 | 2019-04-23 | 泉州华中科技大学智能制造研究院 | 一种基于单目视觉的鞋底喷胶设备及方法 |
CN109671123B (zh) * | 2019-01-31 | 2023-10-17 | 泉州华中科技大学智能制造研究院 | 一种基于单目视觉的鞋底喷胶设备及方法 |
CN111452036B (zh) * | 2019-03-19 | 2023-08-04 | 北京伟景智能科技有限公司 | 一种基于线激光双目立体视觉的工件抓取方法 |
CN111738971A (zh) * | 2019-03-19 | 2020-10-02 | 北京伟景智能科技有限公司 | 一种基于线激光双目立体视觉的电路板立体扫描检测方法 |
CN111452036A (zh) * | 2019-03-19 | 2020-07-28 | 北京伟景智能科技有限公司 | 一种基于线激光双目立体视觉的工件抓取方法 |
CN111738971B (zh) * | 2019-03-19 | 2024-02-27 | 北京伟景智能科技有限公司 | 一种基于线激光双目立体视觉的电路板立体扫描检测方法 |
CN109940616A (zh) * | 2019-03-21 | 2019-06-28 | 佛山智能装备技术研究院 | 一种基于大脑—小脑模式的智能抓取***及方法 |
CN109940616B (zh) * | 2019-03-21 | 2022-06-03 | 佛山智能装备技术研究院 | 一种基于大脑—小脑模式的智能抓取***及方法 |
CN110091330A (zh) * | 2019-04-30 | 2019-08-06 | 深圳市视觉龙科技有限公司 | 一种MiniOCV黑色料盘视觉引导纠偏*** |
CN110340891B (zh) * | 2019-07-11 | 2022-05-24 | 河海大学常州校区 | 基于点云模板匹配技术的机械臂定位抓取***及方法 |
CN110340891A (zh) * | 2019-07-11 | 2019-10-18 | 河海大学常州校区 | 基于点云模板匹配技术的机械臂定位抓取***及方法 |
CN112207857A (zh) * | 2019-07-12 | 2021-01-12 | 上海智殷自动化科技有限公司 | 一种基于双目视觉***的离线示教*** |
CN110424754A (zh) * | 2019-07-20 | 2019-11-08 | 深圳中物智建科技有限公司 | 一种砌墙机器人对接方法及*** |
CN110424754B (zh) * | 2019-07-20 | 2022-01-11 | 深圳中物智建科技有限公司 | 一种砌墙机器人对接方法及*** |
CN110517208A (zh) * | 2019-08-19 | 2019-11-29 | 东莞弓叶互联科技有限公司 | 坐标系关联方法及*** |
CN110517208B (zh) * | 2019-08-19 | 2023-06-16 | 广东弓叶科技有限公司 | 坐标系关联方法及*** |
CN110587616A (zh) * | 2019-08-20 | 2019-12-20 | 辽宁成大生物股份有限公司 | 细胞工厂操作工艺方法 |
CN110539297A (zh) * | 2019-08-21 | 2019-12-06 | 长春工程学院 | 一种3d视觉引导的轮对配盘机械手定位方法及装置 |
CN110988586A (zh) * | 2019-10-28 | 2020-04-10 | 国电南瑞科技股份有限公司 | 一种配网带电作业机器人作业精准定位方法及*** |
CN110988586B (zh) * | 2019-10-28 | 2021-11-16 | 国电南瑞科技股份有限公司 | 一种配网带电作业机器人作业精准定位方法及*** |
CN110883774A (zh) * | 2019-11-20 | 2020-03-17 | 珠海格力智能装备有限公司 | 机器人关节角零位标定***、方法及存储介质 |
CN111067197A (zh) * | 2019-12-16 | 2020-04-28 | 河南埃尔森智能科技有限公司 | 一种基于3d扫描的机器人鞋底动态涂胶***及方法 |
CN110881748A (zh) * | 2019-12-16 | 2020-03-17 | 埃视森智能科技(上海)有限公司 | 一种基于3d扫描的机器人鞋底自动涂胶***及方法 |
CN111136656A (zh) * | 2019-12-24 | 2020-05-12 | 上海智殷自动化科技有限公司 | 一种用于机器人三维不规则物体自动识别及抓取的方法 |
CN111136656B (zh) * | 2019-12-24 | 2020-12-08 | 上海智殷自动化科技有限公司 | 一种用于机器人三维不规则物体自动识别及抓取的方法 |
CN111872922A (zh) * | 2020-07-29 | 2020-11-03 | 江南大学 | 一种基于3d视觉传感器的三自由度并联机器人手眼标定方法 |
CN111872922B (zh) * | 2020-07-29 | 2021-09-03 | 贵州电网有限责任公司 | 基于3d视觉传感器的三自由度并联机器人手眼标定方法 |
CN111941425A (zh) * | 2020-08-17 | 2020-11-17 | 沈阳飞机工业(集团)有限公司 | 基于激光跟踪仪和双目相机的机器人铣削***工件快速定位方法 |
CN111941425B (zh) * | 2020-08-17 | 2023-02-10 | 沈阳飞机工业(集团)有限公司 | 基于激光跟踪仪和双目相机的机器人铣削***工件快速定位方法 |
CN112150439A (zh) * | 2020-09-23 | 2020-12-29 | 创新奇智(青岛)科技有限公司 | 注塑件的自动分拣设备及分拣方法 |
CN112150439B (zh) * | 2020-09-23 | 2023-10-20 | 创新奇智(青岛)科技有限公司 | 注塑件的自动分拣设备及分拣方法 |
CN112244078A (zh) * | 2020-10-15 | 2021-01-22 | 佛山松瀚智能设备有限公司 | 一种自动剥虾机的进料定位方法 |
CN112476434A (zh) * | 2020-11-24 | 2021-03-12 | 新拓三维技术(深圳)有限公司 | 一种基于协作机器人的视觉3d取放方法及*** |
CN112935562A (zh) * | 2021-01-19 | 2021-06-11 | 中国科学院云南天文台 | 基于旁轴离线测量的激光精密加工方法 |
CN113378626A (zh) * | 2021-04-22 | 2021-09-10 | 北京铁科首钢轨道技术股份有限公司 | 弹条视觉抓取方法 |
WO2023019833A1 (zh) * | 2021-08-18 | 2023-02-23 | 梅卡曼德(北京)机器人科技有限公司 | 基于激光线扫的点云处理方法及装置 |
WO2023050592A1 (zh) * | 2021-09-30 | 2023-04-06 | 梅卡曼德(北京)机器人科技有限公司 | 鲍威尔棱镜、一字线激光器、激光投影模组及激光3d相机 |
CN114018214A (zh) * | 2021-10-18 | 2022-02-08 | 武汉理工大学 | 一种基于硬件加速***的标志物双目亚像素测距方法 |
CN114102593A (zh) * | 2021-11-24 | 2022-03-01 | 航天晨光股份有限公司 | 基于二维低清晰度图像的机器手抓取规则物料方法 |
CN113989278A (zh) * | 2021-12-24 | 2022-01-28 | 湖南视比特机器人有限公司 | 抓取装置的定位方法和*** |
CN114677429A (zh) * | 2022-05-27 | 2022-06-28 | 深圳广成创新技术有限公司 | 一种机械手的定位方法、装置、计算机设备和存储介质 |
CN115106312A (zh) * | 2022-06-13 | 2022-09-27 | 中实洛阳重型机械有限公司 | 一种基于双目相机激光引导的智能矿石分拣装置 |
CN117104831A (zh) * | 2023-09-01 | 2023-11-24 | 中信戴卡股份有限公司 | 转向节工件的机器人3d识别及加工方法与*** |
Also Published As
Publication number | Publication date |
---|---|
CN106041937B (zh) | 2018-09-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106041937A (zh) | 一种基于双目立体视觉的机械手抓取控制***的控制方法 | |
CN110014426B (zh) | 一种利用低精度深度相机高精度抓取形状对称工件的方法 | |
CN108274092B (zh) | 基于三维视觉与模型匹配的坡口自动切割***及切割方法 | |
CN111089569B (zh) | 一种基于单目视觉的大型箱体测量方法 | |
CN103192397B (zh) | 视觉机器人离线编程方法和*** | |
JP5458885B2 (ja) | 物体検出方法と物体検出装置およびロボットシステム | |
CN104626169B (zh) | 基于视觉与机械综合定位的机器人抓取零件的方法 | |
CN110202573B (zh) | 全自动手眼标定、工作平面标定方法及装置 | |
CN106524945B (zh) | 一种基于机械臂和结构光视觉的平面夹角在线测量方法 | |
Bone et al. | Automated modeling and robotic grasping of unknown three-dimensional objects | |
CN108942918B (zh) | 一种基于线结构光的立体定位方法 | |
CN108876852B (zh) | 一种基于3d视觉的在线实时物体识别定位方法 | |
JP2013043271A (ja) | 情報処理装置、情報処理装置の制御方法、およびプログラム | |
CN111958604A (zh) | 一种高效的基于cad模型的异形毛刷单目视觉示教抓取方法 | |
CN104976950B (zh) | 物件空间信息量测装置与方法及取像路径的计算方法 | |
JP2019188477A (ja) | ロボットの動作教示装置、ロボットシステムおよびロボット制御装置 | |
CN111347426A (zh) | 一种基于3d视觉的机械臂精确放置轨迹规划方法 | |
CN111452045B (zh) | 一种基于立体视觉的钢筋识别标记***和方法 | |
Fan et al. | A combined 2D-3D vision system for automatic robot picking | |
CN112109072B (zh) | 一种大型稀疏特征托盘精确6d位姿测量和抓取方法 | |
TW201714695A (zh) | 即時三維建模之雷射飛行打標系統及其方法 | |
Ben et al. | Research on visual orientation guidance of industrial robot based on cad model under binocular vision | |
CN210361314U (zh) | 一种基于增强现实技术的机器人示教装置 | |
CN110992416A (zh) | 基于双目视觉与cad模型的高反光面金属零件位姿测量方法 | |
CN116465335A (zh) | 基于点云匹配的自动测厚方法和*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |