CN107150032B - 一种基于多图像获取设备的工件识别与分拣装置和方法 - Google Patents

一种基于多图像获取设备的工件识别与分拣装置和方法 Download PDF

Info

Publication number
CN107150032B
CN107150032B CN201610125496.4A CN201610125496A CN107150032B CN 107150032 B CN107150032 B CN 107150032B CN 201610125496 A CN201610125496 A CN 201610125496A CN 107150032 B CN107150032 B CN 107150032B
Authority
CN
China
Prior art keywords
workpiece
picking
image acquisition
workpieces
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610125496.4A
Other languages
English (en)
Other versions
CN107150032A (zh
Inventor
蒋知峰
方江龙
吕燕
张力
蒋劲峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Electric Group Corp
Original Assignee
Shanghai Electric Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Electric Group Corp filed Critical Shanghai Electric Group Corp
Priority to CN201610125496.4A priority Critical patent/CN107150032B/zh
Publication of CN107150032A publication Critical patent/CN107150032A/zh
Application granted granted Critical
Publication of CN107150032B publication Critical patent/CN107150032B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/34Sorting according to other particular properties
    • B07C5/342Sorting according to other particular properties according to optical properties, e.g. colour
    • B07C5/3422Sorting according to other particular properties according to optical properties, e.g. colour using video scanning devices, e.g. TV-cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/02Measures preceding sorting, e.g. arranging articles in a stream orientating

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)

Abstract

本发明涉及一种基于多图像获取设备的工件识别与分拣装置,包括第一图像获取设备、第二图像获取设备、工件传送装置、拣取装置和计算机,所述工件传送装置用于将工件沿一个方向进行输送;所述第一图像获取设备位于所述工件传送装置的上游,用于获取位于工件传送装置上游的所有工件的图像;所述拣取装置根据所述计算机的控制拣取位于工件传送装置上的工件;所述第二图像获取设备位于所述工件传送装置的下游,用于获取拣取装置所拣取的单个工件的局部图像;所述计算机用于计算每个工件的拣取时间、拣取位置和释放位置。本发明还涉及一种基于多图像获取设备的工件识别与分拣方法。本发明在进行工件识别时能同时保证识别范围与识别精度。

Description

一种基于多图像获取设备的工件识别与分拣装置和方法
技术领域
本发明涉及工件识别和分拣技术领域,特别是涉及一种基于多图像获取设备的工件识别与分拣装置和方法。
背景技术
基于机器视觉的工件分拣、拾取、搬运已在机械、食品、医药、化妆品等生产领域得到日益广泛的应用。在这些生产线中,多个工件混合传送到分拣区,承担分拣、搬运的装置要求能识别分拣区内的工件,拾取后按工序要求搬运或摆放到所需的位置。专利“基于机器视觉的机器人分拣***及方法”(中船重工716所,CN103706568A)采用单相机获取静止的圆形药片图像后由机器手按形状分拣,吸取位置与物品实际位置的误差范围为0.2mm。专利“基于视觉处理的机器人自动码垛”(沈阳工业大学,CN104058260A)对于处在分拣区的静止工件通过单个相机获取图像,经图象处理后得到工件几何质心,再由码垛机器人按此质心吸取完成码垛。专利“工业机器人分拣***”(沈阳工业大学,CN204036474U)采用单个相机的运动,获取两个不同位置的图像,由双目立体视觉算法得到工件的几何质心和摆放方向,生成工件在分拣区内的空间位置供机器人实施抓取。专利“一种用于机器人搬运作业的视觉定位方法”(上海FANUC机器人有限公司,CN101637908A)为提高机器人上料的姿态精度,对于固定位置上的单个工件在抓取前由一个2维相机得到位置补偿数据,拾取后由一个3维相机获得姿态特征补偿数据,该方法主要用于解决形状不规则的毛坯零件上料装夹的精度问题。
在上述采用单个相机的专利中,为了在一个视场内得到多个工件图像,除非采用昂贵的高分辨率相机,像素足够多,否则由图像处理得到的测量精度不高。
上述应用均针对单层工件场合,对于只容纳单层工件平铺的分拣区,在有的生产线中因为有新的工件持续流入,分拣区内工件间相互推挤,各个工件会作缓慢平移和转动,在图像获取后的图像处理、运动轨迹计算等抓取前的时间片内,工件位置已有小变化。在实施拣取的吸取或夹爪收紧过程中被抓取物相对于之前的位置也会发生细微的位移。上述专利均未计入这些位置变化,无法保证定位精度。
此外,上述采用单相机的方案中无法实现多个拣取设备,如机器人的协调工作。拣取的效率较低,且相机的使用率也比较低,增加拣取设备势必导致相机数量的成倍增加。而如果采用单台相机针对不同识别的范围两次成像的方案的话不仅增加了相机需要频繁变换焦距所带来的额外成本,而且还严重影响到了拣取的效率。专利“一种用于机器人搬运作业的视觉定位方法”中,第一台2D相机固定在机器人手臂上,机器人抓取工件后移动到另一台位置固定的3D相机下进行位置补偿和定位。这种方法在多个机器人的应用场合中也会导致相机的数量会成倍增加。无法充分发挥相机的使用效率。
发明内容
本发明所要解决的技术问题是提供一种基于多图像获取设备的工件识别与分拣装置和方法,进行工件识别时能同时保证识别范围与识别精度,解决对于生产线上持续流入的工件在识别和抓取的时间差产生的位移变化对精度的影响。
本发明解决其技术问题所采用的技术方案是:提供一种基于多图像获取设备的工件识别与分拣装置,包括第一图像获取设备、第二图像获取设备、工件传送装置、拣取装置和计算机,所述工件传送装置用于将工件沿一个方向进行输送;所述第一图像获取设备位于所述工件传送装置的上游,用于获取位于工件传送装置上游的所有工件的图像;所述拣取装置根据所述计算机的控制拣取位于工件传送装置上的工件;所述第二图像获取设备位于所述工件传送装置的下游,用于获取拣取装置所拣取的单个工件的局部图像;所述计算机用于计算每个工件的拣取时间、拣取位置和释放位置,所述计算机分别与第一图像获取设备、第二图像获取设备、工件传送装置和拣取装置连接。
所述计算机根据每一个工件被识别时的位置和工件传输装置移动速度计算出拣取装置针对每一个工件的拣取时间和拣取位置。
所述计算机还根据所述第二图像获取设备得到的工件定位特征的位置信息计算出工件位置校正补偿量,并根据工件释放的目标位置计算出工件的释放位置。
所述工件定位特征是指工件被拣取的一面上未被拣取装置所遮挡的部位的形状或轮廓线。
所述拣取装置通过吸取或抓取的方式进行拣取工件。
所述第一图像获取设备和第二图像获取设备均为工业相机。优选地,所述相机分辨率不超过500万像素,或像素阵列小于或等于1920*2560。
所述工件传送装置上还设有与计算机相连的传感器,所述传感器用于检测工件传送装置的传送位置和/或速度。
所述拣取装置为两个以上,所述第二图像获取设备的数量少于或等于拣取装置的数量,所述拣取装置和第二图像获取设备在工件传送装置的下游间隔布置。
所述拣取装置为两个以上,所述拣取装置在移动路径上避免干涉碰撞。
本发明解决其技术问题所采用的技术方案是:提供一种基于多图像获取设备的工件识别与分拣方法,包括以下步骤:
(1)第一图像获取设备获取工件传送装置上游的包含多个工件的图像,并进行图像处理,识别出所要拣取的工件的第一位置的信息传输给计算机;
(2)计算机控制拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件;
(3)第二图像获取设备对拣取装置所拣取工件的定位特征进行图像采集,经过图像处理得到工件定位特征相对于拣取装置的位置信息;
(4)计算机根据得到的工件定位特征相对于拣取装置的位置信息控制拣取装置定位到释放位置释放工件。
所述步骤(1)和步骤(2)之间还包括计算机根据每一个工件被识别时的第一位置和工件传送装置移动速度计算出拣取装置针对每一个工件的拣取时间和第二位置的步骤。
所述步骤(4)中计算机根据得到的工件定位特征相对于拣取装置的位置信息计算出拣取装置释放工件的目标位置的补偿量。
所述步骤(3)的定位特征是指工件被拣取的一面上未被拣取装置所遮挡的部位的形状或轮廓线。
所述步骤(3)具体为对所拣取工件进行图像采集和灰度阈值处理,提取出轮廓线,并获得角点的坐标以及轮廓线的转角,通过角点坐标获取偏置量,通过轮廓线的转角获取角度偏置量。
所述拣取装置为两个以上时,在步骤(2)中计算机分别控制多个拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件,然后多个拣取装置依次移动到第二图像获取设备的获取区域中;多个拣取装置在移动路径上避免干涉碰撞。
为了提高识别和分拣的效率,先完成拣取工件的拣取装置先移动到第二图像获取设备的获取区域中。
所述拣取装置为两个以上时,所述第二图像获取设备的数量少于或等于拣取装置的数量,每个第二图像获取设备至少对应一个拣取装置,在步骤(2)中计算机分别控制多个拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件,然后多个拣取装置移动到各自对应的第二图像获取设备的获取区域中。
有益效果
由于采用了上述的技术方案,本发明与现有技术相比,具有以下的优点和积极效果:
本发明采用多相机可以实现对大范围物品的高精度识别和拣取,解决了传统方法中相机识别范围与相机分辨率之间的矛盾。
本发明中的第一相机得到工件的分拣信息以及可进行工件拣取的位置信息。在拣取工件并完成定位测量前,工件实际空间位置与识别测量得到的空间位置不同,包含了识别照相后到抓取这段时间内工件的移动,以及抓取过程中工件在机构夹紧或完全吸合前的移动或偏移。不同的工件定位特征不同,按所抓取工件的定位特征由第二相机进行精定位测量,由于工件定位特征的尺寸较小,在第二相机成像中可得到较高的图像测量精度,同时由于拣取装置与所抓取的工件间已不再有相对运动,故可以得到足够精度的当前工件的定位信息。因此本发明可应用于持续流入的多品种多个工件混合的分拣区内工件的分拣和定位搬运,从而解决了由于生产线上持续流入的工件在识别和抓取的时间差产生的位移变化对精度的影响,实现了高效率和高精度的机器人物品分拣作业。
本发明中所使用的相机均为普通规格的工业相机,在分辨率和性能上没有特别的要求。因此,本发明方案的整体成本较低。
本发明中所使用的第一相机和第二相机分别在工件传输装置的上游和下游布置,这样两个相机的工作相互没有影响,可以实现相互配合的持续、高效率的工作。第一相机进行工件区域的工件进行全局的识别,从而实现总体协调的作用,传输装置下游的多个拣取机构和第二相机可以根据第一相机识别的多个工件的位置同时对工件进行拣取,提高了工作效率。
在采用多个拣取设备的使用情况下,多个拣取设备可以共用第一相机的采集结果。同时,在对拣取设备的位置合理布局的情况下,第二相机可以被多个拣取设备交替使用。这样整个装置在效率提升的同时最少化了相机使用数量,提高了相机的利用率,降低了实施的成本。
附图说明
图1是本发明的装置结构示意图;
图2是本发明的俯视图;
图3是本发明的***方框图;
图4是本发明的工作流程图;
图5是本发明实施例中第一图像获取设备的识别区域示意图;
图6是本发明实施例中第二图像获取设备的识别区域示意图;
图7是本发明实施例中修正补偿量示意图。
具体实施方式
下面结合具体实施例,进一步阐述本发明。应理解,这些实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解,在阅读了本发明讲授的内容之后,本领域技术人员可以对本发明作各种改动或修改,这些等价形式同样落于本申请所附权利要求书所限定的范围。
本发明涉及一种基于多图像获取设备的工件识别与分拣装置,如图1和图2所示,包括第一图像获取设备1、第二图像获取设备2、工件传送装置5、拣取装置3和计算机6,所述工件传送装置5用于将工件4沿一个方向进行输送;所述第一图像获取设备1位于所述工件传送装置5的上游,用于获取位于工件传送装置5上游的所有工件的图像;所述拣取装置3根据所述计算机的控制拣取位于工件传送装置5上的工件4;所述第二图像获取设备2位于所述工件传送装置5的下游,用于获取拣取装置3所拣取的单个工件的局部图像;所述计算机6用于计算每个工件的拣取时间、拣取位置和释放位置,所述计算机6分别与第一图像获取设备1、第二图像获取设备2、工件传送装置5和拣取装置3连接。所述工件传送装置5上还设有与计算机6相连的传感器7,所述传感器7用于检测工件传送装置的传送位置和/或速度。整个工件识别与分拣装置的两侧还设有工件码放区8,该工件码放区8即为拣取装置3的释放位置。
其中,计算机可以根据每一个工件被识别时的位置和工件传输装置移动速度计算出拣取装置针对每一个工件的拣取时间和拣取位置;计算机还可以根据第二图像获取设备得到的工件定位特征的位置信息计算出工件位置校正补偿量,并根据工件释放的目标位置计算出工件的释放位置,从而实现对大范围物品的高精度识别和拣取。第一图像获取设备和第二图像获取设备均可以采用普通规格的工业相机。
不难发现,本发明采用多图像获取设备可以实现对大范围物品的高精度识别和拣取,解决了传统方法中相机识别范围与相机分辨率之间的矛盾。本发明中的第一图像获取设备得到工件的分拣信息以及可进行工件拣取的位置信息。在拣取工件并完成定位测量前,工件实际空间位置与识别测量得到的空间位置不同,包含了识别图像获取后到抓取这段时间内工件的移动,以及抓取过程中工件在机构夹紧或完全吸合前的移动或偏移。不同的工件定位特征不同,按所抓取工件的定位特征由第二图像获取设备进行精定位测量,由于工件定位特征的尺寸较小,在第二图像获取设备成像中可得到较高的图像测量精度,同时由于拣取装置与所抓取的工件间已不再有相对运动,故可以得到足够精度的当前工件的定位信息。因此本发明可应用于持续流入的多品种多个工件混合的分拣区内工件的分拣和定位搬运,从而解决了由于生产线上持续流入的工件在识别和抓取的时间差产生的位移变化对精度的影响,实现了高效率和高精度的机器人物品分拣作业。
本发明中所使用的图像获取设备均可以为普通规格的工业相机,在分辨率和性能上没有特别的要求。因此,本发明方案的整体成本较低。本发明中所使用的第一图像获取设备和第二图像获取设备分别在工件传输装置的上游和下游布置,这样两个图像获取设备的工作相互没有影响,可以实现相互配合的持续、高效率的工作。第一图像获取设备进行工件区域的工件进行全局的识别,从而实现总体协调的作用,传输装置下游的多个拣取装置和第二图像获取设备可以根据第一图像获取设备识别的多个工件的位置同时对工件进行拣取,提高了工作效率。
本发明还涉及一种基于多图像获取设备的工件识别与分拣方法,如图3和图4所示,包括以下步骤:第一图像获取设备获取工件传送装置上游的包含多个工件的图像,并进行图像处理,识别出所要拣取的工件的第一位置的信息传输给计算机;计算机控制拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件;第二图像获取设备对拣取装置所拣取工件的定位特征进行图像采集,经过图像处理得到工件定位特征相对于拣取装置的位置信息;计算机根据得到的工件定位特征相对于拣取装置的位置信息控制拣取装置定位到释放位置释放工件。计算机通过传感器得到工件传送装置的传送位置和/或速度,以完成整个工作流程。其中,第一图像获取设备的识别区域如图5所示,虚线框9即为第一图像获取设备的识别区域,第二图像获取设备的识别区域如图6所示,虚线圆圈10即为第二图像获取设备的识别区域,其与工件4重叠的部分即为定位特征11。
下面通过三个具体的实施例来进一步描述该方法。
实施例一:
工件传输装置为传送带,拾取装置为一台多关节机器人,工件为箱体。第一相机和第二相机均采用普通规格的工业相机,其分辨率为500万像素。传送带通过旋转电机驱动,电机上安装有旋转编码器,检测电机旋转角度,计算机通过不断读取编码器反馈的角度计算传送带的移动距离和速度。
第一相机固定安装在传送带工件进入方向上游的正上方,镜头垂直向下指向分拣区域,第二相机为一台并固定安装在传送带下游工件分拣区域的正上方,镜头垂直向下指向分拣区域,
A)第一相机采集传送带上游的包含多个工件的图像并进行图像处理,识别出所要拣取的工件的位置的信息传输给计算机;
B)计算机根据每一个工件被识别时的位置和传送带移动速度计算出机器人针对每一个工件的拣取时间和拣取位置;
C)计算机控制机器人定位到拣取位置等待工件到达拣取位置时拣取工件,然后移动到第二相机的下方;
D)第二相机对机器人所拣取工件的定位特征进行图像采集,经过图像处理得到工件定位特征相对于拣取装置的位置信息;
E)计算机根据上一步骤中得到的工件定位特征相对于拣取装置的位置信息计算出拣取装置释放工件的目标位置的补偿量,从而得到机器人所要释放的工件码放区的释放位置;
F)计算机控制机器人定位到工件码放区的释放位置释放工件;
G)重复步骤C直到工件全部被拣取。
其中步骤D)中第二相机是对被拣取箱体的向上一面边缘的一个角的轮廓线进行定位特征识别。在特定的光照条件下对箱体边缘一个角的轮廓线进行图像采集和灰度阈值处理,提取出轮廓线,并获得角点的坐标以及轮廓线的转角,见图7。通过角点的坐标获取偏置量X’和Y’。通过两条轮廓线的转角获取角度偏置量α’。将X’,Y’和α’的数值传送给计算机,并计算出修正后的工件位置参数X、Y和α。图7中虚线框即为工件校正后的位置。
实施例二:
工件传输装置为传送带,拾取装置为二台多关节机器人,第二相机也为两台并分别与二台机器人的位置相对应。工件为箱体。第一相机和第二相机均采用普通规格的工业相机,其像素阵列为1920*2560。传送带通过旋转电机驱动,电机转速恒定,计算机通过电机转速设定计算传送带的移动距离和速度。
第一相机固定安装在传送带工件进入方向上游的正上方,镜头垂直向下指向分拣区域,第二相机固定安装在传送带下游工件分拣区域的正上方,镜头垂直向下指向分拣区域,
两台多关节机器人与两台第二相机在传送带的下游间隔一定距离布置,相互不干涉,
A)第一相机采集传送带上游的包含多个工件的图像并进行图像处理,识别出所要拣取的工件的位置的信息传输给计算机;其中,计算机根据工件传送带的移动状态计算工件的移动距离,并在第一相机已识别工件随工件传送带离开第一相机图像采集区域前通过第一相机再次识别后续的工件;
B)计算机根据每一个工件被识别时的位置和传送带移动速度计算出机器人针对每一个工件的拣取时间和拣取位置;
C)计算机分别控制两台机器人定位到两个不同的工件的拣取位置等待工件到达拣取位置时拣取工件然后分别移动到各自对应的第二相机的下方;
D)第二相机分别对两台机器人所拣取工件的定位特征进行图像采集,经过图像处理得到工件定位特征相对于拣取装置的位置信息;
E)计算机根据上一步骤中得到的工件定位特征相对于拣取装置的位置信息计算出拣取装置释放工件的目标位置的补偿量,从而得到两台机器人所要释放的工件码放区的释放位置;
F)计算机分别控制两台机器人定位到工件码放区的释放位置释放工件;
G)重复步骤C直到工件全部被拣取。
其中步骤D中第二相机是对被拣取箱体的向上一面边缘的一个角的轮廓线进行定位特征识别。在特定的光照条件下对箱体边缘一个角的轮廓线进行图像采集和灰度阈值处理,提取出轮廓线,并获得角点的坐标以及轮廓线的转角,见图7。通过角点的坐标获取偏置量X’和Y’。通过两条轮廓线的转角获取角度偏置量α’。将X’,Y’和α’的数值传送给计算机,并计算出修正后的工件位置参数X、Y和α。图7中虚线框即为工件校正后的位置。
实施例三:
工件传输装置为传送带,拣取装置为二台多关节机器人,第二相机为一台。工件为箱体。第一相机和第二相机均采用普通规格的工业相机,其像素阵列为1920*2560。传送带通过旋转电机驱动,电机上安装有旋转编码器,检测电机旋转角度,计算机通过不断读取编码器反馈的角度计算传送带的移动距离和速度。
第一相机固定安装在传送带工件进入方向上游的正上方,镜头垂直向下指向分拣区域,第二相机固定安装在传送带下游工件分拣区域的正上方,镜头垂直向下指向分拣区域,
两台多关节机器人在传送带的下游间隔一定距离布置,相互不干涉,第二相机位于两台机器人之间,
A)第一相机采集传送带上游的包含多个工件的图像并进行图像处理,识别出所要拣取的工件的位置的信息传输给计算机;其中,计算机根据工件传送带的移动状态计算工件的移动距离,并在第一相机已识别工件随工件传送带离开第一相机图像采集区域前通过第一相机再次识别后续的工件;
B)计算机根据每一个工件被识别时的位置和传送带移动速度计算出机器人针对每一个工件的拣取时间和拣取位置;
C)计算机控制机器人定位到拣取位置等待工件到达拣取位置时拣取工件,然后移动到第二相机的下方;
D)第二相机对机器人所拣取工件的定位特征进行图像采集,经过图像处理得到工件定位特征相对于拣取装置的位置信息;
E)计算机根据上一步骤中得到的工件定位特征相对于拣取装置的位置信息计算出拣取装置释放工件的目标位置的补偿量,从而得到机器人所要释放的工件码放区的释放位置;
F)计算机控制机器人定位到工件码放区的释放位置释放工件;
G)重复步骤C直到工件全部被拣取。
为了提高识别和分拣的效率,先完成拣取工件的机器人先移动到第二相机的下方,后完成拣取工件的拣取装置后移动到第二相机的下方,依次进行。当第一台机器人执行完步骤C时另一台机器人同时开始执行步骤C。两台机器人在移动路径上应避免干涉碰撞。
其中步骤D中第二相机是对被拣取箱体的向上一面边缘的一个角的轮廓线进行定位特征识别。在特定的光照条件下对箱体边缘一个角的轮廓线进行图像采集和灰度阈值处理,提取出轮廓线,并获得角点的坐标以及轮廓线的转角,见图7。通过角点的坐标获取偏置量X’和Y’。通过两条轮廓线的转角获取角度偏置量α’。将X’,Y’和α’的数值传送给计算机,并计算出修正后的工件位置参数X、Y和α。图7中虚线框即为工件校正后的位置。
由此可见,在采用多个拣取设备的使用情况下,多个拣取设备可以共用第一相机的采集结果。同时,在对拣取设备的位置合理布局的情况下,第二相机可以被多个拣取设备交替使用。这样整个装置在效率提升的同时最少化了相机使用数量,提高了相机的利用率,降低了实施的成本。

Claims (17)

1.一种基于多图像获取设备的工件识别与分拣装置,包括第一图像获取设备、第二图像获取设备、工件传送装置、拣取装置和计算机,其特征在于,所述工件传送装置用于将工件沿一个方向进行输送;所述第一图像获取设备位于所述工件传送装置的上游,用于获取持续流入的位于工件传送装置上游的多个工件的图像;所述拣取装置根据所述计算机的控制拣取位于工件传送装置上的工件;所述第二图像获取设备位于所述工件传送装置的下游,用于获取拣取装置所拣取的单个工件的局部图像;所述计算机用于计算每个工件的拣取时间、拣取位置和释放位置;所述计算机分别与第一图像获取设备、第二图像获取设备、工件传送装置和拣取装置连接,所述计算机根据每一个工件被识别时的位置和工件传输装置移动速度计算出拣取装置针对每一个工件的拣取时间和拣取位置。
2.根据权利要求1所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述计算机还根据所述第二图像获取设备得到的工件定位特征的位置信息计算出工件位置校正补偿量,并根据工件释放的目标位置计算出工件的释放位置。
3.根据权利要求2所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述工件定位特征是指工件被拣取的一面上未被拣取装置所遮挡的部位的形状或轮廓线。
4.根据权利要求1所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述拣取装置通过吸取或抓取的方式进行拣取工件。
5.根据权利要求1所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述第一图像获取设备和第二图像获取设备均为工业相机。
6.根据权利要求5所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述工业相机的分辨率不超过500万像素,或像素阵列小于或等于1920*2560。
7.根据权利要求1所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述工件传送装置上还设有与计算机相连的传感器,所述传感器用于检测工件传送装置的传送位置和/或速度。
8.根据权利要求1所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述拣取装置为两个以上,所述第二图像获取设备的数量少于或等于拣取装置的数量,所述拣取装置和第二图像获取设备在工件传送装置的下游间隔布置。
9.根据权利要求1所述的基于多图像获取设备的工件识别与分拣装置,其特征在于,所述拣取装置为两个以上,所述拣取装置在移动路径上避免干涉碰撞。
10.一种基于多图像获取设备的工件识别与分拣方法,其特征在于,包括以下步骤:
(1)第一图像获取设备获取工件传送装置上游的包含多个工件的图像,并进行图像处理,识别出所要拣取的工件的第一位置的信息传输给计算机;
(2)计算机控制拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件;
(3)第二图像获取设备对拣取装置所拣取工件的定位特征进行图像采集,经过图像处理得到工件定位特征相对于拣取装置的位置信息;
(4)计算机根据得到的工件定位特征相对于拣取装置的位置信息控制拣取装置定位到释放位置释放工件。
11.根据权利要求10所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,所述步骤(1)和步骤(2)之间还包括计算机根据每一个工件被识别时的第一位置和工件传送装置移动速度计算出拣取装置针对每一个工件的拣取时间和第二位置的步骤。
12.根据权利要求10所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,所述步骤(4)中计算机根据得到的工件定位特征相对于拣取装置的位置信息计算出拣取装置释放工件的目标位置的补偿量。
13.根据权利要求10所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,所述步骤(3)的定位特征是指工件被拣取的一面上未被拣取装置所遮挡的部位的形状或轮廓线。
14.根据权利要求10所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,所述步骤(3)具体为对所拣取工件进行图像采集和灰度阈值处理,提取出轮廓线,并获得角点的坐标以及轮廓线的转角,通过角点坐标获取偏置量,通过轮廓线的转角获取角度偏置量。
15.根据权利要求10所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,所述拣取装置为两个以上时,在步骤(2)中计算机分别控制多个拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件,然后多个拣取装置依次移动到第二图像获取设备的获取区域中;多个拣取装置在移动路径上避免干涉碰撞。
16.根据权利要求15所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,先完成拣取工件的拣取装置先移动到第二图像获取设备的获取区域中。
17.根据权利要求10所述的基于多图像获取设备的工件识别与分拣方法,其特征在于,所述拣取装置为两个以上时,所述第二图像获取设备的数量少于或等于拣取装置的数量;每个第二图像获取设备至少对应一个拣取装置,在步骤(2)中计算机分别控制多个拣取装置定位到工件的第二位置,等待工件到达第二位置时拣取工件,然后多个拣取装置移动到各自对应的第二图像获取设备的获取区域中。
CN201610125496.4A 2016-03-04 2016-03-04 一种基于多图像获取设备的工件识别与分拣装置和方法 Active CN107150032B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610125496.4A CN107150032B (zh) 2016-03-04 2016-03-04 一种基于多图像获取设备的工件识别与分拣装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610125496.4A CN107150032B (zh) 2016-03-04 2016-03-04 一种基于多图像获取设备的工件识别与分拣装置和方法

Publications (2)

Publication Number Publication Date
CN107150032A CN107150032A (zh) 2017-09-12
CN107150032B true CN107150032B (zh) 2020-06-23

Family

ID=59791877

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610125496.4A Active CN107150032B (zh) 2016-03-04 2016-03-04 一种基于多图像获取设备的工件识别与分拣装置和方法

Country Status (1)

Country Link
CN (1) CN107150032B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107597600B (zh) * 2017-09-26 2019-08-30 北京京东振世信息技术有限公司 分拣***和分拣方法
KR102600893B1 (ko) * 2018-04-13 2023-11-10 삼성디스플레이 주식회사 패널 이송 장치 및 패널 이송 방법
CN108993929A (zh) * 2018-08-01 2018-12-14 穆科明 一种双机联动工业机器视觉自动检测***
DE102018126050A1 (de) * 2018-10-19 2020-04-23 Fraunhofer-Gesellschaft für die angewandte Forschung e.V. Verfahren zum absortiervorgang unterstützenden anzeigen von werkstück-darstellungen
CN109352626B (zh) * 2018-11-05 2020-02-11 佛山市奇创智能科技有限公司 机器人抓取物件的设备以及方法
CN109513629B (zh) * 2018-11-14 2021-06-11 深圳蓝胖子机器智能有限公司 包裹分拣方法、装置和计算机可读存储介质
CN109513630B (zh) * 2018-11-14 2021-06-11 深圳蓝胖子机器智能有限公司 包裹分拣***及其控制方法、存储介质
CN109772733B (zh) * 2019-01-15 2020-02-18 西安交通大学 一种基于视觉的缺陷竹块检测分拣装置及方法
CN110294316B (zh) * 2019-06-04 2021-07-13 深圳蓝胖子机器智能有限公司 一种抓取传送带上物品的方法、***以及设备
CN111167731B (zh) * 2019-10-23 2022-11-08 武汉库柏特科技有限公司 一种产品分拣方法、产品分拣***和智能分拣机器人
CN111112108B (zh) * 2019-12-30 2022-05-13 上海交通大学 一种船体板材切割零件分拣装备及方法
CN111283685A (zh) * 2020-03-05 2020-06-16 广州市斯睿特智能科技有限公司 基于视觉***的机器人的视觉示教方法
CN112024426A (zh) * 2020-09-01 2020-12-04 北京智通云联科技有限公司 多工位视觉识别***
CN112623759B (zh) * 2020-12-18 2023-03-10 中国建材国际工程集团有限公司 一种玻璃堆垛调度方法
JP2022115328A (ja) * 2021-01-28 2022-08-09 セイコーエプソン株式会社 ロボットシステムの制御方法およびロボットシステム
CN113814984B (zh) * 2021-10-20 2023-04-18 环旭电子股份有限公司 一种用于机器人放料的动态影像定位方法及***
CN113877854A (zh) * 2021-12-08 2022-01-04 辰星(天津)自动化设备有限公司 应用于并联机器人的物体分拣方法
CN114932541B (zh) * 2022-06-15 2023-07-25 中迪机器人(盐城)有限公司 一种基于机器人的自动装配***及方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4147930A (en) * 1975-03-20 1979-04-03 U.S. Philips Corporation Object location detector
CN103691678A (zh) * 2013-12-10 2014-04-02 殷盛江 一种轴承外径尺寸挑选机器人
CN103706575A (zh) * 2013-12-31 2014-04-09 江苏大学 一种基于两级图像采集的镜片在线分级分拣装置及方法
CN103764304A (zh) * 2011-04-05 2014-04-30 泽恩机器人有限公司 在机器人***中拾取动作之后使传感器测量值无效的方法
CN104511436A (zh) * 2013-09-28 2015-04-15 沈阳新松机器人自动化股份有限公司 一种基于机器人视觉伺服技术的快递分拣方法及***
CN204429717U (zh) * 2014-12-18 2015-07-01 河南机电高等专科学校 一种应用在瓶装饮料生产设备中的瓶盖检测筛选装置
CN105251699A (zh) * 2015-11-10 2016-01-20 广东溢达纺织有限公司 沉降片检验与整理装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4147930A (en) * 1975-03-20 1979-04-03 U.S. Philips Corporation Object location detector
CN103764304A (zh) * 2011-04-05 2014-04-30 泽恩机器人有限公司 在机器人***中拾取动作之后使传感器测量值无效的方法
CN104511436A (zh) * 2013-09-28 2015-04-15 沈阳新松机器人自动化股份有限公司 一种基于机器人视觉伺服技术的快递分拣方法及***
CN103691678A (zh) * 2013-12-10 2014-04-02 殷盛江 一种轴承外径尺寸挑选机器人
CN103706575A (zh) * 2013-12-31 2014-04-09 江苏大学 一种基于两级图像采集的镜片在线分级分拣装置及方法
CN204429717U (zh) * 2014-12-18 2015-07-01 河南机电高等专科学校 一种应用在瓶装饮料生产设备中的瓶盖检测筛选装置
CN105251699A (zh) * 2015-11-10 2016-01-20 广东溢达纺织有限公司 沉降片检验与整理装置

Also Published As

Publication number Publication date
CN107150032A (zh) 2017-09-12

Similar Documents

Publication Publication Date Title
CN107150032B (zh) 一种基于多图像获取设备的工件识别与分拣装置和方法
CN109230580B (zh) 一种基于混放物料信息采集的拆垛机器人***及方法
US10442633B2 (en) Robot system
US10232512B2 (en) Coordinate system setting method, coordinate system setting apparatus, and robot system provided with coordinate system setting apparatus
CN109249390B (zh) 机器人***
CN111452040B (zh) 在引导装配环境中将机器视觉坐标空间关联的***和方法
CN108372503B (zh) 使用至少一个传感器的物品运送装置
CN110580725A (zh) 一种基于rgb-d相机的箱体分拣方法及***
US20160001983A1 (en) Article alignment apparatus for aligning article on conveyor
JP5288908B2 (ja) 物品整列システム及びロボットハンド
CA2963873A1 (en) A device for feeding items to a sorting machine and sorting machine
CN105690393A (zh) 一种基于机器视觉的四轴并联机器人分拣***及其分拣方法
CN104511436A (zh) 一种基于机器人视觉伺服技术的快递分拣方法及***
CN104807832A (zh) 硅锭自动精检生产线
CN110977939B (zh) 目标工件识别定位***
CN110980276A (zh) 一种三维视觉配合机器人实施铸件自动下料的方法
CN114286740A (zh) 作业机器人以及作业***
CN111069073A (zh) 胶圈分拣设备
CN114632722B (zh) 拾取装置
CN109916346B (zh) 一种基于视觉***的工件平整度的检测装置及检测方法
CN208744837U (zh) 基于三维机器视觉的智能机械臂***
JP6697510B2 (ja) ロボットシステム
CN212238247U (zh) 一种带柔性供料机构的机器人分拣***
CN115319762B (zh) 用于生产线的机器人控制方法、生产线及数控机床
CN205552536U (zh) 一种基于机器视觉的四轴并联机器人分拣***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant