CN104772286A - 一种基于kinect的新型分拣***及其操作方法 - Google Patents

一种基于kinect的新型分拣***及其操作方法 Download PDF

Info

Publication number
CN104772286A
CN104772286A CN201510120106.XA CN201510120106A CN104772286A CN 104772286 A CN104772286 A CN 104772286A CN 201510120106 A CN201510120106 A CN 201510120106A CN 104772286 A CN104772286 A CN 104772286A
Authority
CN
China
Prior art keywords
kinect
connecting axle
support
motion
conveyer belt
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510120106.XA
Other languages
English (en)
Inventor
裘焱枫
张智谦
杜佳晨
许汪洋
俞圣
夏航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN201510120106.XA priority Critical patent/CN104772286A/zh
Publication of CN104772286A publication Critical patent/CN104772286A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Manipulator (AREA)

Abstract

本发明涉及一种基于kinect的新型分拣***及其操作方法,包括传送带以及支架,传送带从支架下穿过,支架位于传送带的后方,在传送带前方侧部设置kinect体感传感器,在支架的顶部吊装有并联机械手,并联机械手通过固定平台固定在支架上,在kinect体感传感器的一侧设有PC端,PC端控制kinect体感传感器以及并联机械手。本发明利用低成本的kinect体感传感器进行分拣,达到人工所不能达到的长时间分拣状态,减少人力成本。并且不需要工业摄像头的支持就能够精确的识别物体,在某些危险场合还能够通过识别人体手势进行机械手操控。

Description

一种基于kinect的新型分拣***及其操作方法
技术领域
本发明涉及一种基于kinect的新型分拣***及其操作方法,利用低成本的kinect体感传感器实现自动分拣。
背景技术
目前随着生产生活的需要,物体识别抓取已经被广泛的应用于工业生产领域。工件分拣是工业产品批量生产环节重要的组成部分。传统生产线上,分拣常采用人工分拣的方法,或者采用昂贵的工业摄像头进行物体识别,实现自动分拣。前者要求极高的人力成本资源,并且不能进行长时间的作业,效率低,差错率高。而对于后者,工业摄像头成本高,维护困难,操作复杂。
发明内容
本发明所要解决的技术问题在于,提供一种基于kinect的新型分拣***及其操作方法,具有价格低廉,分拣智能化等特点,实现了长时间低成本自动分拣。
本发明是这样实现的,提供一种基于kinect的新型分拣***,包括传送带以及支架,传送带从支架下穿过,支架位于传送带的后方,在传送带前方侧部设置kinect体感传感器,在支架的顶部吊装有并联机械手,并联机械手通过固定平台固定在支架上,在kinect体感传感器的一侧设有PC端,PC端控制kinect体感传感器以及并联机械手。
进一步地,并联机械手包括单片机、步进电机组件、运动臂组件、运动平台以及机械爪,步进电机组件包括步进电机以及步进电机控制器;在固定平台的顶面上设置有单片机以及三个步进电机驱动器,在固定平台的底面上设置有三个步进电机,每个步进电机带动一运动臂组件动作,每个运动臂组件的下端同时固定在运动平台上,在运动平台的底面上设有机械爪,PC端控制单片机,单片机控制步进电机驱动器以及机械爪,步进电机驱动器控制步进电机。
进一步地,运动臂组件包括连接臂、上运动臂、下运动臂、上连接轴、下连接轴、关节球以及连接块,连接臂的一端套接在步进电机的轴上并随步进电机一同转动,其另一端与上运动臂的上端连接,上连接轴活动地套接在上运动臂的下端,关节球分别套在上连接轴以及下连接轴上,且分别位于上运动臂以及下运动臂的两侧,下运动臂的上端通过关节球与上连接轴连接,其下端通过另一关节球与下连接轴连接,连接块一端与下连接轴连接,其另一端与运动平台连接。
本发明还提供一种基于前述的一种基于kinect的新型分拣***的操作方法,包括如下步骤:(1)操作者在PC端中输入需要分拣的物体信息;(2)然后开启传送带,待分拣的物体放置在传送带上运输;(3)当待分拣的物体移动到设定位置时,被kinect体感传感器扫描到;(4)kinect体感传感器将扫描信息发送至PC端,PC端与存储的需要分拣的物体信息进行对比,若两者信息匹配则进入下一步骤;若不匹配,则此过程终止,对传送带上的下一个物体进行上一步骤;(5)PC端对机械爪进行抓取运动规划,计算出抓取轨迹;(6)PC端发送指令给单片机,单片机对三个步进电机进行协调控制,按照抓取轨迹实施物体的抓取。
与现有技术相比,本发明的一种基于kinect的新型分拣***及其操作方法,能够实现利用低成本的kinect体感传感器进行分拣,达到人工所不能达到的长时间分拣状态,减少人力成本。并且不需要工业摄像头的支持就能够精确的识别物体,在某些危险场合还能够通过识别人体手势进行机械手操控。
附图说明
图1为本发明一较佳实施例的立体示意图;
图2本发明实现抓取物体的流程示意图。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
请参照图1所示,本发明一种基于kinect的新型分拣***的较佳实施例,包括传送带1以及支架2,传送带1从支架2下穿过,支架2位于传送带1的后方。
在传送带1前方侧部约70-100厘米处设置kinect体感传感器3,给Kinect体感传感器3接上220V的家用电源。kinect体感传感器3是一种3D体感摄影机,同时它导入了即时动态捕捉、影像辨识、麦克风输入、语音辨识、社群互动等功能。在支架2的顶部吊装有并联机械手4,并联机械手4通过固定平台5固定在支架2上。
在kinect体感传感器3的一侧设有PC端5,kinect体感传感器3与PC端5通过配有电源适配器的usb串口通信线相连。PC端5控制kinect体感传感器3以及并联机械手4。Kinect体感传感器3实时采集物体的RGB数据以及通过红外传感器获得的depth数据经USB串口输送至PC端5。PC端5进行抓取运动规划,继而控制并联机械手4采取相关的动作实现分拣。
为了使Kinect体感传感器3对物体的扫描达到精确识别,通过建立一个识别物体点云的数据库,然后通过相关的扫描识别算法,达到对物体很好的识别。可是,理论效果和实际会存在一定的误差,因此使用相应的计算机辅助软件,从而达到精确的反馈再矫正的效果。特征物在本发明中为传送带1上待分拣的物体。识别传送带上物体的基础为存有特征物信息的信息库。由于特征物的点云数量庞大,带来了特征物识别匹配处理数据多,反应速度慢等弊病。因此,在此之前需要对待识别的特征物特征点进行提取。大致的建立过程如下:扫描待测标准物的点云、对点云进行特征点提取、将特征点存入数据库中。
如图2所示,当传送带1上的物体移动到特定位置时,被kinect体感传感器3扫描到,提取出其点云信息、运用相关算法进行去噪处理、同时提取其特征点、与点云库的标准物信息进行匹配(特征点评估),从而得到传送带1上物体的信息。
抓取运动规划包括如下步骤:
对于其运动行程的规划是一个高维的非线性复杂***。对于这些运动的规划,根据运动的种类建立相应的模型,然后对运动的轨迹进行规划,通过参数插值的方式假设关节的运动轨迹,再根据几何关系推出其它关节的轨迹,最后通过优化算法根据稳定性最高或者能量最少等各项优化指标来确定最优轨迹。优化轨迹时,需要进化算法进行求解优化,如遗传算法、进化规划、微粒群等算法,同时使用matlab进行仿真观察。
请再参照图1所示,并联机械手4位于固定平台5的下方。并联机械手4包括单片机6、步进电机组件、运动臂组件、运动平台8以及机械爪9。单片机6为Arduino单片机。步进电机组件包括步进电机10以及步进电机控制器11。单片机6通过杜邦线将控制信号传送至步进电机驱动器11。在固定平台5的顶面上设置有单片机6以及三个步进电机驱动器11,步进电机驱动器11通过螺栓和螺母固定在固定平台5上。在固定平台5的底面上设置有三个步进电机10,每个步进电机10带动一运动臂组件动作。每个运动臂组件的下端同时固定在运动平台8上,在运动平台8的底面上设有机械爪9。PC端5控制单片机6,单片机6控制步进电机驱动器11以及机械爪9,步进电机驱动器11控制步进电机10。单片机6对三个步进电机10进行协调控制。三个步进电机10的协调运动使得运动平台8达到所要分拣物体的精确位置,同时,单片机6控制机械爪9实施对物体的准确抓取。
运动臂组件包括连接臂12、上运动臂13、下运动臂14、上连接轴15、下连接轴16、关节球17以及连接块18。连接臂12的一端套接在步进电机10的轴上并随步进电机10一同转动,其另一端与上运动臂13的上端连接。上连接轴15活动地套接在上运动臂13的下端。关节球17分别套在上连接轴15以及下连接轴16上,且分别位于上运动臂13以及下运动臂14的两侧。下运动臂14的上端通过关节球17与上连接轴15连接,其下端通过另一关节球17与下连接轴16连接。连接块18一端与下连接轴16连接,其另一端与运动平台9连接。
本发明还提供一种基于前述的一种基于kinect的新型分拣***的操作方法,包括如下步骤:(1)操作者在PC端中输入需要分拣的物体信息;(2)然后开启传送带,待分拣的物体放置在传送带上运输;(3)当待分拣的物体移动到设定位置时,被kinect体感传感器扫描到;(4)kinect体感传感器将扫描信息发送至PC端,PC端与存储的需要分拣的物体信息进行对比,若两者信息匹配则进入下一步骤,若不匹配,则此过程终止,对传送带上的下一个物体进行上一步骤;(5)PC端对机械爪进行抓取运动规划,计算出抓取轨迹;(6)PC端发送指令给单片机,单片机对三个步进电机进行协调控制,按照抓取轨迹实施物体的抓取。
综上所述,本发明使用了kinect体感传感器实时采集物体的RGB数据及深度信息,传送至PC端进行处理,继而控制并联机械手采取相关的动作实现分拣。此***相比传统的分拣***具有识别率高,自动化程度高,价格低廉等优点,并且此***对分拣物品的适应范围广,必要时可以采取利用手势控制机械手进行抓取的操作。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (4)

1.一种基于kinect的新型分拣***,包括传送带以及支架,所述传送带从支架下穿过,其特征在于,所述支架位于传送带的后方,在所述传送带前方侧部设置kinect体感传感器,在所述支架的顶部吊装有并联机械手,所述并联机械手通过固定平台固定在支架上,在所述kinect体感传感器的一侧设有PC端,所述PC端控制kinect体感传感器以及并联机械手。
2.如权利要求1所述的一种基于kinect的新型分拣***,其特征在于,所述并联机械手包括单片机、步进电机组件、运动臂组件、运动平台以及机械爪,所述步进电机组件包括步进电机以及步进电机控制器;在所述固定平台的顶面上设置有单片机以及三个步进电机驱动器,在所述固定平台的底面上设置有三个步进电机,每个所述步进电机带动一运动臂组件动作,每个所述运动臂组件的下端同时固定在运动平台上,在所述运动平台的底面上设有机械爪,所述PC端控制单片机,所述单片机控制步进电机驱动器以及机械爪,所述步进电机驱动器控制步进电机。
3.如权利要求1所述的一种基于kinect的新型分拣***,其特征在于,所述运动臂组件包括连接臂、上运动臂、下运动臂、上连接轴、下连接轴、关节球以及连接块,所述连接臂的一端套接在步进电机的轴上并随步进电机一同转动,其另一端与上运动臂的上端连接,所述上连接轴活动地套接在上运动臂的下端,所述关节球分别套在上连接轴以及下连接轴上,且分别位于上运动臂以及下运动臂的两侧,所述下运动臂的上端通过关节球与上连接轴连接,其下端通过另一关节球与下连接轴连接,所述连接块一端与下连接轴连接,其另一端与运动平台连接。
4.基于如权利要求1所述的一种基于kinect的新型分拣***的操作方法,其特征在于,包括如下步骤:(1)操作者在PC端中输入需要分拣的物体信息;(2)然后开启传送带,待分拣的物体放置在传送带上运输;(3)当待分拣的物体移动到设定位置时,被kinect体感传感器扫描到;(4)kinect体感传感器将扫描信息发送至PC端,PC端与存储的需要分拣的物体信息进行对比,若两者信息匹配则进入下一步骤;若不匹配,则此过程终止,对传送带上的下一个物体进行上一步骤;(5)PC端对机械爪进行抓取运动规划,计算出抓取轨迹;(6)PC端发送指令给单片机,单片机对三个步进电机进行协调控制,按照抓取轨迹实施物体的抓取。
CN201510120106.XA 2015-03-19 2015-03-19 一种基于kinect的新型分拣***及其操作方法 Pending CN104772286A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510120106.XA CN104772286A (zh) 2015-03-19 2015-03-19 一种基于kinect的新型分拣***及其操作方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510120106.XA CN104772286A (zh) 2015-03-19 2015-03-19 一种基于kinect的新型分拣***及其操作方法

Publications (1)

Publication Number Publication Date
CN104772286A true CN104772286A (zh) 2015-07-15

Family

ID=53614230

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510120106.XA Pending CN104772286A (zh) 2015-03-19 2015-03-19 一种基于kinect的新型分拣***及其操作方法

Country Status (1)

Country Link
CN (1) CN104772286A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105184813A (zh) * 2015-07-22 2015-12-23 广西大学 一种运动物体二维轨迹追踪机构
CN105291084A (zh) * 2015-11-03 2016-02-03 三峡大学 基于LeapMotion的体感并联机械手及其操作方法和控制***
CN106269548A (zh) * 2016-09-27 2017-01-04 深圳市创科智能技术有限公司 一种物体自动分拣方法及其装置
CN111054658A (zh) * 2019-11-15 2020-04-24 西安和光明宸科技有限公司 一种色彩分拣***及分拣方法
CN111054650A (zh) * 2019-11-15 2020-04-24 西安和光明宸科技有限公司 一种尺码分拣***及分拣方法
CN111069080A (zh) * 2019-11-15 2020-04-28 西安和光明宸科技有限公司 一种形状分拣***及分拣方法
CN111377213A (zh) * 2020-03-20 2020-07-07 上海电子信息职业技术学院 一种机器人动态分拣装置及方法
CN112916434A (zh) * 2021-01-22 2021-06-08 江门职业技术学院 一种大范围多角度调整摆放方式的分拣并联机器人***
CN114310919A (zh) * 2022-03-14 2022-04-12 中北大学南通智能光机电研究院 一种基于协作机器人与模组的智能抓取控制***及方法
CN115488876A (zh) * 2022-06-22 2022-12-20 湖北商贸学院 一种基于机器视觉的机器人分拣方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130184853A1 (en) * 2012-01-17 2013-07-18 Mineral Separation Technologies, Inc. Multi-Franctional Coal Sorter and Method of Use Thereof
CN103287777A (zh) * 2012-02-24 2013-09-11 株式会社大福 误操作防止装置以及设有误操作防止装置的分拣设备
US20140332344A1 (en) * 2013-04-12 2014-11-13 Axium Inc. Singulator
CN104191427A (zh) * 2014-08-22 2014-12-10 深圳大宇精雕科技有限公司 并联机械手
CN204724476U (zh) * 2015-03-19 2015-10-28 浙江工业大学 一种基于kinect的新型分拣***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130184853A1 (en) * 2012-01-17 2013-07-18 Mineral Separation Technologies, Inc. Multi-Franctional Coal Sorter and Method of Use Thereof
CN103287777A (zh) * 2012-02-24 2013-09-11 株式会社大福 误操作防止装置以及设有误操作防止装置的分拣设备
US20140332344A1 (en) * 2013-04-12 2014-11-13 Axium Inc. Singulator
CN104191427A (zh) * 2014-08-22 2014-12-10 深圳大宇精雕科技有限公司 并联机械手
CN204724476U (zh) * 2015-03-19 2015-10-28 浙江工业大学 一种基于kinect的新型分拣***

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105184813A (zh) * 2015-07-22 2015-12-23 广西大学 一种运动物体二维轨迹追踪机构
CN105184813B (zh) * 2015-07-22 2018-06-22 广西大学 一种运动物体二维轨迹追踪机构
CN105291084A (zh) * 2015-11-03 2016-02-03 三峡大学 基于LeapMotion的体感并联机械手及其操作方法和控制***
CN106269548A (zh) * 2016-09-27 2017-01-04 深圳市创科智能技术有限公司 一种物体自动分拣方法及其装置
CN111054658A (zh) * 2019-11-15 2020-04-24 西安和光明宸科技有限公司 一种色彩分拣***及分拣方法
CN111054650A (zh) * 2019-11-15 2020-04-24 西安和光明宸科技有限公司 一种尺码分拣***及分拣方法
CN111069080A (zh) * 2019-11-15 2020-04-28 西安和光明宸科技有限公司 一种形状分拣***及分拣方法
CN111377213A (zh) * 2020-03-20 2020-07-07 上海电子信息职业技术学院 一种机器人动态分拣装置及方法
CN112916434A (zh) * 2021-01-22 2021-06-08 江门职业技术学院 一种大范围多角度调整摆放方式的分拣并联机器人***
CN112916434B (zh) * 2021-01-22 2022-09-09 江门职业技术学院 一种大范围多角度调整摆放方式的分拣并联机器人***
CN114310919A (zh) * 2022-03-14 2022-04-12 中北大学南通智能光机电研究院 一种基于协作机器人与模组的智能抓取控制***及方法
CN115488876A (zh) * 2022-06-22 2022-12-20 湖北商贸学院 一种基于机器视觉的机器人分拣方法和装置

Similar Documents

Publication Publication Date Title
CN104772286A (zh) 一种基于kinect的新型分拣***及其操作方法
CN106041937B (zh) 一种基于双目立体视觉的机械手抓取控制***的控制方法
CN111496770B (zh) 基于3d视觉与深度学习的智能搬运机械臂***及使用方法
CN204724476U (zh) 一种基于kinect的新型分拣***
US10899001B2 (en) Method for teaching an industrial robot to pick parts
CN104690551B (zh) 一种机器人自动化装配***
CN110580725A (zh) 一种基于rgb-d相机的箱体分拣方法及***
CN103963058B (zh) 基于多方位视觉定位的机械手臂抓取控制***及方法
CN206854123U (zh) 基于图像处理的快件条码自动识别***
DE102020101767B4 (de) Steuerverfahren und steuerung für ein robotersystem
CN106269548A (zh) 一种物体自动分拣方法及其装置
CN110963298A (zh) 基于视觉跟随的取料装置及方法
CN111347411A (zh) 基于深度学习的双臂协作机器人三维视觉识别抓取方法
CN206510040U (zh) 基于视觉与阻抗控制的手机电池自动化装配***
CN113954072B (zh) 一种视觉引导的木门工件智能识别定位***及方法
CN208092786U (zh) 一种以深度卷积神经网络为基础的零件分拣***
CN114193440B (zh) 基于3d视觉的机器人自动抓取***及方法
CN110125036A (zh) 一种基于模板匹配的自识别分拣***和方法
CN117841041B (zh) 基于多臂协同的机械臂组合装置
CN114029951A (zh) 基于深度相机的机器人自主识别智能抓取方法
Pan et al. Manipulator package sorting and placing system based on computer vision
CN112633187B (zh) 基于图像分析的机器人自动搬运方法、***和存储介质
CN108067440A (zh) 一种眼药水瓶分拣和装箱***及方法
CN204036474U (zh) 工业机器人分拣***
CN206645534U (zh) 一种基于双相机的机器人无序抓取装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20150715

RJ01 Rejection of invention patent application after publication