CN104463265A - 物料处理***和方法 - Google Patents

物料处理***和方法 Download PDF

Info

Publication number
CN104463265A
CN104463265A CN201410605229.8A CN201410605229A CN104463265A CN 104463265 A CN104463265 A CN 104463265A CN 201410605229 A CN201410605229 A CN 201410605229A CN 104463265 A CN104463265 A CN 104463265A
Authority
CN
China
Prior art keywords
article
material handling
handling system
image
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410605229.8A
Other languages
English (en)
Other versions
CN104463265B (zh
Inventor
J·董
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JSC-ECHIGO Pte Ltd
Original Assignee
JSC-ECHIGO Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JSC-ECHIGO Pte Ltd filed Critical JSC-ECHIGO Pte Ltd
Publication of CN104463265A publication Critical patent/CN104463265A/zh
Application granted granted Critical
Publication of CN104463265B publication Critical patent/CN104463265B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B07—SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07C—POSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00—Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/34—Sorting according to other particular properties
    • B07C5/342—Sorting according to other particular properties according to optical properties, e.g. colour
    • B07C5/3422—Sorting according to other particular properties according to optical properties, e.g. colour using video scanning devices, e.g. TV-cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B07—SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07C—POSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00—Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J15/00—Gripping heads and other end effectors
    • B25J15/06—Gripping heads and other end effectors with vacuum or magnetic holding means
    • B25J15/0616—Gripping heads and other end effectors with vacuum or magnetic holding means with vacuum
    • B25J15/065—Gripping heads and other end effectors with vacuum or magnetic holding means with vacuum provided with separating means for releasing the gripped object after suction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G43/00—Control devices, e.g. for safety, warning or fault-correcting
    • B65G43/08—Control devices operated by article or material being fed, conveyed or discharged
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00—Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/74—Feeding, transfer, or discharging devices of particular kinds or types
    • B65G47/90—Devices for picking-up and depositing articles or materials
    • B65G47/91—Devices for picking-up and depositing articles or materials incorporating pneumatic, e.g. suction, grippers
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/40—Robotics, robotics mapping to robotics vision
    • G05B2219/40036—Transport plates or sheets between two locations without motion inversion
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/45—Nc applications
    • G05B2219/45047—Sorting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20224—Image subtraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Robotics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Architecture (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Manipulator (AREA)
  • Sorting Of Articles (AREA)
  • Warehouses Or Storage Devices (AREA)

Abstract

本发明公开了一种物料处理***和方法。一种物料处理***，包括平台，其用于接收多个物品；多个分类箱，每个箱对应于一个物品类型；对象识别***，其用于识别平台上的物品以及通过特定的物品类型对物品进行分类；所述3D对象识别***包括3D检测器和数据库，所述检测器用于检测所述物品，所述数据库包括关于物品类型特征的数据；物品接合组件，其用于接合和输送所述物品到所述对应的分类箱；其中对象识别***设置为根据所述数据库中的数据识别物品，并且指示物品接合组件接合和放置物品到所述分类箱中。

Description

物料处理***和方法
技术领域
本发明涉及物品和物料的输送，包括识别和正确分类物品。
背景技术
输送用于洗涤并随后分类的物品的工业规模输送机，根据输送机上每秒所需的物品数量，需要保持经济速率。为了手动地管理这些需要与所需分类物品的速率成比例的足够数量的操作者。
一种管理物品速率的方法是当物品机械式或通过机械分类装置到达特定区域而自动地分类物品。
然而，如果物品与物品种类的数量的不同而逐渐增加分类过程的复杂性，则这不是有效的。
一个这样的应用是用于工业洗碗机，因此物品可以是正常的餐用器皿(例如，盘子，杯子，酱料和碗等)以及餐具(例如叉子，刀，勺，筷子等)。另一复杂性包括从不同的位置获取所述物品。进一步以类似的方式使用所述洗碗机，来自一个出处的碗可能与来自另一个出处的碗完全不同，而事实上每个出处可以具有几种不同类型的碗。因此，根据形状的机械分类是不可行的，所以根据现有技术的用于自动分类的时机和以经济速率操作输送机是不可用的。
发明内容
在一个方面，本发明提供了一种物料处理***，包括：平台，所述平台用于接收多个物品；多个分类箱，每个箱对应于一个物品类型；对象识别***，所述对象识别***用于识别平台上的物品以及通过特定的物品类型对物品进行归类；所述3D对象识别***包括3D检测器和数据库，所述3D检测器用于检测所述物品，所述数据库包括关于物品类型特征的数据；物品接合组件，所述物品接合组件用于接合和输送所述物品到所述对应的分类箱；其中对象识别***设置为根据所述数据库中的数据识别物品，并且指示物品接合组件接合并放置物品到所述分类箱中。
在第二方面，本发明提供了一种用于识别和分类物品的方法，所述方法包括以下步骤：通过3D检测器检测物品的存在；比较所检测的物品和数据库中所包含的数据；根据3D图像定位物品的位置和方向，并且将这样的信息转换为机器人坐标系；基于所述比较将所述物品归类为特定的物品类型。
因此，通过使用通过类别识别物品的与数据库进行通信的对象识别***，本发明提供机器人，并因此提供自动分类***。
在一个实施方案中，平台可以是台架，托盘或板条箱。可替代地，平台可以位于输送机上，例如输送机的表面或由所述输送机移动的台架。这种结构可以提供以下优点，即以经济速率操作输送机而可能超过多个操作员手动地分类。
对于平台是托盘或板条箱的情况，所述平台可以是所述托盘或板条箱的可移动阵列中递送的一组架子的一部分，引导所述***处理来自所述托盘或板条箱的物品。
出于简化说明的目的，将使用参考作为输送机的一部分的平台，应该理解的是平台不仅限于输送机，而且还可以涉及作为托盘，板条箱或台架的平台。
数据库可以通过图像列出物品，所述图像具有由界限范围确定的每个物品，其可以包括归类(例如碗)，出处(特定的餐厅)和/或类型(例如汤碗)。数据库还可以包括根据标准范围的其他界限，其可以是制造商品牌或仅是外形尺寸。
数据库可以包括物品信息，所述物品信息可以包括至少一个物品的图像。优选地，可以有从不同角度获取的几个物品的图像，以便于对象识别***不管输送机上的方向而正确地识别物品。
为此，对象识别***可以包括摄像头，其可以是提供关于物品深度信息的3D摄像头。作为替代，或结合摄像头衍生***，所述对象识别***可以包括电子或数字标签***，例如设置在每个物品上的RFID标签，条形码或QR码***。因此，根据本发明的***可以具有ID识别***，例如邻近输送机的条形码阅读器，RFID阅读器等，以识别目标物品上的ID信息。当结合摄像头使用时，所述两个***可以用于确认身份和/或用作冗余***。结合两个***使用还可以起到减少误差范围的作用，其可以允许操作者在较宽的置信范围内增加输送机的速度。
附图说明
参考附图将便于进一步描述本发明，所述附图示出本发明的可能布置。本发明的其他布置也是可行的，因此附图的特殊性不应理解为替代本发明前述描述的一般性。
图1是根据本发明的一个实施方案的具有输送机的***的示意图；
图2A是由输送机***采集的摄影图像；
图2B是由根据本发明另一实施方案的输送机***采集的原始深度图像(raw depth image)；
图3是根据本发明的一个实施方案的分类***的等距视图；
图4是根据本发明的一个实施方案的分类***的端部执行器的正视图；
图5是根据本发明的一个实施方案的对象识别***逻辑的流程图；
图6A至图6C是来自用于逐行识别物品的对象识别***的图像；
图7是根据本发明另一实施方案的端部执行器组件的等距视图。
具体实施方式
为了简化接下来的示例，参考一种输送机，其在这种情况下将是输送机。应当理解的是，平台不仅限于输送机，而且还可以涉及作为托盘，板条箱或台架的平台，其结合输送机或独立于输送机而使用。
图1示出了物料处理***，其在这种情况下是输送机***5。一般情况下，在其上接收物品的平台可以是输送机15的表面，输送机上的台架或放置在输送机上的板条箱/托盘。
物品10装载到输送机15上。对于这个特定的实施方案，输送机***5设置为具有工业洗碗机，因此包括物品10通过的清洗工位20和干燥工位25。本发明的核心是对象识别***32，其包括检测器30，在这种情况下用于针对物品45的3D摄像头。所述摄像头30连接到控制***和数据库34，其比较物品45和图像数据库以便识别物品的类型。
控制***34然后接合端部执行器(end-effector)35，其在这种情况下与线性滑轨40接合。可以理解的是，利用图3所示的用于端部执行器的驱动***的另一个实施方案，可以改变端部执行器35的移动。
端部执行器接合物品45并且移动50，于是利用对应于由控制***34确定的物品类型的分类箱，将物品45放置在一系列分类箱55中的一个中。
分类箱可以是设置在滑动基座上的篮状容器，其具有覆盖周围的防护栏。所述防护栏可以由***数字I/O输出控制的电磁锁锁定。此外，每个分类箱可以安装有手动按钮以及接近传感器以检测所放置物品的装载量。按下按钮或所述接近传感器感测分类箱已满，机器人将不再放置额外的物品到这个箱中，同时安全锁将被释放从而操作者可以从防护栏中将满载的分类箱拉出。在更换了空的分类箱之后，安全锁再次锁定，机器人臂将再次开始将物品放置到这个分类箱中。这种设计保护操作者和机器人臂，从而操作者可以安全地从***中取下满载分类箱。
在另一个实施方案中，对象识别***可以是可视化的，因此检测器是摄像头，例如3D摄像头。图2A和图2B示出了用于对象识别***的3D摄像头采集的图像。具体地，这里示出了板条箱60，其中物品放置在输送机上。在板条箱中的是杯子65，一种类型的碗70以及另一种类型的碗75。根据这个实施方案的控制***采用由3D摄像头拍摄的图像，并且进行深度分析。
由所述输送***处理的物品将具有如图2A所示的拍摄图像以及如图2B所示的深度图像，而传统的视觉识别通过模版匹配来实现。这不适合于本发明。由于对象是不平坦的并且可能在任何方向上落在输送机上，因此使用二维摄像头的模版匹配方法是不可靠的。此外，为了使控制***接合端部执行器，需要一些关于物品高度的信息。二维摄像头不能提供给这些。因此，在这个实施方案中根据本发明的对象识别***使用用于物品的“背景差分(background subtraction)”过程以便检测到物品。
图3示出了根据本发明一个实施方案的***的另一种布置。这里拾取和放置***90包括驱动***95，其操作端部执行器100以从输送机88上取下物品，并且将它们放入两个单独的箱105，110中。因此，驱动端部执行器的装置可以根据设计参数而改变，并且依然落入本发明的范围内。
图3中的拾取和放置***示出了铰接式的机器人臂95，所述机器人臂95是可旋转的以便从输送机88接合物品，将物品提升到特定的位置并且旋转到适当的箱105，110。
图4示出了端部执行器115的一个示例，在这种情况下，通过吸盘120进行操作。根据这个实施方案的端部执行器设计为拾取和放置多种物品，包括碗和盘。由于物品在尺寸，形状和材料(例如塑料，玻璃或陶瓷)方面是非常不同的，接合这些物品的装置必须能够适应较大范围的变化。由于所有这些物品将混合在输送机上，端部执行器必须能够实现该结果而不必改变端部执行器的性质，因此将需要加以选择以便尽可能地灵活。在这个实施方案中，在工业洗碗机应用方面，吸盘120设计是特别有用的。
当使用三维摄像头时，移动的输送机带进行物品拾起位置精度的估计非常困难。因此，同时根据选择物品上的最适合的接合点以及当物品比较小时管理端部执行器的定位，端部执行器所需的容限可能比较大。为此，对于特定应用的设计者可以使用夹紧装置，例如可以模仿操作者手的铰接夹。或者，图4中所示的吸盘也可以是适当的。
吸盘具有一定程度的优势，因为其无论对象的尺寸都可以从物品的中心拾起物品，而夹具必须包围物品以便与其充分接合。其次，对象上的拾起点与材料相关。一旦其接合以提升，其将达到自然位置。
吸盘120可以具有多个层130，135。这提供较大的与对象平面的操作角度容限。此外，端部执行器115可以提供弹簧以便提供受限于所接合物品类型的垂直方向的容限(例如2cm)。如果控制***算错定位位置，这个容限133还提供保护以防止端部执行器115以可以压碎物品的方式端部接触物品。因此，容限将是控制***检测物品的误差范围的函数。
图5示出了用于物品识别的流程图。利用3D摄像头所述过程开始140。当3D摄像头检测145在输送机带上移动的一些物品时，其将识别物品的位置150和物品类型165。然后所述信息传送到软件以规划工业机器人170的动作。工业机器人从期望位置拾起175物品，并且将所述物品放置到对应的分类箱中。在此之后，工业机器人返回到其空闲位置并且等待下一个物品。
传统的拾取和放置机器人仅可以从已知和固定的位置拾取和放置物品，遵循预编程的连续路径以完成任务。对于这些应用，挑战通常是端部执行器设计和工作空间布置。
然而，对于本发明，考虑到给出的物品的多样性和输送机的速度，这种重复机器人不能完成所需的任务。盘子和碗在输送机带上的位置几乎是随机并且不能预测的。为了从移动输送机带上拾起盘子和碗，机器人***需要检测和识别在输送机带上的每个物品。
开发感知***存在几个挑战，并且良好的感知***是智能机器人物料处理***的主要功能。盘子和碗具有各种各样的类型，每种类型都具有不同的尺寸和形状。需要拾起盘子和碗并且将相同类型的盘子和碗精细地堆积。换句话说，机器人需要执行分类操作。如果不知道物品的类型，机器人不能确定放下物品的位置。因此，感知***需要执行三个功能：检测，识别和定位。
常规的视觉引导机器人使用安装在输送机带上方的2D摄像头，并且检测不是输送机一部分的任何事物。这种方法基于以下假设：输送机带的颜色是已知的，并且对象的颜色与输送机明显不同。然而，对于这个方案，盘子和碗的颜色是未知的。每个出处可以具有他们偏好的颜色，并且以任何图案设计他们的盘子和碗。此外，可能存在落在输送机带上的灰尘或垃圾以“改变”其颜色。这也可能干扰检测***。因此，依靠2D视觉检测对象可能是不可靠的。
用于识别物品的对象识别***可以是标准商业上可用的机器视觉***中的任意一个，所述机器视觉***使用自动图像分析以识别对象。物品的特征形状对于所使用的机器视觉***可以是足够的。用于对象识别***的检测器可以包括摄像头，其可以是三维摄像头以便通过深度感知而识别对象。当设计落入本发明范围内的***时，所使用摄像头的类别以及所采用的对象识别***，可以由设计者酌情处理。
在这点上，可以使用两种方法，模式识别和基于特征的几何识别。在前一种情况下，所存储的对象图像可以识别为代表更复杂的图案的模式。对于基于特征的几何识别，对象可以通过对象的图像的范围识别，所述对象的图像从不同的角度拍摄，从而利用每个不同的视图进行比较。考虑到物品的视图可以来自各种各样的方向，数据库将很可能需要大量的图像以便足够允许这种变化。图像的实际数量将是本发明的每个独立应用的设计问题。例如，使用板条箱来保持物品，其还可以包括搁物架，所述搁物架可以限制物品的可变位置，其还可以限制数据库所需图像的数量。
图6A至图6C示出了根据本发明另一个实施方案的过程结果。图6A示出物品185的图像，在这种情况下是在复杂环境中的杯子。使用深度感知摄像头，可以修改图像以便限定“背景”195和物品190。然后通过从图像中去除背景205，剩下的物品200可以容易地被识别为用于端部执行器的接合。
图7说明了使用的多吸盘端部执行器组件210。端部执行器组件210具有臂215，所述臂215安装有两个分支220，225。每个分支220，225具有两个安装到其上的吸盘230，235，240。每个分支220，225可以采集一个单独的物品。例如，对于较大盘子245，端部执行器230，235已经接合所述盘子，其提供稳定和冗余的接合以确保物品在放置到分类箱中之前得到牢固地保持。具有两个分支的端部执行器组件210，还允许第二分支225接合第二物品(在这种情况下较小盘子250)，而无需干扰第一分支220。
因此，可能的接合顺序能够包括：
1.拾取物品A
2.拾取物品B
3.移动到分类箱区域
4.放置物品A到分类箱A
5.放置物品B到分类箱B
6.移动返回输送机区域
双分支端部执行器组件的优点还包括减少移动每个物品的拾取和放置动作的周期。拾取区域可以相对远离分类箱区域。因为周期可以是机器人臂的移动距离的函数并且输送机上的物品彼此之间非常近，对于机器人臂更易于短距离移动而不是长距离移动。双分支端部执行器组件仅需要两个短距离移动以及两个长距离移动以放置两个物品，同时其需要四个长距离移动以一个接一个地放置两个物品。因此，一次移动多个物品比一个接一个地移动多个物品更有效。
可以理解的是，为了实现进一步的益处，端部执行器组件可以包括多于两个的分支。为此，所述组件可以包括三个或四个分支，这取决于物品的尺寸。然后，作为非穷举列表，分支的最优数量可以是以下任何一个或其组合的函数：
·物品尺寸；
·输送机到分类箱的距离；
·输送机的速度；
·输送机上物品的密度。

Claims (18)

1.一种物料处理***，包括
平台，所述平台用于接收多个物品；
多个分类箱，每个箱对应于一个物品类型；
对象识别***，所述对象识别***用于识别平台上的物品以及通过特定的物品类型对所述物品进行归类；
所述3D对象识别***包括3D检测器和数据库，所述3D检测器用于检测所述物品，所述数据库包括关于物品类型特征的数据；
物品接合组件，所述物品接合组件用于接合和输送所述物品到所述对应的分类箱；
其中所述对象识别***设置为根据所述数据库中的数据识别物品，并且指示所述物品接合组件接合并放置物品到所述分类箱中。
2.根据权利要求1所述的物料处理***，其中所述3D检测器是3D摄像头并且所述数据库包含的数据包括图像数据，所述对象识别***设置为采集所述物品的图像并且比较所采集的图像和来自所述数据库的图像。
3.根据权利要求1或2所述的物料处理***，其中所述物品接合组件包括用于接合物品的端部执行器，所述端部执行器安装到机器人臂，所述机器人臂设置为从平台到所述分类箱移动所述端部执行器。
4.根据权利要求1至3中任意一项所述的物料处理***，其中每个分类箱包括设置在滑动基座上的容器并且置于防护栏中。
5.根据权利要求4所述的物料处理***，其中所述防护栏设置为由***数字I/O输出控制的电磁锁锁定。
6.根据权利要求4或5所述的物料处理***，其中每个分类箱安装有手动按钮以及接近传感器以检测所放置物品的装载量。
7.根据权利要求6所述的物料处理***，其中***设置为使得当激活按钮或接近传感器发出关于分类箱已满的信号时，不再放置额外的物品到各自箱中。
8.根据权利要求3至7中任意一项所述的物料处理***，其中所述端部执行器包括用于接合所述物品的吸盘。
9.根据权利要求3至7中任意一项所述的物料处理***，其中所述机器人臂包括多个分支，每个分支都具有至少一个安装到其上的端部执行器。
10.根据权利要求1至9中任意一项所述的物料处理***，其中所述物料处理***是输送机***，具有所述输送机***的输送机的平台部分。
11.根据权利要求10所述的物料处理***，其中所述平台通过输送机递送到指定位置以处理所述物品。
12.一种用于识别和分类物品的方法，所述方法包括以下步骤：
通过3D检测器检测物品的存在；
比较所检测的物品和数据库中所包含的数据；
根据3D图像定位物品的位置和方向，并且将这样的信息转换为机器人坐标系；
基于所述比较将所述物品归类为特定的物品类型。
13.根据权利要求12所述的用于识别和分类物品的方法，其中所述检测步骤包括以下步骤：
采集所述物品的3D图像，以及；
比较所述物品与在所述数据中包含的图像。
14.根据权利要求13所述的用于识别和分类物品的方法，其中所述数据库是使用有限不同类型的样本物品而预先建立的；
数据库中的每个类型对应于以下任意一个或其组合：特定类型物品的形状，尺寸以及3D点云。
15.根据权利要求13或14所述的用于识别和分类物品的方法，在比较步骤之前还包括从所采集的图像数字去除背景的步骤。
16.根据权利要求15所述的用于识别和分类物品的方法，其中所述背景包括摄像头检测到的除了物品之外的任何事物，从而所述物品能够从图像中被提取和定位，以提供所述物品的位置信息；
所述位置信息包括通过匹配所述数据库，每个物品的3D位置和每个物品的3D方向而识别的每个物品的类型。
17.根据权利要求13至16中任意一项所述的用于识别和分类物品的方法，在归类步骤之后还包括以下步骤：
基于所述位置信息接合所述物品，以及；
将所述物品递送到对应于所归类的物品的类型的分类箱。
18.根据权利要求15或17所述的用于识别和分类物品的方法，其中所述去除步骤包括：
利用三维摄像头采集图像以便检测所述图像中的深度；
在所述采集的图像中从背景区分所述物品，以及；
数字去除背景以便只留下所述物品图像。
CN201410605229.8A 2013-09-13 2014-09-15 物料处理***和方法 Active CN104463265B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
SG2013069893 2013-09-13
SG2013069893A SG2013069893A (en) 2013-09-13 2013-09-13 Material handling system and method

Publications (2)

Publication Number Publication Date
CN104463265A true CN104463265A (zh) 2015-03-25
CN104463265B CN104463265B (zh) 2020-10-09

Family

ID=55167997

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410605229.8A Active CN104463265B (zh) 2013-09-13 2014-09-15 物料处理***和方法

Country Status (4)

Country Link
US (1) US10417521B2 (zh)
CN (1) CN104463265B (zh)
MY (1) MY182743A (zh)
SG (1) SG2013069893A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107152910A (zh) * 2017-05-19 2017-09-12 成都福莫斯智能***集成服务有限公司 一种瓷壳尺寸自动检测***
CN107192357A (zh) * 2017-05-19 2017-09-22 成都福莫斯智能***集成服务有限公司 一种利用机器人进行瓷壳尺寸自动检测方法
CN108198168A (zh) * 2017-12-26 2018-06-22 合肥泰禾光电科技股份有限公司 物料分析方法及装置
CN108778636A (zh) * 2016-02-08 2018-11-09 伯克希尔格雷股份有限公司 用于提供使用运动规划的各种物体的处理的***和方法
CN110382173A (zh) * 2017-03-10 2019-10-25 Abb瑞士股份有限公司 用于标识物体的方法和设备
CN110695964A (zh) * 2019-09-27 2020-01-17 广州嘉欣电工科技有限公司 一种轮毂车标装配方法、***、装置及存储介质
CN112668365A (zh) * 2019-10-15 2021-04-16 顺丰科技有限公司 一种物料入库识别方法、装置、设备及存储介质

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942515B (zh) * 2014-04-21 2017-05-03 北京智谷睿拓技术服务有限公司 关联方法和关联设备
CN105083977B (zh) * 2014-05-14 2018-04-10 泰科电子(上海)有限公司 自动配料设备
CN105057219B (zh) * 2015-07-22 2018-11-27 杭州亚美利嘉科技有限公司 包裹分捡***及方法
ES2948058T3 (es) 2015-08-26 2023-08-30 Berkshire Grey Operating Company Inc Sistemas y métodos para proporcionar conjuntos de válvula de vacío para efectores finales
ES2948462T3 (es) 2015-08-26 2023-09-12 Berkshire Grey Operating Company Inc Sistemas y métodos para proporcionar detección de contacto en un brazo articulado
US11370128B2 (en) 2015-09-01 2022-06-28 Berkshire Grey Operating Company, Inc. Systems and methods for providing dynamic robotic control systems
CA2997280C (en) 2015-09-01 2022-12-13 Berkshire Grey, Inc. Systems and methods for providing dynamic robotic control systems
ES2960751T3 (es) 2015-09-08 2024-03-06 Berkshire Grey Operating Company Inc Sistemas y métodos para proporcionar presión de vacío dinámico en un efector final de brazo articulado
EP3347175B1 (en) 2015-09-09 2022-03-02 Berkshire Grey, Inc. Systems and methods for providing dynamic communicative lighting in a robotic environment
US10007827B2 (en) * 2015-09-11 2018-06-26 Berkshire Grey, Inc. Systems and methods for identifying and processing a variety of objects
CN108349083B (zh) 2015-11-13 2021-09-21 伯克希尔格雷股份有限公司 用于提供各种物体的分拣的分拣***和方法
US10730078B2 (en) 2015-12-04 2020-08-04 Berkshire Grey, Inc. Systems and methods for dynamic sortation of objects
EP3789837B1 (en) * 2015-12-04 2023-06-21 Berkshire Grey Operating Company, Inc. Systems and methods for dynamic processing of objects
US9707595B2 (en) * 2015-12-16 2017-07-18 Waste Repurposing International, Inc. Household hazardous waste recovery
US10449572B2 (en) 2015-12-16 2019-10-22 Waste Repurposing International, Inc. Household hazardous waste recovery
US9937532B2 (en) * 2015-12-18 2018-04-10 Berkshire Grey Inc. Perception systems and methods for identifying and processing a variety of objects
FI127100B (en) * 2016-08-04 2017-11-15 Zenrobotics Oy A method and apparatus for separating at least one piece from a plurality of pieces
US10023336B2 (en) 2016-08-09 2018-07-17 DG National MFG Inc. Produce pack arrangement apparatus
DE102016120132A1 (de) * 2016-10-21 2018-04-26 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Werkstücksammelstelleneinheit und Verfahren zur Unterstützung der Bearbeitung von Werkstücken
DE102016120131B4 (de) 2016-10-21 2020-08-06 Trumpf Werkzeugmaschinen Gmbh + Co. Kg Absortierunterstützungsverfahren und Flachbettwerkzeugmaschine
ES2941985T3 (es) 2016-11-08 2023-05-29 Berkshire Grey Operating Company Inc Sistemas y métodos para procesar objetos
EP3544911B1 (en) 2016-11-28 2023-10-18 Berkshire Grey Operating Company, Inc. System for providing singulation of objects for processing
CA3045522C (en) 2016-12-06 2023-10-03 Berkshire Grey, Inc. Systems and methods for providing for the processing of objects in vehicles
FR3060782B1 (fr) * 2016-12-21 2019-10-04 Profils Systemes Procede et dispositif de fabrication de profiles
AT519452B1 (de) * 2017-01-18 2018-07-15 Tgw Logistics Group Gmbh Verfahren und Vorrichtung zum Kommissionieren von Waren
CA3055538C (en) 2017-03-06 2024-06-18 Berkshire Grey, Inc. Systems and methods for efficiently moving a variety of objects
CA3056892C (en) 2017-03-20 2023-01-03 Berkshire Grey, Inc. Systems and methods for processing objects including mobile matrix carrier systems
CA3056922C (en) * 2017-03-22 2023-06-13 Berkshire Grey, Inc. Systems and methods for processing objects, including automated radial processing stations
CN110662707B (zh) * 2017-03-23 2021-12-14 伯克希尔格雷股份有限公司 用于处理包括自动移动矩阵箱的物体的***和方法
EP3601112A1 (en) * 2017-03-23 2020-02-05 Berkshire Grey, Inc. Systems and methods for processing objects, including automated linear processing stations
ES2973481T3 (es) * 2017-03-23 2024-06-20 Berkshire Grey Operating Company Inc Sistema y método para procesar objetos, incluyendo portadores matriciales móviles automatizados
CN110770149B (zh) 2017-04-24 2022-04-05 伯克希尔格雷营业股份有限公司 使用物体移动重新分配来提供物体的分离以供处理的***和方法
CN107160397B (zh) 2017-06-09 2023-07-18 浙江立镖机器人有限公司 机器人行走的模块地标、地标及其机器人
ES2973662T3 (es) 2017-08-02 2024-06-21 Berkshire Grey Operating Company Inc Sistemas y procedimientos de adquisición y desplazamiento de objetos con superficies exteriores complejas
US11084660B2 (en) 2017-10-27 2021-08-10 Berkshire Grey, Inc. Bin infeed and removal systems and methods for processing objects including mobile matrix carrier systems
WO2019094382A2 (en) 2017-11-07 2019-05-16 Berkshire Grey, Inc. Systems and methods for providing dynamic vacuum pressure at an end effector using a single vacuum source
GB201719058D0 (en) * 2017-11-17 2018-01-03 Ocado Innovation Ltd Control device and method for a robot system
PL424101A1 (pl) 2017-12-28 2019-07-01 Infocode Spółka Z Ograniczoną Odpowiedzialnością Urządzenie do segregacji i zbiórki odpadów segregowanych
US10676299B2 (en) * 2018-04-07 2020-06-09 Roca Robotics, Inc. Item inventory management system with vacuum operated robotic card sorter
US10583986B2 (en) * 2018-05-04 2020-03-10 Berkshire Grey, Inc. Systems and methods for processing objects, including automated processing stations
US20200078828A1 (en) * 2018-09-06 2020-03-12 Tompkins International Parcel and article sorting system and method with destination container removal
EP3871172A1 (en) 2018-10-25 2021-09-01 Berkshire Grey, Inc. Systems and methods for learning to extrapolate optimal object routing and handling parameters
WO2020092548A1 (en) * 2018-10-30 2020-05-07 Berkshire Grey, Inc. Systems and methods for processing objects including semi-autonomous stations and automated output processing
JP7269622B2 (ja) * 2019-02-18 2023-05-09 コネクテッドロボティクス株式会社 食器洗浄支援装置及び制御プログラム
TW202216560A (zh) * 2020-06-26 2022-05-01 美商辛波提克有限責任公司 用於在容器中儲存及擷取物品的倉儲系統
CA3189565A1 (en) 2020-07-22 2022-01-27 Berkshire Grey Operating Company, Inc. Systems and methods for object processing using a passively collapsing vacuum gripper
CN116133805A (zh) 2020-07-22 2023-05-16 伯克希尔格雷营业股份有限公司 用于使用通过护罩反转提供对象保持的真空夹持器进行对象处理的***和方法
EP4228827A1 (en) * 2020-10-14 2023-08-23 Ishitva Robotic Systems Pvt Ltd Automated segregation unit
WO2022185340A1 (en) * 2021-03-04 2022-09-09 Ishitva Robotic Systems Pvt Ltd Material detector
WO2022197837A1 (en) * 2021-03-19 2022-09-22 Dexterity, Inc. Robotic singulation system sensor

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1593790A (zh) * 2003-09-09 2005-03-16 富士胶片株式会社 用于分类物品的方法和装置
US7565008B2 (en) * 2000-11-06 2009-07-21 Evryx Technologies, Inc. Data capture and identification system and process
CN102527643A (zh) * 2010-12-31 2012-07-04 东莞理工学院 分拣机械手结构和产品分拣***
CN202743842U (zh) * 2012-08-24 2013-02-20 深圳市怡美工业设计有限公司 识别物品并分类存放机构
CN103043359A (zh) * 2011-10-17 2013-04-17 株式会社安川电机 机器人***、机器人以及已分拣物品的制造方法

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5999641A (en) * 1993-11-18 1999-12-07 The Duck Corporation System for manipulating digitized image objects in three dimensions
JP3104949B2 (ja) * 1994-04-12 2000-10-30 株式会社栗本鐵工所 廃瓶の選別装置
US5765444A (en) * 1995-07-10 1998-06-16 Kensington Laboratories, Inc. Dual end effector, multiple link robot arm system with corner reacharound and extended reach capabilities
US7110590B2 (en) * 1996-07-12 2006-09-19 Tomra Systems Asa Method and return vending machine device for handling empty beverage containers
US6956963B2 (en) * 1998-07-08 2005-10-18 Ismeca Europe Semiconductor Sa Imaging for a machine-vision system
US7353954B1 (en) * 1998-07-08 2008-04-08 Charles A. Lemaire Tray flipper and method for parts inspection
US20050038556A1 (en) * 2003-08-12 2005-02-17 Steris Inc. Automated instrument sorting system
US7562025B2 (en) * 2003-09-19 2009-07-14 Vesta Medical, Llc Waste sorting system with query function, and method thereof
US7313464B1 (en) * 2006-09-05 2007-12-25 Adept Technology Inc. Bin-picking system for randomly positioned objects
US7953277B2 (en) * 2006-09-05 2011-05-31 Williams Robert C Background separated images for print and on-line use
WO2008076942A1 (en) * 2006-12-15 2008-06-26 Braintech Canada, Inc. System and method of identifying objects
US8794524B2 (en) * 2007-05-31 2014-08-05 Toshiba Global Commerce Solutions Holdings Corporation Smart scanning system
US20090174805A1 (en) * 2008-01-07 2009-07-09 Motorola, Inc. Digital camera focusing using stored object recognition
US8862269B2 (en) * 2008-08-29 2014-10-14 Abb Research Ltd. Robotic picking of parts from a bin
WO2011159778A2 (en) * 2010-06-17 2011-12-22 Robotic System & Technologies, Inc. Automated robotic system for surgical instrument storage and retrieval
FI20105732A0 (fi) * 2010-06-24 2010-06-24 Zenrobotics Oy Menetelmä fyysisten kappaleiden valitsemiseksi robottijärjestelmässä
CN103503127B (zh) * 2011-03-11 2016-05-11 布鲁克斯自动化公司 基底处理工具
WO2013000067A1 (en) * 2011-06-30 2013-01-03 Nexen Inc. Systems and methods for catalytic steam cracking of non-asphaltene containing heavy hydrocarbons
DE102012013022A1 (de) * 2012-06-29 2014-04-24 Liebherr-Verzahntechnik Gmbh Vorrichtung zur automatisierten Handhabung von Werkstücken
DE102012013031A1 (de) * 2012-06-29 2014-04-24 Liebherr-Verzahntechnik Gmbh Vorrichtung zum automatisierten Erfassen und Entnehmen von Werkstücken
US20140197652A1 (en) * 2013-01-15 2014-07-17 Precision Machinery Research & Development Center End effector module
US9111979B2 (en) * 2013-05-16 2015-08-18 Kevin P Fairbairn System and method for real time positioning of a substrate in a vacuum processing system
US9475652B2 (en) * 2013-06-06 2016-10-25 Wheel Recoverey Systems, LLC Core wheel processing system and method
JP6144826B2 (ja) * 2013-06-11 2017-06-07 クアルコム，インコーポレイテッド データベース作成のための対話型および自動的３ｄオブジェクト走査方法
WO2015016864A1 (en) * 2013-07-31 2015-02-05 Hewlett-Packard Development Company, L.P. System with projector unit and computer
US9669432B2 (en) * 2013-08-27 2017-06-06 Te Connectivity Corporation Component feeding system
US10424498B2 (en) * 2013-09-09 2019-09-24 Persimmon Technologies Corporation Substrate transport vacuum platform
WO2015047401A1 (en) * 2013-09-30 2015-04-02 Hewlett-Packard Development Company, L.P. Projection system manager
US9239943B2 (en) * 2014-05-29 2016-01-19 Datalogic ADC, Inc. Object recognition for exception handling in automatic machine-readable symbol reader systems
US9349297B1 (en) * 2015-09-09 2016-05-24 Fitly Inc. System and method for nutrition analysis using food image recognition

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7565008B2 (en) * 2000-11-06 2009-07-21 Evryx Technologies, Inc. Data capture and identification system and process
CN1593790A (zh) * 2003-09-09 2005-03-16 富士胶片株式会社 用于分类物品的方法和装置
CN102527643A (zh) * 2010-12-31 2012-07-04 东莞理工学院 分拣机械手结构和产品分拣***
CN103043359A (zh) * 2011-10-17 2013-04-17 株式会社安川电机 机器人***、机器人以及已分拣物品的制造方法
CN202743842U (zh) * 2012-08-24 2013-02-20 深圳市怡美工业设计有限公司 识别物品并分类存放机构

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108778636A (zh) * 2016-02-08 2018-11-09 伯克希尔格雷股份有限公司 用于提供使用运动规划的各种物体的处理的***和方法
CN108778636B (zh) * 2016-02-08 2021-11-19 伯克希尔格雷股份有限公司 用于提供使用运动规划的各种物体的处理的***和方法
CN110382173A (zh) * 2017-03-10 2019-10-25 Abb瑞士股份有限公司 用于标识物体的方法和设备
CN110382173B (zh) * 2017-03-10 2023-05-09 Abb瑞士股份有限公司 用于标识物体的方法和设备
CN107152910A (zh) * 2017-05-19 2017-09-12 成都福莫斯智能***集成服务有限公司 一种瓷壳尺寸自动检测***
CN107192357A (zh) * 2017-05-19 2017-09-22 成都福莫斯智能***集成服务有限公司 一种利用机器人进行瓷壳尺寸自动检测方法
CN108198168A (zh) * 2017-12-26 2018-06-22 合肥泰禾光电科技股份有限公司 物料分析方法及装置
CN110695964A (zh) * 2019-09-27 2020-01-17 广州嘉欣电工科技有限公司 一种轮毂车标装配方法、***、装置及存储介质
CN112668365A (zh) * 2019-10-15 2021-04-16 顺丰科技有限公司 一种物料入库识别方法、装置、设备及存储介质

Also Published As

Publication number Publication date
US10417521B2 (en) 2019-09-17
CN104463265B (zh) 2020-10-09
US20150081090A1 (en) 2015-03-19
SG2013069893A (en) 2015-04-29
MY182743A (en) 2021-02-04

Similar Documents

Publication Publication Date Title
CN104463265A (zh) 物料处理***和方法
US20220306407A1 (en) Vision-assisted robotized depalletizer
CN110770149B (zh) 使用物体移动重新分配来提供物体的分离以供处理的***和方法
US20230012957A1 (en) Systems and methods for processing objects, including automated mobile matrix carriers
AU2018378096B2 (en) Robot, and conveying system and method
CN106999987B (zh) 用于将物品进给到分类机的装置及其分类机和方法
US20180057263A1 (en) Rail-bound transport robot for picking goods in a storage rack, and method for the operation therof
WO2017074888A1 (en) Communication of information regarding a robot using an optical identifier
CN111730603A (zh) 机器人***的控制装置以及控制方法
JP6527108B2 (ja) 物品搬送装置
KR20200067914A (ko) 작업자 식별 및 성과 추적
EP2132008A2 (en) A method and a device for recognising, collecting and repositioning objects
CN112969652B (zh) 包括半自主站和自动化输出处理的用于处理物体的***和方法
US8467597B2 (en) Feature-based segmentation method, for segmenting a plurality of loosely-arranged duplicate articles and a group for actuating the method for supplying a packaging machine
CN117157616A (zh) 用于机器人水平分拣的***和方法
US20210276796A1 (en) Systems and methods for providing order fulfillment using a shuttle takeaway system
JP2015043175A (ja) 物品認識装置及び物品認識設備
WO2023001125A1 (zh) 货物处理方法、装置、机器人、分拣装置及仓储***
KR101265769B1 (ko) 이미지 정보를 이용한 반품 분류시스템
CN215477503U (zh) 分拣装置和仓储***
CN210735196U (zh) 一种智能分拣货物的***
US20210402595A1 (en) Optimization method for improving the reliability of goods commissioning using a robot
CN115210153B (zh) 用于使用螺旋塔***提供订单履行的***和方法
JP2014091608A (ja) 物品処理設備
CN208485147U (zh) 一种用于自动仓储的储存及运送装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant