CN112444283B - 车辆组合件的检测设备和车辆组合件生产*** - Google Patents

Abstract

本发明涉及一种用于车辆组合件的检测设备，所述检测设备包括：人机协作机器人，用于在由输送单元所输送的车辆组合件周围移动；安装在人机协作机器人末端的摄像机，用于采集所述车辆组合件的图像；安装在人机协作机器人末端的三维激光扫描仪，用于对车辆组合件的表面进行三维扫描；用于所述人机协作机器人的控制装置；用于处理由摄像机和三维激光扫描仪所采集的数据的数据处理装置，以用于检测车辆组合件的安装误差和/或外观缺陷，其中，根据摄像机所采集的图像来选取所述三维激光扫描仪的扫描位置和/或规划人机协作机器人的移动路径。此外，本发明涉及一种车辆组合件生产***。

Description

车辆组合件的检测设备和车辆组合件生产***

技术领域

本发明涉及一种用于车辆组合件生产***的检测设备。本发明还涉及一种车辆组合件生产***。

背景技术

目前，在生产线上，例如仪表板总成的车辆组合件中的部件是否正确安装及各部件之间缝隙是否符合标准等质量问题都是由人工进行检测。当输送单元将车辆组合件运达质检工位，质检员目视检查安装的部件，利用塞尺和面差尺分别测量各间隙和面差。然而，随着仪表板总成上安装的相近部件种类越来越多，加之生产线速的不断提升，人工检查中很多质量问题无法第一时间检测出来。而下线后再发现仪表板总成的问题，则返修难度大、工时长、成本高。此外，质检员需要不停地移动身体。长期反复进行这些动作也会对质检员造成劳动损伤。

发明内容

本发明的目的在于，提供一种用于车辆组合件的检测设备，其能够自动地进行车辆组合件的质量检验、特别是同时实现安装误差和/或外观缺陷的自动检验。此外，本发明还提供一种带有这样的检测设备的车辆组合件生产***。

本发明的一个方面涉及一种用于车辆组合件的检测设备，所述检测设备包括：

-人机协作机器人，用于在由输送单元所输送的车辆组合件周围移动；

-安装在人机协作机器人末端的摄像机，用于采集所述车辆组合件的图像；

-安装在人机协作机器人末端的三维激光扫描仪，用于对车辆组合件的表面进行三维扫描；

-用于所述人机协作机器人的控制装置；

-用于处理由摄像机和三维激光扫描仪所采集的数据的数据处理装置，以用于检测车辆组合件的安装误差和/或外观缺陷；

其中，根据摄像机所采集的图像来选取所述三维激光扫描仪的扫描位置和/或规划人机协作机器人的移动路径。

在本发明的范畴内，所述车辆组合件指的是用于车辆的由多个部件组成的组合件，例如车辆内饰总成：仪表板总成、车门内饰总成、侧围内饰总成、顶盖内饰总成、背门内饰总成、行李舱总成；车身表面总成：前后车门总成、发动机舱总成、背门总成等等。这些车辆组合件通过多个不同部件相组装并且通过插接、搭接、焊接、粘结、螺接等方式相互连接。

在车辆生产中需要对上述车辆组合件的装配进行监控，以保证将正确的部件以正确的方式安装在车辆组合件中。在此，将监控的具体项目总结为安装误差和/或外观缺陷，其包括组合件整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色、表面上的划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理、各部件间的间隙、面差、各部件的几何尺寸偏差。其中特别关注在车辆组合件的表面上由于上述连接而存在的间隙以及面差。而这样的间隙以及面差将会营造美学感受、体现生产质量、直接反映车辆档次、甚至影响车辆组合件的功能。因而，对于间隙以及面差的检测是特别关键的。

按照本发明，所述人机协作机器人是指设计用于与人类处于共同工作空间中的机器人，其考虑了人类在机器人的近距离出现、甚至互动，设置有对周围人类的安全保护。相对于一般的工业机器人，人机协作机器人在实现多自由度的运动的同时具有小型化尺寸、高运动精度和高人员安全性。因此，在按照本发明的检测设备周围不必设置防护罩也无须禁止人员通行和甚至交互。

在本发明中，设有人机协作机器人，在人机协作机器人末端安装有用于采集所述车辆组合件的图像的摄像机以及用于对车辆组合件的表面进行三维扫描的三维激光扫描仪。在本发明中，所述摄像机可以是在可见光范围内的工业摄像机。所述三维激光扫描仪包含有激光光源及扫描器、受光感测器、控制单元等部分并且可以使用飞行时间测距或三角测距原理。不限于三维激光扫描仪，由于人机协作机器人能够为扫描仪赋予可移动性，本发明也可以使用三维结构光扫描仪。在使用三维结构光扫描仪的情况下甚至可以将所述摄像机用作扫描器。

通过安装在人机协作机器人末端的摄像机采集到的图像数据以及通过安装在人机协作机器人末端的三维激光扫描仪的扫描数据能够检测车辆组合件的安装误差和/或外观缺陷，如组合件整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色、表面上的划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理、各部件间的间隙、面差、各部件的几何尺寸偏差。与单纯固定安装的摄像机和三维激光扫描仪相比，通过人机协作机器人的可运动性能够实现在车辆组合件表面之上的多个位置进行立体式检测，例如顶面、底面、正面、背面、侧面等。特别是对于表面不规则的车辆组合件、如仪表板总成来说，可以在凹凸不平或具有弧度的表面上进行检测，而不受固定的采集点的限制。此外，特别是对于设置在空间内壁上的表面同样可以实施检测，例如在检测行李舱总成时，人机协作机器人能够使得其末端移动到行李舱空间中。由此，通过本发明，将人机协作机器人与摄像机和三维激光扫描仪进行结合，扩展了两者的光学检测范围，使得它们不仅可以在空间中的不同位置进行检测，如在空间上多个不同位置逐点地进行拍摄和扫描；而且特别是可以随着人机协作机器人的运动进行检测。特别是例如可以跟随曲面或非直线轮廓连续地实施检测，从而得到沿着所述曲面或轮廓的无中断的变化曲线。

按照本发明，由于在人机协作机器人的末端同时安装有摄像机和三维激光扫描仪能够同时地采集车辆组合件的图像和三维构型、特别是测量间隙和面差以及表面上的缺陷，从而通过仅一次经过车辆组合件之上就可以全面地了解其表面情况。这样，不仅实现对于车辆组合件的相对“宏观”的检测：如组合件整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色是否正确或者是否与装配要求存在较大差异；而且实现对于所述车辆组合件的相对“微观”的检测：车辆组合件表面上的划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理、各部件间的间隙、面差、各部件的几何尺寸偏差。

而且，按照本发明，根据摄像机所采集的图像来选取所述三维激光扫描仪的扫描位置和/或规划人机协作机器人的移动路径。在此，设置在人机协作机器人的末端上的摄像机不单单是一个简单的执行器，更是对于人机协作机器人和/或三维激光扫描仪的视觉引导的基础。通过摄像机所采集的图像来控制测量的实施、亦即控制人机协作机器人的移动和/或三维激光扫描仪的扫描位置。在此，需要说明的是，在本发明中，摄像机、三维激光扫描仪和人机协作机器人三者不是相互独立的或者简单加和，而是有机地相互结合且相互协作。

通过按照本发明检测设备，可以自动化地检测是否将正确的部件以正确的方式符合规定地安装在车辆组合件中。通过本发明，首先可以代替人工检查、节省用于检验的人工成本、减少返修造成的附加工时，并且因此提高生产效率。而且，由于避免质检工使用接触性的测量工具、例如塞尺，也能够避免在测量过程中对车辆组合件的意外损伤。同时也省去人工检查时反复移动身体，避免劳动损伤。第二，由于使用人机协作机器人，可以对车辆组合件进行全面性的检测，相对于固定设置的摄像机和扫描仪增加了检测的维度，使得能够检测车辆组合件表面上的任意部分，而不局限于固定的拍摄范围。第三，基于人机协作机器人，显著提高检测精度和检测效率。例如通过三维激光扫描仪对于间隙检测的精度可达0.1mm，而且结合人机协作机器人能实现快速且定位准确的移动，缩短对车辆组合件检测的时间长度，提高生产效率。

按照本发明的一种实施方式，利用所述摄像机采集车辆组合件的整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色；和/或利用所述三维激光扫描仪采集车辆组合件表面上的划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理、各部件间的间隙、面差、各部件的几何尺寸偏差。可见，通过本发明能同时实现对车辆组合件的相对“宏观”和相对“微观”的检测。具体而言，通过设置在人机协作机器人末端的摄像机可以拍摄车辆组合件的静态图像(照片)或动态图像(视频)，通过对所述静态或动态画面进行识别可以知晓整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色。以车辆的仪表板总成为例，通过对摄像机图像的识别例如可以检测其整体布局是否正确；是否安装了正确的部件；各个部件是否具有正确的造型；各个部件是否安装在符合规定的位置中；各个部件是否具有正确的材质和颜色。在此，通过与预存储的图像比较，不仅可以查明图像中是否出现了正确的部件，而且可以查明部件是否以正确的方式(如方向、位置、角度等)进行安装。相对于此，通过三维激光扫描仪不仅可以捕捉车辆组合件表面的细节问题，如划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理。而且通过三维扫描还可以高精度地获得各部件间的间隙、面差、各部件的几何尺寸偏差。

按照本发明的一种实施方式，通过所述摄像机应用立体视觉测量获得包括三维坐标和颜色信息的点云信息，该点云信息能够与通过三维激光扫描仪获得的包括三维坐标和激光反射强度的点云信息相耦合。在此，耦合表示将具有相同三维坐标的颜色信息和激光反射强度信息相关联。由此得出能够完整还原车辆组合件表面情况的点云集合，在该点云集合中，对于每个表面上的三维坐标都存在相应的激光反射强度和颜色信息。通过这样的方式形成关于车辆组合件的完整的表面信息，由此能够重建车辆组合件的彩色的三维模型。在此，为了应用立体视觉测量，优选地可以基于人机协作机器人和/或车辆组合体借助于运输单元的可移动性对单目摄像机在不同位置所拍摄的图像应用立体视觉测量法。备选地还可以使用双目摄像机。

按照本发明的一种实施方式，所述检测设备包括读取装置，其用于读取车辆组合件和/或运输单元的编号，所述数据处理装置根据所述编号获取车辆组合件的标准数据并且将其与所采集的数据进行比较。在此，知晓车辆组合件和/或运输单元的编号有利于检测数据的归档，以便于日后追溯。在涉及混线生产的情况下，该实施方式是特别有利的。在混线生产***中，通常在一条生产线上同时生产的车辆组合件可能属于不同的车型和/或同一车型的不同配置。例如，在同一条生产线上先后地、特别是相互穿插地为轿车和越野车生产其仪表板总成。还可能的是，用于同一车型的仪表板总成之间存在细微差异，如在部分接缝处安装镀铬饰条。这时，人工检测可能会混淆这些配置、甚至完全无法顾及这些细节。根据本发明的该实施方式，通过读取上述编号可以容易地获取相应车辆组合件的标准数据，如标准图像、标准尺寸、规定容差等。所述数据处理装置将上述标准数据与实际采集到的数据进行比较，从而得到与标准数据的偏差，例如在图像中各部件位置、形状、颜色等方面的差异，以及接缝处的间隙是否符合规定。所述读取装置可以包括扫码器、号码读取器、带有号码识别的光学传感器、RFID标签读取器或诸如此类。特别是所述车辆编号读取装置通过图像识别和/或无线通信来读取车辆组合件和/或运输单元的编号。特别是优选地，所述设置在人机协作机器人末端的摄像机用作为上述读取装置。由此简化按照本发明的检测设备的构成。

按照本发明的一种实施方式，所述三维激光扫描仪对车辆组合件进行整体扫描或者仅进行局部扫描。在此可以全面地扫描车辆组合件整体，以获得全面详尽的检测信息。然而，为了节省检测时间并且降低数据处理量和存储量，也可以仅对车辆组合件的部分位置进行抽检。

按照本发明的一种实施方式，所述检测设备的检测在输送单元停止的情况下进行，通过摄像机检测车辆组合件的停止位置偏差，用于所述人机协作机器人的控制装置根据所述停止位置偏差来补偿人机协作机器人的运动。例如，通过对摄像机所采集的图像识别来测量出输送单元将车辆组合件停放的停止位置与标准检测位置的偏差值。根据这个偏差值，如果偏差值为零，人机协作机器人在测量时的运动和定位是按预设程序和参照预设位置进行；如果偏差值不为零，则将该偏差值补偿到人机协作机器人预设定的轨迹和参照位置中，及时调整运行轨迹和测量点位置，保证能够对正确的位置进行测量。

按照本发明的一种实施方式，所述检测设备的检测在输送单元运动的情况下进行，通过摄像机采集车辆组合件的运动，所述用于所述人机协作机器人的控制装置使人机协作机器人的末端追踪所检测到的运动，和/或所述数据处理装置在数据处理中考虑所检测到的运动。在此，通过摄像机实现对随着输送单元运动的车辆组合件的实时的位置检测。由此，人机协作机器人能够追踪所检测到的运动，使得人机协作机器人末端实现对该运动的追踪，使人机协作机器人末端与车辆组合件同步运动或者将该运动叠加或扣除在车辆组合件静止情况下人机协作机器人末端原本应进行的检测运动。在这里，叠加表示人机协作机器人末端实施的运动不仅包含本应进行的检测运动分量还有车辆组合件随运输单元运动的分量，由此，人机协作机器人末端将相比于车辆组合件静止时实现更大的运动。扣除则例如表示，由于车辆组合件处于沿一个方向的匀速移动，则可以从原本的检测运动中免除人机协作机器人末端在这个方向上的移动。此外，所述数据处理装置在数据处理中考虑所检测到的运动，特别是补偿检测到的移动、振动、晃动等。

按照本发明的一种实施方式，所述数据处理装置在通过摄像机和三维激光扫描仪两者之一确定出不合规的安装误差和/或外观缺陷时利用另一个进行核验。通过这样的方式，在两种不同的检测数据中对同一个问题进行双重校验，由此降低检测中的误差，提高检测的准确性。

按照本发明的一种实施方式，人机协作机器人使其末端的摄像机在至少两个不同位置上采集车辆组合件的图像，所述数据处理装置根据这些图像以及在所述至少两个不同位置之间的位移重建车辆组合件的三维模型。在此同样应用立体视觉测量法。而且，仅仅基于现有的单目摄像机就能实现粗略地对要检测的车辆组合件进行立体建模。这样，最大化地利用按照本发明的检测设备的现存部件完成尽可能更多检测任务。

按照本发明的一种实施方式，在所建立的车辆组合件的三维模型中确定预定义的特征部位，由此选取所述三维激光扫描仪的扫描位置和/或规划人机协作机器人为进行所述扫描而需要执行的移动路径。特别是，所述特征部位为表面上亮度和/或灰度强烈变化的部位。这样的部位通常代表棱边、缝隙、台阶、饰条等，而对这些部位测量间隙、面差又是特别需要的。由此，按照本发明的检测设备可以自行寻找需要检测的位置而无需用户预先规定。这样能实现检测设备的智能化。

按照本发明的一种实施方式，所述检测设备包括设置在人机协作机器人末端的抓具或机械手。通过这样的方式，按照本发明的检测设备不仅能够实现视觉检测，还能够进行运动功能检测。优选地，利用所述抓具或机械手对车辆组合件实施操纵，例如按压按键、旋拧旋钮、开关手套箱或车门、翻折遮阳板、拨动换气格栅等等。特别优选地，在所述抓具或机械手中设置有传感器，以用于测量在操纵车辆组合件时反馈的阻力和/或力矩。通过所述传感器能够进一步地定量地对车辆组合件的运动功能进行评价。上述抓具或机械手可以与摄像机和三维激光扫描仪以各种方式集成在人机协作机器人的末端。例如可以将抓具或机械手与摄像机和三维激光扫描仪集成在末端上的可旋转部件的对置的两端上。此外，考虑可枢转到背后地或可收纳地安装所述抓具或机械手。使得所述抓具或机械手不会妨碍摄像机和三维激光扫描仪的检测。

按照本发明的一种实施方式，所述检测设备包括存档装置，其用于存储关于车辆组合件的数据。通过对车辆组合件的数据存档可以实现为每个车辆组合件建立其生产档案，便于日后的质量查询和质量追溯。

按照本发明的一种实施方式，所述检测设备包括报警装置，其用于在确定出不合规的安装误差和/或外观缺陷时向用户报警、特别是发出表示禁行的光学信号和/或声学信号。按照本发明的检测设备优选设置在相应的车辆组合件装配步骤之后、特别是紧邻于车辆组合件装配场所地设置。由此，在装配结束之后可以马上进行检验，以便于立即知晓装配正确与否。在装配了错误的部件或者未按照规定进行装配时，检测设备的报警装置将立即通过灯光和/或声音反馈给装配人员，从而装配人员可以就地马上进行错误更正、例如换上正确的部件或者调整部件的安装。在此，视觉信号可以通过灯光的点亮与熄灭、灯光颜色、灯光的动态效果等给出；而听觉信号可以通过提示音、语音、音乐等给出。优选发出听觉信号，因为装配人员不必耗费时间去观察相应的灯光而仅需将注意力集中于下一装配步骤。按照这一实施方式，只有在其中以正确的方式符合规定地安装了正确的部件的车辆组合件才能够被放行，继而沿生产线继续组装。由此，能够以极高的效率保证合格率，提高车辆组合件质量，减少返工维修所耗费的工时。特别是，所述检测设备包括显示装置，其用于向用户用图像显示检测结果和/或确定出的不合规的安装误差和/或外观缺陷。所述显示器显示以下中的至少一项：参考图像、采集的图像与参考图像的差异、正确部件以及车辆配置。由此，装配人员通过输出装置的显示器能够清楚地了解部件装配的问题所在，方便其进行部件更换或者部件改装或重装。特别是，在所述显示装置上，所确定的不合规的安装误差和/或外观缺陷标记在由摄像机采集的图像上。优选地，所述显示装置显示以下中的至少一项：参考图像、检测图像与参考图像的差异、正确部件布局和配置。由此，装配人员通过显示装置能够清楚地了解装配的问题所在，方便其进行部件更换或者部件改装或重装。

按照另一方面，本发明还涉及一种车辆组合件生产***，其包括用于输送车辆组合件的输送单元以及按照本发明的检测设备。需要说明的是，按照本发明的车辆组合件生产***的各个实施方式和技术效果可以参照以上对于检测设备的说明。通过本发明的车辆组合件生产***能够实现自动化的检验、高效的生产、降低的错误率、提高的车辆组合件装配合格率以及缩减的人工成本和时间成本。

附图说明

图1示出按照本发明的用于车辆组合件的检测设备和被检测的车辆组合件的示意图；

图2示出按照本发明的检测设备和被检测的车辆组合件的透视图；

图3示出按照本发明的检测设备的人机协作机器人的末端的一个实施例的示意图；

图4示出按照本发明的检测设备的人机协作机器人的末端的一个实施例的示意图；

图5示出按照本发明的检测设备在对仪表板总成局部扫描时的检测路径。

具体实施方式

图1示出按照本发明的用于车辆组合件的检测设备和被检测的车辆组合件的示意图。在各附图中以用于车辆的仪表板总成1为例来阐述对车辆组合件的检测。仪表板总成1被构成为吊具的运输单元2所承载。各个仪表板总成1借助于运输单元2在钢梁上沿运输方向9依次经过按照本发明的检测设备。所述运输单元2具有用于驱动其运动的马达3。

按照本发明的检测设备包括：

-人机协作机器人4，用于在由输送单元2所输送的仪表板总成1周围移动；

-安装在人机协作机器人4末端的摄像机5，用于采集所述仪表板总成1的图像；

-安装在人机协作机器人4末端的三维激光扫描仪6，用于对仪表板总成1的表面进行三维扫描；

-用于人机协作机器人4的控制装置7；

-用于处理由摄像机5和三维激光扫描仪6所采集的数据的数据处理装置8，以用于检测仪表板总成1的安装误差和/或外观缺陷；

按照本发明，根据摄像机5所采集的图像来选取所述三维激光扫描仪6的扫描位置和/或规划人机协作机器人4的移动路径。

利用所述摄像机5采集车辆组合件的整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色；和/或利用所述三维激光扫描仪6采集车辆组合件表面上的划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理、各部件间的间隙、面差、各部件的几何尺寸偏差。特别是，能够通过所述摄像机5在应用立体视觉测量的情况下获得包括三维坐标(如xyz)和颜色信息(如RGB)的点云信息，该点云信息能够与通过三维激光扫描仪6获得的包括三维坐标(如xyz)和激光反射强度(如I)的点云信息相耦合。由此得出能够完整还原仪表板总成1表面情况的点云集合，在该点云集合中，对于每个表面上的三维坐标都存在相应的激光反射强度和颜色信息。

此外，由于在同一个末端上设置摄像机5和三维激光扫描仪6，还能够实现双重校验：所述数据处理装置8在通过摄像机5和三维激光扫描仪6两者之一确定出不合规的安装误差和/或外观缺陷时利用另一个进行核验。

在图1中，每个运输单元2都标记有自身的编号，如图中所示的001和125。按照本发明的检测设备可以设置有读取装置，其用于读取这样的编号，所述数据处理装置8根据所述编号获取仪表板总成1的标准数据并且将其与所采集的数据进行比较。特别有利地，将摄像机5用作为所述读取装置。

图2示出按照本发明的检测设备和被检测的车辆组合件的透视图。在该图中仅示意性地示出人机协作机器人4的末端10，出于清楚性原因没有示出设置在该末端10上的摄像机5和三维激光扫描仪6。

以仪表板总成1为例的车辆组合件经由示意性示出的运输单元2沿着钢梁运输。在此，仪表板总成1到达检测工位。

在仪表板总成1达到检测工位之后，首先可以读取仪表板总成和/或运输单元的编号，所述数据处理装置8根据所述编号获取对于该仪表板总成的标准数据、即标准图像。接着，摄像机5可以在预定位置处拍摄仪表板总成1的全貌图像。数据处理装置8包含有用于执行图像比较的图像处理装置，例如安装有相应程序或指令的计算机、可编程逻辑电路***、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)的电子电路***等。在本发明中，该图像处理装置可以将所采集的图像的各个部位与标准图像进行比较。比较结果可以包括采集的图像与标准图像相符或不符。有利地，在比较中仅仅进行特征比较，所述特征包括：车辆组合件的图标、字符、条码、号码、线条、拐角；部件的尺寸、形状、轮廓、位置、定向；以及部件相对于车辆其他部分的距离、角度、连接关系等等。由此，能够通过从采集的图像中仅仅提取这些简单的特征实现有针对性的检验。例如，在检验仪表盘时，由于不同配置的仪表盘可能带有不同图案、数字和/或字符，因此可以通过比较仪表盘的这些特征来验证是否按照车辆配置装配了正确的仪表盘以及正确的仪表盘是否以正确的方式装配好。特别优选地，在上述图像处理中，借助于对采集的图像的灰度处理来比较图像。在此，对采集的图像的灰度处理是特别有利的，因为灰度图的数据量相对于彩色图大大缩减，降低了对比较装置的计算性能的要求。此外，灰度图可以均一化处理，防止灯光环境变化造成的偏差。在以灰度图进行比较时，可以简单地通过提取带有一阈值范围内的灰度值的像素作为所要比较的部件、特别是部件的上述特征。同样地，也可以通过图像内灰度梯度变化提取的相应的特征。因此，对采集的图像的灰度处理能够简化计算、降低计算性能要求、提高验证速度和验证准确性。

需要说明的是，运输单元2在检测进行时可以将仪表板总成1停驻在该检测工位或者可以使其缓慢经过在该检测工位。

在输送单元停止的情况下，通过摄像机5检测仪表板总成1的停止位置相对于标准检测位置的偏差，所述用于所述人机协作机器人4的控制装置7根据所述停止位置偏差来补偿人机协作机器人4的在检测中执行的运动。

然而不限于上述停止的情况，所述检测设备的检测亦可以在输送单元2运动的情况下进行，通过摄像机5采集仪表板总成1的运动，用于所述人机协作机器人4的控制装置7使人机协作机器人4的末端10追踪所检测到的运动，和/或所述数据处理装置8在数据处理中考虑所检测到的运动，例如控制装置7使人机协作机器人4末端10与仪表板总成1同步运动或者将该运动叠加或扣除在车辆组合件静止情况下人机协作机器人4末端10原本应进行的检测运动。此外，所述数据处理装置8在数据处理中考虑所检测到的运动，特别是补偿由摄像机5检测到仪表板总成1的移动、振动、晃动等。

图3示出按照本发明的检测设备的人机协作机器人4的末端10的一个实施例的示意图。在人机协作机器人4的可运动的末端10上示意性地示出并排设置的摄像机5和三维激光扫描仪6。在此，摄像机5构成为工业摄像机，三维激光扫描仪6包含有激光光源及扫描器、受光感测器、控制单元等部分并且可以使用飞行时间测距或三角测距原理。摄像机5和三维激光扫描仪6不限于图中所示左右并排地设置，还可以考虑上下并排的设置，或者将三维激光扫描仪6的各个部件分开地设置，例如将激光光源设置在摄像机5的一侧而将受光感测器设置在摄像机5的另一侧。

图4示出按照本发明的检测设备的人机协作机器人4的末端10的一个实施例的示意图。图4与图3所示的人机协作机器人4的区别在于，所述检测设备包括设置在人机协作机器人4的末端10的具示意性示出的抓具11。通过所述抓具能够实现抓持物体等动作。在此，抓具11与摄像机5和激光扫描仪6集成在同一个构件上，该构件可以围绕轴线12旋转。通过旋转，抓具11可以从收纳位置移出，并且构成人机协作机器人4的末端执行器。利用所述抓具11对车辆组合件实施操纵。特别是，在所述抓具11中设置有未示出的传感器，以用于测量在操纵车辆组合件时反馈的阻力和/或力矩。

在检测时，所述三维激光扫描仪6可以对车辆组合件进行整体扫描。此时，人机协作机器人4的控制装置7可以控制其末端10往复错行地在仪表板总成1全表面上方经过。由此可以全面地了解仪表板总成1的整个表面的三维信息。

图5示出按照本发明的检测设备在对仪表板总成1局部扫描时的检测路径。在此，为了高效的检测效率，检测设备仅在仪表板总成1上的个别区域上以三维激光扫描仪6来扫描局部的间隙。需要扫描的位置在图5中以圆形标记标出。此外，以方形标记还标出了需要利用抓具11实施打开操作的手套箱开关的位置。在检测时，人机协作机器人4将其末端10停留在这些标记处的位置上方，利用三维激光扫描仪6扫描所对准的缝隙或者利用抓具11操纵开关。在对一个位置扫描完成之后，人机协作机器人4将末端10沿图5中箭头所示的移动路径移动到下一个位置继续扫描。

特别需要说明的是，基于人机协作机器人4的可运动性，在仅仅设置有一个摄像机5的情况下也能够实现立体视觉测量，其方式为，人机协作机器人4使其末端10的摄像机5在至少两个不同位置上采集仪表板总成1的图像，所述数据处理装置8根据这些图像以及在所述至少两个不同位置之间的位移来重建仪表板总成1的三维模型。优选地在所建立的车辆组合件的三维模型中确定预定义的特征部位。所述特征部位可以是表面上亮度和/或灰度强烈变化的部位。图5中所标出的圆圈即代表这些通过三维模型而得出的特征部位。在确定需要检测的特征部位之后，可以确定所述三维激光扫描仪6的扫描位置以及规划人机协作机器人4为进行所述扫描而需要执行的移动路径、例如图5中箭头所示的移动路径。

虽然在上述附图中没有示出，但是按照本发明的检测设备还可以包括存档装置、报警装置和/或显示装置。其中，所述存档装置用于存储关于车辆组合件的数据。特别是，在存档装置中将利用三维激光扫描仪6采集的数据与利用摄像机5采集的数据相结合地记录。所述报警装置可以用于在确定出不合规的安装误差和/或外观缺陷时向用户报警。所述显示装置可以用于向用户用图像显示检测结果和/或确定出的不合规的安装误差和/或外观缺陷。

本发明不限于所示的实施例，而是包括或者延及可落入所附权利要求书的有效范围内的所有技术上的等效物。在说明书中所选择的位置说明如例如上、下、左、右等等参照直接的描述以及示出的附图并且在位置变化时按照意义能转用到新的位置上。

本发明虽然已以较佳实施例公开如上，但其并不是用来限定本发明，任何本领域技术人员在不脱离本发明的精神和范围内，都可以利用上述揭示的方法和技术内容对本发明技术方案做出可能的变动和修改，因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化及修饰，均属于本发明技术方案的保护范围。

在本申请文件中所公开的特征不仅可以单独地而且可以以任意组合的方式实现。此外需要说明的是，本发明的各个附图均为示意性的并且可能未按比例地示出。在各个实施例中，部件的数量、构造形式和/或布置结构也不限于所示的示例。说明书中所列举的值仅是参考值，在合适地选择尺寸时可以超过或低于所述参考值。

Claims (15)

1.用于车辆组合件的检测设备，所述检测设备包括：

-人机协作机器人，用于在由输送单元所输送的车辆组合件周围移动；

-安装在人机协作机器人末端的摄像机，用于采集所述车辆组合件的图像；

-安装在人机协作机器人末端的三维激光扫描仪，用于对车辆组合件的表面进行三维扫描；

-用于人机协作机器人的控制装置；

-用于处理由摄像机和三维激光扫描仪所采集的数据的数据处理装置，以用于检测车辆组合件的安装误差和/或外观缺陷；

其中，根据摄像机所采集的图像来选取所述三维激光扫描仪的扫描位置和/或规划人机协作机器人的移动路径，其中，人机协作机器人使其末端的摄像机在至少两个不同位置上采集车辆组合件的图像，所述数据处理装置根据这些图像以及在所述至少两个不同位置之间的位移来重建车辆组合件的三维模型，在所建立的车辆组合件的三维模型中确定多个特征部位，这些特征部位是亮度和/或灰度强烈变化的部位并且代表棱边、缝隙、台阶或饰条，由所述多个特征部位选取所述三维激光扫描仪的扫描位置并且规划人机协作机器人为进行所述扫描而需要执行的移动路径，

并且所述检测设备的检测在输送单元运动的情况下进行，通过摄像机采集车辆组合件的运动，用于所述人机协作机器人的控制装置使人机协作机器人的末端追踪所检测到的运动，并且所述数据处理装置在数据处理中考虑所检测到的运动，

所述摄像机和所述三维激光扫描仪同时地分别采集车辆组合件的图像和三维构型，通过所述摄像机应用立体视觉测量获得包括三维坐标和颜色信息的点云信息，该点云信息能够与通过三维激光扫描仪获得的包括三维坐标和激光反射强度的点云信息相耦合。

2.按照权利要求1所述的检测设备，其特征在于，利用所述摄像机采集车辆组合件的整体上的布局、配置、各部件的选件、造型、位置、角度、材质、颜色；和/或利用所述三维激光扫描仪采集车辆组合件表面上的划痕、开裂、凹陷、突起、翘曲、弧度、平整度、平滑度、纹理、各部件间的间隙、面差、各部件的几何尺寸偏差。

3.按照权利要求1或2所述的检测设备，其特征在于，所述检测设备包括读取装置，其用于读取车辆组合件和/或运输单元的编号，所述数据处理装置根据所述编号获取车辆组合件的标准数据并且将其与所采集的数据进行比较。

4.按照权利要求3所述的检测设备，其特征在于，所述摄像机用作为所述读取装置。

5.按照权利要求1或2所述的检测设备，其特征在于，所述三维激光扫描仪对车辆组合件进行整体扫描或者仅进行局部扫描。

6.按照权利要求1或2所述的检测设备，其特征在于，所述数据处理装置在通过摄像机和三维激光扫描仪两者之一确定出不合规的安装误差和/或外观缺陷时利用另一个进行核验。

7.按照权利要求1或2所述的检测设备，其特征在于，所述特征部位为表面上亮度和/或灰度强烈变化的部位。

8.按照权利要求1或2所述的检测设备，其特征在于，所述检测设备包括设置在人机协作机器人末端的抓具或机械手。

9.按照权利要求8所述的检测设备，其特征在于，利用所述抓具或机械手对车辆组合件实施操纵。

10.按照权利要求9所述的检测设备，其特征在于，在所述抓具或机械手中设置有传感器，以用于测量在操纵车辆组合件时反馈的阻力和/或力矩。

11.按照权利要求1或2所述的检测设备，其特征在于，所述检测设备包括存档装置，其用于存储关于车辆组合件的数据。

12.按照权利要求11所述的检测设备，其特征在于，在存档装置中，利用三维激光扫描仪采集的数据与利用摄像机采集的数据相结合地记录。

13.按照权利要求1或2所述的检测设备，其特征在于，所述检测设备包括报警装置，其用于在确定出不合规的安装误差和/或外观缺陷时向用户报警。

14.按照权利要求1或2所述的检测设备，其特征在于，所述检测设备包括显示装置，其用于向用户用图像显示检测结果和/或确定出的不合规的安装误差和/或外观缺陷。

15.车辆组合件生产***，其包括

用于输送车辆组合件的输送单元；以及

按照权利要求1至14之一所述的检测设备。