CN111301259A - 一种运输车与载货车的自动对接装填***、方法及计算机存储介质 - Google Patents

一种运输车与载货车的自动对接装填***、方法及计算机存储介质 Download PDF

Info

Publication number
CN111301259A
CN111301259A CN202010280933.6A CN202010280933A CN111301259A CN 111301259 A CN111301259 A CN 111301259A CN 202010280933 A CN202010280933 A CN 202010280933A CN 111301259 A CN111301259 A CN 111301259A
Authority
CN
China
Prior art keywords
transport vehicle
hoisting module
truck
data
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010280933.6A
Other languages
English (en)
Inventor
贵刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202010280933.6A priority Critical patent/CN111301259A/zh
Publication of CN111301259A publication Critical patent/CN111301259A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60P—VEHICLES ADAPTED FOR LOAD TRANSPORTATION OR TO TRANSPORT, TO CARRY, OR TO COMPRISE SPECIAL LOADS OR OBJECTS
    • B60P1/00—Vehicles predominantly for transporting loads and modified to facilitate loading, consolidating the load, or unloading
    • B60P1/54—Vehicles predominantly for transporting loads and modified to facilitate loading, consolidating the load, or unloading using cranes for self-loading or self-unloading
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/14—Measuring arrangements characterised by the use of optical techniques for measuring distance or clearance between spaced objects or spaced apertures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/42—Simultaneous measurement of distance and other co-ordinates

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本发明涉及车辆驾驶领域，提供了一种运输车与载货车的自动对接装填***、方法及计算机存储介质，其中***包括停车引导检测子***、吊装模块定位检测子***以及用于控制所述吊机的机械手的控制子***，所述停车引导检测子***包括监控摄像头、处理器、显示器、用于采集运输车的车体三维轮廓数据的16线激光雷达以及用于获取运输车图像的第一近红外相机；所述吊装模块定位检测子***包括第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶；所述控制子***根据停车引导检测子***、吊装模块定位检测子***的数据控制机械手装卸吊装模块。本发明能够实现载货车的辅助停车引导、吊装模块定位检测、自动操作控制。

Description

一种运输车与载货车的自动对接装填***、方法及计算机存 储介质
技术领域
本发明涉及车辆驾驶领域，具体涉及一种运输车与载货车的自动对接装填***、方法及计算机存储介质。
背景技术
随着人力成本不断提高，车辆物流企业急需要在降低运营成本、提升经营效率、减轻人员劳动强度等处加强创新改革。然而，目前运输车与载货车的对接装填一般采用人工操作的方式，不能实现货物的自动化对接装卸，人力成本高且人员劳动强度大。
发明内容
针对上述问题，本发明提供一种运输车与载货车的自动对接装填***、方法及计算机存储介质。
本发明的目的采用以下技术方案来实现：
本发明第一方面实施例提供了一种运输车与载货车的自动对接装填***，所述运输车和载货车上皆设置有吊装模块，所述载货车上还设有吊机，所述***包括停车引导检测子***、吊装模块定位检测子***以及用于控制所述吊机的机械手的控制子***，所述停车引导检测子***包括监控摄像头、处理器、显示器、用于采集运输车的车体三维轮廓数据的16线激光雷达以及用于获取运输车图像的第一近红外相机，所述16线激光雷达、第一近红外相机、监控摄像头和显示器皆与所述处理器连接；
所述处理器将所述车体三维轮廓数据和第一近红外相机采集的运输车图像进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息，以及，根据所述实时方位和距离信息确定引导数据，将所述引导数据与所述监控摄像头采集的监控实时图像进行结合，发送至所述显示器进行显示，从而引导所述运输车停靠在所述载货车的规定范围内；
所述处理器还在所述运输车停靠在所述载货车的规定范围内时，根据当前车体三维轮廓数据和当前运输车图像获取所述运输车相对于载货车的当前方位和距离信息，并将所述当前方位和距离信息发送至所述控制子***；
所述吊装模块定位检测子***包括第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶，所述第二近红外相机、激光测距传感器皆与所述控制子***连接；
所述第二近红外相机用于对吊装模块、吊装模块标靶和车辆标靶进行拍摄，获取拍摄图像；
所述控制子***根据所述拍摄图像计算分析得到吊装模块的实时位置信息，以及根据所述当前方位和距离信息、激光测距传感器的感测信息、所述实时位置信息控制所述机械手装卸吊装模块。
根据本发明第一方面的一种能够实现的方式，将所述车体三维轮廓数据和第一近红外相机采集的运输车图像进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息，具体包括：
对所述车体三维轮廓数据进行干扰背景滤除；
提取第一近红外相机采集的运输车图像的感兴趣区域，在所述感兴趣区域中提取对应于16线激光雷达扫描的三维点云数据；
将所述三维点云数据与车体三维轮廓数据进行数据融合处理。
根据本发明第一方面的一种能够实现的方式，所述第二近红外相机、近红外光源、激光测距传感器以整体模块形式布设于所述吊机的末端，所述的控制所述机械手装卸吊装模块，包括：
控制所述机械手取运输车上的吊装模块；
控制所述机械手将所述运输车上的吊装模块放到载货车；
控制所述机械手取所述载货车上的吊装模块；
控制所述机械手将所述载货车上的吊装模块放到所述运输车。
根据本发明第一方面的一种能够实现的方式，所述控制所述机械手取运输车上的吊装模块，具体执行：
根据所述当前方位和距离信息计算运输车上的吊装模块定位拍照位置坐标，控制吊机移动到与所述吊装模块定位拍照位置坐标对应的位置；
控制所述第二近红外相机拍照获取图像，通过图像处理计算得到运输车上的吊装模块的实际位置；
控制所述吊机移动到所述实际位置，接收激光测距传感器测量的所述运输车上的吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算所述运输车上的吊装模块的倾角，根据所述倾角进行机械手与所述运输车上的吊装模块的定位对接。
根据本发明第一方面的一种能够实现的方式，所述控制所述机械手取运输车上的吊装模块，还具体执行：在定位对接后控制显示器显示用于提示取吊装模块自动定位完成的提示信息。
根据本发明第一方面的一种能够实现的方式，所述第一近红外相机和第二近红外相机皆采用谱段850nm的近红外相机。
本发明第二方面提供了一种运输车与载货车的自动对接装填方法，所述运输车和载货车上皆设置有吊装模块，所述载货车上还设有吊机，所述吊机的末端安装有第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶，
所述方法包括以下步骤：
控制子***接收处理器发送的当前方位和距离信息，其中，所述处理器接收16线激光雷达采集的运输车的车体三维轮廓数据以及第一近红外相机获取的运输车图像数据；所述处理器将所述车体三维轮廓数据和运输车图像数据进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息；所述处理器根据所述实时方位和距离信息确定引导数据，将所述引导数据与所述监控摄像头采集的监控实时图像进行结合，发送至所述显示器进行显示；所述处理器在当前的实时方位和距离信息与前一次得到的实时方位和距离信息一致时，将所述当前方位和距离信息发送至控制子***；
所述控制子***根据所述当前方位和距离信息计算运输车上的吊装模块定位拍照位置坐标，控制吊机移动到与所述吊装模块定位拍照位置坐标对应的位置；
所述控制子***控制第二近红外相机对所述吊装模块、吊装模块标靶和车辆标靶进行拍摄，获取拍摄图像，通过图像处理计算得到运输车上的吊装模块的实际位置；
所述控制子***控制所述吊机移动到所述实际位置，接收所述激光测距传感器测量的所述运输车上的吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算所述运输车上的吊装模块的倾角，根据所述倾角控制机械手与所述运输车上的吊装模块进行定位对接。
根据本发明第二方面的一种能够实现的方式，所述处理器将所述车体三维轮廓数据和运输车图像数据进行数据融合处理，具体包括：
所述处理器对所述车体三维轮廓数据进行干扰背景滤除；
所述处理器提取第一近红外相机采集的运输车图像的感兴趣区域，在所述感兴趣区域中提取对应于16线激光雷达扫描的三维点云数据；
所述处理器将所述三维点云数据与车体三维轮廓数据进行数据融合处理。
根据本发明第二方面的一种能够实现的方式，所述方法还包括以下步骤：
所述控制子***控制带有吊装模块的吊机移动到载货车上方；
所述控制子***通过所述第二近红外相机拍摄载货车的车辆标靶图像，利用标靶的相互关系计算吊装模块平面定位位置；
所述控制子***控制所述吊机移动至吊装模块平面定位位置的上方；
所述控制子***控制所述吊机的机械手放置吊装模块到该吊装模块平面定位位置上。
本发明第三方面提供了一种计算机存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时执行如上所述的运输车与载货车的自动对接装填方法。
本发明的有益效果为：本发明由停车引导检测子***、吊装模块定位检测子***以及用于控制所述吊机的机械手的控制子***组成运输车与载货车的对接装填***，能够实现载货车的辅助停车引导、吊装模块定位检测、自动操作控制。本发明的运输车与载货车对接装填***及方法具有全天候工作、快速定位、高精度检测、自动对接的优点。
附图说明
利用附图对本发明作进一步说明，但附图中的实施例不构成对本发明的任何限制，对于本领域的普通技术人员，在不付出创造性劳动的前提下，还可以根据以下附图获得其它的附图。
图1是本发明一个示例性实施例的一种运输车与载货车的自动对接装填***的结构连接示意图；
图2是本发明一个示例性实施例的停车引导检测子***的安装位置示意图；
图3是本发明一个示例性实施例的停车引导检测子***的检测范围示意图；
图4是本发明一个示例性实施例的吊装模块定位检测子***的安装位置示意图；
图5是本发明一个示例性实施例的一种运输车与载货车的自动对接装填方法的流程示意图。
附图标记：
停车引导检测子***1、吊装模块定位检测子***2、控制子***3。
具体实施方式
结合以下实施例对本发明作进一步描述。
参见图1至图4，本发明第一方面实施例提供一种运输车与载货车的自动对接装填***，所述运输车和载货车上皆设置有吊装模块，所述载货车上还设有吊机。其中，根据吊机吊装半径，运输车车长、车宽、车高，载货车车长、车宽、车高，运输车车尾两侧对称安装两个所述吊装模块，载货车车尾安装所述吊机。
该***包括停车引导检测子***1、吊装模块定位检测子***2以及用于控制所述吊机的机械手的控制子***3，所述停车引导检测子***1包括监控摄像头、处理器、显示器、用于采集运输车的车体三维轮廓数据的16线激光雷达以及用于获取运输车图像的第一近红外相机，所述16线激光雷达、第一近红外相机、监控摄像头和显示器皆与所述处理器连接；
所述处理器将所述车体三维轮廓数据和第一近红外相机采集的运输车图像进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息，以及，根据所述实时方位和距离信息确定引导数据，将所述引导数据与所述监控摄像头采集的监控实时图像进行结合，发送至所述显示器进行显示，从而引导所述运输车停靠在所述载货车的规定范围内；
所述处理器还在所述运输车停靠在所述载货车的规定范围内时，根据当前车体三维轮廓数据和当前运输车图像获取所述运输车相对于载货车的当前方位和距离信息，并将所述当前方位和距离信息发送至所述控制子***3；
所述吊装模块定位检测子***2包括第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶，所述第二近红外相机、激光测距传感器皆与所述控制子***3连接；
所述第二近红外相机用于对吊装模块、吊装模块标靶和车辆标靶进行拍摄，获取拍摄图像；
所述控制子***3根据所述拍摄图像计算分析得到吊装模块的实时位置信息，以及根据所述当前方位和距离信息、激光测距传感器的感测信息、所述实时位置信息控制所述机械手装卸吊装模块。
本实施例中，由于运输车后部凹凸不平，体积又比较大，运输车外部特征信息随着时间可能会有所改变。为保证自动对接装填***持续稳定运行，不受外部环境干扰，并且降低硬件成本，本实施例中的停车引导检测子***1采用16线激光雷达、第一近红外相机和监控摄像头进行组合，能够满足全天候、车体可能变化工作要求。
本实施例中，运输车与载货车上都有吊装模块，其中运输车的吊装模块没有货物，载货车的吊装模块有货物，由于吊装模块具有一定高度差，将导致近红外相机拍摄的高度不相同，从而需要对运输车和载货车上吊装模块、车辆标靶、吊装模块标靶进行拍摄识别，通过图像识别算法计算获得吊装模块在机械手坐标系中的位置参数。
在一种能够实现的方式中，将所述车体三维轮廓数据和第一近红外相机采集的运输车图像进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息，具体包括：
对所述车体三维轮廓数据进行干扰背景滤除；
提取第一近红外相机采集的运输车图像的感兴趣区域，在所述感兴趣区域中提取对应于16线激光雷达扫描的三维点云数据；
将所述三维点云数据与车体三维轮廓数据进行数据融合处理。
其中，利用16线激光雷达得到的车体三维数据轮廓和近红外相机采集运输车的图像进行数据融合，首先需要进行近红外相机标定，再16线激光雷达标定和近红外相机联合标定，得到两者的标定参数和相互位置关系，再利用两者采集数据融合。
在一种能够实现的方式中，如图4所示，所述第二近红外相机、近红外光源、激光测距传感器以整体模块形式布设于所述吊机的末端，所述的控制所述机械手装卸吊装模块，包括：
控制所述机械手取运输车上的吊装模块；
控制所述机械手将所述运输车上的吊装模块放到载货车；
控制所述机械手取所述载货车上的吊装模块；
控制所述机械手将所述载货车上的吊装模块放到所述运输车。
其中，所述控制所述机械手取运输车上的吊装模块，具体执行：
根据所述当前方位和距离信息计算运输车上的吊装模块定位拍照位置坐标，控制吊机移动到与所述吊装模块定位拍照位置坐标对应的位置；
控制所述第二近红外相机拍照获取图像，通过图像处理计算得到运输车上的吊装模块的实际位置；
控制所述吊机移动到所述实际位置，接收激光测距传感器测量的所述运输车上的吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算所述运输车上的吊装模块的倾角，根据所述倾角进行机械手与所述运输车上的吊装模块的定位对接。
进一步地，所述控制所述机械手取运输车上的吊装模块，还具体执行：在定位对接后控制显示器显示用于提示取吊装模块自动定位完成的提示信息。
其中，放吊装模块到载货车的操作如下：首先获取吊装模块的放置吊装位置，载货车吊装模块位置是固定的，取走了哪个吊装模块，剩下哪个吊装模块是已知的，故从控制子***3获取吊装模块吊装位置。取运输车上的吊装模块过程中取走，可获得取吊装模块的定位位置，然后通知控制子***3执行吊机动作控制，将带有吊装模块的吊机移动到载货车上方。再通过吊机下方的近红外相机拍摄车辆标靶图像，利用标靶之间的相互关系计算出吊装模块平面定位位置，计算的精度如果不满足，重复进行移动吊机位置，再相机拍摄计算。直到精度满足要求后，在显控界面输出放吊装模块自动定位完成，需要人工确认对位是否准确。确认准确对位后，进行自动吊装模块放置动作。
载货车的吊装模块有物品，需要搬运出去。取载货车上的吊装模块定位操作与取运输车上的吊装模块的操作类似，区别在于获取吊装模块位置数据不同。首先获取载货车的吊装模块位置数据，根据该数据计算吊装模块定位拍照位置坐标，通知控制子***3控制吊机移动到相应的拍摄位置，其后采用近红外相机拍照获取图像，通过图像处理计算吊装模块的精确位置，再次通知控制子***3控制吊机移动到相应的位置，该位置也是激光测距传感器的工作位置，通过激光测距传感器测量吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算吊装模块的倾角，再次通知控制子***3控制吊机移动到相应的位置，此时整个自动对接过程完成，在显控界面输出取吊装模块自动定位完成，需要人工确认对位是否准确。确认准确对位后，进行自动吊装模块放置动作。
控制所述机械手将所述载货车上的吊装模块放到所述运输车的操作与放吊装模块到载货车的操作类似，区别在于获取吊装模块吊装位置数据来源不同，由于吊装模块在运输车上的放置位置限制，需要进行避让位置补偿操作。首先获取吊装模块的取料吊装位置，吊装模块在取运输车上的吊装模块过程中取走，可获取得到取料吊装的倾角位置。倾角位置用于指导调整相机的姿态，使得相机与被拍摄面保持水平，保证相机图像处理得到的位置精度。由于吊装模块在运输车上的放置位置限制，靶标布置在吊装模块的下方，物理安装上对准的动作完成时，吊装模块将遮挡靶标。因此，实际处理时为避开这个问题，采用软件辅助偏置定位的方式，首先对准到设定的偏置位置，最后通过补偿偏置的值，完成吊装模块放置时的对准。
在一种能够实现的方式中，所述第一近红外相机和第二近红外相机皆采用谱段850nm的近红外相机。所述近红外光源采用850nm近红外波段补光。
由于可见光相机在黑夜需要可见光源照射，多辆运输车光源照射会导致光源照射混乱。红外相机在黑夜根据红外成像进行识别，运输车成像精度不高，图像轮廓不清楚，无法精确定位。微光成像相机成像质量精度不高，无法全黑场景工作和精确定位。本实施例采用谱段850nm的近红外相机，不仅在可见光下清晰成像，同时在夜晚，通过近红外光源850nm近红外波段补光，也能清晰成像，采用该种配置可以在白天和黑夜拍摄图像。
其中，16激光雷达采用TOF全波形方案，能够对360°周围环境进行扫描探测。在进行16激光雷达的型号选择时，根据车辆停靠定位测量精度，要考虑的技术指标包括：扫描角度、扫描半径、测量精度、角度分辨率、测量频率和通信方式。
其中，16线激光雷达、第一近红外相机、监控摄像头安装在载货车车尾侧，安装朝向都是水平的平视视野朝向，能够摄像后面视野图像，安装停车引导检测子***1位置如图2所示。16线激光雷达、近红外相机、监控摄像头都需要可以拍摄全运输车，全天候在视野内都可以工作。
进一步地，停车引导检测子***1的各部分可组合装配成一个组件，外部安装防护外壳，以减少因载货车行驶过程中环境温度、污水、杂质干扰，提升停车引导检测子***1的环境适应性。为了确保在低温环境中16线激光雷达和近红外相机能正常工作，停车引导检测子***1内可布置局部加热模块，提升停车引导检测子***1内部的环境温度。
在一种能够实现的方式中，所述监控摄像头采用日夜全彩监控摄像机，从而可以24小时全天候彩色监控摄像，即使在微光环境下依然呈现彩色图像，并且在光照条件不足或无光照条件下，可以自动补光操作，实现实时的拍摄彩色监控动态图像。可以根据颜色分类、清晰度、有效距离、镜头大小、焦距进行日夜全彩监控摄像机的型号选择。
其中，吊装模块标靶是指设置于吊装模块上的标靶，车辆标靶是指设置于运输车、载货车上的标靶。在一种能够实施的方式中，标靶采用圆形图案，黑红90°间隔循环，直径大小2cm，保证足够的识别率和识别精度，标靶采用印刷方式在吊装模块、载货车、运输车上固定安装。为保证其定位精度，每个吊装模块上单侧布置两个标靶。载货车和运输车上的标靶位置以吊装模块的安装孔为基准，与吊装模块上的标靶点同侧布置。
如图5所示，本发明第二方面实施例提供了一种运输车与载货车的自动对接装填方法，该方法依托于上述的运输车与载货车的自动对接装填***。
其中所述运输车和载货车上皆设置有吊装模块，所述载货车上还设有吊机，所述吊机的末端安装有第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶，
所述方法包括以下步骤：
S1控制子***接收处理器发送的当前方位和距离信息，其中，所述处理器接收16线激光雷达采集的运输车的车体三维轮廓数据以及第一近红外相机获取的运输车图像数据；所述处理器将所述车体三维轮廓数据和运输车图像数据进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息；所述处理器根据所述实时方位和距离信息确定引导数据，将所述引导数据与所述监控摄像头采集的监控实时图像进行结合，发送至所述显示器进行显示；所述处理器在当前的实时方位和距离信息与前一次得到的实时方位和距离信息一致时，将所述当前方位和距离信息发送至控制子***；
S2所述控制子***根据所述当前方位和距离信息计算运输车上的吊装模块定位拍照位置坐标，控制吊机移动到与所述吊装模块定位拍照位置坐标对应的位置；
S3所述控制子***控制第二近红外相机对所述吊装模块、吊装模块标靶和车辆标靶进行拍摄，获取拍摄图像，通过图像处理计算得到运输车上的吊装模块的实际位置；
S4所述控制子***控制所述吊机移动到所述实际位置，接收所述激光测距传感器测量的所述运输车上的吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算所述运输车上的吊装模块的倾角，根据所述倾角控制机械手与所述运输车上的吊装模块进行定位对接。
在一种能够实现的方式中，所述处理器将所述车体三维轮廓数据和运输车图像数据进行数据融合处理，具体包括：
所述处理器对所述车体三维轮廓数据进行干扰背景滤除；
所述处理器提取第一近红外相机采集的运输车图像的感兴趣区域，在所述感兴趣区域中提取对应于16线激光雷达扫描的三维点云数据；
所述处理器将所述三维点云数据与车体三维轮廓数据进行数据融合处理。
进一步地，所述方法还包括以下步骤：
所述控制子***控制带有吊装模块的吊机移动到载货车上方；
所述控制子***通过所述第二近红外相机拍摄载货车的车辆标靶图像，利用标靶的相互关系计算吊装模块平面定位位置；
所述控制子***控制所述吊机移动至吊装模块平面定位位置的上方；
所述控制子***控制所述吊机的机械手放置吊装模块到该吊装模块平面定位位置上。
本发明第三方面提供了一种计算机存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时执行如上所述的运输车与载货车的自动对接装填方法。
本发明由停车引导检测子***、吊装模块定位检测子***以及用于控制所述吊机的机械手的控制子***组成运输车与载货车的对接装填***，能够实现载货车的辅助停车引导、吊装模块定位检测、自动操作控制。本发明的运输车与载货车对接装填***及方法具有全天候工作、快速定位、高精度检测、自动对接的优点。
最后应当说明的是，以上实施例仅用以说明本发明的技术方案，而非对本发明保护范围的限制，尽管参照较佳实施例对本发明作了详细地说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明技术方案的实质和范围。

Claims (10)

1.一种运输车与载货车的自动对接装填***，所述运输车和载货车上皆设置有吊装模块，所述载货车上还设有吊机，其特征是，所述***包括停车引导检测子***、吊装模块定位检测子***以及用于控制所述吊机的机械手的控制子***，所述停车引导检测子***包括监控摄像头、处理器、显示器、用于采集运输车的车体三维轮廓数据的16线激光雷达以及用于获取运输车图像的第一近红外相机，所述16线激光雷达、第一近红外相机、监控摄像头和显示器皆与所述处理器连接；
所述处理器将所述车体三维轮廓数据和第一近红外相机采集的运输车图像进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息，以及，根据所述实时方位和距离信息确定引导数据，将所述引导数据与所述监控摄像头采集的监控实时图像进行结合，发送至所述显示器进行显示，从而引导所述运输车停靠在所述载货车的规定范围内；
所述处理器还在所述运输车停靠在所述载货车的规定范围内时，根据当前车体三维轮廓数据和当前运输车图像获取所述运输车相对于载货车的当前方位和距离信息，并将所述当前方位和距离信息发送至所述控制子***；
所述吊装模块定位检测子***包括第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶，所述第二近红外相机、激光测距传感器皆与所述控制子***连接；
所述第二近红外相机用于对吊装模块、吊装模块标靶和车辆标靶进行拍摄，获取拍摄图像；
所述控制子***根据所述拍摄图像计算分析得到吊装模块的实时位置信息，以及根据所述当前方位和距离信息、激光测距传感器的感测信息、所述实时位置信息控制所述机械手装卸吊装模块。
2.根据权利要求1所述的一种运输车与载货车的自动对接装填***，其特征是，将所述车体三维轮廓数据和第一近红外相机采集的运输车图像进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息，具体包括：
对所述车体三维轮廓数据进行干扰背景滤除；
提取第一近红外相机采集的运输车图像的感兴趣区域，在所述感兴趣区域中提取对应于16线激光雷达扫描的三维点云数据；
将所述三维点云数据与车体三维轮廓数据进行数据融合处理。
3.根据权利要求1所述的一种运输车与载货车的自动对接装填***，其特征是，所述第二近红外相机、近红外光源、激光测距传感器以整体模块形式布设于所述吊机的末端，所述的控制所述机械手装卸吊装模块，包括：
控制所述机械手取运输车上的吊装模块；
控制所述机械手将所述运输车上的吊装模块放到载货车；
控制所述机械手取所述载货车上的吊装模块；
控制所述机械手将所述载货车上的吊装模块放到所述运输车。
4.根据权利要求3所述的一种运输车与载货车的自动对接装填***，其特征是，所述控制所述机械手取运输车上的吊装模块，具体执行：
根据所述当前方位和距离信息计算运输车上的吊装模块定位拍照位置坐标，控制吊机移动到与所述吊装模块定位拍照位置坐标对应的位置；
控制所述第二近红外相机拍照获取图像，通过图像处理计算得到运输车上的吊装模块的实际位置；
控制所述吊机移动到所述实际位置，接收激光测距传感器测量的所述运输车上的吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算所述运输车上的吊装模块的倾角，根据所述倾角进行机械手与所述运输车上的吊装模块的定位对接。
5.根据权利要求4所述的一种运输车与载货车的自动对接装填***，其特征是，所述控制所述机械手取运输车上的吊装模块，还具体执行：在定位对接后控制显示器显示用于提示取吊装模块自动定位完成的提示信息。
6.根据权利要求1所述的一种运输车与载货车的自动对接装填***，其特征是，所述第一近红外相机和第二近红外相机皆采用谱段850nm的近红外相机。
7.一种运输车与载货车的自动对接装填方法，所述运输车和载货车上皆设置有吊装模块，所述载货车上还设有吊机，其特征是，所述吊机的末端安装有第二近红外相机、近红外光源、激光测距传感器、吊装模块标靶和车辆标靶，
所述方法包括以下步骤：
控制子***接收处理器发送的当前方位和距离信息，其中，所述处理器接收16线激光雷达采集的运输车的车体三维轮廓数据以及第一近红外相机获取的运输车图像数据；所述处理器将所述车体三维轮廓数据和运输车图像数据进行数据融合处理，得到所述运输车相对于载货车的实时方位和距离信息；所述处理器根据所述实时方位和距离信息确定引导数据，将所述引导数据与所述监控摄像头采集的监控实时图像进行结合，发送至所述显示器进行显示；所述处理器在当前的实时方位和距离信息与前一次得到的实时方位和距离信息一致时，将所述当前方位和距离信息发送至控制子***；
所述控制子***根据所述当前方位和距离信息计算运输车上的吊装模块定位拍照位置坐标，控制吊机移动到与所述吊装模块定位拍照位置坐标对应的位置；
所述控制子***控制第二近红外相机对所述吊装模块、吊装模块标靶和车辆标靶进行拍摄，获取拍摄图像，通过图像处理计算得到运输车上的吊装模块的实际位置；
所述控制子***控制所述吊机移动到所述实际位置，接收所述激光测距传感器测量的所述运输车上的吊装模块上各点的相对距离信息，根据各点的平面相对位置，计算所述运输车上的吊装模块的倾角，根据所述倾角控制机械手与所述运输车上的吊装模块进行定位对接。
8.根据权利要求7所述的一种运输车与载货车的自动对接装填方法，其特征是，所述处理器将所述车体三维轮廓数据和运输车图像数据进行数据融合处理，具体包括：
所述处理器对所述车体三维轮廓数据进行干扰背景滤除；
所述处理器提取第一近红外相机采集的运输车图像的感兴趣区域，在所述感兴趣区域中提取对应于16线激光雷达扫描的三维点云数据；
所述处理器将所述三维点云数据与车体三维轮廓数据进行数据融合处理。
9.根据权利要求7所述的一种运输车与载货车的自动对接装填方法，其特征是，所述方法还包括以下步骤：
所述控制子***控制带有吊装模块的吊机移动到载货车上方；
所述控制子***通过所述第二近红外相机拍摄载货车的车辆标靶图像，利用标靶的相互关系计算吊装模块平面定位位置；
所述控制子***控制所述吊机移动至吊装模块平面定位位置的上方；
所述控制子***控制所述吊机的机械手放置吊装模块到该吊装模块平面定位位置上。
10.一种计算机存储介质，其上存储有计算机程序，其特征是，所述计算机程序被处理器执行时执行如权利要求7-9任一项所述的运输车与载货车的自动对接装填方法。
CN202010280933.6A 2020-04-10 2020-04-10 一种运输车与载货车的自动对接装填***、方法及计算机存储介质 Pending CN111301259A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010280933.6A CN111301259A (zh) 2020-04-10 2020-04-10 一种运输车与载货车的自动对接装填***、方法及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010280933.6A CN111301259A (zh) 2020-04-10 2020-04-10 一种运输车与载货车的自动对接装填***、方法及计算机存储介质

Publications (1)

Publication Number Publication Date
CN111301259A true CN111301259A (zh) 2020-06-19

Family

ID=71153934

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010280933.6A Pending CN111301259A (zh) 2020-04-10 2020-04-10 一种运输车与载货车的自动对接装填***、方法及计算机存储介质

Country Status (1)

Country Link
CN (1) CN111301259A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111806327A (zh) * 2020-08-19 2020-10-23 八时物流科技(成都)有限公司 一种车载平衡吊装设备及车载智能交换箱***
CN112363130A (zh) * 2020-11-30 2021-02-12 东风汽车有限公司 车载传感器标定方法、存储介质及***
CN112363510A (zh) * 2020-11-23 2021-02-12 西南交通大学 一种自动驾驶编组车自动对接方法
CN112505712A (zh) * 2020-11-17 2021-03-16 中国民航大学 基于测温成像仪和激光雷达的飞机客舱门检测***
CN113029124A (zh) * 2021-03-03 2021-06-25 吉林大学 一种基于红外视觉引导和激光测距的三维姿态位置测量装置
CN113126119A (zh) * 2021-04-02 2021-07-16 上海机电工程研究所 融合点云数据与机器视觉的精定位方法、***及介质
CN113358070A (zh) * 2021-07-07 2021-09-07 苏州鑫睿益荣信息技术有限公司 一种汽车刹车片平整度及销钉高度检测***及其检测方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111806327A (zh) * 2020-08-19 2020-10-23 八时物流科技(成都)有限公司 一种车载平衡吊装设备及车载智能交换箱***
CN111806327B (zh) * 2020-08-19 2023-09-19 成都物天物联网科技有限责任公司 一种车载智能交换箱***
CN112505712A (zh) * 2020-11-17 2021-03-16 中国民航大学 基于测温成像仪和激光雷达的飞机客舱门检测***
CN112363510A (zh) * 2020-11-23 2021-02-12 西南交通大学 一种自动驾驶编组车自动对接方法
CN112363130A (zh) * 2020-11-30 2021-02-12 东风汽车有限公司 车载传感器标定方法、存储介质及***
CN112363130B (zh) * 2020-11-30 2023-11-14 东风汽车有限公司 车载传感器标定方法、存储介质及***
CN113029124A (zh) * 2021-03-03 2021-06-25 吉林大学 一种基于红外视觉引导和激光测距的三维姿态位置测量装置
CN113029124B (zh) * 2021-03-03 2024-01-16 吉林大学 一种基于红外视觉引导和激光测距的三维姿态位置测量装置
CN113126119A (zh) * 2021-04-02 2021-07-16 上海机电工程研究所 融合点云数据与机器视觉的精定位方法、***及介质
CN113358070A (zh) * 2021-07-07 2021-09-07 苏州鑫睿益荣信息技术有限公司 一种汽车刹车片平整度及销钉高度检测***及其检测方法

Similar Documents

Publication Publication Date Title
CN111301259A (zh) 一种运输车与载货车的自动对接装填***、方法及计算机存储介质
US10227017B2 (en) Camera-based vehicle position determination with known target
CN111201879B (zh) 基于图像识别的粮食收割、运输一体化装载装置/方法
US10315697B2 (en) Vehicle comprising a manoeuvring system
CN212422936U (zh) 一种运输车与载货车的自动对接装填***
CN108263950A (zh) 基于机器视觉的码头岸桥吊具自动着箱***及方法
KR20190019403A (ko) 차량 레이더 검사 시스템 및 그 방법
CN111192189A (zh) 一种汽车外形的三维自动检测方法及***
KR20220123726A (ko) 비-강성 스테레오 비전 카메라 시스템
CN103996183A (zh) 校准机动车辆中的传感器总成的方法
US11263742B2 (en) Vehicle supply chain damage tracking system
WO2020137312A1 (ja) 測位装置及び移動体
CN110641721B (zh) 一种登机桥停靠方法
CN107067439B (zh) 一种基于车头检测的集装箱卡车定位与引导方法
CN111814936A (zh) 基于空间扫描的集装箱识别方法、***、设备及存储介质
KR20210019014A (ko) 공간의 복잡한 표면에서 지점의 위치를 결정하기 위한 방법 및 플랜트
WO2020137315A1 (ja) 測位装置及び移動体
WO2020090897A1 (ja) 位置検出装置、位置検出システム、遠隔制御装置、遠隔制御システム、位置検出方法、及びプログラム
CN111103608A (zh) 一种用在林业勘测工作中的定位装置及方法
US11097670B2 (en) Method for calibrating image data of an imaging system for a vehicle combination
WO2024035918A1 (en) Autonomous solar installation using artificial intelligence
CN110696016A (zh) 一种适用于地铁车辆列检工作的智能机器人
CN210879689U (zh) 一种适用于地铁车辆列检工作的智能机器人
CN114897981A (zh) 一种基于视觉检测的吊具位姿识别方法
CN109756698A (zh) 应用于车载摄像***的运动物体预警方法、车载摄像***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination