CN216116064U

CN216116064U - 掘进机的位姿标定***

Info

Publication number: CN216116064U
Application number: CN202023112418.1U
Authority: CN
Inventors: 刘洋; 崔玲玲; 张东旭
Original assignee: Sany Heavy Equipment Co Ltd
Current assignee: Sany Heavy Equipment Co Ltd
Priority date: 2020-12-22
Filing date: 2020-12-22
Publication date: 2022-03-22
Anticipated expiration: 2030-12-22

Abstract

本实用新型涉及掘进机位姿测量技术领域，提供了一种掘进机的位姿标定***，该***至少包括掘进机、捷联惯导、第一图像采集装置、第二图像采集装置、激光靶以及激光指向仪，其中，激光靶和激光指向仪均设于巷道内，激光靶悬挂在激光指向仪前侧，激光指向仪用于在激光靶面上形成光斑；第一图像采集装置和第二图像采集装置均设于掘进机上，用于通过采集激光靶上的光斑图像；捷联惯导，设于掘进机上，用于确定图像采集装置坐标系相对捷联惯导的安装矩阵，其中，安装矩阵用于表征图像采集装置坐标系相对所述捷联惯导的安装角，以标定捷联惯导在巷道内的位姿信息。通过本实用新型，解决了相关技术中掘进机的位姿标定操作复杂、成本高的技术问题。

Description

掘进机的位姿标定***

技术领域

本实用新型涉及掘进机位姿测量技术领域，具体而言，涉及一种掘进机的位姿标定***。

背景技术

相关技术中，标定摄像头坐标系与捷联惯导坐标系的常用方法是通过光学传递方法进行的，具体地，通过在摄像头壳体上安装一个标准的六面体，并通过专业设备调整六面体，使六面体各面分别垂直于摄像头坐标系的各轴，此时摄像头壳体上六面体各面的法线即可代表摄像头坐标系各轴向；另一方面，在捷联惯导壳体上也安装一个标准的六面体，通过专业设备调整六面体，使六面体各面分别垂直于惯导坐标系的各轴，此时惯导壳体上六面体各面的法线即可代表惯导坐标系各轴向。完成上述工作后，将惯导安装到用户***中，通过经纬仪即可测到两个六面体之间的角度关系，即完成了安装角标定。

上述方案非常直观，但存在以下问题：摄像头壳体上的六面体必须在专业的光学实验室提前安装并校准，操作复杂，试验费用也很高。惯导壳体上的六面体需要惯导厂家在专业的惯性技术实验室提前安装并校准，操作复杂，专业性要求较高，试验费用也很高；另外，六面体的成本也较高，一般用于要求极高的军用高精度领域。

针对上述相关技术中存在的技术问题，目前没有提出有效的解决方案。

实用新型内容

鉴于上述问题，本实用新型提出了一种掘进机的位姿标定***，以至少解决相关技术中掘进机的位姿标定操作复杂、成本高的技术问题。所述技术方案如下：

本实用新型提供了一种掘进机的位姿标定***，所述***至少包括掘进机、捷联惯导、第一图像采集装置、第二图像采集装置、激光靶以及激光指向仪，其中，所述激光靶和所述激光指向仪均设于巷道内，所述激光靶悬挂在所述激光指向仪前侧，所述激光指向仪用于在所述激光靶面上形成光斑；所述第一图像采集装置和所述第二图像采集装置均设于所述掘进机上，用于通过采集所述激光靶上的光斑图像；所述捷联惯导，设于所述掘进机上，用于确定所述图像采集装置坐标系相对所述捷联惯导的安装矩阵，其中，所述安装矩阵用于表征所述图像采集装置坐标系相对所述捷联惯导的安装角，以标定所述捷联惯导在所述巷道内的位姿信息。

在一种可能的实现方式中，所述***还包括激光测距装置，其中，所述激光测距装置，设于所述巷道内，且设于所述第一图像采集装置、所述第二图像采集装置和所述激光靶之间，用于测量所述第一图像采集装置、所述第二图像采集装置和所述激光靶面上的光斑相对所述激光测距装置的位移矢量。

在另一种可能的实现方式中，所述激光测距装置为全站仪。

在另一种可能的实现方式中，所述激光指向仪发射的光线平行于所述巷道设定的水平面方向。

在另一种可能的实现方式中，所述第一图像采集装置为第一摄像头，所述第二图像采集装置为第二摄像头。

在另一种可能的实现方式中，所述第一图像采集装置相对所述光斑的连线方向与所述第二图像采集装置相对所述光斑的连线方向空间内不平行。

在另一种可能的实现方式中，所述激光靶安装于所述掘进机后方巷道顶面或侧面上。

在另一种可能的实现方式中，所述激光靶采用半透明材料制作而成。

借由上述技术方案，本实用新型实施例提供的掘进机的位姿标定***，通过在掘进机上设两个图像采集装置，在巷道内设激光靶和激光指向仪，通过激光指向仪在激光靶面上形成光斑，捷联惯导设于所述掘进机上，掘进机位于巷道内；首先，获取两个图像采集装置相对激光靶面上光斑的两个位移矢量，且两个位移矢量空间内不平行；然后，根据两个位移矢量以及图像采集装置坐标系相对捷联惯导壳体坐标系的投影关系确定图像采集装置坐标系相对捷联惯导的安装矩阵，即得到图像采集装置坐标系相对捷联惯导的安装角，以实现标定捷联惯导在巷道内的位姿信息，操作简单，成本低，解决了相关技术中掘进机的位姿标定操作复杂、成本高的技术问题，进而提高了捷联惯导在巷道内位姿信息的准确度。

附图说明

为了更清楚地说明本实用新型实施例的技术方案，下面将对本实用新型实施例描述中所需要使用的附图作简单地介绍。

图1是根据本实用新型实施例提供的一种基于双目视觉和捷联惯导的掘进机位姿测量***示意图；

图2是根据本实用新型实施提供的一种掘进机的位姿标定涉及的坐标系标定的示意图；

图3是根据本实用新型实施例提供的安装角标定方法原理示意图。

具体实施方式

下面将参照附图更详细地描述本实用新型的示例性实施例。虽然附图中显示了本实用新型的示例性实施例，然而应当理解，可以以各种形式实现本实用新型而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本实用新型，并且能够将本实用新型的范围完整的传达给本领域的技术人员。

需要说明的是，本实用新型的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用在适当情况下可以互换，以便这里描述的本实用新型的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”及其变体要被解读为意味着“包括但不限于”的开放式术语。

为了解决相关技术存在的技术问题，在本实施例中提供了一种掘进机的位姿标定***。下面以具体地实施例对本实用新型的技术方案以及本实用新型的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本实用新型的实施例进行描述。

在本案的一个应用场景中，采用掘进机挖掘巷道时，要求挖掘出的巷道是沿着激光指向仪给出的方向，且上下左右边界相对激光指向仪光线的距离满足预定要求，通过在车上安装两个摄像头，采用半透明材料制作激光靶并将其悬挂在激光指向仪前面，以保证激光指向仪能够照到激光靶面形成光斑，然后通过两个摄像头同时采集光斑图像，基于双目视觉技术即可确定车辆相对光斑的位移。双目视觉确定的车辆相对于光斑的位移是在相机坐标系中表示的，必须将其转换到巷道坐标系才能与光斑坐标相加得到车辆在巷道坐标系中的坐标，如果已知摄像头坐标系和提供航姿信息的捷联惯导之间的安装角度时，可通过航姿信息将其变换到巷道坐标系，从而确定车身在巷道坐标系中的位置信息。如何准确标定摄像头坐标系相对捷联惯导的安装角是上述方案成功与否法关键。

本实用新型提供一种掘进机的位姿标定***，该***至少包括掘进机、捷联惯导、第一图像采集装置、第二图像采集装置、激光靶以及激光指向仪，其中，

激光靶和激光指向仪均设于巷道内，激光靶悬挂在激光指向仪前侧，激光指向仪用于在激光靶面上形成光斑；

其中，激光指向仪发射的光线平行于巷道设定的水平面方向。

第一图像采集装置和第二图像采集装置均设于掘进机上，用于通过采集激光靶上的光斑图像；

在本实施例中，通过光斑图像获取第一图像采集装置相对光斑的第一位移矢量，以及第二图像采集装置相对光斑的第二位移矢量；其中，第一位移矢量和第二位移矢量空间内不平行；

可选的，本实施例中的图像采集装置为摄像头。

在本实施例中，利用双目视觉标定摄像头相对捷联惯导的安装角，是激光指向仪位置信息引入的关键。其中，双目检测的原理：通过对两幅图像视差的计算，直接对前方景物(图像所拍摄到的范围)进行距离测量，而无需判断前方出现的是什么类型的障碍物。所以对于任何类型的障碍物，都能根据距离信息的变化，进行必要的预警或制动；双目摄像头的原理与人眼相似，人眼能够感知物体的远近，是由于两只眼睛对同一个物体呈现的图像存在差异，也称“视差”。物体距离越远，视差越小；反之，视差越大。双目视觉原理一般由双摄像机(即上述图像采集装置)从不同角度同时获得被测物的两幅数字图像；并基于视差原理恢复出物体的三维几何信息，重建物体三维轮廓及位置。

在本实施例中，利用第一位移矢量和第二位移矢量空间内不平行的特性，来完成图像采集装置坐标系相对捷联惯导的安装矩阵的标定。通过本实施例实现激光指向仪位置信息引入，代替了人工对点，不仅减少了人力还提高了准确度。

捷联惯导，设于掘进机上，用于确定图像采集装置坐标系相对捷联惯导的安装矩阵，其中，安装矩阵用于表征图像采集装置坐标系相对捷联惯导的安装角，以标定捷联惯导在巷道内的位姿信息。

可选的，通过根据图像采集装置坐标系相对捷联惯导壳体坐标系的第一投影关系、第一位移矢量和第二位移矢量确定安装矩阵。

在本案的一个可选的实施例中，该***还包括激光测距装置，其中，激光测距装置，设于巷道内，且设于第一图像采集装置、第二图像采集装置和激光靶之间，用于测量第一图像采集装置、第二图像采集装置和激光靶面上的光斑相对激光测距装置的位移矢量。

在本案的一个可选的实施例中，激光测距装置为全站仪。本实施例中的激光测距装置优先全站仪。

为了标定安装矩阵，采用全站仪对

和

进行间接测量，通过将全站仪置于摄像头3和4与激光靶面之间，采用全站仪即可实现摄像头相对捷联惯导安装角的标定，操作简单，便于使用现场的操作。

在本案的一个可选的实施例中，第一图像采集装置为第一摄像头，第二图像采集装置为第二摄像头。

在本案的一个可选的实施例中，第一图像采集装置相对光斑的连线方向与第二图像采集装置相对光斑的连线方向空间内不平行。

在本案的一个可选的实施例中，激光靶安装于掘进机后方巷道顶面或侧面上。

在本案的一个可选的实施例中，激光靶采用半透明材料制作而成。

本实用新型实施例提供的掘进机的位姿标定***，通过在掘进机上设两个图像采集装置，在巷道内设激光靶和激光指向仪，通过激光指向仪在激光靶面上形成光斑，捷联惯导设于掘进机上，掘进机位于巷道内；首先，获取两个图像采集装置相对激光靶面上光斑的两个位移矢量，且两个位移矢量空间内不平行；然后，根据两个位移矢量以及图像采集装置坐标系相对捷联惯导壳体坐标系的投影关系确定图像采集装置坐标系相对捷联惯导的安装矩阵，即得到图像采集装置坐标系相对捷联惯导的安装角，实现了标定捷联惯导在巷道内的位姿信息，操作简单，成本低，解决了相关技术中掘进机的位姿标定操作复杂、成本高的技术问题，进而提高了捷联惯导在巷道内位姿信息的准确度。

在本案的一个实施例中，针对的***如图1所示，图1是根据本实用新型实施例提供的一种基于双目视觉和捷联惯导的掘进机位姿测量***示意图，该***包括安装在掘进机车身1上的捷联惯导2，安装在掘进机车身1上的摄像头3(即上述第一图像采集装置)和摄像头4(即上述第二图像采集装置)、安装在巷道上的激光靶5、安装在巷道上的激光指向仪6，以及在激光靶面上形成的光斑7。

图2是根据本实用新型实施提供的一种掘进机的位姿标定涉及的坐标系标定的示意图，针对图1提供的***，对***中各个设备进行坐标系标定。

其中，巷道坐标系t的原点位于激光指向仪上，y_t在水平面内沿激光发射方向，z_t轴竖直向上，x_t、y_t和z_t构成右手直角坐标系。摄像头4的坐标系c(即上述图像采集装置坐标系)，简称摄像头坐标系，其原点位于摄像头光心，z_c沿摄像头光轴方向，x_c在焦平面内向右且与z_c垂直，x_c、y_c和z_c构成右手直角坐标系。捷联惯导壳体坐标系b固连于捷联惯导壳体，x_b轴指向车身右侧，y_b轴指向车身前方，z_b轴指向车身上方，x_b、y_b和z_b构成右手直角坐标系。地理坐标系n在图3中没有画出，该坐标系原点与b系原点重合，x_n指向正东，y_n指向正北，z_n指向天，x_n、y_n和z_n构成右手直角坐标系。

掘进机需要捷联惯导提供其相对巷道坐标系的位移信息

(即上述位姿信息)，如公式(1)：

其中：

为导航系巷道坐标系n到巷道坐标系t的旋转矩阵，是巷道设计值，属于已知量；

有捷联惯导给出，属于已知量；

为捷联惯导相对摄像头4的位移矢量在惯导壳体系b的投影，属于已知量；

为摄像头4相对激光靶面上光斑的位移矢量r₄在摄像头坐标系的投影，由摄像头3和摄像头4构成的双目视觉***测量；

为摄像头坐标系相对捷联惯导的安装矩阵，必须在***投入使用前通过标定方法确定。

摄像头3相对激光靶面上光斑的位移矢量r₃(第一位移矢量)和摄像头4相对激光靶面上光斑的位移矢量r₄(第二位移矢量)不平行，本实用新型根据这一特性进行摄像头坐标系c相对捷联惯导壳体系b的安装矩阵

的标定。

摄像头3和摄像头4根据双目视觉原理测得矢量r₃和r₄在摄像头4的坐标系c(图像采集装置坐标系)内的投影

和

根据r₃和r₄在c和b系的投影关系得公式(2)。

在计算得到

和

之后，可计算得到上述公式(3)。

为标定安装矩阵

采用全站仪对

和

进行间接测量，测量原理见图3，图3是根据本实用新型实施例提供的安装角标定方法原理示意图。

图3中o为全站仪所在位置，全站仪输出结果为

和

即图3中r_A、r_B和r_C在巷道坐标系的投影。根据矢量合成法则得公式(4)和公式(5)：

进一步利用

和

两个已知量将

和

变换到b系为公式(6)和公式(7)：

将

和

带入公式(2)即可得到

的标定结果。

考虑到

和

都存在测量误差，所以实际标定算法首先将上述测量结果归一化：

对各个投影矢量的矩阵进行正交化，得到正交矩阵，来计算安装角，可以减小测量误差对角度标定结果的影响。

然后构造与v₃和v₄正交的归一化矢量

和

则

和

存在以下关系：

由此得：

综上，本实用新型工作过程包括如下步骤:

步骤1:根据双目视觉原理测得摄像头3相对激光靶面上光斑的位移矢量r₃在摄像头4的坐标系c内的投影

见附图2；

步骤2:根据双目视觉原理测得摄像头4相对激光靶面上光斑的位移矢量r₄在摄像头4的坐标系c内的投影

见附图2；

步骤3:将全站仪置于摄像头3和4与激光靶面之间，测量摄像头3、摄像头4和激光靶面上的光斑相对于全站仪的矢量

和

步骤4:计算r₃和r₄在巷道坐标系的投影

和

步骤5:计算r₃和r₄在惯导壳体坐标系b的投影

和

步骤6:计算

和

的归一化矢量，得到单位正交矩阵：

步骤7:构造与v₃和v₄正交的归一化矢量

和

步骤8:计算最终的标定结果

通过本实用新型实施例至少具有以下有益效果：

(1)实现激光指向仪位置信息引入，替代人工对点；

(2)标定双目视觉摄像头相对捷联惯导的安装角，是激光指向仪位置信息引入的关键；

(3)采用全站仪即可实现摄像头相对捷联惯导安装角的标定，操作简单，便于使用现场的操作；

(4)本实用新型不需要陀螺寻北仪和平行光管等专业设备，费用低。

显然，本领域的技术人员应该明白，上述的本实用新型的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本实用新型不限制于任何特定的硬件和软件结合。

以上所述仅为本实用新型的优选实施例而已，并不用于限制本实用新型，对于本领域的技术人员来说，本实用新型可以有各种更改和变化。凡在本实用新型的原则之内，所作的任何修改、等同替换、改进等，均应包含在本实用新型的保护范围之内。

Claims

1.一种掘进机的位姿标定***，其特征在于，所述***至少包括掘进机、捷联惯导、第一图像采集装置、第二图像采集装置、激光靶以及激光指向仪，其中，

所述激光靶和所述激光指向仪均设于巷道内，所述激光靶悬挂在所述激光指向仪前侧，所述激光指向仪用于在所述激光靶面上形成光斑；

所述第一图像采集装置和所述第二图像采集装置均设于所述掘进机上，用于通过采集所述激光靶上的光斑图像；

所述捷联惯导，设于所述掘进机上，用于确定图像采集装置坐标系相对所述捷联惯导的安装矩阵，其中，所述安装矩阵用于表征所述图像采集装置坐标系相对所述捷联惯导的安装角，以标定所述捷联惯导在所述巷道内的位姿信息。

2.根据权利要求1所述的***，其特征在于，所述***还包括激光测距装置，其中，

所述激光测距装置，设于所述巷道内，且设于所述第一图像采集装置、所述第二图像采集装置和所述激光靶之间，用于测量所述第一图像采集装置、所述第二图像采集装置和所述激光靶面上的光斑相对所述激光测距装置的位移矢量。

3.根据权利要求2所述的***，其特征在于，所述激光测距装置为全站仪。

4.根据权利要求1所述的***，其特征在于，所述激光指向仪发射的光线平行于所述巷道设定的水平面方向。

5.根据权利要求1所述的***，其特征在于，所述第一图像采集装置为第一摄像头，所述第二图像采集装置为第二摄像头。

6.根据权利要求1所述的***，其特征在于，所述第一图像采集装置相对所述光斑的连线方向与所述第二图像采集装置相对所述光斑的连线方向空间内不平行。

7.根据权利要求1所述的***，其特征在于，所述激光靶安装于所述掘进机后方巷道顶面或侧面上。

8.根据权利要求1所述的***，其特征在于，所述激光靶采用半透明材料制作而成。