CN113914880A - 基于激光测距的倾角可修正隧道打孔方法及打孔机器人 - Google Patents

基于激光测距的倾角可修正隧道打孔方法及打孔机器人 Download PDF

Info

Publication number
CN113914880A
CN113914880A CN202111022213.0A CN202111022213A CN113914880A CN 113914880 A CN113914880 A CN 113914880A CN 202111022213 A CN202111022213 A CN 202111022213A CN 113914880 A CN113914880 A CN 113914880A
Authority
CN
China
Prior art keywords
point
laser range
drilling
section
robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111022213.0A
Other languages
English (en)
Other versions
CN113914880B (zh
Inventor
冀晓莹
赵刚
齐孟星
徐士彬
邱晓杰
孟祥久
王长龙
吴雄
吴伟
王大伟
王忠明
陈飞龙
王明宇
佟刚
刘峰
尹晶磊
赵云雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Railway No9 Group Electrical Engineering Co ltd
Original Assignee
China Railway No9 Group Electrical Engineering Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Railway No9 Group Electrical Engineering Co ltd filed Critical China Railway No9 Group Electrical Engineering Co ltd
Priority to CN202111022213.0A priority Critical patent/CN113914880B/zh
Publication of CN113914880A publication Critical patent/CN113914880A/zh
Application granted granted Critical
Publication of CN113914880B publication Critical patent/CN113914880B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E21EARTH OR ROCK DRILLING; MINING
    • E21DSHAFTS; TUNNELS; GALLERIES; LARGE UNDERGROUND CHAMBERS
    • E21D9/00Tunnels or galleries, with or without linings; Methods or apparatus for making thereof; Layout of tunnels or galleries
    • E21D9/10Making by using boring or cutting machines
    • E21D9/108Remote control specially adapted for machines for driving tunnels or galleries
    • EFIXED CONSTRUCTIONS
    • E21EARTH OR ROCK DRILLING; MINING
    • E21BEARTH OR ROCK DRILLING; OBTAINING OIL, GAS, WATER, SOLUBLE OR MELTABLE MATERIALS OR A SLURRY OF MINERALS FROM WELLS
    • E21B47/00Survey of boreholes or wells
    • EFIXED CONSTRUCTIONS
    • E21EARTH OR ROCK DRILLING; MINING
    • E21DSHAFTS; TUNNELS; GALLERIES; LARGE UNDERGROUND CHAMBERS
    • E21D9/00Tunnels or galleries, with or without linings; Methods or apparatus for making thereof; Layout of tunnels or galleries
    • E21D9/003Arrangement of measuring or indicating devices for use during driving of tunnels, e.g. for guiding machines

Landscapes

  • Engineering & Computer Science (AREA)
  • Mining & Mineral Resources (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Geology (AREA)
  • Environmental & Geological Engineering (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geochemistry & Mineralogy (AREA)
  • Physics & Mathematics (AREA)
  • Geophysics (AREA)
  • Fluid Mechanics (AREA)
  • Earth Drilling (AREA)

Abstract

本申请涉及隧道施工技术领域,提供了一种基于激光测距的倾角可修正隧道打孔方法及打孔机器人。该方法包括:通过打孔机器人上设置的激光测距仪获取打孔机器人至打孔点所在截面的距离;其中,激光测距仪有3个,3个激光测距仪环绕打孔机器人的钻头呈三角形布置,且位于打孔机器人的同一安装面上;根据3个激光测距仪测量的打孔机器人至打孔点所在截面的距离,计算打孔机器人的钻头与打孔点的截面偏移的一次修正倾角;根据一次修正倾角,对打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使执行端上的钻头正对打孔点的截面。籍此,对执行端进行倾角修正,实现打孔机器人钻孔时的自动化控制。

Description

基于激光测距的倾角可修正隧道打孔方法及打孔机器人
技术领域
本申请涉及隧道施工技术领域,特别涉及一种基于激光测距的倾角可修正隧道打孔方法及打孔机器人。
背景技术
在地铁隧道施工中,隧道侧壁线缆、管道安装等都需要钻孔。目前,隧道钻孔多采用的是人工作业方法,即工人在梯车上扶持电钻钻孔,这种钻孔的方式效率低、成本高、风险大、劳动强度大,施工时溅出大量灰尘,对施工人员的健康损害较大。而且,传统的人工钻孔方式,在钻孔前,一般会先采用角度尺等工具测量电钻钻头的外倾角或由操作工人凭经验控制钻孔外倾角度。由于角度尺非钻孔倾角专用测量设备,测量倾角时,角度尺与电钻之间难以配合,故采用角度尺控制倾角方法实际操作过程中不方便,在隧道开挖钻孔时很少采用,多由操作工人凭经验控制钻孔倾角,不可避免的导致隧道钻孔倾斜角度不合格,给后续线缆、管道安装施工造成困难。
因此,需要提供一种针对上述现有技术不足的改进技术方案。
发明内容
本申请的目的在于提供一种基于激光测距的倾角可修正隧道打孔方法及打孔机器人,以解决或缓解上述现有技术中存在的问题。
为了实现上述目的,本申请提供如下技术方案:
本申请提供了一种基于激光测距的倾角可修正隧道打孔方法,包括:通过打孔机器人上设置的激光测距仪获取所述打孔机器人至打孔点所在截面的距离;其中,所述激光测距仪有3个,3个所述激光测距仪环绕所述打孔机器人的钻头呈三角形布置,且位于所述打孔机器人的同一安装面上;根据3个所述激光测距仪测量的所述打孔机器人至所述打孔点所在截面的距离,计算所述打孔机器人的钻头与所述打孔点的截面偏移的一次修正倾角;根据所述一次修正倾角,对所述打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使所述执行端上的所述钻头正对所述打孔点的截面。
优选的,所述通过打孔机器人上设置的激光测距仪获取所述打孔机器人至打孔点所在截面的距离具体为:调整3个所述激光测距仪至所述钻头的距离相同,分别获取3个所述激光测距仪至所述打孔点所在截面的距离。
优选的,3个所述激光测距仪分别为第一激光测距仪、第二激光测距仪和第三激光测距仪;所述第一激光测距仪、第二激光测距仪和第三激光测距仪测量的所述打孔机器人至打孔点所在截面的距离分别为第一距离、第二距离和第三距离;对应的,所述根据3个所述激光测距仪测量的所述打孔机器人至所述打孔点的截面的距离,计算所述打孔机器人的钻头与所述打孔点的截面偏移的一次修正倾角,具体为:根据所述第一距离、第二距离和第三距离,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角;其中,X轴与所述第一激光测距仪至所述第二激光测距仪的延伸方向重合,Y轴与所述第二激光测距仪至所述第三激光测距仪的延伸方向平行,且通过所述第一激光测距仪。
优选的,所述根据所述第一距离、第二距离和第三距离,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角,包括:根据所述第一距离、第二距离和第三距离,以及所述第一激光测距仪、第二激光测距离和第三激光测距仪之间的距离,计算第一向量和第二向量,其中,所述第一向量为所述第一激光测距仪在所述打孔点的截面上的照点到所述第二激光测距仪在所述打孔点的截面上的照点的向量;所述第二向量为所述第二激光测距仪在所述打孔点的截面上的照点到所述第三激光测距仪在所述打孔点的截面上的照点的向量;根据所述第一向量和所述第二向量,计算所述打孔点的截面的法向量;基于三垂线定理,根据所述打孔点的截面的法向量,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角。
优选的,在所述根据所述一次修正倾角,对所述打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使所述执行端上的所述钻头正对所述打孔点的截面之后,还包括:响应于所述打孔机器人移动至与所述打孔点的坐标相对应的工作位置,根据所述工作位置处所述激光测距仪到所述打孔点所在截面的距离,确定所述钻头与所述打孔点是否偏移。
优选的,所述响应于所述打孔机器人移动至与所述打孔点的坐标相对应的工作位置,根据所述工作位置处所述激光测距仪到所述打孔点所在截面的距离,确定所述钻头与所述打孔点是否偏移包括:响应于所述打孔机器人移动至与所述打孔点的坐标相对应的工作位置,获取所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离;响应于所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离的相互误差大于预设误差阈值,则确定所述钻头与所述打孔点偏移。
优选的,在响应于所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离的相互误差大于预设误差阈值,则确定所述钻头与所述打孔点偏移之后,还包括:根据所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离,计算所述钻头与所述打孔点偏移的二次修正倾角,并根据所述二次修正倾角,对所述执行端的姿态进行调整,以使所述钻头正对所述打孔点。
本申请实施例还提供一种基于激光测距的倾角可修正的隧道打孔机器人,包括:激光测距仪,所述激光测距仪用于对所述打孔机器人至打孔点所在截面的距离进行测量,其中,所述激光测距仪有3个,3个所述激光测距仪环绕所述打孔机器人的钻头呈三角形布置,且位于所述打孔机器人的同一安装面上;工控机,与3个所述激光测距仪通信连接,接收并根据3个所述激光测距仪测量的所述打孔机器人至所述打孔点所在截面的距离,计算所述打孔机器人的钻头与所述打孔点的截面偏移的一次修正倾角;调整机械臂,所述调整机械臂的末端固定连接所述打孔机器人的执行端,且所述调整机械臂与所述工控机通信连接,根据所述工控机发送的所述一次修正倾角对所述执行端的姿态进行调整,以使所述执行端上的所述钻头正对所述打孔点。
优选的,3个所述激光测距仪分别为第一激光测距仪、第二激光测距仪和第三激光测距仪;所述第一激光测距仪、第二激光测距仪和第三激光测距仪测量的所述打孔机器人至打孔点所在截面的距离分别为第一距离、第二距离和第三距离;对应的,所述工控机根据所述第一距离、第二距离和第三距离,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角;其中,X轴与所述第一激光测距仪至所述第二激光测距仪的延伸方向重合,Y轴与所述第二激光测距仪至所述第三激光测距仪的延伸方向平行,且通过所述第一激光测距仪。
优选的,所述工控机中部署有:第一计算单元,配置为根据所述第一距离、第二距离和第三距离,以及所述第一激光测距仪、第二激光测距仪和第三激光测距仪之间的距离,计算第一向量和第二向量,其中,所述第一向量为所述第一激光测距仪在所述打孔点的截面上的照点到所述第二激光测距仪在所述打孔点的截面上的照点的向量;所述第二向量为所述第二激光测距仪在所述打孔点的截面上的照点到所述第三激光测距仪在所述打孔点的截面上的照点的向量;第二计算单元,配置为根据所述第一向量和所述第二向量,计算所述打孔点的截面的法向量;修正计算单元,配置为基于三垂线定理,根据所述打孔点的截面的法向量,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角。
与最接近的现有技术相比,本申请实施例的技术方案具有如下有益效果:
本申请提供的技术方案中,通过设置在打孔机器人上的3个激光测距仪对打孔机器人至打孔点所在截面进行距离测量,由于3个激光测距仪是在打孔机器人的同一安装面上呈三角形布置的,因此,根据3个激光测距仪测量出的3个距离就可以确定打孔机器人的钻头是否正对打孔点的截面;当3个激光测距仪测量出的距离相等或机会相等时,就可以认为打孔机器人的钻头是正对打孔点的截面,反之,则说明钻头与打孔点的截面有倾角偏移,此时可以根据3个激光测距仪测量的距离,计算出打孔机器人的钻头与打孔点截面偏移的一次修正倾角,并根据一次修正倾角,对打孔机器人的机械臂末端固定连接的执行的姿态进行调整,使执行端上的钻头正对打孔点的截面。籍此,不但能够更加准确的判断钻头与打孔点截面是否偏移,而且在钻头偏移打孔点截面时,可以准确的获取钻头与打孔点截面的偏移倾角,通过对机械臂上固定连接的执行端进行倾角修正,实现打孔机器人钻孔时的自动化控制,将人员从高风险、高危害的工作中解放出来,且有效提高了打孔精度,便于后续线缆、管道的安装施工,降低施工难度。
附图说明
构成本申请的一部分的说明书附图用来提供对本申请的进一步理解,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。其中:
图1为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔方法的流程示意图;
图2为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔方法的工艺图;
图3为根据本申请的一些实施例提供的执行端的正视示意图;
图4为图3所示实施例的侧视图;
图5为根据本申请的一些实施例提供的激光坐标系的示意图;
图6为根据本申请的一些实施例提供的一次修正倾角计算的流程示意图;
图7为根据本申请的一些实施例提供的钻头在激光坐标系中先绕Y轴旋转的示意图;
图8为根据本申请的一些实施例提供的钻头在激光坐标系中先绕X'轴旋转的示意图;
图9为根据本申请的一些实施例提供的二次倾角修正的流程示意图;
图10为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔机器人的***示意图;
图11为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔机器人的结构示意图。
附图标记说明:
100、工控机,200,调整机械臂,300、激光测距仪,400、2D相机,
101、第一计算单元,102、第二计算单元,103、修正计算单元,
301、第一激光测距仪,302、第二激光测距仪,303-第三激光测距仪。
具体实施方式
下面将参考附图并结合实施例来详细说明本申请。各个示例通过本申请的解释的方式提供而非限制本申请。实际上,本领域的技术人员将清楚,在不脱离本申请的范围或精神的情况下,可在本申请中进行修改和变型。例如,示为或描述为一个实施例的一部分的特征可用于另一个实施例,以产生又一个实施例。因此,所期望的是,本申请包含归入所附权利要求及其等同物的范围内的此类修改和变型。
在本申请的描述中,术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本申请而不是要求本申请必须以特定的方位构造和操作,因此不能理解为对本申请的限制。本申请中使用的术语“相连”、“连接”、“设置”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接;可以是直接相连,也可以通过中间部件间接相连;可以是有线电连接、无线电连接,也可以是无线通信信号连接,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
图1为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔方法的流程示意图;图2为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔方法的工艺图;如图1所示,该基于激光测距的倾角可修正的隧道打孔方法包括:
步骤S101、通过打孔机器人上设置的激光测距仪300获取打孔机器人至打孔点所在截面的距离;其中,激光测距仪300有3个,3个激光测距仪300环绕打孔机器人的钻头呈三角形布置,且位于打孔机器人的同一安装面上;
在本申请实施例中,将3个激光测距仪300呈三角形布置在打孔机器人的同一安装面上,通过距离测量,由于3点确定一个平面,因而3个激光测距仪300在打孔点截面上的照点可确定打孔点位于一个平面上,而不是线段上;然后,利用3个激光测距仪300测量出来到改平面的距离,即可知道这个平面相对于3个激光测距仪300的安装面是否倾斜。如果3个激光测距仪300测量出来的到改平面的距离相等或几乎相等,说明这个平面与3个激光测距仪300所在的平面平行或几乎平行,又因为钻头位于三个激光测距仪300之间,因而即可确定钻头与3个激光测距仪300在打孔点截面上的照点确定的截面(即打孔点的截面)没有偏移。
在本申请实施例中,通过打孔机器人上设置的激光测距仪300获取打孔机器人至打孔点所在截面的距离具体为:调整3个激光测距仪300至钻头的距离相同,分别获取3个激光测距仪300至打孔点所在截面的距离。籍此,由于钻头到3个激光测距仪300的距离相同,因而,钻头位于3个激光测距仪300所形成的三角形的外接圆的圆心,进一步提高钻头与3个激光测距仪300在打孔点截面上的照点确定的截面(即打孔点的截面)偏移判断的精确度。
步骤S102、根据3个激光测距仪300测量的打孔机器人至打孔点所在截面的距离,计算打孔机器人的钻头与打孔点的截面偏移的一次修正倾角;
图3为根据本申请的一些实施例提供的执行端的正视示意图;图4为图3所示实施例的侧视图;图5为根据本申请的一些实施例提供的激光坐标系的示意图;如图3、图4、图5所示,3个激光测距仪300分别为第一激光测距仪301、第二激光测距仪302和第三激光测距仪303;第一激光测距仪301与第二激光测距仪302沿执行端的长度方向布置,第二激光测距仪302和第三激光测距仪303沿执行端的宽度方向布置,3个激光测距仪300呈直角三角形。在此,以第一激光测距仪301的位置为圆心建立激光的坐标系OXYZ,其中,定义第一激光测距仪301到第二激光测距仪302的方向为X轴正向,激光的光线方向为Z轴正向,第二激光测距到第三激光测距仪303的方向为Y轴正向;第一激光测距仪301、第二激光测距仪302、第三激光测距仪303与打孔点所在平面的照点分别为点A、点B和点C;定义第一激光测距仪301、第二激光测距仪302、第三激光测距仪303测量的到打孔点所在截面的距离分别为第一距离(depth1)、第二距离(depth2)和第三距离(depth3);定义第一激光测距仪301与第二激光测距仪302之间的距离为distance12,定义第二激光测距仪302与第三激光测距仪303之间的距离为distance23。
在一些可选实施例中,所示根据3个激光测距仪300测量的打孔机器人至打孔点的截面的距离,计算打孔机器人的钻头与打孔点的截面偏移的一次修正倾角,具体为:根据第一距离、第二距离和第三距离,计算打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为钻头与打孔点的截面偏移的一次修正倾角;其中,X轴与第一激光测距仪301至第二激光测距仪302的延伸方向重合,Y轴与第二激光测距仪302至第三激光测距仪303的延伸方向平行,且通过第一激光测距仪301。
图6为根据本申请的一些实施例提供的一次修正倾角计算的流程示意图;如图6所示,根据第一距离、第二距离和第三距离,计算打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为钻头与打孔点的截面偏移的一次修正倾角,包括:
步骤S601、根据第一距离、第二距离和第三距离,以及第一激光测距仪301、第二激光测距仪302和第三激光测距仪303之间的距离,计算第一向量和第二向量,其中,第一向量为第一激光测距仪301在打孔点的截面上的照点到第二激光测距仪302在打孔点的截面上的照点的向量;第二向量为第二激光测距仪302在打孔点的截面上的照点到第三激光测距仪303在打孔点的截面上的照点的向量;
在本申请实施例中,激光与墙面的照点在激光坐标系中的坐标分别为A(0、0、depth1)、B(distance12、0、depth2)、C(distance12、distance23、depth3);第一激光测距仪301在打孔点的截面上的照点到第二激光测距仪302在打孔点的截面上的照点的第一向量为
Figure BDA0003242288640000081
第二向量为
Figure BDA0003242288640000082
有:
Figure BDA0003242288640000083
Figure BDA0003242288640000084
步骤S602、根据第一向量和第二向量,计算打孔点的截面的法向量;
在本申请实施例中,打孔点所在截面法向量为
Figure BDA0003242288640000085
法向量
Figure BDA0003242288640000086
与第一向量
Figure BDA0003242288640000087
第二向量
Figure BDA0003242288640000088
垂直,即:
Figure BDA0003242288640000089
Figure BDA00032422886400000810
在本申请实施例中,为简化坐标变换,设定z1=1,则有:
Figure BDA00032422886400000811
步骤S603、基于三垂线定理,根据打孔点的截面的法向量,计算打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为钻头与打孔点的截面偏移的一次修正倾角。
在本申请实施例中,设定打孔机器人在建立的激光坐标系中的旋转顺序为ZYX,即钻头先绕Y轴旋转,激光坐标系绕Y轴旋转,激光方向变为Z',由于是动轴旋转,故X轴变为X';再绕X'轴旋转,激光方向变为Z”;钻头绕Y轴旋转的角度为ry,钻头绕X'轴旋转的角度为rx,如图7、图8所示。
在本申请实施例中,Z”在平面XOZ的投影为Z',根据三垂线定理求解,则X'垂直于Z'有两个解,其中一个X'求得的钻头绕Y轴旋转的角度为ry超过了(-90°,90°),即该解为无效解。即,Z'与X'垂直,绕X'轴旋转后,Z”与X'垂直,在XOZ平面做Z”的投影,根据三垂线定理,则X'与Z”在XOZ平面的投影垂直,Z'与Z”在XOZ平面的投影都在XOZ平面上,且起点都为O点,因此,Z”在XOZ平面的投影与Z'的方向相同,即:
Figure BDA0003242288640000091
但是,与Z'、Z”都垂直的X',以O点为起点有两个方向(相反方向),此时Z'的方向与Z”在XOZ平面的投影方向相反,Z'与Z的夹角ry是大于90°的,不符合实际使用场景,因此舍去该解。
在本申请实施例中,Z”在平面XOZ的投影为Z'与法向量的夹角为钻头绕X'轴旋转的角度为rx,Z”在平面XOZ的投影为Z'与Z轴的夹角即为钻头绕Y轴旋转的角度为ry,有:
Figure BDA0003242288640000092
Figure BDA0003242288640000093
步骤S103、根据一次修正倾角,对打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使执行端上的钻头正对打孔点的截面。
在本申请实施例中,打孔机器人在接收到倾角修正信息后,在激光坐标系内,对机械臂末端固定连接的执行端分别依次绕X轴、Y轴旋转rx、ry角度,即可实现钻头正对打孔点的截面。
在本申请实施例中,在执行端的钻头上方设置由2D相机400,用于对打孔区域进行拍照,其中,2D相机400的镜头与钻头的打孔方向平行。当钻头与打孔点所在截面有倾角偏斜时,利用该2D相机400获取的打孔区域的照片不能有效的区分可打孔区域和不可打孔区域(比如,存在盾构板凹槽、边缝、螺丝等)。通过一次修正倾角,对打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,可以使2D相机400的镜头正对打孔区域进行拍照,籍此,可以通过图片有效的区分可打孔区域和不可打孔区域。
在一些可选实施例中,在根据一次修正倾角,对打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使执行端上的钻头正对打孔点的截面之后,还包括:响应于打孔机器人移动至打孔点的坐标相对应的工作位置,根据工作位置处激光测距仪300到打孔点所在截面的距离,确定钻头与打孔点是否偏移。
在本申请实施例中,通过一次倾角修正后,2D相机400对打孔区域进行拍照,基于预先训练的神经网络模型对2D相机400拍照的图片进行特征提取和识别,有效区分可打孔区域和不可打孔区域。然后,在通过激光测距仪300获取打孔机器人到打孔点所在截面的距离,由于此时钻头正对打孔点所在截面,因而激光测距仪300测得的距离为直线距离,通过该直线距离即可确定打孔机器人需要向前移动的距离,通过工控机100控制打孔机器人移动至打孔点的坐标相对应的工作位置。
在本申请实施例中,打孔机器人移动至打孔点的坐标相对应的工作位置后的,由激光测距仪300在工作位置对打孔点截面进行距离测量,根据再次测量的距离,对钻头与打孔点是否偏移进行判断。如果激光测距仪300再次测量的多个距离不同,说明可能在机器人移动时钻头与打孔点所在截面产生了倾斜偏移,需要对钻头与打孔点的截面偏移再次进行倾角修正。
图9为根据本申请的一些实施例提供的二次倾角修正的流程示意图;如图9所示,响应于打孔机器人移动至与打孔点的坐标相对应的工作位置,根据工作位置处激光测距仪300到打孔点所在截面的距离,确定钻头与打孔点是否偏移包括:
步骤S901、响应于打孔机器人移动至打孔点的坐标相对应的工作位置,获取工作位置处3个激光测距仪300到打孔点所在截面的距离;
在本申请实施例中,通过3个激光测距仪300测量获取3个距离,与一次倾角修改正相同,可提高判断钻头与打孔点所在截面是否偏移时的精确性。具体的步骤、流程可参照步骤S101,在此不再一一赘述。
步骤S902、响应于工作位置处3个激光测距仪300到打孔点所在截面的距离的相互误差大于预设误差阈值,则确定钻头与打孔点偏移。
在本申请实施例中,通过3个激光测距仪300在工作位置处测得的距离进行误差计算,若测得的3个距离之间的相互误差小于等于设定的预设误差阈值,则说明钻头与打孔点不偏移;若测得的3个距离之间的相互误差大于设定的预设误差阈值,则说明钻头与打孔点偏移。
在本申请实施例中,可通过在工控机100中的预设程序或通过比较器对3个激光测距仪300在工作位置处测得的距离进行比较计算,得到3个距离之间的相互误差与设定的预设误差阈值之间的比较结果,来判断钻头与打孔点是否偏移。
在一应用场景中,在响应于工作位置处3个激光测距仪300到打孔点所在截面的距离的相互误差大于预设误差阈值,则确定钻头与打孔点偏移之后,还包括:
步骤S903、根据工作位置处3个激光测距仪300到打孔点所在截面的距离,计算钻头与打孔点偏移的二次倾角修正,并根据二次修正倾角,对执行端的姿态进行调整,以使钻头正对打孔点。
在本申请实施例中,根据二次修正倾角对执行端的姿态进行调整的步骤、流程可参考步骤S103中一次修正的步骤、流程,在此不再一一赘述。
图10为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔机器人的***示意图;图11为根据本申请的一些实施例提供的一种基于激光测距的倾角可修正的隧道打孔机器人的结构示意图;如图10、图11所示,该基于激光测距的倾角可修正的隧道打孔机器人包括:激光测距仪300、工控机100和调整机械臂200。所示激光测距仪300用于对打孔机器人至打孔点所在截面的距离进行测量,其中,激光测距仪300有3个,3个激光测距仪300环绕打孔机器人的钻头呈三角形布置,且位于打孔机器人的同一安装面上;工控机100与3个激光测距仪300通信连接,接收并根据3个激光测距仪300测量的打孔机器人至打孔点所在截面的距离,计算打孔机器人的钻头与打孔点的截面偏移的一次修正倾角;调整机械臂200的末端固定连接打孔机器人的执行端,且调整机械臂200与工控机100通信连接,根据工控机100发送的一次修正倾角对执行端的姿态进行调整,以使执行端上的钻头正对打孔点。
在一些可选实施例中,工控机100根据第一距离、第二距离和第三距离,计算打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为钻头与打孔点的截面偏移的一次修正倾角;其中,X轴与第一激光测距仪301至第二激光测距仪302的延伸方向重合,Y轴与第二激光测距仪302至第三激光测距仪303的延伸方向平行,且通过第一激光测距仪301。
在一些可选实施例中,工控机100中部署有:第一计算单元101、第二计算单元102和修正计算单元103。第一计算单元101配置为根据第一距离、第二距离和第三距离,以及第一激光测距仪301、第二激光测距仪302和第三激光测距仪303之间的距离,计算第一向量和第二向量,其中,第一向量为第一激光测距仪301在打孔点的截面上的照点到第二激光测距仪302在打孔点的截面上的照点的向量;第二向量为第二激光测距仪302在打孔点的截面上的照点到第三激光测距仪303在打孔点的截面上的照点的向量;第二计算单元102配置为根据第一向量和第二向量,计算打孔点的截面的法向量;修正计算单元103配置为基于三垂线定理,根据打孔点的截面的法向量,计算打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为钻头与打孔点的截面偏移的一次修正倾角。
在本申请实施例中,通过设置在打孔机器人上的3个激光测距仪300对打孔机器人至打孔点所在截面进行距离测量,由于3个激光测距仪300是在打孔机器人的同一安装面上呈三角形布置的,因此,根据3个激光测距仪300测量出的3个距离就可以确定打孔机器人的钻头是否正对打孔点的截面;当3个激光测距仪300测量出的距离相等或机会相等时,就可以认为打孔机器人的钻头是正对打孔点的截面,反之,则说明钻头与打孔点的截面有倾角偏移,此时可以根据3个激光测距仪300测量的距离,计算出打孔机器人的钻头与打孔点截面偏移的一次修正倾角,并根据一次修正倾角,对打孔机器人的机械臂末端固定连接的执行的姿态进行调整,使执行端上的钻头正对打孔点的截面。
通过一次修正倾角,使执行端安装的2D相机400能够正对打孔区域,通过2D相机400对打孔区域拍照,有效区分可打孔区域和不可打孔区域;一次修正倾角后,利用激光测距仪300测得的到打孔点的截面的距离控制打孔机器人移动到工作位置,然后,在工作位置,根据激光测距仪300得到的到打孔点的截面的距离再次判断钻头与打孔点的截面是否偏移,如果有偏移,则对执行端的姿态进行二次修正倾角,使钻头正对打孔点。
籍此,不但能够更加准确的判断钻头与打孔点截面是否偏移,而且在钻头偏移打孔点截面时,可以准确的获取钻头与打孔点的偏移倾角,通过对机械臂上固定连接的执行端进行两次倾角修正,实现打孔机器人钻孔时的自动化控制,将人员从高风险、高危害的工作中解放出来,且有效提高了打孔精度,便于后续线缆、管道的安装施工,降低施工难度。
在本申请实施例中,在进行钻孔过程中,不再需要采集过多的坐标信息,只需要三个激光测距仪300对应的三个点的深度信息就可以计算出打孔倾角的修正角度,大幅度降低设备的运算量,提高打孔效率,使打孔机器人更快速、更有序地完成打孔作业;而且,采用激光测距仪300可以使执行端的结构相对工业3D相机更加简单可靠,在严苛的隧道环境中满足对设备稳定性的要求,同时有效降低成本。
以上所述仅为本申请的优选实施例,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种基于激光测距的倾角可修正的隧道打孔方法,其特征在于,包括:
通过打孔机器人上设置的激光测距仪获取所述打孔机器人至打孔点所在截面的距离;其中,所述激光测距仪有3个,3个所述激光测距仪环绕所述打孔机器人的钻头呈三角形布置,且位于所述打孔机器人的同一安装面上;
根据3个所述激光测距仪测量的所述打孔机器人至所述打孔点所在截面的距离,计算所述打孔机器人的钻头与所述打孔点的截面偏移的一次修正倾角;
根据所述一次修正倾角,对所述打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使所述执行端上的所述钻头正对所述打孔点的截面。
2.根据权利要求1所述的基于激光测距的倾角可修正的隧道打孔方法,其特征在于,所述通过打孔机器人上设置的激光测距仪获取所述打孔机器人至打孔点所在截面的距离具体为:调整3个所述激光测距仪至所述钻头的距离相同,分别获取3个所述激光测距仪至所述打孔点所在截面的距离。
3.根据权利要求1所述的基于激光测距的倾角可修正的隧道打孔方法,其特征在于,3个所述激光测距仪分别为第一激光测距仪、第二激光测距仪和第三激光测距仪;所述第一激光测距仪、第二激光测距仪和第三激光测距仪测量的所述打孔机器人至打孔点所在截面的距离分别为第一距离、第二距离和第三距离;
对应的,
所述根据3个所述激光测距仪测量的所述打孔机器人至所述打孔点的截面的距离,计算所述打孔机器人的钻头与所述打孔点的截面偏移的一次修正倾角,具体为:
根据所述第一距离、第二距离和第三距离,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角;其中,X轴与所述第一激光测距仪至所述第二激光测距仪的延伸方向重合,Y轴与所述第二激光测距仪至所述第三激光测距仪的延伸方向平行,且通过所述第一激光测距仪。
4.根据权利要求3所述的基于激光测距的倾角可修正的隧道打孔方法,其特征在于,所述根据所述第一距离、第二距离和第三距离,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角,包括:
根据所述第一距离、第二距离和第三距离,以及所述第一激光测距仪、第二激光测距离和第三激光测距仪之间的距离,计算第一向量和第二向量,其中,所述第一向量为所述第一激光测距仪在所述打孔点的截面上的照点到所述第二激光测距仪在所述打孔点的截面上的照点的向量;所述第二向量为所述第二激光测距仪在所述打孔点的截面上的照点到所述第三激光测距仪在所述打孔点的截面上的照点的向量;
根据所述第一向量和所述第二向量,计算所述打孔点的截面的法向量;
基于三垂线定理,根据所述打孔点的截面的法向量,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角。
5.根据权利要求1-4任一所述的基于激光测距的倾角可修正的隧道打孔方法,其特征在于,在所述根据所述一次修正倾角,对所述打孔机器人的机械臂末端固定连接的执行端的姿态进行调整,以使所述执行端上的所述钻头正对所述打孔点的截面之后,还包括:
响应于所述打孔机器人移动至与所述打孔点的坐标相对应的工作位置,根据所述工作位置处所述激光测距仪到所述打孔点所在截面的距离,确定所述钻头与所述打孔点是否偏移。
6.根据权利要求5所述的基于激光测距的倾角可修正的隧道打孔方法,其特征在于,所述响应于所述打孔机器人移动至与所述打孔点的坐标相对应的工作位置,根据所述工作位置处所述激光测距仪到所述打孔点所在截面的距离,确定所述钻头与所述打孔点是否偏移包括:
响应于所述打孔机器人移动至与所述打孔点的坐标相对应的工作位置,获取所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离;
响应于所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离的相互误差大于预设误差阈值,则确定所述钻头与所述打孔点偏移。
7.根据权利要求6所述的基于激光测距的倾角可修正的隧道打孔方法,其特征在于,在响应于所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离的相互误差大于预设误差阈值,则确定所述钻头与所述打孔点偏移之后,还包括:
根据所述工作位置处3个所述激光测距仪到所述打孔点所在截面的距离,计算所述钻头与所述打孔点偏移的二次修正倾角,并根据所述二次修正倾角,对所述执行端的姿态进行调整,以使所述钻头正对所述打孔点。
8.一种基于激光测距的倾角可修正的隧道打孔机器人,其特征在于,包括:
激光测距仪,所述激光测距仪用于对所述打孔机器人至打孔点所在截面的距离进行测量,其中,所述激光测距仪有3个,3个所述激光测距仪环绕所述打孔机器人的钻头呈三角形布置,且位于所述打孔机器人的同一安装面上;
工控机,与3个所述激光测距仪通信连接,接收并根据3个所述激光测距仪测量的所述打孔机器人至所述打孔点所在截面的距离,计算所述打孔机器人的钻头与所述打孔点的截面偏移的一次修正倾角;
调整机械臂,所述调整机械臂的末端固定连接所述打孔机器人的执行端,且所述调整机械臂与所述工控机通信连接,根据所述工控机发送的所述一次修正倾角对所述执行端的姿态进行调整,以使所述执行端上的所述钻头正对所述打孔点。
9.根据权利要求5所述的基于激光测距的倾角可修正的隧道打孔机器人,其特征在于,3个所述激光测距仪分别为第一激光测距仪、第二激光测距仪和第三激光测距仪;所述第一激光测距仪、第二激光测距仪和第三激光测距仪测量的所述打孔机器人至打孔点所在截面的距离分别为第一距离、第二距离和第三距离;
对应的,
所述工控机根据所述第一距离、第二距离和第三距离,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角;其中,X轴与所述第一激光测距仪至所述第二激光测距仪的延伸方向重合,Y轴与所述第二激光测距仪至所述第三激光测距仪的延伸方向平行,且通过所述第一激光测距仪。
10.根据权利要求6所述的基于激光测距的倾角可修正的隧道打孔机器人,其特征在于,所述工控机中部署有:
第一计算单元,配置为根据所述第一距离、第二距离和第三距离,以及所述第一激光测距仪、第二激光测距仪和第三激光测距仪之间的距离,计算第一向量和第二向量,其中,所述第一向量为所述第一激光测距仪在所述打孔点的截面上的照点到所述第二激光测距仪在所述打孔点的截面上的照点的向量;所述第二向量为所述第二激光测距仪在所述打孔点的截面上的照点到所述第三激光测距仪在所述打孔点的截面上的照点的向量;
第二计算单元,配置为根据所述第一向量和所述第二向量,计算所述打孔点的截面的法向量;
修正计算单元,配置为基于三垂线定理,根据所述打孔点的截面的法向量,计算所述打孔机器人的钻头绕其法平面内相互垂直的X轴、Y轴旋转的角度,作为所述钻头与所述打孔点的截面偏移的一次修正倾角。
CN202111022213.0A 2021-09-01 2021-09-01 基于激光测距的倾角可修正隧道打孔方法及打孔机器人 Active CN113914880B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111022213.0A CN113914880B (zh) 2021-09-01 2021-09-01 基于激光测距的倾角可修正隧道打孔方法及打孔机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111022213.0A CN113914880B (zh) 2021-09-01 2021-09-01 基于激光测距的倾角可修正隧道打孔方法及打孔机器人

Publications (2)

Publication Number Publication Date
CN113914880A true CN113914880A (zh) 2022-01-11
CN113914880B CN113914880B (zh) 2024-02-23

Family

ID=79233742

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111022213.0A Active CN113914880B (zh) 2021-09-01 2021-09-01 基于激光测距的倾角可修正隧道打孔方法及打孔机器人

Country Status (1)

Country Link
CN (1) CN113914880B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116044462A (zh) * 2023-04-03 2023-05-02 山东能源集团西北矿业有限公司 锚杆的锚固姿态控制方法
CN116579989A (zh) * 2023-04-21 2023-08-11 中铁九局集团电务工程有限公司 一种基于深度相机的隧道打孔倾角修正方法

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5237384A (en) * 1990-07-05 1993-08-17 Sato Kogyo Co., Ltd. Laser positioner and marking method using the same
JPH07113640A (ja) * 1993-10-19 1995-05-02 Kiuchi Syst Service:Kk レーザ測距による掘削機の姿勢測定方法及びその装置
JPH07173987A (ja) * 1993-12-20 1995-07-11 Shimizu Corp トンネル切羽面への削孔位置表示方法およびそれに用いる削孔位置表示システム
CN202467828U (zh) * 2012-01-16 2012-10-03 魏华昌 激光钻孔定位仪
CN204716131U (zh) * 2015-04-14 2015-10-21 成都西南交大驱动技术有限责任公司 一种地铁隧道多方位高精度钻孔设备
CN105091744A (zh) * 2015-05-07 2015-11-25 中国科学院自动化研究所 一种基于视觉传感器和激光测距仪的位姿检测装置与方法
CN106703689A (zh) * 2016-12-10 2017-05-24 中国铁建电气化局集团北方工程有限公司 高铁隧道锚栓植入用自动打孔装置及方法
CN206474704U (zh) * 2017-02-15 2017-09-08 苏州华天视航智能装备技术有限公司 一种激光视觉自动钻孔装置
CN107609228A (zh) * 2017-08-23 2018-01-19 电子科技大学 面向并联钻床的自动钻孔方法
CN108643828A (zh) * 2018-03-27 2018-10-12 长沙理工大学 一种高坡锚固装备智能控制方法
CN108839027A (zh) * 2018-08-31 2018-11-20 河南工程学院 基于激光测距传感器的机器人自动对准控制方法
CN109458133A (zh) * 2018-12-21 2019-03-12 吕永宏 一种隧道自动钻孔机及方法
CN209062198U (zh) * 2018-12-09 2019-07-05 浙江闽立电动工具有限公司 可定位打孔角度的电钻
CN111300481A (zh) * 2019-12-11 2020-06-19 苏州大学 基于视觉及激光传感器的机器人抓取位姿纠正方法
US20200368859A1 (en) * 2017-09-05 2020-11-26 Northwestern Polytechnical University Method and system for automatic assembly of curved surface part
CN111992909A (zh) * 2020-09-23 2020-11-27 武汉华工激光工程有限责任公司 一种三维激光打孔定位方法
CN112065275A (zh) * 2020-10-12 2020-12-11 中国铁建重工集团股份有限公司 一种隧道钻孔机器人***及其控制方法、隧道掘进机

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5237384A (en) * 1990-07-05 1993-08-17 Sato Kogyo Co., Ltd. Laser positioner and marking method using the same
JPH07113640A (ja) * 1993-10-19 1995-05-02 Kiuchi Syst Service:Kk レーザ測距による掘削機の姿勢測定方法及びその装置
JPH07173987A (ja) * 1993-12-20 1995-07-11 Shimizu Corp トンネル切羽面への削孔位置表示方法およびそれに用いる削孔位置表示システム
CN202467828U (zh) * 2012-01-16 2012-10-03 魏华昌 激光钻孔定位仪
CN204716131U (zh) * 2015-04-14 2015-10-21 成都西南交大驱动技术有限责任公司 一种地铁隧道多方位高精度钻孔设备
CN105091744A (zh) * 2015-05-07 2015-11-25 中国科学院自动化研究所 一种基于视觉传感器和激光测距仪的位姿检测装置与方法
CN106703689A (zh) * 2016-12-10 2017-05-24 中国铁建电气化局集团北方工程有限公司 高铁隧道锚栓植入用自动打孔装置及方法
CN206474704U (zh) * 2017-02-15 2017-09-08 苏州华天视航智能装备技术有限公司 一种激光视觉自动钻孔装置
CN107609228A (zh) * 2017-08-23 2018-01-19 电子科技大学 面向并联钻床的自动钻孔方法
US20200368859A1 (en) * 2017-09-05 2020-11-26 Northwestern Polytechnical University Method and system for automatic assembly of curved surface part
CN108643828A (zh) * 2018-03-27 2018-10-12 长沙理工大学 一种高坡锚固装备智能控制方法
CN108839027A (zh) * 2018-08-31 2018-11-20 河南工程学院 基于激光测距传感器的机器人自动对准控制方法
CN209062198U (zh) * 2018-12-09 2019-07-05 浙江闽立电动工具有限公司 可定位打孔角度的电钻
CN109458133A (zh) * 2018-12-21 2019-03-12 吕永宏 一种隧道自动钻孔机及方法
CN111300481A (zh) * 2019-12-11 2020-06-19 苏州大学 基于视觉及激光传感器的机器人抓取位姿纠正方法
CN111992909A (zh) * 2020-09-23 2020-11-27 武汉华工激光工程有限责任公司 一种三维激光打孔定位方法
CN112065275A (zh) * 2020-10-12 2020-12-11 中国铁建重工集团股份有限公司 一种隧道钻孔机器人***及其控制方法、隧道掘进机

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116044462A (zh) * 2023-04-03 2023-05-02 山东能源集团西北矿业有限公司 锚杆的锚固姿态控制方法
CN116579989A (zh) * 2023-04-21 2023-08-11 中铁九局集团电务工程有限公司 一种基于深度相机的隧道打孔倾角修正方法
CN116579989B (zh) * 2023-04-21 2024-05-14 中铁九局集团电务工程有限公司 一种基于深度相机的隧道打孔倾角修正方法

Also Published As

Publication number Publication date
CN113914880B (zh) 2024-02-23

Similar Documents

Publication Publication Date Title
JP5538929B2 (ja) 三次元位置計測及び墨出しシステムとその使用方法
US8060344B2 (en) Method and system for automatically performing a study of a multidimensional space
CN113914880B (zh) 基于激光测距的倾角可修正隧道打孔方法及打孔机器人
CN108952742B (zh) 一种基于机器视觉的盾构机导向方法
JP5044596B2 (ja) 三次元位置計測システム
WO2020073929A1 (zh) 作业台车及其机械臂光学标靶定位装置和定位方法
JP5386613B2 (ja) 三次元位置決めシステム
CN210014783U (zh) 一种用于测量盾构姿态的激光靶
CN105136134A (zh) 一种掘进机位姿检测调整方法及***
JPWO2020003497A1 (ja) 撮像装置の校正装置、監視装置、作業機械および校正方法
WO2024032663A1 (zh) 水下摄影测量沉管管节对接测量方法
WO2021174037A1 (en) Laser alignment device
CN111272156A (zh) 用于确定竖井掘进机姿态的自动测量设备、方法、***
Mao et al. Virtual laser target board for alignment control and machine guidance in tunnel-boring operations
JP4787435B2 (ja) トンネル掘削機の位置計測装置
CN113048972A (zh) 矿山工程机械姿态位置确定方法及***
JP2003262090A (ja) トンネル掘削機の位置計測装置
CN113048955B (zh) 基于激光位姿靶和机器视觉的特定空间测量方法及***
CN112902845B (zh) 轨迹式顶管自动导向方法
CN111752308A (zh) 一种在圆形盾构隧道中校正移动扫描姿态的方法
CN115060161A (zh) 掘进机智能定位定姿装置及其控制方法
CN216116064U (zh) 掘进机的位姿标定***
CN112665613A (zh) 掘进机的位姿标定方法及***
CN111197486A (zh) 一种基于机器视觉的顶管机导向方法
CN114689012B (zh) 一种用于竖向掘进机姿态测量的垂直导向***及导向方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant