CN115657062B - 一种设备快速重定位方法、装置及存储介质 - Google Patents

一种设备快速重定位方法、装置及存储介质 Download PDF

Info

Publication number
CN115657062B
CN115657062B CN202211679207.7A CN202211679207A CN115657062B CN 115657062 B CN115657062 B CN 115657062B CN 202211679207 A CN202211679207 A CN 202211679207A CN 115657062 B CN115657062 B CN 115657062B
Authority
CN
China
Prior art keywords
pose
initial pose
relocation
delay time
navigation signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211679207.7A
Other languages
English (en)
Other versions
CN115657062A (zh
Inventor
黄琰
孙静
田瑞丰
陈星宇
毕泽伟
王晓龙
翟润东
杨明涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Leike Zhitu Tai'an Automobile Technology Co ltd
Polytechnic Leike Zhitu Beijing Technology Co ltd
Original Assignee
Leike Zhitu Tai'an Automobile Technology Co ltd
Polytechnic Leike Zhitu Beijing Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Leike Zhitu Tai'an Automobile Technology Co ltd, Polytechnic Leike Zhitu Beijing Technology Co ltd filed Critical Leike Zhitu Tai'an Automobile Technology Co ltd
Priority to CN202211679207.7A priority Critical patent/CN115657062B/zh
Publication of CN115657062A publication Critical patent/CN115657062A/zh
Application granted granted Critical
Publication of CN115657062B publication Critical patent/CN115657062B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Navigation (AREA)

Abstract

本发明涉及一种设备快速重定位方法、装置及存储介质。本发明一方面能够利用雷达帧和预先构建的点云地图进行匹配得到第一初始位姿,发布包含第一初始位姿的第一话题,Cartographer通过订阅第一话题得到第一初始位姿进行重定位。另一方面,在重定位时,获取导航信号存在情况和导航信号的延迟时间,若导航信号不存在或导航信号存在但导航信号延迟时间大于预设的延迟时间阈值,则利用第一初始位姿进行重定位,导航存在且导航信号延迟时间小于预设的延迟时间阈值,则利用基于导航位姿的第二初始位姿进行重定位,选择更快的重定位方式进行重定位。

Description

一种设备快速重定位方法、装置及存储介质
技术领域
本发明涉及重定位技术领域,尤其涉及一种设备快速重定位方法、装置及存储介质。
背景技术
伴随着室内机器人的发展,面向矿山、港口、快递行业的室内机器人重定位技术是机器人自主导航的前提。
移动机器人重定位一般指在没有先验信息的前提下,机器人仅依靠自身传感器估计其在已知全局地图中的位姿。在初始位姿未知或发生“绑架”时,机器人均需要实现重定位。传统的方法多采用占用栅格来描述激光雷达测得的局部环境信息以及全局地图信息,再基于概率运算完成候选搜索区域内的重定位。室外良好的GPS信号可提供准确的初始位姿,基于激光雷达的室内移动机器人反而没有gnss提供的准确的全局定位信息。Cartographer使用占用栅格来表示环境信息,通过匹配栅格化后的激光雷达数据与地图数据并基于极大似然估计来求解最有可能的位姿。Cartographer算法由于重定位时需在全局地图上搜索,定位时间较长且在单一结构环境中易定位失败。在导航时由于某种外部因素(如人为搬离、外部碰撞等)机器人位姿发生突变,从而导致原有依赖位姿连续变化的定位算法失效。在室内环境下,组合导航失去了GNSS信号,无法提供准确的初始位姿,故室内大场景下Cartographer无法实现快速重定位。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本发明提供一种设备快速重定位方法、装置及存储介质。
第一方面,本发明提供一种设备快速重定位方法,包括:
取重定位前最后一雷达帧对应的稀疏点云地图作为参考帧,取当前时刻的雷达帧作为目标帧;
参考帧所占空间分为若干格子,对于每个格子,基于格子内的点计算每个格子的多维正态概率密度函数;
利用被迭代优化的变换参数使目标帧变换到参考帧所在的参考坐标系中,其中,变换参数包括旋转矩阵和平移矩阵;计算目标帧转换后每个点落到对应格子中的概率密度;进而将对应点落到对应格子中的概率密度之和作为目标函数;
通过牛顿优化算法迭代优化变换参数,以寻找使得目标函数值最大的目标变换参数,基于目标变换参数和参考帧的坐标确定目标帧的第一初始位姿,并发布包含第一初始位姿第一话题;
Cartographer订阅第一话题获取第一初始位姿,将第一初始位姿的坐标转换到IMU坐标系后,传递给位姿推测器实现重定位。
更进一步地,将室内场景通过激光雷达、IMU和里程计融合的SLAM技术建立高精度地图;
将所述高精度地图转换为点云地图,对点云地图进行体素滤波得到降采样后的稀疏点云地图。
更进一步地,设备导航信号良好时,导航提供的导航位姿,导航位姿的坐标转换到IMU坐标系得到第二初始位姿,发布第二初始位姿的第二话题,重定位时,Cartographer订阅第二话题获取第二初始位姿,将第二初始位姿传递给位姿推测器实现重定位。
更进一步地,预先设定导航信号的延迟时间阈值,若导航信号的延迟时间大于延迟时间阈值或导航信号消失,则在重定位时Cartographer订阅第一话题,将第一初始位姿的坐标转换到IMU坐标系后,传递给位姿推测器实现重定位;若导航信号存在且导航信号端延迟时间小于延迟时间阈值,则在重定位时Cartographer订阅第二话题,获取第二初始位姿,将第二初始位姿传递给位姿推测器实现重定位。
更进一步地,Cartographer订阅第一话题或第二话题,以获取第一初始位姿或第二初始位姿,将所获的第一初始位姿或第二初始位姿转换后传递给位姿推测器,位姿推测器接收转换后的第一初始位姿或第二初始位姿前删除前序数据。
更进一步地,预先设定导航信号的延迟时间阈值,实时监测导航信号是否存在和存在时导航信号的延迟时间,重定位时,获取重定位时刻的导航信号的延迟时间,比较导航信号的延迟时间和延迟时间阈值。
第二方面,本发明提供一种设备快速重定位装置,包括:至少一处理单元、存储单元、激光雷达和IMU传感器,所述处理单元、所述存储单元、所述激光雷达和IMU传感器通过总线单元连接;所述存储单元存储计算机程序,所述处理单元从存储单元读取执行计算机程序实现所述的设备快速重定位方法。
更进一步地所述设备快速重定位装置,包括:GPS传感器,所述GPS传感器通过总线单元连接处理单元和存储单元;所述存储单元存储计算机程序,所述处理单元从存储单元读取执行计算机程序实现所述的设备快速重定位方法。
第三方面,本发明提供一种实现设备快速重定位方法的存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现所述的设备快速重定位方法。
本发明实施例提供的上述技术方案与现有技术相比具有如下优点:
本发明一方面能够利用雷达帧和预先构建的点云地图进行匹配得到第一初始位姿,发布包含第一初始位姿的第一话题,Cartographer利用第一初始位姿进行重定位,实现在无导航信号或导航信号延迟高的情况下的重定位。另一方面,本发明能够利用导航提供的导航位姿经转换得到第二初始位姿,Cartographer能够利用第二初始位姿进行重定位,且在重定位时,获取导航信号存在情况和导航信号的延迟时间,若导航信号不存在或导航信号存在但导航信号延迟时间大于预设的延迟时间阈值则Cartographer订阅第一话题,利用第一初始位姿进行重定位,导航存在且导航信号延迟时间小于预设的延迟时间阈值则Cartographer定于第二话题,利用第二初始位姿进行重定位,选择更快的重定位方式进行重定位。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种设备快速重定位方法的流程图;
图2为本发明实施例提供的计算第一初始位姿发布包含第一初始位姿的第一话题的流程图;
图3为本发明实施例提供的计算第二初始位姿发布包含第二初始位姿的第二话题的流程图;
图4为本发明实施例提供的一种设备快速重定位装置的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
实施例1
参阅图1所示,本发明实施例提供一种设备快速重定位方法,包括:
预先设定导航信号的延迟时间阈值。所述延迟时间阈值的设定方式为:获取n次计算第一初始位姿所消耗的平均时间,获取n次计算第一初始位姿所消耗时间的方差,取平均时间加3倍的方差作为延迟时间阈值。
实时监测导航信号是否存在和存在时导航信号的延迟时间。重定位时,获取重定位时刻的导航信号存在情况和延时时间。
判断导航信号是否存在;
若导航信号不存在,则在重定位时,Cartographer订阅第一话题,通过第一话题获取第一初始位姿,将第一初始位姿的坐标转换到IMU坐标系后,传递给位姿推测器实现重定位Cartographer订阅第一话题,以获取第一初始位姿将所获的第一初始位姿转换后传递给位姿推测器,位姿推测器接收转换后的第一初始位姿前删除前序数据;
若导航信号存在,则比较导航信号的延迟时间和延迟时间阈值,若待重定位的设备的导航信号的延迟时间大于延迟时间阈值,则在重定位时,Cartographer订阅第一话题,通过第一话题获取第一初始位姿,将第一初始位姿的坐标转换到IMU坐标系后,传递给位姿推测器实现重定位Cartographer订阅第一话题,以获取第一初始位姿将所获的第一初始位姿转换后传递给位姿推测器,位姿推测器接收转换后的第一初始位姿前删除前序数据,
若导航信号存在且导航信号端延迟时间小于延迟时间阈值,则在重定位时Cartographer订阅第二话题,获取第二初始位姿,将第二初始位姿传递给位姿推测器实现重定位;Cartographer订阅第二话题,以获取第二初始位姿,将所获的第二初始位姿转换后传递给位姿推测器,位姿推测器接收转换后的第二初始位姿前删除前序数据。
其中,参阅图2所示,计算第一初始位姿发布包含第一初始位姿的第一话题的过程如下:
将室内场景通过激光雷达、IMU和里程计融合的SLAM技术建立高精度地图。具体的,通过激光雷达扫描室内场景,同时将IMU、里程计信息加入到SLAM构图环境中,实现对室内场景高精度地图的构建,并保存高精度地图的二进制pbstream格式文件。
将所述高精度地图转换为点云地图,对点云地图进行体素滤波得到降采样后的稀疏点云地图。具体的,在点云地图中,通过voxelgrid类创建三维体素网格,遍历体素网格中每个体素内的点云地图点的坐标,利用体素内全部点的坐标计算每个体素的重心坐标,保留每个体素内距离中心最近的点,实现对点云地图的降采样。
待重定位设备通过雷达扫描所处室内场景得到雷达帧;取重定位前最后一的雷达帧对应的稀疏点云地图作为参考帧,取当前时刻的雷达帧作为目标帧。
将参考帧所占空间分为若干格子,对于每个格子,基于格子内的点计算每个格子的多维正态概率密度函数。
具体的,统计每个格子内的点
Figure 519172DEST_PATH_IMAGE001
k=1,2,……m,计算格子内点多维正态概率密度 的平均值:
Figure 138372DEST_PATH_IMAGE002
计算多维正态概率密度的协方差:
Figure 687296DEST_PATH_IMAGE003
则一个格子的多维正态概率密度函数为:
Figure 417355DEST_PATH_IMAGE004
,其中,a为常数。
利用被迭代优化的变换参数使目标帧变换到参考帧所在的参考坐标系中,其中,变换参数包括旋转矩阵和平移矩阵;计算目标帧转换后每个点落到对应格子中的概率密度,进而将对应点落到对应格子中的概率密度之和作为目标函数,通过牛顿优化算法迭代优化变换参数,以寻找使得目标函数值最大的目标变换参数,基于目标变换参数和参考帧的坐标确定目标帧的第一初始位姿,并发布包含第一初始位姿的第一话题。
参阅图3所示,获取第二位姿,发布包含第二位姿的第二话题的过程如下:
设备的导航信号良好时,获取导航提供的导航位姿,导航位姿的坐标转换到IMU坐标系得到第二初始位姿,发布包含第二初始位姿的第二话题。
实施例2
参阅图4所示,本发明实施例提供一种设备快速重定位装置,包括:至少一处理单元、存储单元、激光雷达、IMU传感器和GPS传感器,所述处理单元、所述存储单元、所述激光雷达、GPS传感器和IMU传感器通过总线单元连接;所述存储单元存储计算机程序,所述处理单元从存储单元读取执行计算机程序实现所述的设备快速重定位方法。
实施例3
本发明实施例提供一种实现设备快速重定位方法的存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现所述的设备快速重定位方法。
在本发明所提供的实施例中,应该理解到,所揭露的结构,可以通过其它的方式实现。例如,以上所描述的结构实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,结构或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种设备快速重定位方法,其特征在于,包括:
取重定位前最后一雷达帧对应的稀疏点云地图作为参考帧,取当前时刻的雷达帧作为目标帧;
将参考帧所占空间分为若干格子,对于每个格子,基于格子内的点计算每个格子的多维正态概率密度函数;
利用被迭代优化的变换参数使目标帧变换到参考帧所在的参考坐标系中,其中,变换参数包括旋转矩阵和平移矩阵;计算目标帧转换后每个点落到对应格子中的概率密度;进而将对应点落到对应格子中的概率密度之和作为目标函数;
通过牛顿优化算法迭代优化变换参数,以寻找使得目标函数值最大的目标变换参数,基于目标变换参数和参考帧的坐标确定目标帧的第一初始位姿,并发布包含第一初始位姿第一话题;
设备导航信号良好时,导航提供的导航位姿,导航位姿的坐标转换到IMU坐标系得到第二初始位姿,发布第二初始位姿的第二话题;
重定位时,若导航信号的延迟时间大于延迟时间阈值或导航信号消失,则在重定位时Cartographer订阅第一话题,将第一初始位姿的坐标转换到IMU坐标系后,传递给位姿推测器实现重定位;若导航信号存在且导航信号端延迟时间小于延迟时间阈值,则在重定位时Cartographer订阅第二话题,获取第二初始位姿,将第二初始位姿传递给位姿推测器实现重定位。
2.根据权利要求1所述的设备快速重定位方法,其特征在于,将室内场景通过激光雷达、IMU和里程计融合的SLAM技术建立高精度地图;
将所述高精度地图转换为点云地图,对点云地图进行体素滤波得到降采样后的稀疏点云地图。
3.根据权利要求1所述的设备快速重定位方法,其特征在于,Cartographer获取第一初始位姿或第二初始位姿,将所获的第一初始位姿或第二初始位姿转换后传递给位姿推测器,位姿推测器接收转换后的第一初始位姿或第二初始位姿前删除前序数据。
4.根据权利要求1所述的设备快速重定位方法,其特征在于,预先设定导航信号的延迟时间阈值,实时监测导航信号是否存在和存在时导航信号的延迟时间,重定位时,获取重定位时刻的导航信号的延迟时间,比较导航信号的延迟时间和延迟时间阈值。
5.一种设备快速重定位装置,其特征在于,包括:至少一处理单元、存储单元、激光雷达、GPS传感器和IMU传感器,所述处理单元、所述存储单元、所述激光雷达、GPS传感器和IMU传感器通过总线单元连接;所述存储单元存储计算机程序,所述处理单元从存储单元读取执行计算机程序实现如权利要求1-4任一所述的设备快速重定位方法。
6.一种实现设备快速重定位方法的存储介质,所述存储介质其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-4任一所述的设备快速重定位方法。
CN202211679207.7A 2022-12-27 2022-12-27 一种设备快速重定位方法、装置及存储介质 Active CN115657062B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211679207.7A CN115657062B (zh) 2022-12-27 2022-12-27 一种设备快速重定位方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211679207.7A CN115657062B (zh) 2022-12-27 2022-12-27 一种设备快速重定位方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN115657062A CN115657062A (zh) 2023-01-31
CN115657062B true CN115657062B (zh) 2023-03-17

Family

ID=85022122

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211679207.7A Active CN115657062B (zh) 2022-12-27 2022-12-27 一种设备快速重定位方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN115657062B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112946708A (zh) * 2019-12-11 2021-06-11 中国航天***工程有限公司 一种提高北斗导航***定位精度的方法及***
CN113074731A (zh) * 2021-03-22 2021-07-06 中国工商银行股份有限公司 一种智能导航设备及智能导航设备自主导航方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018134686A2 (en) * 2017-01-19 2018-07-26 Mindmaze Holding Sa Systems, methods, device and apparatuses for performing simultaneous localization and mapping
CN109389641A (zh) * 2017-08-02 2019-02-26 北京贝虎机器人技术有限公司 室内地图综合数据生成方法及室内重定位方法
CN110850457A (zh) * 2019-10-22 2020-02-28 同济大学 一种用于室内煤场的无人机定位导航方法
CN112596064B (zh) * 2020-11-30 2024-03-08 中科院软件研究所南京软件技术研究院 激光与视觉融合的一体化室内机器人全局定位方法
CN112612029A (zh) * 2020-12-24 2021-04-06 哈尔滨工业大学芜湖机器人产业技术研究院 融合ndt和icp的栅格地图定位方法
CN114489036B (zh) * 2021-07-25 2023-07-14 西北农林科技大学 一种基于slam的室内机器人导航控制方法
CN114092714A (zh) * 2021-11-19 2022-02-25 江苏科技大学 基于增强回环检测与重定位的家用割草机器人的定位方法
CN114862953A (zh) * 2022-04-28 2022-08-05 杭州电子科技大学 一种基于视觉特征和3d激光的移动机器人重定位方法及装置
CN115371665B (zh) * 2022-09-13 2023-06-23 哈尔滨工业大学 一种基于深度相机和惯性融合的移动机器人定位方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112946708A (zh) * 2019-12-11 2021-06-11 中国航天***工程有限公司 一种提高北斗导航***定位精度的方法及***
CN113074731A (zh) * 2021-03-22 2021-07-06 中国工商银行股份有限公司 一种智能导航设备及智能导航设备自主导航方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
包加桐 等.视觉与激光结合的室内移动机器人重定位方法.2021,第47卷(第11期),1-7. *

Also Published As

Publication number Publication date
CN115657062A (zh) 2023-01-31

Similar Documents

Publication Publication Date Title
CN108319655B (zh) 用于生成栅格地图的方法和装置
CN111027401B (zh) 一种摄像头和激光雷达融合的端到端目标检测方法
CN109059906B (zh) 车辆定位方法、装置、电子设备、存储介质
KR102548282B1 (ko) 고정밀도 맵 작성 방법 및 장치
CN112526513B (zh) 基于聚类算法的毫米波雷达环境地图构建方法及装置
US11010919B2 (en) Object locator with fiducial marker
CN110889808A (zh) 一种定位的方法、装置、设备及存储介质
CN110470308B (zh) 一种避障***及方法
CN112106111A (zh) 一种标定方法、设备、可移动平台及存储介质
CN112505671B (zh) Gnss信号缺失环境下毫米波雷达目标定位方法及装置
Konrad et al. Localization in digital maps for road course estimation using grid maps
CN112414417A (zh) 自动驾驶地图生成方法、装置、电子设备及可读存储介质
CN112183434B (zh) 建筑物变化检测方法和装置
JP2021051737A (ja) オブジェクト位置分析
CN108803659B (zh) 基于魔方模型的多窗口启发式三维空间路径规划方法
CN113156407A (zh) 车载激光雷达外参数联合标定方法、***、介质及设备
WO2021218346A1 (zh) 一种聚类的方法和装置
CN115657062B (zh) 一种设备快速重定位方法、装置及存储介质
US20200410305A1 (en) Determination method and determination device
Meng et al. Multi‐vehicle multi‐sensor occupancy grid map fusion in vehicular networks
KR102130687B1 (ko) 다중 센서 플랫폼 간 정보 융합을 위한 시스템
CN114398455A (zh) 异构多机器人协同slam地图融合方法
CN114384486A (zh) 一种数据处理方法及装置
KR20220062709A (ko) 모바일 디바이스 영상에 기반한 공간 정보 클러스터링에 의한 재난 상황 인지 시스템 및 방법
JP2021103482A (ja) 自己位置推定方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A fast relocation method, device, and storage medium for equipment

Granted publication date: 20230317

Pledgee: Haidian Beijing science and technology enterprise financing Company limited by guarantee

Pledgor: Polytechnic Leike Zhitu (Beijing) Technology Co.,Ltd.|Leike Zhitu (Tai'an) Automobile Technology Co.,Ltd.

Registration number: Y2024110000149

PE01 Entry into force of the registration of the contract for pledge of patent right