CN108765499B - 一种车载非gpu渲染360度立体环视实现方法 - Google Patents

一种车载非gpu渲染360度立体环视实现方法 Download PDF

Info

Publication number
CN108765499B
CN108765499B CN201810566248.2A CN201810566248A CN108765499B CN 108765499 B CN108765499 B CN 108765499B CN 201810566248 A CN201810566248 A CN 201810566248A CN 108765499 B CN108765499 B CN 108765499B
Authority
CN
China
Prior art keywords
visual angle
mapping table
camera
auxiliary
fisheye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810566248.2A
Other languages
English (en)
Other versions
CN108765499A (zh
Inventor
缪其恒
苏巍
刘振发
严静
王江明
许炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Zero Run Technology Co Ltd
Original Assignee
Zhejiang Leapmotor Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Leapmotor Technology Co Ltd filed Critical Zhejiang Leapmotor Technology Co Ltd
Priority to CN201810566248.2A priority Critical patent/CN108765499B/zh
Publication of CN108765499A publication Critical patent/CN108765499A/zh
Application granted granted Critical
Publication of CN108765499B publication Critical patent/CN108765499B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种车载非GPU渲染360度立体环视实现方法,包括下列步骤:①离线标定相机参数,生成相机标定参数配置文件;②建立立体环境模型,根据相机标定参数配置文件与预设渲染点位置,生成鱼眼相机图像输入对应到环视辅助视角的离线辅助视角映射表;③压缩映射表文件;④映射表在线载入,实时解压离线辅助视角映射表压缩文件,更新鱼眼输入权重系数,实时显示辅助视角。本发明在传统2D环视***硬件架构上,不利用GPU渲染实现任意视角的辅助显示,包括动态连续视角切换,有更好的辅助显示体验;相比于现有的3D环视***,在确保同等辅助视觉效果前提下,大大降低成本。本发明具有很好的通用性,具有很强的实际应用价值。

Description

一种车载非GPU渲染360度立体环视实现方法
技术领域
本发明涉及一种汽车视觉***,尤其涉及一种车载非GPU渲染360度立体环视实现方法。
背景技术
智能化是汽车行业发展的重要趋势之一,视觉***在汽车主动安全领域应用越来越广。360度环视***是现有高级汽车辅助安全***之一,此类***可以在低速工况下为驾驶员提供车辆周围情况,为驾驶员低速操作(如泊车等)提供视觉辅助,已经成为众多量产车型的标准配置。
现有汽车立体环视***大多只提供俯视视角下车辆周围环境的平面示意图,视野范围有限,一般只能辅助显示车辆周围2~3米以内的区域,且非道路平面部分物体映射变形严重。并且,此类***不同应用下的辅助视角为单个镜头输入场景的离散视点,辅助场景应用较为单一。现有立体环视***多基于GPU(图形处理器)的强大图形渲染能力,***硬件架构相比于2D环视***完全不同,并且成本显著提升。
发明内容
本发明为了解决上述技术问题,提供一种车载非GPU渲染360度立体环视实现方法,其能够在现有2D环视***的硬件架构下,实现任意视角的辅助显示,包括动态连续视角切换,有更好的辅助显示体验;相比于现有的3D环视***,本发明能在实现同等辅助效果的情况下,避免GPU硬件模块所引入的成本提升。
本发明的上述技术问题主要是通过下述技术方案得以解决的:本发明一种车载非GPU渲染360度立体环视实现方法,包括下列步骤:
①离线标定相机参数,生成相机标定参数配置文件;
②生成离线辅助视角映射表;
③压缩映射表文件;
④映射表在线载入,并实时显示辅助视角。
本发明提出了一种可以在传统2D环视***硬件架构上,不利用GPU渲染能力实现立体环视功能的方法。本发明实现汽车任意视角的辅助显示,包括动态连续视角切换,有更好的辅助显示体验,而且大大减少成本。本发明的硬件架构通用性更强,可以适用于各种自定义辅助视角显示。
作为优选,所述的步骤①为:利用预设标定靶以及标定场地,对车载各鱼眼相机的内部参数及外部参数进行离线标定,生成相机标定参数配置文件。包括鱼眼相机内部参数(焦距、光心)、畸变系数以及外部参数(旋转参数、平移参数)。
作为优选,所述的步骤②包括下列步骤:
(21)建立立体环境模型,生成立体环境模型(X,Y)与鱼眼输入视角图像(u,v)的映射关系F,即:[X,Y]=F(u,v);
(22)计算辅助视角映射关系,生成辅助视角(u’,v’)与立体环境模型(X,Y)的映射关系H,即:[u’,v’]=H(X,Y);
(23)生成鱼眼输入权重系数;
(24)计算辅助视角与鱼眼输入视角映射关系:合并步骤(21)与步骤(22)中生成的两映射表,辅助视角中各点的亮度值为相关输入视角像素点亮度值与相应权重系数乘积之和,即:[u’,v’]=H(F(u,v))。
离线构建立体环境模型与车辆模型,根据相机标定参数配置文件与预设渲染点位置,生成原视角输入图像与渲染后辅助视角的映射关系,即生成从鱼眼图像输入对应到环视辅助视角的映射表。
作为优选,所述的步骤(21)为:建立立体环境模型,立体环境模型由平面、柱面以及球面三部分组成,由步骤①中生成的相机标定参数配置文件将鱼眼图像矫正后,根据小孔成像原理获得立体环境模型(X,Y)与鱼眼输入视角图像(u,v)映射关系F,即:[X,Y]=F(u,v)。
作为优选,所述的步骤(22)为:将3D自身车辆模型按外部几何位置置于步骤(21)建立的立体环境模型中,根据应用模式,设定若干渲染点以及渲染所用虚拟相机参数,包括焦距、视场角以及全局坐标,利用小孔成像原理,通过计算,生成辅助视角(u’,v’)与立体环境模型(X,Y)的映射关系H,即:[u’,v’]=H(X,Y)。
作为优选,所述的步骤(23)为:在各鱼眼输入图像上添加一维权重通道,鱼眼输入权重系数包括接缝融合权重系数,接缝融合权重系数采用预设渐进权重系数Wi(u,v);对于相邻相机视场未重合区域,W(u,v)=1;对于相邻相机视场重合区域,0<W(u,v)<1。
作为优选,所述的步骤③为:步骤②获得的离线辅助视角映射表文件按lz4压缩方式进行压缩,并将压缩后的文件存入***FLASH中。
作为优选,所述的步骤④包括下列步骤:
(41)实时解压离线辅助视角映射表压缩文件;
(42)更新鱼眼输入权重系数;
(43)实时显示辅助视角。
作为优选,所述的步骤(41)为:先启动立体环视***中的操作***,将步骤③中压缩的映射表文件拷贝至内存中,并解压初始视角放入映射表寄存器中,映射表寄存器内容动态更新,以最新载入的映射表替换映射表寄存器中最早存在的映射表;然后在分线程中,根据车辆操作信号以及应用层视角切换模式定义,按应用需求解压后续所需视角映射表文件,更新映射表寄存器中的映射表内容。初始视角包括显示主视角和预定义模式切换预读入视角若干。映射表寄存器定义为长度固定的映射表存放空间。车辆操作信号包括档位切换、转向等信号。
作为优选,所述的步骤(42)为:鱼眼输入总权重系数W’(u,v)计算方法如下:Wi’(u,v)=Wi(u,v)*Ki,其中,Ki为各相机光照补偿系数;
所述的步骤(43)为:在主线程中,获取映射表寄存器中显示位的映射表地址,基于步骤(42)获得的鱼眼输入总权重系数以及相应鱼眼输入图像,利用remap函数采用双线性/最近邻方式实现辅助视角渲染,从而实时显示辅助视角。
本发明的有益效果是:利用通用的remap函数替代GPU渲染功能,可实现任意自定义辅助视角显示。相比于已有的2D环视***,本发明的通用性以及辅助显示的体验更好。相比于已有的3D环视***,本发明能在实现同等辅助效果的情况下,避免GPU硬件模块所引入的成本提升。此外,本发明运算单元在环视***不作用的工况下,可复用作其他辅助驾驶功能处理单元,而GPU渲染引擎不具备此功能,因此本发明具有更好的通用性,具有很强的实际应用价值。
附图说明
图1是本发明非GPU渲染360度立体环视***的一种***结构示意图。
图2是本发明中立体环境模型的一种切面示意图。
图中1.平面,2.柱面,3.球面。
具体实施方式
下面通过实施例,并结合附图,对本发明的技术方案作进一步具体的说明。
实施例:本实施例的一种车载非GPU渲染360度立体环视实现方法,所用的车载非GPU渲染360度立体环视***如图1所示,***的输入为四路鱼眼相机输入,经过离线标定以及渲染配置文件生成、在线映射表解压和实时辅助视角显示,输出为车辆周围360度全景辅助视图。
车载非GPU渲染360度立体环视实现方法,包括下列步骤:
①离线标定相机参数,生成相机标定参数配置文件:利用预设标定靶以及标定场地,对车载各鱼眼相机的内部参数及外部参数进行离线标定,包括鱼眼相机内部参数(焦距、光心)、畸变系数以及外部参数(旋转参数、平移参数),生成相机标定参数配置文件;
②生成离线辅助视角映射表,包括下列步骤:
(21)建立立体环境模型,立体环境模型由平面、柱面以及球面三部分组成,如图2所示,R1、R2、R3为立体环境模型可配置参数,由步骤①中生成的相机标定参数配置文件将鱼眼图像矫正后,根据小孔成像原理获得立体环境模型(X,Y)与鱼眼输入视角图像(u,v)映射关系F,即:[X,Y]=F(u,v);
(22)将3D自身车辆模型按外部几何位置置于步骤(21)建立的立体环境模型中,根据相应应用模式,设定若干渲染点以及渲染所用虚拟相机参数,包括焦距、视场角以及全局坐标,利用小孔成像原理,通过计算,生成辅助视角(u’,v’)与立体环境模型(X,Y)的映射关系H,即:[u’,v’]=H(X,Y):
(23)生成鱼眼输入权重系数:在各鱼眼输入图像上添加一维权重通道,鱼眼输入权重系数包括接缝融合权重系数,接缝融合权重系数采用预设渐进权重系数Wi(u,v);对于相邻相机视场未重合区域,W(u,v)=1;对于相邻相机视场重合区域,0<W(u,v)<1;
(24)计算辅助视角与鱼眼输入视角映射关系:合并步骤(21)与步骤(22)中生成的两映射表,辅助视角中各点的亮度值为相关输入视角像素点亮度值与相应权重系数乘积之和,即:[u’,v’]=H(F(u,v));即生成从鱼眼图像输入对应到环视辅助视角的映射表,获得离线辅助视角映射表文件;
③压缩映射表文件:对步骤②获得的离线辅助视角映射表文件按1z4压缩方式进行压缩,并将压缩后的文件存入***FLASH中;
④映射表在线载入,并实时显示辅助视角,包括下列步骤:
(41)实时解压离线辅助视角映射表压缩文件:先启动立体环视***中的操作***,将步骤③中压缩的映射表文件拷贝至内存中,并解压初始视角(包括显示主视角和预定义模式切换预读入视角若干)放入映射表寄存器中,映射表寄存器定义为长度固定的映射表存放空间,映射表寄存器内容动态更新,以最新载入的映射表替换映射表寄存器中最早存在的映射表;然后在分线程中,根据车辆操作信号(包括档位切换、转向等)以及应用层视角切换模式定义,按应用需求解压后续所需视角映射表文件,更新映射表寄存器中的映射表内容;
(42)更新鱼眼输入权重系数:鱼眼输入总权重系数W’(u,v)计算方法如下:Wi’(u,v)=Wi(u,v)*Ki,其中,Ki为各相机光照补偿系数;
光照补偿计算方法如下:
提取相邻鱼眼相机重合区域平均亮度,通过调整各相机亮度增益,使重合区域亮度差最小,即均衡各鱼眼相机亮度,此过程通过以下最小化误差函数error来获得相机增益:
Figure BDA0001683834410000071
其中,Nij为相机i重叠于相机j的像素个数,
gaini,gainj分别是相机i和j的增益,
Figure BDA0001683834410000072
是相机i在与相机j重叠区域的像素平均值,
σN是归一化的亮度误差的标准方差,
σg是增益的标准方差,
n是相机的个数;
(43)实时显示辅助视角:在主线程中,获取映射表寄存器中显示位的映射表地址,基于步骤(42)获得的鱼眼输入总权重系数以及相应鱼眼输入图像,利用remap函数(采用双线性/最近邻方式)实现辅助视角渲染,最后在视觉界面实时显示全景辅助视图。
本发明提出了一种可以在传统2D环视***硬件架构上,不利用GPU渲染能力实现立体环视功能的方法。本发明利用通用的remap函数替代GPU渲染功能,可实现任意自定义辅助视角显示。将接缝融合与光照补偿算法合并到同一个权重mask中,减少算法总步骤以及运算数。相比于已有的2D环视***,本发明的通用性以及辅助显示的体验更好;相比于已有的3D环视***,本发明能在实现同等辅助效果的情况下,避免GPU硬件模块所引入的成本提升。此外,本发明所用运算单元在环视***不作用的工况下,可复用做其他辅助驾驶功能处理单元,而GPU渲染引擎不具备此功能,因而,本发明有更好的通用性,具备很强的实际应用价值。

Claims (5)

1.一种车载非GPU渲染360度立体环视实现方法,其特征在于包括下列步骤:
①离线标定相机参数,生成相机标定参数配置文件;
②生成离线辅助视角映射表;
所述的步骤②包括下列步骤:
(21)建立立体环境模型,生成立体环境模型(X,Y)与鱼眼输入视角图像(u,v)的映射关系F,即:[X,Y]=F(u,v);
(22)计算辅助视角映射关系,生成辅助视角(u’,v’)与立体环境模型(X,Y)的映射关系H,即:[u’,v’]=H(X,Y);
所述的步骤(22)为:将3D自身车辆模型按外部几何位置置于步骤(21)建立的立体环境模型中,根据应用模式,设定若干渲染点以及渲染所用虚拟相机参数,包括焦距、视场角以及全局坐标,利用小孔成像原理,通过计算,生成辅助视角(u’,v’)与立体环境模型(X,Y)的映射关系H,即:[u’,v’]=H(X,Y);
(23)生成鱼眼输入权重系数;
(24)计算辅助视角与鱼眼输入视角映射关系:合并步骤(21)与步骤(22)中生成的两映射表,辅助视角中各点的亮度值为相关输入视角像素点亮度值与相应权重系数乘积之和,即:[u’,v’]=H(F(u,v));
③压缩映射表文件;
④映射表在线载入,并实时显示辅助视角;
所述的步骤④包括下列步骤:
(41)实时解压离线辅助视角映射表压缩文件;
所述的步骤(41)为:先启动立体环视***中的操作***,将步骤③中压缩的映射表文件拷贝至内存中,并解压初始视角放入映射表寄存器中,映射表寄存器内容动态更新,以最新载入的映射表替换映射表寄存器中最早存在的映射表;然后在分线程中,根据车辆操作信号以及应用层视角切换模式定义,按应用需求解压后续所需视角映射表文件,更新映射表寄存器中的映射表内容;
(42)更新鱼眼输入权重系数;
所述的步骤(42)为:鱼眼输入总权重系数W’(u,v)计算方法如下:Wi’(u,v)=Wi(u,v)*Ki,其中,Ki为各相机光照补偿系数;
光照补偿计算方法如下:
提取相邻鱼眼相机重合区域平均亮度,通过调整各相机亮度增益,使重合区域亮度差最小,即均衡各鱼眼相机亮度,此过程通过以下最小化误差函数error来获得相机增益:
Figure FDA0003057706570000021
其中,Nij为相机i重叠于相机j的像素个数,
gaini,gainj分别是相机i和j的增益,
Figure FDA0003057706570000022
是相机i在与相机j重叠区域的像素平均值,
σN是归一化的亮度误差的标准方差,
σg是增益的标准方差,
n是相机的个数;
(43)实时显示辅助视角;
所述的步骤(43)为:在主线程中,获取映射表寄存器中显示位的映射表地址,基于步骤(42)获得的鱼眼输入总权重系数以及相应鱼眼输入图像,利用remap函数实现辅助视角渲染。
2.根据权利要求1所述的一种车载非GPU渲染360度立体环视实现方法,其特征在于所述的步骤①为:利用预设标定靶以及标定场地,对车载各鱼眼相机的内部参数及外部参数进行离线标定,生成相机标定参数配置文件。
3.根据权利要求1所述的一种车载非GPU渲染360度立体环视实现方法,其特征在于所述的步骤(21)为:建立立体环境模型,立体环境模型由平面、柱面以及球面三部分组成,由步骤①中生成的相机标定参数配置文件将鱼眼图像矫正后,根据小孔成像原理获得立体环境模型(X,Y)与鱼眼输入视角图像(u,v)映射关系F,即:[X,Y]=F(u,v)。
4.根据权利要求1或3所述的一种车载非GPU渲染360度立体环视实现方法,其特征在于所述的步骤(23)为:在各鱼眼输入图像上添加一维权重通道,鱼眼输入权重系数包括接缝融合权重系数,接缝融合权重系数采用预设渐进权重系数Wi(u,v);对于相邻相机视场未重合区域,W(u,v)=1;对于相邻相机视场重合区域,0<W(u,v)<1。
5.根据权利要求1所述的一种车载非GPU渲染360度立体环视实现方法,其特征在于所述的步骤③为:步骤②获得的离线辅助视角映射表文件按lz4压缩方式进行压缩,并将压缩后的文件存入***FLASH中。
CN201810566248.2A 2018-06-04 2018-06-04 一种车载非gpu渲染360度立体环视实现方法 Active CN108765499B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810566248.2A CN108765499B (zh) 2018-06-04 2018-06-04 一种车载非gpu渲染360度立体环视实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810566248.2A CN108765499B (zh) 2018-06-04 2018-06-04 一种车载非gpu渲染360度立体环视实现方法

Publications (2)

Publication Number Publication Date
CN108765499A CN108765499A (zh) 2018-11-06
CN108765499B true CN108765499B (zh) 2021-07-09

Family

ID=63998876

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810566248.2A Active CN108765499B (zh) 2018-06-04 2018-06-04 一种车载非gpu渲染360度立体环视实现方法

Country Status (1)

Country Link
CN (1) CN108765499B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109710873A (zh) * 2018-12-28 2019-05-03 北京微播视界科技有限公司 客户端的图片加载显示方法、装置及电子设备
CN113066158B (zh) * 2019-12-16 2023-03-10 杭州海康威视数字技术股份有限公司 一种车载环视方法及装置
CN111738909B (zh) * 2020-06-11 2023-09-26 杭州海康威视数字技术股份有限公司 一种图像生成方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103802725A (zh) * 2012-11-06 2014-05-21 无锡维森智能传感技术有限公司 一种新的车载驾驶辅助图像生成方法
CN107792179A (zh) * 2017-09-27 2018-03-13 浙江零跑科技有限公司 一种基于车载环视***的泊车引导方法
CN107888894A (zh) * 2017-10-12 2018-04-06 浙江零跑科技有限公司 一种立体车载环视方法、***及车载中控装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070182812A1 (en) * 2004-05-19 2007-08-09 Ritchey Kurtis J Panoramic image-based virtual reality/telepresence audio-visual system and method
US20180041749A1 (en) * 2016-08-04 2018-02-08 Thomas Seidl Method and apparatus for stimulating stereoscopic depth perception of stereoscopic data inside head mounted displays when viewing panoramic immersive stereoscopic content

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103802725A (zh) * 2012-11-06 2014-05-21 无锡维森智能传感技术有限公司 一种新的车载驾驶辅助图像生成方法
CN107792179A (zh) * 2017-09-27 2018-03-13 浙江零跑科技有限公司 一种基于车载环视***的泊车引导方法
CN107888894A (zh) * 2017-10-12 2018-04-06 浙江零跑科技有限公司 一种立体车载环视方法、***及车载中控装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Panoramic View Reconstruction for Stereoscopic Teleoperation of a Humanoid Robot;Konstantinos Theofilis等;《IEEE》;20170102;第242-248页 *
一种基于折反射相机的客车全景环视***;迟瑞娟等;《哈尔滨工程大学学报》;20130228;第34卷(第2期);第190-196页 *
汽车全景环视***的研究;程德俊;《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》;20140815;第8-43页 *

Also Published As

Publication number Publication date
CN108765499A (zh) 2018-11-06

Similar Documents

Publication Publication Date Title
US11303806B2 (en) Three dimensional rendering for surround view using predetermined viewpoint lookup tables
TWI524306B (zh) 圖像轉換和多視圖輸出系統及方法
JP4257356B2 (ja) 画像生成装置および画像生成方法
CN108765499B (zh) 一种车载非gpu渲染360度立体环视实现方法
US20170324943A1 (en) Driver-assistance method and a driver-assistance apparatus
CN105262958B (zh) 一种虚拟视点的全景特写拼接***及其方法
US20210329169A1 (en) Using real time ray tracing for lens remapping
EP1600890A2 (en) Distortion correction of fish-eye image
US10007853B2 (en) Image generation device for monitoring surroundings of vehicle
CN105741233B (zh) 一种视频图像球面拼接方法及***
JP6255928B2 (ja) 俯瞰画像生成装置
TW201417042A (zh) 動態影像處理方法以及動態影像處理系統
US20120044241A1 (en) Three-dimensional on-screen display imaging system and method
WO2016125371A1 (ja) 画像生成装置、座標変換テーブル作成装置および作成方法
KR20130016335A (ko) 처리대상화상 생성장치, 처리대상화상 생성방법, 및 조작지원 시스템
CN111275621A (zh) 一种行车环视***中全景图生成方法、***及存储介质
US20200388005A1 (en) Enhanced rendering of surround view images
CN113870161A (zh) 基于人工智能的车载3d环视拼接方法及装置
US20240208419A1 (en) Display method and display system of on-vehicle avm, electronic device, and storage medium
CN112070886A (zh) 矿用自卸车的影像监控方法及相关设备
TWI505203B (zh) 產生車用影像的影像處理方法及影像處理裝置
CN114513646B (zh) 一种三维虚拟场景中全景视频的生成方法及设备
CN111798375A (zh) 环视图像拼接方法、***、装置、存储介质和搅拌车
JP2013137698A (ja) 俯瞰画像提示装置
WO2022227753A1 (zh) 用于双目畸变校正的显示***、显示方法及车载***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 310051 1st and 6th floors, no.451 Internet of things street, Binjiang District, Hangzhou City, Zhejiang Province

Patentee after: Zhejiang Zero run Technology Co.,Ltd.

Address before: 310051 1st and 6th floors, no.451 Internet of things street, Binjiang District, Hangzhou City, Zhejiang Province

Patentee before: ZHEJIANG LEAPMOTOR TECHNOLOGY Co.,Ltd.