CN109688392A - Ar-hud光学投影***及映射关系标定方法和畸变矫正方法 - Google Patents

Ar-hud光学投影***及映射关系标定方法和畸变矫正方法 Download PDF

Info

Publication number
CN109688392A
CN109688392A CN201811596578.2A CN201811596578A CN109688392A CN 109688392 A CN109688392 A CN 109688392A CN 201811596578 A CN201811596578 A CN 201811596578A CN 109688392 A CN109688392 A CN 109688392A
Authority
CN
China
Prior art keywords
screen
coordinate
optical projection
virtual
hud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811596578.2A
Other languages
English (en)
Other versions
CN109688392B (zh
Inventor
张剑
朱宣丞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DIAS Automotive Electronic Systems Co Ltd
Lianchuang Automotive Electronics Co Ltd
Original Assignee
Lianchuang Automotive Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lianchuang Automotive Electronics Co Ltd filed Critical Lianchuang Automotive Electronics Co Ltd
Priority to CN201811596578.2A priority Critical patent/CN109688392B/zh
Publication of CN109688392A publication Critical patent/CN109688392A/zh
Application granted granted Critical
Publication of CN109688392B publication Critical patent/CN109688392B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3182Colour adjustment, e.g. white balance, shading or gamut

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种AR‑HUD光学投影***包括:HUD显示装置和显示控制器,显示控制器映射关系标定采用:标定辅助设备对承载设备和人眼模拟设备进行空间定位,人眼模拟设备捕捉投影虚拟屏的显示内容,将显示内容像素转化为人眼模拟设备坐标系下的三维坐标一,再将三维坐标一转化为承载设备坐标系下三维坐标二,将三维坐标二横向和竖向坐标值作为显示内容在投影虚拟屏中的映射平面坐标,将映射平面坐标和显示内容在实际屏幕上的像素坐标拟合计算,获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标,将虚拟投影屏幕上的平面二维坐标以数组形式作为标定结果。本发明还公开了一种AR‑HUD光学投影***映射关系标定方法和一种AR‑HUD光学投影***畸变矫正方法。

Description

AR-HUD光学投影***及映射关系标定方法和畸变矫正方法
技术领域
本发明涉及汽车领域,特别是涉及一种AR-HUD光学投影***。本发明还涉及一种AR-HUD光学投影***及映射关系标定方法和一种AR-HUD光学投影***及映射关系畸变矫正方法。
背景技术
为了实现人车新对话形式,汽车厂商开发出增强现实抬头显示***(AR-HUD)。该增强现实抬头显示器通过内部特殊设计的光学***将图像信息精确地结合于实际交通路况中,从而扩展了或者说增强了驾驶者对于实际驾驶环境的感知。因此,AR-HUD技术极有可能成为汽车人机界面(HMI)最具创新性的发展方向。
AR-HUD光学***能够在驾驶员的视野区域合理的叠加显示驾驶员辅助***的状态以及这些信息的含义,比如GPS数据、地图资料和驾驶动态数据等。AR-HUD还可以结合高级驾驶员辅助***(ADAS)包括:车道偏离警示***(LDW)、自适应巡航控制***(ACC)等结合使用。
增强现实抬头显示***需要利用光学的反射原理,在车辆行驶过程中,将影响车辆行驶的各种信息以图像、动画的方式,实时地通过挡风玻璃投影在驾驶员的正前方。由于车辆的挡风玻璃存在一定的曲率,会造成AR-HUD的投影图像发生畸变,投影图像发现畸变的主要原因是:不同规格的挡风玻璃的曲率也各不相同,挡风玻璃不同位置的曲率不规则,暂时无法通过规律性的方法解决畸变问题。
发明内容
本发明要解决的技术问题是提供一种能实现实际屏幕和虚拟投影屏幕映射关系准确标定并能对投影畸变进行矫正的AR-HUD光学投影***。
本发明还提供了一种能实现实际屏幕和虚拟投影屏幕映射关系准确标定的AR-HUD光学投影***映射关系标定方法。
本发明还提供了一种能对投影畸变进行矫正的AR-HUD光学投影***的AR-HUD光学投影***映射关系畸变矫正方法。
为解决上述技术问题,本发明提供的AR-HUD光学投影***包括:HUD显示装置和显示控制器,所述显示控制器采用以下方式进行所述AR-HUD光学投影***映射关系标定;
利用标定辅助设备对承载设备和人眼模拟设备进行空间定位,人眼模拟设备捕捉投影虚拟屏的显示内容,将显示内容像素转化为人眼模拟设备坐标系下的三维坐标一,再将三维坐标一转化为承载设备坐标系下三维坐标二,将三维坐标二横向和竖向坐标值作为显示内容在投影虚拟屏中的映射平面坐标,根据映射平面坐标和显示内容在实际屏幕上的像素坐标进行拟合计算,获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标,将虚拟投影屏幕上的平面二维坐标以数组形式作为映射关系标定结果。
进一步改进所述的AR-HUD光学投影***,所述标定辅助设备是专业运动捕捉***,所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
进一步改进所述的AR-HUD光学投影***,空间定位时,选取车辆内后视镜的安装位置作为车辆的空间坐标位置中心点,选取工业相机的镜头中心位置作为相机的空间坐标位置中心点。
进一步改进所述的AR-HUD光学投影***,所述显示内容表现为点阵图像。
进一步改进所述的AR-HUD光学投影***,将三维坐标一进行纵向归一化后再转化为三维坐标二,纵向归一化:纵向坐标即Z轴坐标值为1。
进一步改进所述的AR-HUD光学投影***,将三维坐标二进行纵向归一化后再作为显示内容在投影虚拟屏中的映射平面坐标。
进一步改进所述的AR-HUD光学投影***,所述拟合计算形成三次多项式方程,对该方程求解获得所述平面二维物理坐标。
进一步改进所述的AR-HUD光学投影***,所述显示控制器能执行光学投影畸变矫正,所述光学投影畸变矫正采用以下方式;
获得实际屏幕与虚拟投影屏幕之间像素的位置映射关系,在实际屏幕上对画面中每个像素进行颜色刷新时,找每个像素位置映射到虚拟屏幕画面上的像素位置,在实际屏幕像素位置刷新虚拟投影屏幕映射像素位置的颜色,进行反向畸变。
本发明提供一种AR-HUD光学投影***映射关系标定方法,包括以下步骤:
1)承载设备和人眼模拟设备进行空间定位;
2)人眼模拟设备捕捉投影虚拟屏的显示内容,将显示内容像素转化为人眼模拟设备坐标系下的三维坐标一;
3)将三维坐标一转化为承载设备坐标系下三维坐标二;
4)将三维坐标二横向和竖向坐标值作为显示内容在投影虚拟屏中的映射平面坐标;
5)根据映射平面坐标和显示内容在实际屏幕上的像素坐标进行拟合计算,获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标;
6)将虚拟投影屏幕上的平面二维坐标以数组形式作为映射关系标定结果。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,实施步骤1)时,利用专业运动捕捉***进行空间定位,所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,空间定位时,选取车辆内后视镜的安装位置作为车辆的空间坐标位置中心点,选取工业相机的镜头中心位置作为相机的空间坐标位置中心点。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,:所述显示内容表现为点阵图像。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,实施步骤2)时,将三维坐标一进行纵向归一化后再转化为三维坐标二。纵向归一化:纵向坐标即Z轴坐标值为1。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,实施步骤3)时,将三维坐标二进行纵向归一化后再作为显示内容在投影虚拟屏中的映射平面坐标。
进一步改进所述的AR-HUD光学投影***映射关系标定方法,实施步骤2)时,所述拟合计算形成三次多项式方程,对该方程求解获得所述平面二维物理坐标。
本发明提供一种利用上述任意一项所述标定结果的AR-HUD光学投影***映射关系畸变矫正方法,包括:
获得实际屏幕与虚拟投影屏幕之间像素的位置映射关系,在实际屏幕上对画面中每个像素进行颜色刷新时,找每个像素位置映射到虚拟屏幕画面上的像素位置,在实际屏幕像素位置刷新虚拟投影屏幕映射像素位置的颜色,进行反向畸变。
本发明通过能通过确定空间位置和坐标系转换等技术手段提取实际屏幕与投影投影虚拟屏上的每个像素点之间的位置映射关系,能准确模拟人眼观察到的投影虚拟屏情况,实现准确的AR-HUD光学投影***映射关系标定。当投影虚拟屏出现畸变,本发明在刷新画面时根据该映射关系进行反向畸变处理即可实现AR-HUD投影图像的畸变矫正,最大程度地消除投影图像的扭曲变形还原真实的成像效果。
附图说明
下面结合附图与具体实施方式对本发明作进一步详细的说明:
图1是本发明畸变矫正方法流程示意图。
图2是本发明畸变矫正方法点阵网格坐标系示意图。
图3是本发明畸变矫正方法坐标转换示意图。
附图标记说明
A1~A3、B1~B3、C1~C3、D1~D3和P1~P3是点阵图像中像素点
R是点阵图像行
C是点阵图像列
具体实施方式
本发明提供本发明提供的AR-HUD光学投影***包括:HUD显示装置和显示控制器,所述显示控制器采用以下方式进行所述AR-HUD光学投影***映射关系标定;
利用标定辅助设备对承载设备和人眼模拟设备进行空间定位,人眼模拟设备捕捉投影虚拟屏的点阵图像,将点阵图像像素转化为人眼模拟设备坐标系下的三维坐标一,三维坐标一进行纵向归一化(纵向归一化:纵向坐标即Z轴坐标值为1),再将三维坐标一转化为承载设备坐标系下三维坐标二,将三维坐标二进行纵向归一化后,将三维坐标二横向和竖向坐标值作为点阵图像在投影虚拟屏中的映射平面坐标,根据映射平面坐标和点阵图像在实际屏幕上的像素坐标进行拟合计算,形成三次多项式方程,对该方程求解获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标,将虚拟投影屏幕上的平面二维坐标以数组形式作为映射关系标定结果。映射关系标定完成后,本发明的显示控制器可以进行实时的光学投影畸变矫正,所述光学投影畸变矫正采用以下方式;
获得实际屏幕与虚拟投影屏幕之间像素的位置映射关系,在实际屏幕上对画面中每个像素进行颜色刷新时,找每个像素位置映射到虚拟屏幕画面上的像素位置,在实际屏幕像素位置刷新虚拟投影屏幕映射像素位置的颜色,进行反向畸变。
其中,所述标定辅助设备是专业运动捕捉***,所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
空间定位时,选取车辆内后视镜的安装位置作为车辆的空间坐标位置中心点,选取工业相机的镜头中心位置作为相机的空间坐标位置中心点。
如图1所示,本发明提供一种AR-HUD光学投影***映射关系畸变矫正方法(其包含映射关系标定方法的全部步骤)一实施例,包括以下步骤:
1)承载设备和人眼模拟设备进行空间定位;
所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。利用专业的运动捕捉设备***对车辆和工业相机进行空间定位,以此来确定两者之间的空间坐标位置关系。方案中选取车辆内后视镜的安装位置作为车辆的空间坐标位置中心点,同时选取工业相机的镜头中心位置作为相机的空间坐标位置中心点。
2)人眼模拟设备捕捉投影虚拟屏的点阵图像,将点阵图像像素转化为人眼模拟设备坐标系下的三维坐标一;在HUD的屏幕上生成预先设定的例如3行6列的标准点阵图案,然后经过AR-HUD光机内部的光学反射投影***将该点阵图案投影到挡风玻璃上,之后再使用工业相机在驾驶员的眼部位置处模拟人眼观测投影到挡风玻璃上的虚拟画面并捕捉画面中的点阵图案。当相机中的某一帧画面捕捉到虚拟投影画面中完整的点阵图像并成功获取这些点在这一帧画面中的像素坐标后,利用相机的内参数和这些点的像素坐标计算点阵中每个点在相机坐标系下的三维坐标。为了消除不同相机之间的焦距差异以及虚拟图像不同投影距离的差异,需要将该三维坐标进行纵向归一化(纵向坐标即Z轴坐标值为1)。
3)将三维坐标一转化为承载设备坐标系下三维坐标二;然后再根据相机与车辆之间的空间位置关系将上述坐标值转换为在车辆坐标系下的三维空间坐标并同样进行纵向归一化处理(Z坐标为1)。
4)将三维坐标二横向(X轴)和竖向(Y轴)坐标值作为点阵图像在投影虚拟屏中的映射平面坐标;此三维坐标二中的横向(X轴)和竖向(Y轴)坐标值即为点阵的中的点在投影虚拟画面中纵向归一化后的点阵映射位置平面坐标。
5)根据映射平面坐标和点阵图像在实际屏幕上的像素坐标进行拟合计算,获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标;之后再根据这些点的映射位置坐标和已知的这些点在实际HUD屏幕上的像素坐标进行拟合计算出一条三次多项式方程,并根据该多项式方程计算实际屏幕图像边缘上的点在虚拟屏幕上所对应的平面二维物理坐标.
6)将所有计算得到的点在虚拟屏幕上的平面二维坐标以数组形式作为标定结果进行保存作为映射关系标定结果;
7)参考图2、图3所示,获得实际屏幕与虚拟投影屏幕之间像素的位置映射关系,在实际屏幕上对画面中每个像素进行颜色刷新时,找每个像素位置映射到虚拟屏幕画面上的像素位置,在实际屏幕像素位置刷新虚拟投影屏幕映射像素位置的颜色,进行反向畸变。
根据之前在实际屏幕生成的R行C列的点阵图像上建立如图2所示的点阵网格坐标系,以相邻两点之间的距离作为坐标系的距离单位。之后根据屏幕上每个像素点在点阵网格坐标系上的坐标位置以及之前的点阵映射关系标定结果利用双线性插值方法计算除了点阵上已有的像素点之外的所有像素点在虚拟投影屏幕上的坐标位置,两者的位置关系即为实际屏幕与挡风玻璃上虚拟投影屏幕之间像素点的位置映射关系。在实际屏幕上对画面中每个像素点进行颜色刷新时,首先查找每个像素点位置处映射到虚拟屏幕画面上的像素位置,例如在画面像素点(0.1,0.1)位置处经过光学反射投影到挡风虚拟屏幕上的像素位置是(0.2,0.2);然后再在原像素位置处刷新映射的像素位置处的颜色,进行反向畸变,即在实际屏幕画面(0.1,0.1)的像素位置处显示(0.2,0.2)像素位置处的颜色。从而实现在虚拟投影屏幕画面上的畸变矫正。
继续以图3为例,对畸形矫正作进一步说明。在实际的显示屏幕上生成点阵图像后,利用相机成功捕捉到在虚拟投影屏幕上的点阵图像并经过坐标换算获得点阵中所有包括A2、B2、C2、D2这四个点阵像素点在虚拟投影屏幕上的坐标位置,并与实际屏幕上所有与之对应的包括A1、B1、C1、D1这四个点阵像素点建立映射位置关系并作为标定结果进行保存。
根据标定结果中所有点阵像素点的映射位置关系利用双线性插值计算实际屏幕上的其它像素点在虚拟投影屏幕上的映射坐标位置。例如在计算实际屏幕上的P1像素点在经过光学投影映射到虚拟屏幕上P2像素点的坐标位置时,首先根据P1像素点在点阵网格坐标系上的坐标例如(1.5,1.6)获得邻近的四个点阵像素点A1(1,1)、B1(2,1)、C1(1,2)、D1(2,2),之后根据这四个点阵像素点的映射坐标位置以及P1在这四个像素点之间横向和竖向的位置比例(0.5,0.6)分别进行插值计算,最终获得P2像素点的坐标位置即P1像素点在虚拟投影屏幕上的映射坐标位置。
在对画面进行像素填充刷新时,根据之前计算的每个像素点在虚拟屏幕上的映射坐标位置在原像素点位置处刷新映射位置处的像素点即反向畸变处理。例如在实际屏幕上A1、B1、C1、D1、P1像素点位置处分别填充A2、B2、C2、D2、P2这五个像素点位置处的颜色,同样根据像素点的映射位置关系在虚拟投影屏幕上的A1、B1、C1、D1、P1这五个像素点颜色则由实际屏幕上的A3、B3、C3、D3、P3这五个像素点位置进行填充。对其它像素点同样进行如上的处理方法最终实现畸变矫正的目的,进而达到虚拟投影画面还原实际屏幕画面真实的显示效果。
以上通过具体实施方式和实施例对本发明进行了详细的说明,但这些并非构成对本发明的限制。在不脱离本发明原理的情况下,本领域的技术人员还可做出许多变形和改进,这些也应视为本发明的保护范围。

Claims (17)

1.一种AR-HUD光学投影***包括,HUD显示装置和显示控制器,其特征在于:所述显示控制器采用以下方式进行所述AR-HUD光学投影***映射关系标定;
利用标定辅助设备对承载设备和人眼模拟设备进行空间定位,人眼模拟设备捕捉投影虚拟屏的显示内容,将显示内容像素转化为人眼模拟设备坐标系下的三维坐标一,再将三维坐标一转化为承载设备坐标系下三维坐标二,将三维坐标二横向和竖向坐标值作为显示内容在投影虚拟屏中的映射平面坐标,根据映射平面坐标和显示内容在实际屏幕上的像素坐标进行拟合计算,获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标,将虚拟投影屏幕上的平面二维坐标以数组形式作为映射关系标定结果。
2.如权利要求1所述的AR-HUD光学投影***,其特征在于:所述标定辅助设备是专业运动捕捉***,所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
3.如权利要求2所述的AR-HUD光学投影***,其特征在于:空间定位时,选取车辆内后视镜的安装位置作为车辆的空间坐标位置中心点,选取工业相机的镜头中心位置作为相机的空间坐标位置中心点。
4.如权利要求1所述的AR-HUD光学投影***,其特征在于:所述显示内容表现为点阵图像。
5.如权利要求1所述的AR-HUD光学投影***,其特征在于:将三维坐标一进行纵向归一化后再转化为三维坐标二。
6.如权利要求1所述的AR-HUD光学投影***,其特征在于:将三维坐标二进行纵向归一化后再作为显示内容在投影虚拟屏中的映射平面坐标。
7.如权利要求1所述的AR-HUD光学投影***,其特征在于:所述拟合计算形成三次多项式方程,对该方程求解获得所述平面二维物理坐标。
8.如权利要求1-7所述的AR-HUD光学投影***,其特征在于:所述显示控制器能执行光学投影畸变矫正,所述光学投影畸变矫正采用以下方式;
获得实际屏幕与虚拟投影屏幕之间像素的位置映射关系,在实际屏幕上对画面中每个像素进行颜色刷新时,找每个像素位置映射到虚拟屏幕画面上的像素位置,在实际屏幕像素位置刷新虚拟投影屏幕映射像素位置的颜色,进行反向畸变。
9.一种AR-HUD光学投影***映射关系标定方法,其特征在于,包括以下步骤:
1)承载设备和人眼模拟设备进行空间定位;
2)人眼模拟设备捕捉投影虚拟屏的显示内容,将显示内容像素转化为人眼模拟设备坐标系下的三维坐标一;
3)将三维坐标一转化为承载设备坐标系下三维坐标二;
4)将三维坐标二横向和竖向坐标值作为显示内容在投影虚拟屏中的映射平面坐标;
5)根据映射平面坐标和显示内容在实际屏幕上的像素坐标进行拟合计算,获得实际屏幕图像边缘点在虚拟投影屏幕上所对应的平面二维物理坐标;
6)将虚拟投影屏幕上的平面二维坐标以数组形式作为映射关系标定结果。
10.如权利要求9所述的AR-HUD光学投影***映射关系标定方法,其特征在于:实施步骤1)时,利用专业运动捕捉***进行空间定位,所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
11.如权利要求10所述的AR-HUD光学投影***映射关系标定方法,其特征在于:空间定位时,选取车辆内后视镜的安装位置作为车辆的空间坐标位置中心点,选取工业相机的镜头中心位置作为相机的空间坐标位置中心点。
12.如权利要求9所述的AR-HUD光学投影***映射关系标定方法,其特征在于:所述承载设备是车辆,所述人眼模拟设备是工业相机,所述实际屏幕是HUD屏,所述虚拟投影屏幕是挡风玻璃。
13.如权利要求9所述的AR-HUD光学投影***映射关系标定方法,其特征在于:所述显示内容表现为点阵图像。
14.如权利要求9所述的AR-HUD光学投影***映射关系标定方法,其特征在于:实施步骤2)时,将三维坐标一进行纵向归一化后再转化为三维坐标二。
15.如权利要求9所述的AR-HUD光学投影***映射关系标定方法,其特征在于:实施步骤3)时,将三维坐标二进行纵向归一化后再作为显示内容在投影虚拟屏中的映射平面坐标。
16.如权利要求9所述的AR-HUD光学投影***映射关系标定方法,其特征在于:实施步骤2)时,所述拟合计算形成三次多项式方程,对该方程求解获得所述平面二维物理坐标。
17.一种利用权利要求9-16任意一项所述标定结果的AR-HUD光学投影***映射关系畸变矫正方法,其特征在于,包括:
获得实际屏幕与虚拟投影屏幕之间像素的位置映射关系,在实际屏幕上对画面中每个像素进行颜色刷新时,找每个像素位置映射到虚拟屏幕画面上的像素位置,在实际屏幕像素位置刷新虚拟投影屏幕映射像素位置的颜色,进行反向畸变。
CN201811596578.2A 2018-12-26 2018-12-26 Ar-hud光学投影***及映射关系标定方法和畸变矫正方法 Active CN109688392B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811596578.2A CN109688392B (zh) 2018-12-26 2018-12-26 Ar-hud光学投影***及映射关系标定方法和畸变矫正方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811596578.2A CN109688392B (zh) 2018-12-26 2018-12-26 Ar-hud光学投影***及映射关系标定方法和畸变矫正方法

Publications (2)

Publication Number Publication Date
CN109688392A true CN109688392A (zh) 2019-04-26
CN109688392B CN109688392B (zh) 2021-11-02

Family

ID=66188380

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811596578.2A Active CN109688392B (zh) 2018-12-26 2018-12-26 Ar-hud光学投影***及映射关系标定方法和畸变矫正方法

Country Status (1)

Country Link
CN (1) CN109688392B (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110203140A (zh) * 2019-06-28 2019-09-06 威马智慧出行科技(上海)有限公司 汽车增强现实显示方法、电子设备、***及汽车
CN110349078A (zh) * 2019-05-24 2019-10-18 杨巧雪 一种用于hud正位实景显示的ar图形算法
CN110942498A (zh) * 2019-11-06 2020-03-31 天津大学 一种建立hud***图像翘曲形变模型的方法
CN111086453A (zh) * 2019-12-30 2020-05-01 深圳疆程技术有限公司 一种基于摄像头的hud增强现实显示方法、装置及汽车
CN111127365A (zh) * 2019-12-26 2020-05-08 重庆矢崎仪表有限公司 基于三次样条曲线拟合的hud畸变矫正方法
CN111208961A (zh) * 2019-12-30 2020-05-29 西安闻泰电子科技有限公司 将镜面影像映射到电子屏幕的装置及方法
CN111385947A (zh) * 2020-03-23 2020-07-07 北京经纬恒润科技有限公司 一种应用于像素灯的控制方法及装置
CN111476104A (zh) * 2020-03-17 2020-07-31 重庆邮电大学 动态眼位下ar-hud图像畸变矫正方法、装置、***
CN112258399A (zh) * 2020-09-10 2021-01-22 江苏泽景汽车电子股份有限公司 一种逆向建模的hud图像光学矫正方法
CN112381739A (zh) * 2020-11-23 2021-02-19 天津经纬恒润科技有限公司 一种ar-hud***的成像畸变矫正方法及装置
CN112738487A (zh) * 2020-12-24 2021-04-30 北京百度网讯科技有限公司 图像投射方法、装置、设备及存储介质
CN112837379A (zh) * 2021-02-04 2021-05-25 的卢技术有限公司 一种ar-hud的标定方法
CN113034607A (zh) * 2021-03-03 2021-06-25 恒大新能源汽车投资控股集团有限公司 一种车载投影设备的安装标定方法、***及电子设备
CN113792730A (zh) * 2021-08-17 2021-12-14 北京百度网讯科技有限公司 文档图像的矫正方法、装置、电子设备和存储介质
CN113947551A (zh) * 2021-11-16 2022-01-18 深圳市锐思华创技术有限公司 一种抬头显示器畸变矫正***及其矫正方法
CN114119380A (zh) * 2021-07-28 2022-03-01 上海华模科技有限公司 一种准直虚像视景***几何变形测量方法
CN114339194A (zh) * 2021-03-16 2022-04-12 深圳市火乐科技发展有限公司 投影显示方法、装置、投影设备及计算机可读存储介质
CN114363591A (zh) * 2020-10-12 2022-04-15 通用汽车环球科技运作有限责任公司 调整投影到挡风玻璃上的图像的位置和失真的***和方法
CN114415826A (zh) * 2020-05-15 2022-04-29 华为技术有限公司 一种数据处理方法及其设备
CN115167743A (zh) * 2022-06-10 2022-10-11 东风汽车集团股份有限公司 一种车载智能屏幕调节方法、***及电子设备
WO2024040398A1 (zh) * 2022-08-22 2024-02-29 京东方科技集团股份有限公司 矫正函数的生成、图像矫正方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105354569A (zh) * 2015-10-12 2016-02-24 北京蓝卡科技股份有限公司 一种图像畸变矫正方法
CN107527324A (zh) * 2017-07-13 2017-12-29 江苏泽景汽车电子股份有限公司 一种hud的图像畸变矫正方法
US20180196336A1 (en) * 2013-12-09 2018-07-12 Geo Semiconductor Inc. System and method for automated test-pattern-free projection calibration
CN108876725A (zh) * 2017-05-12 2018-11-23 深圳市魔眼科技有限公司 一种虚拟图像畸变矫正方法及***

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180196336A1 (en) * 2013-12-09 2018-07-12 Geo Semiconductor Inc. System and method for automated test-pattern-free projection calibration
CN105354569A (zh) * 2015-10-12 2016-02-24 北京蓝卡科技股份有限公司 一种图像畸变矫正方法
CN108876725A (zh) * 2017-05-12 2018-11-23 深圳市魔眼科技有限公司 一种虚拟图像畸变矫正方法及***
CN107527324A (zh) * 2017-07-13 2017-12-29 江苏泽景汽车电子股份有限公司 一种hud的图像畸变矫正方法

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110349078A (zh) * 2019-05-24 2019-10-18 杨巧雪 一种用于hud正位实景显示的ar图形算法
CN110349078B (zh) * 2019-05-24 2022-07-15 深圳市锐思华创技术有限公司 一种用于hud正位实景显示的ar图形方法
CN110203140A (zh) * 2019-06-28 2019-09-06 威马智慧出行科技(上海)有限公司 汽车增强现实显示方法、电子设备、***及汽车
CN110942498A (zh) * 2019-11-06 2020-03-31 天津大学 一种建立hud***图像翘曲形变模型的方法
CN111127365A (zh) * 2019-12-26 2020-05-08 重庆矢崎仪表有限公司 基于三次样条曲线拟合的hud畸变矫正方法
CN111127365B (zh) * 2019-12-26 2023-08-29 重庆矢崎仪表有限公司 基于三次样条曲线拟合的hud畸变矫正方法
CN111208961A (zh) * 2019-12-30 2020-05-29 西安闻泰电子科技有限公司 将镜面影像映射到电子屏幕的装置及方法
CN111086453A (zh) * 2019-12-30 2020-05-01 深圳疆程技术有限公司 一种基于摄像头的hud增强现实显示方法、装置及汽车
CN111476104A (zh) * 2020-03-17 2020-07-31 重庆邮电大学 动态眼位下ar-hud图像畸变矫正方法、装置、***
CN111476104B (zh) * 2020-03-17 2022-07-01 重庆邮电大学 动态眼位下ar-hud图像畸变矫正方法、装置、***
CN111385947A (zh) * 2020-03-23 2020-07-07 北京经纬恒润科技有限公司 一种应用于像素灯的控制方法及装置
CN114415826A (zh) * 2020-05-15 2022-04-29 华为技术有限公司 一种数据处理方法及其设备
CN112258399A (zh) * 2020-09-10 2021-01-22 江苏泽景汽车电子股份有限公司 一种逆向建模的hud图像光学矫正方法
CN114363591B (zh) * 2020-10-12 2023-08-29 通用汽车环球科技运作有限责任公司 调整投影到挡风玻璃上的图像的位置和失真的***和方法
CN114363591A (zh) * 2020-10-12 2022-04-15 通用汽车环球科技运作有限责任公司 调整投影到挡风玻璃上的图像的位置和失真的***和方法
CN112381739A (zh) * 2020-11-23 2021-02-19 天津经纬恒润科技有限公司 一种ar-hud***的成像畸变矫正方法及装置
CN112738487B (zh) * 2020-12-24 2022-10-11 阿波罗智联(北京)科技有限公司 图像投射方法、装置、设备及存储介质
US11715238B2 (en) 2020-12-24 2023-08-01 Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd. Image projection method, apparatus, device and storage medium
CN112738487A (zh) * 2020-12-24 2021-04-30 北京百度网讯科技有限公司 图像投射方法、装置、设备及存储介质
CN112837379A (zh) * 2021-02-04 2021-05-25 的卢技术有限公司 一种ar-hud的标定方法
CN113034607A (zh) * 2021-03-03 2021-06-25 恒大新能源汽车投资控股集团有限公司 一种车载投影设备的安装标定方法、***及电子设备
CN114339194A (zh) * 2021-03-16 2022-04-12 深圳市火乐科技发展有限公司 投影显示方法、装置、投影设备及计算机可读存储介质
CN114339194B (zh) * 2021-03-16 2023-12-08 深圳市火乐科技发展有限公司 投影显示方法、装置、投影设备及计算机可读存储介质
CN114119380A (zh) * 2021-07-28 2022-03-01 上海华模科技有限公司 一种准直虚像视景***几何变形测量方法
CN113792730A (zh) * 2021-08-17 2021-12-14 北京百度网讯科技有限公司 文档图像的矫正方法、装置、电子设备和存储介质
CN113947551A (zh) * 2021-11-16 2022-01-18 深圳市锐思华创技术有限公司 一种抬头显示器畸变矫正***及其矫正方法
CN115167743A (zh) * 2022-06-10 2022-10-11 东风汽车集团股份有限公司 一种车载智能屏幕调节方法、***及电子设备
CN115167743B (zh) * 2022-06-10 2024-04-02 东风汽车集团股份有限公司 一种车载智能屏幕调节方法、***及电子设备
WO2024040398A1 (zh) * 2022-08-22 2024-02-29 京东方科技集团股份有限公司 矫正函数的生成、图像矫正方法及装置

Also Published As

Publication number Publication date
CN109688392B (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
CN109688392A (zh) Ar-hud光学投影***及映射关系标定方法和畸变矫正方法
CN104512328B (zh) 汽车环视图像生成方法及汽车环视***
JP7054803B2 (ja) カメラパラメタセット算出装置、カメラパラメタセット算出方法及びプログラム
US11514680B2 (en) Methods and systems for traffic monitoring
CN110758243B (zh) 一种车辆行驶过程中的周围环境显示方法和***
US9858639B2 (en) Imaging surface modeling for camera modeling and virtual view synthesis
JP5397373B2 (ja) 車両用画像処理装置、車両用画像処理方法
CN111582080B (zh) 车辆360度环视监控实现方法及装置
KR101592740B1 (ko) 차량용 광각카메라의 영상 왜곡 보정 장치 및 방법
CN107310475B (zh) 一种智能汽车预警功能的显示方法及***
CN107527324A (zh) 一种hud的图像畸变矫正方法
CN103792674A (zh) 一种测量和校正虚拟现实显示器畸变的装置和方法
CN101487895B (zh) 显示鸟瞰车辆图像的倒车雷达***
CN105825475A (zh) 基于单摄像头的360度全景影像生成方法
CN111127365B (zh) 基于三次样条曲线拟合的hud畸变矫正方法
CN109961485A (zh) 一种基于单目视觉进行目标定位的方法
CN102521586B (zh) 一种用于拍照手机的高分辨率三维人脸扫描方法
CN114445592A (zh) 一种基于逆透视变换和点云投影的鸟瞰图语义分割标签生成方法
CN113240592A (zh) 基于ar-hud动态眼位下计算虚像平面的畸变矫正方法
CN109472737B (zh) 一种车载六路摄像头的全景报警方法
JP2011254128A (ja) 平面図生成装置及び平面図生成方法
CN103260008B (zh) 一种影像位置到实际位置的射影转换方法
Deng et al. A calibration method for on-vehicle AR-HUD system using mixed reality glasses
CN103778610A (zh) 一种星载线阵传感器垂轨摆扫影像的几何预处理方法
CN117611438A (zh) 一种基于单目图像的2d车道线到3d车道线的重构方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant