CN114572112A - 一种汽车前挡风玻璃的增强现实方法及*** - Google Patents

一种汽车前挡风玻璃的增强现实方法及*** Download PDF

Info

Publication number
CN114572112A
CN114572112A CN202210179099.0A CN202210179099A CN114572112A CN 114572112 A CN114572112 A CN 114572112A CN 202210179099 A CN202210179099 A CN 202210179099A CN 114572112 A CN114572112 A CN 114572112A
Authority
CN
China
Prior art keywords
vehicle
information
front windshield
dynamic icon
dynamic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202210179099.0A
Other languages
English (en)
Inventor
孙思洋
蒋琪
甄溢军
康飞
张子良
耿艺嘉
蔡志伟
金心娴
杨朔
贾儒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhiji Automobile Technology Co Ltd
Original Assignee
Zhiji Automobile Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhiji Automobile Technology Co Ltd filed Critical Zhiji Automobile Technology Co Ltd
Priority to CN202210179099.0A priority Critical patent/CN114572112A/zh
Publication of CN114572112A publication Critical patent/CN114572112A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/207—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8073—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for vehicle security, e.g. parked vehicle surveillance, burglar detection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/223—Posture, e.g. hand, foot, or seat position, turned or inclined
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00—Input parameters relating to objects
    • B60W2554/20—Static objects
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00—Input parameters relating to objects
    • B60W2554/40—Dynamic objects, e.g. animals, windblown objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Navigation (AREA)
  • Instrument Panels (AREA)

Abstract

本发明的目的是提供一种汽车前挡风玻璃的增强现实方法及设备，本发明通过将动态图标虚拟信息内容叠加显示在真实世界中透明的汽车前挡风玻璃上，用户方面仍旧可以通过透明的汽车前挡风玻璃查看驾驶环境情况，用户驾驶操控的同时无需分散注意力到手机或电子屏幕查看导航信息、或者无需分散注意力到仪表盘查看车辆的运行参数，用户可以便捷的查看以增强现实的方式叠加显示在透明的汽车前挡风玻璃上的车辆端动态图标，保证用户驾驶安全。

Description

一种汽车前挡风玻璃的增强现实方法及***
技术领域
本发明提供一种汽车前挡风玻璃的增强现实方法及***。
背景技术
随着汽车行业的科技不断发展，用户对汽车智能化、网联化的需求不断上升。在汽车人机交互范畴，智能化服务与用户体验加快了汽车发展的迭代过程，驾驶员需要主动操作的工作量不断减少，同时对驾车体验的需求升高。
随着城市道路上的车辆越来越多，工况也呈庞大复杂的趋势发展。导航信息显示的内容变得繁杂的同时，增加了驾驶员注意力分散的时间和判断时间。尤其在岔路口，高架桥匝道口等路段，驾驶员视线需要在中控屏和路面上反复移动观察并选择路线，容易导致危险情况发生。
发明内容
本发明提供一种汽车前挡风玻璃的增强现实方法及***。
本发明提供一种汽车前挡风玻璃的增强现实方法，其中，该方法包括：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
进一步的，上述方法中，基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将车辆端动态图标叠加显示在透明的汽车前挡风玻璃上，包括：
基于车辆的运行状态信息生成对应的运行状态动态图标；
基于车辆的运行环境信息生成对应的导航动态图标；
以增强现实的方式将运行状态动态图标叠加显示在透明的汽车前挡风玻璃上，并以增强现实的方式将导航动态图标叠加显示在透明的汽车前挡风玻璃上。
进一步的，上述方法中，以增强现实的方式将车辆端动态图标叠加显示在透明的汽车前挡风玻璃上之后，还包括：
获取用户对所述车辆端动态图标的操作手势；
识别所述操作手势以得到对应的车辆端控制指令，基于所述车辆端控制指令对车辆进行驾驶控制。
进一步的，上述方法中，所述方法还包括：
获取移动端的运行状态信息；
基于移动端的运行状态信息生成对应的移动端动态图标，以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上。
进一步的，上述方法中，以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上之后，还包括：
获取用户对所述移动端动态图标的操作手势；
识别所述操作手势以得到对应的移动端控制指令，基于所述移动控制指令对移动端进行操作控制。
进一步的，上述方法中，获取车辆的运行环境信息，包括：
通过车辆的摄像头与传感器获取道路动态信息；
通过3D地图获取道路静态信息；
基于道路动态信息和道路静态信息，得到车辆的运行环境信息。
进一步的，上述方法中，基于道路动态信息和道路静态信息，得到车辆的运行环境信息。
通过自车的车辆的摄像头与传感器获取第一道路动态信息；
通过与所述自车通信的自车附近的其他车辆的摄像头与传感器获取第二道路动态信息；
基于道路动态信息和道路静态信息，得到车辆的运行环境信息，包括：
基于第一道路动态信息、第二道路动态信息和道路静态信息，得到车辆的运行环境信息。
根据本发明的另一方面，还提供一种汽车前挡风玻璃的增强现实设备，其中，该设备包括：
获取设备，用于获取车辆的运行状态信息和运行环境信息；
显示设备，用于基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
根据本发明的另一方面，还提供一种基于计算的设备，其中，包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
根据本发明的另一方面，还提供一种计算机可读存储介质，其上存储有计算机可执行指令，其中，该计算机可执行指令被处理器执行时使得该处理器：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
本发明通过将动态图标虚拟信息内容叠加显示在真实世界中透明的汽车前挡风玻璃上，用户方面仍旧可以通过透明的汽车前挡风玻璃查看驾驶环境情况，用户驾驶操控的同时无需分散注意力到手机或电子屏幕查看导航信息、或者无需分散注意力到仪表盘查看车辆的运行参数，用户可以便捷的查看以增强现实的方式叠加显示在透明的汽车前挡风玻璃上的车辆端动态图标，保证用户驾驶安全。
另外，本发明通过获取用户对所述车辆端动态图标的操作手势，识别所述操作手势以得到对应的车辆端控制指令，基于所述车辆端控制指令对车辆进行驾驶控制，实现驾驶用户对车辆的便捷、可靠控制。
此外，本发明通过获取用户对所述移动端动态图标的操作手势，识别所述操作手势以得到对应的移动端控制指令，基于所述移动控制指令对移动端进行操作控制，可以实现驾驶用户对移动端的便捷、可靠的控制。
附图说明
图1为本发明的增强现实技术智能前挡风玻璃的信息显示方法流程图；
图2为本发明的3D导航与信息显示方法逻辑框架图；
图3为本发明的旅行模式下前挡风玻璃导航视觉效果输出示意图；
图4为本发明的夜间驾驶模式下前挡风玻璃导航视觉效果输出示意图；
图5为本发明的极端天气下前挡风玻璃导航视觉效果输出示意图；
图6为本发明的以接听电话为例的驾驶员与智能前挡风玻璃信息交互意图。
具体实施方式
下面结合附图对本发明作进一步详细描述。
在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器 (CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器 (RAM) 和/或非易失性内存等形式，如只读存储器 (ROM) 或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存 (PRAM)、静态随机存取存储器 (SRAM)、动态随机存取存储器 (DRAM)、其他类型的随机存取存储器 (RAM)、只读存储器 (ROM)、电可擦除可编程只读存储器 (EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘 (DVD) 或其他光学存储、 磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非暂存电脑可读媒体 (transitory media)，如调制的数据信号和载波。
本发明提供一种汽车前挡风玻璃的增强现实方法，所述方法包括：
步骤S1，获取车辆的运行状态信息和运行环境信息；
步骤S2，基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
具体的，如图1所示，中央控制处理器通过将导航信息、车联网、通讯信息等接收处理，与用户（驾驶员）面对的环境工况及摄像头接收的手势控制信息一起进行车辆的信息可视化数据生成，并进行前挡风玻璃信息显示，显示的内容可为用户提供通讯信息显示、A柱盲区行人提示、重点路段标注等信息预告及预警，完成外界信息与用户输入信息的结合，通过车辆的运行状态信息和运行环境信息的输入，经过中央控制处理器的处理及对驾驶员的输出，完成闭环反馈。
进一步的，如图2所示，中央控制处理器经过计算可以将各类信息整合以虚拟现实信息输出，即以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
在此，为了将车辆端动态图标与后面的移动端动态图标进区别，这里把基于车辆端的信息生成的对应图标，叫做车辆端动态图标。后续实施例中，将根据移动端的运行状态信息生成的对应图标，叫做移动端动态图标。
增强现实（Augmented Reality，简称AR），增强现实技术也被称为扩增现实，本发明将动态图标虚拟信息内容叠加显示在真实世界中透明的汽车前挡风玻璃上，用户方面仍旧可以通过透明的汽车前挡风玻璃查看驾驶环境情况，用户驾驶操控的同时无需分散注意力到手机或电子屏幕查看导航信息、或者无需分散注意力到仪表盘查看车辆的运行参数，用户可以便捷的查看以增强现实的方式叠加显示在透明的汽车前挡风玻璃上的车辆端动态图标，保证用户驾驶安全。
本发明通过将动态图标虚拟信息内容叠加显示在真实世界中透明的汽车前挡风玻璃上，用户仍旧可以通过透明的汽车前挡风玻璃查看驾驶环境情况，用户驾驶操控的同时无需分散注意力到手机或电子屏幕查看导航信息、或者无需分散注意力到仪表盘查看车辆的运行参数，用户可以便捷地查看，以增强现实的方式叠加显示在透明的汽车前挡风玻璃上的车辆端动态图标，保证用户驾驶安全。
另外，本发明通过获取用户对所述车辆端动态图标的操作手势，识别所述操作手势以得到对应的车辆端控制指令，基于所述车辆端控制指令对车辆进行驾驶控制，实现驾驶用户对车辆的便捷、可靠控制。
此外，本发明通过获取用户对所述移动端动态图标的操作手势，识别所述操作手势以得到对应的移动端控制指令，基于所述移动控制指令对移动端进行操作控制，可以实现驾驶用户对移动端的便捷、可靠的控制。
本发明的汽车前挡风玻璃的增强现实方法一实施例中，步骤S2，基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将车辆端动态图标叠加显示在透明的汽车前挡风玻璃上，包括：
步骤S21，基于车辆的运行状态信息生成对应的运行状态动态图标；
在此，车辆的运行状态信息例如可以是车速、发动机转速、剩余油量等可以从车辆的仪表盘或车辆的传感器，获取车辆的当前的运行状态参数；
运行状态动态图标可以是分别对应于车速、发动机转速、剩余油量的精简的动态图标。这里动态图标可以是对应于车速、发动机转速、剩余油量的数值的变化，而对应动态变化显示数值的图标。可以采用精简的动态图标，可以为驾驶用户提供简单明了的驾驶参考信息，避免用复杂的图标用户通过透明的汽车前挡风玻璃观察周围的驾驶环境，保证驾驶安全；
步骤S22，基于车辆的运行环境信息生成对应的导航动态图标；
在此，车辆的运行环境信息，例如，可以是道路线路、路况、天气、障碍物等信息。对应的导航动态图标，例如，可以是行车方向图标、目的地距离图标、到达时间图标、限速图标、车道线等等；
步骤S23，以增强现实的方式将运行状态动态图标叠加显示在透明的汽车前挡风玻璃上，并以增强现实的方式将导航动态图标叠加显示在透明的汽车前挡风玻璃上。
本发明的汽车前挡风玻璃的增强现实方法一实施例中，步骤S2，以增强现实的方式将车辆端动态图标叠加显示在透明的汽车前挡风玻璃上之后，还包括：
步骤S3，获取用户对所述车辆端动态图标的操作手势；
步骤S4，识别所述操作手势以得到对应的车辆端控制指令，基于所述车辆端控制指令对车辆进行驾驶控制。
具体的，所述车辆的动态端图标中，基于车辆的运行状态信息生成对应的运行状态动态图标主要获取的是车辆的当前状态运动参数，车辆在行进过程中的动态化过程也是车辆的运动状态参数动态变化的过程，所述基于车辆的运行环境信息生成对应的导航动态图标，主要是将汽车行进过程中的道路、路况、天气、障碍物等信息进行及时反馈，在此，所述车辆的动态端图标，可以将车辆的运行状态信息与车辆的运行环境信息结合，使得车辆以车辆的动态端图标的形式为用户呈现出车路协同的人性化驾驶方式，进一步的，用户可以自由定制适合当前驾驶习性及驾驶条件以及符合驾驶车辆本身属性及潜能的运行状态动态图表和导航动态图标，获得更加适合用户的个性化体验。
具体的，如图1所示，获取用户对所述车辆端动态图标的操作手势的方法为用户通过手势控制，经过摄像头接收，传递到中央控制处理器，中央控制处理器可以进行手势的判断识别，可以的，中央控制处理器可以进行误操作、防抖动等手势的筛选判别。
在此，通过获取用户（驾驶员）对所述车辆端动态图表的操作手势可以一定程度上减轻用户的驾驶工作量，并且通过对操作手势中由于用户的误操作等的筛选，以及对防抖动行为的判别，获得更准确地车辆端动态图表的表示方法，给用户更好的视觉体验。
在此，对车辆进行驾驶控制，例如，可以是控制车辆加速、转向、刹车、打开大灯、打开空调等车辆控制方式，例如，可以使用剪刀手的手势表示车辆加速，使用拳头的手势表示车辆的刹车等。
本实施通过获取用户对所述车辆端动态图标的操作手势，识别所述操作手势以得到对应的车辆端控制指令，基于所述车辆端控制指令对车辆进行驾驶控制，实现驾驶用户对车辆的便捷、可靠控制。
本发明的汽车前挡风玻璃的增强现实方法一实施例中，所述方法还包括：
步骤S5，获取移动端的运行状态信息；
在此，所述移动端的运行状态信息例如，可以是来电话通知，微信通知，短消息通知等等；
步骤S6，基于移动端的运行状态信息生成对应的移动端动态图标，以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上。
所述移动端的运行状态的载体可以是手机、平板或者笔记本电脑等，可以通过一定方式同车辆进行连接，如蓝牙连接、NPC连接。
进一步的，当移动端的运行状态信息为电话通知时，汽车前挡风玻璃以增强现实的方式将代表电话通知的移动端动态图标叠加显示在透明的汽车前挡风玻璃上，用户看到电话的标志信号后可以进行手势或者屏幕点击进行信息交互；
进一步的，当移动端的运行状态信息为微信通知时，汽车前挡风玻璃以增强现实的方式将代表微信通知的移动端动态图标叠加显示在透明的汽车前挡风玻璃上，用户可以通过手势或者屏幕点击进行信息交互；
进一步的，当移动端的运行状态信息为短消息通知时，汽车前挡风玻璃以增强现实的方式将代表短消息通知的移动端动态图标叠加显示在透明的汽车前挡风玻璃上，用户可以通过手势或者屏幕点击进行信息交互。
可以的，当微信通知为微信语音来电时，用户可以点击代表微信语音通知的移动端动态图标，与来电人进行语音沟通；
当微信通知为微信视频来电时，用户可以点击代表微信视频通知的移动端动态图标，与来电人进行视频沟通。
在此，基于移动端的运行状态信息生成对应的动态图标，例如，代表电话通知的移动端动态图标可以是电话接听按钮图标、代表微信通知的移动端动态图标可以是话筒图标、代表短消息通知的移动端动态图标可以是短信图标等等，便于用户直接通过叠加显示在透明的汽车前挡风玻璃上的动态图标，及时获知手机等移动终端的运行状态信息，避免用户的注意力在透明的汽车前挡风玻璃和移动终端之间频繁切换，保证用户驾驶安全。
本发明的汽车前挡风玻璃的增强现实方法一实施例中，步骤S6，以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上之后，还包括：
步骤S7，获取用户对所述移动端动态图标的操作手势；
步骤S8，识别所述操作手势以得到对应的移动端控制指令，基于所述移动控制指令对移动端进行操作控制。
在此，本实施例，可以应用于用户通过手势隔空进行接听电话的操作，如图6所示，当驾驶人员在驾驶行车过程中，手机上获得来电信息，来电信息可包括电话拨号来电、聊天工具来电等信息，通过接收到来电信息，经过蓝牙连接到汽车中，经过中央控制处理器的处理, 以移动端动态图标的形式显示到前挡风玻璃上。
该实施例可以使用户在驾驶过程中接收到电话通知、微信通知、短消息通知等等，保证驾驶安全，更进一步的，在允许的条件下可以使得拨打者在与用户对话过程中进行视频等交互行为，使得拨打者可以更近距离观察到用户的目前状况。
本实施例通过获取用户对所述移动端动态图标的操作手势，识别所述操作手势以得到对应的移动端控制指令，基于所述移动控制指令对移动端进行操作控制，可以实现驾驶用户对移动端的便捷、可靠的控制。
本发明的汽车前挡风玻璃的增强现实方法一实施例中，步骤S1，获取车辆的运行环境信息，包括：
步骤S11，通过车辆的摄像头与传感器获取道路动态信息；
步骤S12，通过3D地图获取道路静态信息；
在此，所述3D地图，例如可以是3D导航地图；
步骤S13，基于道路动态信息和道路静态信息，得到车辆的运行环境信息。
在此，如图2所示，道路动态信息中包括工况变化及行人信息，主要依靠车辆的摄像头与传感器获取，所述道路静态信息可包括由3D地图提供的3D导航信息，使用户有效察觉周围环境及路况信息。
具体的，如图1所示，当汽车启动后，用户输入目的地，手机通过蓝牙连接汽车，通过汽车车身外搭载的摄像头与传感器采集信息等车联网信息通过WiFi输入中央控制处理器，当手机通过蓝牙连接汽车后，手机的通讯信息经过蓝牙等和汽车相连，当有人向用户拨打电话时，手机上的来电信息会通过蓝牙输入到中央控制处理器中，完成通讯信息的收集和显示。
在此，同时通过道路动态信息和道路静态信息，可以得到更准确的车辆的运行环境信息。
本发明的汽车前挡风玻璃的增强现实方法一实施例中，步骤S11，通过车辆的摄像头与传感器获取道路动态信息，包括：
步骤S111，通过自车的车辆的摄像头与传感器获取第一道路动态信息；
步骤S112，通过与所述自车通信的自车附近的其他车辆的摄像头与传感器获取第二道路动态信息；
在此，车外摄像头可以包括自车的车辆上安装的拍摄外面路面状况的摄像头和其他车辆的摄像头上安装的拍摄外面路面状况的摄像头；
步骤S13，基于道路动态信息和道路静态信息，得到车辆的运行环境信息，包括：
基于第一道路动态信息、第二道路动态信息和道路静态信息，得到车辆的运行环境信息。
具体的，如图2所示，第一道路动态信息和第二道路动态信息分别围绕自车和他车产生，
所述第一道路动态信息中，自车的车辆的摄像头与传感器所采集的信号可展示出自车的汽车定位的情况、行人信息等，可以通过GPS（Global Positioning System，全球定位***）、ITS（Intelligent Transport System，智能交通***）、车轮传感器等进行信息传递，输入到中央控制处理器；
所述第二道路动态信息中，其他车辆的摄像头与传感器所采集的信号可展示出该其他车辆的汽车定位的情况、行人信息等，可以通过GPS（Global Positioning System，全球定位***）、ITS（Intelligent Transport System，智能交通***）、车轮传感器等进行信息传递，输入到中央控制处理器；
在此，自车可以与自车附近的其他车辆进行连网，进而自车可以通过附近的其他车辆获取即将经过的道路动态信息，以扩大自车的道路动态信息的获取范围，例如，可以避免鬼探头的情况。
如图3所示，为本发明在旅行模式下风挡导航视觉效果输出示意图，在该模式下，显示在汽车前挡风玻璃上的车辆端动态图标可体现出旅行模式的特点，如旅行模式下，在透明的汽车前挡风玻璃上可显示旅行的目的地，旅行的具体行进方向，旅行的实时车速及到达目的地的距离，可以的，在透明的汽车前挡风玻璃上也可以提示目的地的天气情况，目的地的客流量等；
进一步的，在旅行模式下，基于上述实施例中描述的移动端的运行状态信息生成对应的移动端动态图标，也可以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上。
在此，通过为用户在旅行模式下设置风挡导航视觉效果，给予用户更好的驾乘体验，丰富旅途观感。
如图4所示，为本发明夜间驾驶模式下风挡导航视觉效果输出示意图，显示在汽车前挡风玻璃上的车辆端动态图标可体现出夜间驾驶模式的特点，在透明的汽车前挡风玻璃上可显示包括行车方向、车速和发动机转速等信息，可以的，在夜间模式下，在透明的汽车前挡风玻璃上也可以提供护眼模式等。
进一步的，在夜间驾驶模式下，基于上述实施例中描述的移动端的运行状态信息生成对应的移动端动态图标，也可以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上。
在此，通过为用户在夜间驾驶模式下设置风挡导航视觉效果，可为用户提供夜间驾驶的更全面的驾驶工况的参考，使用户在夜晚的驾驶更具有安全感，无论是驾驶操作本身还是驾驶心理上均具有一定的保障作用。
如图5所示，为本发明极端天气下风挡导航视觉效果输出示意图，显示在汽车前挡风玻璃上的车辆端动态图标可体现出极端天气模式的特点，考虑极端天气可能产生的隐患，在透明的汽车前挡风玻璃上可以提供车辆的车速、限速、车道线等，可以的，在透明的汽车前挡风玻璃上也可以提示如车辆周围指定区域内的限行情况等，提前告知用户极端天气下的道路情况。
进一步的，在极端天气模式下，基于上述实施例中描述的移动端的运行状态信息生成对应的移动端动态图标，也可以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上。
在此，通过为用户在极端天气模式下设置风挡导航视觉效果，可以为用户在极端天气下的驾驶行为提供依据参考，给予用户真实的驾乘体验。
根据本发明的另一方面，还提供一种汽车前挡风玻璃的增强现实设备，其中，该设备包括：
获取设备，用于获取车辆的运行状态信息和运行环境信息；
显示设备，用于基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
根据本发明的另一方面，还提供一种基于计算的设备，其中，包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
根据本发明的另一方面，还提供一种计算机可读存储介质，其上存储有计算机可执行指令，其中，该计算机可执行指令被处理器执行时使得该处理器：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
本发明各设备实施例的详细内容具体可参见各方法实施例的对应部分，在此，不再赘述。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。
需要注意的是，本发明可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路（ASIC）、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中，本发明的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本发明的软件程序（包括相关的数据结构）可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本发明的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。
另外，本发明的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本发明的方法和/或技术方案。而调用本发明的方法的程序指令，可能被存储在固定的或可移动的记录介质中，和/或通过广播或其他信号承载媒体中的数据流而被传输，和/或被存储在根据所述程序指令运行的计算机设备的工作存储器中。在此，根据本发明的一个实施例包括一个装置，该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发该装置运行基于前述根据本发明的多个实施例的方法和/或技术方案。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。

Claims (10)

1.一种汽车前挡风玻璃的增强现实方法，其中，该方法包括：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
2.根据权利要求1所述的方法，其中，基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将车辆端动态图标叠加显示在透明的汽车前挡风玻璃上，包括：
基于车辆的运行状态信息生成对应的运行状态动态图标；
基于车辆的运行环境信息生成对应的导航动态图标；
以增强现实的方式将运行状态动态图标叠加显示在透明的汽车前挡风玻璃上，并以增强现实的方式将导航动态图标叠加显示在透明的汽车前挡风玻璃上。
3.根据权利要求2所述的方法，其中，以增强现实的方式将车辆端动态图标叠加显示在透明的汽车前挡风玻璃上之后，还包括：
获取用户对所述车辆端动态图标的操作手势；
识别所述操作手势以得到对应的车辆端控制指令，基于所述车辆端控制指令对车辆进行驾驶控制。
4.根据权利要求1所述的方法，其中，所述方法还包括：
获取移动端的运行状态信息；
基于移动端的运行状态信息生成对应的移动端动态图标，以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上。
5.根据权利要求4所述的方法，其中，以增强现实的方式将移动端动态图标叠加显示在透明的汽车前挡风玻璃上之后，还包括：
获取用户对所述移动端动态图标的操作手势；
识别所述操作手势以得到对应的移动端控制指令，基于所述移动控制指令对移动端进行操作控制。
6.根据权利要求1所述的方法，其中，获取车辆的运行环境信息，包括：
通过车辆的摄像头与传感器获取道路动态信息；
通过3D导航地图获取道路静态信息；
基于道路动态信息和道路静态信息，得到车辆的运行环境信息。
7.根据权利要求6所述的方法，其中，基于道路动态信息和道路静态信息，得到车辆的运行环境信息；
通过自车的车辆的摄像头与传感器获取第一道路动态信息；
通过与所述自车通信的自车附近的其他车辆的摄像头与传感器获取第二道路动态信息；
基于道路动态信息和道路静态信息，得到车辆的运行环境信息，包括：
基于第一道路动态信息、第二道路动态信息和道路静态信息，得到车辆的运行环境信息。
8.一种汽车前挡风玻璃的增强现实设备，其中，该设备包括：
获取设备，用于获取车辆的运行状态信息和运行环境信息；
显示设备，用于基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
9.一种基于计算的设备，其中，包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
10.一种计算机可读存储介质，其上存储有计算机可执行指令，其中，该计算机可执行指令被处理器执行时使得该处理器：
获取车辆的运行状态信息和运行环境信息；
基于车辆的运行状态信息和运行环境信息生成对应的车辆端动态图标，以增强现实的方式将动态图标叠加显示在透明的汽车前挡风玻璃上。
CN202210179099.0A 2022-02-25 2022-02-25 一种汽车前挡风玻璃的增强现实方法及*** Withdrawn CN114572112A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210179099.0A CN114572112A (zh) 2022-02-25 2022-02-25 一种汽车前挡风玻璃的增强现实方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210179099.0A CN114572112A (zh) 2022-02-25 2022-02-25 一种汽车前挡风玻璃的增强现实方法及***

Publications (1)

Publication Number Publication Date
CN114572112A true CN114572112A (zh) 2022-06-03

Family

ID=81770053

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210179099.0A Withdrawn CN114572112A (zh) 2022-02-25 2022-02-25 一种汽车前挡风玻璃的增强现实方法及***

Country Status (1)

Country Link
CN (1) CN114572112A (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130027367A (ko) * 2011-09-07 2013-03-15 동국대학교 산학협력단 내비게이션 장치 및 경로 표시 방법
US20140168243A1 (en) * 2012-12-19 2014-06-19 Jeffrey Huang System and Method for Synchronizing, Merging, and Utilizing Multiple Data Sets for Augmented Reality Application
CN104627078A (zh) * 2015-02-04 2015-05-20 刘波 基于柔性透明oled的汽车驾驶虚拟***及其控制方法
CN106314152A (zh) * 2015-07-03 2017-01-11 Lg电子株式会社 车辆驾驶辅助装置及具有其的车辆
CN106740114A (zh) * 2017-01-15 2017-05-31 上海云剑信息技术有限公司 基于增强现实技术的智能汽车人机交互***
KR20170101758A (ko) * 2016-02-26 2017-09-06 자동차부품연구원 증강현실 헤드 업 디스플레이 내비게이션
CN108437896A (zh) * 2018-02-08 2018-08-24 深圳市赛格导航科技股份有限公司 车辆驾驶辅助方法、装置、设备及存储介质
CN109584596A (zh) * 2018-12-20 2019-04-05 奇瑞汽车股份有限公司 车辆驾驶提示方法及装置
CN110304057A (zh) * 2019-06-28 2019-10-08 威马智慧出行科技（上海）有限公司 汽车碰撞预警、导航方法、电子设备、***及汽车
CN110672110A (zh) * 2018-07-03 2020-01-10 百度在线网络技术（北京）有限公司 车辆的导航方法、装置、设备及计算机可读存储介质
CN110920604A (zh) * 2018-09-18 2020-03-27 阿里巴巴集团控股有限公司 辅助驾驶方法、辅助驾驶***、计算设备及存储介质
CN111152790A (zh) * 2019-12-29 2020-05-15 的卢技术有限公司 一种基于使用场景的多设备交互车载抬头显示方法及***
CN113837127A (zh) * 2021-09-28 2021-12-24 中国科学技术大学先进技术研究院 一种地图和v2v数据融合模型和方法、***及介质

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130027367A (ko) * 2011-09-07 2013-03-15 동국대학교 산학협력단 내비게이션 장치 및 경로 표시 방법
US20140168243A1 (en) * 2012-12-19 2014-06-19 Jeffrey Huang System and Method for Synchronizing, Merging, and Utilizing Multiple Data Sets for Augmented Reality Application
CN104627078A (zh) * 2015-02-04 2015-05-20 刘波 基于柔性透明oled的汽车驾驶虚拟***及其控制方法
CN106314152A (zh) * 2015-07-03 2017-01-11 Lg电子株式会社 车辆驾驶辅助装置及具有其的车辆
KR20170101758A (ko) * 2016-02-26 2017-09-06 자동차부품연구원 증강현실 헤드 업 디스플레이 내비게이션
CN106740114A (zh) * 2017-01-15 2017-05-31 上海云剑信息技术有限公司 基于增强现实技术的智能汽车人机交互***
CN108437896A (zh) * 2018-02-08 2018-08-24 深圳市赛格导航科技股份有限公司 车辆驾驶辅助方法、装置、设备及存储介质
CN110672110A (zh) * 2018-07-03 2020-01-10 百度在线网络技术（北京）有限公司 车辆的导航方法、装置、设备及计算机可读存储介质
CN110920604A (zh) * 2018-09-18 2020-03-27 阿里巴巴集团控股有限公司 辅助驾驶方法、辅助驾驶***、计算设备及存储介质
CN109584596A (zh) * 2018-12-20 2019-04-05 奇瑞汽车股份有限公司 车辆驾驶提示方法及装置
CN110304057A (zh) * 2019-06-28 2019-10-08 威马智慧出行科技（上海）有限公司 汽车碰撞预警、导航方法、电子设备、***及汽车
CN111152790A (zh) * 2019-12-29 2020-05-15 的卢技术有限公司 一种基于使用场景的多设备交互车载抬头显示方法及***
CN113837127A (zh) * 2021-09-28 2021-12-24 中国科学技术大学先进技术研究院 一种地图和v2v数据融合模型和方法、***及介质

Similar Documents

Publication Publication Date Title
EP2714456B1 (en) System and method for selectively altering content of a vehicle interface
KR20140031369A (ko) 도로 위 차량의 차선 안내 시에 운전자를 보조하기 위한 방법 및 장치
JP4867463B2 (ja) 運転支援装置
FI124068B (en) Procedure for improving driving safety
KR20120118074A (ko) 차량 주변 감시 장치
JP6037923B2 (ja) 表示情報生成装置および表示情報生成方法
WO2013090125A1 (en) Providing a user interface experience based on inferred vehicle state
WO2016210259A1 (en) Systems and methods for displaying vehicle information with see-through effect
US11694656B2 (en) Display control device, display control method, and storage medium storage program
US11858526B2 (en) Apparatus and method for use with vehicle
JP6113006B2 (ja) 車両情報表示制御装置
CN114572112A (zh) 一种汽车前挡风玻璃的增强现实方法及***
JP6539057B2 (ja) 車両用表示装置
JP5435113B2 (ja) 省エネ評価装置、省エネ評価方法
CN114527923A (zh) 一种车内信息显示方法、装置及电子设备
US20240042858A1 (en) Vehicle display system, vehicle display method, and storage medium storing vehicle display program
JP2017174043A (ja) 表示装置
JP2022041245A (ja) 車両用表示制御装置、方法、プログラムおよび車両用表示システム
WO2020008876A1 (ja) 情報処理装置、情報処理方法、プログラム、及び、移動体
CN114084159A (zh) 辅助驾驶功能提醒方法、装置、介质及车辆
WO2014049705A1 (ja) 表示制御装置、表示制御方法及びプログラム、並びにサーバ装置
WO2022210172A1 (ja) 車両用表示システム、車両用表示方法、及び車両用表示プログラム
JP6520212B2 (ja) 電話着信システム、車載装置、制御プログラム
US20230234442A1 (en) Method For Displaying Augmented Reality Information In Vehicles
WO2022224752A1 (ja) 車両用表示システム、表示システム、表示方法、及び表示プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20220603