CN109624851A - 基于增强现实的辅助驾驶方法、***及可读存储介质 - Google Patents

基于增强现实的辅助驾驶方法、***及可读存储介质 Download PDF

Info

Publication number
CN109624851A
CN109624851A CN201811406314.6A CN201811406314A CN109624851A CN 109624851 A CN109624851 A CN 109624851A CN 201811406314 A CN201811406314 A CN 201811406314A CN 109624851 A CN109624851 A CN 109624851A
Authority
CN
China
Prior art keywords
vehicle
coordinate system
image
barrier
tailstock
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811406314.6A
Other languages
English (en)
Other versions
CN109624851B (zh
Inventor
王磊
陈传均
孙骏
刘强
于浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Hangsheng Electronic Co Ltd
Original Assignee
Shenzhen Hangsheng Electronic Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Hangsheng Electronic Co Ltd filed Critical Shenzhen Hangsheng Electronic Co Ltd
Priority to CN201811406314.6A priority Critical patent/CN109624851B/zh
Publication of CN109624851A publication Critical patent/CN109624851A/zh
Application granted granted Critical
Publication of CN109624851B publication Critical patent/CN109624851B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/302Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8086Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for vehicle path indication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明公开一种基于增强现实的辅助驾驶方法、***及存储介质,该方法包括:根据预先获取的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系;在摄像头采集到车道线图像、和/或障碍物图像时,根据车辆的行驶速度、车身宽度、方向盘转角、世界坐标系与图像坐标系之间的对应关系,在图像坐标系中绘制车辆的行车轨迹线;根据世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物;将车辆的行车轨迹线,车道线立体标志物、和/或障碍物立体标志物呈现给用户。相对于现有技术,本发明提高了驾驶安全性和舒适性。

Description

基于增强现实的辅助驾驶方法、***及可读存储介质
技术领域
本发明涉及辅助驾驶技术领域,尤其涉及一种基于增强现实的辅助驾驶方法、***及可读存储介质。
背景技术
汽车作为现代社会方便、快捷、高效的交通工具,被越来越多的人们所使用,但由于驾驶环境的复杂,以及驾驶员的水平差异,汽车的使用也带来了很多的问题。
传统的仅有两侧后视镜汽车存在视野有限的固有缺陷,容易导致安全问题,为了解决这一隐患,研发人员提出了一系列的方案。
申请号为CN201810484966.5,名称为一种混合现实道路显示***的发明专利虽然应用AR(现实增强)技术,但是其需要沿道路设置的中继站存储现实空间模型信息和虚拟混合模型信息。
申请号为CN201611245215.5,名称为倒车辅助线设置方法及倒车辅助***的发明专利在倒车辅助线的绘制过程中,仅根据车后障碍物的距离调整倒车辅助线,实际障碍物距离车后端的距离并不直观具体。
申请号为CN201711271533.3,名称为基于增强现实平视显示与多屏语音交互的驾驶辅助***的发明专利虽然应用增强现实技术,但是更多的是导航、警示信息叠加在真实场景上,不能很好的提供距离信息供驾驶人参考,在车辆倒车时没有提供增强现实的画面显示。此外,同时使用两个摄像头,多个屏幕,增加了整体成本。
由此,有必要提出一种能有效提高驾驶安全性和舒适性的解决方案。
发明内容
本发明的主要目的在于提出一种基于增强现实的辅助驾驶方法、***及可读存储介质,旨在提高驾驶安全性和舒适性。
为实现上述目的,本发明提供一种基于增强现实的辅助驾驶方法,所述方法应用于车辆辅助驾驶***,所述车辆的车头和车尾安装有摄像头,所述方法包括以下步骤:
根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系;
在所述车辆的车头或车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线;
根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物;
将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
本发明的进一步的技术方案是,所述根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物的步骤之前包括:
判断所述车道线、和/或障碍物与所述车辆的距离是否小于或等于预设距离;
若是,则执行根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物的步骤。
本发明的进一步的技术方案是,所述若是,则执行根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制障碍物立体标志物的步骤包括:
判断所述车辆的车头或车尾的摄像头是否采集到两个以上障碍物图像;
若所述车辆的车头或车尾的摄像头采集到两个以上障碍物图像,则根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制与所述车辆距离最近的障碍物的障碍物立体标志物。
本发明的进一步的技术方案是,所述在所述车辆的车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤包括:
在所述车辆的车尾的摄像头采集到车道线图像、和/或障碍物图像时,分析所述车辆的车尾的摄像头采集到的图像;
若所述车尾的摄像头采集到的图像包括车道线图像、和/或障碍物图像时,则执行根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤;
若所述车辆的车尾的摄像头采集到的图像包括泊车位图像,车道线图像、和/或障碍物图像时,则建立泊车轨迹线,和/或,根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制泊车位立体标志物,并根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
本发明的进一步的技术方案是,所述在所述车辆的车头的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤包括:
在所述车辆的车头的摄像头采集到车道线图像、和/或障碍物图像时,分析所述车辆的车头的摄像头采集到的图像;
若所述车头的摄像头采集到的图像包括车道线图像、和/或障碍物图像时,则执行根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤;
若所述车辆的车头的摄像头采集到的图像包括其他车辆的图像,车道线图像、和/或障碍物图像时,则根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制其他车辆立体标志物,并根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
本发明的进一步的技术方案是,所述在所述车辆的车头的摄像头采集到障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤之后还包括:
判断所述车辆的车头的摄像头采集到的障碍物图像是否包括车头斜前方障碍物图像;
若是,则获取车头的障碍物与车头的距离、以及斜前方障碍物分别与车辆两侧的距离;
根据所述车辆的行车轨迹线、所述车头的障碍物与车头的距离、以及斜前方障碍物分别与车辆两侧的距离绘制行车辅助线;
所述将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户的步骤包括:
将所述车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
本发明的进一步的技术方案是,所述在所述车辆的车尾的摄像头采集到障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤之后还包括:
获取车尾的障碍物与车尾的距离;
将车尾的障碍物与车尾的距离与预设距离相比对;
若车尾的障碍物与车尾的距离小于或等于所述预设距离,则根据所述车辆的行车轨迹线、车尾的障碍物与车尾的距离绘制行车辅助线;
所述将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户的步骤包括:
将所述车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
本发明的进一步的技术方案是,所述根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系的步骤包括:
采用棋盘格对所述车辆的车头和车尾的摄像头进行标定,获取所述车辆的车头和车尾的摄像头的内参数和外参数。
为实现上述目的,本发明还提出一种基于增强现实的辅助驾驶***,包括安装于车辆的车头和车尾的摄像头、存储器、处理器以及存储在所述存储器上的计算机程序,所述计算机程序被所述处理器运行时实现如上所述的方法的步骤。
为实现上述目的,本发明还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有基于增强现实的辅助驾驶程序,所述基于增强现实的辅助驾驶程序被处理器运行时实现如上所述的方法的步骤。
本发明基于增强现实的辅助驾驶方法、***及可读存储介质通过上述技术方案,根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系;在所述车辆的车头或车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线;根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物;将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户,相对于现有技术,提高了驾驶安全性和舒适性。
附图说明
图1是本发明基于增强现实的辅助驾驶方法第一实施例的流程示意图;
图2是本发明基于增强现实的辅助驾驶方法第二实施例的流程示意图;
图3是本发明基于增强现实的辅助驾驶方法第二实施例中步骤S30的细化流程示意图;
图4是本发明基于增强现实的辅助驾驶方法第三实施例的流程示意图;
图5是本发明基于增强现实的辅助驾驶方法第四实施例的流程示意图;
图6是本发明基于增强现实的辅助驾驶方法第五实施例的流程示意图;
图7是本发明基于增强现实的辅助驾驶方法各实施例中绘制障碍物立体标志物的示意图;
图8是本发明基于增强现实的辅助驾驶方法各实施例中绘制行车轨迹线的示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
针对现有技术中无论车辆是前行还是后退过程中,本车与车道线、障碍物、或者前车的距离不够直观的缺点,本发明提出一种使驾驶人能够更为直观的判断车道线、障碍物、前车、后车的距离,使车辆驾驶人对距离的感知更为直观,能够更为准确的判断距离,使驾驶过程更为安全的解决方案。
请参照图1至图8,本发明提出一种基于增强现实的辅助驾驶方法。
具体的,请参照图1,图1是本发明基于增强现实的辅助驾驶方法第一实施例的流程示意图。
需要说明的是,本发明基于增强现实的辅助驾驶方法应用于车辆辅助驾驶***,其中,所述车辆的车头和车尾安装有摄像头。
如图1所示,本实施例提出的基于增强现实的辅助驾驶方法包括以下步骤:
步骤S10,根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系。
摄像头自身的焦距、偏移、以及畸变会对进入镜头中的光线产生较大影响,这些参数称为摄像头的内参。摄像头的内参确定了摄像头从三维空间到二维图像的投影关系。
摄像头的外参受摄像头的安装位置和朝向(例如方位角,俯仰角和翻滚角)影响,外参决定了摄像头坐标与世界坐标之间的关系,与内参相对独立。
步骤S20,在所述车辆的车头或车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
在绘制行车轨迹线时,可以在距离车身由近至远的位置分布用红色、黄色、绿色线绘制,行车轨迹线的两条线的宽度与车身宽度相同。
步骤S30,根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物。
其中,车道线立体标志物与障碍物立体标志物可以采用不同的方式绘制,例如,车道线立体标志物采用黄白相间的半透明圆柱,障碍物立体标志物采用红白相间的半透明圆柱。黄白相间的圆柱体是可以越过的车道线,红白相间的圆柱体是不可越过的障碍物。通过这样的差异,可以提高驾驶安全性。
步骤S40,将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
可以理解的是,由于使用了增强现实技术(AR技术)在车道线、障碍物位置绘制了立体标志物,此时车辆的行车轨迹线会与车道线立体标志物、和/或障碍物立体标志物出现交叠,在距离大于预设距离时,可以根据行车轨迹线与车道线立体标志物、和/或障碍物立体标志物交叠处的颜色判断距离。不同于现有的行车轨迹线在平面图像上的显示方法,这种方法使驾驶人能够更为直观的获得车辆与障碍物的距离,使驾驶更为安全。
请参照图2,图2是本发明基于增强现实的辅助驾驶方法第二实施例的流程示意图。
本实施例与图1所示的第一实施例的区别在于,上述步骤S30,所述根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物的步骤之前包括:
S301,判断所述车道线、和/或障碍物与所述车辆的距离是否小于或等于预设距离。
若是,则执行步骤S30,根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物的步骤。
进一步的,请参照图3,图3是本实施例中步骤S30的细化流程示意图。
如图3所示,上述步骤S30,根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物包括以下步骤:
步骤S302,判断所述车辆的车头或车尾的摄像头是否采集到两个以上障碍物图像;
步骤S303,若所述车辆的车头或车尾的摄像头采集到两个以上障碍物图像,则根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制与所述车辆距离最近的障碍物的障碍物立体标志物。
由此,本实施例避免了绘制的障碍物立体标志物在显示过程中出现杂乱无章的现象。
请参照图4,图4是本发明基于增强现实的辅助驾驶方法第三实施例的流程示意图。
本实施例与图1所示的第一实施例的区别在于,上述步骤S20,在所述车辆的车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤包括:
步骤S201,在所述车辆的车尾的摄像头采集到车道线图像、和/或障碍物图像时,分析所述车辆的车尾的摄像头采集到的图像。
步骤S202,若所述车尾的摄像头采集到的图像包括车道线图像、和/或障碍物图像时,则执行根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤。
步骤S203,若所述车辆的车尾的摄像头采集到的图像包括泊车位图像,车道线图像、和/或障碍物图像时,则建立泊车轨迹线,和/或,根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制泊车位立体标志物,并根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
可以理解的是,本实施例中,当泊车轨迹线与行车轨迹线重合时,车辆能够很好的停入泊车位。
请参照图5,图5是本发明基于增强现实的辅助驾驶方法第四实施例的流程示意图。
本实施例与图1所示的第一实施例的区别在于,上述步骤S20,在所述车辆的车头的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤包括:
步骤S204,在所述车辆的车头的摄像头采集到车道线图像、和/或障碍物图像时,分析所述车辆的车头的摄像头采集到的图像。
步骤S205,若所述车头的摄像头采集到的图像包括车道线图像、和/或障碍物图像时,则执行根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤。
步骤S206,若所述车辆的车头的摄像头采集到的图像包括其他车辆的图像,车道线图像、和/或障碍物图像时,则根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制其他车辆立体标志物,并根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
其中,所述其他车辆立体标志物可以采用小车图标绘制。由此,通过在图像坐标系中绘制小车图标,能使用户更加直观的了解其他车辆与本车的距离情况,从而进一步提高驾驶安全性。
更进一步的,作为一种实施方式,上述步骤S20,在所述车辆的车头的摄像头采集到障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤之后还包括:
判断所述车辆的车头的摄像头采集到的障碍物图像是否包括车头斜前方障碍物图像;
若是,则获取车头的障碍物与车头的距离、以及斜前方障碍物分别与车辆两侧的距离;
根据所述车辆的行车轨迹线、所述车头的障碍物与车头的距离、以及斜前方障碍物分别与车辆两侧的距离绘制行车辅助线。
上述步骤S40,将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户的步骤包括:
将所述车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
作为另一种实施方式,上述步骤S20,在所述车辆的车头的摄像头采集到障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤之后还包括:
获取车尾的障碍物与车尾的距离;
将车尾的障碍物与车尾的距离与预设距离相比对;
若车尾的障碍物与车尾的距离小于或等于所述预设距离,则根据所述车辆的行车轨迹线、车尾的障碍物与车尾的距离绘制行车辅助线。
上述步骤S40,将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户的步骤包括:
将所述车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
由此,本实施例通过将车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户,进一步提高了驾驶安全性。
请参照图6,图6是本发明基于增强现实的辅助驾驶方法第五实施例的流程示意图。
本实施例与图1所示的第一实施例的区别在于,上述步骤S10,根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系的步骤包括:
步骤S100,采用棋盘格对所述车辆的车头和车尾的摄像头进行标定,获取所述车辆的车头和车尾的摄像头的内参数和外参数。
下面通过举例对本发明基于增强现实的辅助驾驶方法做进一步的详细阐述。
1、关于立体标志物的绘制:
首先使用棋盘格对车载的前后摄像头进行标定,获取摄像头的内外参数。通过获得的摄像头内外参数,建立世界坐标系(即实际物体)与图像坐标系之间的对应关系。
车辆前行时:在车辆行驶过程中使用车头的摄像头对车辆行驶前方的信息进行实时采集。对图像中的车道线、障碍物(此处的障碍物定义为除了车道线和前车意外,在车辆行驶前方轨迹上高于路面10cm的物体)、前车进行检测。在检车到的车道线位置使用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中绘制出直径与车道线宽度相同、实际高度为0.5m的黄白相间的半透明圆柱。第一个圆柱体出现的位置在图像内最靠近车身的车道线上或者车道线的延长线上。绘制的最远一个圆柱体距第一个圆柱体的距离为10m。在0-5m每个圆柱的距离间隔为0.5m,5-10m每个圆柱体的间隔为1m。在检测出的障碍物的位置应用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中沿着障碍物靠近车身一侧的轮廓处绘制出直径为0.2m、间隔为0.2m、高度为0.5m的红白相间的半透明圆柱,此圆柱红色所占的比例为7成。在检测到其他车辆的位置,应用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中绘制出半透明的小车图标。为了避免绘制的立体标志物在显示过程中出现杂乱无章的情况,在同一个方向检测到的车道线、障碍物以及前车等,只绘制最靠近车身的一个。前车和障碍物满足距离车头的距离小于10m则绘制立体标志物,大于10m则不进行绘制。
车辆后退时:在倒车时,绘制方法与车辆向前行驶时一致。在视野内检测到的车道线、障碍物、正后方的车辆时使用和车辆前行时的方法一样绘制出立体标志物。倒车时,在检车到的车道线位置使用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中绘制出直径与车道线宽度相同、实际高度为0.5m的黄白相间的半透明圆柱。第一个圆柱体出现的位置在图像内最靠近车身的车道线上或者车道线的延长线上。每个圆柱的距离间隔为0.5m。绘制的最远一个圆柱体距第一个圆柱体的距离为10m。在0-5m每个圆柱体的间隔为0.5m,5-10m每个圆柱体的间隔为1m。在检测出的障碍物的位置应用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中沿着障碍物靠近车身一侧的轮廓出绘制出直径为0.2m、间隔为0.2m、高度为0.5m的红白相间的半透明圆柱,此圆柱红色所占的比例为7成。在检测到其他车辆的位置,应用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中绘制出半透明的小车图标。为了避免绘制的立体标志物在显示过程中出现杂乱无章的情况,在同一个方向检测到的车道线、障碍物以及后车等,只绘制最靠近车尾的一个。后车和障碍物满足距车尾的距离小于10m则绘制立体标志物,大于10m则不进行绘制。同时,还要进行泊车位框线检测。如果检测到完整的停车位信息,则为最靠近车辆的第一个完整车位应用AR技术根据静态标定获得的摄像头的内外参数和世界坐标系与图像坐标系的对应关系在图像坐标系中绘制立体标志物。对要进行立体标志物绘制的泊车位,靠近车尾的实际距离最短的框线不绘制立体标志物,其他的三条边框绘制和车道线一致的立体标志物。如果没有检测到泊车位,则不进行上一步绘制泊车位立体标志物的操作。
对不同的物体使用不同样式的立体标志物便于驾驶人区分路况信息。黄白相间的圆柱体是可以越过的车道线,红白相间的圆柱体和小车标志是不可越过的障碍物和其他车辆。通过这样的差异,可以提高驾驶安全性。
请参照图7,图7以车辆前方右侧出现障碍物为例,显示了绘制立体标志物,根据行车轨迹线与立体标志物的交叠,识别车辆与障碍物的距离。从图中可以清晰的看出,车辆的行车轨迹线在3m以外不到4m处与立体标志物交叠,如此驾驶人可以很直观的感知到,障碍物距离车辆前方3m多不到4m。便于驾驶人准确的判断下一步将要进行的操作,从而提高了驾驶的安全性,减少碰撞和擦剐的发生。
2、关于行车辅助线的绘制:
车辆前行时:根据车辆的行驶速度、车身宽度以及方向盘转角,同时根据在静态标定过程中得到的摄像头内外参数、世界坐标系下的点映射到图像坐标系中的关系,绘制车辆在行驶中的轨迹线。在距离车身1m以内的轨迹线使用红色绘制,1至3m使用黄色绘制,3至5m使用绿色绘制。两条线的宽度与车身宽度相同。在车辆距前方立体标志物距离小于0.5m时,实时显示车辆与前方物体的距离。由于使用了AR技术在车道线、障碍物、前车位置绘制了立体标志物,此时车辆行驶的轨迹线会与立体标志物出现交叠,在距离大于0.5m时,可以根据轨迹线与立体标志物交叠处的颜色判断距离。不同于现有的行车轨迹线在平面图像上的显示方法,这种方法使驾驶人能够更为直观的获得车辆与前车或者障碍物的距离,使驾驶更为安全。
在前行过程中还要检测车辆与左右两侧车道线以及障碍物的距离(当其他车道的车辆进入本车正在行驶的车道时将其视为障碍物处理)。在采集到的图像的最下端(即最靠近车头的部分)距离车辆前方2m处,实时显示车辆距两侧障碍物的距离,帮助驾驶人判断车辆两侧物体的距离,提高驾驶的安全性。行车轨迹线结合距离显示和车身两侧距离显示便形成了行车辅助线。
结合AR技术的距离显示,会使驾驶人在判断车距时更加直观。尤其是在车辆距前方立体标志物小于0.5m时,通过行车辅助线,绘制的立体标志物,距离显示,会让驾驶人更为准确、直观的获取距离信息,提高驾驶安全性。
车辆后退时:根据车辆的行驶速度、车身宽度以及方向盘转角,同时根据在静态标定过程中得到的摄像头内外参数、世界坐标系下的点映射到图像坐标系中的关系,绘制车辆在倒车过程中的轨迹线。在距离车尾1m以内的轨迹线使用红色绘制,1至3m的轨迹线使用黄色绘制,3至5m轨迹线使用绿色绘制。两条线的宽度与车身宽度相同。在车尾距后方障碍物距离小于0.5m时,实时显示车辆与后方障碍物的距离。由于使用了AR技术在车道线、障碍物、后车位置绘制了立体标志物,此时车辆倒车的轨迹线会与立体标志物出现交叠,在距离大于0.5m时,可以根据轨迹线与立体标志物交叠处的颜色判断距离。不同于现有的倒车轨迹线在平面图像上的显示方法,这种立体交叠的方法使驾驶人能够更为直观的获得车辆与后车或者障碍物的距离,使驾驶更为安全。显示车身两侧的距离调整为车尾位置和距离车尾1m处。在倒车时车速一般较慢,所以在1m处显示车身两侧的距离更为安全。由于倒车时,只能通过后视镜观测车后的视野,不如前视的视野开阔。通过使用该方法,能够使驾驶人更为直观的判断车后的距离,提高倒车的安全性。倒车轨迹线结合距离显示和车身两侧的距离显示便形成了倒车辅助线。
下面结合图8以车辆前行时为例对于行车轨迹线的绘制进行详细阐述。
假设图8中的矩形代表汽车。开始时,汽车的轨迹与与X轴的角度为θ,此时汽车的行驶速度为v,方向盘转角为ψ,此时取的时间间隔Δt,则汽车的轨迹如图中的实线所示,其中的车速v和方向盘转角ψ可以发生变化。如果时间间隔较小,车速恒定,方向盘转角保持恒定,则此时绘制的轨迹线为标准的圆弧。图示为了方便表达,所以时间间隔取的稍大。假设此时车辆两前轮的中心点的坐标为(X0,Y0)。根据图中的关系可知在下一个Δt时刻,两前轮中心的坐标为下式:
再下一个Δt时刻,车辆两前轮的中心坐标为:
第3个Δt时刻,车辆两前轮的中心坐标为:
往后每一时刻的两前轮的中心坐标公式依此类推。需要求解的坐标数量根据车速,以及需要绘制的轨迹线的长度决定。在求得两前轮中心点的坐标以后可以根据车身的宽度,车轮距离车头的距离绘制出与车身等宽的两条轨迹线。
当在倒车过程中,检测到距车辆最近的泊车位时。根据车辆与泊车位相对位置关系,车身宽度,车身长度,车速,方向盘转角信息绘制建议的泊车轨迹。如果驾驶人驾驶倒车车辆的行车轨迹与建议泊车轨迹重合时,能够将车辆很好的停入对应的泊车位。
综上所述,本发明基于增强现实的辅助驾驶方法通过上述技术方案,根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系;在所述车辆的车头或车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线;根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物;将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户,相对于现有技术,提高了驾驶安全性和舒适性。
为实现上述目的,本发明还提出一种基于增强现实的辅助驾驶***,该***包括安装于车辆的车头和车尾的摄像头、存储器、处理器以及存储在所述存储器上的计算机程序,所述计算机程序被所述处理器运行时实现如上各实施例所述的方法的步骤,其具体的步骤和取得的技术效果上面已经详细阐述,这里不再赘述。
为实现上述目的,本发明还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有基于增强现实的辅助驾驶程序,所述基于增强现实的辅助驾驶程序被处理器运行时实现上所述的方法的步骤,其具体的步骤和取得的技术效果上面已经详细阐述,这里不再赘述。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于增强现实的辅助驾驶方法,其特征在于,所述方法应用于车辆辅助驾驶***,所述车辆的车头和车尾安装有摄像头,所述方法包括以下步骤:
根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系;
在所述车辆的车头或车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线;
根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物;
将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
2.根据权利要求1所述的基于增强现实的辅助驾驶方法,其特征在于,所述根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物的步骤之前包括:
判断所述车道线、和/或障碍物与所述车辆的距离是否小于或等于预设距离;
若是,则执行根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制车道线立体标志物、和/或障碍物立体标志物的步骤。
3.根据权利要求2所述的基于增强现实的辅助驾驶方法,其特征在于,所述若是,则执行根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制障碍物立体标志物的步骤包括:
判断所述车辆的车头或车尾的摄像头是否采集到两个以上障碍物图像;
若所述车辆的车头或车尾的摄像头采集到两个以上障碍物图像,则根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制与所述车辆距离最近的障碍物的障碍物立体标志物。
4.根据权利要求1所述的基于增强现实的辅助驾驶方法,其特征在于,所述在所述车辆的车尾的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤包括:
在所述车辆的车尾的摄像头采集到车道线图像、和/或障碍物图像时,分析所述车辆的车尾的摄像头采集到的图像;
若所述车尾的摄像头采集到的图像包括车道线图像、和/或障碍物图像时,则执行根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤;
若所述车辆的车尾的摄像头采集到的图像包括泊车位图像,车道线图像、和/或障碍物图像时,则建立泊车轨迹线,和/或,根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制泊车位立体标志物,并根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
5.根据权利要求1所述的基于增强现实的辅助驾驶方法,其特征在于,所述在所述车辆的车头的摄像头采集到车道线图像、和/或障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤包括:
在所述车辆的车头的摄像头采集到车道线图像、和/或障碍物图像时,分析所述车辆的车头的摄像头采集到的图像;
若所述车头的摄像头采集到的图像包括车道线图像、和/或障碍物图像时,则执行根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤;
若所述车辆的车头的摄像头采集到的图像包括其他车辆的图像,车道线图像、和/或障碍物图像时,则根据所述世界坐标系与图像坐标系之间的对应关系,采用增强现实方法在所述图像坐标系中绘制其他车辆立体标志物,并根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线。
6.根据权利要求1所述的基于增强现实的辅助驾驶方法,其特征在于,所述在所述车辆的车头的摄像头采集到障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤之后还包括:
判断所述车辆的车头的摄像头采集到的障碍物图像是否包括车头斜前方障碍物图像;
若是,则获取车头的障碍物与车头的距离、以及斜前方障碍物分别与车辆两侧的距离;
根据所述车辆的行车轨迹线、所述车头的障碍物与车头的距离、以及斜前方障碍物分别与车辆两侧的距离绘制行车辅助线;
所述将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户的步骤包括:
将所述车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
7.根据权利要求1所述的基于增强现实的辅助驾驶方法,其特征在于,所述在所述车辆的车尾的摄像头采集到障碍物图像时,根据所述车辆的行驶速度、车身宽度、方向盘转角、所述世界坐标系与图像坐标系之间的对应关系,在所述图像坐标系中绘制所述车辆的行车轨迹线的步骤之后还包括:
获取车尾的障碍物与车尾的距离;
将车尾的障碍物与车尾的距离与预设距离相比对;
若车尾的障碍物与车尾的距离小于或等于所述预设距离,则根据所述车辆的行车轨迹线、车尾的障碍物与车尾的距离绘制行车辅助线;
所述将所述车辆的行车轨迹线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户的步骤包括:
将所述车辆的行车辅助线,所述车道线立体标志物、和/或障碍物立体标志物呈现给用户。
8.根据权利要求1-7任意一项所述的基于增强现实的辅助驾驶方法,其特征在于,所述根据预先获取的车辆的车头和车尾的摄像头的内参数和外参数,建立世界坐标系与图像坐标系之间的对应关系的步骤包括:
采用棋盘格对所述车辆的车头和车尾的摄像头进行标定,获取所述车辆的车头和车尾的摄像头的内参数和外参数。
9.一种基于增强现实的辅助驾驶***,其特征在于,包括安装于车辆的车头和车尾的摄像头、存储器、处理器以及存储在所述存储器上的计算机程序,所述计算机程序被所述处理器运行时实现如权利要求1-8任意一项所述的方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有基于增强现实的辅助驾驶程序,所述基于增强现实的辅助驾驶程序被处理器运行时实现如权利要求1-8任意一项所述的方法的步骤。
CN201811406314.6A 2018-11-23 2018-11-23 基于增强现实的辅助驾驶方法、***及可读存储介质 Active CN109624851B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811406314.6A CN109624851B (zh) 2018-11-23 2018-11-23 基于增强现实的辅助驾驶方法、***及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811406314.6A CN109624851B (zh) 2018-11-23 2018-11-23 基于增强现实的辅助驾驶方法、***及可读存储介质

Publications (2)

Publication Number Publication Date
CN109624851A true CN109624851A (zh) 2019-04-16
CN109624851B CN109624851B (zh) 2022-04-19

Family

ID=66069288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811406314.6A Active CN109624851B (zh) 2018-11-23 2018-11-23 基于增强现实的辅助驾驶方法、***及可读存储介质

Country Status (1)

Country Link
CN (1) CN109624851B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109975035A (zh) * 2019-04-22 2019-07-05 中国汽车工程研究院股份有限公司 一种l3级自动驾驶汽车整车级在环测试台架***
CN110641366A (zh) * 2019-10-12 2020-01-03 爱驰汽车有限公司 行车时的障碍物追踪方法、***、电子设备和存储介质
CN110901527A (zh) * 2019-11-29 2020-03-24 长城汽车股份有限公司 一种车辆报警方法和装置
CN111243034A (zh) * 2020-01-17 2020-06-05 广州市晶华精密光学股份有限公司 一种全景辅助泊车标定方法、装置、设备及存储介质
CN112092731A (zh) * 2020-06-12 2020-12-18 合肥长安汽车有限公司 一种汽车倒车影像自适应调节方法及其***
CN113589820A (zh) * 2021-08-12 2021-11-02 广州小鹏自动驾驶科技有限公司 远程驾驶的辅助处理方法、装置及***
US20220044032A1 (en) * 2020-08-05 2022-02-10 GM Global Technology Operations LLC Dynamic adjustment of augmented reality image
CN115214626A (zh) * 2022-04-28 2022-10-21 广州汽车集团股份有限公司 泊车控制方法、泊车控制装置、车辆及存储介质
CN115320584A (zh) * 2022-10-13 2022-11-11 之江实验室 考虑障碍物预警的车辆远程驾驶辅助方法及远程驾驶***

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101309818A (zh) * 2005-11-17 2008-11-19 爱信精机株式会社 泊车支援装置及泊车支援方法
CN101622165A (zh) * 2007-02-28 2010-01-06 科博莱汽车技术有限公司 半自动泊车装置
CN102653272A (zh) * 2011-03-03 2012-09-05 富士重工业株式会社 车辆的驾驶辅助装置
CN103105174A (zh) * 2013-01-29 2013-05-15 四川长虹佳华信息产品有限责任公司 一种基于ar增强现实技术的车载实景安全导航方法
CN103950409A (zh) * 2014-04-24 2014-07-30 中国科学院深圳先进技术研究院 泊车辅助方法和***
CN104374391A (zh) * 2014-11-17 2015-02-25 深圳市中天安驰有限责任公司 一种车辆行驶轨迹计算***与计算方法
US20150352954A1 (en) * 2014-06-05 2015-12-10 Thinkware Corporation Electronic apparatus, control method of electronic apparatus and computer readable recording medium
CN105398379A (zh) * 2014-09-05 2016-03-16 现代摩比斯株式会社 驾驶辅助影像显示方法
CN106364403A (zh) * 2016-10-14 2017-02-01 深圳市元征科技股份有限公司 一种车道识别方法及移动终端
CN106515582A (zh) * 2016-10-26 2017-03-22 深圳市元征科技股份有限公司 安全驾驶预警方法及装置
CN106598055A (zh) * 2017-01-19 2017-04-26 北京智行者科技有限公司 一种智能车局部路径规划方法及其装置、车辆
CN107228681A (zh) * 2017-06-26 2017-10-03 上海驾馥电子科技有限公司 一种通过摄像头加强导航功能的导航***
CN107310475A (zh) * 2017-05-17 2017-11-03 广州小鹏汽车科技有限公司 一种智能汽车预警功能的显示方法及***
CN108025767A (zh) * 2015-09-17 2018-05-11 索尼公司 用于为安全超车提供驾驶辅助的***和方法
KR20180071137A (ko) * 2016-12-19 2018-06-27 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
CN108238056A (zh) * 2016-12-26 2018-07-03 丰田自动车株式会社 车载警告设备
CN108725319A (zh) * 2017-10-31 2018-11-02 无锡职业技术学院 一种影像式倒车指导方法

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101309818A (zh) * 2005-11-17 2008-11-19 爱信精机株式会社 泊车支援装置及泊车支援方法
CN101622165A (zh) * 2007-02-28 2010-01-06 科博莱汽车技术有限公司 半自动泊车装置
CN102653272A (zh) * 2011-03-03 2012-09-05 富士重工业株式会社 车辆的驾驶辅助装置
CN103105174A (zh) * 2013-01-29 2013-05-15 四川长虹佳华信息产品有限责任公司 一种基于ar增强现实技术的车载实景安全导航方法
CN103950409A (zh) * 2014-04-24 2014-07-30 中国科学院深圳先进技术研究院 泊车辅助方法和***
KR20150140449A (ko) * 2014-06-05 2015-12-16 팅크웨어(주) 전자 장치, 전자 장치의 제어 방법 및 컴퓨터 판독 가능한 기록 매체
US20150352954A1 (en) * 2014-06-05 2015-12-10 Thinkware Corporation Electronic apparatus, control method of electronic apparatus and computer readable recording medium
CN105398379A (zh) * 2014-09-05 2016-03-16 现代摩比斯株式会社 驾驶辅助影像显示方法
CN104374391A (zh) * 2014-11-17 2015-02-25 深圳市中天安驰有限责任公司 一种车辆行驶轨迹计算***与计算方法
CN108025767A (zh) * 2015-09-17 2018-05-11 索尼公司 用于为安全超车提供驾驶辅助的***和方法
CN106364403A (zh) * 2016-10-14 2017-02-01 深圳市元征科技股份有限公司 一种车道识别方法及移动终端
CN106515582A (zh) * 2016-10-26 2017-03-22 深圳市元征科技股份有限公司 安全驾驶预警方法及装置
KR20180071137A (ko) * 2016-12-19 2018-06-27 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
CN108238056A (zh) * 2016-12-26 2018-07-03 丰田自动车株式会社 车载警告设备
CN106598055A (zh) * 2017-01-19 2017-04-26 北京智行者科技有限公司 一种智能车局部路径规划方法及其装置、车辆
CN107310475A (zh) * 2017-05-17 2017-11-03 广州小鹏汽车科技有限公司 一种智能汽车预警功能的显示方法及***
CN107228681A (zh) * 2017-06-26 2017-10-03 上海驾馥电子科技有限公司 一种通过摄像头加强导航功能的导航***
CN108725319A (zh) * 2017-10-31 2018-11-02 无锡职业技术学院 一种影像式倒车指导方法

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109975035B (zh) * 2019-04-22 2019-12-27 中国汽车工程研究院股份有限公司 一种l3级自动驾驶汽车整车级在环测试台架***
CN109975035A (zh) * 2019-04-22 2019-07-05 中国汽车工程研究院股份有限公司 一种l3级自动驾驶汽车整车级在环测试台架***
CN110641366A (zh) * 2019-10-12 2020-01-03 爱驰汽车有限公司 行车时的障碍物追踪方法、***、电子设备和存储介质
CN110901527A (zh) * 2019-11-29 2020-03-24 长城汽车股份有限公司 一种车辆报警方法和装置
CN111243034A (zh) * 2020-01-17 2020-06-05 广州市晶华精密光学股份有限公司 一种全景辅助泊车标定方法、装置、设备及存储介质
CN112092731A (zh) * 2020-06-12 2020-12-18 合肥长安汽车有限公司 一种汽车倒车影像自适应调节方法及其***
CN112092731B (zh) * 2020-06-12 2023-07-04 合肥长安汽车有限公司 一种汽车倒车影像自适应调节方法及其***
US11562576B2 (en) * 2020-08-05 2023-01-24 GM Global Technology Operations LLC Dynamic adjustment of augmented reality image
US20220044032A1 (en) * 2020-08-05 2022-02-10 GM Global Technology Operations LLC Dynamic adjustment of augmented reality image
CN113589820A (zh) * 2021-08-12 2021-11-02 广州小鹏自动驾驶科技有限公司 远程驾驶的辅助处理方法、装置及***
CN115214626A (zh) * 2022-04-28 2022-10-21 广州汽车集团股份有限公司 泊车控制方法、泊车控制装置、车辆及存储介质
CN115214626B (zh) * 2022-04-28 2024-04-26 广州汽车集团股份有限公司 泊车控制方法、泊车控制装置、车辆及存储介质
CN115320584A (zh) * 2022-10-13 2022-11-11 之江实验室 考虑障碍物预警的车辆远程驾驶辅助方法及远程驾驶***

Also Published As

Publication number Publication date
CN109624851B (zh) 2022-04-19

Similar Documents

Publication Publication Date Title
CN109624851A (zh) 基于增强现实的辅助驾驶方法、***及可读存储介质
US10818180B2 (en) Parking support device
US9723243B2 (en) User interface method for terminal for vehicle and apparatus thereof
JP6383661B2 (ja) 自動車の運転時にドライバーをサポートする又は自動車を自律的に運転するための装置
US10810446B2 (en) Parking space line detection method and device
JP6257989B2 (ja) 運転支援装置
US10366611B2 (en) Parking support information display method and parking support device
US20180286095A1 (en) Display Assistance Device and Display Assistance Method
JP5031801B2 (ja) 車載用画像表示装置
WO2020125178A1 (zh) 车辆驾驶提示方法及装置
CN109367536B (zh) 用于道路车辆驾驶员辅助的设备及方法
JP5622818B2 (ja) 視線誘導システム
CN108136987A (zh) 停车位检测方法及装置
JP2015501249A5 (zh)
US20100283633A1 (en) Camera system for use in vehicle parking
TWI728117B (zh) 動態信息系統及動態信息系統的操作方法
CN107284379A (zh) 用于车辆安全行驶的ar投影***及投影方法
CN108528337B (zh) 一种基于视频投影的内轮差智能预警***及预警方法
US11601621B2 (en) Vehicular display system
JP2008151507A (ja) 合流案内装置および合流案内方法
US11648872B2 (en) Display device and display method for display device
CN207059958U (zh) 用于车辆安全行驶的ar投影***
JP2023165721A (ja) 表示制御装置
JP2011046262A (ja) 運転支援装置
JP7342926B2 (ja) 表示制御装置及び表示制御プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant