CN110371140B - 一种基于全景环视图像处理的车门开启预警***及方法 - Google Patents

一种基于全景环视图像处理的车门开启预警***及方法 Download PDF

Info

Publication number
CN110371140B
CN110371140B CN201910712354.1A CN201910712354A CN110371140B CN 110371140 B CN110371140 B CN 110371140B CN 201910712354 A CN201910712354 A CN 201910712354A CN 110371140 B CN110371140 B CN 110371140B
Authority
CN
China
Prior art keywords
vehicle
vehicle door
door
opening
panoramic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910712354.1A
Other languages
English (en)
Other versions
CN110371140A (zh
Inventor
陈勇
吴贵新
陈军
刘心文
凌政锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yudo New Energy Automobile Co Ltd
Original Assignee
Yudo New Energy Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yudo New Energy Automobile Co Ltd filed Critical Yudo New Energy Automobile Co Ltd
Priority to CN201910712354.1A priority Critical patent/CN110371140B/zh
Publication of CN110371140A publication Critical patent/CN110371140A/zh
Application granted granted Critical
Publication of CN110371140B publication Critical patent/CN110371140B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B60R16/0231Circuits relating to the driving or the functioning of the vehicle
    • B60R16/0232Circuits relating to the driving or the functioning of the vehicle for measuring vehicle parameters and indicating critical, abnormal or dangerous conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

本发明涉及一种基于全景环视图像处理的车门开启预警***及方法,所述***包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏;所述AVM控制器用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息。提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。

Description

一种基于全景环视图像处理的车门开启预警***及方法
技术领域
本发明涉及智能汽车技术领域,特别涉及一种基于全景环视图像处理的车门开启预警***及方法。
背景技术
全景环视***(AVM),该***通过广角摄像头分别采集车辆前、后、左、右4个方向的图像信息,然后传送给中央控制器,经过摄像头参数校正、镜头扭曲校正、鸟瞰视角转换、白平衡匹配和图像缝合处理,最终在显示器上显示一个可直观监视车辆周围环境的全景鸟瞰画面,能有效减少盲区,提高安全性。
通常情况下,当车辆车门开启时,AVM画面中的车模(通常是左侧的全景鸟瞰图)会模拟当前车门开启状态。但由于目前该功能只是用于提醒用户车门是否处于开启或关闭状态,未对车门开启最大化的位置进行实车标定;而无车门开启过程中的障碍物检测,导致实车车门开启后可能引起障碍物碰撞,对车门造成损伤。
发明内容
为此,需要提供一种基于全景环视图像处理的车门开启预警***及方法,解决现有全景环视***中无法实现车门开启时障碍物检测,导致实车车门开启后可能引起障碍物碰撞的问题。
为实现上述目的,发明人提供了一种基于全景环视图像处理的车门开启预警***,包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏;
所述车门检测模块包括车门检测传感器及车门检测控制器,所述车门检测传感器连接于车门检测控制器,所述车门检测控制器连接于AVM控制器,所述车门检测传感器设置在车辆的车门转向柱上,用于监测车门开启或关闭的幅度值,并将监测的车门开启或关闭的幅度值发送至车门检测控制器,所述车门检测控制器将从车门检测控制器发送的车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器;
所述摄像头模块包括四个摄像头,用于分别采集车辆的左视、右视、前视及后视四个方向的图像信息,并将采集的图像信息发送至AVM控制器;
所述AVM控制器用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息;
所述娱乐显示屏用于显示车辆的全景鸟瞰图及显示全景鸟瞰图中车模的车门开启或关闭,当接收到AVM控制器发送的预警信息时,在车模相应的车门以预警颜色显示。
进一步优化,所述AVM控制器还用于在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
进一步优化,所述AVM控制器还用于当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
进一步优化,所述娱乐显示屏还用于接收用户在全景鸟瞰图的车模中模拟车门开启或关闭的操作信号,并将操作信号发送至AVM控制器,所述AVM控制器还用于接收到娱乐显示屏发送的用户模拟车门开启或关闭的操作信号时,判断对应的车门是否会触碰到障碍物,当判断回触碰到障碍物时,则向娱乐显示屏发送预警信息。
进一步优化,还包括仪表,所述仪表连接于AVM控制器,所述AVM控制器还用于当判断开启或关闭车门会触碰障碍物时,发送报警信息至仪表,所述仪表用于接收到报警信息后,发出声音报警。
发明人还提供了另一个技术方案:一种基于全景环视图像处理的车门开启预警方法,其特征在于,包括以下步骤:
监测车辆车门的开启或关闭的幅度值,判断当前车辆的车门是否开启或关闭;
当判断当前车辆的车门开启或关闭时,采集车辆的左视、右视、前视及后视四个方向的图像信息,并根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图;
根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭;
根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
进一步优化,所述“根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭”具体还包括以下步骤:
在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
进一步优化,所述“监测车辆车门的开启或关闭的幅度值”具体还包括以下步骤:
当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
进一步优化,还包括以下步骤:
通过娱乐显示屏接收用户在全景鸟瞰图的车模中模拟车门开启的操作信号;
当接收到操作信号后,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
进一步优化,所述“若存在障碍物”之后还包括以下步骤:
发送报警信息至仪表,仪表接收到报警信息后,发出声音报警。
区别于现有技术,上述技术方案,通过监测车辆开启或关闭的幅度值进行判断车门是否开启或关闭,当判断车门开启或关闭,采集车辆四个方向的图像信息,并生成全景鸟瞰图,模拟车门开启或关闭,判断车门在开启或关闭的活动区域内是否有障碍物,若有障碍物,则进行预警,提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。
附图说明
图1为具体实施方式所述基于全景环视图像处理的车门开启预警***的一种结构示意图;
图2为具体实施方式所述全景鸟瞰图的一种示意图;
图3为具体实施方式所述填充条纹的全景鸟瞰图的一种示意图。
图4为具体实施方式所述基于全景环视图像处理的车门开启预警方法的一种流程示意图;
附图标记说明:
110、AVM控制器;
120、车门检测模块;
131、摄像头;
140、娱乐显示屏;
150、仪表。
具体实施方式
为详细说明技术方案的技术内容、构造特征、所实现目的及效果,以下结合具体实施例并配合附图详予说明。
请参阅图1-2,本实施例提供了一种基于全景环视图像处理的车门开启预警***,包括AVM控制器110、车门检测模块120、摄像头模块及娱乐显示屏140;
所述车门检测模块120包括车门检测传感器及车门检测控制器,所述车门检测传感器连接于车门检测控制器,所述车门检测控制器连接于AVM控制器110,所述车门检测传感器设置在车辆的车门转向柱上,用于监测车门开启或关闭的幅度值,并将监测的车门开启或关闭的幅度值发送至车门检测控制器,所述车门检测控制器将从车门检测控制器发送的车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器110;
所述摄像头模块包括四个摄像头131,用于分别采集车辆的左视、右视、前视及后视四个方向的图像信息,并将采集的图像信息发送至AVM控制器110;
所述AVM控制器110用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏140上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息;
所述娱乐显示屏140用于显示车辆的全景鸟瞰图及显示全景鸟瞰图中车模的车门开启或关闭,当接收到AVM控制器发送的预警信息时,在车模相应的车门以预警颜色显示。
通过布置在车辆的车门转向柱上的车门检测传感器进行实时监测车门的开启或关闭的幅度值,其中,车门检测传感器的个数根据车辆的车门的个数进行设置,若车辆的车门为四个,则车门检测传感器的个数为四个,分别安装在车辆的四个车门的转向柱上,将车门检测传感器监测到车门开启或关闭的幅度值发送至车门检测控制器,车门检测控制器将车门检测传感器监测到车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器,AVM控制器可以根据该CAN网络信号判断当前车辆哪个车门开启或关闭。当AVM控制器通过车门检测模块监测到当前车辆的车门开启或关闭时,通过摄像头模块分别采集当前车辆的四个方向的图像信息,即左视、右视、前视及后视四个方向的图像信息,然后根据采集的四个图像信息在娱乐显示屏上生成当前车辆的全景鸟瞰图,全景鸟瞰图中显示当前车辆的车模,然后AVM控制器根据车辆检测控制器发送的CAN网络信号模拟车模上相应的车门开启或关闭,即如车辆开启或关闭的是车辆左前门,相对应在车模的左前门模拟车门开启;当模拟车门开启的过程中,判断车门开启或关闭的活动区域中是否存在障碍物,即判断车门是否会触碰到障碍物,其中,通过车门所对应的图像信息进行判断是否存在障碍物,如车辆左边的车门通过左视方向的图像信息进行判断是否会触碰到障碍物,而车辆右边的车门通过右视方向的图像信息进行判断是否会触碰到障碍物;其中,障碍物主要为人、车、墙壁及电线杆等;当判断车门在开启或关闭的过程中,会触碰到障碍物,即车门的活动区域内存在障碍物,则向娱乐显示屏发送预警信息,当娱乐显示屏接收到预警信息后,在全景鸟瞰图上车模相应的车门以预警颜色显示,进行提示车门开启或关闭的过程中可能会触碰到障碍物,如当判断到左前门的活动区域内存在障碍物,则将车模的左前门用预警颜色显示;其中娱乐显示屏可以通过其他方式进行提醒,如文字等。提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。
请参阅图3,在现有技术中,当车门开启后,全景鸟瞰图中相应视角的图像进行条纹填充处理,原因是由于左、右摄像头相对于车身的位置会随着车门开启而变化,从而改变了摄像头的图像采集方向,破坏了图像拼接效果,为了解决该问题,所述AVM控制器110还用于在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。当在全景鸟瞰图中的车模模拟车门打开时,保证其相应视角在车门关闭时的图像信息,使得车模打开时,全景鸟瞰图的图像信息不会发生变化,不需要通过条纹进行填充,达到该车门在车辆静止及周边环境下的实时模拟。
在本实施例中,为了减少车门检测模块实时监测造成能源浪费,所述AVM控制器110还用于当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块120监测车门开启或关闭的幅度值。当AVM控制器110检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块120监测车门开启或关闭的幅度值,使得在正常情况下车门检测模块处于休眠状态,可以减少能源上的消耗。
在本实施例中,为了进一步增加用户的体验,所述娱乐显示屏140还用于接收用户在全景鸟瞰图的车模中模拟车门开启或关闭的操作信号,并将操作信号发送至AVM控制器110,所述AVM控制器110还用于接收到娱乐显示屏发送的用户模拟车门开启或关闭的操作信号时,判断对应的车门是否会触碰到障碍物,当判断回触碰到障碍物时,则向娱乐显示屏发送预警信息。用户可以通过娱乐显示屏上车模进行模拟车门打开,当用户在娱乐显示屏上操作车模模拟车门打开,娱乐显示屏将用户在车模上模拟车门开启或关闭的操作信号发送给AVM控制器,AVM控制器进行判断车门的活动区域内是否有障碍物,及判断车门在开区或关闭的过程中是否会触碰到障碍物,当判断存在障碍物时,即车门会触碰到障碍物时,则向娱乐显示屏发送预警信息,娱乐显示屏接收到预警信息后,将车模对应的车门用预警颜色进行显示,以提示用户车门可能会触碰到障碍物,通过用户操作娱乐显示屏进行模拟车门开启,并判断车门开启是否会触碰到障碍物,可以避免车门开启过程中触碰障碍物,同时增加用户的体验。
在本实施例中,为了进一步对用户进行预警,避免用户未看到娱乐显示屏的预警信号,还包括仪表150,所述仪表150连接于AVM控制器110,所述AVM控制器110还用于当判断开启或关闭车门会触碰障碍物时,发送报警信息至仪表150,所述仪表150用于接收到报警信息后,发出声音报警。当AVM控制器110判断当前车门开启或关闭的过程中会触碰到障碍物,则向仪表150发送报警信息,当仪表150接收到报警信息后,发出声音报警,对用户进行提醒,使得用户可以知晓车门开启的过程中可能会触碰到障碍物,可以及时作出反应,避免车门开启或关闭时触碰到障碍物。
请参阅图4。在另一个实施例中,一种基于全景环视图像处理的车门开启预警方法,应用于上述实施例中的基于全景环视图像处理的车门开启预警***,该***包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏,该方法包括以下步骤:
步骤S410:监测车辆车门的开启或关闭的幅度值;
步骤S410:判断当前车辆的车门是否开启或关闭;
当判断当前车辆的车门开启或关闭时,执行步骤S410:采集车辆的左视、右视、前视及后视四个方向的图像信息,并根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图;
步骤S410:根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭;
步骤S410:根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则执行步骤S410:在全景鸟瞰图中车模相应的车门以预警颜色显示。
通过布置在车辆的车门转向柱上的车门检测传感器进行实时监测车门的开启或关闭的幅度值,其中,车门检测传感器的个数根据车辆的车门的个数进行设置,若车辆的车门为四个,则车门检测传感器的个数为四个,分别安装在车辆的四个车门的转向柱上,将车门检测传感器监测到车门开启或关闭的幅度值发送至车门检测控制器,车门检测控制器将车门检测传感器监测到车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器,AVM控制器可以根据该CAN网络信号判断当前车辆哪个车门开启或关闭。当AVM控制器通过车门检测模块监测到当前车辆的车门开启或关闭时,通过摄像头模块分别采集当前车辆的四个方向的图像信息,即左视、右视、前视及后视四个方向的图像信息,然后根据采集的四个图像信息在娱乐显示屏上生成当前车辆的全景鸟瞰图,全景鸟瞰图中显示当前车辆的车模,然后AVM控制器根据车辆检测控制器发送的CAN网络信号模拟车模上相应的车门开启或关闭,即如车辆开启或关闭的是车辆左前门,相对应在车模的左前门模拟车门开启;当模拟车门开启的过程中,判断车门开启或关闭的活动区域中是否存在障碍物,即判断车门是否会触碰到障碍物,其中,通过车门所对应的图像信息进行判断是否存在障碍物,如车辆左边的车门通过左视方向的图像信息进行判断是否会触碰到障碍物,而车辆右边的车门通过右视方向的图像信息进行判断是否会触碰到障碍物;其中,障碍物主要为人、车、墙壁及电线杆等;当判断车门在开启或关闭的过程中,会触碰到障碍物,即车门的活动区域内存在障碍物,则向娱乐显示屏发送预警信息,当娱乐显示屏接收到预警信息后,在全景鸟瞰图上车模相应的车门以预警颜色显示,进行提示车门开启或关闭的过程中可能会触碰到障碍物,如当判断到左前门的活动区域内存在障碍物,则将车模的左前门用预警颜色显示;其中娱乐显示屏可以通过其他方式进行提醒,如文字等。提醒用户车门开启或关闭过程中可能触碰障碍物,避免了车门开启或关闭过程中触碰障碍物的情况发生。
在本实施例中,如图所示,在现有技术中,当车门开启后,全景鸟瞰图中相应视角的图像进行条纹填充处理,原因是由于左、右摄像头相对于车身的位置会随着车门开启而变化,从而改变了摄像头的图像采集方向,破坏了图像拼接效果,为了解决该问题,所述“根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭”具体还包括以下步骤:在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。当在全景鸟瞰图中的车模模拟车门打开时,保证其相应视角在车门关闭时的图像信息,使得车模打开时,全景鸟瞰图的图像信息不会发生变化,不需要通过条纹进行填充,达到该车门在车辆静止及周边环境下的实时模拟。
在本实施例中,为了减少车门检测模块实时监测造成能源浪费,所述“监测车辆车门的开启或关闭的幅度值”具体还包括以下步骤:当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。当AVM控制器检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值,使得在正常情况下车门检测模块处于休眠状态,可以减少能源上的消耗。
在本实施例中,为了进一步增加用户的体验,还包括以下步骤:通过娱乐显示屏接收用户在全景鸟瞰图的车模中模拟车门开启的操作信号;当接收到操作信号后,判断车门开启或关闭时的活动区域内是否存在障碍物;若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。用户可以通过娱乐显示屏上车模进行模拟车门打开,当用户在娱乐显示屏上操作车模模拟车门打开,娱乐显示屏将用户在车模上模拟车门开启或关闭的操作信号发送给AVM控制器,AVM控制器进行判断车门的活动区域内是否有障碍物,及判断车门在开区或关闭的过程中是否会触碰到障碍物,当判断存在障碍物时,即车门会触碰到障碍物时,则向娱乐显示屏发送预警信息,娱乐显示屏接收到预警信息后,将车模对应的车门用预警颜色进行显示,以提示用户车门可能会触碰到障碍物,通过用户操作娱乐显示屏进行模拟车门开启,并判断车门开启是否会触碰到障碍物,可以避免车门开启过程中触碰障碍物,同时增加用户的体验。
在本实施例中,为了进一步对用户进行预警,避免用户未看到娱乐显示屏的预警信号,所述“若存在障碍物”之后还包括以下步骤:发送报警信息至仪表,仪表接收到报警信息后,发出声音报警。当AVM控制器判断当前车门开启或关闭的过程中会触碰到障碍物,则向仪表发送报警信息,当仪表接收到报警信息后,发出声音报警,对用户进行提醒,使得用户可以知晓车门开启的过程中可能会触碰到障碍物,可以及时作出反应,避免车门开启或关闭时触碰到障碍物。
需要说明的是,尽管在本文中已经对上述各实施例进行了描述,但并非因此限制本发明的专利保护范围。因此,基于本发明的创新理念,对本文所述实施例进行的变更和修改,或利用本发明说明书及附图内容所作的等效结构或等效流程变换,直接或间接地将以上技术方案运用在其他相关的技术领域,均包括在本发明的专利保护范围之内。

Claims (10)

1.一种基于全景环视图像处理的车门开启预警***,其特征在于,包括AVM控制器、车门检测模块、摄像头模块及娱乐显示屏;
所述车门检测模块包括车门检测传感器及车门检测控制器,所述车门检测传感器连接于车门检测控制器,所述车门检测控制器连接于AVM控制器,所述车门检测传感器设置在车辆的车门转向柱上,用于监测车门开启或关闭的幅度值,并将监测的车门开启或关闭的幅度值发送至车门检测控制器,所述车门检测控制器将从车门检测控制器发送的车门开启或关闭的幅度值转换为CAN网络信号告知AVM控制器;
所述摄像头模块包括四个摄像头,用于分别采集车辆的左视、右视、前视及后视四个方向的图像信息,并将采集的图像信息发送至AVM控制器;
所述AVM控制器用于当根据车门检测控制器发送的CAN网络信号判断当前车辆的车门开启或关闭时,根据摄像头模块采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图,并根据CAN网络信号在全景鸟瞰图的车模上模拟对应车门开启或关闭,同时根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物,若存在障碍物,则向娱乐显示屏发送预警信息;
所述娱乐显示屏用于显示车辆的全景鸟瞰图及显示全景鸟瞰图中车模的车门开启或关闭,当接收到AVM控制器发送的预警信息时,在车模相应的车门以预警颜色显示;
所述AVM控制器为全景环视***控制器。
2.根据权利要求1所述基于全景环视图像处理的车门开启预警***,其特征在于,所述AVM控制器还用于在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
3.根据权利要求1所述基于全景环视图像处理的车门开启预警***,其特征在于,所述AVM控制器还用于当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
4.根据权利要求1所述基于全景环视图像处理的车门开启预警***,其特征在于,所述娱乐显示屏还用于接收用户在全景鸟瞰图的车模中模拟车门开启或关闭的操作信号,并将操作信号发送至AVM控制器,所述AVM控制器还用于接收到娱乐显示屏发送的用户模拟车门开启或关闭的操作信号时,判断对应的车门是否会触碰到障碍物,当判断会触碰到障碍物时,则向娱乐显示屏发送预警信息。
5.根据权利要求1所述基于全景环视图像处理的车门开启预警***,其特征在于,还包括仪表,所述仪表连接于AVM控制器,所述AVM控制器还用于当判断开启或关闭车门会触碰障碍物时,发送报警信息至仪表,所述仪表用于接收到报警信息后,发出声音报警。
6.一种基于全景环视图像处理的车门开启预警方法,其特征在于,包括以下步骤:
监测车辆车门的开启或关闭的幅度值,判断当前车辆的车门是否开启或关闭;
当判断当前车辆的车门开启或关闭时,采集车辆的左视、右视、前视及后视四个方向的图像信息,并根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图;
根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭;
根据车辆开启或关闭的车门对应的图像信息,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
7.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述“根据车门检测模块发送的车门开启或关闭的幅度值在全景鸟瞰图的车模中进行模拟车门开启或关闭”具体还包括以下步骤:
在全景鸟瞰图中的车模模拟车门打开时,保持车门关闭时的图像信息。
8.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述“监测车辆车门的开启或关闭的幅度值”具体还包括以下步骤:
当检测到当前车辆的车速为0Km/h,且当前车辆未下电时,通过车门检测模块监测车门开启或关闭的幅度值。
9.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述步骤“根据采集的车辆四个方向的图像信息在娱乐显示屏上生成全景鸟瞰图”之后还包括以下步骤:
通过娱乐显示屏接收用户在全景鸟瞰图的车模中模拟车门开启的操作信号;
当接收到操作信号后,判断车门开启或关闭时的活动区域内是否存在障碍物;
若存在障碍物,则在全景鸟瞰图中车模相应的车门以预警颜色显示。
10.根据权利要求6所述基于全景环视图像处理的车门开启预警方法,其特征在于,所述“若存在障碍物”之后还包括以下步骤:
发送报警信息至仪表,仪表接收到报警信息后,发出声音报警。
CN201910712354.1A 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警***及方法 Active CN110371140B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910712354.1A CN110371140B (zh) 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警***及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910712354.1A CN110371140B (zh) 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警***及方法

Publications (2)

Publication Number Publication Date
CN110371140A CN110371140A (zh) 2019-10-25
CN110371140B true CN110371140B (zh) 2021-08-06

Family

ID=68257846

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910712354.1A Active CN110371140B (zh) 2019-08-02 2019-08-02 一种基于全景环视图像处理的车门开启预警***及方法

Country Status (1)

Country Link
CN (1) CN110371140B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112796609A (zh) * 2019-11-13 2021-05-14 北京新能源汽车股份有限公司 一种车门预警方法、装置、设备及汽车
CN111674328A (zh) * 2020-06-04 2020-09-18 纵目科技(上海)股份有限公司 一种全景感知模块的显示***、终端和存储介质
CN111757057B (zh) * 2020-06-17 2022-06-17 广州市泰睿科技有限公司 一种全景环视显示方法、装置、设备及存储介质
CN112406780A (zh) * 2020-11-20 2021-02-26 广州橙行智动汽车科技有限公司 车门的控制方法、控制装置、车辆和存储介质
CN112572336A (zh) * 2020-12-23 2021-03-30 奇瑞汽车股份有限公司 一种行车安全提醒***及方法
CN113232585B (zh) * 2021-05-07 2023-02-10 广州小鹏汽车科技有限公司 车辆开门防碰撞方法、装置、车辆及存储介质
CN113183876A (zh) * 2021-06-03 2021-07-30 辽宁工程技术大学 一种预防车辆碰撞预警提示***
CN114435244A (zh) * 2022-01-28 2022-05-06 中国第一汽车股份有限公司 一种车门开关障碍物检测方法、装置、设备和介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012014939A1 (de) * 2012-07-27 2014-01-30 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Kollisionsvermeidung
KR101916467B1 (ko) * 2012-10-30 2018-11-07 현대자동차주식회사 Avm 시스템의 장애물 검출 장치 및 방법
KR102128048B1 (ko) * 2013-10-11 2020-06-29 현대모비스 주식회사 어라운드 뷰 모니터링을 이용한 차량용 웰컴 시스템과 그 동작 방법
CN105539289B (zh) * 2015-12-14 2018-03-06 宁波裕兰信息科技有限公司 一种基于四颗摄像头360度环视的停车开门预警方法
CN106740470A (zh) * 2016-11-21 2017-05-31 奇瑞汽车股份有限公司 一种基于全景影像***的盲区监测方法及***
US10086833B1 (en) * 2017-06-16 2018-10-02 GM Global Technology Operations LLC Automobile door open hazard warning system and methods
CN207433379U (zh) * 2017-11-02 2018-06-01 重庆长安汽车股份有限公司 集成开门预警功能的360°全景泊车***

Also Published As

Publication number Publication date
CN110371140A (zh) 2019-10-25

Similar Documents

Publication Publication Date Title
CN110371140B (zh) 一种基于全景环视图像处理的车门开启预警***及方法
CN107589745B (zh) 驾驶方法、车载驾驶端、远程驾驶端、设备和存储介质
CN102371944B (zh) 车辆用视觉辅助***以及具备该***的车辆
EP4339938A1 (en) Projection method and apparatus, and vehicle and ar-hud
US20130113614A1 (en) Systems and methods for vehicle door clearance zone projection
US20110202240A1 (en) Dynamic range display for automotive rear-view and parking systems
TW201309515A (zh) 調校車用影像裝置之方法及其系統
TWI506601B (zh) 車輛監控系統和車輛監控方法
CN105389948A (zh) 一种预防司机疲劳驾驶的***及方法
CN105599765A (zh) 一种车道偏离的判断和预警方法
CN113276770B (zh) 基于安全和低成本需求的商用车全盲区监测***和方法
CN104641405A (zh) 车辆用警报装置和车辆用车外后视镜装置
KR101734560B1 (ko) 차량용 도어 열림 강도 조절장치 및 방법
CN107672551A (zh) 一种前车防撞预警***及其控制方法
CN108973861A (zh) 一种智能a柱行车安全***
CN105857180A (zh) 雾霾天车辆驾驶辅助***及其方法
CN108944680A (zh) 一种基于环视***的雷达辅助行车***
KR20120103232A (ko) 장애물 충돌 방지를 위한 주차 보조 장치 및 그 방법
CN218949048U (zh) 一种垃圾清运车智能盲区行人检测及预警装置
TW201600376A (zh) 結合感測器的車用智能影像安全系統
CN111532279A (zh) 一种车辆综合控制***
CN108538084B (zh) 可视化提醒装置、车辆以及可视化提醒方法
CN111178257A (zh) 一种基于深度相机的区域安全防护***及方法
WO2023284748A1 (zh) 一种辅助驾驶***及车辆
JP2015026255A (ja) 運転支援システムおよび運転支援方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant after: Yundu New Energy Automobile Co.,Ltd.

Address before: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant before: FJ MOTOR GROUP, YUDO NEW-ENERGY AUTOMOBILE Co.,Ltd.

Address after: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant after: Yundu New Energy Vehicle Co.,Ltd.

Address before: 351100 no.729 Lihan Avenue, Shixi village, Jiangkou Town, Hanjiang District, Putian City, Fujian Province

Applicant before: Yundu New Energy Automobile Co.,Ltd.

GR01 Patent grant
GR01 Patent grant