CN105512623B - 基于多传感器雾天行车视觉增强与能见度预警***及方法 - Google Patents
基于多传感器雾天行车视觉增强与能见度预警***及方法 Download PDFInfo
- Publication number
- CN105512623B CN105512623B CN201510866567.1A CN201510866567A CN105512623B CN 105512623 B CN105512623 B CN 105512623B CN 201510866567 A CN201510866567 A CN 201510866567A CN 105512623 B CN105512623 B CN 105512623B
- Authority
- CN
- China
- Prior art keywords
- image
- visibility
- value
- road
- fog
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 239000003595 mist Substances 0.000 claims abstract description 39
- 230000009466 transformation Effects 0.000 claims abstract description 16
- 238000012706 support-vector machine Methods 0.000 claims description 35
- 238000012549 training Methods 0.000 claims description 24
- 238000011156 evaluation Methods 0.000 claims description 21
- 230000008569 process Effects 0.000 claims description 16
- 241000209094 Oryza Species 0.000 claims description 12
- 235000007164 Oryza sativa Nutrition 0.000 claims description 12
- 235000009566 rice Nutrition 0.000 claims description 12
- 238000002834 transmittance Methods 0.000 claims description 12
- 230000008033 biological extinction Effects 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 5
- 239000004615 ingredient Substances 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 5
- 235000013339 cereals Nutrition 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 4
- 230000004907 flux Effects 0.000 claims description 4
- 238000005457 optimization Methods 0.000 claims description 4
- 238000012552 review Methods 0.000 claims description 4
- 239000000203 mixture Substances 0.000 claims 2
- 230000000694 effects Effects 0.000 abstract description 6
- 238000005516 engineering process Methods 0.000 abstract description 3
- 230000002708 enhancing effect Effects 0.000 abstract description 2
- 230000008030 elimination Effects 0.000 abstract 1
- 238000003379 elimination reaction Methods 0.000 abstract 1
- 238000001514 detection method Methods 0.000 description 8
- 206010039203 Road traffic accident Diseases 0.000 description 4
- 239000003550 marker Substances 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000015572 biosynthetic process Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000003786 synthesis reaction Methods 0.000 description 3
- 230000004888 barrier function Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000012067 mathematical method Methods 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000000505 pernicious effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/106—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using night vision cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/301—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/8053—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for bad weather conditions or night vision
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Abstract
本发明基于多传感器雾天行车视觉增强与能见度预警***及方法,属于智能车辆安全辅助驾驶技术领域,包括电源、变压插头、前置红外摄像头、前置毫米波雷达、车载电控单元模块、车载显示屏、汽车音响设备、车载扬声器和车速传感器。本发明通过构建道路图像分类器、有无雾图像分类器、建立有雾图像去雾模型、获得清晰去雾图像,实现视觉增强效果、构建能见度计算模型、判断能见度等级,利用毫米波雷达测量车速等级以及检测到前车间距等级,判断是否提供给驾驶人视觉、听觉预警。本方法实现了能在雾天低能见度条件下,驾驶人视觉增强与行车能见度预警,解决了在雾天现有汽车雾灯照射范围有限、存在盲区,以及驾驶人对行驶环境判断不准确等问题。
Description
技术领域
本发明主要涉及智能车辆安全辅助驾驶技术领域,特别是涉及到一种基于多传感器雾天行车视觉增强与能见度预警***及方法。
背景技术
恶劣天气是造成道路交通事故的主要因素之一,在所有容易引起交通事故的恶劣天气中,雾的影响最大,常常导致高速公路限速或关闭,延误行车时间,甚至引发连环碰撞事故,造成巨大经济损失。近年来由于霾(干)或雾(湿)严重程度,甚至使能见度降低至零(能见度不足100米通常被认为为零),这对于驾驶人来说非常危险。据统计,每年雾天交通事故占道路事故总数的15%左右,但是引起47%以上的死亡率。因此,亟需对雾天能见度进行实时检测,当能见度、前方车辆距离、行车速度和给定阈值关系不匹配时,给予驾驶人有效的预警,避免道路交通事故的发生。
目前,能见度检测方法主要分为基于能见度仪的检测方法、基于双目摄相机标定的检测方法、基于建立对比度模型的检测方法、基于图像去雾的能见度检测方法。其中,基于能见度仪的检测方法存在价格十分昂贵等问题,要保证公路上的交通安全,尤其在团雾检测时,需要密集布置监测设备,从而成本居高不下,同时实时性、便携性不佳。基于双目摄相机标定的检测方法,由于需要标定模板、测量摄像机安装角度等受实际条件的限制,难以适用实时操作。基于建立对比度模型的检测方法,该方法会产生较大误差,而且测量结果容易受到远方障碍物的不利影响。基于单目红外相机的图像去雾能见度检测方法,测量过程不会对驾驶人的正常驾驶行为造成干扰,红外相机也适用于雾天能见度的特点。利用图像去雾处理增强驾驶人雾天视觉已经成为国内外研究热点。
现在提高雾天行车安全的方法,主要采用雾灯,主要判断还是由驾驶人判断。然而雾天条件下现有汽车雾灯存在照射范围有限、存在盲区等问题影响驾驶人判断行车状况,同时驾驶人驾驶熟练程度、驾驶人心理状态也会导致驾驶人对驾驶环境的误判。
因此,亟待一种驾驶辅助***,能够辅助驾驶人雾天行车,提高行驶安全。
发明内容
本发明所要解决的技术问题是:提供基于多传感器雾天行车视觉增强与能见度预警***及方法,用来解决因现有汽车雾灯照射范围有限、存在盲区;传统的能见度检测方法存在价格昂贵、难以适用实时操作或者测量结果容易受到远方障碍物的影响等技术问题。
一种基于多传感器雾天行车视觉增强与能见度预警***,其特征在于:包括电源、变压插头、红外摄像头、毫米波雷达、车载电控单元模块、车载显示屏、汽车音响设备、车载扬声器、车速传感器,所述电源通过变压插头与红外摄像头连接,电源通过导线与毫米波雷达连接;
所述车载电控单元模块包括有无雾图像分类模块、图像去雾模块、能见度值计算模块和预警模块;所述有无雾图像分类模块的一端与红外摄像头通过导线连接,有无雾图像分类模块的另一端通过导线与图像去雾模块连接;所述图像去雾模块通过导线与能见度值计算模块连接;所述能见度值计算模块通过导线与预警模块连接;
所述车载显示屏通过导线与图像去雾模块连接;所述汽车音响设备的一端通过导线与预警模块连接,汽车音响设备的另一端通过导线与车载扬声器连接;所述车速传感器通过导线与预警模块连接。
一种基于多传感器雾天行车视觉增强与能见度预警方法,其特征在于:
包括以下步骤
步骤一、建立有无雾道路图像分类器并进行实时图像分类
Ⅰ建立道路图像支持向量机SVM分类器
①红外摄像头采集N张红外道路图像和红外非道路图像,并将采集到的图像传输到有无雾图像分类模块,其中包括N1张红外道路图像和N2张红外非道路图像,N、N1、N2均为自然数,在有无雾图像分类模块中建立道路图像分类器的图像训练库;
②通过道路图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据道路纹理获得道路图像特征,对道路图像和非道路图像分类,并获得红外道路图像特征,道路图像支持向量机SVM分类器建立完成;
Ⅱ建立有无雾图像分类器
①红外摄像头采集M张不同雾浓度的红外有雾图像和红外无雾图像,其中包括M1张有雾红外图像和M2张无雾红外图像,M、M1、M2均为自然数,在有无雾图像分类模块中建立有无雾图像分类器的图像训练库;
②通过有无雾图像分类器的图像训练库离线训练高斯混合模型GMM分类器,高斯混合模型GMM分类器根据有雾图像灰度值频率特征,提取有雾图像和无雾图像的一维灰度直方图图像特征,并根据图像的直方图对有雾图像和无雾图像进行分类,有无雾图像高斯混合模型GMM分类器建立完成;
③通过有无雾图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据有雾图像和无雾图像的傅里叶变换频率特征,对有雾图像和无雾图像进行分类,并提取有雾图像和无雾图像的傅里叶变换频率特征,有无雾图像支持向量机SVM分类器建立完成;
将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到有雾图像样本库;
Ⅲ实时图像分类
①红外摄像头采集实时图像;
②利用道路图像支持向量机SVM分类器分类,得到红外道路图像;
③对红外道路图像进行灰度色彩转换、收缩摄像机图像、高斯模糊去噪和直方图均衡化,得到处理后道路图像;
④利用有无雾图像高斯混合模型GMM分类器和有无雾图像支持向量机SVM分类器分别对处理后的道路图像进行有无雾分类,并将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到实时有雾道路图像;
IV制定置信度评价标准
置信度评价标准采用基于L2范数的相对错误评价标准,基于L2范数的相对错误评价标准是将得到的实时有雾道路图像与有雾图像样本库中有雾道路图像样本的对应像素值相减,并对所得的差值求平方和,然后再对结果求平方根;用得到的平方根值除以图像像素总数,得到平均误差值;取阈值为0.5,平均误差值小于0.5,则实时图像为有雾道路图像;
步骤二、建立图像去雾模型
①大气光学模型为I(x)=J(x)e-βd+A(1-e-βd),I(x)为分类后的有雾图像,J(x)为去雾之后的清晰图像,A为全球大气光成分,e-βd为大气透射率值t,β为大气消光系数,d为能见度值;
②取有雾道路图像在红绿蓝RGB三通道图像中的最小通道灰度图像,然后再对获取的灰度图像做最小值滤波,获得有雾图像暗通道:其中,Jdark是指J的暗通道,JC表示彩色图像的每个通道,C为RGB三通道;Ω为包含所有像素的整个图像窗口,为整个图像窗口所有像素中的最小值像素,为整个图像窗口每个像素RGB三个通道分量的最小像素值;
③从暗通道图像中按照亮度大小取前0.1%的像素,然后在原始有雾图中寻找对应的具有最高亮度的点的值,作为大气光的成分值A;
④处理大气光学模型,形式如下:
I(x)=J(x)e-βd+A(1-e-βd)
其中C为RGB三通道,对上式两端求暗通道即对上式两边求两次最小值运算,再利用暗通道灰度值接近零,因此,可推导出:
其中t为大气透射率值,由于雾的存在使人感到景深的存在,因此在中引入一个[0,1]之间的因子ω,获得大气透射率图,
⑤得到透射率图的边缘和纹理细节都有损失,采用中值滤波器对透射率图进行边缘保持的滤波器优化,获得细化透射率图;
⑥设置阈值t0,当t值小于t0时,令t=t0,以t0=0.1为标准,将处理后的三通道图像合成,恢复出去雾后的清晰图像J(x),
⑦将去雾前后同一内容的图像对比,以每一行灰度值连续下降间隔像素点数最多的边缘灰度变化率代表这一行的灰度变化率,获得出图像所有行灰度变化率的均值,该均值超过给定阈值,则再次进行图像去雾过程;该均值小于等于阈值,则完成清晰度评价,并将去雾后的清晰图像存入车载显示屏的缓存中;
⑧去雾后图像在车载显示屏上显示
按下车载显示屏上的视觉增强功能键,车载显示屏同步显示缓存中即时的去雾后的实时清晰图像;
步骤三、建立雾天能见度计算模型
大气能见度为平行光通过大气衰减到原始光通量的0.05时的距离,可推导出能见度值V
通过获得清晰图像过程中得到的大气消光系数β,获得能见度值V;
步骤四、构建雾天安全驾驶预警策略
在预警模块中根据实时处理的有雾道路能见度值,在预警模块中设定实时处理的有雾道路能见度等级;根据从车速传感器获取的行车车速,在预警模块中设定车速等级;在预警模块中设定毫米波雷达检测到的与前车间距等级;
能见度等级、车速等级、与前车间距等级符合安全的逻辑关系即能见度等级、车速等级、与前车间距等级均在同一等级,则不提供给驾驶员预警信息;能见度等级、车速等级、与前车间距等级不符合安全的逻辑关系即能见度等级、车速等级、与前车间距等级不在同一等级,则预警模块通过车载扬声器发出声音警告并在车载显示屏上显示警告信号。
步骤一中所述的N≥3000,N1≥1000,N2≥2000。
步骤一中所述的M≥3000,M1≥1000,M2≥2000。
通过上述设计方案,本发明可以带来如下有益效果:
1、本发明基于多传感器雾天行车视觉增强与能见度预警***及方法,构建了有无雾图像分类器、建立图像去雾模型、建立雾天能见度计算模型、实时计算能见度并且结合行驶车速和前方车辆距离进行预警。在实际行车过程中,采集车辆行进过程中的道路视频图像,根据离线训练的有雾图像分类库,实时判断图像是否有雾、实时图像去雾、实时计算能见度并且结合行驶车速和前方车辆距离进行预警,实现对雾天能见度进行视觉增强,减弱雾天能见度低对驾驶人视觉产生的影响。
2、本发明的模块内部、模块与模块之间信号处理时间短,能够满足实时性的要求。
3、本发明提高了雾天能见度计算的准确率,能够获得视觉增强效果,有益于推广应用,可大幅降低驾驶人在雾天低能见度条件下驾驶发生恶***通事故的概率。
附图说明
以下结合附图和具体实施方式对本发明作进一步的说明:
图1为本发明基于多传感器雾天行车视觉增强与能见度预警方法的流程框图。
图2为本发明基于多传感器雾天行车视觉增强与能见度预警方法中图像分类器的分类流程框图。
图3为本发明基于多传感器雾天行车视觉增强与能见度预警***的结构框图。
图中1-电源、2-变压插头、3-红外摄像头、4-毫米波雷达、5-车载电控单元模块、6-有无雾图像分类模块、7-图像去雾模块、8-能见度值计算模块、9-预警模块、10-车载显示屏、11-汽车音响设备、12-车载扬声器、13-车速传感器。
具体实施方式
如图所示,一种基于多传感器雾天行车视觉增强与能见度预警***,其特征在于:包括电源1、变压插头2、红外摄像头3、毫米波雷达4、车载电控单元模块5、车载显示屏10、汽车音响设备11、车载扬声器12、车速传感器13,所述电源1通过变压插头2与红外摄像头3连接,电源1通过导线与毫米波雷达4连接;
所述车载电控单元模块5包括有无雾图像分类模块6、图像去雾模块7、能见度值计算模块8和预警模块9;所述有无雾图像分类模块6的一端与红外摄像头3通过导线连接,有无雾图像分类模块6的另一端通过导线与图像去雾模块7连接;所述图像去雾模块7通过导线与能见度值计算模块8连接;所述能见度值计算模块8通过导线与预警模块9连接;
所述车载显示屏10通过导线与图像去雾模块7连接;所述汽车音响设备11的一端通过导线与预警模块9连接,汽车音响设备11的另一端通过导线与车载扬声器12连接;所述车速传感器13通过导线与预警模块9连接。
一种基于多传感器雾天行车视觉增强与能见度预警方法,其特征在于:
包括以下步骤
步骤一、建立有无雾道路图像分类器并进行实时图像分类
Ⅰ建立道路图像支持向量机SVM分类器
①红外摄像头3采集N张红外道路图像和红外非道路图像,并将采集到的图像传输到有无雾图像分类模块6,其中包括N1张(实施例中选1000张)红外道路图像和N2张(实施例中选2000张)红外非道路图像(如建筑、草地、天空等),N、N1、N2均为自然数,在有无雾图像分类模块6中建立道路图像分类器的图像训练库;
②通过道路图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据道路纹理获得道路图像特征,对道路图像和非道路图像分类,并获得红外道路图像特征,道路图像支持向量机SVM分类器建立完成;
Ⅱ建立有无雾图像分类器
①红外摄像头3采集M张不同雾浓度的红外有雾图像和红外无雾图像,其中包括M1张(实施例中选1000张)有雾红外图像和M2张(实施例中选2000张)无雾红外图像,M、M1、M2均为自然数,在有无雾图像分类模块6中建立有无雾图像分类器的图像训练库;
②通过有无雾图像分类器的图像训练库离线训练高斯混合模型GMM分类器,高斯混合模型GMM分类器根据有雾图像灰度值频率特征(有雾图像灰度值高的部分,其灰度直方图较密集),提取有雾图像和无雾图像的一维灰度直方图图像特征,并根据图像的直方图对有雾图像和无雾图像进行分类,有无雾图像高斯混合模型GMM分类器建立完成;
③通过有无雾图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据有雾图像和无雾图像的傅里叶变换频率特征,对有雾图像和无雾图像进行分类,并提取有雾图像和无雾图像的傅里叶变换频率特征,有无雾图像支持向量机SVM分类器建立完成;
将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到有雾图像样本库,减少数学方法计算局限性引起的误差,增大样本库容量;
Ⅲ实时图像分类
①红外摄像头3采集实时图像;
②利用道路图像支持向量机SVM分类器分类,得到红外道路图像;
③对红外道路图像进行灰度色彩转换、收缩摄像机图像、高斯模糊去噪和直方图均衡化,得到处理后道路图像;
④利用有无雾图像高斯混合模型GMM分类器和有无雾图像支持向量机SVM分类器分别对处理后的道路图像进行有无雾分类,并将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到实时有雾道路图像;
IV制定置信度评价标准
置信度评价标准采用基于L2范数的相对错误评价标准,基于L2范数的相对错误评价标准是将得到的实时有雾道路图像与有雾图像样本库中有雾道路图像样本的对应像素值相减,并对所得的差值求平方和,然后再对结果求平方根;用得到的平方根值除以图像像素总数,得到平均误差值;取阈值为0.5,平均误差值小于0.5,说明置信度高,结果可靠,可判断当时图像为有雾道路图像。
步骤二、建立图像去雾模型
①大气光学模型为I(x)=J(x)e-βd+A(1-e-βd),I(x)为分类后的有雾图像,J(x)为去雾之后的清晰图像,A为全球大气光成分,e-βd为大气透射率值t,β为大气消光系数,d为能见度值;
②取有雾道路图像在红绿蓝RGB三通道图像中的最小通道灰度图像,然后再对获取的灰度图像做最小值滤波,获得有雾图像暗通道:其中,Jdark是指J的暗通道,JC表示彩色图像的每个通道,C为RGB三通道;Ω为包含所有像素的整个图像窗口,为整个图像窗口所有像素中的最小值像素,为整个图像窗口每个像素RGB三个通道分量的最小像素值;
③从暗通道图像中按照亮度大小取前0.1%的像素,然后在原始有雾图中寻找对应的具有最高亮度的点的值,作为大气光的成分值A;
④估计大气透射率,将大气光学模型稍作处理,形式如下:
I(x)=J(x)e-βd+A(1-e-βd) (1)
其中C为RGB三通道,对其两端求暗通道(即对上式两边求两次最小值运算)如下:
利用暗通道灰度值接近零,因此,可推导出:
由于雾的存在使人感到景深的存在,因此在去雾时保留一定程度的雾,可以在式(5)中引入一个在[0,1]之间的因子ω,将式(5)修改为:
获得大气透射率图;
⑤得到透射率图的边缘和纹理细节都有损失,采用中值滤波器对透射率图进行边缘保持的滤波器优化,获得细化透射率图;
⑥当透射率t值很小时,会导致J的值偏大,从而使得图像整体向白场过渡,因此设置阈值t0,当t值小于t0时,令t=t0,经验值以t0=0.1为标准计算,将处理后的三通道图像合成,恢复出清晰图像J(x),
⑦图像清晰度评价,由于在图像去雾过程中,每一步均依赖前面步骤,这样会积累误差,因此需要对图像去雾后的清晰度进行评价。将去雾前后图像对比,对于同一内容的图像,去雾后图像的边缘相对去雾前图像具有较大的灰度变化率的特征。利用图像边缘灰度变化率为指标评价图像清晰度,即以每一行灰度值连续下降间隔像素点数最多的边缘灰度变化率代表这一行的灰度变化率,计算出图像所有行灰度变化率均值。判断是否达到去雾要求,若超过给定阈值,则再次进行图像去雾过程,如此反复直至满足阈值要求,完成清晰度评价,并将去雾后的清晰图像存入车载显示屏10的缓存中;
⑧去雾后图像在车载显示屏10上显示
按下车载显示屏10上的视觉增强功能键,车载显示屏10同步显示缓存中最新更新的去雾后的实时清晰图像;由于去雾过程不断进行,缓存不断更新,所以车载显示屏10不断显示最新去雾之后的视觉增强图像。
步骤三、建立雾天能见度计算模型
根据国际照明委员会(CIE)推荐:大气能见度一般表示为平行光通过大气衰减到原始光通量的0.05时的距离,利用公式(1),能见度推导为:
如上式所示,利用获得清晰图像过程中得到的大气消光系数β,得出能见度值。
步骤四、构建雾天安全驾驶预警策略
①根据国家公安部要求,机动车在能见度在200m~500m时,必须开启近光灯、示宽灯和尾灯,时速不得超过80km/h,与同一车道行驶的前车必须保持150m以上的行车间距;能见度在100m~200m时,必须开启雾灯、近光灯、示宽灯和尾灯,时速不得超过60km/h,与前车保持间距为100m以上;能见度在50m~100m时,要开启雾灯、近光灯、示宽灯和尾灯,时速不得超过40km/h,与前车的间距在50m以上。
②根据实时处理的有雾道路能见度值,将能见度分为五个等级,能见度大于500m为第一等级、能见度200m~500m为第二等级、能见度100m~200m为第三等级、能见度50m~100m为第四等级、能见度小于50m为第五等级;
③将从车速传感器13获取的行车车速分为三个等级,车速在60km/h~80km/h为第一等级,车速在40km/h~60km/h为第二等级,车速在小于40km/h为第三等级;
④利用Delphi ESR毫米波雷达4检测到前车间距,将其分为四个等级:与前车间距保持大于150m的为第一等级、与前车保持间距为100m~150m为第二等级、与前车的间距保持在50m~100m为第三等级、与前车的间距保持小于50m第四等级;
在预警模块9中根据实时处理的有雾道路能见度值,在预警模块9中设定实时处理的有雾道路能见度等级;根据从车速传感器13获取的行车车速,在预警模块9中设定车速等级;在预警模块9中设定毫米波雷达4检测到的与前车间距等级;
能见度等级、车速等级、与前车间距等级符合安全的逻辑关系即能见度等级、车速等级、与前车间距等级均在同一等级,则不提供给驾驶员预警信息;能见度等级、车速等级、与前车间距等级不符合安全的逻辑关系即能见度等级、车速等级、与前车间距等级不在同一等级,则预警模块9通过车载扬声器12发出声音警告并在车载显示屏10上显示警告信号。
步骤一中所述的N≥3000,N1≥1000,N2≥2000。
步骤一中所述的M≥3000,M1≥1000,M2≥2000。
下面给出本方法的一个具体实施例:
一种基于多传感器雾天行车视觉增强与能见度预警方法,其特征在于:
包括以下步骤
步骤一、建立有无雾道路图像分类器并进行实时图像分类
Ⅰ建立道路图像支持向量机SVM分类器
①利用红外摄像头3获得数据,由于只获得红外光,可得到高品质的的图像。拍摄允许在光线昏暗模糊环境下进行,允许拍摄图像与地面不平行、允许图像有轻微的扭曲。通过红外摄像头3采集1000张不同红外道路图像和2000张任意非道路图像(如建筑、草地、天空等),建立道路图像分类器的图像训练库;
②根据道路纹理分析特征,训练支持向量机SVM分类器,通过该离线训练过程,对道路图像和非道路图像分组,最终获得红外道路图像特征,通过获取的特征判定所采集图像是否为道路图像,道路图像支持向量机SVM分类器建立完成;
Ⅱ建立有无雾图像分类器
①红外摄像头3收集用于训练的预处理图像:通过红外摄像头3采集3000张不同红外道路图像,其中包括1000张有雾红外图像和2000张无雾红外图像,通过离线训练过程,建立道路有雾与非雾图像分类器的训练库;
②通过有无雾图像分类器的图像训练库离线训练高斯混合模型GMM分类器,高斯混合模型GMM分类器根据有雾图像灰度值频率特征(有雾图像灰度值高的部分,其灰度直方图较密集),提取有雾图像和无雾图像的一维灰度直方图图像特征,并根据图像的直方图对有雾图像和无雾图像进行分类,有无雾图像高斯混合模型GMM分类器建立完成;
③通过有无雾图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据有雾图像和无雾图像的傅里叶变换频率特征,对有雾图像和无雾图像进行分类,并提取有雾图像和无雾图像的傅里叶变换频率特征,有无雾图像支持向量机SVM分类器建立完成;
将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到有雾图像样本库,减少数学方法计算局限性引起的误差,增大样本库容量;
Ⅲ实时图像分类
①红外摄像头3采集实时图像;
②利用道路图像支持向量机SVM分类器分类,得到红外道路图像;
③对道路图像进行预处理:a、灰度色彩转换:直方图特征适用于灰度图像,需要将红外图像转化为灰度图。b、收缩摄像机图像:考虑处理图像实时性的要求(时间以毫秒为单位),缩小图像尺寸为320*240像素。c、由于摄像机或者其他环境噪声,利用5*5的高斯模糊去噪。d、直方图均衡化:以改善图像对比度和亮度;得到处理后道路图像
④利用有无雾图像高斯混合模型GMM分类器和有无雾图像支持向量机SVM分类器分别对处理后的道路图像进行有无雾分类,并将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到实时有雾道路图像;
IV制定置信度评价标准
置信度评价标准采用基于L2范数的相对错误评价标准,该标准是将得到的实时有雾道路图像与有雾图像样本库中有雾道路图像样本的对应像素值相减,并对所得的差值求平方和,然后再对结果求平方根;用得到的平方根值除以图像像素总数,得到平均误差值;取阈值为0.5,平均误差值小于0.5,说明置信度高,结果可靠,可判断当时图像为有雾道路图像。
步骤二、建立图像去雾模型
①大气光学模型为I(x)=J(x)e-βd+A(1-e-βd),I(x)为分类后的有雾图像,J(x)为去雾之后的清晰图像,A为全球大气光成分,e-βd为大气透射率值t,β为大气消光系数,d为能见度值;
②取有雾道路图像在红绿蓝RGB三通道图像中的最小通道灰度图像,然后再对获取的灰度图像做最小值滤波,获得有雾图像暗通道:其中,Jdark是指J的暗通道,JC表示彩色图像的每个通道,C为RGB三通道;Ω为包含所有像素的整个图像窗口,为整个图像窗口所有像素中的最小值像素,为整个图像窗口每个像素RGB三个通道分量的最小像素值;
③从暗通道图像中按照亮度大小取前0.1%的像素,然后在原始有雾图中寻找对应的具有最高亮度的点的值,作为大气光的成分值A;
④估计大气透射率,将大气光学模型稍作处理,形式如下:
I(x)=J(x)e-βd+A(1-e-βd) (1)
其中C为RGB三通道,对其两端求暗通道(即对上式两边求两次最小值运算)如下:
利用暗通道灰度值接近零,因此,可推导出:
由于雾的存在使人感到景深的存在,因此在去雾时保留一定程度的雾,可以在式(5)中引入一个在[0,1]之间的因子ω,将式(5)修改为:
获得大气透射率图;
⑤得到透射率图的边缘和纹理细节都有损失,采用中值滤波器对透射率图进行边缘保持的滤波器优化,获得细化透射率图;
⑥当透射率t值很小时,会导致J的值偏大,从而使得图像整体向白场过渡,因此设置阈值t0,当t值小于t0时,令t=t0,经验值以t0=0.1为标准计算,将处理后的三通道图像合成,恢复出清晰图像J(x),
⑦图像清晰度评价,由于在图像去雾过程中,每一步均依赖前面步骤,这样会积累误差,因此需要对图像去雾后的清晰度进行评价。将去雾前后图像对比,对于同一内容的图像,去雾后图像的边缘相对去雾前图像具有较大的灰度变化率的特征。利用图像边缘灰度变化率为指标评价图像清晰度,即以每一行灰度值连续下降间隔像素点数最多的边缘灰度变化率代表这一行的灰度变化率,计算出图像所有行灰度变化率均值。判断是否达到去雾要求,若超过给定阈值,则再次进行图像去雾过程,如此反复直至满足阈值要求,完成清晰度评价,并将去雾后的清晰图像存入车载显示屏10的缓存中;
⑧去雾后图像在车载显示屏10上显示
按下车载显示屏10上的视觉增强功能键,车载显示屏10同步显示缓存中即时的去雾后的实时清晰图像;由于去雾过程不断进行,缓存不断更新,所以车载显示屏10不断显示最新去雾之后的视觉增强图像。该图像流最后或者用户按quit键就会停止,用户还可随时按D键来重置跟踪选项,驾驶人通过选择可以在车载显示屏10上获取处理后的车辆前方道路环境,达到视觉增强的效果。
步骤三、建立雾天能见度计算模型
根据国际照明委员会(CIE)推荐:大气能见度一般表示为平行光通过大气衰减到原始光通量的0.05时的距离,利用公式(1),能见度推导为:
如上式所示,利用获得清晰图像过程中得到的大气消光系数β,得出能见度值。
步骤四、构建雾天安全驾驶预警策略
①根据国家公安部要求,机动车在能见度在200m~500m时,必须开启近光灯、示宽灯和尾灯,时速不得超过80km/h,与同一车道行驶的前车必须保持150m以上的行车间距;能见度在100m~200m时,必须开启雾灯、近光灯、示宽灯和尾灯,时速不得超过60km/h,与前车保持间距为100m以上;能见度在50m~100m时,要开启雾灯、近光灯、示宽灯和尾灯,时速不得超过40km/h,与前车的间距在50m以上。
②通过估算的大气透射率估算能见度,由于去雾过程多次迭代计算才能得到满足条件的清晰图像,所以选取每一个去雾工作周期起始计算的大气光成分系数来计算能见度;
③根据实时处理的有雾道路能见度值,将能见度分为五个等级,能见度大于500m为第一等级、能见度200m~500m为第二等级、能见度100m~200m为第三等级、能见度50m~100m为第四等级、能见度小于50m为第五等级;一般认为正常行驶能见度在500m以上为安全值,不需要警告;当能见度低于50m时发出大雾预警,提醒驾驶员不适宜驾车;
④将从车速传感器(13)获取的行车车速分为三个等级:车速在60km/h~80km/h为第一等级,车速在40km/h~60km/h为第二等级,车速在小于40km/h为第三等级;
⑤利用Delphi ESR毫米波雷达4检测到前车间距,将其分为四个等级:与前车间距保持大于150m的为第一等级、与前车保持间距为100m~150m为第二等级、与前车的间距保持在50m~100m为第三等级、与前车的间距保持小于50m第四等级;
⑥在预警模块9中根据实时处理的有雾道路能见度值,在预警模块9中设定实时处理的有雾道路能见度等级;根据从车速传感器13获取的行车车速,在预警模块9中设定车速等级;在预警模块9中设定毫米波雷达4检测到的与前车间距等级;
如果能见度等级、车速等级、与前车间距等级符合安全的逻辑关系(即能见度等级、车速等级、与前车间距等级均在同一等级),不提供给驾驶员预警信息,如果能见度等级、车速等级、与前车间距等级不满足安全的逻辑关系(即能见度等级、车速等级、与前车间距等级存在不在同一等级),则预警模块9通过车载扬声器12发出声音警告并在车载显示屏10上显示警告信号。
以上具体实施范例中,采集不同道路图像的张数为3000张,其中包括1000张不同红外道路图像和2000张任意非道路图像(包括建筑、草地、天空等),但本发明对道路图像采集张数的范围不限于本实施例,基于公知常识,前期数据采集量越大,后期数据处理的准确度越高,故本实施例中只给出端值,即最小值的范例;同理,本具体实施范例中采集不同雾天浓度道路图像的张数为3000张,其中包括1000张有雾图像和2000张无雾图像,在具体实施例中也只给出端值,即最小值的范例。
Claims (4)
1.一种基于多传感器雾天行车视觉增强与能见度预警***,其特征在于:包括电源(1)、变压插头(2)、红外摄像头(3)、毫米波雷达(4)、车载电控单元模块(5)、车载显示屏(10)、汽车音响设备(11)、车载扬声器(12)、车速传感器(13),所述电源(1)通过变压插头(2)与红外摄像头(3)连接,电源(1)通过导线与毫米波雷达(4)连接;
所述车载电控单元模块(5)包括有无雾图像分类模块(6)、图像去雾模块(7)、能见度值计算模块(8)和预警模块(9);所述有无雾图像分类模块(6)的一端与红外摄像头(3)通过导线连接,有无雾图像分类模块(6)的另一端通过导线与图像去雾模块(7)连接;所述图像去雾模块(7)通过导线与能见度值计算模块(8)连接;所述能见度值计算模块(8)通过导线与预警模块(9)连接;
所述车载显示屏(10)通过导线与图像去雾模块(7)连接;所述汽车音响设备(11)的一端通过导线与预警模块(9)连接,汽车音响设备(11)的另一端通过导线与车载扬声器(12)连接;所述车速传感器(13)通过导线与预警模块(9)连接。
2.一种基于多传感器雾天行车视觉增强与能见度预警方法,其特征在于:
包括以下步骤
步骤一、建立有无雾道路图像分类器并进行实时图像分类
Ⅰ建立道路图像支持向量机SVM分类器
①红外摄像头(3)采集N张红外道路图像和红外非道路图像,并将采集到的图像传输到有无雾图像分类模块(6),其中包括N1张红外道路图像和N2张红外非道路图像,N、N1、N2均为自然数,在有无雾图像分类模块(6)中建立道路图像分类器的图像训练库;
②通过道路图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据道路纹理获得道路图像特征,对道路图像和非道路图像分类,并获得红外道路图像特征,道路图像支持向量机SVM分类器建立完成;
Ⅱ建立有无雾图像分类器
①红外摄像头(3)采集M张不同雾浓度的红外有雾图像和红外无雾图像,其中包括M1张有雾红外图像和M2张无雾红外图像,M、M1、M2均为自然数,在有无雾图像分类模块(6)中建立有无雾图像分类器的图像训练库;
②通过有无雾图像分类器的图像训练库离线训练高斯混合模型GMM分类器,高斯混合模型GMM分类器根据有雾图像灰度值频率特征,提取有雾图像和无雾图像的一维灰度直方图图像特征,并根据图像的直方图对有雾图像和无雾图像进行分类,有无雾图像高斯混合模型GMM分类器建立完成;
③通过有无雾图像分类器的图像训练库离线训练支持向量机SVM分类器,支持向量机SVM分类器根据有雾图像和无雾图像的傅里叶变换频率特征,对有雾图像和无雾图像进行分类,并提取有雾图像和无雾图像的傅里叶变换频率特征,有无雾图像支持向量机SVM分类器建立完成;
将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到有雾图像样本库;
Ⅲ实时图像分类
①红外摄像头(3)采集实时图像;
②利用道路图像支持向量机SVM分类器分类,得到红外道路图像;
③对红外道路图像进行灰度色彩转换、收缩摄像机图像、高斯模糊去噪和直方图均衡化,得到处理后道路图像;
④利用有无雾图像高斯混合模型GMM分类器和有无雾图像支持向量机SVM分类器分别对处理后的道路图像进行有无雾分类,并将有无雾图像高斯混合模型GMM分类器分类出的有雾图像和有无雾图像支持向量机SVM分类器分类出的有雾图像取并集,得到实时有雾道路图像;
IV制定置信度评价标准
置信度评价标准采用基于L2范数的相对错误评价标准,基于L2范数的相对错误评价标准是将得到的实时有雾道路图像与有雾图像样本库中有雾道路图像样本的对应像素值相减,并对所得的差值求平方和,然后再对结果求平方根;用得到的平方根值除以图像像素总数,得到平均误差值;取阈值为0.5,平均误差值小于0.5,则实时图像为有雾道路图像;
步骤二、建立图像去雾模型
①大气光学模型为I(x)=J(x)e-βd+A(1-e-βd),I(x)为分类后的有雾图像,J(x)为去雾之后的清晰图像,A为全球大气光成分,e-βd为大气透射率值t,β为大气消光系数,d为能见度值;
②取有雾道路图像在红绿蓝RGB三通道图像中的最小通道灰度图像,然后再对获取的灰度图像做最小值滤波,获得有雾图像暗通道:其中,Jdark是指J的暗通道,JC表示彩色图像的每个通道,C为RGB三通道;Ω为包含所有像素的整个图像窗口,为整个图像窗口所有像素中的最小值像素,为整个图像窗口每个像素RGB三个通道分量的最小像素值;
③从暗通道图像中按照亮度大小取前0.1%的像素,然后在原始有雾图中寻找对应的具有最高亮度的点的值,作为大气光的成分值A;
④处理大气光学模型,形式如下:
I(x)=J(x)e-βd+A(1-e-βd)
其中C为RGB三通道,对上式两端求暗通道即对上式两边求两次最小值运算,再利用暗通道灰度值接近零,因此,可推导出:
其中t为大气透射率值,由于雾的存在使人感到景深的存在,因此在中引入一个[0,1]之间的因子ω,获得大气透射率图,
⑤得到透射率图的边缘和纹理细节都有损失,采用中值滤波器对透射率图进行边缘保持的滤波器优化,获得细化透射率图;
⑥设置阈值t0,当t值小于t0时,令t=t0,以t0=0.1为标准,将处理后的三通道图像合成,恢复出去雾后的清晰图像J(x),
⑦将去雾前后同一内容的图像对比,以每一行灰度值连续下降间隔像素点数最多的边缘灰度变化率代表这一行的灰度变化率,获得出图像所有行灰度变化率的均值,该均值超过给定阈值,则再次进行图像去雾过程;该均值小于等于阈值,则完成清晰度评价,并将去雾后的清晰图像存入车载显示屏(10)的缓存中;
⑧去雾后图像在车载显示屏(10)上显示
按下车载显示屏(10)上的视觉增强功能键,车载显示屏(10)同步显示缓存中即时的去雾后的实时清晰图像;
步骤三、建立雾天能见度计算模型
大气能见度为平行光通过大气衰减到原始光通量的0.05时的距离,可推导出能见度值V
通过获得清晰图像过程中得到的大气消光系数β,获得能见度值V;
步骤四、构建雾天安全驾驶预警策略
在预警模块(9)中根据实时处理的有雾道路能见度值,在预警模块(9)中设定实时处理的有雾道路能见度等级;根据从车速传感器(13)获取的行车车速,在预警模块(9)中设定车速等级;在预警模块(9)中设定毫米波雷达(4)检测到的与前车间距等级;
能见度等级、车速等级、与前车间距等级符合安全的逻辑关系即能见度等级、车速等级、与前车间距等级均在同一等级,则不提供给驾驶员预警信息;能见度等级、车速等级、与前车间距等级不符合安全的逻辑关系即能见度等级、车速等级、与前车间距等级不在同一等级,则预警模块(9)通过车载扬声器(12)发出声音警告并在车载显示屏(10)上显示警告信号。
3.根据权利要求2所述的一种基于多传感器雾天行车视觉增强与能见度预警方法,其特征是:步骤一中所述的N≥3000,N1≥1000,N2≥2000。
4.根据权利要求2所述的一种基于多传感器雾天行车视觉增强与能见度预警方法,其特征是:步骤一中所述的M≥3000,M1≥1000,M2≥2000。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510866567.1A CN105512623B (zh) | 2015-12-02 | 2015-12-02 | 基于多传感器雾天行车视觉增强与能见度预警***及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510866567.1A CN105512623B (zh) | 2015-12-02 | 2015-12-02 | 基于多传感器雾天行车视觉增强与能见度预警***及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105512623A CN105512623A (zh) | 2016-04-20 |
CN105512623B true CN105512623B (zh) | 2018-09-14 |
Family
ID=55720590
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510866567.1A Expired - Fee Related CN105512623B (zh) | 2015-12-02 | 2015-12-02 | 基于多传感器雾天行车视觉增强与能见度预警***及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105512623B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021105604A1 (fr) * | 2019-11-29 | 2021-06-03 | Universite Gustave Eiffel | Procédé et dispositif de traitement d'images |
Families Citing this family (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105857180B (zh) * | 2016-05-09 | 2018-06-01 | 广西大学 | 雾霾天车辆驾驶辅助***及其方法 |
CN106548211A (zh) * | 2016-11-08 | 2017-03-29 | 中国科学院自动化研究所 | 基于红外图像的变电站测温点自动识别方法和装置 |
CN106828348A (zh) * | 2017-03-31 | 2017-06-13 | 华东交通大学 | 一种车辆底盘智能保护*** |
CN107248245B (zh) * | 2017-06-06 | 2019-05-24 | 余姚市菲特塑料有限公司 | 警灯闪烁强度控制平台 |
CN107396038A (zh) | 2017-06-06 | 2017-11-24 | 余姚德诚科技咨询有限公司 | 自适应led警灯控制*** |
CN107505291B (zh) * | 2017-07-05 | 2020-03-27 | 中南大学 | 一种通过单幅图像估计能见度的方法 |
CN107277369B (zh) * | 2017-07-27 | 2019-08-16 | Oppo广东移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和计算机设备 |
CN107277370B (zh) * | 2017-07-27 | 2020-03-27 | Oppo广东移动通信有限公司 | 对焦方法、装置、计算机可读存储介质和移动终端 |
CN107680064A (zh) * | 2017-10-31 | 2018-02-09 | 长沙准光里电子科技有限公司 | 计算机可读存储介质 |
CN107767353A (zh) * | 2017-12-04 | 2018-03-06 | 河南工业大学 | 一种基于清晰度评价的自适应图像去雾方法 |
CN108572648B (zh) * | 2018-04-24 | 2020-08-25 | 中南大学 | 一种无人驾驶车辆电源多源融合预测方法及*** |
CN108896062B (zh) * | 2018-05-11 | 2021-09-28 | 长安大学 | 一种利用电子地图实时提醒团雾路段的装置及方法 |
CN109255804A (zh) * | 2018-08-10 | 2019-01-22 | 重庆大数据研究院有限公司 | 一种雾霾浓度估计方法 |
CN109377726B (zh) * | 2018-10-29 | 2020-07-31 | 江苏大学 | 一种基于车联网的高速公路团雾精确警示、诱导***及方法 |
CN109584176B (zh) * | 2018-11-23 | 2021-07-23 | 东南大学 | 机动车驾驶视觉增强*** |
CN109360433B (zh) * | 2018-11-30 | 2020-11-13 | 山东交通学院 | 适用于雾天的道路预警***及方法 |
CN109591764A (zh) * | 2018-12-29 | 2019-04-09 | 江西与德电子技术有限公司 | 一种车窗自动除雾方法、装置、车载监控设备和存储介质 |
CN109741322A (zh) * | 2019-01-08 | 2019-05-10 | 南京蓝绿物联科技有限公司 | 一种基于机器学习的能见度测量方法 |
CN110321855A (zh) * | 2019-07-07 | 2019-10-11 | 徐梓恒 | 一种雾天检测预警装置 |
CN110705619B (zh) * | 2019-09-25 | 2023-06-06 | 南方电网科学研究院有限责任公司 | 雾浓度等级判别方法及装置 |
CN112769877A (zh) * | 2019-10-21 | 2021-05-07 | 比亚迪股份有限公司 | 团雾预警方法、云端服务器及车辆和介质 |
CN110849807B (zh) * | 2019-11-22 | 2023-11-24 | 山东交通学院 | 一种基于深度学习的适用于道路能见度的监测方法与*** |
CN111192275A (zh) * | 2019-12-30 | 2020-05-22 | 西安金路交通工程科技发展有限责任公司 | 基于暗通道先验理论的高速公路团雾能见度识别方法 |
CN111259957A (zh) * | 2020-01-15 | 2020-06-09 | 上海眼控科技股份有限公司 | 基于深度学习的能见度监测和模型训练方法、装置、终端及介质 |
CN111301410B (zh) * | 2020-02-24 | 2022-01-28 | 新石器慧通(北京)科技有限公司 | 自动驾驶车辆及其车速调节方法 |
CN112070103B (zh) * | 2020-04-26 | 2021-04-30 | 河海大学 | 通过微波链路网格化自适应可变尺度反演大气能见度的方法 |
CN112330558A (zh) * | 2020-11-05 | 2021-02-05 | 山东交通学院 | 基于雾天环境感知的道路图像恢复预警***及方法 |
CN112287861A (zh) * | 2020-11-05 | 2021-01-29 | 山东交通学院 | 基于夜间环境感知的道路信息增强与驾驶预警方法 |
CN112330559B (zh) * | 2020-11-05 | 2022-03-04 | 山东交通学院 | 恶劣雾天道路图像信息恢复及车道保持预警方法 |
CN112329623A (zh) * | 2020-11-05 | 2021-02-05 | 山东交通学院 | 雾天能见度检测与能见度安全等级划分预警方法 |
CN112329622A (zh) * | 2020-11-05 | 2021-02-05 | 山东交通学院 | 夜间能见度检测与能见度等级划分预警方法 |
CN113276771B (zh) * | 2021-06-24 | 2023-08-08 | 广州通达汽车电气股份有限公司 | 一种基于行驶环境的后视视野调节方法及装置 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002236174A (ja) * | 2001-02-07 | 2002-08-23 | Mitsubishi Electric Corp | 霧観測装置及び霧観測方法 |
EP1790541A2 (en) * | 2005-11-23 | 2007-05-30 | MobilEye Technologies, Ltd. | Systems and methods for detecting obstructions in a camera field of view |
CN104217215A (zh) * | 2014-08-28 | 2014-12-17 | 哈尔滨工程大学 | 一种水面有雾图像和清晰图像的分类识别方法 |
CN104299192A (zh) * | 2014-09-28 | 2015-01-21 | 北京联合大学 | 一种基于大气光散射物理模型的单幅图像去雾方法 |
CN104408757A (zh) * | 2014-11-07 | 2015-03-11 | 吉林大学 | 一种向驾驶场景视频中添加雾霾效果的方法及*** |
CN104715239A (zh) * | 2015-03-12 | 2015-06-17 | 哈尔滨工程大学 | 一种基于去雾处理和权重分块的车辆颜色识别方法 |
CN104766286A (zh) * | 2015-04-30 | 2015-07-08 | 河海大学常州校区 | 基于无人驾驶汽车的图像去雾装置及去雾方法 |
CN104809707A (zh) * | 2015-04-28 | 2015-07-29 | 西南科技大学 | 一种单幅雾天图像能见度估计方法 |
CN104933680A (zh) * | 2015-03-13 | 2015-09-23 | 哈尔滨工程大学 | 一种智能的无人艇视觉***视频快速海雾去除方法 |
-
2015
- 2015-12-02 CN CN201510866567.1A patent/CN105512623B/zh not_active Expired - Fee Related
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002236174A (ja) * | 2001-02-07 | 2002-08-23 | Mitsubishi Electric Corp | 霧観測装置及び霧観測方法 |
EP1790541A2 (en) * | 2005-11-23 | 2007-05-30 | MobilEye Technologies, Ltd. | Systems and methods for detecting obstructions in a camera field of view |
CN104217215A (zh) * | 2014-08-28 | 2014-12-17 | 哈尔滨工程大学 | 一种水面有雾图像和清晰图像的分类识别方法 |
CN104299192A (zh) * | 2014-09-28 | 2015-01-21 | 北京联合大学 | 一种基于大气光散射物理模型的单幅图像去雾方法 |
CN104408757A (zh) * | 2014-11-07 | 2015-03-11 | 吉林大学 | 一种向驾驶场景视频中添加雾霾效果的方法及*** |
CN104715239A (zh) * | 2015-03-12 | 2015-06-17 | 哈尔滨工程大学 | 一种基于去雾处理和权重分块的车辆颜色识别方法 |
CN104933680A (zh) * | 2015-03-13 | 2015-09-23 | 哈尔滨工程大学 | 一种智能的无人艇视觉***视频快速海雾去除方法 |
CN104809707A (zh) * | 2015-04-28 | 2015-07-29 | 西南科技大学 | 一种单幅雾天图像能见度估计方法 |
CN104766286A (zh) * | 2015-04-30 | 2015-07-08 | 河海大学常州校区 | 基于无人驾驶汽车的图像去雾装置及去雾方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021105604A1 (fr) * | 2019-11-29 | 2021-06-03 | Universite Gustave Eiffel | Procédé et dispositif de traitement d'images |
FR3103940A1 (fr) * | 2019-11-29 | 2021-06-04 | Institut Français Des Sciences Et Technologies Des Transports, De L'amenagement Et Des Reseaux | Procédé et dispositif de traitement d’images |
Also Published As
Publication number | Publication date |
---|---|
CN105512623A (zh) | 2016-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105512623B (zh) | 基于多传感器雾天行车视觉增强与能见度预警***及方法 | |
CN104011737B (zh) | 用于探测雾的方法 | |
CN110992683B (zh) | 一种基于动态图像感知的交叉口盲区预警方法及*** | |
CN106919915B (zh) | 基于adas***的地图道路标记及道路质量采集装置及方法 | |
CN107031623B (zh) | 一种基于车载盲区相机的道路预警方法 | |
CN105711597B (zh) | 前方局部行驶环境感知***及方法 | |
CN105844257B (zh) | 基于机器视觉雾天行车错失道路标志牌的预警***及方法 | |
CN110415544B (zh) | 一种灾害天气预警方法及汽车ar-hud*** | |
EP3367361A1 (en) | Method, device and system for processing startup of front vehicle | |
CN105574552A (zh) | 一种基于单目视觉的车辆测距与碰撞预警方法 | |
CN112329623A (zh) | 雾天能见度检测与能见度安全等级划分预警方法 | |
CN105930787A (zh) | 车辆开门预警方法 | |
CN112215306A (zh) | 一种基于单目视觉与毫米波雷达融合的目标检测方法 | |
CN110837800A (zh) | 一种面向港口恶劣天气的目标检测和识别的方法 | |
WO2023155483A1 (zh) | 一种车型识别方法、装置和*** | |
Park et al. | Real-time signal light detection | |
Jiang et al. | Target detection algorithm based on MMW radar and camera fusion | |
CN111144301A (zh) | 一种基于深度学习的道路路面缺陷快速预警装置 | |
CN112001208A (zh) | 用于车辆盲区的目标检测方法、装置和电子设备 | |
CN109919062A (zh) | 一种基于特征量融合的道路场景天气识别方法 | |
Vaibhav et al. | Real-time fog visibility range estimation for autonomous driving applications | |
CN116142186A (zh) | 不良环境下车辆安全行驶预警方法、装置、介质和设备 | |
CN109191492A (zh) | 一种基于轮廓分析的智能视频黑烟车检测方法 | |
CN110472508A (zh) | 基于深度学习和双目视觉的车道线测距方法 | |
CN108256418A (zh) | 一种基于红外成像的行人预警方法及*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180914 Termination date: 20211202 |
|
CF01 | Termination of patent right due to non-payment of annual fee |