CN106960425A - 基于多尺度去卷积滤波的单帧去雾方法 - Google Patents
基于多尺度去卷积滤波的单帧去雾方法 Download PDFInfo
- Publication number
- CN106960425A CN106960425A CN201710216437.2A CN201710216437A CN106960425A CN 106960425 A CN106960425 A CN 106960425A CN 201710216437 A CN201710216437 A CN 201710216437A CN 106960425 A CN106960425 A CN 106960425A
- Authority
- CN
- China
- Prior art keywords
- image
- filtering
- transmitance
- deconvoluting
- defogging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001914 filtration Methods 0.000 title claims abstract description 68
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000004927 fusion Effects 0.000 claims abstract description 7
- 230000015556 catabolic process Effects 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 claims description 4
- 238000009825 accumulation Methods 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 claims description 2
- 238000011084 recovery Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 5
- 239000003595 mist Substances 0.000 description 4
- 238000002834 transmittance Methods 0.000 description 4
- 230000002708 enhancing effect Effects 0.000 description 3
- 230000002146 bilateral effect Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003707 image sharpening Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012876 topography Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种基于多尺度去卷积滤波的单帧去雾方法,其通过最小值滤波的方法和去卷积滤波的方法,分别得到粗糙透过率图像和精细透过率图像,再对粗糙透过率图像和精细透过率图像做多尺度融合得到最终的最小值滤波透过率图像和去卷积滤波透过率图像,然后根据大气物理模型进行图像去雾计算可以恢复退化的输入图像;通过最小值滤波得到粗糙图像,通过去卷积滤波得到精细图像;本发明提高恢复的图像细节表现和对比度。
Description
技术领域
本发明涉及一种提高图像画质的方法,特别是涉及一种基于多尺度去卷积滤波的单帧去雾方法。
背景技术
雾会使大气的能见度降低,景物图像发生退化,内容模糊,对比度下降,画质降低。
为了保证监控,照相和摄像等视觉设备能够适应全天候正常工作的需要,对图像传感器采
集的退化图像做去雾处理,提高对比度,增强边沿细节信息,获得尽量接近无雾条件下的画
质。
常见的图像去雾处理的方法主要有两种,图像增强方法和大气退化物理模型方
法。图像增强方法又分为图像颜色增强和图像对比度增强,主要是通过图像亮度曲线调节,
图像亮度线性拉伸,直方图均衡化,和频率域图像锐化算法等方法处理退化图像,增强图像
对比度;但这类方法没有考虑雾天大气对图像的影响,去雾效果不是非常理想。
基于大气退化物理模型的方法利用输入原始图像求得大气透过率图,再使用大气
物理模型对输入退化图像做恢复;这种方法利用全图最暗的点来去除全局均匀的雾,利用
Dark Object Subtraction(黑区对象抽取)处理局部图像的雾,不需要用到对比度,效果非
常好。
基于大气物理模型做去雾处理,透过率图像画质对最后恢复图像的图像质量很关
键,实现的方法也很多:导图滤波法,最小滤波法,双边滤波法,最小二乘滤波法;各种方法
目的都是为了得到对比度高和细节丰富的透过率图像。
发明内容
本发明所要解决的技术问题是提供一种基于多尺度去卷积滤波的单帧去雾方法,其通过最小值滤波得到粗糙图像,通过去卷积滤波得到精细图像,强恢复图像的细节表现和对比度,提高图像的画质。
本发明是通过下述技术方案来解决上述技术问题的:一一种基于多尺度去卷积滤波的单帧去雾方法,其特征在于,其通过最小值滤波的方法和去卷积滤波的方法,分别得到粗糙透过率图像和精细透过率图像,再对粗糙透过率图像和精细透过率图像做多尺度融合得到最终的最小值滤波透过率图像和去卷积滤波透过率图像,然后根据大气物理模型进行图像去雾计算恢复退化的输入图像。
优选地,所述最小值滤波的方法包括以下计算过程:求出每个像素RGB分量中的最小值,存入一副和原始图像大小相同的灰度图中;对这幅灰度图进行最小值滤波。
优选地,所述去卷积滤波的方法在计算机视觉图像处理中,通过图像滤波,把原有图像分解为精细级别不同的多个图像,每个级别的图像会保留不同程度细节的信息。
优选地,所述图像去雾计算将粗糙透过率图和精细透过率图两者累加计算得到最终的透过率图。
本发明的积极进步效果在于:通过最小值滤波得到粗糙图像,通过去卷积滤波得到精细图像;提高恢复的图像细节表现和对比度。
附图说明
图1为基于多尺度去卷积滤波的单帧去雾方法的流程示意图。
图2为去卷积滤波的方法处理后的图像的示意图。
图3为最小二乘滤波的方法处理后的图像的示意图。
图4是有雾图像的经过多尺度去卷积滤波处理后的结果示意图。
图5为只做最小滤波的结果示意图。
具体实施方式
下面结合附图给出本发明较佳实施例,以详细说明本发明的技术方案。
如图1所示,本发明基于多尺度去卷积滤波的单帧去雾方法通过最小值滤波的方法和去卷积滤波的方法,分别得到粗糙透过率图像和精细透过率图像,再对粗糙透过率图像和精细透过率图像做多尺度融合得到最终的最小值滤波透过率图像和去卷积滤波透过率图像,然后根据大气物理模型进行图像去雾计算可以恢复退化的输入图像。
一、大气物理模型
在计算机视觉和计算机图形中,下述方程所描述的雾图形成模型被广泛使用,如下式(1):
……(1)
其中,I(X)是输入的退化图像,J(x)是要恢复的无雾的图像,A是全球大气光成分, t(x)为透射率。进一步推导得出恢复图像,如下式(2):
……(2)
有公式(2),现在已有I(X),要求目标值J(x),需要得到t(x), A。
在发明中,大气透过率图像通过多尺度融合求得,多尺度透过率图像分别是最小值滤波得到的粗糙图像和去卷积滤波得到的精细图像。
二、最小值滤波的方法
在绝大多数非天空的局部区域里,某一些像素总会有至少一个颜色通道具有很低的值;换言之,该区域光强度的最小值是个很小的数;给暗通道一个数学定义,对于任意的输入图像J,其暗通道可以用下式表达,如下式(3):
……(3)
式(1)中,Jc表示彩色图像的每个通道,μ(x)表示以像素X为中心的一个窗口;
最小值滤波的方法包括以下计算过程:求出每个像素RGB分量中的最小值,存入一副和原始图像大小相同的灰度图中;对这幅灰度图进行最小值滤波,滤波的半径由窗口大小决定,一般有WindowSize = 2*Radius + 1,Radius是滤波窗口的半径;
实际生活中造成暗原色中低通道值主要有三个因素:汽车、建筑物和城市中玻璃窗户的阴影,或者是自然景观的投影;色彩鲜艳的物体或表面在RGB的三个通道中,有些通道的值很低;颜色较暗的物体或者表面。总之,自然景物中到处都是阴影或者彩色,这些景物的图像的暗原色总是很灰暗的;
采用最小值滤波的方法的透过率图像粗糙,原有图像中的很多细节信息都丢失了;这也导致最后恢复出的图像在一些局部去雾效果不理想。
三、去卷积滤波的方法
在计算机视觉图像处理中,通过图像滤波把原有图像分解为精细级别不同的多个图像,每个级别的图像会保留不同程度细节的信息。与图像分解方法相近,去雾处理也可以采用粗糙图像和精细图像融合的方法。精细图像的获得方法有很多,比较常用的有:低通滤波,双边滤波,最小二乘滤波等。滤波的目的是为了获得保留有丰富细节信息和对比度好的透过率图像。本发明采用去卷积滤波得到精细透过率图像,如图2所示,对比采用最小二乘,图3的效果,在细节表现和对比度上去卷积滤波的效果都所有增强。
去卷积滤波的方法包括以下过程:对输入有雾图像做高斯模糊:Jgaussian = I *g。其中,I是输入暗通道RGB有雾图像,g是高斯模糊函数。
对得到的模糊图像做去卷积处理:Jdeconvolve = Devolve(Jgaussian, g),
得到精细透过率图像:Jdeconvolve = I - Bdeconvolve。
去卷积处理公式如下式(4):
……(4)
其中,λ是调整权重,P是与b相关的调整函数;b是滤波得到的图像。
四、图像去雾计算
图像去雾计算将粗糙透过率图和精细透过率图两者累加计算得到最终的透过率图,公式如下式(5):
……(5)
其中,Weight(i)表示每个尺度对应的权重,各尺度权重之和必须为1,常用采用等权重取值;对数Log[R(x,y)]的计算可以通过对每一个值做线性量化求得,公式如下式(6):
……(6)
其中,Max是Log[R(x,y)]的最大值,Min是Log[R(x,y)]的最小值;
用公式(2)运算,当投射图t的值很小时,会导致J的值偏大,从而使淂图像整体向白场过度;一般可设置一阈值T0,当t(x)的值小于T0时,令t(x)=T0。恢复公式(2)恢复改进如下式(7):
……(7)
公式(1)、(2)和(7)中,都假设了全球大气光A值时已知的,实际做有雾图像恢复时,可以借助于暗通道图来从有雾图像中获取该值,如以下具体步骤:从暗通道图中按照亮度的大小取前0.1%的像素;对应这些位置,在原始有雾图像I中寻找对应的具有最高亮度的点的值,作为A值。
图4是有雾图像的经过多尺度去卷积滤波处理后的结果,对比图5只做最小滤波的结果,恢复图像在对比度,细节表现上都有明显的增强。
大气透过率图像的质量对最后恢复图像的画质影响非常关键,本发明通过最小值滤波的方法和去卷积滤波的方法,分别得到粗糙的透过率图像和细节丰富的透过率图像,再对粗糙图像和精细图像做多尺度融合得到最终的透过率图像,然后根据大气物理模型可以恢复退化的输入图像。本发明的优点:基于多尺度融合获得大气透过率图像,通过最小值滤波得到粗糙图像,通过去卷积滤波得到精细图像;提高恢复的图像细节表现和对比度。
以上所述的具体实施例,对本发明的解决的技术问题、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (4)
1.一种基于多尺度去卷积滤波的单帧去雾方法,其特征在于,其通过最小值滤波的方法和去卷积滤波的方法,分别得到粗糙透过率图像和精细透过率图像,再对粗糙透过率图像和精细透过率图像做多尺度融合得到最终的最小值滤波透过率图像和去卷积滤波透过率图像,然后根据大气物理模型进行图像去雾计算恢复退化的输入图像。
2.如权利要求1所述的基于多尺度去卷积滤波的单帧去雾方法,其特征在于,所述最小值滤波的方法包括以下计算过程:求出每个像素RGB分量中的最小值,存入一副和原始图像大小相同的灰度图中;对这幅灰度图进行最小值滤波。
3.如权利要求1所述的基于多尺度去卷积滤波的单帧去雾方法,其特征在于,所述去卷积滤波的方法在计算机视觉图像处理中,通过图像滤波,把原有图像分解为精细级别不同的多个图像,每个级别的图像会保留不同程度细节的信息。
4.如权利要求3所述的基于多尺度去卷积滤波的单帧去雾方法,其特征在于,所述图像去雾计算将粗糙透过率图和精细透过率图两者累加计算得到最终的透过率图。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710216437.2A CN106960425A (zh) | 2017-04-05 | 2017-04-05 | 基于多尺度去卷积滤波的单帧去雾方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710216437.2A CN106960425A (zh) | 2017-04-05 | 2017-04-05 | 基于多尺度去卷积滤波的单帧去雾方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106960425A true CN106960425A (zh) | 2017-07-18 |
Family
ID=59484477
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710216437.2A Pending CN106960425A (zh) | 2017-04-05 | 2017-04-05 | 基于多尺度去卷积滤波的单帧去雾方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106960425A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108564549A (zh) * | 2018-04-20 | 2018-09-21 | 福建帝视信息科技有限公司 | 一种基于多尺度稠密连接网络的图像去雾方法 |
CN109087270A (zh) * | 2018-09-04 | 2018-12-25 | 中国矿业大学(北京) | 一种基于改进的卷积匹配追踪管道视频图像去雾增强方法 |
CN110097522A (zh) * | 2019-05-14 | 2019-08-06 | 燕山大学 | 一种基于多尺度卷积神经网络的单幅户外图像去雾方法 |
-
2017
- 2017-04-05 CN CN201710216437.2A patent/CN106960425A/zh active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108564549A (zh) * | 2018-04-20 | 2018-09-21 | 福建帝视信息科技有限公司 | 一种基于多尺度稠密连接网络的图像去雾方法 |
CN108564549B (zh) * | 2018-04-20 | 2022-04-05 | 福建帝视信息科技有限公司 | 一种基于多尺度稠密连接网络的图像去雾方法 |
CN109087270A (zh) * | 2018-09-04 | 2018-12-25 | 中国矿业大学(北京) | 一种基于改进的卷积匹配追踪管道视频图像去雾增强方法 |
CN109087270B (zh) * | 2018-09-04 | 2019-05-14 | 中国矿业大学(北京) | 一种基于改进的卷积匹配追踪管道视频图像去雾增强方法 |
CN110097522A (zh) * | 2019-05-14 | 2019-08-06 | 燕山大学 | 一种基于多尺度卷积神经网络的单幅户外图像去雾方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106846263B (zh) | 基于融合通道且对天空免疫的图像去雾方法 | |
CN107301623B (zh) | 一种基于暗通道和图像分割的交通图像去雾方法及*** | |
WO2019205707A1 (zh) | 基于暗通道的线状自适应改进全局大气光的图像去雾方法 | |
CN104036466B (zh) | 一种视频去雾方法与*** | |
CN109255759B (zh) | 基于天空分割和透射率自适应修正的图像去雾方法 | |
WO2016206087A1 (zh) | 一种低照度图像处理方法和装置 | |
CN109087254B (zh) | 无人机航拍图像雾霾天空和白色区域自适应处理方法 | |
CN106530257A (zh) | 一种基于暗通道先验模型的遥感图像去雾方法 | |
CN105574830A (zh) | 极端天气条件下低质图像增强方法 | |
CN108230264A (zh) | 一种基于ResNet神经网络的单幅图像去雾方法 | |
CN103049888A (zh) | 基于暗原色结合大气散射光的图像/视频去雾方法 | |
CN102750674A (zh) | 基于自适应容差的视频图像去雾方法 | |
CN111161167B (zh) | 基于中通道补偿和自适应大气光估计的单幅图像去雾方法 | |
CN108717686B (zh) | 一种基于暗通道先验的实时视频去雾方法 | |
CN107360344B (zh) | 监控视频快速去雾方法 | |
CN104809709A (zh) | 基于域变换与带权四叉树分解的单幅图像自适应去雾方法 | |
CN105046658A (zh) | 一种低照度图像处理方法和装置 | |
CN104657941B (zh) | 一种图像边缘自适应增强方法及装置 | |
CN107895357A (zh) | 一种基于fpga的实时水面浓雾场景图像增强方法 | |
CN112053298B (zh) | 一种图像去雾方法 | |
CN111325688A (zh) | 融合形态学聚类优化大气光的无人机图像去雾方法 | |
CN106960425A (zh) | 基于多尺度去卷积滤波的单帧去雾方法 | |
CN105809641B (zh) | 一种去雾图像的曝光补偿和边缘增强方法 | |
CN109801231A (zh) | 一种电泳电子纸检测设备的图像处理方法 | |
CN111598814A (zh) | 基于极端散射通道的单图像去雾方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20180717 Address after: 200125 China (Shanghai) free trade pilot area, 115 west 2, 8 floor, 8-34 rooms. Applicant after: Shanghai Hong Si semiconductor Co., Ltd. Address before: 6 Galileo Road, Pudong New District, Shanghai, 201203 Applicant before: Shanghai Silicon Micro Electronics Co., Ltd. |
|
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170718 |