CN113344822A - 图像降噪方法、装置、终端、存储介质 - Google Patents
图像降噪方法、装置、终端、存储介质 Download PDFInfo
- Publication number
- CN113344822A CN113344822A CN202110729108.4A CN202110729108A CN113344822A CN 113344822 A CN113344822 A CN 113344822A CN 202110729108 A CN202110729108 A CN 202110729108A CN 113344822 A CN113344822 A CN 113344822A
- Authority
- CN
- China
- Prior art keywords
- image
- images
- target
- aligned
- channel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000009467 reduction Effects 0.000 title claims abstract description 36
- 238000001914 filtration Methods 0.000 claims abstract description 99
- 230000004927 fusion Effects 0.000 claims abstract description 48
- 238000012545 processing Methods 0.000 claims abstract description 17
- 238000004364 calculation method Methods 0.000 claims description 16
- 230000006870 function Effects 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 14
- 238000001514 detection method Methods 0.000 claims description 10
- 238000012937 correction Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000008030 elimination Effects 0.000 description 2
- 238000003379 elimination reaction Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 101100400452 Caenorhabditis elegans map-2 gene Proteins 0.000 description 1
- 102000003712 Complement factor B Human genes 0.000 description 1
- 108090000056 Complement factor B Proteins 0.000 description 1
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 101150064138 MAP1 gene Proteins 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002601 radiography Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000004304 visual acuity Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例提供一种图像降噪方法、装置、终端、存储介质,方法包括:获取第一图像组,分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,根据不同通道的所述第一运动信息整合得到第二运动信息;根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。可以解决拍摄场景光线问题导致图像较暗时,运动区域因为融合信息少,噪声过大的问题。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像降噪方法、装置、终端、存储介质。
背景技术
随着硬件技术的提升以及软件算法的更新,为了获得更佳的视觉效果,采用多帧的计算摄影技术在手机camera中应用越来越普遍。当拍摄对象为静止场景时,来自不同图像的像素间配准通常比较准确,一般可以取得良好的效果。然而,当拍摄场景中包含动态运动物体时,一旦不能配准,若以较大权值融合则会产生鬼影,即使算法设计良好,可以大幅度的减少配准的错误率,仍将面对运动区域因为融合信息少,噪声过大的问题。
发明内容
本发明实施例提供一种图像降噪方法、装置、终端、存储介质,可以通过该图像降噪方法解决现有技术中存在的当光线较暗拍摄场景中包含动态运动物体时,一旦不能配准,若以较大权值融合则会产生鬼影,即使算法设计良好,可以大幅度的减少配准的错误率,仍将面对运动区域因为融合信息少,噪声过大的问题。
第一方面,本发明实施例提供一种图像降噪方法,所述方法包括:获取第一图像组,所述第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐,所述参考图像和所述对齐图像均包括L种类型的通道图像;分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,其中,对其中一种类型的所述通道图像的处理过程包括:获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息,所述第一运动信息包括运动区域;根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息;根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;以及将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。
进一步地,所述获取第一图像组包括:确定输入的一组图像中多帧图像是否曝光相同;若确定输入的一组图像中的多帧图像曝光不同,则对所述组多帧图像进行亮度矫正,使多帧图像的亮度达到一致;以及若确定输入的一组图像中的所述多帧图像曝光相同,则选取所述多帧图像中解析力最高的一帧图像作为所述参考图像,并将所述多帧图像中除所述参考图像外的其余图像向所述参考图像做对齐,以获取到所述第一图像组。
进一步地,所述每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐包括:每个所述对齐图像的所述多个目标点与所述参考图像中的多个像素点一一对齐。
进一步地,所述获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息包括:获取目标对齐通道图像中每个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值,其中,所述目标对齐通道图像为所述若干帧对齐图像的目标类型的所述通道图像,所述目标参考通道图像为所述参考图像的目标类型的通所述道图像;根据所述目标对齐通道图像中每一个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值计算获取所述目标对齐通道图像向所述目标参考通道图像融合后所确定的图像相似度值;根据所述目标对齐通道图像中每一个目标点对应的所述图像相似度值获取运动概率图;以及对获取到的所述运动概率图进行调制,以得到所述第一运动信息;其中,根据所述运动概率图中每一个像素点的运动大小与运动阈值的比较结果确定所述运动区域。
进一步地,所述根据所述每个所述目标点向相应对齐的所述特征点融合的融合权重值计算获取若干帧向所述参考图像融合后所确定的图像相似度值包括通过以下公式确定每个所述目标点的所述图像相似度值:
其中,(i,j)表示所述目标点的位置,wn(i,j)表示所述若干帧对齐图像中第n帧对齐图像相对于所述参考图像在像素点(I,j)处的融合权重值,similar(I,j)表示所述目标点(i,j)的所述图像相似度值,fdark、fmid、fbright分别表示在亮度dark、亮度mid和亮度bright这三种不同亮度水平下所述图像相似度的计算函数,并且在所述目标点对齐的所述特征点的像素值低于第一亮度阈值亮度thr_l时采用亮度dark对应的所述图像相似度的计算函数,在所述目标点对齐的所述特征点的像素值高于第二亮度阈值亮度thr_h时采用所述亮度bright对应的所述图像相似度的计算函数,若所述目标点对齐的所述特征点的像素值不低于第一亮度阈值亮度thr_l且不高于则采用所述亮度mid对应的所述图像相似度的计算函数。
进一步地,所述参考图像和所述对齐图像的格式包括:拜尔、YUV或RGB。
进一步地,所述根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息,包括:获取所述L种类型通道的图像对应的所述运动概率图;基于L种类型通道的图像对应所述运动概率图,整合得到所述第二运动信息,所述第二运动信息包括运动概率图集合,且所述运动概率图集合包括所有通道的所述运动概率图。
进一步地,所述根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息包括:获取第一保护区域和第二保护区域,所述第一保护区域包括和所述第二保护区域均以所述对齐图像的几何中心为圆心,其中所述第一保护区域包括以第一距离为半径的圆形区域,所述第二保护区域包括以所述第一距离为内半径以第二距离为外半径的圆环区域,所述第二距离大于第一距离;设置所述第一保护区域内以第一滤波强度进行滤波,所述第一滤波强度为第一固定值;设置所述第二保护区域内以第二滤波强度进行滤波,所述第二滤波强度为第二固定值或动态值,所述第二固定值大于所述第一固定值。
进一步地,若所述第二滤波强度为动态值,则通过以下方式获取当前第二滤波强度:根据当前所述目标点与所述圆心的第三距离,获取对应的增强比例,并将获取到的所述增强比例与所述第一滤波强度相乘得到所述当前第二滤波强度。
进一步地,所述将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像包括:将所述第一滤波强度和第二滤波强度配置到所述去噪强度图中以得到经过滤波强度配置后的所述去噪强度图;以及根据所述经过滤波强度配置后的去噪强度图以及滤波器执行空域滤波,以输出最终图像。
进一步地,所述去噪强度图为所述滤波器的去噪强度参数。
进一步地,所述滤波器包括引导滤波器。
第二方面,本申请实施例还提供一种图像降噪装置,所述装置包括:图像获取模块,用于获取第一图像组,所述第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐,所述参考图像和所述对齐图像均包括L种类型的通道图像;运动检测模块,用于运动检测模块,分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,其中,对其中一种类型的所述通道图像的处理过程包括:获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息,所述第一运动信息包括运动区域;以及降噪模块,根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息;根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;以及将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。
第三方面,本申请实施例还提供一种图像降噪装置,所述装置包括:处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现第一方面提供的图像降噪方法。
在一种实施方式中,第三方面所提供的图像降噪装置可以为一种芯片。
第四方面,本申请的另一个实施例还提供一种芯片,所述芯片与存储器相连,或者所述芯片上集成有存储器(如第三方面提供的图像降噪装置),当所述存储器中存储的程序或指令被执行时,实现第一方面提供的图像降噪方法。
第五方面,本申请实施例还提供一种终端,所述终端可以包括终端本体和第三方面提供的图像降噪装置。
在另一种实施方式中,第五方面提供的终端可以包括终端本体和第四方面提供的芯片。
第六方面,本申请实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现所述计算机程序被处理器执行时实现
通过上述技术方案,在获取到第一图像组后,可以分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,进而根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息,根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;以及将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像可以解决现有技术中存在的当拍摄场景,尤其是光线暗的场景中包含动态运动物体时,一旦不能配准,若以较大权值融合则会产生鬼影,即使算法设计良好,可以大幅度的减少配准的错误率,仍将面对运动区域因为融合信息少,噪声过大的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一个实施例提供的一种图像降噪方法的流程图;
图2a为本申请一个实施例提供的运动区域检测流程图;
图2b为本申请另一个实施例提供的运动区域检测流程图;
图3为本申请一个实施例提供的运动区域降噪流程图;
图3a为本申请一个实施例提供的滤波强度的径向调节信息获取流程示意图;
图3b为本申请一个实施例提供的第一保护区域和第二保护区域的示意图;
图3c为本申请一个实施例提供的滤波强度变化示意图;
图3d为本申请另一个实施例提供的滤波强度变化示意图;
图4为本申请一个实施例提供的图像降噪装置结构示意图;
图5为本申请另一个实施例提供的图像降噪装置结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在高动态的场景,单张图像很难达到暗处信噪比高,同时动态范围大的效果。近年来,计算摄影的出现,很好的解决了这个困难。比如,该技术可以利用多张不同曝光的LDR图像来合成一张HDR的效果图,亦可以利用多张不同视场的图合成一张细节更多图像,也可以利用多张相同曝光图合成一张高信噪比、动态范围增大的图像。
多帧合成技术在处理运动场景时,会有选择地融合相近的内容,对于差异大的内容则直接用参考帧内容代替。如此处理,可以将运动鬼影排斥掉,但剔除鬼影的同时,会引入运动区域噪声过大的问题。针对该问题的解决,现有的解决方案是在频域寻找鬼影的map,然后再依据map,指导频域空域滤波的强度。
现有的HDR+技术,及其他基于多帧融合的计算摄影技术,在处理运动场景时,为保证图像质量,通常有运动检测,鬼影剔除的操作。但是,剔除鬼影区域,融合数据变少,降噪有限,使鬼影处理后的区域噪声突出,出现噪声分层的现象。这种现象在暗处场景更为明显。
为克服上述技术问题,本申请实施例提供一种图像降噪方法,图1为本申请一个实施例提供的一种图像降噪方法的流程图,如图1所示,所述图像降噪方法包括以下步骤:
步骤101:获取第一图像组。
其中,第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐,所述参考图像和所述对齐图像均包括L种类型的通道图像。
步骤102:分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,其中,对其中一种类型的所述通道图像的处理过程包括:获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息。
其中,第一运动信息包括运动区域。
步骤103:根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息。
步骤104:根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息。
步骤105:将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。
在步骤101的一种实施方式中,获取输入的一组图像,该一组图像中包含多帧图像。在获取到该一组图像后,可以确认该一组图像中的多帧图像是否为曝光相同的一组图像,其中,若获取输入的一组图像中的多帧图像曝光不同,则可以对该组图像进行亮度矫正,使经过亮度矫正后的该组图像中的多帧图像的亮度达到一致。进一步地,在确定该一组图像中的多帧图像的亮度达到一致的情况下,选取其中解析力最高的一帧图像作为参考图像(参考帧),并将该一组图像中除所述参考图像外的剩余其他图像向所述参考图像做对齐。在可实现的方式中,上述对齐操作可以通过整体对齐的方式实现、可以通过分块对齐的方式实现,还可以通过整体对齐和分块对齐两者结合的方式实现,具体实现方式不做限定。通过执行上述亮度矫正和对齐操作中至少一者可以获取到步骤101所述的第一图像组。
在步骤101的另一种实施方式中,可以直接获取所述第一图像组,其中,第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐。即无需执行上述亮度矫正或对齐操作。
在一种实施方式中,可以通过坐标表示参考图像中的特征点(x,y)或者与参考图像中的特征点一一对齐的对齐图像中的目标点(x,y)。
需要说明的是,在步骤101的任意一种实施方式中,获取的多帧图像的格式可以为拜耳(Bayer)格式的图像,也可以是YUV格式的图像,或者可以为RGB域的图像。其中,YUV是编译true-color颜色空间(color space)的种类,“Y”表示明亮度(Luminance、Luma),“UV”表示彩度(Chroma),具体图像格式在此不做限定。进一步地,若获取的多帧图像的格式为RGB,则上述多通道图像分别为R通道获取到的图像、G通道获取到的图像以及B通道获取到的图像。
在一种实施方式中,在获取到所述第一图像组后,还可以对所述第一图像组中的多帧图像(各帧图像)进行鬼影检测和鬼影剔除操作。通过上述操作剔除第一图像组中的多帧图像(各帧图像)中的鬼影后,该多帧图像可以通过逐点加和平均的方式获得多帧时域融合效果。
图1所示的步骤102具体包括图2a所示的以下步骤:
步骤201:获取若干帧对齐图像中每个目标点与对应特征点融合的融合权重值。
步骤202:根据所述每个所述目标点向相应对齐的所述特征点融合的融合权重值计算所有对齐图像在同一个目标点的相似度总和。
步骤203:计算步骤202计算得到的相似度总和的平均值。
步骤204:根据每一个目标点对应的相似度总和的平均值获取运动概率图(movemap)。
步骤205:根据所述运动概率图中每一个像素点的运动大小与运动阈值的比较结果确定所述运动区域。
步骤206:对获取到的move map进行调制,以得到所述第一运动信息。
在步骤201的具体实施中,基于时域降噪的检测判断机制,我们容易得到每点与参考帧对应点的相似程度,可以用权值来表示。具体地,可以通过分别计算对齐图像与参考图像的差值,并将计算得到的差值与相似度阈值进行比较,并根据比较结果分别确定对齐图像向参考图像进行融合的融合权重。当计算得到的差值与相似度阈值的比较结果在第一范围内时,对应的融合权重值为1,当计算得到的差值与相似度阈值的比较结果在第二范围内时(即图像内容差异大时),对应的融合权重值为0。并且所述差值与融合权重值呈线性关系,进而可以在计算得到的差值与相似度阈值的比较结果在第三范围内时,根据该线性关系确定对应的融合权重值,其中该第三范围处于第一范围和第二范围之间。
需要说明的是若干帧对齐图像在同一个目标点存在多个融合权重值。举例来说,若干帧对齐图像中第i帧对齐图像的目标点(x,y)向参考图像中对应的特征点(x,y)融合的融合权重值为Wi(x,y),其中i≥1,且i为正整数。其中,上述参考图像中对应的特征点(x,y)可以为参考图像的相应像素点(x,y)。
在步骤202的具体实施中,可以对所有对齐图像在同一个目标点的相似度进行求和计算。在上述通过融合权重值表示相似度的实施方式中,第i帧对齐图像的目标点(x,y)向参考图像中对应的像素点(x,y)融合的融合权重值为Wi(x,y),若干帧对齐图像在同一个目标点存在多个融合权重值{W1(x,y)、W2(x,y),…,Wi(x,y)},进而可以通过求和函数计算得到所有对齐图像在同一个目标点的相似度之和SUM{W1(x,y)、W2(x,y),…,Wi(x,y)}。
在步骤203的具体实施中,计算步骤202计算得到的相似度总和的平均值,在上述通过融合权重值表示相似度的实施方式中,所有对齐图像在同一个目标点的相似度之和SUM{W1(x,y)、W2(x,y),…,Wi(x,y)},进一步计算融合权重平均值SUM{W1(x,y)、W2(x,y),…,Wi(x,y)}/i。
在步骤204~步骤205的具体实施中,可以根据每一个目标点对应的相似度总和的平均值获取move map。其中,Move_map=1-similar,similar表示每一个目标点对应的相似度总和的平均值,获取到的move map的map值(运动大小)的数值范围为(0-1),即,0≤map值≤1,map值越高则表示运动的可能性越高,进而可以根据map值确定运动区域。
在步骤206的具体实施中,可以获取到的move map进行调制,其目的在于剔除毛刺,使整个move map更加平滑,以保证图像效果的稳定性。
需要说明的是,图2a所示实施例提供的第一运动信息确定方法为基于平均相似度的方式确定的,在其他实施方式中,还可以通过图2b所示实施例提供的第一运动信息确定方法确定,如图2b所示,该第一运动信息确定方法包括以下步骤:
步骤211:获取目标对齐通道图像中每个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值。
步骤212:根据所述目标对齐通道图像中每一个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值计算获取所述目标对齐通道图像向所述目标参考通道图像融合后所确定的图像相似度值。
步骤213:根据所述目标对齐通道图像中每一个目标点对应的所述图像相似度值获取运动概率图。
步骤214:根据所述运动概率图中每一个像素点的运动大小与运动阈值的比较结果确定所述运动区域。
步骤215:对获取到的所述运动概率图进行调制,以得到所述第一运动信息。
在步骤211的具体实施中,可以基于点的降噪,逐点计算每个目标点相比参考帧中相应对齐的像素点之间差值,可以通过以下公式计算每个目标点与相应对齐像素点之间的第一差值:
Diff1(i,j)=alt(i,j)–ref(i,j) 公式一
其中,diff(i,j)表示第一差值,alt(i,j)表示对齐图像中像素点(i,j)的值,ref(i,j)表示所述参考图像中像素点(i,j)的值。
在步骤202的具体实施中,可以计算所述第一差值与第一阈值的差以得到第二差值,具体地,可以通过以下公式计算所述第二差值:
Diff2(i,j)=Diff1(i,j)-thr(i,j) 公式二
其中,Diff2(i,j)表示所述第二差值,thr(i,j)表示目标点对应的差异阈值(即第一阈值)。其中,可以为每一个位置(目标像素点)设置自适应的差异阈值thr(i,j),该thr的大小随ref(i,j)大小变化,ref(i,j)值越大,该阈值越大,反之亦然。还可以为每一个位置(目标像素点)设置自适应的置信度thegma(i,j),该thegma的大小随ref(i,j)大小变化,ref(i,j)值越大,thegma值越大,反之亦然。
在计算得到上述第二差值后,可以将第二差值与第二阈值进行比较,若所述第二差值小于第二阈值,则确定目标点向相应对齐的所述特征点融合的融合权重值为第一权值,若所述第二差值不小于所述第二阈值,确定目标点向相应对齐的所述特征点融合的融合权重值为第二权值,并可以根据所述目标小块对应的所述第二差值和所述目标点对应的置信度计算所述第二权值。举例来说,该第二阈值可以为“0”,若第二差值diff2小于0,则确定所述第一权值W1(i,j)=1。若第二差值diff2不小于0,则可以通过以下公式计算所述第二权值W2(i,j):
W2(i,j)=exp^(-diff2(i,j)*diff2(I,j)/(thegma(i,j)*thegma(I,j)));
其中,(i,j)表示所述目标点的位置,W2(i,j)表示所述目标点(i,j)的所述第二权值,diff2(i,j)表示所述目标点的所述第二差值,thegma(i,j)表示所述目标点(i,j)的所述置信度。
在步骤212的具体实施中,所述根据所述每个所述目标点向相应对齐的所述特征点融合的融合权重值计算获取若干帧向所述参考图像融合后所确定的图像相似度值包括通过以下公式确定每个所述目标点的所述图像相似度值:
其中,(i,j)表示所述目标点的位置,wn(i,j)表示所述若干帧对齐图像中第n帧对齐图像相对于所述参考图像在像素点(I,j)处的融合权重值,similar(I,j)表示所述目标点(i,j)的所述图像相似度值,fdark、fmid、fbright分别表示在亮度dark、亮度mid和亮度bright这三种不同亮度水平下所述图像相似度的计算函数,并且在所述目标点对齐的所述特征点的像素值低于第一亮度阈值亮度thr_l时采用亮度dark对应的所述图像相似度的计算函数,在所述目标点对齐的所述特征点的像素值高于第二亮度阈值亮度thr_h时采用所述亮度bright对应的所述图像相似度的计算函数,若所述目标点对齐的所述特征点的像素值不低于第一亮度阈值亮度thr_l且不高于则采用所述亮度mid对应的所述图像相似度的计算函数。
在步骤213~步骤214的具体实施中,在步骤212中根据目标点对齐的所述特征点的像素值选用相对应的图像相似度的计算函数后,得到每一个目标点对应的相似度,进一步地可以根据每一个目标点对应的相似度总和的平均值获取运动概率图(move map)。其中,Move_map=1-similar,similar表示通过公式三所确定的每一个目标点对应的图像相似度值,获取到的move map的map值(运动大小)的数值范围为(0-1),即,0≤map值≤1,若map值大于运动阈值则确定该点存在运动,map值越高则表示运动的可能性越高,进而可以根据map值确定运动区域。
在步骤215的具体实施中,可以对步骤204中获取到的move map进行调制,其目的在于剔除毛刺,使整个move map更加平滑,以保证图像效果的稳定性。
区别于上述基于平均值的方式获取图像相似度,在另一个实施方式中,还可以采用max的方式,高亮处采用min的方式,具体如下所示:
fdark=max(w1(i,j),w2(i,j),...wn(i,j),) 公式四
fmid=sum(w1(i,j),w2(i,j),...wn(i,j),)/n 公式五
fbright=min(w1(i,j),w2(i,j),...wn(i,j),) 公式六
其中,fdark、fmid、fbright分别表示在亮度dark、亮度mid和亮度bright这三种不同亮度水平下所述图像相似度的计算函数。
在所述目标点对齐的所述特征点的像素值低于第一亮度阈值亮度thr_l时采用公式四确定所述图像相似度,即,选取若干帧对齐图像在同一个目标点(i,j)的多个融合权重值中的最大值作为所述图像相似度。
在所述目标点对齐的所述特征点的像素值高于于第二亮度阈值亮度thr_h时采用公式六确定所述图像相似度,即,选取若干帧对齐图像在同一个目标点(i,j)的多个融合权重值中的最小值作为所述图像相似度。
在所述目标点对齐的所述特征点的像素值不低于第一亮度阈值亮度thr_l且不高于则采用公式五确定所述图像相似度,即,将若干帧对齐图像在同一个目标点(i,j)的多个融合权重值的平均值作为所述图像相似度。
图1所示的步骤103具体包括图3所示的以下步骤:
步骤301:基于不同通道的move map,整合一个运动概率图集合(move map(f))。
步骤302:对步骤301生成的move map(f)调制生成denoise map。
在步骤301的具体实施中,可以基于不同通道的move map,整合一个move map(f),在上述整合过程中,可以基于相同位置取最大值实现,具体地,整合过程可以如以下公式所示:move map(f)(x,y)=max[move map 1(x,y)move map 2(x,y),move map n(x,y)],其中,n为通道的个数。
在步骤302的具体实施中,可以基于move map(f),调制生成denoise map,该调制过程可以按照线性实现,即可以表示为:denoise_map(x,y)=A*move_map_f+B;其中,A表示第一去噪强度调节因子,B表示第二去噪强度调节因子,A和B的值可以根据场景进行相应配置,并且第一去噪强度调节因子A大于第二去噪强度调节因子B。
图1所示的步骤104具体包括图3a所示的以下步骤:
步骤311:获取第一保护区域和第二保护区域。
其中,所述第一保护区域包括和所述第二保护区域均以所述对齐图像的几何中心为圆心,其中所述第一保护区域包括以第一距离为半径的圆形区域,所述第二保护区域包括以所述第一距离为内半径以第二距离为外半径的圆环区域,所述第二距离大于第一距离。
步骤312:设置所述第一保护区域内以第一滤波强度进行滤波。
其中,所述第一滤波强度为第一固定值。
步骤313:设置所述第二保护区域内以第二滤波强度进行滤波。
其中,所述第二滤波强度为第二固定值或动态值,所述第二固定值大于所述第一固定值。
在图3a所示的实施例中,由于受到拍摄设备的传感器小光圈限制,图像四周相比中心区域亮度会逐次降低,这一点在低光照下更为突出。拍摄终端的图像信号处理(ImageSignal Processing,ISP)利用镜头校正(lens Correct,LsC)纠正该现象。相当于给图像的边缘乘以更大的系数提升边缘的亮度。但这会导致不好的结果就是边缘的噪声明显增强。所以需要通过图3a所示实施例提供的滤波强度的调节方式进行动态调节,其中滤波的强度应该随着半径的增加而增强,应该添加沿径向的滤波强度调节radius_map。
在步骤311的具体实施中,如图3b所示,可以获取第一保护区域30a和第二保护区域30b,所述第一保护区域30a包括和所述第二保护区域30b均以所述对齐图像的几何中心0为圆心,其中所述第一保护区域包括以第一距离r为半径r的圆形区域,所述第二保护区域包括以所述第一距离r为内半径以第二距离R为外半径R的圆环区域,所述第二距离R大于第一距离r。
在步骤312的具体实施中,可以设置所述第一保护区域30a内以第一滤波强度进行滤波,并且该第一滤波强度可以为固定值,即,在第一保护区域30a可以以同一固定滤波强度进行滤波。
在步骤313的具体实施中,可以设置所述第二保护区域30b内以第二滤波强度进行滤波。其中,该第二滤波强度可以为固定值也可以为动态值。
图3c为本申请一个实施例提供的滤波强度变化示意图,如图3c所示,在第一滤波强度和第二滤波强度均为固定值时,可以设置第一滤波强度为第一固定值,并设置第二滤波强度为第二固定值,在一种实施方式中该第一固定值可以为1,即,在第一保护区域30a无需增强滤波强度。该第二固定值可以为大于1的值,例如该第二固定值的设定可以依据拍摄场景的光线强度决定,其中,拍摄图像越暗,该固定值越高。
图3d为本申请另一个实施例提供的滤波强度变化示意图,如图3d所示,在第二滤波强度为动态值时,根据当前所述目标点与所述圆心0的第三距离Ln,获取对应的增强比例Sn,并将获取到的所述增强比例Sn与所述第一滤波强度相乘得到所述当前第二滤波强度。其中,可以通过查表映射的方式,输入目标点与所述圆心O的第三距离Ln获取对应的增强比例,进而计算出当前第二滤波强度。在一种实施方式中,该当前第二滤波强度可以随着第三距离Ln的增大线性增长。上述第三距离为两点之间的欧式距离。
通过公式进行表示上述第一滤波强度和当前第二滤波强度如下所示:
第一滤波强度radius map(x,y)=1Ln≤r
当前第一滤波强度radius map(x,y)=Sn*radius map(x,y);r<Ln≤R。
在步骤105的具体实施中,可以将步骤104中获取到的滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,具体地,将所述第一滤波强度和第二滤波强度配置到所述denoise map中以得到经过滤波强度配置后的所述denoise map;
其中,具体公式如下:
Denoise_map_new(x,y)=denoise_map(x,y)*radius_map(x,y)
Denoise_map_new(x,y)表示经过滤波强度配置后的denoise map,radius_map表示沿径向的滤波强度调节。
在得到上述经过滤波强度配置后的所述denoise map后,还可以根据所述经过滤波强度配置后的denoise map以及滤波器执行空域滤波,以输出最终图像。其中滤波器可以为引导滤波器(guide filter)该空域滤波可以为逐个通道完成空域滤波。
Output=guide filter(input,denoise map,win_w);
其中,denoise map为所述滤波器的thegma参数,win_w参数代表guidefilter的窗口宽度。最终,输出滤波后的图像。
本申请实施例还提供一种图像降噪装置,图4为本申请再一个实施例提供的图像降噪装置的结构示意图,如图4所示,该装置包括:
图像获取模块401,用于获取第一图像组,所述第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐,所述参考图像和所述对齐图像均包括L种类型的通道图像;
运动检测模块402,用于分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,其中,对其中一种类型的所述通道图像的处理过程包括:获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息,所述第一运动信息包括运动区域;以及
降噪模块403,根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息;根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;以及将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。
本申请的另一个实施例还提供一种图像降噪装置,图5为本申请另一个实施例提供的图像降噪装置的结构示意图,如图5所示,该装置包括:处理器501和存储器502,所述存储器502用于存储至少一条指令,所述指令由所述处理器501加载并执行时以实现图1、图2和图3所示的任意实施例提供的图像降噪方法。
在一种实施方式中,图5所示实施例提供的图像降噪装置可以为一种芯片。
本申请的另一个实施例还提供一种芯片,所述芯片与存储器相连,或者所述芯片上集成有存储器(如图5所示实施例提供的图像降噪装置),当所述存储器中存储的程序或指令被执行时,实现图1、图2和图3所示的任意实施例提供的图像降噪方法。
本申请实施例还提供一种终端,该终端包括终端本体以及图5所示实施例提供的图像降噪装置或上述实施例提供的与存储器相连的芯片。该终端通过图5所示实施例提供的图像降噪装置或上述实施例提供的与存储器相连的芯片执行相应的程序或指令,实现图1、图2和图3所示的任意实施例提供的图像降噪方法。
本申请再一个实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现图1、图2和图3所示的任意实施例提供的图像降噪方法。
需要说明的是,本发明实施例中所涉及的终端可以包括但不限于个人计算机(Personal Computer,PC)、个人数字助理(Personal Digital Assistant,PDA)、无线手持设备、平板电脑(Tablet Computer)、手机、MP3播放器、MP4播放器等。
可以理解的是,所述应用可以是安装在终端上的应用程序(nativeApp),或者还可以是终端上的浏览器的一个网页程序(webApp),本发明实施例对此不进行限定。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的***,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如,多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机装置(可以是个人计算机,服务器,或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (15)
1.一种图像降噪方法,其特征在于,所述方法包括:
获取第一图像组,所述第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐,所述参考图像和所述对齐图像均包括L种类型的通道图像;
分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,其中,对其中一种类型的所述通道图像的处理过程包括:获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息,所述第一运动信息包括运动区域;
根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息;
根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;以及
将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。
2.根据权利要求1所述的方法,其特征在于,所述获取第一图像组包括:
确定输入的一组图像中多帧图像是否曝光相同;
若确定输入的一组图像中的多帧图像曝光不同,则对所述组多帧图像进行亮度矫正,使多帧图像的亮度达到一致;以及
若确定输入的一组图像中的所述多帧图像曝光相同,则选取所述多帧图像中解析力最高的一帧图像作为所述参考图像,并将所述多帧图像中除所述参考图像外的其余图像向所述参考图像做对齐,以获取到所述第一图像组。
3.根据权利要求1所述的方法,其特征在于,所述每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐包括:
每个所述对齐图像的所述多个目标点与所述参考图像中的多个像素点一一对齐。
4.根据权利要求3所述的方法,其特征在于,所述获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息包括:
获取目标对齐通道图像中每个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值,其中,所述目标对齐通道图像为所述若干帧对齐图像的目标类型的所述通道图像,所述目标参考通道图像为所述参考图像的目标类型的通所述道图像;
根据所述目标对齐通道图像中每一个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值计算获取所述目标对齐通道图像向所述目标参考通道图像融合后所确定的图像相似度值;
根据所述目标对齐通道图像中每一个目标点对应的所述图像相似度值获取运动概率图;以及
对获取到的所述运动概率图进行调制,以得到所述第一运动信息;
其中,根据所述运动概率图中每一个像素点的运动大小与运动阈值的比较结果确定所述运动区域。
5.根据权利要求4所述的方法,其特征在于,所述根据所述目标对齐通道图像中每一个所述目标点向目标参考通道图像中相应对齐的所述特征点融合的融合权重值计算获取所述目标对齐通道图像向所述目标参考通道图像融合后所确定的图像相似度值包括通过以下公式确定所述目标对齐通道图像中每一个目标点对应的所述图像相似度值:
其中,(i,j)表示所述目标点的位置,wn(i,j)表示所述若干帧对齐图像中第n帧对齐图像的目标类型的通道图像相对于所述参考图像在像素点(I,j)处的融合权重值,similar(I,j)表示所述目标点(i,j)的所述图像相似度值,fdark、fmid、fbright分别表示在亮度dark、亮度mid和亮度bright这三种不同亮度水平下所述图像相似度的计算函数,并且在所述目标点对齐的所述特征点的像素值低于第一亮度阈值亮度thr_l时采用亮度dark对应的所述图像相似度的计算函数,在所述目标点对齐的所述特征点的像素值高于第二亮度阈值亮度thr_h时采用所述亮度bright对应的所述图像相似度的计算函数,若所述目标点对齐的所述特征点的像素值不低于第一亮度阈值亮度thr_l且不高于则采用所述亮度mid对应的所述图像相似度的计算函数。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述参考图像和所述对齐图像的格式包括:拜尔、YUV或RGB。
7.根据权利要求5所述的方法,其特征在于,所述根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息,包括:
获取所述L种类型通道的图像对应的所述运动概率图;
基于L种类型通道的图像对应所述运动概率图,整合得到所述第二运动信息,所述第二运动信息包括运动概率图集合,且所述运动概率图集合包括所有通道的所述运动概率图。
8.根据权利要求7所述的方法,其特征在于,所述根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息包括:
获取第一保护区域和第二保护区域,所述第一保护区域包括和所述第二保护区域均以所述对齐图像的几何中心为圆心,其中所述第一保护区域包括以第一距离为半径的圆形区域,所述第二保护区域包括以所述第一距离为内半径以第二距离为外半径的圆环区域,所述第二距离大于第一距离;
设置所述第一保护区域内以第一滤波强度进行滤波,所述第一滤波强度为第一固定值;
设置所述第二保护区域内以第二滤波强度进行滤波,所述第二滤波强度为第二固定值或动态值,所述第二固定值大于所述第一固定值。
9.根据权利要求8所述的方法,其特征在于,若所述第二滤波强度为动态值,则通过以下方式获取当前第二滤波强度:
根据当前所述目标点与所述圆心的第三距离,获取对应的增强比例,并将获取到的所述增强比例与所述第一滤波强度相乘得到所述当前第二滤波强度。
10.根据权利要求9所述的方法,其特征在于,所述将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像包括:
将所述第一滤波强度和第二滤波强度配置到所述去噪强度图中以得到经过滤波强度配置后的所述去噪强度图;以及
根据所述经过滤波强度配置后的去噪强度图以及滤波器执行空域滤波,以输出最终图像。
11.根据权利要求10所述方法,其特征在于,所述去噪强度图为所述滤波器的去噪强度参数。
12.一种图像降噪装置,其特征在于,所述装置包括:
图像获取模块,用于获取第一图像组,所述第一图像组包括参考图像和与所述参考图像对齐的若干帧对齐图像,每个所述对齐图像包括多个目标点,且每个所述对齐图像的所述多个目标点与所述参考图像中的多个特征点一一对齐,所述参考图像和所述对齐图像均包括L种类型的通道图像;
运动检测模块,用于运动检测模块,分别对所述若干帧对齐图像中所述L种类型的通道图像进行处理,以获取各类型的所述通道图像对应的第一运动信息,其中,对其中一种类型的所述通道图像的处理过程包括:获取所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息,并根据所述若干帧对齐图像的目标类型的所述通道图像中每个所述目标点与所述参考图像对应通道图像中相应对齐的所述特征点的相似度信息确定与所述目标类型的通道图像对应的第一运动信息,所述第一运动信息包括运动区域;以及
降噪模块,根据所述L种类型的所述通道图像所确定的所述第一运动信息整合得到第二运动信息;根据所述若干帧对齐图像中每个所述目标点的位置信息确定针对对应对齐图像的滤波强度的径向调节信息;以及将所述滤波强度的径向调节信息配置到所述第二运动信息以得到第三运动信息,根据所述第三运动信息和滤波器执行空域滤波,以输出最终图像。
13.一种图像降噪装置,其特征在于,所述装置包括:
处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现如权利要求1-11中任意一项所述的图像降噪方法。
14.一种终端,其特征在于,所述终端包括权利要求13所述的图像降噪装置。
15.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-11中任意一项所述的图像降噪方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110729108.4A CN113344822B (zh) | 2021-06-29 | 2021-06-29 | 图像降噪方法、装置、终端、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110729108.4A CN113344822B (zh) | 2021-06-29 | 2021-06-29 | 图像降噪方法、装置、终端、存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113344822A true CN113344822A (zh) | 2021-09-03 |
CN113344822B CN113344822B (zh) | 2022-11-18 |
Family
ID=77481472
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110729108.4A Active CN113344822B (zh) | 2021-06-29 | 2021-06-29 | 图像降噪方法、装置、终端、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113344822B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113744257A (zh) * | 2021-09-09 | 2021-12-03 | 展讯通信(上海)有限公司 | 图像融合方法、装置、终端设备以及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7860344B1 (en) * | 2005-05-06 | 2010-12-28 | Stochastech Corporation | Tracking apparatus and methods using image processing noise reduction |
CN107197227A (zh) * | 2011-03-18 | 2017-09-22 | 索尼公司 | 图像处理设备、图像处理方法和计算机可读存储介质 |
CN108694705A (zh) * | 2018-07-05 | 2018-10-23 | 浙江大学 | 一种多帧图像配准与融合去噪的方法 |
CN108898567A (zh) * | 2018-09-20 | 2018-11-27 | 北京旷视科技有限公司 | 图像降噪方法、装置及*** |
CN113033549A (zh) * | 2021-03-09 | 2021-06-25 | 北京百度网讯科技有限公司 | 定位图获取模型的训练方法和装置 |
-
2021
- 2021-06-29 CN CN202110729108.4A patent/CN113344822B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7860344B1 (en) * | 2005-05-06 | 2010-12-28 | Stochastech Corporation | Tracking apparatus and methods using image processing noise reduction |
CN107197227A (zh) * | 2011-03-18 | 2017-09-22 | 索尼公司 | 图像处理设备、图像处理方法和计算机可读存储介质 |
CN108694705A (zh) * | 2018-07-05 | 2018-10-23 | 浙江大学 | 一种多帧图像配准与融合去噪的方法 |
CN108898567A (zh) * | 2018-09-20 | 2018-11-27 | 北京旷视科技有限公司 | 图像降噪方法、装置及*** |
CN113033549A (zh) * | 2021-03-09 | 2021-06-25 | 北京百度网讯科技有限公司 | 定位图获取模型的训练方法和装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113744257A (zh) * | 2021-09-09 | 2021-12-03 | 展讯通信(上海)有限公司 | 图像融合方法、装置、终端设备以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113344822B (zh) | 2022-11-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109348089B (zh) | 夜景图像处理方法、装置、电子设备及存储介质 | |
CN108335279B (zh) | 图像融合和hdr成像 | |
EP2987134B1 (en) | Generation of ghost-free high dynamic range images | |
CN108604293B (zh) | 提高图像质量的装置和方法 | |
JP4846259B2 (ja) | 輝度補正 | |
CN110602467B (zh) | 图像降噪方法、装置、存储介质及电子设备 | |
CN111028190A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN108234858B (zh) | 图像虚化处理方法、装置、存储介质及电子设备 | |
WO2015184408A1 (en) | Scene motion correction in fused image systems | |
WO2015011707A1 (en) | Digital image processing | |
WO2006005798A1 (en) | Methods, system, program modules and computer program product for restoration of color components in an image model | |
CN113888437A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN113344821B (zh) | 图像降噪方法、装置、终端、存储介质 | |
CN111242860B (zh) | 超级夜景图像的生成方法、装置、电子设备及存储介质 | |
CN110942427A (zh) | 一种图像降噪的方法及装置、设备、存储介质 | |
JP2022179514A (ja) | 制御装置、撮像装置、制御方法およびプログラム | |
CN115550570A (zh) | 图像处理方法与电子设备 | |
EP3179716B1 (en) | Image processing method, computer storage medium, device, and terminal | |
CN116017172A (zh) | 一种Raw域图像的降噪方法及其装置、相机和终端 | |
CN113379609A (zh) | 一种图像处理方法、存储介质及终端设备 | |
CN113344822B (zh) | 图像降噪方法、装置、终端、存储介质 | |
CN113674303B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN113793257A (zh) | 图像处理方法及装置、电子设备、计算机可读存储介质 | |
CN113469908B (zh) | 图像降噪方法、装置、终端、存储介质 | |
CN115578273A (zh) | 图像多帧融合的方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |