CN106570850B - 一种图像融合方法 - Google Patents

一种图像融合方法 Download PDF

Info

Publication number
CN106570850B
CN106570850B CN201610889578.6A CN201610889578A CN106570850B CN 106570850 B CN106570850 B CN 106570850B CN 201610889578 A CN201610889578 A CN 201610889578A CN 106570850 B CN106570850 B CN 106570850B
Authority
CN
China
Prior art keywords
image
algorithm
rgb
mono
denoising
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610889578.6A
Other languages
English (en)
Other versions
CN106570850A (zh
Inventor
王涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Science And Technology Co Ltd
Original Assignee
Chengdu Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Science And Technology Co Ltd filed Critical Chengdu Science And Technology Co Ltd
Priority to CN201610889578.6A priority Critical patent/CN106570850B/zh
Publication of CN106570850A publication Critical patent/CN106570850A/zh
Application granted granted Critical
Publication of CN106570850B publication Critical patent/CN106570850B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种图像融合方法，对在夜景模式下双摄像头拍摄的RGB图像和MONO图像进行图像融合，首先输入RGB图像和MONO图像；将RGB图像转换为YUV格式；分离YUV格式的RGB图像的亮度信息到图像Y1，分离颜色信息到图像UV1；采用滤波算法对UV1进行滤波，去掉UV1中的彩噪，得到新的图像UV2；采用去噪算法对MONO图像进行去噪处理，得到图像Y2；采用边缘检测算法对Y1做边缘提取，得到新图像Y3；将Y2和Y3进行叠加得到图像Y4；将Y4和UV2进行融合得到结果图像。在去掉融合图像彩色噪声和白噪声的情况下，使用MONO和RGB的亮度信息，使融合图像噪声水平很高的同时拥有更好的细节信息。

Description

一种图像融合方法
技术领域
本发明涉及图像处理领域，特别是一种图像融合方法。
背景技术
随着近些年手机相机功能的快速发展，消费者对拥有更强大功能的相机需求逐渐上升。夜景作为用户常用的拍摄场景，它的效果优化，能有效提升对相机拍照的用户体验。目前业内常用的夜景拍照方式为：使用一个彩色摄像头(RGB) +黑白摄像头(MONO),通过融合两个摄像头图像来提升夜景效果。
在夜景拍照中，MONO摄像头的亮度、细节、噪声会比RGB摄像头好，因此融合过程中，使用RGB摄像头提供色彩，MONO摄像头提供亮度、细节等，从容合成一张亮度、细节和噪声都比RGB摄像头原图像好的结果图片。但是在这种方案下，RGB图像的亮度细节就被完全丢弃了，这使得融合图像，并没有充分利用到双摄像头（RGB+MONO）的所有内容。
发明内容
本发明的目的在于克服现有技术的不足，提供一种图像融合方法，该方法在同时去掉融合图像彩色噪声和白噪声的情况下，同时使用MONO和RGB的亮度信息，使得融合图像在噪声水平很高的情况下，拥有更好的细节信息，从而得到夜景模式更好的效果。
本发明的目的是通过以下技术方案来实现的：一种图像融合方法，对在夜景模式下双摄像头拍摄的RGB图像和MONO图像进行图像融合，得到亮度、细节质量更高和降噪效果更好的全景图像，所述的图像融合方法包括如下步骤，
S1：输入RGB图像和MONO图像；
S2：将RGB图像转换为YUV格式；
S3：分离YUV格式的RGB图像的亮度信息到图像Y1，分离YUV格式的RGB图像的颜色信息到图像UV1；
S4：采用滤波算法对UV1进行滤波，去掉UV1中的彩噪，得到新的图像UV2；
S5：采用去噪算法对MONO图像进行去噪处理，得到图像Y2；
S6：采用边缘检测算法对Y1做边缘提取，得到新图像Y3；
S7：将Y2和Y3进行叠加得到图像Y4；
S8：将Y4和UV2进行融合得到结果图像。
所述的去噪算法为双边滤波算法。
所述的双边滤波算法的滤波半径为极大到让UV1在保持边缘的情况下糊掉的程度。
所述的去噪算法为NLM去噪算法。
所述的边缘检测算法为索贝尔算子，即Sobel算子。
本发明的有益效果是：本发明提供了一种图像融合方法，该方法在同时去掉融合图像彩色噪声和白噪声的情况下，同时使用了MONO和RGB的亮度信息，使得融合图像在噪声水平很高的情况下，拥有更好的细节信息，从而得到了夜景模式更好的效果。
附图说明
图1为本发明的方法流程图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案，但本发明的保护范围不局限于以下所述。
一种图像融合方法，对在夜景模式下双摄像头拍摄的RGB图像和MONO图像进行图像融合，得到亮度、细节质量更高和降噪效果更好的全景图像，所述的图像融合方法包括如下步骤，
S1：输入RGB图像和MONO图像；
S2：将RGB图像转换为YUV格式；
S3：分离YUV格式的RGB图像的亮度信息到图像Y1，分离YUV格式的RGB图像的颜色信息到图像UV1；
S4：采用滤波算法对UV1进行滤波，去掉UV1中的彩噪，得到新的图像UV2；
S5：采用去噪算法对MONO图像进行去噪处理，得到图像Y2；
S6：采用边缘检测算法对Y1做边缘提取，得到新图像Y3；
S7：将Y2和Y3进行叠加得到图像Y4；
S8：将Y4和UV2进行融合得到结果图像。
所述的去噪算法为双边滤波算法。
所述的双边滤波算法的滤波半径为极大到让UV1在保持边缘的情况下糊掉的程度。
所述的去噪算法为NLM去噪算法。
所述的边缘检测算法为索贝尔算子，即Sobel算子。
本发明的方法在同时去掉融合图像彩色噪声和白噪声的情况下，同时使用了MONO和RGB的亮度信息，使得融合图像在噪声水平很高的情况下，拥有更好的细节信息，从而得到了夜景模式更好的效果。

Claims (5)

1.一种图像融合方法，对在夜景模式下双摄像头拍摄的RGB图像和MONO图像进行图像融合，得到亮度、细节质量更高和降噪效果更好的全景图像，其特征在于：所述的图像融合方法包括如下步骤，
S1：输入RGB图像和MONO图像；
S2：将RGB图像转换为YUV格式；
S3：分离YUV格式的RGB图像的亮度信息到图像Y1，分离YUV格式的RGB图像的颜色信息到图像UV1；
S4：采用滤波算法对UV1进行滤波，去掉UV1中的彩噪，得到新的图像UV2；
S5：采用去噪算法对MONO图像进行去噪处理，得到图像Y2；
S6：采用边缘检测算法对Y1做边缘提取，得到新图像Y3；
S7：将Y2和Y3进行叠加得到图像Y4；
S8：将Y4和UV2进行融合得到结果图像。
2.根据权利要求1所述的一种图像融合方法，其特征在于：所述的去噪算法为双边滤波算法。
3.根据权利要求2所述的一种图像融合方法，其特征在于：所述的双边滤波算法的滤波半径为极大到让UV1在保持边缘的情况下糊掉的程度。
4.根据权利要求1所述的一种图像融合方法，其特征在于：所述的去噪算法为NLM去噪算法。
5.根据权利要求1所述的一种图像融合方法，其特征在于：所述的边缘检测算法为索贝尔算子，即Sobel算子。
CN201610889578.6A 2016-10-12 2016-10-12 一种图像融合方法 Active CN106570850B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610889578.6A CN106570850B (zh) 2016-10-12 2016-10-12 一种图像融合方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610889578.6A CN106570850B (zh) 2016-10-12 2016-10-12 一种图像融合方法

Publications (2)

Publication Number Publication Date
CN106570850A CN106570850A (zh) 2017-04-19
CN106570850B true CN106570850B (zh) 2019-06-04

Family

ID=58532806

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610889578.6A Active CN106570850B (zh) 2016-10-12 2016-10-12 一种图像融合方法

Country Status (1)

Country Link
CN (1) CN106570850B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107770509B (zh) * 2017-10-25 2020-03-17 上海觉感视觉科技有限公司 通过yuv通道传输mono格式图像的方法以及装置
CN108389165B (zh) * 2018-02-02 2022-06-21 成都西纬科技有限公司 一种图像去噪方法、装置、终端***和存储器
US11080832B2 (en) 2018-09-26 2021-08-03 Canon Kabushiki Kaisha Image processing method, image processing apparatus, imaging apparatus, and storage medium
CN109544490B (zh) * 2018-10-17 2021-07-13 北京达佳互联信息技术有限公司 图像增强方法、装置和计算机可读存储介质
CN111095919B (zh) * 2019-12-17 2021-10-08 威创集团股份有限公司 一种视频融合方法、装置及存储介质
WO2022133749A1 (zh) * 2020-12-22 2022-06-30 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质与电子设备
WO2022217525A1 (zh) * 2021-04-15 2022-10-20 深圳市大疆创新科技有限公司 图像降噪处理方法、装置及成像装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101493893A (zh) * 2008-12-11 2009-07-29 中山大学 一种图像数据融合方法
CN102231206A (zh) * 2011-07-14 2011-11-02 浙江理工大学 适用于汽车辅助驾驶***的彩色夜视图像亮度增强方法
CN102298769A (zh) * 2011-06-11 2011-12-28 浙江理工大学 基于色彩传递的夜视弱光图像与红外图像的彩色融合方法
CN103595982A (zh) * 2013-11-07 2014-02-19 天津大学 基于灰度和彩色两颗传感器的彩色图像采集装置
WO2014187917A1 (en) * 2013-05-23 2014-11-27 bioMérieux Method, system and computer program product for improving the quality of an image
CN105049718A (zh) * 2015-07-06 2015-11-11 深圳市金立通信设备有限公司 一种图像处理方法及终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101493893A (zh) * 2008-12-11 2009-07-29 中山大学 一种图像数据融合方法
CN102298769A (zh) * 2011-06-11 2011-12-28 浙江理工大学 基于色彩传递的夜视弱光图像与红外图像的彩色融合方法
CN102231206A (zh) * 2011-07-14 2011-11-02 浙江理工大学 适用于汽车辅助驾驶***的彩色夜视图像亮度增强方法
WO2014187917A1 (en) * 2013-05-23 2014-11-27 bioMérieux Method, system and computer program product for improving the quality of an image
CN103595982A (zh) * 2013-11-07 2014-02-19 天津大学 基于灰度和彩色两颗传感器的彩色图像采集装置
CN105049718A (zh) * 2015-07-06 2015-11-11 深圳市金立通信设备有限公司 一种图像处理方法及终端

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
一种边缘优化的红外与可见光图像模块化融合方法;徐领章 等;《云南师范大学学报（自然科学版）》;20160131;第36卷(第1期);第30-37页
基于YUV与小波变换的可见光与红外图像融合;王健 等;《西安工业大学学报》;20130331;第33卷(第3期);第208-211页

Also Published As

Publication number Publication date
CN106570850A (zh) 2017-04-19

Similar Documents

Publication Publication Date Title
CN106570850B (zh) 一种图像融合方法
CN107534735B (zh) 终端的图像处理方法、装置和终端
JP6803378B2 (ja) 逆トーンマッピングの方法及び装置
US10728510B2 (en) Dynamic chroma key for video background replacement
CN104639923B (zh) 一种对图像数据进行处理的方法、装置和终端
WO2017008377A1 (zh) 一种图像处理方法及终端
CN105578063A (zh) 一种图像处理方法和终端
CN206042072U (zh) 一种双摄像头装置及终端
CN106570838A (zh) 一种图像亮度优化方法及装置
CN103440674B (zh) 一种数字图像蜡笔特效的快速生成方法
CN104010124A (zh) 一种显示滤镜效果的方法、装置和移动终端
CN106506950A (zh) 一种图像处理方法及装置
CN106550227B (zh) 一种图像饱和度调整方法及装置
CN105279487A (zh) 美颜工具筛选方法和***
WO2017088564A1 (zh) 一种图像处理方法及装置、终端、存储介质
WO2024027287A9 (zh) 图像处理***及方法、计算机可读介质和电子设备
CN113132696A (zh) 图像色调映射方法、装置、电子设备和存储介质
US9654756B1 (en) Method and apparatus for interpolating pixel colors from color and panchromatic channels to color channels
JP6977483B2 (ja) 画像処理装置、画像処理方法、画像処理システムおよびプログラム
CN107277369A (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN106454101A (zh) 一种图像处理方法和终端
CN107454318A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN106408617A (zh) 一种基于yuv颜色空间的交互式单幅图像材质获取***和方法
WO2016086493A1 (zh) 一种智能移动终端的浸入式视频呈现方法
CN108470327B (zh) 图像增强方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant