CN106534677B - 一种图像过曝优化方法及装置 - Google Patents
一种图像过曝优化方法及装置 Download PDFInfo
- Publication number
- CN106534677B CN106534677B CN201610955056.1A CN201610955056A CN106534677B CN 106534677 B CN106534677 B CN 106534677B CN 201610955056 A CN201610955056 A CN 201610955056A CN 106534677 B CN106534677 B CN 106534677B
- Authority
- CN
- China
- Prior art keywords
- image
- mask
- light source
- black
- point light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005457 optimization Methods 0.000 title claims abstract description 28
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000001514 detection method Methods 0.000 claims description 10
- 230000004927 fusion Effects 0.000 claims description 9
- 230000007797 corrosion Effects 0.000 claims description 5
- 238000005260 corrosion Methods 0.000 claims description 5
- 238000003384 imaging method Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 125000001475 halogen functional group Chemical group 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种图像过曝优化方法及装置,其方法包括:通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像;检测并标记黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入黑白图像的第一掩码图像;根据第一掩码图像将黑白图像和彩色图像进行融合:判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值,则融合图像中对应区域的亮度值为黑白图像对应区域的亮度值;否则,融合图像中对应区域的亮度值通过以下公式计算得到:融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255‑第一掩码图像中的掩码)*黑白图像的亮度值。本发明解决了黑白图像点光源过曝导致融合图像亮处细节丢失的问题。
Description
技术领域
本发明涉及图像处理技术领域,特别是涉及一种图像过曝优化方法及装置。
背景技术
随着近些年手机相机功能的快速发展,消费者对拥有更强大功能的相机需求逐渐上升。夜景作为用户常用的拍摄场景,它的效果优化,能有效提升对相机拍照的用户体验。目前业内常用的夜景拍照方式为:使用一个彩色摄像头(RGB)和一个黑白摄像头(MONO)分别进行拍照,通过融合这两个摄像头拍摄的图像来提升夜景效果。
在夜景拍照中,黑白摄像头的亮度、细节、噪声会比彩色摄像头好,因此在融合过程中,使用彩色摄像头提供色彩,黑白摄像头提供亮度、细节等,从而合成一张亮度、细节和噪声都比彩色摄像头拍摄的原图像好的结果图像。因此,在夜景模式下,为了保证融合图像拥有更好的细节和动态范围,通常需要调整黑白摄像头的曝光参数,使得在弱光环境下黑白摄像头获得的黑白图像比彩色摄像头获得的彩色图像更亮一些。但是这样会引入一个新问题,在有点光源的场景下,黑白图像与彩色图像相比会出现点光源过度曝光的情况。如果这个时候,直接用黑白图像和彩色图像进行亮度融合,就会导致得到的融合图像同样存在点光源过度曝光的情况,或者是融合图像中点光源周围一圈中出现很不协调的光圈/光晕,直接影响到用户感官效果。
发明内容
本发明的目的在于克服现有技术的不足,提供一种图像过曝优化方法及装置,对黑白图像中的点光源过度曝光区域进行处理,使得融合图像在包含黑白图像暗处的细节和动态范围,又不会在亮处存在过度曝光和细节丢失的问题。
本发明的目的是通过以下技术方案来实现的:一种图像过曝优化方法,包括:
通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像;
检测并标记所述黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入所述黑白图像的第一掩码图像;
根据所述第一掩码图像将所述黑白图像和所述彩色图像进行融合:判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值,则融合图像中对应区域的亮度值为所述黑白图像对应区域的亮度值;否则,融合图像中对应区域的亮度值通过以下公式计算得到:
融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255-第一掩码图像中的掩码)*黑白图像的亮度值。
所述图像过曝优化方法还包括:对所述第一掩码图像进行腐蚀。
所述图像过曝优化方法还包括:对所述第一掩码图像进行膨胀。
所述图像过曝优化方法还包括:对所述第一掩码图像进行高斯模糊。
所述点光源过度曝光区域的检测方法为:检测所述黑白图像中各像素的像素值,像素值大于阈值的所有像素组成的区域为点光源过度曝光区域。
一种图像过曝优化装置,包括:
摄像模块,通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像;
过度曝光检测模块,检测并标记所述黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入所述黑白图像的第一掩码图像;
融合模块,根据所述第一掩码图像将所述黑白图像和所述彩色图像进行融合:
判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值,则融合图像中对应区域的亮度值为所述黑白图像对应区域的亮度值;否则,融合图像中对应区域的亮度值通过以下公式计算得到:
融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255-第一掩码图像中的掩码)*黑白图像的亮度值。
所述图像过曝优化装置还包括:腐蚀模块,对所述第一掩码图像进行腐蚀。
所述图像过曝优化装置还包括:膨胀模块,对所述第一掩码图像进行膨胀。
所述图像过曝优化装置还包括:高斯模块,对所述第一掩码图像进行高斯模糊。
所述过度曝光检测模块检测点光源过度曝光区域的方法为: 检测所述黑白图像中各像素的像素值,像素值大于阈值的所有像素组成的区域则为点光源过度曝光区域。
本发明的有益效果是:本发明中的方案通过对黑白图像中的点光源过度曝光区域进行处理,使得融合图像在包含黑白图像暗处的细节和动态范围的同时, 在亮处又不会存在过度曝光和细节丢失的问题。
附图说明
图1为本发明中图像过曝优化方法的一个实施例的流程图;
图2为本发明中图像过曝优化装置的一个实施例的框图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。
如图1所示,一种图像过曝优化方法,包括:
步骤一、通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像。
步骤二、检测并标记所述黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入所述黑白图像的第一掩码图像。
所述点光源过度曝光区域的检测方法为:检测所述黑白图像中各像素的像素值,像素值大于阈值的所有像素组成的区域则为点光源过度曝光区域。
步骤三、对所述第一掩码图像进行腐蚀,去掉面积小于预设值的点光源过度曝光区域;面积小于预设值的点光源过度曝光区域可以认为是正常的点光源成像。
步骤四、对腐蚀后的第一掩码图像进行膨胀;由于一般点光源周围都有一圈光晕,在去掉点光源的同时,也需要同时去掉和它对应的光晕部分,通过进行膨胀,将点光源光晕包进去。
步骤五、对膨胀后的第一掩码图像进行高斯模糊;通过高斯模糊处理,平滑第一掩码图像的边缘区域。
步骤六、根据所述第一掩码图像将所述黑白图像和所述彩色图像进行融合:
判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值(本实施例中设定值为0),则融合图像中对应区域的亮度值为所述黑白图像对应区域的亮度值;否则(即掩码为1-254),融合图像中对应区域的亮度值通过以下公式计算得到:
融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255-第一掩码图像中的掩码)*黑白图像的亮度值。
如图2所示,一种图像过曝优化装置,包括摄像模块、过度曝光检测模块和融合模块。
所述摄像模块,通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像;
所述过度曝光检测模块,检测并标记所述黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入所述黑白图像的第一掩码图像。
所述过度曝光检测模块检测点光源过度曝光区域的方法为: 检测所述黑白图像中各像素的像素值,像素值大于阈值的所有像素组成的区域则为点光源过度曝光区域。
所述融合模块,根据所述第一掩码图像将所述黑白图像和所述彩色图像进行融合:
判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值(本实施例中设定值为0),则融合图像中对应区域的亮度值为所述黑白图像对应区域的亮度值;否则(即掩码为1-254),融合图像中对应区域的亮度值通过以下公式计算得到:
融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255-第一掩码图像中的掩码)*黑白图像的亮度值。
所述图像过曝优化装置还包括:腐蚀模块,对所述第一掩码图像进行腐蚀,去掉面积小于预设值的点光源过度曝光区域;面积小于预设值的点光源过度曝光区域可以认为是正常的点光源成像。
所述图像过曝优化装置还包括:膨胀模块,对所述第一掩码图像进行膨胀;由于一般点光源周围都有一圈光晕,在去掉点光源的同时,也需要同时去掉和它对应的光晕部分,通过进行膨胀,将点光源光晕包进去。
所述图像过曝优化装置还包括:高斯模块,对所述第一掩码图像进行高斯模糊;通过高斯模糊处理,平滑第一掩码图像的边缘区域。
以上所述仅是本发明的优选实施方式,应当理解本发明并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文所述构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。
Claims (6)
1.一种图像过曝优化方法,其特征在于,包括:
通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像;
检测并标记所述黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入所述黑白图像的第一掩码图像;
根据所述第一掩码图像将所述黑白图像和所述彩色图像进行融合:判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值,则融合图像中对应区域的亮度值为所述黑白图像对应区域的亮度值;否则,融合图像中对应区域的亮度值通过以下公式计算得到:
融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255-第一掩码图像中的掩码)*黑白图像的亮度值;
对所述第一掩码图像进行腐蚀,去掉面积小于预设值的点光源过度曝光区域;面积小于预设值的点光源过度曝光区域可以认为是正常的点光源成像;
对腐蚀后的第一掩码图像进行膨胀;由于一般点光源周围都有一圈光晕,在去掉点光源的同时,也需要同时去掉和它对应的光晕部分,通过进行膨胀,将点光源光晕包进去。
2.根据权利要求1所述的一种图像过曝优化方法,其特征在于,所述图像过曝优化方法还包括:对所述第一掩码图像进行高斯模糊。
3.根据权利要求1所述的一种图像过曝优化方法,其特征在于,所述点光源过度曝光区域的检测方法为:检测所述黑白图像中各像素的像素值,像素值大于阈值的所有像素组成的区域为点光源过度曝光区域。
4.一种图像过曝优化装置,其特征在于,包括:
摄像模块,通过黑白摄像头和彩色摄像头,获取同一场景下的黑白图像和彩色图像;
过度曝光检测模块,检测并标记所述黑白图像中的点光源过度曝光区域,并将标记的点光源过度曝光区域存入所述黑白图像的第一掩码图像;
融合模块,根据所述第一掩码图像将所述黑白图像和所述彩色图像进行融合:
判断第一掩码图像中各像素区域的掩码是否为设定值,若掩码为设定值,则融合图像中对应区域的亮度值为所述黑白图像对应区域的亮度值;否则,融合图像中对应区域的亮度值通过以下公式计算得到:
融合图像的亮度值=第一掩码图像中的掩码*彩色图像的亮度值+(255-第一掩码图像中的掩码)*黑白图像的亮度值;
所述图像过曝优化装置还包括:腐蚀模块,对所述第一掩码图像进行腐蚀;去掉面积小于预设值的点光源过度曝光区域;面积小于预设值的点光源过度曝光区域可以认为是正常的点光源成像;
所述图像过曝优化装置还包括:膨胀模块,对所述第一掩码图像进行膨胀;由于一般点光源周围都有一圈光晕,在去掉点光源的同时,也需要同时去掉和它对应的光晕部分,通过进行膨胀,将点光源光晕包进去。
5.根据权利要求4所述的一种图像过曝优化装置,其特征在于,所述图像过曝优化装置还包括:高斯模块,对所述第一掩码图像进行高斯模糊。
6.根据权利要求4所述的一种图像过曝优化装置,其特征在于,所述过度曝光检测模块检测点光源过度曝光区域的方法为: 检测所述黑白图像中各像素的像素值,像素值大于阈值的所有像素组成的区域则为点光源过度曝光区域。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610955056.1A CN106534677B (zh) | 2016-10-27 | 2016-10-27 | 一种图像过曝优化方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610955056.1A CN106534677B (zh) | 2016-10-27 | 2016-10-27 | 一种图像过曝优化方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106534677A CN106534677A (zh) | 2017-03-22 |
CN106534677B true CN106534677B (zh) | 2019-12-17 |
Family
ID=58326863
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610955056.1A Active CN106534677B (zh) | 2016-10-27 | 2016-10-27 | 一种图像过曝优化方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106534677B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113395409B (zh) * | 2017-12-15 | 2022-10-11 | 浙江舜宇智能光学技术有限公司 | 应用于多目相机的视频同步方法 |
CN108364275B (zh) * | 2018-03-02 | 2022-04-12 | 成都西纬科技有限公司 | 一种图像融合方法、装置、电子设备及介质 |
CN110717878B (zh) * | 2019-10-12 | 2022-04-15 | 北京迈格威科技有限公司 | 图像融合方法、装置、计算机设备和存储介质 |
CN110611750B (zh) * | 2019-10-31 | 2022-03-22 | 北京迈格威科技有限公司 | 一种夜景高动态范围图像生成方法、装置和电子设备 |
CN111064899B (zh) * | 2019-12-06 | 2021-06-08 | 成都华为技术有限公司 | 一种曝光参数的调节方法及装置 |
CN115066880A (zh) * | 2020-02-12 | 2022-09-16 | Oppo广东移动通信有限公司 | 生成捕获图像的方法及电子设备 |
CN113810601B (zh) * | 2021-08-12 | 2022-12-20 | 荣耀终端有限公司 | 终端的图像处理方法、装置和终端设备 |
CN113810603B (zh) * | 2021-08-12 | 2022-09-09 | 荣耀终端有限公司 | 点光源图像检测方法和电子设备 |
CN117745563B (zh) * | 2024-02-21 | 2024-05-14 | 深圳市格瑞邦科技有限公司 | 一种双摄像头结合的平板电脑增强显示方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103595982A (zh) * | 2013-11-07 | 2014-02-19 | 天津大学 | 基于灰度和彩色两颗传感器的彩色图像采集装置 |
CN103870090A (zh) * | 2012-12-10 | 2014-06-18 | 腾讯科技(深圳)有限公司 | 便携数据处理设备内置相机的启动拍摄装置和方法 |
CN104769930A (zh) * | 2012-09-19 | 2015-07-08 | 谷歌公司 | 具有多个像素阵列的成像装置 |
CN105338338A (zh) * | 2014-07-17 | 2016-02-17 | 诺基亚技术有限公司 | 用于成像条件检测的方法和装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7834905B2 (en) * | 2002-06-18 | 2010-11-16 | Bayerische Motoren Werke Aktiengesellschaft | Method and system for visualizing the environment of a vehicle with a distance-dependent merging of an infrared and a visual image |
-
2016
- 2016-10-27 CN CN201610955056.1A patent/CN106534677B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104769930A (zh) * | 2012-09-19 | 2015-07-08 | 谷歌公司 | 具有多个像素阵列的成像装置 |
CN103870090A (zh) * | 2012-12-10 | 2014-06-18 | 腾讯科技(深圳)有限公司 | 便携数据处理设备内置相机的启动拍摄装置和方法 |
CN103595982A (zh) * | 2013-11-07 | 2014-02-19 | 天津大学 | 基于灰度和彩色两颗传感器的彩色图像采集装置 |
CN105338338A (zh) * | 2014-07-17 | 2016-02-17 | 诺基亚技术有限公司 | 用于成像条件检测的方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN106534677A (zh) | 2017-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106534677B (zh) | 一种图像过曝优化方法及装置 | |
CN108668093B (zh) | Hdr图像的生成方法及装置 | |
CN105208281B (zh) | 一种夜景拍摄方法及装置 | |
JP6160004B2 (ja) | シーン認識方法および装置 | |
RU2338330C2 (ru) | Устройство обработки изображения, способ обработки изображения и компьютерная программа | |
CN106570838B (zh) | 一种图像亮度优化方法及装置 | |
CN108364275B (zh) | 一种图像融合方法、装置、电子设备及介质 | |
CN110519485B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN111209775B (zh) | 信号灯图像处理方法、装置、设备及存储介质 | |
US20190347776A1 (en) | Image processing method and image processing device | |
US20200007732A1 (en) | Image processing method and electronic device | |
CN106550227B (zh) | 一种图像饱和度调整方法及装置 | |
JP4595569B2 (ja) | 撮像装置 | |
CN107682611B (zh) | 对焦的方法、装置、计算机可读存储介质和电子设备 | |
JP2011041056A (ja) | 撮像装置及び撮像方法 | |
JPWO2010116478A1 (ja) | 画像処理装置および画像処理方法、画像処理プログラム | |
WO2013114803A1 (ja) | 画像処理装置及びその画像処理方法、並びにコンピュータ・プログラム、および画像処理システム | |
CN111405177B (zh) | 图像处理方法、终端及计算机可读存储介质 | |
CN103440658B (zh) | 自动去除照片紫边的方法及装置 | |
JP2009063674A (ja) | 撮像装置及びフラッシュ制御方法 | |
US20050147318A1 (en) | Image processing apparatus and method | |
WO2013114802A1 (ja) | 画像処理装置及びその画像処理方法、並びにコンピュータ・プログラム、および画像処理システム | |
US20160344932A1 (en) | Omnidirectional camera system | |
TW201347527A (zh) | 高動態範圍影像的處理方法 | |
US20230085693A1 (en) | Image capturing device and image calculation method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |