CN107786814A - 一种基于宽动态的图像处理方法、装置及曝光电路 - Google Patents

一种基于宽动态的图像处理方法、装置及曝光电路 Download PDF

Info

Publication number
CN107786814A
CN107786814A CN201610720722.3A CN201610720722A CN107786814A CN 107786814 A CN107786814 A CN 107786814A CN 201610720722 A CN201610720722 A CN 201610720722A CN 107786814 A CN107786814 A CN 107786814A
Authority
CN
China
Prior art keywords
image
exposure
image element
short
element circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610720722.3A
Other languages
English (en)
Other versions
CN107786814B (zh
Inventor
王艳侠
洪晖潞
陈树毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201610720722.3A priority Critical patent/CN107786814B/zh
Publication of CN107786814A publication Critical patent/CN107786814A/zh
Application granted granted Critical
Publication of CN107786814B publication Critical patent/CN107786814B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • H04N25/589Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例公开了一种基于宽动态的图像处理方法、装置及曝光电路,该方法包括:图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,并且该每个第一像素电路和每个第二像素电路在接收到各自对应的长曝光复位信号和短曝光复位信号后,同时开始曝光,生成第一长曝光图像和第一短曝光图像,减少了开始曝光的时间间隔,解决了宽动态数据中存在运动瑕疵。然后为了形成效果较好的图像,将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。

Description

一种基于宽动态的图像处理方法、装置及曝光电路
技术领域
本发明涉及图像处理技术领域,特别涉及一种基于宽动态的图像处理方法、装置及曝光电路。
背景技术
宽动态技术是在非常强烈的对比下让摄像机看到影像的特色而运用的一种技术,宽动态技术使场景中亮部细节和暗部细节同时都能看得特别清楚。WDR(Wide DynamicRange,宽动态范围)是图像能分辨的最亮的亮度信号值与能分辨的最暗的亮光信号值的比值。宽动态范围越大,其所能表现的层次越丰富,能同时记录的亮部细节和暗部细节越丰富。
传统的宽动态技术是利用多帧合成的机制,即将进行长曝光所形成的曝光图像和进行短曝光所形成的曝光图像进行叠加获得宽动态数据。
利用传统的宽动态技术的图像处理***,针对每个像素会进行两次曝光,包括一次长曝光和一次短曝光,然后根据两次曝光所生成的长曝光图像和短曝光图像进行筛选和叠加,得到有效曝光图像,进而进行后续的图像处理流程。其中,曝光依赖于像素电路。现有技术中,每个像素点对应一个像素电路。传统的像素电路如图1所示,具体曝光过程为:在像素开始进行曝光时,图像处理器向该像素电路发送复位信号RST启动复位操作,以使光电二极管PD的输出电压被置为0;光电二极管PD吸收光信号进行有效电荷的累计,当到达曝光时间阈值后,有效电荷的累计结束;光电二极管PD所累计的有效电荷经过源极跟随器T1转换成模拟电压信号,实现光电转换;行选通脉冲RS启动选址开关T2,转换成的模拟电压信号通过列线输出,该模拟电压信号经过模/数转换,生成数字信号(长曝光图像),完成一次曝光。然后再进行下一次曝光,以生成短曝光图像。进行两次曝光就会有两次RST复位操作,并进行两次光电转换过程。把两次曝光所形成的曝光图像进行叠加,得到有效曝光图像。
可见,两次RST复位操作之间有时间差,针对移动的物体,进行长曝光所形成的曝光图像和进行短曝光所形成的曝光图像合成的宽动态数据中会出现运动瑕疵,并且曝光图像与曝光图像之间开始曝光时间的时间间隔越大,运动瑕疵越明显。时间差越大,像素开始进行曝光的时间间隔越大,所形成的宽动态数据中运动瑕疵越明显。
发明内容
本发明实施例公开了一种基于宽动态的图像处理方法、装置及曝光电路,以减少开始曝光的时间间隔,解决宽动态数据中存在运动瑕疵的问题。具体方案如下:
一方面,本发明实施例提供了一种基于宽动态的图像处理方法,应用于图像处理***,所述图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,所述方法包括:
获得针对每个像素点的长曝光复位信号和短曝光复位信号;
将长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成每个像素点的第一长曝光图像和第一短曝光图像;
将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
可选的,所述将第一长曝光图像和第一短曝光图像进行叠加,获得有效曝光图像,包括:
根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像;
将所述第二曝光图像的第二亮度值与预设阈值范围相比;
如果第二亮度值大于所述预设阈值范围中的最大值,将所述第一短曝光图像确定为可用曝光图像;
如果第二亮度值小于所述预设阈值范围中的最小值,将所述第一长曝光图像确定为可用曝光图像;
如果第二亮度值处于预设阈值范围内,根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像;
利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像。
可选的,所述根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像,包括:
将所述第一长曝光图像和所述第一短曝光图像按预定比例进行融合,得到可用曝光图像。
可选的,所述根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像,包括:获得所述第一短曝光图像的第一亮度值;将所述第一亮度值乘以所述曝光比,得到与所述第一长曝光图像数据量一致的第二短曝光图像。
可选的,所述图像处理***中每个像素点对应两个第一像素电路和两个第二像素电路;所述像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
可选的,所述利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像所利用公式为:
Y=X1*K1+X2*K2+X3*K3+X4*K4
其中,所述Y表示所述有效曝光图像;所述X1和X4分别表示所述两个第一像素电路分别对应像素点一条对角线上的两个区域的亮度值、X2和X3分别表示所述两个第二像素电路分别对应像素点一条对角线上的两个区域的亮度值;所述K1、K2、K3和K4分别表示预先为所述X1、所述X2、所述X3以及所述X4设置的权重系数;其中,当所述可用曝光图像由所述第一短曝光图像确定时,所述X1和X4取0;当所述可用曝光图像由所述第一长曝光图像确定时,所述X2和X3取0;当所述可用曝光图像由所述第一长曝光图像和第一短曝光图像的亮度信息确定时,所述X1、X2、X3和X4为实际亮度值。
另一方面,本发明实施例提供了一种基于宽动态的图像处理装置,应用于图像处理***,所述图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,所述装置包括:
第一获得模块,用于获得针对每个像素点的长曝光复位信号和短曝光复位信号;
发送模块,用于将长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像;
第二获得模块,用于将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
可选的,所述第二获得模块包括归一化单元、比较单元、第一确定单元、第二确定单元、第三确定单元和处理单元;
所述归一化单元,用于根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像;
所述比较单元,具体用于将所述第二曝光图像的第二亮度值与预设阈值范围相比;
所述第一确定单元,用于如果第二亮度值大于所述预设阈值范围中的最大值,将所述第一短曝光图像确定为可用曝光图像;
所述第二确定单元,用于如果第二亮度值小于所述预设阈值范围中的最小值,将所述第一长曝光图像确定为可用曝光图像;
所述第三确定单元,用于如果第二亮度值处于预设阈值范围内,根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像;
所述处理单元,用于利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像。
可选的,所述第三确定单元,具体用于将所述第一长曝光图像和所述第一短曝光图像按预定比例进行融合,得到可用曝光图像。
可选的,所述归一化单元,具体用于获得所述第一短曝光图像的第一亮度值;将所述第一亮度值乘以所述曝光比,得到与所述第一长曝光图像数据量一致的第二短曝光图像。
可选的,所述图像处理***中每个像素点对应两个第一像素电路和两个第二像素电路;所述像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
可选的,所述利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像所利用公式为:
Y=X1*K1+X2*K2+X3*K3+X4*K4
其中,所述Y表示所述有效曝光图像;所述X1和X4分别表示所述两个第一像素电路分别对应像素点一条对角线上的两个区域的亮度值、X2和X3分别表示所述两个第二像素电路分别对应像素点一条对角线上的两个区域的亮度值;所述K1、K2、K3和K4分别表示预先为所述X1、所述X2、所述X3以及所述X4设置的权重系数;其中,当所述可用曝光图像由所述第一短曝光图像确定时,所述X1和X4取0;当所述可用曝光图像由所述第一长曝光图像确定时,所述X2和X3取0;当所述可用曝光图像由所述第一长曝光图像和第一短曝光图像的亮度信息确定时,所述X1、X2、X3和X4为实际亮度值。
另一方面,本发明实施例提供了一种曝光电路,至少包括一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路;
所述每个第一像素电路与图像处理器相连,接收所述图像处理器发送的长曝光复位信号进行长曝光;
所述每个第二像素电路与所述图像处理器相连,接收所述图像处理器发送的短曝光复位信号进行短曝光。
可选的,所述曝光电路对应两个第一像素电路和两个第二像素电路;每一像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
可选的,所述两个第一像素电路的第一列线相连,所述两个第一像素电路的第一行选通信号线相连;
所述两个第二像素电路的第二列线相连,所述两个第二像素电路的第二行选通信号线相连。
可选的,所述第一像素电路中包括第一光电二极管、第一源极跟随器和第一选址开关;
所述第一光电二极管,用于在所述第一像素电路接收到所述图像处理器发送的长曝光复位信号后,将输出电压置0,并吸收光信号进行第一有效电荷的累计;
所述第一源极跟随器,用于将所述第一光电二极管所累计的第一有效光电荷转换成第一模拟电压信号;
所述第一选址开关,用于在接收到所述图像处理器发送的第一行选通信号后,将所述第一源极跟随器所转换的所述第一模拟电压信号通过第一列线输出;
所述第二像素电路中包括第二光电二极管、第二源极跟随器和第二选址开关;
所述第二光电二极管,用于在所述第二像素电路接收到所述图像处理器发送的短曝光复位信号后,将输出电压置0,并吸收光信号进行第二有效电荷的累计;
所述第二源极跟随器,用于将所述第二光电二极管所累计的第二有效光电荷转换成第二模拟电压信号;
所述第二选址开关,用于在接收到所述图像处理器发送的第二行选通信号后,将所述第二源极跟随器所转换的所述第二模拟电压信号通过第二列线输出。
可选的,所述第一像素电路中还包括第一模/数转换器;
所述第一模/数转换器,用于将从所述第一列线输出的所述第一模拟电压信号转换成第一数字信号输出至所述图像处理器;
所述第二像素电路中还包括第二模/数转换器;
所述第二模/数转换器,用于将从所述第二列线输出的所述第二模拟电压信号转换成第二数字信号输出至所述图像处理器。
在本方案中,图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,获得针对每个像素点的长曝光复位信号和短曝光复位信号,同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像,减少了开始曝光的时间间隔,解决了宽动态数据中存在运动瑕疵,然后为了形成效果较好的图像,将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一种传统的像素电路的示意图;
图2为本发明实施例所提供的一种基于宽动态的图像处理方法的流程示意图;
图3为图2所示步骤S203的一种具体实现流程示意图;
图4为本发明实施例所提供的一种基于宽动态的图像处理装置的结构示意图;
图5为图4所示装置中第二获得模块的一种具体结构示意图;
图6为本发明实施例所提供的一种曝光电路的结构示意图;
图7为本发明实施例所提供的一种曝光电路的电路示意图;
图8为本发明实施例所提供的一种第一像素电路和第二像素电路的分布示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供了一种基于宽动态的图像处理方法、装置及曝光电路,以减少开始曝光的时间间隔,解决宽动态数据中存在运动瑕疵的问题。
下面首先对本发明实施例所提供的一种基于宽动态的图像处理方法进行介绍。
需要说明的是,本发明实施例所提供的基于宽动态的图像处理方法,可以应用于图像处理***,所述图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路。其中,该第一像素电路和第二像素电路各自对应的曝光时间可以通过上层应用软件进行控制。
如图2所示,本发明实施例所提供的基于宽动态的图像处理方法,可以包括如下步骤:
S201:获得针对每个像素点的长曝光复位信号和短曝光复位信号;
可以理解的是,当宽动态功能开启后,所述图像处理***获得针对每个像素点的长曝光复位信号和短曝光复位信号,其中,该长曝光复位信号与该短曝光复位信号可以相同,也可以不同。在一种具体实现中,该长曝光复位信号与该短曝光复位信号可以均为复位信号RST。
并且,可以采用现有技术获得该长曝光复位信号和短曝光复位信号,在此不做赘述。
S202:将长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像;
为了保证每个第一像素电路和每个第二像素电路能够同时进行曝光,消除开始曝光的时间间隔,解决宽动态数据中存在运动瑕疵的问题。图像处理***将所获得的长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路。每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像。
其中,对于每个第一像素电路和每个第二像素电路在进行曝光时,与现有技术相同,在此不做赘述。
S203:将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
可以理解的是,对于第一短曝光图像来说,其曝光时间较短,像素点可能会出现曝光不足的现象,此时,会使对应部分所形成的图像过暗,图片的暗部细节得不到很好的体现。对于第一长曝光图像来说,其曝光时间较长,像素点可能会出现曝光超饱和的现象,此时,会使对应部分所形成的图像过亮,图片的亮部细节也得不到很好的体现。为了形成效果较好的图像,更能充分地完整地显示图像中的亮部细节和暗部细节,需要根据所生成的第一长曝光图像和第一短曝光图像确定出有效曝光图像,然后进行后续的图像处理流程。其中,对每个像素点的第一长曝光图像和第一短曝光图像进行叠加可以采用现有技术,在此不做赘述。
应用本发明实施例,图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,获得针对每个像素点的长曝光复位信号和短曝光复位信号,同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像,减少了开始曝光的时间间隔,解决了宽动态数据中存在运动瑕疵,然后为了形成效果较好的图像,将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
在一种具体实现方式中,如图3所示,所述将第一长曝光图像和第一短曝光图像进行叠加,获得有效曝光图像(S203),包括:
S301:根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像;
S302:将所述第二曝光图像的第二亮度值与预设阈值范围相比;
S303:如果第二亮度值大于所述预设阈值范围中的最大值,将所述第一短曝光图像确定为可用曝光图像;
S304:如果第二亮度值小于所述预设阈值范围中的最小值,将所述第一长曝光图像确定为可用曝光图像;
S305:如果第二亮度值处于预设阈值范围内,根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像;
S306:利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像。
由于第一短曝光图像与第一长曝光图像的曝光时间不同,其所呈现的图像亮度存在差异,为了保证能够更好的根据第一短曝光图像与第一长曝光图像,确定出更好的可用曝光图像。首先根据第一长曝光图像和第一短曝光图像的曝光比,对第一短曝光图像进行归一化,将第一短曝光图像转换到与第一长曝光图像同一数据量上,得到第二短曝光图像。其中,第一长曝光图像和第一短曝光图像的曝光比可以根据现有技术确定,在此不做赘述。并且,对第一短曝光图像进行归一化也可以采用现有技术。举例而言,进行归一化之前,对于第一长曝光图像来说,其对应的数据量可能是16bit,而对于第一短曝光图像来说,其对应的数据量可能是12bit。根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化后,可以得到数据量为16bit的第二短曝光图像。
此时,可以直接将第二曝光图像的第二亮度值与预设阈值范围相比。其中,该预设阈值范围可以通过现有技术确定。并且可以理解的是,当第二亮度值大于预设阈值范围中的最大值时,可以表明第一长曝光图像中的对应像素点可能会出现曝光超饱和的现象,为了使可用曝光图像的质量更好,保证曝光图像的亮部细节的完整体现,可以确定第一短曝光图像为可用曝光图像;当第二亮度值小于预设阈值范围中的最小值时,可以表明第一短曝光图像中的对应像素点可能会出现曝光不充足的现象,为了使可用曝光图像的质量更好,保证曝光图像的暗部细节的完整体现,可以确定第一长曝光图像为可用曝光图像;当第二亮度值处于预设阈值范围内时,可以表明第一短曝光图像对应的像素点曝光充足,并且,第一长曝光图像对应的像素点曝光未超饱和,此时可以根据第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像,即可用曝光图像对应像素点的取值通过第一长曝光图像和第一短曝光图像的对应像素点的亮度信息确定。
需要说明的是,当第二亮度值处于预设阈值范围内时,可以表明第一短曝光图像对应的像素点曝光充足,并且,第一长曝光图像对应的像素点曝光未超饱和。此时,可将该第一短曝光图像和第一长曝光图像对应像素点按预定比例进行融合,得到每个像素点的可用曝光图像。
对于每一像素点来说,同时进行长短曝光,每一像素点进行短曝光的部分,形成第一短曝光图像,每一像素点进行长曝光的部分,形成第一长曝光图像。可以理解的是,每一像素点进行长曝光的部分,由于未进行短曝光,在所形成的第一短曝光图像中对应部分未生成亮度;每一像素点进行短曝光的部分,由于未进行长曝光,在所形成的第一长曝光图像中对应部分未生成亮度。为了保证根据第一长曝光图像和第一短曝光图像所确定的可用曝光图像的完整性以及亮度均匀性,可以利用预设的亮度均化方式对可用曝光图像进行处理,得到亮度均化的有效曝光图像。
可以理解的是,每个像素点的可用曝光图像有三种情况,其一为:第二短曝光图像对应像素点的第二亮度值大于预设阈值范围中的最大值时,对应的像素点的取值为第一短曝光图像的对应像素点的值;其二为:第二短曝光图像对应像素点的第二亮度值小于预设阈值范围中的最小值时,对应像素点的取值为第一长曝光图像的对应像素点的值;其三为:第二短曝光图像对应像素点的第二亮度值处于预设阈值范围内时,对应像素点的取值为根据第一长曝光图像和第一短曝光图像的亮度信息确定的值。
在一种具体实现方式中,所述根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像,包括:
获得所述第一短曝光图像的第一亮度值;将所述第一亮度值乘以所述曝光比,得到与所述第一长曝光图像数据量一致的第二短曝光图像。
由于第一短曝光图像与第一长曝光图像的曝光时间不同,所对应像素点的亮度值的数据量会存在差异,为了确定出更好的可用曝光图像,可以利用现有技术确定第一长曝光图像和第一短曝光图像的曝光比,将该第一短曝光图像转换为与第一长曝光图像数据量一致的第二短曝光图像,以便于对可用曝光图像的筛选。举例而言,第一长曝光图像数据量为16bit,第一短曝光图像数据量为12bit,其曝光比为4:3(16:12),用所述第一短曝光图像所对应的第一亮度值乘以该曝光比4:3,得到数据量为16bit的第二短曝光图像。
另外的,也可以将第一长曝光图像转换到与第一短曝光图像数据量一致的第二长曝光图像,然后根据该第二长曝光图像对应的第三亮度值,进行后续的可用曝光图像的确定,这也是可以的。
在一种具体实现方式中,所述图像处理***中每个像素点对应两个第一像素电路和两个第二像素电路;所述像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
如图8所示,为了使得每个像素点中曝光亮度均衡,可以将每个像素点平均划分为四个区域,其中,两个区域(区域1和区域4,或者区域2和区域3)进行长曝光,两个区域(区域2和区域3,或者区域1和区域4)进行短曝光。进行长曝光的两个第一像素电路分别对应像素点一条对角线上的两个区域,如:图8中的区域1和区域4,进行短曝光的两个第二像素电路分别对应像素点另一条对角线上的两个区域,如:图8中的区域2和区域3。并且为了保证曝光电路的同步,两个第一像素电路的复位端相连,两个第二像素电路的复位端相连。并且为了减少长曝光和短曝光之间的时间差,避免宽动态数据中存在运动瑕疵的问题,该第一像素电路和第二像素电路同时接收复位信号,同时开始曝光。
在一种具体实现方式中,所述利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像所利用公式为:
Y=X1*K1+X2*K2+X3*K3+X4*K4
其中,所述Y表示所述有效曝光图像;所述X1和X4分别表示所述两个第一像素电路分别对应像素点一条对角线上的两个区域的亮度值、X2和X3分别表示所述两个第二像素电路分别对应像素点一条对角线上的两个区域的亮度值;所述K1、K2、K3和K4分别表示预先为所述X1、所述X2、所述X3以及所述X4设置的权重系数;其中,当所述可用曝光图像由所述第一短曝光图像确定时,所述X1和X4取0;当所述可用曝光图像由所述第一长曝光图像确定时,所述X2和X3取0;当所述可用曝光图像由所述第一长曝光图像和第一短曝光图像的亮度信息确定时,所述X1、X2、X3和X4为实际亮度值。
其中,K1、K2、K3和K4可以根据实际情况进行设定,在此不做限定。可以理解的是,在对可用曝光图像进行处理时,是分别对应每一像素点进行亮度均化的。
相应于上述方法实施例,本发明实施例提供了一种基于宽动态的图像处理装置,可以应用于图像处理***,所述图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,如图4所示,所述装置可以包括:
第一获得模块401,用于获得针对每个像素点的长曝光复位信号和短曝光复位信号;
发送模块402,用于将长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像;
第二获得模块403,用于将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
应用本发明实施例,图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,获得针对每个像素点的长曝光复位信号和短曝光复位信号,同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像,减少了开始曝光的时间间隔,解决了宽动态数据中存在运动瑕疵,然后为了形成效果较好的图像,将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
在一种具体实现方式中,如图5所示,所述第二获得模块403包括归一化单元501、比较单元502、第一确定单元503、第二确定单元504、第三确定单元505和处理单元506;
所述归一化单元501,用于根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像;
所述比较单元502,具体用于将所述第二曝光图像的第二亮度值与预设阈值范围相比;
所述第一确定单元503,用于如果第二亮度值大于所述预设阈值范围中的最大值,将所述第一短曝光图像确定为可用曝光图像;
所述第二确定单元504,用于如果第二亮度值小于所述预设阈值范围中的最小值,将所述第一长曝光图像确定为可用曝光图像;
所述第三确定单元505,用于如果第二亮度值处于预设阈值范围内,根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像;
所述处理单元506,用于利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像。
在一种具体实现方式中,所述第三确定单元505,具体用于将所述第一长曝光图像和所述第一短曝光图像按预定比例进行融合,得到可用曝光图像。
在一种具体实现方式中,所述归一化单元501,具体用于获得所述第一短曝光图像的第一亮度值;
将所述第一亮度值乘以所述曝光比,得到与所述第一长曝光图像数据量一致的第二短曝光图像。
在一种具体实现方式中,所述图像处理***中每个像素点对应两个第一像素电路和两个第二像素电路;所述像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
在一种具体实现方式中,所述利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像所利用公式为:
Y=X1*K1+X2*K2+X3*K3+X4*K4
其中,所述Y表示所述有效曝光图像;所述X1和X4分别表示所述两个第一像素电路分别对应像素点一条对角线上的两个区域的亮度值、X2和X3分别表示所述两个第二像素电路分别对应像素点一条对角线上的两个区域的亮度值;所述K1、K2、K3和K4分别表示预先为所述X1、所述X2、所述X3以及所述X4设置的权重系数;其中,当所述可用曝光图像由所述第一短曝光图像确定时,所述X1和X4取0;当所述可用曝光图像由所述第一长曝光图像确定时,所述X2和X3取0;当所述可用曝光图像由所述第一长曝光图像和第一短曝光图像的亮度信息确定时,所述X1、X2、X3和X4为实际亮度值。
应用本发明实施例,可以实现每个第一像素电路和每个第二像素电路同时开始曝光,并且得到亮度均匀的有效曝光图像。
相应于上述方法实施例,本发明实施例提供了一种曝光电路,如图6所示,所述曝光电路至少包括一个用于进行长曝光的第一像素电路610和一个用于进行短曝光的第二像素电路620;
所述每个第一像素电路610与图像处理器600相连,接收所述图像处理器600发送的长曝光复位信号进行长曝光;
所述每个第二像素电路620与所述图像处理器600相连,接收所述图像处理器600发送的短曝光复位信号进行短曝光。
需要说明的是,图6所示的所述每个第一像素电路610与所述图像处理器600之间的连线、所述每个第二像素电路620与所述图像处理器600之间的连线仅仅用于表明存在通信连接关系,并不代表实体连线。其中,本发明所提供的曝光电路可以对应应用于每一个像素点中。
在实现宽动态功能的电路中,需要对目标物体分别进行长曝光和短曝光两次曝光。本发明实施例中图像处理器600通过向每个第一像素电路610发送长曝光复位信号,启动每个第一像素电路610开始进行长曝光,通过向每个第二像素电路620发送短曝光复位信号,启动每个第二像素电路620开始进行短曝光。其中,该长曝光复位信号和短曝光复位信号可以相同,也可以不同。在一种具体实现方式中,该长曝光复位信号和短曝光复位信号可以均为复位信号RST。
需要说明的是,该复位信号RST可以是高电平有效,即复位信号RST为高电平时每个第一像素电路610或每个第二像素电路620开始进行曝光;也可以是低电平有效,即复位信号RST为低电平时每个第一像素电路610或每个第二像素电路620开始进行曝光。
另外,可以理解的是,图像处理器600可以同时向每个第一像素电路610和每个第二像素电路620发送对应的长曝光复位信号和短曝光复位信号。以使每个第一像素电路610和每个第二像素电路620同时开始曝光,消除长曝光和短曝光之间的开始曝光时间差。
所述图像处理器600可以采用SOC图像处理芯片。可以理解的是,当未开启宽动态功能时,所述图像处理器600的输出长曝光复位信号或短曝光复位信号的管脚可以处于悬空或接地的状态,当开启宽动态功能时,所述图像处理器600的输出长曝光复位信号的管脚接入每个第一像素电路610,短曝光复位信号的管脚接入每个第二像素电路620。每个管脚的接入方式可以与现有的接入方式相同。另外,需要强调的是,本发明实施例中的“第一像素电路”中的“第一”和“第二像素电路”中的“第二”仅仅用于从命名上区分不同的像素电路,并不具有任何限定意义。
应用本发明实施例,该曝光电路中至少包括一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路;每个第一像素电路与图像处理器相连,接收图像处理器发送的长曝光复位信号进行长曝光;每个第二像素电路与所述图像处理器相连,接收图像处理器发送的短曝光复位信号进行短曝光,该每个第一像素电路和每个第二像素电路可以同时进行曝光,以减少两次曝光之间的时间差。
在一种具体实现方式中,如图7所示,所述曝光电路对应两个第一像素电路610和两个第二像素电路620;每一像素点被平均划分为四个区域;所述两个第一像素电路610分别对应像素点一条对角线上的两个区域;所述两个第二像素电路620分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
为了使得每个像素点中曝光亮度均衡,可以将每个像素点平均划分为四个区域,其中,两个区域进行长曝光,两个区域进行短曝光。进行长曝光的两个第一像素电路610分别对应像素点一条对角线上的两个区域,进行短曝光的两个第二像素电路620分别对应像素点另一条对角线上的两个区域。并且为了保证曝光电路开始曝光的同步,两个第一像素电路610的复位端相连,两个第二像素电路620的复位端相连。并且为了减少长曝光和短曝光之间的时间差,图像处理器600可以同时向每个第一像素电路610和每个第二像素电路620发送对应的长曝光复位信号和短曝光复位信号,该每个第一像素电路610和每个第二像素电路620可以同时接收各自对应的长曝光复位信号和短曝光复位信号,进而同时开始曝光。其中,可以理解的是,复位端为复位信号输入端。
另外,上述实施例仅作为本发明的一种示例,像素点还可以被平均划分为二个区域、八个区域或十个区域等等,这都是可以的。
在一种具体实现方式中,所述两个第一像素电路610的第一列线相连,所述两个第一像素电路610的第一行选通信号线相连;
所述两个第二像素电路620的第二列线相连,所述两个第二像素电路620的第二行选通信号线相连。
其中,对于每个第一像素电路610来说,由于每个第一像素电路610所对应的像素点的曝光位置不同,其进行长曝光后,可以共同组成长曝光信号,该两个第一像素电路610的第一列线相连,对所得到的长曝光信号作为一个完整结果进行输出。同理的,对于每个第二像素电路620来说,由于每个第二像素电路620所对应的像素点的曝光位置不同,其进行短曝光后,可以共同组成短曝光信号,该两个第二像素电路620的第二列线相连,对所得到的短曝光信号作为一个完整结果进行输出。
其中,由现有技术可知,通过行选通信号启动选址开关后,长曝光信号(或短曝光信号)才会从第一列线(第二列线)输出。为了保证每个曝光电路中所形成的曝光信号能够同时输出该两个第一像素电路610的第一行选通信号线可以相连,该两个第二像素电路620的第二行选通信号线可以相连。
在一种具体实现方式中,如图7所示,本发明实施例所提供的一种曝光电路中所包含的每一第一像素电路610和每一第二像素电路620的电路结构可以与传统的像素电路的电路结构相同。所述第一像素电路610中包括第一光电二极管PD1、第一源极跟随器T1和第一选址开关T2;
所述第一光电二极管PD1,用于在所述第一像素电路610接收到所述图像处理器600发送的长曝光复位信号后,将输出电压置0,并吸收光信号进行第一有效电荷的累计;
所述第一源极跟随器T1,用于将所述第一光电二极管PD1所累计的第一有效光电荷转换成第一模拟电压信号;
所述第一选址开关T2,用于在接收到所述图像处理器600发送的第一行选通信号后,将所述第一源极跟随器T1所转换的所述第一模拟电压信号通过第一列线输出;
所述第二像素电路中包括第二光电二极管PD2、第二源极跟随器T3和第二选址开关T4;
所述第二光电二极管PD2,用于在所述第二像素电路620接收到所述图像处理器600发送的短曝光复位信号后,将输出电压置0,并吸收光信号进行第二有效电荷的累计;
所述第二源极跟随器T3,用于将所述第二光电二极管PD2所累计的第二有效光电荷转换成第二模拟电压信号;
所述第二选址开关T4,用于在接收到所述图像处理器600发送的第二行选通信号后,将所述第二源极跟随器T3所转换的所述第二模拟电压信号通过第二列线输出。
其中,每个第一像素电路610和每个第二像素电路620的曝光时间可以通过图像处理器600控制。以第一像素电路610为例:第一像素电路610接收图像处理器600发送的长曝光复位信号后,开始进行长曝光。并且,每个第一像素电路610和每个第二像素电路620的输出各自的曝光信号的时间也可以通过图像处理器600控制。以第一像素电路610为例:第一像素电路610接收图像处理器600发送的第一行选通信号后,将所述第一源极跟随器T1所转换的所述第一模拟电压信号通过对应的第一列线输出。
为了保证每个第一像素电路610和每个第二像素电路620所形成的曝光信号可以同时输出,图像处理器600可以同时发送的第一行选通信号和第二行选通信号。这也是可以的。另外,在一种具体实现中,第一行选通信号和第二行选通信号可以相同,也可以不同,该第一行选通信号和第二行选通信号可以均为行选通脉冲RS,其中,第一行选通信号(第二行选通信号)可以为高电平有效,即高电平时第一选址开关(第二选址开关)开启;也可以是低电平有效,即低电平时第一选址开关(第二选址开关)开启;或者第一行选通信号或第二行选通信号一个高电平有效一个低电平有效,这也是可以的。
需要强调的是,当每个第一像素电路610和每个第二像素电路620复位后,将输出电压置0,由于电路中各器件的影响,可能会存在实际电压的偏移,此时需要对有效电荷进行累计,避免偏移的电压对曝光信号的影响。
在一种具体实现方式中,如图7所示,所述第一像素电路610中还可以包括第一模/数转换器;
所述第一模/数转换器,用于将所述第一模拟电压信号转换成第一数字信号;
所述第二像素电路620中还可以包括第二模/数转换器;
所述第二模/数转换器,用于将所述第二模拟电压信号转换成第二数字信号。
进一步的,所述第一模拟电压信号(第二模拟电压信号)通过对应的第一列线(第二列线)输出后,可以直接输入至连接的第一模/数转换器(第二模/数转换器)中,通过第一模/数转换器(第二模/数转换器)将第一模拟电压信号(第二模拟电压信号)转换成第一数字信号(第二数字信号)再输出至图像处理器600。或者,可以直接输入图像处理器600,进行后续的图像处理流程。
其中,该第一模/数转换器(第二模/数转换器)接入本发明实施例所提供的曝光电路的输出端。其中,如图7所示,第一模/数转换器和第二模/数转换器均可以用A/D转换器表示。
应用本发明实施例,每个第一像素电路和每个第二像素电路可以同时进行曝光,以减少两次曝光之间的时间差,并且可以实现同时对第一模拟电压信号和第二模拟电压信号进行模/数转换。
对于***/装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以存储于计算机可读取存储介质中,这里所称得的存储介质,如:ROM/RAM、磁碟、光盘等。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (17)

1.一种基于宽动态的图像处理方法,其特征在于,应用于图像处理***,所述图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,所述方法包括:
获得针对每个像素点的长曝光复位信号和短曝光复位信号;
将长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成每个像素点的第一长曝光图像和第一短曝光图像;
将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
2.根据权利要求1所述的方法,所述将第一长曝光图像和第一短曝光图像进行叠加,获得有效曝光图像,包括:
根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像;
将所述第二曝光图像的第二亮度值与预设阈值范围相比;
如果第二亮度值大于所述预设阈值范围中的最大值,将所述第一短曝光图像确定为可用曝光图像;
如果第二亮度值小于所述预设阈值范围中的最小值,将所述第一长曝光图像确定为可用曝光图像;
如果第二亮度值处于预设阈值范围内,根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像;
利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像,包括:
将所述第一长曝光图像和所述第一短曝光图像按预定比例进行融合,得到可用曝光图像。
4.根据权利要求2所述的方法,其特征在于,所述根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像,包括:
获得所述第一短曝光图像的第一亮度值;
将所述第一亮度值乘以所述曝光比,得到与所述第一长曝光图像数据量一致的第二短曝光图像。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述图像处理***中每个像素点对应两个第一像素电路和两个第二像素电路;所述像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
6.根据权利要求5所述的方法,其特征在于,所述利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像所利用公式为:
Y=X1*K1+X2*K2+X3*K3+X4*K4
其中,所述Y表示所述有效曝光图像;所述X1和X4分别表示所述两个第一像素电路分别对应像素点一条对角线上的两个区域的亮度值、X2和X3分别表示所述两个第二像素电路分别对应像素点一条对角线上的两个区域的亮度值;所述K1、K2、K3和K4分别表示预先为所述X1、所述X2、所述X3以及所述X4设置的权重系数;其中,当所述可用曝光图像由所述第一短曝光图像确定时,所述X1和X4取0;当所述可用曝光图像由所述第一长曝光图像确定时,所述X2和X3取0;当所述可用曝光图像由所述第一长曝光图像和第一短曝光图像的亮度信息确定时,所述X1、X2、X3和X4为实际亮度值。
7.一种基于宽动态的图像处理装置,其特征在于,应用于图像处理***,所述图像处理***中每个像素点至少对应一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路,所述装置包括:
第一获得模块,用于获得针对每个像素点的长曝光复位信号和短曝光复位信号;
发送模块,用于将长曝光复位信号和短曝光复位信号同时发送至对应的每个第一像素电路和每个第二像素电路,以使每个第一像素电路和每个第二像素电路同时开始曝光,生成第一长曝光图像和第一短曝光图像;
第二获得模块,用于将每个像素点的第一长曝光图像和第一短曝光图像进行叠加,获得每个像素点的有效曝光图像。
8.根据权利要求7所述的装置,其特征在于,所述第二获得模块包括归一化单元、比较单元、第一确定单元、第二确定单元、第三确定单元和处理单元;
所述归一化单元,用于根据所述第一长曝光图像和所述第一短曝光图像的曝光比,对所述第一短曝光图像进行归一化,得到与所述第一长曝光图像数据量一致的第二短曝光图像;
所述比较单元,具体用于将所述第二曝光图像的第二亮度值与预设阈值范围相比;
所述第一确定单元,用于如果第二亮度值大于所述预设阈值范围中的最大值,将所述第一短曝光图像确定为可用曝光图像;
所述第二确定单元,用于如果第二亮度值小于所述预设阈值范围中的最小值,将所述第一长曝光图像确定为可用曝光图像;
所述第三确定单元,用于如果第二亮度值处于预设阈值范围内,根据所述第一长曝光图像和第一短曝光图像的亮度信息确定可用曝光图像;
所述处理单元,用于利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像。
9.根据权利要求8所述的装置,其特征在于,所述第三确定单元,具体用于将所述第一长曝光图像和所述第一短曝光图像按预定比例进行融合,得到可用曝光图像。
10.根据权利要求8所述的装置,其特征在于,所述归一化单元,具体用于获得所述第一短曝光图像的第一亮度值;
将所述第一亮度值乘以所述曝光比,得到与所述第一长曝光图像数据量一致的第二短曝光图像。
11.根据权利要求7-10任一项所述的装置,其特征在于,所述图像处理***中每个像素点对应两个第一像素电路和两个第二像素电路;所述像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
12.根据权利要求11所述的装置,其特征在于,所述利用预设的亮度均化方式对所述可用曝光图像进行处理,得到亮度均化的有效曝光图像所利用公式为:
Y=X1*K1+X2*K2+X3*K3+X4*K4
其中,所述Y表示所述有效曝光图像;所述X1和X4分别表示所述两个第一像素电路分别对应像素点一条对角线上的两个区域的亮度值、X2和X3分别表示所述两个第二像素电路分别对应像素点一条对角线上的两个区域的亮度值;所述K1、K2、K3和K4分别表示预先为所述X1、所述X2、所述X3以及所述X4设置的权重系数;其中,当所述可用曝光图像由所述第一短曝光图像确定时,所述X1和X4取0;当所述可用曝光图像由所述第一长曝光图像确定时,所述X2和X3取0;当所述可用曝光图像由所述第一长曝光图像和第一短曝光图像的亮度信息确定时,所述X1、X2、X3和X4为实际亮度值。
13.一种曝光电路,其特征在于,至少包括一个用于进行长曝光的第一像素电路和一个用于进行短曝光的第二像素电路;
所述每个第一像素电路与图像处理器相连,接收所述图像处理器发送的长曝光复位信号进行长曝光;
所述每个第二像素电路与所述图像处理器相连,接收所述图像处理器发送的短曝光复位信号进行短曝光。
14.根据权利要求13所述的曝光电路,其特征在于,所述曝光电路对应两个第一像素电路和两个第二像素电路;每一像素点被平均划分为四个区域;所述两个第一像素电路分别对应像素点一条对角线上的两个区域;所述两个第二像素电路分别对应像素点另一条对角线上的两个区域;
所述两个第一像素电路的复位端相连;
所述两个第二像素电路的复位端相连。
15.根据权利要求14所述的曝光电路,其特征在于,
所述两个第一像素电路的第一列线相连,所述两个第一像素电路的第一行选通信号线相连;
所述两个第二像素电路的第二列线相连,所述两个第二像素电路的第二行选通信号线相连。
16.根据权利要求13-15任一项所述的曝光电路,其特征在于,所述第一像素电路中包括第一光电二极管、第一源极跟随器和第一选址开关;
所述第一光电二极管,用于在所述第一像素电路接收到所述图像处理器发送的长曝光复位信号后,将输出电压置0,并吸收光信号进行第一有效电荷的累计;
所述第一源极跟随器,用于将所述第一光电二极管所累计的第一有效光电荷转换成第一模拟电压信号;
所述第一选址开关,用于在接收到所述图像处理器发送的第一行选通信号后,将所述第一源极跟随器所转换的所述第一模拟电压信号通过第一列线输出;
所述第二像素电路中包括第二光电二极管、第二源极跟随器和第二选址开关;
所述第二光电二极管,用于在所述第二像素电路接收到所述图像处理器发送的短曝光复位信号后,将输出电压置0,并吸收光信号进行第二有效电荷的累计;
所述第二源极跟随器,用于将所述第二光电二极管所累计的第二有效光电荷转换成第二模拟电压信号;
所述第二选址开关,用于在接收到所述图像处理器发送的第二行选通信号后,将所述第二源极跟随器所转换的所述第二模拟电压信号通过第二列线输出。
17.根据权利要求13-15任一项所述的曝光电路,其特征在于,所述第一像素电路中还包括第一模/数转换器;
所述第一模/数转换器,用于将从所述第一列线输出的所述第一模拟电压信号转换成第一数字信号输出至所述图像处理器;
所述第二像素电路中还包括第二模/数转换器;
所述第二模/数转换器,用于将从所述第二列线输出的所述第二模拟电压信号转换成第二数字信号输出至所述图像处理器。
CN201610720722.3A 2016-08-24 2016-08-24 一种基于宽动态的图像处理方法、装置及曝光电路 Active CN107786814B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610720722.3A CN107786814B (zh) 2016-08-24 2016-08-24 一种基于宽动态的图像处理方法、装置及曝光电路

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610720722.3A CN107786814B (zh) 2016-08-24 2016-08-24 一种基于宽动态的图像处理方法、装置及曝光电路

Publications (2)

Publication Number Publication Date
CN107786814A true CN107786814A (zh) 2018-03-09
CN107786814B CN107786814B (zh) 2023-08-04

Family

ID=61393305

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610720722.3A Active CN107786814B (zh) 2016-08-24 2016-08-24 一种基于宽动态的图像处理方法、装置及曝光电路

Country Status (1)

Country Link
CN (1) CN107786814B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495055A (zh) * 2018-04-10 2018-09-04 中国科学院长春光学精密机械与物理研究所 获取用于高动态范围成像的多曝光图像的方法及***
CN110460781A (zh) * 2019-08-26 2019-11-15 Oppo广东移动通信有限公司 一种图像传感器、图像处理方法及存储介质
CN111491110A (zh) * 2020-04-17 2020-08-04 Oppo广东移动通信有限公司 高动态范围图像处理***及方法、电子设备和存储介质
CN111917994A (zh) * 2019-05-10 2020-11-10 三星电子株式会社 将使用不同曝光设置捕获的图像帧组合成混合图像的方法和装置
CN114513610A (zh) * 2020-11-17 2022-05-17 浙江大华技术股份有限公司 图像处理方法、图像处理装置及存储装置
WO2022140897A1 (zh) * 2020-12-28 2022-07-07 深圳元戎启行科技有限公司 图像生成方法、装置、计算机设备和存储介质
CN116095502A (zh) * 2023-04-13 2023-05-09 芯动微电子科技(珠海)有限公司 一种多曝光图像融合的方法和装置

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001016499A (ja) * 1999-06-29 2001-01-19 Hitachi Ltd 広ダイナミックレンジ撮像装置
KR20080104725A (ko) * 2007-05-29 2008-12-03 한국과학기술연구원 영상센서의 물리적 특성을 이용한 넓은 생동폭을 갖는 영상신호 처리 방법
KR20090048191A (ko) * 2007-11-09 2009-05-13 주식회사 쎄이미지 다이내믹 레인지를 확장하는 칼라 영상 처리장치 및 방법
US20110063483A1 (en) * 2009-09-16 2011-03-17 Altasens, Inc. Image sensor with wide dynamic range
CN102075688A (zh) * 2010-12-28 2011-05-25 青岛海信网络科技股份有限公司 单帧双曝光图像宽动态处理方法
CN102098444A (zh) * 2009-12-10 2011-06-15 三星电子株式会社 使用电子快门的多步曝光方法及使用该方法的照相装置
JP2011244351A (ja) * 2010-05-20 2011-12-01 Fujifilm Corp 撮像装置及び固体撮像素子の駆動制御方法
US20130033616A1 (en) * 2011-08-04 2013-02-07 Sony Corporation Imaging device, image processing method and program
US20130051700A1 (en) * 2011-08-31 2013-02-28 Sony Corporation Image processing apparatus, image processing method, and program
JP2013066145A (ja) * 2011-08-31 2013-04-11 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
US20130208138A1 (en) * 2012-02-09 2013-08-15 Aptina Imaging Corporation Imaging systems and methods for generating auto-exposed high-dynamic-range images
CN103685995A (zh) * 2012-09-13 2014-03-26 株式会社东芝 摄像装置
CN104639920A (zh) * 2013-11-13 2015-05-20 上海微锐智能科技有限公司 基于单帧双次曝光模式的宽动态融合方法
US20150163423A1 (en) * 2013-12-11 2015-06-11 Himax Imaging, Inc. Image sensor and pixel arrary
KR20150124381A (ko) * 2014-04-28 2015-11-05 삼성전자주식회사 이미지 처리 장치와 이를 포함하는 모바일 컴퓨팅 장치
CN205945977U (zh) * 2016-08-24 2017-02-08 杭州海康威视数字技术股份有限公司 一种曝光电路

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001016499A (ja) * 1999-06-29 2001-01-19 Hitachi Ltd 広ダイナミックレンジ撮像装置
KR20080104725A (ko) * 2007-05-29 2008-12-03 한국과학기술연구원 영상센서의 물리적 특성을 이용한 넓은 생동폭을 갖는 영상신호 처리 방법
KR20090048191A (ko) * 2007-11-09 2009-05-13 주식회사 쎄이미지 다이내믹 레인지를 확장하는 칼라 영상 처리장치 및 방법
US20110063483A1 (en) * 2009-09-16 2011-03-17 Altasens, Inc. Image sensor with wide dynamic range
CN102098444A (zh) * 2009-12-10 2011-06-15 三星电子株式会社 使用电子快门的多步曝光方法及使用该方法的照相装置
JP2011244351A (ja) * 2010-05-20 2011-12-01 Fujifilm Corp 撮像装置及び固体撮像素子の駆動制御方法
CN102075688A (zh) * 2010-12-28 2011-05-25 青岛海信网络科技股份有限公司 单帧双曝光图像宽动态处理方法
US20130033616A1 (en) * 2011-08-04 2013-02-07 Sony Corporation Imaging device, image processing method and program
US20130051700A1 (en) * 2011-08-31 2013-02-28 Sony Corporation Image processing apparatus, image processing method, and program
JP2013066145A (ja) * 2011-08-31 2013-04-11 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
US20130208138A1 (en) * 2012-02-09 2013-08-15 Aptina Imaging Corporation Imaging systems and methods for generating auto-exposed high-dynamic-range images
CN103685995A (zh) * 2012-09-13 2014-03-26 株式会社东芝 摄像装置
CN104639920A (zh) * 2013-11-13 2015-05-20 上海微锐智能科技有限公司 基于单帧双次曝光模式的宽动态融合方法
US20150163423A1 (en) * 2013-12-11 2015-06-11 Himax Imaging, Inc. Image sensor and pixel arrary
KR20150124381A (ko) * 2014-04-28 2015-11-05 삼성전자주식회사 이미지 처리 장치와 이를 포함하는 모바일 컴퓨팅 장치
CN205945977U (zh) * 2016-08-24 2017-02-08 杭州海康威视数字技术股份有限公司 一种曝光电路

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495055B (zh) * 2018-04-10 2019-11-08 中国科学院长春光学精密机械与物理研究所 获取用于高动态范围成像的多曝光图像的方法及***
CN108495055A (zh) * 2018-04-10 2018-09-04 中国科学院长春光学精密机械与物理研究所 获取用于高动态范围成像的多曝光图像的方法及***
CN111917994A (zh) * 2019-05-10 2020-11-10 三星电子株式会社 将使用不同曝光设置捕获的图像帧组合成混合图像的方法和装置
CN113709382A (zh) * 2019-08-26 2021-11-26 Oppo广东移动通信有限公司 一种图像传感器、图像处理方法及存储介质
CN110460781A (zh) * 2019-08-26 2019-11-15 Oppo广东移动通信有限公司 一种图像传感器、图像处理方法及存储介质
CN113709382B (zh) * 2019-08-26 2024-05-31 Oppo广东移动通信有限公司 一种图像传感器、图像处理方法及存储介质
CN110460781B (zh) * 2019-08-26 2021-10-12 Oppo广东移动通信有限公司 一种图像传感器、图像处理方法及存储介质
CN111491110A (zh) * 2020-04-17 2020-08-04 Oppo广东移动通信有限公司 高动态范围图像处理***及方法、电子设备和存储介质
WO2021208593A1 (zh) * 2020-04-17 2021-10-21 Oppo广东移动通信有限公司 高动态范围图像处理***及方法、电子设备和存储介质
CN111491110B (zh) * 2020-04-17 2021-09-17 Oppo广东移动通信有限公司 高动态范围图像处理***及方法、电子设备和存储介质
CN114513610A (zh) * 2020-11-17 2022-05-17 浙江大华技术股份有限公司 图像处理方法、图像处理装置及存储装置
WO2022140897A1 (zh) * 2020-12-28 2022-07-07 深圳元戎启行科技有限公司 图像生成方法、装置、计算机设备和存储介质
CN116095502A (zh) * 2023-04-13 2023-05-09 芯动微电子科技(珠海)有限公司 一种多曝光图像融合的方法和装置

Also Published As

Publication number Publication date
CN107786814B (zh) 2023-08-04

Similar Documents

Publication Publication Date Title
CN107786814A (zh) 一种基于宽动态的图像处理方法、装置及曝光电路
US20200372609A1 (en) Super-resolution video reconstruction method, device, apparatus and computer-readable storage medium
TWI520598B (zh) 影像處理裝置與影像處理方法
DE102004063847B4 (de) Schaltungsanordnung zur DMA-Bilddatenverarbeitung und Kameraschnittstelle
US20140247979A1 (en) Method and device for generating high dynamic range images
CN101388950B (zh) 用于数字图像的内容适应式对比增进方法及装置
US20240179421A1 (en) Method and apparatus for generating image data
JPH05241550A (ja) 色画像変換方法
CN115082350A (zh) 频闪图像处理方法、装置、电子设备和可读存储介质
CN116095502B (zh) 一种多曝光图像融合的方法和装置
JP2921973B2 (ja) 特定物体の画像抽出方法及び画像抽出装置
CN106558019A (zh) 图片排列方法及装置
CN205945977U (zh) 一种曝光电路
KR20050006489A (ko) 화상형성시스템에 있어서 영상처리방법 및 장치
CN108683842B (zh) 一种全景相机及输出全景视频的方法和装置
DE102009061757B3 (de) Elektronisches Gerät mit effizienter Übermittlung von Steuersignalen und Daten zwischen unterschiedlichen Arten von elektronischen Modulen
WO2024113162A1 (zh) 亮度补偿方法、装置、设备及存储介质
KR20180121243A (ko) 유효 픽셀 기반의 버스 프로토콜을 이용한 영상 처리 장치 및 방법
JP3466655B2 (ja) 画像処理装置
KR100308302B1 (ko) 디지털 광학기기의 온 스크린 디스플레이(osd) 표시 장치
JPS5851269B2 (ja) デイスプレイ装置
JPS61258567A (ja) デイジタル映像信号処理方式
JP2689609B2 (ja) ビデオカメラ装置
CN116264019A (zh) 一种静默图像翻拍检测模型的训练方法、装置及相关设备
CN117692593A (zh) 基于像素行拼接的视频帧处理方法、装置、设备、介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant