CN110278386A - 图像处理方法、装置、存储介质及电子设备 - Google Patents

Abstract

本申请公开了一种图像处理方法、装置、存储介质及电子设备。该方法包括：获取第一曝光时间；按照所述第一曝光时间获取多帧待合成YUV图像；对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；利用所述高动态范围图像，进行图像的预览或拍照或录像操作。本申请提供的图像处理方案得到的图像能够适用于图像的预览、拍照和录像。

Description

图像处理方法、装置、存储介质及电子设备

技术领域

本申请属于图像技术领域，尤其涉及一种图像处理方法、装置、存储介质及电子设备。

背景技术

相比于普通的图像，高动态范围图像(High-Dynamic Range，简称HDR)可以提供更多的动态范围和图像细节。电子设备可以在同一场景下拍摄具有不同曝光程度的多帧图像，将过曝光图像的暗部细节、正常曝光图像的中间细节和欠曝光图像的亮部细节合成得到HDR图像。然而，相关的HDR技术处理得到的图像难以同时适用于预览、拍照和录像。

发明内容

本申请实施例提供一种图像处理方法、装置、存储介质及电子设备，其处理得到的图像可以适用于预览、拍照和录像。

本申请实施例提供一种图像处理方法，包括：

获取第一曝光时间；

按照所述第一曝光时间获取多帧待合成YUV图像；

对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

本申请实施例提供一种图像处理装置，包括：

第一获取模块，用于获取第一曝光时间；

第二获取模块，用于按照所述第一曝光时间获取多帧待合成YUV图像；

合成模块，用于对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

处理模块，用于利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

本申请实施例提供一种存储介质，其上存储有计算机程序，当所述计算机程序在计算机上执行时，使得所述计算机执行本申请实施例提供的图像处理方法中的流程。

本申请实施例还提供一种电子设备，包括存储器，处理器，所述处理器通过调用所述存储器中存储的计算机程序，用于执行本申请实施例提供的图像处理方法中的流程。

本申请实施例中，先获取合适的曝光时间；然后，按照该曝光时间获取多帧待合成YUV图像；接着，对该多帧待合成YUV图像进行合成处理，得到高动态范围图像；最后，利用该高动态范围图像，进行图像的预览或拍照或录像操作。由于本申请实施例采用了合适的曝光时间获取YUV图像，该YUV图像是经过了降噪等处理的图像，从而使得最终合成的高动态范围图像的品质较好。这种品质较好的高动态范围图像可以直接用于图像预览、拍照和录像。即，本实施例提供的图像处理方案得到的图像能够适用于预览、拍照和录像。

附图说明

下面结合附图，通过对本申请的具体实施方式详细描述，将使本申请的技术方案及其有益效果显而易见。

图1是本申请实施例提供的图像处理方法的第一种流程示意图。

图2是本申请实施例提供的图像处理方法的第二种流程示意图。

图3是本申请实施例提供的图像处理方法的第三种流程示意图。

图4是本申请实施例提供的图像处理方法的第四种流程示意图。

图5是本申请实施例提供的图像处理方法的场景示意图

图6是本申请实施例提供的图像处理方法的第五种流程示意图。

图7是本申请实施例提供的图像处理装置的结构示意图。

图8是本申请实施例提供的电子设备的第一种结构示意图。

图9是本申请实施例提供的电子设备的第二种结构示意图。

图10是本申请实施例提供的图像处理电路的结构示意图。

具体实施方式

请参照图示，其中相同的组件符号代表相同的组件，本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例，其不应被视为限制本申请未在此详述的其它具体实施例。

可以理解的是，本申请实施例的执行主体可以是诸如智能手机或平板电脑等电子设备。

请参阅图1，图1是本申请实施例提供的图像处理方法的第一种流程示意图，流程可以包括：

101、获取第一曝光时间。

102、按照第一曝光时间获取多帧待合成YUV图像。

本实施例提供的图像处理方法可以应用于具有摄像模组的电子设备。电子设备的摄像模组可以包括图像处理电路，图像处理电路可以包括摄像头和图像信号处理器，其中摄像头至少可以包括一个或多个透镜和图像传感器。透镜用于采集外部的光源信号提供给图像传感器，图像传感器感应来自于透镜的光源信号，将其转换为数字化的原始图像，即RAW图像，并将该RAW图像提供给图像信号处理器处理。图像信号处理器可以对该RAW图像进行格式转换，降噪等处理，得到YUV图像。其中，RAW是未经处理、也未经压缩的格式，可以将其形象地称为“数字底片”。YUV是一种颜色编码方法，其中Y表示亮度，U表示色度，V表示浓度，人眼从YUV图像中可以直观的感受到其中所包含的自然特征。

比如，电子设备会获取第一曝光时间。该第一曝光时间可以是电子设备根据当前拍摄场景自行确定的。例如，电子设备预先对多种拍摄场景进行分析学习，从而最终分析出哪种拍摄场景对应多大的曝光时间。例如，假设当前为拍摄场景A，电子设备确定出拍摄场景A对应的曝光时间为t1，那么第一曝光时间即为t1。

需要说明的是，在本实施例中，第一曝光时间可以使得对按照该第一曝光时间获取的多帧图像进行合成而得到的图像具有高动态范围。

其中，在根据用户操作启动拍摄类应用程序(比如电子设备的***应用“相机”)后，其摄像头所对准的场景即为拍摄场景。比如，用户通过手指点击电子设备上“相机”应用的图标启动“相机应用”后，若用户使用电子设备的摄像头对准一包括XX物体的场景，则该包括XX物体的场景即为拍摄场景。根据以上描述，本领域技术人员应当理解的是，拍摄场景并非特指某一特定场景，而是跟随摄像头的指向所实时对准的场景。

在本实施例中，电子设备获取到第一曝光时间之后，可以按照该第一曝光时间获取多帧待合成YUV图像。例如，电子设备获取到的第一曝光时间为t1，那么电子设备可以按照t1曝光时长来获取多帧待合成YUV图像。需要说明的是，在本实施例中，多帧待合成YUV图像的曝光时间相同。

其中，对于获取多少帧待合成YUV图像，本实施例不做具体限制，可由本领域普通技术人员根据实际需要选取合适数量的待合成YUV图像，比如，待合成YUV图像的数量可以根据电子设备所支持的最大帧率确定等。

在本实施例中，电子设备可以先采用图像传感器获取多帧RAW图像，然后采用图像信号处理器对每帧RAW图像进行格式转换，降噪等处理，将其转换到YUV颜色空间，得到适于人眼查看的多帧待合成YUV图像。

103、对多帧待合成YUV图像进行合成处理，得到高动态范围图像。

比如，在得到多帧待合成YUV图像之后，电子设备可以对该多帧待合成YUV图像进行合成处理，得到高动态范围图像。例如，在得到4帧待合成YUV图像之后，电子设备可以对该4帧待合成YUV图像进行合成处理，得到高动态范围图像。

104、利用高动态范围图像，进行图像的预览或拍照或录像操作。

比如，在得到高动态范围图像之后，电子设备可以利用该高动态范围图像，进行图像的预览或拍照或录像操作。例如，电子设备可以将该高动态范围图像显示在该电子设备的相机应用的预览界面供用户预览。或者，当电子设备接收到拍照指令，例如用户按下拍照按钮时，该电子设备可以直接将该高动态图像作为照片输出显示在显示屏上供用户查看。或者，当电子设备接收到录像指令时，电子设备可以将该高动态图像作为录像得到的视频的其中一帧。

本实施例中，先获取合适的曝光时间；然后，按照该曝光时间获取多帧待合成YUV图像；接着，对该多帧待合成YUV图像进行合成处理，得到高动态范围图像；最后，利用该高动态范围图像，进行图像的预览或拍照或录像操作。由于本申请实施例采用了合适的曝光时间获取YUV图像，该YUV图像是经过了降噪等处理的图像，从而使得最终合成的高动态范围图像的品质较好。这种品质较好的高动态范围图像可以直接用于图像预览、拍照和录像。即，本实施例提供的图像处理方案得到的图像能够适用于预览、拍照和录像。

请参阅图2，图2是本申请实施例提供的图像处理方法的第二种流程示意图，流程可以包括：

201、电子设备按照第二曝光时间获取基准YUV图像。

在本实施例中，并不对该第二曝光时间进行限制。例如，可以由用户预先设定一个曝光时间，将其确定为第二曝光时间；或者，可以由电子设备随机确定一个曝光时间，将其确定为第二曝光时间，等等。

例如，在将电子设备的摄像头对准某一拍摄场景时，电子设备会根据该拍摄场景来自动确定一个曝光时间，该曝光时间可以为第二曝光时间。

当根据上述方式得到一第二曝光时间后，电子设备可以按照该第二曝光时间获取基准YUV图像。

在一些实施例中，可以先由图像传感器得到RAW图像，再由图像信号处理器对RAW图像进行格式转换、降噪等处理，从而得到基准YUV图像。

202、电子设备根据基准YUV图像，确定第一曝光时间。

当电子设备得到基准YUV图像后，电子设备可以根据该基准YUV图像，确定第一曝光时间。例如，电子设备可以确定出该基准YUV图像的过曝区域。根据该过曝区域的大小来确定第一曝光时间。

例如，白天，在室内对窗外的风景拍照时，拍摄得到的照片可能会存在较大的过曝区域。比如，天空部分将会变为一片白色，无法拍出蓝天，该变为一片白色的天空部分即为过曝区域。若天空部分比较多，则使得拍摄得到的照片过曝区域较多。

在一些实施例中，当电子设备获取的图像中，存在一些区域无法体现出细节部分时，可以将这些区域确定为过曝区域。例如，在晴朗的白天，人眼看到的天空通常包括蓝天和白云。若电子设备获取到的图像中，天空所在的部分无法看出蓝天和白云，仅能看到一片白色，那么，天空所在的区域即为过曝区域。

由于曝光时间越短，获取的过曝区域的信息量就越多。那么，当过曝区域较大时，电子设备可以确定一较小的曝光时间，将其确定为第一曝光时间；当过曝区域较小时，电子设备可以确定一较大的曝光时间，将其确定为第一曝光时间。但是由于本实施例采用的是多帧短曝的方式进行图像合成，从而得到HDR图像，而曝光时间太短会导致最后合成的HDR图像太暗。因此，在确定第一曝光时间时，不能将其确定得太小。即，在本实施例中，第一曝光时间需大于预设曝光时间。其中，该预设曝光时间可以根据实际情况设置。但为了使得最后合成的图像亮度合适，该预设曝光时间不应设置得太低。

203、电子设备获取电子设备所支持的最大帧率。

204、电子设备根据电子设备所支持的最大帧率，确定目标数量。

205、电子设备按照第一曝光时间获取目标数量的待合成YUV图像。

可以理解的是，合成HDR图像所采用的图像的数量越多，最后合成HDR图像的品质也会更好。因此，相关技术中，通常都是采用3帧以上的图像去合成HDR图像。而由于受硬件结构的限制，目前，电子设备通常所支持的最大帧率为60fps。也即，该电子设备最多每秒获取60帧图像。若采用3帧以上的图像去合成HDR图像，可能会使得在对图像进行预览或录像操作时，存在明显的卡顿现象。

例如，假设电子设备所支持的最大帧率为60fps，即每秒可以获取60帧图像。那么，采用4帧图像去合成HDR图像，每秒只能得到15帧HDR图像。而每秒低于24帧图像会使得用户感觉到卡顿。那么每秒展示15帧HDR图像会使得用户感觉到明显的卡顿现象。

为了避免出现卡顿现象，本实施例将根据电子设备所支持的最大帧率来确定合成HDR图像的YUV待合成图像的数量。

例如，若电子设备所支持的最大帧率为60fps，那么电子设备会按照第一曝光时间获取2帧待合成YUV图像。若电子设备所支持的最大帧率为90fps，那么电子设备会按照第一曝光时间获取3帧待合成YUV图像。这样便可以保证每秒得到并展示30帧图像，使得用户不会感受到卡顿的现象。

可以理解的是，当电子设备所支持的最大帧率为90fps时，电子设备也可以按照第一曝光时间获取2帧待合成YUV图像进行合成处理，以降低处理器的处理负载。而为了得到品质更好的HDR图像，电子设备可以在保证不卡顿的情况下，尽可能地多获取合成HDR图像的待合成YUV图像。

在本实施例中，虽然合成HDR图像所采用的图像的数量受电子设备的帧率的限制，可能不会太多，但是本实施例采用的是YUV图像来进行多帧短曝合成处理。该YUV图像是经过降噪等处理的图像，单帧YUV图像的品质相较于RAW图像会更好，因此，最终合成的HDR图像也会更好。并且，采用多帧短曝的方式合成HDR图像，可以使得HDR图像的鬼影不明显。然而，多帧短曝所对应的曝光时间相对较短，若采用较短的曝光时间，可能会导致最终合成的HDR图像亮度较暗。针对该情况，可以在合成HDR图像之后，对HDR图像的亮度再进行提升，以使该HDR图像的亮度适中。

206、电子设备对目标数量的待合成YUV图像进行合成处理，得到高动态范围图像。

207、电子设备利用高动态范围图像，进行图像的预览或拍照或录像操作。

比如，当电子设备得到2帧待合成YUV图像之后，电子设备可以对这2帧YUV图像进行合成处理，得到高动态范围图像，即HDR图像。在得到该HDR图像之后，电子设备可以将该HDR图像显示在相机应用的预览界面供用户进行预览、拍照或录像。

在一些实施例中，为了进一步提升HDR图像的品质，电子设备可以检测HDR图像的亮度是否小于预设亮度阈值；若HDR图像的亮度小于预设亮度阈值，电子设备可以在对该HDR图像进行亮度提升处理之后，再输出该HDR图像，以供用户进行预览、拍照或录像。

请参阅图3，图3是本申请实施例提供的图像处理方法的第三种流程示意图，在一些实施例中，流程202可以包括：

2021、电子设备计算基准YUV图像的HDR分数或者光比，该HDR分数的高低用于描述基准YUV图像的过曝区域的大小。

2022、电子设备根据基准YUV图像的HDR分数或者光比，确定第一曝光时间。

在一些实施例中，当得到基准YUV图像之后，电子设备可以计算该基准YUV图像的HDR分数或光比，当得到该基准YUV图像的HDR分数或光比之后，电子设备可以根据该基准YUV图像的HDR分数或者光比，确定第一曝光时间。其中，该HDR分数的高低用于描述基准YUV图像的过曝区域的大小。HDR分数越高，则表示存在越大的过曝区域；反之，HDR分数越低，则表示存在越小的过曝区域。光比表示基准YUV图像中的被摄物暗面与亮面的受光比例。光比越大，则表示存在越大的过曝区域；反之，光比越小，则表示存在越小的过曝区域。

当过曝区域较大时，可以获取较短的曝光时间，以获取较多过曝区域的信息量，当过曝区域较小时，可以获取较长的曝光时间，以在获取过曝区域一定信息量的基础上，使得最终合成的HDR图像的亮度适中。

例如，当基准YUV图像的HDR分数为g1时，电子设备可以确定第一曝光时间为t1；当基准YUV图像的HDR分数为g2时，电子设备可以确定第一曝光时间为t2。其中，g1>g2，t1<t2。

在一些实施例中，前期，电子设备可以对大量的存在过曝区域的YUV图像进行分析与学习，分析出过曝区域的特点。后期，电子设备可以在获取到YUV图像之后，直接确定出该YUV图像的过曝区域。随后，根据该YUV图像的过曝区域的大小，确定第一曝光时间。其中，过曝区域越大，第一曝光时间越小；过曝区域越小，第一曝光时间越大。

请参阅图4，图4是本申请实施例提供的图像处理方法的第四种流程示意图，在一些实施例中，流程2022可以包括：

20221、电子设备获取HDR分数或者光比与曝光时间的映射关系。

20222、电子设备根据映射关系，确定基准YUV图像的HDR分数或者光比所对应的曝光时间，得到第一曝光时间。

比如，电子设备可以预先设置HDR分数或者光比与曝光时间的映射关系。

例如，HDR分数与曝光时间的映射关系可以如表1所示。

表1HDR分数与曝光时间的映射关系

HDR分数	50	60	70	80
					曝光时间	4ms	3ms	2ms	1ms

光比与曝光时间的映射关系可以如表2所示。

表2光比与曝光时间的映射关系

HDR分数	1:1	1:2	1:4	1:8
					曝光时间	4ms	3.5ms	3ms	2.5ms

HDR分数与曝光时间的映射关系可以如表3所示。

表1HDR分数与曝光时间的映射关系

HDR分数	31～40	41～50	51～60	61～70
					曝光时间	4.5ms	3.5ms	2.5ms	1.5ms

也即，在本实施例中，HDR分数或光比与曝光时间的映射关系，可以是一HDR分数或光比对应一曝光时间；也可以是一HDR分数范围或者光比范围对应一曝光时间。

在一些实施例中，HDR分数或光比与曝光时间的映射关系，也可以是多个HDR分数或光比对应一曝光时间。

需要说明的是，对于采用何种方式设置HDR分数或光比与曝光时间的映射关系，本申请实施例不做具体限制，可由本领域普通技术人员根据实际需要设置合适的HDR分数或光比与曝光时间的映射关系。

比如，当计算出基准YUV图像的HDR分数或者光比之后，电子设备可以获取HDR分数或者光比与曝光时间的映射关系，然后根据该映射关系，确定基准YUV图像的HDR分数或者光比对应的曝光时间，将其确定为第一曝光时间。

例如，若电子设备计算出基准YUV图像的HDR分数为70，且电子设备获取的是如表1所示的映射关系，那么，第一曝光时间则为2ms。或者，若电子设备计算出光比为1:1，且电子设备获取的是如表2所示的映射关系，那么，第一曝光时间则为4ms。

在一些实施例中，为减少计算量，电子设备可以仅计算HDR分数，从而根据该HDR分数确定出第一曝光时间；或者，电子设备可以仅计算光比，从而根据该光比确定出第一曝光时间。

需要说明的是，相对来说，HDR分数的计算量大于光比的计算量。而利用根据HDR分数确定出的第一曝光时间获取的YUV图像合成而得到的HDR图像会相对较好，因此，可以根据实际需求确定采用何种方式来确定第一曝光时间。例如，电子设备可以先对自身的性能进行分析；若电子设备分析出自身的性能不足以支持HDR分数的计算，那么其可以选择计算光比，根据光比确定第一曝光时间；若电子设备分析出自身的性能完全可以支持HDR分数的计算，那么其可以选择计算HDR分数，根据HDR分数确定第一曝光时间。

本实施例中，电子设备在获取到目标数量的待合成YUV图像后，进一步通过多帧短曝的方式合成目标数量的待合成YUV图像，得到品质较好的高动态范围图像，该高动态范围图像具有鬼影不明显、噪声较小的特点。

其中，电子设备在合成目标数量的待合成YUV图像得到高动态范围图像时，首先对目标数量的待合成YUV图像进行多帧降噪合成，得到一个降噪合成图像。可以理解的是，由于待合成YUV图像为短曝光图像，其将更多保留拍摄场景中较亮区域的特征。同样的，对目标数量的待合成YUV图像进行多帧降噪合成而得到的降噪合成图像同样更多保留的是拍摄场景中较亮区域的特征。此时，电子设备进一步提升降噪合成图像的亮度，使得拍摄场景中较亮区域的特征以及较暗区域的特征得以同时呈现，得到拍摄场景的高动态范围图像。

比如，假设电子设备共获取到3帧待合成YUV图像(电子设备所支持的最大帧率为90fps)，分别为待合成YUV图像S1、待合成YUV图像S2、待合成YUV图像S3。

电子设备首先从待合成YUV图像S1、待合成YUV图像S2以及待合成YUV图像S3中选定一个作为标准图像，假定选择待合成YUV图像S1为标准图像，则电子设备将待合成YUV图像S2以及待合成YUV图像S3与待合成YUV图像S1对齐，再基于对齐后的各图像，计算得到各像素点的平均像素值(比如，假设某位置的像素点在3个待合成YUV图像中的像素值分别为：“0.8，0.9，1”，则可计算得到该位置的像素点的平均像素值为“0.9”)。之后，根据各位置的平均像素值得到降噪合成图像。其中，可以将标准图像(即待合成YUV图像S1)的各像素点的像素值相应调整为计算得到的各平均像素值，从而得到降噪合成图像，还可以根据计算得到各平均像素值，生成一幅新的图像，将生成的图像作为降噪合成图像。对于降噪合成图像，电子设备进一步提升其亮度，得到拍摄场景的高动态范围图像。

在一些实施例中，在电子设备帧率支持的情况下，电子设备可以对基准YUV图像和多帧待合成YUV图像进行合成处理，得到高动态范围图像。

需要说明的是，当基准YUV图像的曝光时间大于待合成YUV图像的曝光时间时，通过对基准YUV图像和多帧待合成YUV图像进行合成处理，所得到的高动态范围图像的亮度会大于仅通过多帧待合成YUV图像进行合成而得到的高动态范围图像的亮度。

例如，如图5所示，当处于同一拍摄场景时，电子设备可以按照一随机曝光时间，即第二曝光时间获取基准YUV图像N，然后，电子设备计算该基准YUV图像N的HDR分数；接着，电子设备可以获取HDR分数或者光比与曝光时间的映射关系，根据该映射关系，确定基准YUV图像N的HDR分数对应的曝光时间，得到第一曝光时间。那么，电子设备便可以按照该第一曝光时间获取多帧待合成YUV图像，如S1，S2，S3，S4，S5和S6；随后，电子设备可以对该多帧待合成YUV图像进行合成处理，得到高动态范围图像。例如，对S1和S2进行合成处理，得到第1帧高动态范围图像，对S3和S4进行合成处理，得到第2帧高动态范围图像，对S5和S6进行处理，得到第3帧高动态范围图像。电子设备可以将这3帧高动态范围图像显示在该电子设备的相机应用的预览界面供用户预览。或者，当电子设备接收到拍照指令，该电子设备可以将其中一帧高动态范围图像作为照片输出显示在显示屏上供用户查看。或者当电子设备接收到录像指令时，电子设备可以将这3帧高动态范围图像作为录像得到的视频的第1帧，第2帧和第3帧。其中，第一曝光时间可以与第二曝光时间相同，也可以与第二曝光时间不同。

在一些实施例中，当处于同一拍摄场景时，且该拍摄场景中不存在移动物体时，电子设备也可以采用这样的合成策略来合成HDR图像。例如，对基准YUV图像N、待合成YUV图像S1和待合成YUV图像S2进行合成处理，得到第1帧高动态范围图像，对N、S3和S4进行合成处理，得到第2帧高动态范围图像，对N、S5和S6进行处理，得到第3帧高动态范围图像，从而最终得到3帧亮度相对较高的高动态范围图像。其中，基准YUV图像的曝光时间大于待合成YUV图像的曝光时间。

在另一些实施例中，当处于不同的拍摄场景时，若电子设备的帧率在90fps。电子设备可以先以随机曝光时间(第二曝光时间)获取1帧第一基准YUV图像，并根据该基准YUV图像，确定第一曝光时间；然后，电子设备可以按照该第一曝光时间获取2帧第一待合成YUV图像，并对该第一基准YUV图像和该2帧第一待合成YUV图像进行合成处理，得到第1帧高动态范围图像。以此类推，电子设备可以得到第2帧高动态范围图像，第3帧高动态范围图像等等。当电子设备检测到拍摄场景改变时，电子设备可以以随机时间或该第一曝光时间获取1帧第二基准YUV图像，并根据该第二基准YUV图像，确定第三曝光时间；然后，电子设备可以按照该第三曝光时间获取2帧第二待合成YUV图像，并对该第二基准YUV图像和该2帧第二待合成YUV图像进行合成图像，得到第4帧高动态范围图像。以此类推，电子设备可以得到第5帧高动态范围图像，第6帧高动态范围图像等等。

请参阅图6，图6是本申请实施例提供的图像处理方法的第五种流程示意图，流程可以包括：

301、电子设备获取第一曝光时间。

其中，电子设备会获取一曝光时间。该第一曝光时间可以是电子设备根据当前拍摄场景自行确定的。比如，电子设备预先对多种拍摄场景进行分析学习，从而最终分析出哪种拍摄场景对应多大的曝光时间。例如，假设当前为拍摄场景A，电子设备确定拍摄场景A对应的曝光时间为t1，那么第一曝光时间即为t1。

在一些实施例中，可以先由图像传感器得到RAW图像，再由图像信号处理器对RAW图像进行格式转换、降噪等处理，从而得到基准YUV图像。然后电子设备可以根据该基准YUV图像，确定第一曝光时间。

需要说明的是，在本实施例中，第一曝光时间可以使得对按照该第一曝光时间获取的多帧图像合成而得到的图像具有高动态范围。

302、电子设备按照第一曝光时间获取多帧RAW图像。

303、电子设备对每帧RAW图像进行预设处理，得到多帧待合成YUV图像。

304、电子设备对多帧待合成YUV图像进行合成处理，得到高动态范围图像。

305、电子设备利用高动态范围图像，进行图像的预览或拍照或录像操作。

比如，在得到第一曝光时间之后，电子设备可以按照该第一曝光时间获取多帧RAW图像，然后对每帧RAW图像进行预设处理，得到多帧待合成YUV图像。其中，预设处理可以为降噪、格式转换等。在得到多帧待合成YUV图像之后，电子设备可以对该多帧待合成YUV图像进行合成处理，得到高动态范围图像。

在得到高动态范围图像之后，电子设备可以利用该高动态范围图像，进行图像的预览或拍照或录像操作。例如，电子设备可以将该高动态范围图像显示在该电子设备的相机应用的预览界面供用户预览。或者，当电子设备接收到拍照指令，例如用户按下拍照按钮时，该电子设备可以直接将该高动态图像作为照片输出显示在显示屏上供用户查看。或者，当电子设备接收到录像指令时，电子设备可以将该高动态图像作为录像得到的视频的其中一帧。

需要说明的是，预设处理是对合成高动态范围图像不造成影响的处理。例如，若预设处理包括亮度提升处理，即得到的YUV图像的亮度相对较亮，可能会对合成高动态范围图像造成影响，那么预设处理便不应包括亮度提升处理。

在一些实施例中，流程303可以包括：

电子设备对每帧RAW图像进行格式转换以及降噪处理，得到多帧待合成YUV图像。

比如，电子设备可以对每帧RAW图像进行格式转换以及降噪处理，得到多帧待合成YUV图像，从而使得待合成YUV图像的质量相对较好，进而使得通过对该多帧待合成YUV图像进行合成处理而得到高动态范围图像的质量也会相对较好。

请参阅图7，图7为本申请实施例提供的图像处理装置的结构示意图。该图像处理装置包括：第一获取模块401，第二获取模块402，合成模块403以及处理模块404。

第一获取模块401，用于获取第一曝光时间；

第二获取模块402，用于按照所述第一曝光时间获取多帧待合成YUV图像；

合成模块403，用于对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

处理模块404，用于利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

在一些实施例中，所述第一获取模块401，可以用于：按照第二曝光时间获取基准YUV图像；根据所述基准YUV图像，确定第一曝光时间。

在一些实施例中，所述第一获取模块401，可以用于：计算所述基准YUV图像的HDR分数或者光比，所述HDR分数的高低用于描述所述基准YUV图像的过曝区域的大小；根据所述基准YUV图像的HDR分数或者光比，确定第一曝光时间。

在一些实施例中，所述第一获取模块401，可以用于：获取HDR分数或者光比与曝光时间的映射关系；根据所述映射关系，确定所述基准YUV图像的HDR分数或者光比所对应的曝光时间，得到第一曝光时间。

在一些实施例中，所述合成模块403，可以用于：获取所述电子设备所支持的最大帧率；根据所述电子设备所支持的最大帧率，确定目标数量；按照所述第一曝光时间获取目标数量的待合成YUV图像；对所述目标数量的待合成YUV图像进行合成处理，得到高动态范围图像。

在一些实施例中，所述第二获取模块402，可以用于：按照所述第一曝光时间获取多帧RAW图像；对每帧RAW图像进行预设处理，得到多帧待合成YUV图像。

在一些实施例中，所述第二获取模块402，可以用于：对每个RAW图像进行格式转换以及降噪处理，得到多帧待合成YUV图像。

本申请实施例提供一种计算机可读的存储介质，其上存储有计算机程序，当所述计算机程序在计算机上执行时，使得所述计算机执行如本实施例提供的图像处理方法中的流程。

本申请实施例还提供一种电子设备，包括存储器，处理器，所述处理器通过调用所述存储器中存储的计算机程序，用于执行本实施例提供的图像处理方法中的流程。

例如，上述电子设备可以是诸如平板电脑或者智能手机等移动终端。请参阅图8，图8为本申请实施例提供的电子设备的第一种结构示意图。

该电子设备500可以包括摄像模组501、存储器502、处理器503等部件。本领域技术人员可以理解，图8中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

摄像模组501可以包括透镜、图像传感器和图像信号处理器，其中透镜用于采集外部的光源信号提供给图像传感器，图像传感器感应来自于透镜的光源信号，将其转换为数字化的原始图像，即RAW图像，并将该RAW图像提供给图像信号处理器处理。图像信号处理器可以对该RAW图像进行格式转换，降噪等处理，得到YUV图像。其中，RAW是未经处理、也未经压缩的格式，可以将其形象地称为“数字底片”。YUV是一种颜色编码方法，其中Y表示亮度，U表示色度，V表示浓度，人眼从YUV图像中可以直观的感受到其中所包含的自然特征。

存储器502可用于存储应用程序和数据。存储器502存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器503通过运行存储在存储器502的应用程序，从而执行各种功能应用以及数据处理。

处理器503是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器502内的应用程序，以及调用存储在存储器502内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。

在本实施例中，电子设备中的处理器503会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器502中，并由处理器503来运行存储在存储器502中的应用程序，从而执行：

获取第一曝光时间；

按照所述第一曝光时间获取多帧待合成YUV图像；

对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

请参阅图9，电子设备600可以包括摄像模组601、存储器602、处理器603、触摸显示屏604、扬声器605、麦克风606等部件。

摄像模组601可以包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义图像信号处理(Image Signal Processing)管线的各种处理单元。图像处理电路至少可以包括：摄像头、图像信号处理器(Image Signal Processor，ISP处理器)、控制逻辑器、图像存储器以及显示器等。其中摄像头至少可以包括一个或多个透镜和图像传感器。图像传感器可包括色彩滤镜阵列(如Bayer滤镜)。图像传感器可获取用图像传感器的每个成像像素捕捉的光强度和波长信息，并提供可由图像信号处理器处理的一组原始图像数据。

图像信号处理器可以按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，图像信号处理器可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。原始图像数据经过图像信号处理器处理后可存储至图像存储器中。图像信号处理器还可从图像存储器处接收图像数据。

图像存储器可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像存储器的图像数据时，图像信号处理器可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器，以便在被显示之前进行另外的处理。图像信号处理器还可从图像存储器接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，图像信号处理器的输出还可发送给图像存储器，且显示器可从图像存储器读取图像数据。在一种实施方式中，图像存储器可被配置为实现一个或多个帧缓冲器。

图像信号处理器确定的统计数据可发送给控制逻辑器。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜阴影校正等图像传感器的统计信息。

控制逻辑器可包括执行一个或多个例程(如固件)的处理器和/或微控制器。一个或多个例程可根据接收的统计数据，确定摄像头的控制参数以及ISP控制参数。例如，摄像头的控制参数可包括照相机闪光控制参数、透镜的控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵等。

请参阅图10，图10为本实施例中图像处理电路的结构示意图。如图10所示，为便于说明，仅示出与本发明实施例相关的图像处理技术的各个方面。

例如图像处理电路可以包括：摄像头、图像信号处理器、控制逻辑器、图像存储器、显示器。其中，摄像头可以包括一个或多个透镜和图像传感器。在一些实施例中，摄像头可为长焦摄像头或广角摄像头中的任一者。

摄像头采集的第一图像传输给图像信号处理器进行处理。图像信号处理器处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器。控制逻辑器可根据统计数据确定摄像头的控制参数，从而摄像头可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过图像信号处理器进行处理后可存储至图像存储器中。图像信号处理器也可以读取图像存储器中存储的图像以进行处理。另外，第一图像经过图像信号处理器进行处理后可直接发送至显示器进行显示。显示器也可以读取图像存储器中的图像以进行显示。

此外，图中没有展示的，电子设备还可以包括CPU和供电模块。CPU和逻辑控制器、图像信号处理器、图像存储器和显示器均连接，CPU用于实现全局控制。供电模块用于为各个模块供电。

存储器602存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器603通过运行存储在存储器602的应用程序，从而执行各种功能应用以及数据处理。

处理器603是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器602内的应用程序，以及调用存储在存储器602内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。

触摸显示屏604可以用于接收用户对电子设备的触摸控制操作。扬声器605可以播放声音信号。麦克风606可以用于拾取声音信号。

在本实施例中，电子设备中的处理器603会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器602中，并由处理器603来运行存储在存储器602中的应用程序，从而执行：

获取第一曝光时间；

按照所述第一曝光时间获取多帧待合成YUV图像；

对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

在一种实施方式中，处理器603执行所述获取第一曝光时间时，可以执行：按照第二曝光时间获取基准YUV图像；根据所述基准YUV图像，确定第一曝光时间。

在一种实施方式中，处理器603执行所述根据所述基准YUV图像，确定第一曝光时间时，可以执行：计算所述基准YUV图像的HDR分数或者光比，所述HDR分数的高低用于描述所述基准YUV图像的过曝区域的大小；根据所述基准YUV图像的HDR分数或者光比，确定第一曝光时间。

在一种实施方式中，处理器603执行所述根据所述基准YUV图像的HDR分数或者光比，确定第一曝光时间时，可以执行：获取HDR分数或者光比与曝光时间的映射关系；根据所述映射关系，确定所述基准YUV图像的HDR分数或者光比所对应的曝光时间，得到第一曝光时间。

在一种实施方式中，在所述按照所述第一曝光时间获取多帧待合成YUV图像之前，处理器603还可以执行：获取所述电子设备所支持的最大帧率；根据所述电子设备所支持的最大帧率，确定目标数量；则所述处理器603执行所述按照所述第一曝光时间获取多帧待合成YUV图像时，可以执行：按照所述第一曝光时间获取目标数量的待合成YUV图像；所述处理器603执行所述对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像时，可以执行：对所述目标数量的待合成YUV图像进行合成处理，得到高动态范围图像。

在一种实施方式中，处理器603执行所述按照所述第一曝光时间获取多帧待合成YUV图像时，可以执行：按照所述第一曝光时间获取多帧RAW图像；对每帧RAW图像进行预设处理，得到多帧待合成YUV图像。

在一种实施方式中，处理器603执行所述对每个RAW图像进行预设处理，得到多帧待合成YUV图像时，可以执行：对每个RAW图像进行格式转换以及降噪处理，得到多帧待合成YUV图像。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见上文针对图像处理方法的详细描述，此处不再赘述。

本申请实施例提供的所述图像处理装置与上文实施例中的图像处理方法属于同一构思，在所述图像处理装置上可以运行所述图像处理方法实施例中提供的任一方法，其具体实现过程详见所述图像处理方法实施例，此处不再赘述。

需要说明的是，对本申请实施例所述图像处理方法而言，本领域普通技术人员可以理解实现本申请实施例所述图像处理方法的全部或部分流程，是可以通过计算机程序来控制相关的硬件来完成，所述计算机程序可存储于一计算机可读取存储介质中，如存储在存储器中，并被至少一个处理器执行，在执行过程中可包括如所述图像处理方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)等。

对本申请实施例的所述图像处理装置而言，其各功能模块可以集成在一个处理芯片中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中，所述存储介质譬如为只读存储器，磁盘或光盘等。

以上对本申请实施例所提供的一种图像处理方法、装置、存储介质以及电子设备进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

获取第一曝光时间；

按照所述第一曝光时间获取多帧待合成YUV图像；

对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

2.根据权利要求1所述的图像处理方法，其特征在于，所述获取第一曝光时间，包括：

按照第二曝光时间获取基准YUV图像；

根据所述基准YUV图像，确定第一曝光时间。

3.根据权利要求2所述的图像处理方法，其特征在于，所述根据所述基准YUV图像，确定第一曝光时间，包括：

计算所述基准YUV图像的HDR分数或者光比，所述HDR分数的高低用于描述所述基准YUV图像的过曝区域的大小；

根据所述基准YUV图像的HDR分数或者光比，确定第一曝光时间。

4.根据权利要求3所述的图像处理方法，其特征在于，所述根据所述基准YUV图像的HDR分数或者光比，确定第一曝光时间，包括：

获取HDR分数或者光比与曝光时间的映射关系；

根据所述映射关系，确定所述基准YUV图像的HDR分数或者光比所对应的曝光时间，得到第一曝光时间。

5.根据权利要求1所述的图像处理方法，其特征在于，在所述按照所述第一曝光时间获取多帧待合成YUV图像之前，还包括：

获取所述电子设备所支持的最大帧率；

根据所述电子设备所支持的最大帧率，确定目标数量；

所述按照所述第一曝光时间获取多帧待合成YUV图像，包括：

按照所述第一曝光时间获取目标数量的待合成YUV图像；

所述对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像，包括：

对所述目标数量的待合成YUV图像进行合成处理，得到高动态范围图像。

6.根据权利要求1所述的图像处理方法，其特征在于，所述按照所述第一曝光时间获取多帧待合成YUV图像，包括：

按照所述第一曝光时间获取多帧RAW图像；

对每帧RAW图像进行预设处理，得到多帧待合成YUV图像。

7.根据权利要求6所述的图像处理方法，其特征在于，所述对每个RAW图像进行预设处理，得到多帧待合成YUV图像，包括：

对每帧RAW图像进行格式转换以及降噪处理，得到多帧待合成YUV图像。

8.一种图像处理装置，其特征在于，包括：

第一获取模块，用于获取第一曝光时间；

第二获取模块，用于按照所述第一曝光时间获取多帧待合成YUV图像；

合成模块，用于对所述多帧待合成YUV图像进行合成处理，得到高动态范围图像；

处理模块，用于利用所述高动态范围图像，进行图像的预览或拍照或录像操作。

9.一种存储介质，其特征在于，所述存储介质中存储有计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行权利要求1至7任一项所述的图像处理方法。

10.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有计算机程序，所述处理器通过调用所述存储器中存储的所述计算机程序，用于执行权利要求1至7任一项所述的图像处理方法。