CN113674241A - 选帧方法、装置、计算机设备和存储介质 - Google Patents

Abstract

本申请涉及一种选帧方法、装置、计算机设备和存储介质。所述方法包括：获取多个图像帧中各图像帧的亮度值，根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度，根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，并基于候选图像帧的锐度值从候选图像帧中确定参考图像帧。采用本方法能够由于同时考虑了图像帧的亮度值和锐度值，进而依据图像帧的亮度值和锐度值选取参考图像帧，从而实现在一些较复杂的环境下，能够提高将较充足光线下采集的图像帧作为参考图像帧的概率，从而便于从多个图像帧中选取到较清晰的参考图像帧。

Description

选帧方法、装置、计算机设备和存储介质

技术领域

本申请涉及图像处理技术领域，特别是涉及一种选帧方法、装置、计算机设备和存储介质。

背景技术

随着图像处理技术的发展，出现了多帧图像算法对图像进行处理，例如电子设备在夜景或者暗光环境下进行拍摄时，可以通过多帧降噪、多帧超分辨率重建等对多个图像帧进行处理，得到比较纯净的清晰图像。多帧图像算法中大多需要指定一个图像帧作为参考图像帧。

传统技术中，需要计算多帧图像中的每个图像帧的锐度，选取锐度最高的图像帧作为参考图像帧，进一步地基于参考图像帧得到比较纯净的清晰图像。

然而，在一些较复杂的环境下，难于得到较清晰的参考帧图像。例如在光线较充足突然变为暗光时，从多帧图像中难于选取到较清晰的参考帧图像。

发明内容

基于此，有必要针对上述技术问题，提供一种能够在一些较复杂的环境下，便于得到较清晰的参考帧图像的选帧方法、装置、计算机设备和存储介质。

一种选帧方法，所述方法包括：

获取多个图像帧中各所述图像帧的亮度值；

根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

在其中一个实施例中，所述基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧，包括：

若所述候选图像帧的数量为多个，则基于各所述候选图像帧的锐度值从多个所述候选图像帧中确定所述参考图像帧。

在其中一个实施例中，所述方法还包括：

若所述候选图像帧的数量为一个，则将所述候选图像帧作为所述参考图像帧。

在其中一个实施例中，所述根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度，包括：

根据各所述图像帧的亮度值，确定与各所述图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量；

将各所述图像帧对应的所述目标数量作为各所述图像帧对应的所述亮度差异程度。

在其中一个实施例中，所述根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，包括：

将最大的所述目标数量对应的图像帧作为所述候选图像帧。

在其中一个实施例中，所述方法还包括：

将剩余的图像帧中与所述参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧；

根据所述保留的图像帧，对所述参考图像帧进行处理，得到目标参考图像帧；

其中，所述剩余的图像帧包括所述多个图像帧中除所述参考图像帧之外的图像帧。

在其中一个实施例中，所述获取多个图像帧中各所述图像帧的亮度值，包括：

将各所述图像帧切分为多个目标尺寸的图像块；

对于各所述图像帧，确定所述图像帧的多个图像块的中心区域，其中，所述中心区域包括目标数量的像素；

根据各所述图像块的中心区域的像素值，确定各所述图像块的亮度值；

根据各所述图像块的亮度值，获取各所述图像帧的亮度值。

在其中一个实施例中，所述方法还包括：

对于各所述图像帧，根据所述图像帧的各所述图像块的中心区域的像素值以及所述图像块中目标像素的像素值，确定各所述图像块的锐度值，其中，所述目标像素包括与所述中心区域的距离为目标距离的像素；

根据各所述图像帧的所有所述图像块的锐度值，获取各所述图像帧的锐度值。

一种选帧装置，所述装置包括：

获取多个图像帧中各所述图像帧的亮度值；

根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述任一方法的步骤。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一方法的步骤。

上述选帧方法、装置、计算机设备和存储介质，获取多个图像帧中各图像帧的亮度值，根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度，根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，并基于候选图像帧的锐度值从候选图像帧中确定参考图像帧。由于本发明实施例根据图像帧的亮度值确定各图像帧对应的亮度差异程度，并根据各图像帧对应的亮度差异程度确定候选图像帧，进而基于候选图像帧的锐度值从候选图像帧中确定参考图像帧，也即同时依据图像帧的亮度值和锐度值确定参考图像帧，避免传统技术中，在一些较复杂环境下，仅基于图像帧的锐度值选取参考图像帧时可能将暗光时采集的噪声比较大的图像帧作为参考图像帧，导致选取的参考图像帧不清晰的问题。也就是说，本申请实施例中通过依据依据图像帧的亮度值和锐度值确定参考图像帧，从而实现在一些较复杂的环境下，能够提高将较充足光线下采集的图像帧作为参考图像帧的概率，从而便于从多个图像帧中选取到较清晰的参考图像帧。

附图说明

图1是本申请实施例提供的一种选帧方法的流程示意图；

图2是本申请实施例提供的一种亮度差异程度确定方法的流程示意图；

图3是本申请实施例提供的一种目标参考图像帧获得方法的流程示意图；

图4是本申请实施例提供的一种图像帧的亮度值获取方法的流程示意图；

图5是本申请实施例提供的一种图像帧的亮度值获取方法的流程示意图；

图6是本申请实施例提供的一种图像块的中心区域的像素以及目标像素的示意图；

图7是本申请实施例提供的一种选帧装置的结构示意图；

图8为一个实施例中计算机设备的内部结构图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

传统技术中，需要计算多帧图像中的每个图像帧的锐度，选取锐度最高的图像帧作为参考图像帧，进一步地基于参考图像帧得到比较纯净的清晰图像。

然而，在一些较复杂的环境下，难于得到较清晰的参考帧图像。例如在光线较充足突然变为暗光时，在此过程中，若电子设备采集到的多个图像帧中包括光线较充足时采集到的图像帧以及暗光时采集到的图像帧，此种情况下，暗光时采集到的某一图像帧的噪声比较大，造成该图像帧的锐度值比较大，因此，传统方法会将最大锐度值的图像帧作为参考图像帧，也即将噪声比较大的图像帧作为参考图像帧，影响选取的参考图像帧的质量，也即难于选取到较清晰的参考帧图像。

为了解决上述技术问题，本申请实施例提供了一种选帧方法。参照图1，图1是本申请实施例提供的一种选帧方法的流程示意图，以该方法可以应用于移动终端、笔记本电脑、平板电脑等电子设备，包括以下步骤：

S101、获取多个图像帧中各图像帧的亮度值。

本实施例中，多个图像帧可以为YUV格式的图像帧，也可以是Y通道的图像帧，其中，Y代表明亮度，U与V代表色度。或者多个图像帧为RGB色彩模式的图像帧，RGB代表红(R)、绿(G)、蓝(B)三个通道的颜色。

S102、根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度。

其中，根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度，可以通过如下方式实现；

对于各图像帧，确定图像帧的亮度值与其他的每个图像帧的亮度值之间的差值，将差值的绝对值之和作为图像帧与多个图像帧中其他的图像帧之间的亮度差异程度。其中，亮度差异程度与差值的绝对值之和正相关，也即某个图像帧对应的差值的绝对值之和越大，意味着该图像帧与多个图像帧中其他的图像帧之间的亮度差异程度越大。

S103、根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，并基于候选图像帧的锐度值从候选图像帧中确定参考图像帧。

其中，可将最小的亮度差异程度对应的图像帧作为候选图像帧。需要说明的是，可能存在多个最小的亮度差异程度，因此，确定的候选图像帧的数量可能为多个。

例如，若多个图像帧包括图像帧1、图像帧2、图像帧3、图像帧4、图像帧5以及图像帧6，图像帧1对应的亮度差异程度、图像帧2对应的亮度差异程度、图像帧3对应的亮度差异程度以及图像帧4对应的亮度差异程度相同，且为该6个图像帧对应的6个亮度差异程度中的最小值，则将图像帧1、图像帧2图像帧3和图像帧4均确定为候选图像帧。

需要说明的是，在一些较复杂的环境下，例如在光线较充足突然变为暗光时，在此过程中，若光线较充足时采集到的图像帧的数量大于暗光时采集到的图像帧的数量，则采用上述S102的步骤确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度时，光线较充足时采集到的各个图像帧对应的亮度差异程度往往相同，暗光时采集到的各个图像帧对应的亮度差异程度往往相同，且光线较充足时采集到的图像帧对应的亮度差异程度小于暗光时采集的图像帧对应的亮度差异程度，从而在本步骤中能够根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，例如选取最小的亮度差异程度对应的图像帧作为候选图像帧。

确定候选图像帧后，可以基于候选图像帧的锐度值从候选图像帧中确定参考图像帧。例如将候选图像帧的锐度值中的最大的锐度值对应的候选图像帧作为参考图像帧。从而实现在例如环境光的光线强度发生变化或被拍摄目标物例如光源的光线强度发生变化等一些较复杂的环境下，将较充足光线下采集的图像帧作为参考图像帧，从而能够选取到较清晰的参考图像帧。

本实施例提供的选帧方法，通过获取多个图像帧中各图像帧的亮度值，根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度，根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，并基于候选图像帧的锐度值从候选图像帧中确定参考图像帧。由于本发明实施例根据图像帧的亮度值确定各图像帧对应的亮度差异程度，并根据各图像帧对应的亮度差异程度确定候选图像帧，进而基于候选图像帧的锐度值从候选图像帧中确定参考图像帧，也即同时依据图像帧的亮度值和锐度值确定参考图像帧，避免传统技术中，在一些较复杂环境下，仅基于图像帧的锐度值选取参考图像帧时可能将暗光时采集的噪声比较大的图像帧作为参考图像帧，导致选取的参考图像帧不清晰的问题。也就是说，本申请实施例中通过依据依据图像帧的亮度值和锐度值确定参考图像帧，从而实现在一些较复杂的环境下，能够提高将较充足光线下采集的图像帧作为参考图像帧的概率，从而便于从多个图像帧中选取到较清晰的参考图像帧。

可选的，上述S103中的基于候选图像帧的锐度值从候选图像帧中确定参考图像帧，可以通过如下方式实现：

若候选图像帧的数量为多个，则基于各候选图像帧的锐度值从多个候选图像帧中确定参考图像帧。

结合上述举例进行介绍，若将图像帧1、图像帧2图像帧3和图像帧4均确定为候选图像帧，图像帧1的锐度值为该4个图像帧的锐度值中的最大值，则将图像帧1作为参考图像帧。

本实施例中，可以将候选图像帧中的任一候选图像帧作为参考图像帧，也可以将最大的锐度值对应的候选图像帧作为参考图像帧。选取最大的锐度值对应的候选图像帧作为参考图像帧时，可以进一步提高获取到较清晰的参考图像帧的概率，从而实现尽可能获取到较清晰的参考图像帧，因此，本实施例提供的方法对于从较复杂的环境下得到的多个图像帧中选取参考图像帧时具有更好的鲁棒性，具有更高的概率获取到较清晰的参考图像帧。

可选的，在上述实例例的基础上，还可以包括如下实现方式：

若候选图像帧的数量为一个，则将候选图像帧作为参考图像帧。

参照图2，图2是本申请实施例提供的一种亮度差异程度确定方法的流程示意图，本实施例涉及的是如何根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度的一种可选的实现方式。在上述实施例的基础上，上述的S102具体包括如下步骤：

S201、根据各图像帧的亮度值，确定与各图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量。

本步骤中，对于任一个图像帧，需确定其他的图像帧的亮度值与该图像帧的亮度值的差异，确定与该图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量。

结合上述举例进行介绍，对于图像帧1，需确定图像帧2的亮度值与图像帧1的亮度值的差异、图像帧3的亮度值与图像帧1的亮度值的差异、图像帧4的亮度值与图像帧1的亮度值的差异、图像帧5的亮度值与图像帧1的亮度值的差异、以及图像帧6的亮度值与图像帧1的亮度值的差异。若图像帧2的亮度值与图像帧1的亮度值的差异、图像帧3的亮度值与图像帧1的亮度值的差异以及图像帧4的亮度值与图像帧1的亮度值的差异均小于第一差异阈值，则与图像帧1的亮度值的差异小于第一差异阈值的图像帧的目标数量等于3。

对于图像帧2，需确定图像帧1的亮度值与图像帧2的亮度值的差异、图像帧3的亮度值与图像帧2的亮度值的差异、图像帧4的亮度值与图像帧2的亮度值的差异、图像帧5的亮度值与图像帧2的亮度值的差异、以及图像帧6的亮度值与图像帧2的亮度值的差异。若图像帧1的亮度值与图像帧2的亮度值的差异、图像帧3的亮度值与图像帧2的亮度值的差异以及图像帧4的亮度值与图像帧2的亮度值的差异均小于第一差异阈值，则与图像帧2的亮度值的差异小于第一差异阈值的图像帧的目标数量也等于3。

同样，对于图像帧3、图像帧4、图像帧5以及图像帧6，分别确定与图像帧3的亮度值的差异小于第一差异阈值的图像帧的目标数量，确定与图像帧4的亮度值的差异小于第一差异阈值的图像帧的目标数量，确定与图像帧5的亮度值的差异小于第一差异阈值的图像帧的目标数量，确定与图像帧6的亮度值的差异小于第一差异阈值的图像帧的目标数量。

需要说明的是，根据各图像帧的亮度值，确定与各图像帧的亮度值的差异可以通过如下方式实现：

对于各图像帧，将图像帧的亮度值与其他的任一图像帧的亮度值的差值的绝对值作为该图像帧的亮度值与其他的任一图像帧的亮度值的差异。该差值的绝对值越小，意味着该两个图像帧的亮度值之间的差异越小。

可选的，根据各图像帧的亮度值，确定与各图像帧的亮度值的差异还可以通过如下方式实现：

对于各图像帧，将图像帧的亮度值与其他的任一图像帧的亮度值的差值的绝对值与该图像帧的亮度值的比值作为该图像帧的亮度值与其他的任一图像帧的亮度值的差异。

需要说明的是，当比较两个图像帧的亮度值之间的差异时，也可以将两个亮度值中较大的亮度值与较小的亮度值的比值作为该图像帧的亮度值与其他的任一图像帧的亮度值的差异。该比值越小，意味着该两个图像帧的亮度值之间的差异越小。

S202、将各图像帧对应的目标数量作为各图像帧对应的亮度差异程度。

本实施例中，图像帧对应的目标数量越多，意味着该图像帧的亮度值与其他的图像帧的亮度值之间的亮度差异程度越低，因此，可以将图像帧对应的目标数量作为图像帧对应的亮度差异程度。

本实施例提供的方法，通过根据各图像帧的亮度值，确定与各图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量，将各图像帧对应的目标数量作为各图像帧对应的亮度差异程度，从而实现确定各图像帧对应的亮度差异程度，根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，进而根据候选图像帧的锐度值从候选图像帧中选取参考图像帧，从而实现在一些较复杂的环境下，能够提高将较充足光线下采集的图像帧作为参考图像帧的概率，从而便于从多个图像帧中选取到较清晰的参考图像帧。

可选的，在上述实施例的基础上，根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，可以通过如下方式实现：

将最大的目标数量对应的图像帧作为候选图像帧。

结合上述举例说明，若与图像帧1的亮度值的差异小于第一差异阈值的图像帧的目标数量、与图像帧2的亮度值的差异小于第一差异阈值的图像帧的目标数量、与图像帧3的亮度值的差异小于第一差异阈值的图像帧的目标数量、以及与图像帧4的亮度值的差异小于第一差异阈值的图像帧的目标数量最大且相等，则将图像帧1、图像帧2、图像帧3以及图像帧4均作为候选图像帧。

参照图3，图3是本申请实施例提供的一种目标参考图像帧获得方法的流程示意图。本实施例涉及的是如何根据参考图像帧的亮度值，确定保留的图像帧并根据保留的图像帧，对参考图像帧进行处理，得到目标参考图像帧的一种可选的实现方式。在上述实施例的基础上，该方法包括如下步骤：

S301、将剩余的图像帧中与参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧。

其中，剩余的图像帧包括多个图像帧中除参考图像帧之外的图像帧。

需确定剩余的图像帧中各图像帧的亮度值与参考图像帧的亮度值的差异，将剩余的图像帧中与参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧。

本实施例中，确定剩余的图像帧中各图像帧的亮度值与参考图像帧的亮度值的差异，可以通过如下方式实现：

将剩余的图像帧中各图像帧的亮度值与参考图像帧的亮度值的差值的绝对值，作为剩余的图像帧中各图像帧的亮度值与参考图像帧的亮度值的差异。

可选的，确定剩余的图像帧中的一个图像帧的亮度值与参考图像帧的亮度值的差值的绝对值后，也可以确定该绝对值与参考图像帧的亮度值的比值，将该比值作为剩余的图像帧中的一个图像帧的亮度值与参考图像帧的差异。

S302、根据保留的图像帧，对参考图像帧进行处理，得到目标参考图像帧。

可以采用保留的图像帧对参考图像帧进行配准、融合等技术，弥补参考图像帧中缺失的信息，从而得到目标参考图像帧。

本实施例中，由于将剩余的图像帧中与参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧，从而得到的保留的图像帧的亮度值与参考图像帧的亮度值之间的差异较小，从而有利于基于保留的图像帧，对参考图像帧进行配准、融合等处理，进而得到更加清晰的目标参考图像帧。

参照图4，图4是本申请实施例提供的一种图像帧的亮度值获取方法的流程示意图。本实施例涉及的是如何获取多个图像帧中各图像帧的亮度值的一种可选的实现方式。在上述实施例的基础上，该方法包括如下步骤：

S401、将各图像帧切分为多个目标尺寸的图像块。

例如对于64×64的图像帧，目标尺寸例如为8x8像素，则可以将该图像帧切分为多个以8x8像素为单位的图像块。从而可以得到64个以8x8像素为单位的图像块。

S402、对于各图像帧，确定图像帧的多个图像块的中心区域，其中，中心区域包括目标数量的像素。

本实施例中，中心区域可以是位于图像块的中心的4个像素，也可以是位于图像块的中心的2个像素。本实施例对中心区域包括的像素的个数不进行限制。

S403、根据各图像块的中心区域的像素值，确定各图像块的亮度值。

例如，若中心区域包括4个像素时，将该4个像素的像素值的平均值作为图像块的亮度值。或者将平均值乘以一定系数得到图像块的亮度值。

S404、根据各图像块的亮度值，获取各图像帧的亮度值。

可以将各图像块的亮度值的和作为图像帧的亮度值，或者将各图像块的亮度值的和进行平均，将平均值作为图像帧的亮度值。

传统技术中，通常将图像帧的各个像素的像素值之和作为图像帧的亮度值，因此图像帧的像素数目越多，则计算图像帧的亮度值的计算量越大。

而本实施例提供的方法，由于将各图像帧切分为多个目标尺寸的图像块，对于各图像帧，确定图像帧的多个图像块的中心区域，根据各图像块的中心区域的像素值，确定各图像块的亮度值，进而根据各图像块的亮度值确定图像帧的亮度值，从而减少了图像帧的亮度值的计算量，提高了图像帧的亮度值的计算效率，进而能够节省选取参考图像帧所需的时间。

参照图5，图5是本申请实施例提供的一种图像帧的亮度值获取方法的流程示意图。本实施例涉及的是如何获取各图像帧的锐度值的一种可选的实现方式。在上述实施例的基础上，该方法包括如下步骤：

S501、对于各图像帧，根据图像帧的各图像块的中心区域的像素值以及图像块中目标像素的像素值，确定各图像块的锐度值，其中，目标像素包括与中心区域的距离为目标距离的像素。

其中，S501可以通过如下方式实现：

确定各个目标像素的像素值与目标像素对应的中心区域的像素的像素值的差值，将各个差值的绝对值之和作为图像块的锐度值。其中，与目标像素对应的中心区域的像素可以是与目标像素在纵轴方向上对齐的像素或在横轴方向上对齐的像素。

结合上述举例介绍，参照图6，图6是本申请实施例提供的一种图像块的中心区域的像素以及目标像素的示意图。参照图6，图6示出的图像块包括8行8列的像素，一个小方格表示一个像素。本实施例中以中心区域包括像素601、像素602、像素603以及像素604，且目标像素包括像素605、像素606、像素607、像素608、像素609、像素610、像素611以及像素612为例进行介绍。其中，像素605位于像素601的正上方、像素606位于像素602的正上方、像素607位于像素601的正左方、像素608位于像素603的正左方、像素611位于像素603的正下方、像素612位于像素604的正下方、像素609位于像素602的正右方、像素610位于像素604的正右方。

本实施例中，目标像素是像素605时，与像素605对应的中心区域的像素是像素601，需确定像素605的像素值与像素605对应的中心区域的像素601的像素值的差值。目标像素是像素606时，与像素606对应的中心区域的像素是像素602，需确定像素606的像素值与像素606对应的中心区域的像素602的像素值的差值。同样计算像素601的像素值与像素607的像素值的差值，像素603的像素值与像素608的像素值的差值，像素603的像素值与像素611的像素值的差值，像素604的像素值与像素612的像素值的差值，像素602的像素值与像素609的像素值的差值，像素604的像素值与像素610的像素值的差值，最后将各个差值的绝对值之和作为图像块的锐度值。

由于传统技术中，需要计算图像帧中每个像素的像素值与该像素相邻的像素的像素值的差值，基于计算的各差值确定图像帧的锐度值，因此，计算量比较大。而本实施例中无需依据整个图像帧中各像素的像素值，仅基于中心区域的像素的像素值与目标像素的像素值，即可计算图像块的锐度值，因此，降低了计算锐度值所依据的像素的数量，从而可以提高计算图像块的锐度值的计算速度，缩短计算图像块的锐度值所需的时间，进而缩短了基于各图像块的锐度值，计算图像帧的锐度值所需的时间。

S502、根据各图像帧的所有图像块的锐度值，获取各图像帧的锐度值。

本实施例提供的方法，通过对于各图像帧，根据图像帧的各图像块的中心区域的像素值以及图像块中目标像素的像素值，确定各图像块的锐度值，根据各图像帧的所有图像块的锐度值，获取各图像帧的锐度值。从而降低了计算锐度值所依据的像素的数量，从而可以提高计算图像块的锐度值的计算速度，缩短计算图像块的锐度值所需的时间，进而缩短了基于各图像块的锐度值，计算图像帧的锐度值所需的时间。

应该理解的是，虽然图1-5的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图1-5中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。

参照图7，图7是本申请实施例提供的一种选帧装置的结构示意图，该装置700包括：第一获取模块、第一确定模块和第二确定模块，其中：

第一获取模块701，用于获取多个图像帧中各所述图像帧的亮度值；

第一确定模块702，用于根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

第二确定模块703，用于根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

本实施例提供的选帧装置，通过获取多个图像帧中各图像帧的亮度值，根据各图像帧的亮度值，确定各图像帧与多个图像帧中其他的图像帧之间的亮度差异程度，根据各图像帧对应的亮度差异程度从多个图像帧中确定候选图像帧，并基于候选图像帧的锐度值从候选图像帧中确定参考图像帧。由于本发明实施例根据图像帧的亮度值确定各图像帧对应的亮度差异程度，并根据各图像帧对应的亮度差异程度确定候选图像帧，进而基于候选图像帧的锐度值从候选图像帧中确定参考图像帧，也即同时依据图像帧的亮度值和锐度值确定参考图像帧，避免传统技术中，在一些较复杂环境下，仅基于图像帧的锐度值选取参考图像帧时可能将暗光时采集的噪声比较大的图像帧作为参考图像帧，导致选取的参考图像帧不清晰的问题。也就是说，本申请实施例中通过依据依据图像帧的亮度值和锐度值确定参考图像帧，从而实现在一些较复杂的环境下，能够提高将较充足光线下采集的图像帧作为参考图像帧的概率，从而便于从多个图像帧中选取到较清晰的参考图像帧。

可选的，所述第二确定模块703，具体用于若所述候选图像帧的数量为多个，则基于各所述候选图像帧的锐度值从多个所述候选图像帧中确定所述参考图像帧。

可选的，若所述候选图像帧的数量为一个，则将所述候选图像帧作为所述参考图像帧。

可选的，第一确定模块702根据各所述图像帧的亮度值，确定与各所述图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量；

将各所述图像帧对应的所述目标数量作为各所述图像帧对应的所述亮度差异程度。

可选的，第二确定模块703，具体用于将最大的所述目标数量对应的图像帧作为所述候选图像帧。

可选的，将剩余的图像帧中与所述参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧；

根据所述保留的图像帧，对所述参考图像帧进行处理，得到目标参考图像帧；

其中，所述剩余的图像帧包括所述多个图像帧中除所述参考图像帧之外的图像帧。

可选的，第一获取模块701，具体用于将各所述图像帧切分为多个目标尺寸的图像块；对于各所述图像帧，确定所述图像帧的多个图像块的中心区域，其中，所述中心区域包括目标数量的像素；根据各所述图像块的中心区域的像素值，确定各所述图像块的亮度值；根据各所述图像块的亮度值，获取各所述图像帧的亮度值。

可选的，还可以包括：

第三确定模块，用于对于各所述图像帧，根据所述图像帧的各所述图像块的中心区域的像素值以及所述图像块中目标像素的像素值，确定各所述图像块的锐度值，其中，所述目标像素包括与所述中心区域的距离为目标距离的像素；

第二获取模块，用于根据各所述图像帧的所有所述图像块的锐度值，获取各所述图像帧的锐度值。

关于选帧装置的具体限定可以参见上文中对于选帧方法的限定，在此不再赘述。上述选帧装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图8所示，图8为一个实施例中计算机设备的内部结构图。该计算机设备包括通过***总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作***和计算机程序。该内存储器为非易失性存储介质中的操作***和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种选帧方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。

本领域技术人员可以理解，图8中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现以下步骤：

获取多个图像帧中各所述图像帧的亮度值；

根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

若所述候选图像帧的数量为多个，则基于各所述候选图像帧的锐度值从多个所述候选图像帧中确定所述参考图像帧。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

若所述候选图像帧的数量为一个，则将所述候选图像帧作为所述参考图像帧。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

根据各所述图像帧的亮度值，确定与各所述图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量；

将各所述图像帧对应的所述目标数量作为各所述图像帧对应的所述亮度差异程度。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

将最大的所述目标数量对应的图像帧作为所述候选图像帧。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

将剩余的图像帧中与所述参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧；

根据所述保留的图像帧，对所述参考图像帧进行处理，得到目标参考图像帧；

其中，所述剩余的图像帧包括所述多个图像帧中除所述参考图像帧之外的图像帧。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

将各所述图像帧切分为多个目标尺寸的图像块；对于各所述图像帧，确定所述图像帧的多个图像块的中心区域，其中，所述中心区域包括目标数量的像素；根据各所述图像块的中心区域的像素值，确定各所述图像块的亮度值；根据各所述图像块的亮度值，获取各所述图像帧的亮度值。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

对于各所述图像帧，根据所述图像帧的各所述图像块的中心区域的像素值以及所述图像块中目标像素的像素值，确定各所述图像块的锐度值，其中，所述目标像素包括与所述中心区域的距离为目标距离的像素；根据各所述图像帧的所有所述图像块的锐度值，获取各所述图像帧的锐度值。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

获取多个图像帧中各所述图像帧的亮度值；

根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

若所述候选图像帧的数量为多个，则基于各所述候选图像帧的锐度值从多个所述候选图像帧中确定所述参考图像帧。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

若所述候选图像帧的数量为一个，则将所述候选图像帧作为所述参考图像帧。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

根据各所述图像帧的亮度值，确定与各所述图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量；将各所述图像帧对应的所述目标数量作为各所述图像帧对应的所述亮度差异程度。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

将最大的所述目标数量对应的图像帧作为所述候选图像帧。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

将剩余的图像帧中与所述参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧；根据所述保留的图像帧，对所述参考图像帧进行处理，得到目标参考图像帧；其中，所述剩余的图像帧包括所述多个图像帧中除所述参考图像帧之外的图像帧。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

将各所述图像帧切分为多个目标尺寸的图像块；对于各所述图像帧，确定所述图像帧的多个图像块的中心区域，其中，所述中心区域包括目标数量的像素；根据各所述图像块的中心区域的像素值，确定各所述图像块的亮度值；根据各所述图像块的亮度值，获取各所述图像帧的亮度值。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

对于各所述图像帧，根据所述图像帧的各所述图像块的中心区域的像素值以及所述图像块中目标像素的像素值，确定各所述图像块的锐度值，其中，所述目标像素包括与所述中心区域的距离为目标距离的像素；根据各所述图像帧的所有所述图像块的锐度值，获取各所述图像帧的锐度值。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory，ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic Random Access Memory，DRAM)等。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (11)

1.一种选帧方法，其特征在于，所述方法包括：

获取多个图像帧中各所述图像帧的亮度值；

根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

2.根据权利要求1所述的方法，其特征在于，所述基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧，包括：

若所述候选图像帧的数量为多个，则基于各所述候选图像帧的锐度值从多个所述候选图像帧中确定所述参考图像帧。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

若所述候选图像帧的数量为一个，则将所述候选图像帧作为所述参考图像帧。

4.根据权利要求1-3任一所述的方法，其特征在于，所述根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度，包括：

根据各所述图像帧的亮度值，确定与各所述图像帧的亮度值的差异小于第一差异阈值的图像帧的目标数量；

将各所述图像帧对应的所述目标数量作为各所述图像帧对应的所述亮度差异程度。

5.根据权利要求4所述的方法，其特征在于，所述根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，包括：

将最大的所述目标数量对应的图像帧作为所述候选图像帧。

6.根据权利要求1-3任一所述的方法，其特征在于，所述方法还包括：

将剩余的图像帧中与所述参考图像帧的亮度值的差异小于第二差异阈值的图像帧作为保留的图像帧；

根据所述保留的图像帧，对所述参考图像帧进行处理，得到目标参考图像帧；

其中，所述剩余的图像帧包括所述多个图像帧中除所述参考图像帧之外的图像帧。

7.根据权利要求1-3任一所述的方法，其特征在于，所述获取多个图像帧中各所述图像帧的亮度值，包括：

将各所述图像帧切分为多个目标尺寸的图像块；

对于各所述图像帧，确定所述图像帧的多个图像块的中心区域，其中，所述中心区域包括目标数量的像素；

根据各所述图像块的中心区域的像素值，确定各所述图像块的亮度值；

根据各所述图像块的亮度值，获取各所述图像帧的亮度值。

8.根据权利要求1-3任一所述的方法，其特征在于，所述方法还包括：

对于各所述图像帧，根据所述图像帧的各所述图像块的中心区域的像素值以及所述图像块中目标像素的像素值，确定各所述图像块的锐度值，其中，所述目标像素包括与所述中心区域的距离为目标距离的像素；

根据各所述图像帧的所有所述图像块的锐度值，获取各所述图像帧的锐度值。

9.一种选帧装置，其特征在于，所述装置包括：

第一获取模块，用于获取多个图像帧中各所述图像帧的亮度值；

第一确定模块，用于根据各所述图像帧的亮度值，确定各所述图像帧与所述多个图像帧中其他的图像帧之间的亮度差异程度；

第二确定模块，用于根据各所述图像帧对应的所述亮度差异程度从所述多个图像帧中确定候选图像帧，并基于所述候选图像帧的锐度值从所述候选图像帧中确定参考图像帧。

10.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至8中任一项所述的方法的步骤。

11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。

Images