CN107370958A - 图像虚化处理方法、装置及拍摄终端 - Google Patents

Abstract

本发明提出一种图像虚化处理方法、装置及拍摄终端，其中方法包括：获取待处理的景深图像；确定景深图像中的前景区域及后景区域；在对后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，则对所述目标滤波区域中各像素点的权重值进行调整。该方法通过将包含有前景区域像素点的目标滤波区域中的各像素点的权重值进行调整，使得虚化操作后，图像的前景区域与后景区域之间界限清楚，有效保护了后景区域的虚化边缘，提高了图像的整体画质，提升了用户的体验度。

Description

图像虚化处理方法、装置及拍摄终端

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像虚化处理方法、装置及拍摄终端。

背景技术

目前，在对拍摄图像进行处理时，为了突出图像中的主体部分，通常可以将图像背景部分进行虚化处理。比如可以使用高斯模糊技术将图像中的背景部分进行虚化，以保留主体部分。

具体的，高斯模糊是指一种根据距离作为权重的模糊算法，通常是将待虚化的某一点及周围相邻点的像素值进行统计，并利用加权平均的计算方式得到待虚化像素点点对应的像素值。然而，发明人发现，在使用高斯模糊技术处理图像后，整个图像中主体部分与背景部分的衔接边缘处不清晰，有重影，处理之后的拍摄图像的整体画质不佳，具体如图1所示。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的第一个目的在于提出一种图像虚化处理方法，该方法通过将包含有前景区域像素点的目标滤波区域中的各像素点的权重值进行调整，使得虚化操作时，图像的前景区域与后景区域之间界限更清楚，有效保护了后景区域的虚化边缘，提高了图像的整体画质，提升了用户的体验度。

本发明的第二个目的在于提出一种图像虚化处理装置。

本发明的第三个目的在于提出一种拍摄终端。

本发明的第四个目的在于提出一种计算机可读存储介质。

为达上述目的，本发明第一方面实施例提出了一种图像虚化处理方法，包括：

获取待处理的景深图像；

确定所述景深图像中的前景区域及后景区域；

在对所述后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，则对所述目标滤波区域中各像素点的权重值进行调整。

本发明实施例提供的图像虚化处理方法，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中的各像素点的权重值进行调整，使得对后景区域进行虚化操作时，图像的前景区域与后景区域之间界限更清楚，有效保护了后景区域的虚化边缘，提高了图像的整体画质，提升了用户的体验度。

另外，本发明上述实施例提出的图像虚化处理方法还可以具有如下附加的技术特征：

在本发明的一个实施例中，所述确定所述景深图像中的前景区域及后景区域，包括：

根据预设的范围，确定所述景深图像中的前景区域及后景区域。

在本发明的另一个实施例中，所述待处理的景深图像中包括人像；

所述确定所述景深图像中的前景区域及后景区域，包括：

对所述景深图像进行人脸识别，确定人脸区域；

根据所述人脸区域对应的景深值，确定所述景深图像中的前景区域及后景区域。

在本发明的另一个实施例中，所述确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，包括：

若所述目标滤波区域中包含的任一像素点对应的景深值，在所述预设的范围内，则确定所述任一像素点为所述前景区域的像素点；

或者，

若所述目标滤波区域中两个相邻像素点分别对应的景深值的差值，大于预设的值，则确定所述目标滤波区域中包含位于所述前景区域的像素点。

在本发明的另一个实施例中，所述对所述目标滤波区域中各像素点的权重值进行调整，包括：

将位于所述前景区域的像素点的权重值置零；

调整所述目标滤波区域中剩余像素点的权重值，使剩余像素点的权重值的和等于一。

在本发明的另一个实施例中，所述调整所述目标滤波区域中剩余像素点的权重值，包括：

将所述剩余像素点的权重值等比例扩大；

或者，

根据所述剩余像素点分别对应的景深值，调整所述剩余像素点的权重值。

为达上述目的，本发明第二方面实施例提出了一种图像虚化处理装置，包括：

获取模块，用于获取待处理的景深图像；

确定模块，用于确定所述景深图像中的前景区域及后景区域；

调整模块，用于在对所述后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，则对所述目标滤波区域中各像素点的权重值进行调整。

本发明实施例提供的图像虚化处理装置，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中的各像素点的权重值进行调整，使得对后景区域进行虚化操作时，图像的前景区域与后景区域之间界限更清楚，有效保护了后景区域的虚化边缘，提高了图像的整体画质，提升了用户的体验度。

另外，本发明上述实施例提出的图像虚化处理装置还可以具有如下附加的技术特征：

在本发明的一个实施例中，所述确定模块，具体用于：

根据预设的范围，确定所述景深图像中的前景区域及后景区域。

在本发明的另一个实施例中，所述待处理的景深图像中包括人像；

所述确定模块，包括：

第一确定子单元，用于对所述景深图像进行人脸识别，确定人脸区域；

第二确定子单元，用于根据所述人脸区域对应的景深值，确定所述景深图像中的前景区域及后景区域。

在本发明的另一个实施例中，所述调整模块具体用于：

若所述目标滤波区域中包含的任一像素点对应的景深值，在所述预设的范围内，则确定所述任一像素点为所述前景区域的像素点；

或者，

若所述目标滤波区域中两个相邻像素点分别对应的景深值的差值，大于预设的值，则确定所述目标滤波区域中包含位于所述前景区域的像素点。

在本发明的另一个实施例中，所述调整模块还包括：

第一调整子单元，用于将位于所述前景区域的像素点的权重值置零；

第二调整子单元，用于调整所述目标滤波区域中剩余像素点的权重值，使剩余像素点的权重值的和等于一。

在本发明的另一个实施例中，所述第二调整子单元具体用于：

将所述剩余像素点的权重值等比例扩大；

或者，

根据所述剩余像素点分别对应的景深值，调整所述剩余像素点的权重值。

为达上述目的，本发明第三方面实施例提出了一种拍摄终端，包括：存储器、处理器以及图像处理电路；

所述存储器，用于存储所述处理器的可执行指令；

所述图像处理电路，用于处理景深图像；

所述处理器，用于调用所述存储器中的程序代码，并根据所述图像处理电路输出的景深图像，以实现第一方面实施例所述的图像虚化处理方法。

本发明实施例提供的拍照终端，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中的各像素点的权重值进行调整，使得对后景区域进行虚化操作时，图像的前景区域与后景区域之间界限更清楚，有效保护了后景区域的虚化边缘，提高了图像的整体画质，提升了用户的体验度。

为达上述目的，本发明第四方面实施例提出了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时，实现第一方面实施例所述的图像虚化处理方法。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1为目前使用高斯模糊技术对图像进行虚化处理后的示意图；

图2为本发明一个实施例的图像虚化处理方法的流程图；

图3为本发明实施例中确定待虚化像素点的目标滤波区域的示意图；

图4为本发明另一个实施例的图像虚化处理方法的流程图；

图5为本发明实施例中对目标滤波区域中包含有前景区域的像素点的前景区域像素点进行处理的示意图；

图6为本发明一个对图像进行虚化处理后的效果图；

图7为本发明一个实施例的图像虚化处理装置的结构示意图；

图8为本发明的另一个实施例的图像虚化处理装置的结构示意图；

图9为本发明的再一个实施例的图像虚化处理装置的结构示意图；

图10为本发明的一个实施例的拍摄终端的结构示意图；

图11为本发明的一个实施例的图像处理电路的结构示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。

本发明主要针对现有技术中，通过高斯模糊技术对图像进行虚化处理时，处理后的图像中的前景区域与后景区域的衔接边界处不清晰，出现重影的问题，提出了一种图像虚化处理方法。

本发明提出的图像处理方法，首先获取待处理的景深图像，然后再确定获取的景深图像中的前景区域和后景区域，并且在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含前景区域中的像素点，如果包含位于前景区域的像素点则对目标滤波区域中的各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中的各像素点的权重值进行调整，使得虚化操作后，图像的前景区域与后景区域之间界限清楚，有效保护了后景区域的虚化边缘，提高了图像的整体画质，提升了用户的体验度。

下面结合附图对本发明实施例提出的图像虚化处理方法进行详细描述。

图2为本发明的一个实施例的图像虚化处理方法的流程图。

如图2所示，该图像虚化处理方法可以包括以下步骤：

步骤201，获取待处理的景深图像。

本发明实施例提供的图像虚化处理方法，可以由本发明提供图像虚化处理装置执行，该装置可以被配置在拍摄终端中，以实现对拍摄的图像进行图像虚化处理。

其中，本申请中拍摄终端可以是任一具有拍摄功能的硬件设备，比如，相机、智能手机、个人数字助理(Personal Digital Assistant，简称为PDA)等等。

在具体实现时，可通过现有技术手段来获取待处理的景深图像，本实施例在此不对其进行详细描述。

需要说明的是，在本实施例中获取的景深图像可以是风景图像，也可以是人物图像，或者还可以是建筑类图像等，本申请对此不作具体限定。

步骤202，确定景深图像中的前景区域及后景区域。

具体实现时，本申请可以根据景深图像的类型确定前景区域和后景区域，或者还可以根据景深图像中拍摄物的亮度来确定前景区域和后景区域。

具体的，若本实施例是根据景深图像的类型确定前景区域和后景区域，则先确定景深图像是属于人物图像还是风景图像，在确定待处理的景深图像的具体类型之后，可通过以下方式来确定获取的待处理景深图像的前景区域以及后景区域：

方式一，若待处理的景深图像是风景图像或者建筑类的图像，则可以根据预设的范围，来确定待处理的景深图像中的前景区域以及后景区域。

具体的，本实施例中预设的范围可以是用户设置的，或者还可以是拍摄设备根据景深图像自动配置的，在此不对其做具体限定。

举例来说，若预设的范围为20厘米(cm)至50cm。终端当前获取的景深图像中包括一朵花，且该朵花对应的景深范围为55cm-60cm,因此，可以确定该朵花位于该深度图像中的后景区域。

方式二，若待处理的景深图像是人物图像，则可以先对待处理的景深图像进行人脸识别，以确定该景深图像中人脸区域，然后根据人脸区域对应的景深值确定景深图像中前景区域及后景区域。

例如，检测到的人脸区域的景深值为15，那么可以根据确定景深值在12-17范围内的区域为前景区域，其他区域则为后景区域。

需要说明的是，上述人脸区域的景深值可以指人脸区域内所有像素点对应的景深值的均值，或者，也可以是人脸区域中任意一个像素点的景深值，本实施例对此不做限定。

若本实施例是根据景深图像中拍摄物的亮度来确定前景区域和后景区域，则获取景深图像的亮度情况，根据亮度情况确定前景区域和后景区域。

具体的，在实际拍摄过程中，可能因为环境因素需要对拍摄物进行补光，那么在补光过程中，不同距离的物体所接受的光的强度不同，因此在拍摄设备的显示屏幕上显示的亮度不相同。例如，距离拍摄设备近的区域亮度比较高，距离拍摄设备距离远的区域亮度就比较低。

基于上述分析，本申请可根据图像中物体所在不同位置的亮度情况来确定景深图像的前景区域和后景区域。也就是说，可以将拍摄图像中亮度高的区域确定为前景区域，将亮度低的区域确定为后景区域。

步骤203，在对后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于前景区域的像素点，则对目标滤波区域中各像素点的权重值进行调整。

具体的，在确定出景深图像的前景区域和后景区域之后，可对确定的后景区域进行虚化处理。其中，在对确定的后景区域进行虚化处理时，需要对后景区域中待虚化像素点的目标滤波区域进行确定。

在本实施例中，可根据现有高斯模糊技术中的确定方式来确定待虚化像素点的目标滤波区域。

例如，如图3所示，可在图像中取包含待处理像素点的3*3矩阵，若待处理像素点的位置坐标为(0，0)，则其余8个像素点的坐标为(-1,1)，(0,1)，(1,1)，(-1,0)，(1,0)，(-1，-1)，(0，-1)，(1，-1)。

进一步地，在确定出待虚化像素点的目标滤波区域之后，可判断该目标滤波区域中是否包含有前景区域中的像素点。

具体的，可通过以下方式确定目标滤波区域中是否包含有位于前景区域的像素点。

一种实现情形，若目标滤波区域中包含的任一像素点对应的景深值，在预设的范围内，则确定任一像素点为前景区域的像素点；

具体实现时，可获取目标滤波区域中所有像素点的景深值，然后将所有像素点对应的景深值，与预设的范围进行一一进行匹配，如果像素点的景深值在预设范围内，则说明该像素点属于前景区域，否则说明像素点属于后景区域。

举例来说，假设目标滤波区域中某个像素点的景深值为12，预设的范围为10-20，则经过匹配可以得出该像素点位于预设范围内，即该像素点属于前景区域。

又例如，目标滤波区域中的某个像素点的景深值为30，则经过匹配可以得出该像素点属于后景区域。

或者，另一种实现情形，若目标滤波区域中两个相邻像素点分别对应的景深值的差值，大于预设的值，则确定目标滤波区域中包含位于前景区域的像素点。

具体的，由于通常前景区域的景深与后景区域的景深差值较大，因此本实施例中，还可以根据相邻像素点间的景深变化值，确定各像素点所属的区域。

首先获取目标滤波区间中所有的像素点对应的景深值，然后将相邻像素点的景深值两两作差，并将差值与预设值进行比对，如果差值大于预设的值，则说明该目标滤波区域中包含前景区域的像素点。

例如，目标滤波区域中某两个相邻像素点的景深值分别为24和25，那么将这两个像素点的景深值作差得到差值为1。若预设值为10，那么说明这两个像素点的差值小于预设值，则该目标滤波区域中不包含前景区域的像素点。

在本实施例中，如果判断出待虚化的像素点对应的目标滤波区域中包含前景区域的像素点，则调整该目标滤波区域中各像素点的权重值，以使得对待虚化的像素点进行虚化处理时，前景区域中的像素点不会影响后景区域的虚化效果，从而使虚化后前、后景区域的界限清晰，不仅保护了虚化的边缘，且使得主体更突出。

本发明实施例提供的图像虚化处理方法，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中，各像素点的权重值进行调整，使得获得的后景区域虚化处理后的图像中，前景区域与后景区域之间的界限干净、清晰，有效保护了后景区域的虚化边缘，且使得主体更突出，提高了图像的整体画质，提升了用户的体验度。

通过上述分析可知，在对后景区域进行虚化处理时，需要先判断待虚化像素点所对应的目标滤波区域中，是否包含前景区域中的像素点，如果确定该目标滤波区域中包含前景区域的像素点时，则对目标滤波区域中的各像素点的权重值进行调整。在本发明一种可能的实现情景中，对包含有前景区域的像素点的目标滤波区域中的各像素点的权重值进行调整，可通过多种方式实现，从而使得获得的后景区域虚化处理后的图像中，前景区域与后景区域之间的界限干净、清晰。下面结合图4，对上述情况下的图像虚化处理方法进行进一步说明。

图4本发明的另一个实施例的图像虚化处理方法的流程图。

如图4所示，该图像虚化处理方法可以包括以下步骤：

步骤401，获取待处理的景深图像。

步骤402，确定景深图像中的前景区域及后景区域。

步骤403，在对后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于前景区域的像素点，则将位于前景区域的像素点的权重值置零。

步骤404，调整目标滤波区域中剩余像素点的权重值，使剩余像素点的权重值的和等于一。

具体的，在确定目标滤波区域中包含位于前景区域的像素点时，可通过将前景区域的像素点的权重值置为零，以使得对后景区域进行虚化处理时，不会因为待虚化像素点的目标滤波区域中包含有前景区域的像素点的信息，而导致虚化处理后的后景区域与前景区域之间的边界不清楚，具体可参见图5所示。

其中，由图5可知，待虚化的像素点为A，并且在像素点A的附近存在前景区域的像素点B，那么在对像素点A进行虚化处理之前，先将包含有像素点B的左侧区域的权重值置为0。

进一步地，在将前景区域的像素点的权重值置为零之后，为了保证虚化处理的像素点的标准始终符合预设虚化处理的标准，对此，本申请可对目标滤波区域中的其余像素点的权重进行调整。

具体实现时，可通过以下几种方式来调整目标滤波区域中的剩余像素点的权重值。

一种实现方式，将剩余像素点的权重值等比例扩大。

具体的，假设对图像后景区域的像素点进行虚化处理的统一标准为1，那么在将前景区域的像素点的权重值置为零之后，目标滤波区域中的像素点的权重值之和就不等于1，因此通过将剩余像素点的权重值进行等比例扩大之后，使得剩余像素点的权重值相加之和始终等于1。由此保证了对待虚化处理的像素点进行虚化处理时，不会出现虚化失真的现象，并且使得图像的前景区域与后景区域之间的界限更干净、清晰，不出现重影的情况。

或者，另一种实现方式，根据剩余像素点分别对应的景深值，调整剩余像素点的权重值。

具体的，由于图像中不同区域中的像素点的景深值差别比较大，因此在对剩余像素点的权重值进行调整时，可根据剩余像素点分别对应的景深值进行相应调整。

例如，可将与待虚化像素点处于同一景深水平的像素点的权重值增加的多一些，将与待虚化像素点不处于同一景深水平的像素点的权重值增加的少一点。

可以理解的是，通过将与待虚化的像素点处于同一景深水平的像素点的权重值增大多一些，以使得对后景区域虚化处理后的图像中，在实现前景区域与后景区域之间的边界干净、清晰的基础上，保证后景区域不失真。

综上，本申请中通过上述图像虚化处理方法对图像进行虚化处理后的效果，如图6所示。

本发明实施例提供的图像虚化处理方法，通过对包含有前景区域像素点的目标滤波区域中各像素点的权重值进行调整，使得获得的后景区域虚化处理后的图像中，前景区域与后景区域之间的界限干净、清晰，有效保护了后景区域的虚化边缘，且使得主体更突出，提高了图像的整体画质，提升了用户的体验度。

为了实现上述实施例，本发明还提出一种图像虚化处理装置。

图7为本发明一个实施例的图像虚化处理装置的结构示意图。

参照图7，该图像虚化处理装置包括：获取模块10、确定模块20以及调整模块30。

其中，获取模块10用于获取待处理的景深图像；

确定模块20用于确定景深图像中的前景区域及后景区域；

在一种可能实现情形中，确定模块20具体用于：根据预设的范围，确定景深图像中的前景区域及后景区域。

进一步地，如图8所示，当待处理的景深图像中包括人像，确定模块20包括：第一确定子单元21和第二确定子单元22。

其中，第一确定子单元21用于对景深图像进行人脸识别，确定人脸区域；

第二确定子单元22用于根据人脸区域对应的景深值，确定景深图像中的前景区域及后景区域。

调整模块30用于在对后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于前景区域的像素点，则对目标滤波区域中各像素点的权重值进行调整。

在本发明的一种实现形式中，调整模块30具体用于：

若目标滤波区域中包含的任一像素点对应的景深值，在预设的范围内，则确定任一像素点为前景区域的像素点；

或者，

若目标滤波区域中两个相邻像素点分别对应的景深值的差值，大于预设的值，则确定目标滤波区域中包含位于前景区域的像素点。

在另一种可能实现的情形中，如图9所示，该装置中调整模块30还包括：第一调整子单元31和第二调整子单元32。

其中，第一调整子单元31用于将位于前景区域的像素点的权重值置零；

第二调整子单元32用于调整目标滤波区域中剩余像素点的权重值，使剩余像素点的权重值的和等于一。

进一步地，第二调整子单元32具体用于：

将剩余像素点的权重值等比例扩大；

或者，

根据剩余像素点分别对应的景深值，调整剩余像素点的权重值。

需要说明的是，本实施例的图像虚化处理装置的实施过程和技术原理参见前述对图像虚化处理方法实施例的解释说明，此处不再赘述。

本发明实施例提供的图像虚化处理装置，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中，各像素点的权重值进行调整，使得获得的后景区域虚化处理后的图像中，前景区域与后景区域之间的界限干净、清晰，有效保护了后景区域的虚化边缘，且使得主体更突出，提高了图像的整体画质，提升了用户的体验度。

为了实现上述实施例，本发明还提出了一种拍摄终端。

图10为本发明一个实施例的拍摄终端的结构示意图。

如图10所示，该拍摄终端100，包括存储器111、处理器112以及图像处理电路113。

其中，存储器111用于存储处理器112的可执行指令；

处理器112用于调用存储器111中的程序代码，并根据图像处理电路113输出的景深图像，以实现第一方面实施例的图像虚化处理方法。

具体的，图像处理电路113可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。

图11为一个实施例中图像处理电路的示意图。如图11所示，为便于说明，仅示出与本发明实施例相关的图像处理技术的各个方面。

如图11所示，图像处理电路113包括成像设备1140、ISP处理器1150和控制逻辑器1160。成像设备1140可包括具有一个或多个透镜1141、图像传感器1142的照相机和结构光投射器1143。结构光投射器1143将结构光投影至被测物。其中，该结构光图案可为激光条纹、格雷码、正弦条纹、或者，随机排列的散斑图案等。图像传感器1142捕捉投影至被测物形成的结构光图像，并将结构光图像发送至ISP处理器1150，由ISP处理器1150对结构光图像进行解调获取被测物的深度信息。同时，图像传感器1142也可以捕捉被测物的色彩信息。当然，也可以由两个图像传感器1142分别捕捉被测物的结构光图像和色彩信息。

其中，以散斑结构光为例，ISP处理器1150对结构光图像进行解调，具体包括，从该结构光图像中采集被测物的散斑图像，将被测物的散斑图像与参考散斑图像按照预定算法进行图像数据计算，获取被测物上散斑图像的各个散斑点相对于参考散斑图像中的参考散斑点的移动距离。利用三角法转换计算得到散斑图像的各个散斑点的深度值，并根据该深度值得到被测物的深度信息。

当然，还可以通过双目视觉的方法或基于飞行时差TOF的方法来获取该深度图像信息等，在此不做限定，只要能够获取或通过计算得到被测物的深度信息的方法都属于本实施方式包含的范围。

在ISP处理器1150接收到图像传感器1142捕捉到的被测物的色彩信息之后，可被测物的色彩信息对应的图像数据进行处理。ISP处理器1150对图像数据进行分析以获取可用于确定和/或成像设备1140的一个或多个控制参数的图像统计信息。图像传感器1142可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器1142可获取用图像传感器1142的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器1150处理的一组原始图像数据。

ISP处理器1150按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器1150可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的图像统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器1150还可从图像存储器1170接收像素数据。图像存储器1170可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(DirectMemory Access，直接直接存储器存取)特征。

当接收到原始图像数据时，ISP处理器1150可进行一个或多个图像处理操作。

在ISP处理器1150获取到被测物的色彩信息和深度信息后，可对其进行融合，得到三维图像。其中，可通过外观轮廓提取方法或轮廓特征提取方法中的至少一种提取相应的被测物的特征。例如通过主动形状模型法ASM、主动外观模型法AAM、主成分分析法PCA、离散余弦变换法DCT等方法，提取被测物的特征，在此不做限定。再将分别从深度信息中提取到被测物的特征以及从色彩信息中提取到被测物的特征进行配准和特征融合处理。这里指的融合处理可以是将深度信息以及色彩信息中提取出的特征直接组合，也可以是将不同图像中相同的特征进行权重设定后组合，也可以有其他融合方式，最终根据融合后的特征，生成三维图像。

三维图像的图像数据可发送给图像存储器1170，以便在被显示之前进行另外的处理。ISP处理器1150从图像存储器1170接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。三维图像的图像数据可输出给显示器1180，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器1150的输出还可发送给图像存储器1170，且显示器1180可从图像存储器1170读取图像数据。在一个实施例中，图像存储器1170可被配置为实现一个或多个帧缓冲器。此外，ISP处理器1150的输出可发送给编码器/解码器1190，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器1180设备上之前解压缩。编码器/解码器1190可由CPU或GPU或协处理器实现。

ISP处理器1150确定的图像统计信息可发送给控制逻辑器1160单元。控制逻辑器1160可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的图像统计信息，确定成像设备1140的控制参数。

本发明实施例提供的拍照终端，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中，各像素点的权重值进行调整，使得获得的后景区域虚化处理后的图像中，前景区域与后景区域之间的界限干净、清晰，有效保护了后景区域的虚化边缘，且使得主体更突出，提高了图像的整体画质，提升了用户的体验度。

为了实现上述实施例，本发明还提出了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时，实现第一方面实施例的图像虚化处理方法。

本发明实施例提供的计算机可读存储介质，可设置在需要进行图像虚化处理的拍摄终端中，在终端设备进行图像虚化处理时，通过获取待处理的景深图像，以确定获取的景深图像的前景区域和后景区域，然后在对确定的后景区域进行虚化处理时，先确定待虚化的像素点对应的目标滤波区域中是否包含位于前景区域的像素点，如果包含则对目标滤波区域中各像素点的权重值进行调整。由此，通过将包含有前景区域像素点的目标滤波区域中，各像素点的权重值进行调整，使得获得的后景区域虚化处理后的图像中，前景区域与后景区域之间的界限干净、清晰，有效保护了后景区域的虚化边缘，且使得主体更突出，提高了图像的整体画质，提升了用户的体验度。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行***执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种图像虚化处理方法，其特征在于，包括：

获取待处理的景深图像；

确定所述景深图像中的前景区域及后景区域；

在对所述后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，则对所述目标滤波区域中各像素点的权重值进行调整。

2.如权利要求1所述的方法，其特征在于，所述确定所述景深图像中的前景区域及后景区域，包括：

根据预设的范围，确定所述景深图像中的前景区域及后景区域。

3.如权利要求1所述的方法，其特征在于，所述待处理的景深图像中包括人像；

所述确定所述景深图像中的前景区域及后景区域，包括：

对所述景深图像进行人脸识别，确定人脸区域；

根据所述人脸区域对应的景深值，确定所述景深图像中的前景区域及后景区域。

4.如权利要求2或3所述的方法，其特征在于，所述确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，包括：

若所述目标滤波区域中包含的任一像素点对应的景深值，在所述预设的范围内，则确定所述任一像素点为所述前景区域的像素点；

或者，

若所述目标滤波区域中两个相邻像素点分别对应的景深值的差值，大于预设的值，则确定所述目标滤波区域中包含位于所述前景区域的像素点。

5.如权利要求1-3任一所述的方法，其特征在于，所述对所述目标滤波区域中各像素点的权重值进行调整，包括：

将位于所述前景区域的像素点的权重值置零；

调整所述目标滤波区域中剩余像素点的权重值，使剩余像素点的权重值的和等于一。

6.如权利要求5所述的方法，其特征在于，所述调整所述目标滤波区域中剩余像素点的权重值，包括：

将所述剩余像素点的权重值等比例扩大；

或者，

根据所述剩余像素点分别对应的景深值，调整所述剩余像素点的权重值。

7.一种图像虚化处理装置，其特征在于，包括：

获取模块，用于获取待处理的景深图像；

确定模块，用于确定所述景深图像中的前景区域及后景区域；

调整模块，用于在对所述后景区域进行虚化处理时，若确定待虚化的像素点对应的目标滤波区域中包含位于所述前景区域的像素点，则对所述目标滤波区域中各像素点的权重值进行调整。

8.如权利要求7所述的装置，其特征在于，所述调整模块具体用于：

若所述目标滤波区域中包含的任一像素点对应的景深值，在所述预设的范围内，则确定所述任一像素点为所述前景区域的像素点；

或者，

若所述目标滤波区域中两个相邻像素点分别对应的景深值的差值，大于预设的值，则确定所述目标滤波区域中包含位于所述前景区域的像素点。

9.一种拍摄终端，其特征在于，包括：存储器、处理器以及图像处理电路；

所述存储器，用于存储所述处理器的可执行指令；

所述图像处理电路，用于处理景深图像；

所述处理器，用于调用所述存储器中的程序代码，并根据所述图像处理电路输出的景深图像，以实现如权利要求1-6中任一所述的图像虚化处理方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该应用程序被处理器执行时，实现如权利要求1-6中任一项所述的图像虚化处理方法。