CN110505406A

CN110505406A - 背景虚化方法、装置、存储介质及终端

Info

Publication number: CN110505406A
Application number: CN201910790728.1A
Authority: CN
Inventors: 孙永刚
Original assignee: Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Current assignee: Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Priority date: 2019-08-26
Filing date: 2019-08-26
Publication date: 2019-11-26

Abstract

本申请实施例公开了一种背景虚化方法、装置、存储介质及终端，属于图像处理领域。方法包括：接收拍照指令；响应于所述拍照指令，在摄像头处于失焦状态下通过所述摄像头采集第一图像，以及在所述摄像头处于聚焦状态下通过所述摄像头采集第二图像；将所述第一图像的前景区域替换为所述第二图像的前景区域，得到背景虚化图像。本申请避免对图像中背景区域中每个像素进行软件模糊处理，减少背景虚化的处理开销。

Description

背景虚化方法、装置、存储介质及终端

技术领域

本申请涉及图像处理领域，尤其涉及一种背景虚化方法、装置、存储介质及终端。

背景技术

背景虚化就是使景深变浅，使焦点聚集在主题上，由于移动终端(例如：手机)摄像头性能参数的限制，目前手机上实现背景虚化的方法包括：拍摄一张清晰的图像，然后识别出图像的前景区域和背景区域，基于模糊算法(例如：高斯模糊或均值模糊等)对图像的背景区域进行模糊处理，这样得到的图像的前景区域是清晰的，背景区域是模糊的，由此实现背景虚化的效果。

申请人发现，在相关技术中实现背景虚化需要对背景区域的每一个像素通过大量的计算，运算过程需要消耗终端大量的资源。

发明内容

本申请实施例提供了的背景虚化方法、装置、存储介质及终端，可以解决相关技术中实现背景虚化功能开销较大的问题。所述技术方案如下：

第一方面，本申请实施例提供了一种背景虚化方法，所述方法包括：

接收拍照指令，响应于拍照指令，在摄像头处于失焦状态下通过摄像头采集第一图像，以及在摄像头处于聚焦状态下通过摄像头采集第二图像，将第一图像的前景区域替换为第二图像的前景区域，得到背景虚化图像。

第二方面，本申请实施例提供了一种背景虚化装置，所述背景虚化装置包括：

接收单元，用于接收拍照指令；

采集单元，用于响应于拍照指令，在摄像头处于失焦状态下通过所述摄像头采集第一图像，以及在所述摄像头处于聚焦状态下通过所述摄像头采集第二图像；

虚化单元，用于将所述第二图像的前景区域替换为所述第一图像的前景区域，得到背景虚化图像。

第三方面，本申请实施例提供一种计算机存储介质，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行上述的方法步骤。

第四方面，本申请实施例提供一种终端，可包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行上述的方法步骤。

本申请一些实施例提供的技术方案带来的有益效果至少包括：

在接收拍照指令时，通过失焦状态下的摄像头采集模糊的第一图像，以及通过聚焦状态下的摄像头采集清晰的第二图像，然后将第一图像中的前景区域替换为第二图像中的前景区域，得到背景虚化图像，解决了相关技术中通过软件算法对背景区域进行模糊处理带来的处理开销大的问题，本申请实施例只需要通知摄像头中聚焦镜片和感光器件之间的距离实现失焦状态和聚焦状态的切换得到模糊图像和清晰图像，避免使用模糊算法进行模糊处理带来的处理开销大的问题。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的终端的结构示意图；

图2是本申请实施例提供的操作***和用户空间的结构示意图；

图3是图1中安卓操作***的架构图；

图4是图1中IOS操作***的架构图；

图5是本申请实施例提供的背景虚化方法的流程示意图；

图6是本申请实施例提供的背景虚化方法的流程示意图；

图7是本申请实施例提供的失焦状态的原理示意图；

图8是本申请实施例提供的聚焦状态的原理示意图；

图9是本申请实施例提供的一种装置的结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施例方式作进一步地详细描述。

请参考图1，其示出了本申请一个示例性实施例提供的终端的结构方框图。本申请中的终端可以包括一个或多个如下部件：处理器110、存储器120、输入装置130、输出装置140和总线150。处理器110、存储器120、输入装置130和输出装置140之间可以通过总线150连接。

处理器110可以包括一个或者多个处理核心。处理器110利用各种接口和线路连接整个终端内的各个部分，通过运行或执行存储在存储器120内的指令、程序、代码集或指令集，以及调用存储在存储器120内的数据，执行终端100的各种功能和处理数据。可选地，处理器110可以采用数字信号处理(digital signal processing，DSP)、现场可编程门阵列(field－programmable gate array，FPGA)、可编程逻辑阵列(programmable logicArray，PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(centralprocessing unit，CPU)、图像处理器(graphics processing unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作***、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器110中，单独通过一块通信芯片进行实现。

存储器120可以包括随机存储器(random Access Memory，RAM)，也可以包括只读存储器(read-only memory，ROM)。可选地，该存储器120包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作***的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等，该操作***可以是安卓(Android)***(包括基于Android***深度开发的***)、苹果公司开发的IOS***(包括基于IOS***深度开发的***)或其它***。存储数据区还可以存储终端在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

参见图2所示，存储器120可分为操作***空间和用户空间，操作***即运行于操作***空间，原生及第三方应用程序即运行于用户空间。为了保证不同第三方应用程序均能够达到较好的运行效果，操作***针对不同第三方应用程序为其分配相应的***资源。然而，同一第三方应用程序中不同应用场景对***资源的需求也存在差异，比如，在本地资源加载场景下，第三方应用程序对磁盘读取速度的要求较高；在动画渲染场景下，第三方应用程序则对GPU性能的要求较高。而操作***与第三方应用程序之间相互独立，操作***往往不能及时感知第三方应用程序当前的应用场景，导致操作***无法根据第三方应用程序的具体应用场景进行针对性的***资源适配。

为了使操作***能够区分第三方应用程序的具体应用场景，需要打通第三方应用程序与操作***之间的数据通信，使得操作***能够随时获取第三方应用程序当前的场景信息，进而基于当前场景进行针对性的***资源适配。

以操作***为Android***为例，存储器120中存储的程序和数据如图3所示，存储器120中可存储有Linux内核层320、***运行时库层340、应用框架层360和应用层380，其中，Linux内核层320、***运行库层340和应用框架层360属于操作***空间，应用层380属于用户空间。Linux内核层320为终端的各种硬件提供了底层的驱动，如显示驱动、音频驱动、摄像头驱动、蓝牙驱动、Wi-Fi驱动、电源管理等。***运行库层340通过一些C/C++库来为Android***提供了主要的特性支持。如SQLite库提供了数据库的支持，OpenGL/ES库提供了3D绘图的支持，Webkit库提供了浏览器内核的支持等。在***运行时库层340中还提供有安卓运行时库(Android runtime)，它主要提供了一些核心库，能够允许开发者使用Java语言来编写Android应用。应用框架层360提供了构建应用程序时可能用到的各种API，开发者也可以通过使用这些API来构建自己的应用程序，比如活动管理、窗口管理、视图管理、通知管理、内容提供者、包管理、通话管理、资源管理、定位管理。应用层380中运行有至少一个应用程序，这些应用程序可以是操作***自带的原生应用程序，比如联系人程序、短信程序、时钟程序、相机应用等；也可以是第三方开发者所开发的第三方应用程序，比如游戏类应用程序、即时通信程序、相片美化程序、购物程序等。

以操作***为IOS***为例，存储器120中存储的程序和数据如图4所示，IOS***包括：核心操作***层420(Core OS layer)、核心服务层440(Core Services layer)、媒体层460(Media layer)、可触摸层480(Cocoa Touch Layer)。核心操作***层420包括了操作***内核、驱动程序以及底层程序框架，这些底层程序框架提供更接近硬件的功能，以供位于核心服务层440的程序框架所使用。核心服务层440提供给应用程序所需要的***服务和/或程序框架，比如基础(Foundation)框架、账户框架、广告框架、数据存储框架、网络连接框架、地理位置框架、运动框架等等。媒体层460为应用程序提供有关视听方面的接口，如图形图像相关的接口、音频技术相关的接口、视频技术相关的接口、音视频传输技术的无线播放(AirPlay)接口等。可触摸层480为应用程序开发提供了各种常用的界面相关的框架，可触摸层480负责用户在终端上的触摸交互操作。比如本地通知服务、远程推送服务、广告框架、游戏工具框架、消息用户界面接口(User Interface，UI)框架、用户界面UIKit框架、地图框架等等。

在图4所示出的框架中，与大部分应用程序有关的框架包括但不限于：核心服务层440中的基础框架和可触摸层480中的UIKit框架。基础框架提供许多基本的对象类和数据类型，为所有应用程序提供最基本的***服务，和UI无关。而UIKit框架提供的类是基础的UI类库，用于创建基于触摸的用户界面，iOS应用程序可以基于UIKit框架来提供UI，所以它提供了应用程序的基础架构，用于构建用户界面，绘图、处理和用户交互事件，响应手势等等。

其中，在IOS***中实现第三方应用程序与操作***数据通信的方式以及原理可参考Android***，本申请在此不再赘述。

其中，输入装置130用于接收输入的指令或数据，输入装置130包括但不限于键盘、鼠标、摄像头、麦克风或触控设备。输出装置140用于输出指令或数据，输出装置140包括但不限于显示设备和扬声器等。在一个示例中，输入装置130和输出装置140可以合设，输入装置130和输出装置140为触摸显示屏，该触摸显示屏用于接收用户使用手指、触摸笔等任何适合的物体在其上或附近的触摸操作，以及显示各个应用程序的用户界面。触摸显示屏通常设置在终端的前面板。触摸显示屏可被设计成为全面屏、曲面屏或异型屏。触摸显示屏还可被设计成为全面屏与曲面屏的结合，异型屏与曲面屏的结合，本申请实施例对此不加以限定。

除此之外，本领域技术人员可以理解，上述附图所示出的终端的结构并不构成对终端的限定，终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。比如，终端中还包括射频电路、输入单元、传感器、音频电路、无线保真(wirelessfidelity，WiFi)模块、电源、蓝牙模块等部件，在此不再赘述。

在本申请实施例中，各步骤的执行主体可以是上文介绍的终端。可选地，各步骤的执行主体为终端的操作***。操作***可以是安卓***，也可以是IOS***，或者其它操作***，本申请实施例对此不作限定。

本申请实施例的终端，其上还可以安装有显示设备，显示设备可以是各种能实现显示功能的设备，例如：阴极射线管显示器(cathode ray tubedisplay，简称CR)、发光二极管显示器(light-emitting diode display，简称LED)、电子墨水屏、液晶显示屏(liquidcrystal display，简称LCD)、等离子显示面板(plasma display panel，简称PDP)等。用户可以利用终端101上的显示设备，来查看显示的文字、图像、视频等信息。所述终端可以是智能手机、平板电脑、游戏设备、AR(Augmented Reality，增强现实)设备、汽车、数据存储装置、音频播放装置、视频播放装置、笔记本、桌面计算设备、可穿戴设备诸如电子手表、电子眼镜、电子头盔、电子手链、电子项链、电子衣物等设备。

在图1所示的终端中，处理器110可以用于调用存储器120中存储的应用程序，并具体执行本申请实施例的背景虚化方法。

本申请实施例提供的技术方案中，在接收拍照指令时，通过失焦状态下的摄像头采集模糊的第一图像，以及通过聚焦状态下的摄像头采集清晰的第二图像，然后将第一图像中的前景区域替换为第二图像中的前景区域，得到背景虚化图像，解决了相关技术中通过软件算法对背景区域进行模糊处理带来的处理开销大的问题，本申请实施例只需要通知摄像头中聚焦镜片和感光器件之间的距离实现失焦状态和聚焦状态的切换得到模糊图像和清晰图像，避免使用模糊算法进行模糊处理带来的处理开销大的问题。

在下述方法实施例中，为了便于说明，仅以各步骤的执行主体为终端进行介绍说明。

下面将结合附图5-附图9，对本申请实施例提供的背景虚化方法进行详细介绍。其中，本申请实施例中的背景虚化装置可以是图5-图9所示的终端。

请参见图5，为本申请实施例提供了一种背景虚化方法的流程示意图。如图5所示，本申请实施例的所述方法可以包括以下步骤：

S501、接收拍照指令。

其中，拍照指令是终端基于用户的拍照操作触发生成的，拍照操作的类型可以是触控操作、按键操作、声控操作或体感操作中的一种或多种。

例如：终端接收开启相机应用程序的指令，显示拍摄界面，拍摄界面上设置有虚拟的拍摄按钮，终端接收到拍摄按钮上发生的点击操作，通过摄像头采集图像。

例如：终端接收开启相机应用程序的指令，显示拍摄界面，终端接收到设置在终端上的实体的拍摄按键，终端在显示拍摄界面的情况下接收到拍摄按键上发生的按压操作时，通过摄像头采集图像。

又例如：终端接收开启相机应用程序的指令，显示拍摄界面，终端通过麦克风采集语音数据，终端在显示拍摄界面下接收到的语音数据和与存储的参考语音数据相似度大于预设阈值时，通过摄像头采集图像。

S502、响应于拍照指令，在摄像头处于失焦状态下通过摄像头采集第一图像，以及在摄像头处于聚焦状态下通过摄像头采集第二图像。

其中，在失焦状态下采集的第一图像是模糊的图像，在聚焦状态下采集的图像是清晰的图像。摄像头包括聚焦镜片和感光器件(charge-coupled device，CCD)，聚焦镜片是凸透镜，用于汇聚光信号，感光器件用于将光信号转换为电信号。摄像头中设置的聚焦镜片的数量可以是一个或多个，聚焦镜片具有焦点，焦点到聚焦镜片之间的距离称为焦距。在聚焦镜片的焦点落在感光器件上时，摄像头处于聚焦状态，此时通过摄像头采集到的图像(第二图像)是清晰的；在聚焦镜片的焦点落在感光器件之外时，摄像头处于失焦状态，此时通过摄像头采集到的图像(第一图像)是模糊的。其中，感光器件偏移聚焦镜片的焦点越大，采集到的图像越模糊；感光器件偏移聚焦镜片的焦点越小，采集到的图像越清晰。

例如：聚焦镜片的焦距为4cm，在感光器件与聚焦镜片之间的距离为4cm±0.5cm时，摄像头处于聚焦状态，此时通过摄像头采集的是清晰的照片；在感光器件和聚焦情况之间的距离大于4.5cm或小于3.5cm时，摄像头处于视角状态，此此时通过摄像头采集的是模糊的图像。

在一个或多个实施例中，终端可以设置有多个摄像头，多个摄像头包括第一摄像头和第二摄像头，终端可以通过失焦状态下的第一摄像头采集第一图像，以及通过聚焦状态下的第二摄像头采集第二图像。

S503、将第一图像的前景区域替换为第二图像的前景区域，得到背景虚化图像。

其中，终端确定第一图像的前景区域和第二图像的前景区域，第一图像的前景区域以下简称第一前景区域，第二图像的前景区域以下简称第二前景区域，第一前景区域和第二前景包括相同的物体，例如：包括相同的人物、花草或动物等。前景区域是图像中需要突出显示的物体所在的像素区域，终端可基于图像深度确定第一图像或第二图像中的前景区域，然后将第一图像的前景区域替换为第二图像的前景区域得到背景虚化图像，第一图像和第二图像是存储在终端的存储器中，并不会显示出来，终端将背景虚化图像作为拍摄的预览图像。

在一个或多个实施例中，终端可以确定第一图像中的前景区域，然后确定该前景区域的位置，第一图像和第二图像的前景区域位置相同，基于该位置确定第二图像中的前景区域，然后将第一图像的前景区域切换为第二图像的前景区域，得到背景虚化图像，即该背景虚化图像由第二图像的前景区域和第一图像的背景区域组成。

在一个或多个实施例中，终端可以确定第二图像中的前景区域，然后确定该前景区域的位置，第一图像和第二图像的前景区域位置相同，基于该位置确定第一图像中的前景区域，然后将第一图像的前景区域替换为第二图像的前景区域得到背景虚化图像，即背景虚化图像由第二图像的前景区域和第一图像的背景区域组成。

本申请实施例的方案在执行时，在接收拍照指令时，通过失焦状态下的摄像头采集模糊的第一图像，以及通过聚焦状态下的摄像头采集清晰的第二图像，然后将第一图像中的前景区域替换为第二图像中的前景区域，得到背景虚化图像，解决了相关技术中通过软件算法对背景区域进行模糊处理带来的处理开销大的问题，本申请实施例只需要通知摄像头中聚焦镜片和感光器件之间的距离实现失焦状态和聚焦状态的切换得到模糊图像和清晰图像，避免使用模糊算法进行模糊处理带来的处理开销大的问题。

参见图6，为本申请实施例提供的一种背景虚化方法的流程示意图。本实施例以背景虚化方法应用于终端中来举例说明，该背景虚化方法可以包括以下步骤：

S601、显示背景虚化设置界面。

其中，背景虚化设置界面用户开启背景虚化功能和设置背景虚化等级，背景虚化设置界面可以是设置应用程序中的一个用户界面，例如：背景虚化设置界面包括用于开启或关闭背景虚化功能的开关，以及设置背景虚化等级的滑动条。滑动条用于表示背景虚化等级的可调节范围，滑动条上设置有背景虚化等级的最小值和最大值，背景虚化等级与第一图像的模糊程度呈正相关性，背景虚化等级越低，第一图像模糊程度越低，反之，背景虚化等级越高，第一图像的模糊程度越高。背景虚化等级可以使用数值来表示，例如：背景虚化等级使用数值1-5来表示。背景虚化功能开启时，终端会对拍摄的图像进行背景虚化处理，背景虚化功能关闭时，终端不会对拍摄的图形进行背景虚化处理。

S602、接收用户在背景虚化设置界面上生成的第一指令。

S603、基于第一指令开启背景虚化功能。

其中，第一指令是用户在背景虚化设置界面执行的触发操作生成的，触发操作的类型可以是触控操作或按键操作。例如：背景虚化设置界面上包括一个虚拟开关，终端检测到该虚拟开关上发生的左滑操作时，终端关闭背景虚化功能；终端检测到该虚拟开关上发生的右滑操作时，终端开启背景虚化功能。

S604、接收用户在背景虚化界面上生成的第二指令。

S605、基于第二指令确定背景虚化等级。

其中，第二指令是用户在背景虚化设置界面上执行的触发操作生成的，触发操作的类型可以是触控操作或按键操作。例如：背景虚化设置界面上包括一个滑动条，滑动条的左边显示有背景虚化等级的最小值1，滑动条的右边显示有背景虚化等级的最大值，用户可拖动滑动条上的滑块向左滑动或向右滑动，滑动的步长为1，终端检测到用户停止滑动该滑块时，获取滑块在滑动条上的位置，根据该位置确定当前的背景虚化等级。

S606、根据背景虚化等级确定聚焦镜片和感光器件之间的距离。

其中，终端预存储或预配置有背景虚化等级和距离之间的映射关系，不同的背景虚化等级关联有不同的距离，该距离为聚焦镜片和感光器件之间的距离，且该距离下摄像头处于失焦状态。背景虚化等级越大，感光器件偏移聚焦镜片的焦点的距离越大，此时通过摄像头采集的第一图像的模糊程度越高；反之背景虚化等级越小，感光器件偏移聚焦镜片的焦点的距离越小，此时通过摄像头采集的第一图像的模糊程度越低。

例如：聚焦镜片的焦距为5cm，聚焦镜片和感光器件之间的距离在4.5cm-5cm之间时，采集的图像是清晰的，不在4.5cm-5cm的范围内时采集的照片是模糊的。背景虚化等级和距离之间的映射关系如下表：

背景虚化等级	距离
		1	4cm
2	3.5cm
		3	3cm
4	2cm
		5	1cm

表1

S607、接收拍照指令。

例如：终端接收开启相机应用的指令，显示拍摄界面，拍摄界面上设置有虚拟的拍摄按钮，终端接收到拍摄按钮上发生的点击操作，通过摄像头采集图像。

例如：终端接收开启相机应用程序的指令，显示拍摄界面，终端接收到实体的拍摄按键上发生的按压操作时，通过摄像头采集图像。

例如：终端在显示拍摄界面的情况下，通过麦克风采集语音数据，将语音数据和与存储的参考语音数据进行相似度比较，在二者的相似度大于预设阈值时，通过摄像头采集图像。

S608、向对焦马达发送失焦调节指令。

参见图7和图8所示，摄像头包括对焦马达、聚焦镜片和感光器件，对焦马达用于控制聚焦镜片沿光轴方向左移或右移，聚焦马达可以是一个步进电机，聚焦马达接收处理器的指令确定移动方向和移动距离。聚焦镜片是一个凸透镜，用于射入的平行光信号汇聚到焦点f上，焦点f到聚焦镜片之间的距离为焦距，摄像头中设置的聚焦镜片的数量可以是一个或多个，在聚焦镜片的数量为多个时，多个聚焦镜片可以平行设置。聚焦镜片和感光器件之间的距离必须在指定范围内，摄像头才能采集到清晰的图像，如果聚焦镜片和感光器件之间的距离不在指定范围内，摄像头会采集到模糊的图像，指定的范围是以焦距以基准值上下浮动。如图7所示，在聚焦镜片和感光器件之间的距离不在指定范围时，摄像头处于失焦状态；如图8所示，在聚焦镜片和感光器件之间的距离在指定范围时，摄像头处于聚焦状态。

其中，失焦调节指令用于指示对焦马达进行移动，以使聚焦镜片和感光器件之间的距离不在指定范围。终端根据用户设置的背景虚化等级查询表1得到待移动的距离，根据对焦马达当前的位置确定待移动的距离，然后通过失焦调节指令指示对焦马达进行移动，将聚焦镜片和感光器件之间的距离调节到表1中查询到的距离。

例如：用户设置的背景虚化等级为3，终端查询表1得到距离为3cm，终端获取到聚焦镜片和感光器件之间的距离为5cm，终端计算得到对焦马达的待移动的距离为2cm，移动方向为向左移动，向对焦马达发送失焦调节指令，失调解调指令携带移动方向和待移动的距离，对焦马达根据失焦调节指令将聚焦镜片和感光器件之间的距离调节为3cm。

S609、通过摄像头采集第一图像。

其中，对焦马达根据失焦调节指令调节聚焦镜片和感光器件之间的距离后，摄像头处于失焦状态，终端通过摄像头采集到的第一图像为模糊的图像。

S610、向对焦马达发送聚焦调节指令。

其中，聚焦调节指令用于指示对焦马达移动聚焦镜片，使聚焦镜片和感光器件之间的距离为预设距离，例如：预设距离为焦距。终端根据聚焦镜片当前的位置确定对焦马达的移动方向和待移动的距离，然后生成聚焦调节指令。

例如：聚焦镜片和感光器件之间当前的距离为3cm，终端计算对焦马达待移动的距离为2cm，移动方向为向右移动，然后生成聚焦调节指令，向对焦马达发送聚焦调节指令，对焦马达根据聚焦调节指令向右移动2cm，移动后聚焦镜片和感光器件之间的距离为5cm，此时摄像头处于聚焦状态。

S611、通过摄像头采集第二图像。

其中，摄像头采集到的第二图像为清晰的图像。

可以理解的是，第一图像和第二图像采集的先后顺序本申请实施例不作限制，第一图像可以限于第二图像采集，也可以后于第二图像采集，也可以同时采集。如果第一图像和第二图像的采集间隔必须小于预设时长，这样才能保证第一图像和第二图像包括相同的对象。

S612、将第一图像和第二图像进行对齐处理。

其中，第一图像和第二图像具有相同的分辨率，对齐处理表示将第一图像和第二图像的相同位置的像素点进行对齐。例如：第一图像和第二图像的分辨率都为1024×768，第一图像中坐标为(x，y)的像素和第二图像中坐标为(x，y)的像素进行对齐，x＝[0，1024]，y＝[0，768]，x和y为整数。

S613、基于图像深度信息确定第二图像的前景区域。

其中，前景区域是图像中需要突出显示的物体所在的像素区域，图像深度信息表示图像中的像素点到摄像头的感光器件之间的距离，前景区域可以包括指定距离范围内的图形深度对应的像素点。

S614、确定第二图像的前景区域在第二图像中的位置，基于该位置确定第一图像中的前景区域。

S615、将第一图像的前景区域替换为第二图像的前景区域得到背景虚化图像。

终端可基于图像深度确定第一图像或第二图像中的前景区域，然后将第一图像的前景区域替换为第二图像的前景区域得到背景虚化图像，第一图像和第二图像是存储在终端的存储器中，并不会显示出来，终端将背景虚化图像作为拍摄的预览图像。

下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。

请参见图9，其示出了本申请一个示例性实施例提供的课件的处理装置的结构示意图。以下简称装置9，装置9可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。装置9包括接收单元901、采集单元902和虚化单元903。

接收单元901，用于接收拍照指令。

采集单元902，用于响应于拍照指令，在摄像头处于失焦状态下通过所述摄像头采集第一图像，以及在所述摄像头处于聚焦状态下通过所述摄像头采集第二图像。

虚化单元903，用于将所述第一图像的前景区域替换为所述第二图像的前景区域，得到背景虚化图像。

在一个或多个实施例中，所述摄像头包括对焦马达、聚焦镜片和感光器件；

其中，所述在摄像头处于失焦状态下通过所述摄像头采集第一图像，以及在所述摄像头处于聚焦状态下通过所述摄像头采集第二图像，包括：

向所述对焦马达发送失焦调节指令；其中，所述失焦调节指令用于指示所述对焦马达调节所述聚焦镜片与所述感光器件之间的距离，以使所述摄像头处于失焦状态；

通过所述摄像头采集第一图像；

向所述对焦马达发送聚焦调节指令；其中，所述对焦调节指令用于指示所述对焦马达调节所述聚焦镜片与所述感光器件之间的距离，以使所述摄像头处于聚焦状态；

通过所述摄像头采集第二图像。

在一个或多个实施例中，

接收单元901，还用于接收用于开启背景虚化功能的第一指令，以及基于所述第一指令开启背景虚化功能。

在一个或多个实施例中，接收单元901还用于：接收到调节背景虚化等级的第二指令，基于所述第二指令确定背景虚化等级；

根据所述背景虚化等级确定所述聚焦镜片和所述感光器件之间的距离。

在一个或多个实施例中，所述将所述第一图像的前景区域替换为所述第一图像的前景区域，得到背景虚化图像，包括：

将所述第一图像和所述第二图像进行对齐处理；

基于图像深度信息确定所述第二图像的前景区域；

确定所述第二图像的前景区域在所述第二图像中的位置，基于所述位置确定所述第一图像中的前景区域；

将所述第一图像的前景区域替换为所述第二图像的前景区域，得到背景虚化图像。

在一个或多个实施例中，所述第一图像和所述第二图像的采集间隔小于预设时长。

在一个或多个实施例中，所述将所述第一图像和所述第二图像进行对齐处理，包括：

获取所述第一图像的中心点和所述第二图像的中心点；

将所述第一图像的中心点和所述第二图像的中心点进行对齐处理。

需要说明的是，上述实施例提供的装置9在执行背景虚化方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的背景虚化方法实施例属于同一构思，其体现实现过程详见方法实施例，这里不再赘述。

上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。

本申请实施例还提供了一种计算机存储介质，所述计算机存储介质可以存储有多条指令，所述指令适于由处理器加载并执行如上述图5-图8所示实施例的方法步骤，具体执行过程可以参见图5-图8所示实施例的具体说明，在此不进行赘述。

本申请还提供了一种计算机程序产品，该计算机程序产品存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上各个实施例所述的背景虚化方法。

本领域内的技术人员应明白，本申请的实施例可提供为方法、***、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(***)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

Claims

1.一种背景虚化方法，其特征在于，所述方法包括：

接收拍照指令；

响应于所述拍照指令，在摄像头处于失焦状态下通过所述摄像头采集第一图像，以及在所述摄像头处于聚焦状态下通过所述摄像头采集第二图像；

2.根据权利要求1所述的方法，其特征在于，所述摄像头包括对焦马达、聚焦镜片和感光器件；

通过所述摄像头采集第一图像；

通过所述摄像头采集第二图像。

3.根据权利要求2所述的方法，其特征在于，所述接收拍照指令之前，还包括：

接收用于开启背景虚化功能的第一指令，以及基于所述第一指令开启背景虚化功能。

4.根据权利要求3所述的方法，其特征在于，所述接收用于开启背景虚化功能的第一指令，以及基于所述第一指令开启背景虚化功能，还包括：

接收到调节背景虚化等级的第二指令，基于所述第二指令确定背景虚化等级；

5.根据权利要求1至4任意一项所述的方法，其特征在于，所述将所述第一图像的前景区域替换为所述第二图像的前景区域，得到背景虚化图像，包括：

将所述第一图像和所述第二图像进行对齐处理；

基于图像深度信息确定所述第二图像的前景区域；

6.根据权利要求5所述的方法，其特征在于，所述第一图像和所述第二图像的采集间隔小于预设时长。

7.根据权利要求6所述的方法，其特征在于，所述将所述第一图像和所述第二图像进行对齐处理，包括：

获取所述第一图像的中心点和所述第二图像的中心点；

8.一种背景虚化装置，其特征在于，所述装置包括：

接收单元，用于接收拍照指令；

虚化单元，用于将所述第一图像的前景区域替换为所述第二图像的前景区域，得到背景虚化图像。

9.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1～7任意一项的方法步骤。

10.一种终端，其特征在于，包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行如权利要求1～7任意一项的方法步骤。