CN115706848A - 对焦控制方法、装置、电子设备及存储介质 - Google Patents
对焦控制方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN115706848A CN115706848A CN202110910452.3A CN202110910452A CN115706848A CN 115706848 A CN115706848 A CN 115706848A CN 202110910452 A CN202110910452 A CN 202110910452A CN 115706848 A CN115706848 A CN 115706848A
- Authority
- CN
- China
- Prior art keywords
- image
- target
- camera
- focusing
- target object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
本公开涉及一种对焦控制方法、装置、电子设备及存储介质,该方法包括:获取所述主摄像头采集的第一图像以及目标副摄像头采集的第二图像,所述目标副摄像头为所述至少一个副摄像头中任一个副摄像头;基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域;控制所述主摄像头基于所述第一对焦区域进行对焦,以及控制所述目标副摄像头基于所述第二对焦区域进行对焦。本公开的方法可以使得多模组摄像头间切换更加平滑,以及实现在多模组摄像头在配合的时候,副摄像头可以输入清晰的图像。
Description
技术领域
本公开涉及摄像头技术领域,尤其涉及一种对焦控制方法、装置、电子设备及存储介质。
背景技术
随着人们对拍照要求的提高,移动终端逐渐利用多模组摄像头代替单一摄像头。在多模组摄像头中,通过主摄像头与副摄像头之间的配合,实现更佳的拍照效果。其中,在拍照过程中,主摄像头以及副摄像头均需要进行对焦,然后进行拍照。
然而,相关技术中的对焦方法使得多模组摄像头配合使用过程中存在副摄像头输入不清晰的问题。
发明内容
为克服相关技术中存在的问题,本公开提供一种对焦控制方法、装置、电子设备及存储介质。
根据本公开实施例的第一方面,提供一种对焦控制方法,应用于包括主摄像头以及至少一个副摄像头的移动终端,该方法包括:
获取所述主摄像头采集的第一图像以及目标副摄像头采集的第二图像,所述目标副摄像头为所述至少一个副摄像头中任一个副摄像头;
基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域;
控制所述主摄像头基于所述第一对焦区域进行对焦,以及控制所述目标副摄像头基于所述第二对焦区域进行对焦。
在一些实施例中,基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
确定第一目标对象在所述第二图像中的存在情况,所述第一目标对象为所述第一对焦区域中包括的对象;
基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域。
在一些实施例中,所述基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第二图像中存在所述第一目标对象对应的图像时,基于所述主摄像头与所述目标副摄像头之间的坐标映射关系,对所述第一对焦区域进行映射处理,得到所述第二对焦区域。
在一些实施例中,所述基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第二图像中不存在所述第一目标对象对应的图像时,确定所述第二对焦区域为,所述目标副摄像头采用第一目标对焦模式所确定的对焦区域。
在一些实施例中,所述基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第二图像中存在所述第一目标对象对应的图像时,基于所述主摄像头与所述目标副摄像头之间的坐标映射关系,对所述第一目标对象对应的图像进行映射处理,得到映射图像位置,所述映射图像位置为所述第一目标对象对应在所述第二图像中的位置;
对所述第二图像进行对象检测,得到所述第二图像包括的至少一个候选对象图像分别对应的实际图像位置;
基于所述至少一个候选对象分别对应的实际图像位置与所述映射图像位置之间的重合度,从所述至少一个候选对象图像中,确定所述第一目标对象对应在第二图像中的目标候选对象图像;
确定所述目标候选对象图像所在的区域为所述第二对焦区域。
在一些实施例中,所述基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
确定第二目标对象在所述第一图像中的存在情况,所述第二目标对象为所述第二图像中的目标区域包括的对象;
基于所述第二目标对象在所述第一图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域。
在一些实施例中,所述基于所述第二目标对象在所述第一图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第一图像中存在所述第二目标对象时,确定所述目标区域为所述目标副摄像头对应的第二对焦区域。
在一些实施例中,所述基于所述第二目标对象在所述第一图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第一图像中不存在所述第二目标对象时,确定所述第二对焦区域为,所述目标副摄像头采用第二目标对焦模式所确定的对焦区域。
根据本公开实施例的第二方面,提供一种对焦控制装置,应用于包括主摄像头以及至少一个副摄像头的移动终端,该装置包括:
图像获取模块,被配置为获取所述主摄像头采集的第一图像以及目标副摄像头采集的第二图像,所述目标副摄像头为所述至少一个副摄像头中任一个副摄像头;
对焦区域确定模块,被配置为基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域;
对焦模块,被配置为控制所述主摄像头基于所述第一对焦区域进行对焦,以及控制所述目标副摄像头基于所述第二对焦区域进行对焦。
根据本公开实施例的第三方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开第一方面所提供的对焦控制方法的步骤。
根据本公开实施例的第四方面,提供一种电子设备,包括:存储器,其上存储有计算机程序;处理器,用于执行存储器中的计算机程序,以实现本公开第一方面所提到的对焦控制方法的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:通过基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,并控制所述主摄像头基于所述第一对焦区域进行对焦,以及控制所述目标副摄像头基于所述第二对焦区域进行对焦,由于直接使用对焦区域来控制主摄像头以及目标副摄像头进行对焦,使得对焦过程简单,且使得多模组摄像头间切换更加平滑,使得多模组摄像头在配合的时候,副摄像头可以输入清晰的图像。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据本公开一示例性实施例示出的一种对焦控制方法的流程图。
图2是根据本公开一示例性实施例示出的另一种对焦控制方法的流程图。
图3是根据本公开一示例性实施例示出的一种摄像头视角示意图。
图4是根据本公开一示例性实施例示出的另一种对焦控制方法的流程图。
图5是根据本公开一示例性实施例示出的另一种摄像头视角示意图。
图6是根据本公开一示例性实施例示出的一种对焦控制装置的结构框图。
图7是根据本公开一示例性实施例示出的一种电子设备的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
多模组摄像头可以理解为多个不同类型的摄像头,通过多模组摄像头之间的配合,可以得到更加多样化以及更高质量的拍照图像。其中,摄像头类型可以包括但不限于广角摄像头、超广角摄像头、长焦摄像头等。
在移动终端中,多模组摄像头通常可以包括一颗主摄像头以及至少一颗副摄像头,例如,可以包括一、二、三颗副摄像头等。本公开实施例的方法应用于主摄像头以及至少一颗副摄像头中任一颗副摄像头进行配合的场景。
例如,在打开移动终端的摄像机APP显示的拍照界面中,对应有视角选择控件,可选择视角诸如0.1X-20X。其中,其中便包括超广角摄像头与广角摄像头的配合,当触控视角切换控件时,便能够快速切换不同的摄像头。
又例如,为了获得较佳的夜景拍摄效果,在一些方式中,可以通过彩色摄像头以及黑白摄像头的配合,通过彩色摄像头记录色彩,黑白摄像头记录细节和轮廓,从而获得较佳的夜景拍摄效果。
下面结合具体实施例对本公开进行说明。
图1是根据一示例性实施例示出的一种对焦控制方法的流程图,该方法可以应用于包括主摄像头以及至少一个副摄像头的移动终端中,移动终端包括:手机、笔记本、平板电脑、台式计算机、智能音箱、智能电视、可穿戴设备以及智能机器人等,该方法包括:
S110,获取主摄像头采集的第一图像以及目标副摄像头采集的第二图像,目标副摄像头为至少一个副摄像头中任一个副摄像头。
其中,目标副摄像头是指移动终端中在当前拍照模式下和主摄像头配合使用的副摄像头,可以是所有副摄像头中的任一个。
其中,对于主摄像头以及副摄像头的选择没有限制,例如,主摄像头可以选择超广角摄像头,副摄像头可以选择广角摄像头以及长焦摄像头;又例如,主摄像头可以选择广角摄像头,副摄像头可以选择超广角摄像头以及长焦摄像头等。
在一些实施方式中,在打开移动终端的相机功能之后,可以进入相机界面,这个时候可以默认一个拍照模式或者手动选择某个拍照模式,例如选择常规拍照模式、人像模式或者夜景模式等,那么在确定拍照模式之后,可以进一步确定主摄像头对应的对焦模式,例如,在人像模式下,主摄像头对应的对焦模式自动选择为人脸对焦模式,又例如,在常规拍照模式下,可以通过触屏的方式进行对焦,这种情况下,主摄像头对应的对焦模式则是触屏对焦模式,又例如,在常规模式下,当用户未通过触屏的方式进行对焦时,可以根据配置情况,自动选择中心多点对焦模式或者中心自由对焦模式等。
在确定某个对焦模式的之后,移动终端可以确定与主摄像头对应配合使用的目标副摄像头,从而,在当前对焦模式下,主摄像头以及目标副摄像头便可以对各自视场内的物体进行采集得到预览画面,从而移动终端便可以获取主摄像头采集的预览画面,即第一图像,以及副摄像头采集的预览画面,即第二图像。
S120,基于第一图像与第二图像中的对象分布情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
其中,对象可以理解为被拍摄的对象,例如,现实世界中的人、物等对象,第一图像与第二图像中的对象分布情况可以理解为现实世界中的人、物等对象被拍摄之后,在第一图像中的分布情况,以及在第二图像中的分布情况。示例性地,当摄像头视角内存在某个被拍摄对象时,可以确定该被拍摄对象对应的对象分布情况为拍摄图像中存在该被拍摄对象对应的图像。
本公开实施例中,在获取到第一图像以及第二图像之后,便可以进一步基于第一图像与第二图像中的对象分布情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
S130,控制主摄像头基于第一对焦区域进行对焦,以及控制目标副摄像头基于第二对焦区域进行对焦。
其中,主摄像头可以基于自身当前所处的对焦模式以及对焦切换逻辑,确定第一图像中的用于对焦的第一对焦区域。其中,对焦模式例如可以是人脸对焦模式、触控对焦模式、中心多点对焦模式等。
在一些实施方式中,主摄像头在基于自身当前所处的对焦模式可以确定对焦区域的情况下,可以直接将确定的对焦区域作为第一对焦区域。
可选地,在主摄像头采集第一图像时的对焦模式为人脸对焦模式,且在确定第一图像中存在人脸的情况下,可以从第一图像中确定第一对焦区域,并且第一对焦区域为人脸所在的区域。
人脸对焦模式可以理解为摄像头自动对视角内的人脸进行对焦的模式,即摄像头自动选择人脸作为第一目标对象。在人脸对焦模式下,移动终端可以对第一图像进行人脸检测,然后对检测得到的人脸进行对焦,也即第一对焦区域为人脸所在的区域。
可选地,在主摄像头采集第一图像时的对焦模式为触控对焦模式,且接收到用于对焦的触控动作的情况下,可以从第一图像中确定第一对焦区域,并且第一对焦区域为触控动作对应的区域。
其中,触控对焦模式是指通过触控的方式确定对焦区域的方式。在触控对焦模式下,用户可以通过显示在屏幕中的图像中的任意位置,即发出用于对焦的触控动作,从而移动终端可以将触控动作所指示的图像区域确定为第一对焦区域。
可选地,在主摄像头采集第一图像时的对焦模式为中心多点对焦模式的情况下,可以从第一图像中确定第一对焦区域,第一对焦区域为中心多点对焦模式确定的对焦区域。
中心多点对焦是指以摄像头视角范围中心一定区域作为对焦采集区域,在对焦采集区域中再划分出多个对焦选择框,然后通过对焦选择框自动选取第一目标对象。
在另一些实施方式中,主摄像头在基于自身当前所处的对焦模式不能确定对焦区域的情况下,可以根据对焦切换逻辑,切换对焦模式,从而基于切换后的对焦模式确定对焦区域,进而将切换后的对焦模式确定的对焦区域作为第一对焦区域。
例如,主摄像头自身当前所处的对焦模式为人脸对焦模式,此时是对主摄像头视角内的人脸进行对焦,然而,在某些情况下,主摄像头视角内不存在人脸,这时则不能对人脸进行对焦得到对焦区域,此时,主摄像头可以切换对焦模式,例如,切换为中心多点对焦,从而将中心多点对焦确定的对焦区域确定为第一对焦区域。
在得到了第一对焦区域以及第二对焦区域之后,便可以控制主摄像头基于第一对焦区域进行对焦,以及控制目标副摄像头基于第二对焦区域进行对焦。
采用上述方法,通过基于第一图像与第二图像中的对象分布情况,从第二图像中确定目标副摄像头对应的第二对焦区域,并控制主摄像头基于第一对焦区域进行对焦,以及控制目标副摄像头基于第二对焦区域进行对焦,由于直接使用对焦区域来控制主摄像头以及目标副摄像头进行对焦,使得对焦过程简单,且能够使得多模组摄像头间切换更加平滑,使得多模组摄像头在配合的时候,副摄像头可以输入清晰的图像。
下面结合具体实施例对本公开的对焦控制方法进行详细说明。
图2是根据一示例性实施例示出的一种对焦控制方法的流程图,该方法可以应用于包括主摄像头以及至少一个副摄像头的移动终端中,移动终端包括:手机、笔记本、平板电脑、台式计算机、智能音箱、智能电视、可穿戴设备以及智能机器人等,当移动终端的主摄像头当前所处的对焦模式为人脸对焦或者触屏对焦时,该方法包括:
S210,获取主摄像头采集的第一图像以及目标副摄像头采集的第二图像,目标副摄像头为至少一个副摄像头中任一个副摄像头。
其中,步骤S210的具体实现方式可以参照S110的具体描述,这里不再赘述。
S220,确定第一目标对象在第二图像中的存在情况,第一目标对象为第一对焦区域中包括的对象。
结合前述内容可知,第一目标对象可以理解为第一对焦区域所对应的被拍摄区域包括的被拍摄对象。
第一对焦区域可以理解为主摄像头在当前所处的对焦模式下所确定的对焦区域。例如,在人脸对焦模式下,第一对焦区域为人脸图像所在的区域,第一目标对象即为现实世界中被拍摄的人脸。
第一目标对象在第二图像中的存在情况可以理解为第一目标对象对应的图像在第二图像中的存在情况,其中,当第二图像中存在第一目标对象对应的图像时,确定第一目标对象存在于第二图像中,当第二图像中不存在第一目标对象对应的图像时,确定第一目标对象不存在于第二图像中。
需要说明的是,第一图像与第二图像是两张图像。
示例性地,第一目标对象是人脸A时,若人脸A对应的图像存在于第一图像中,即确定第一目标对象存在于第二图像中,若人脸A对应的图像不存在于第一图像中,即确定第一目标对象不存在于第二图像中。
S230,基于第一目标对象对应的图像在第二图像中的存在情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
本公开实施例中,可以先确定第一目标对象在第二图像中的存在情况,然后再基于第一目标对象对应的图像在第二图像中的存在情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
S240,控制主摄像头基于第一对焦区域进行对焦,以及控制目标副摄像头基于第二对焦区域进行对焦。
其中,步骤S240的具体实现方式可以参照S130的具体描述,这里不再赘述。
在一些实施方式中,第一目标对象在第二图像中的存在情况可以包括第二图像中存在第一目标对象对应的图像,以及第二图像中不存在第一目标对象对应的图像两种情况。
其中,确定第一目标对象对应的图像在第二图像中的存在情况可以有多种方式。
在一些实施例中,可以通过主摄像头与目标副摄像头之间的坐标映射关系,确定第一目标对象是否存在于第二图像中。可选地,在确定第一目标对象所在的第一对焦区域之后,将第一对焦区域进行映射处理,看映射之后得到的区域的坐标范围是否属于第二图像包括的坐标区域范围,从而确定目标对象是否存在于第二图像中。
其中,可以基于主摄像头与目标副摄像头之间的视角分布以及安装位置分布,确定主摄像头与目标副摄像头之间的坐标映射关系。
其中,需要考虑主摄像头与目标副摄像头之间的坐标映射关系的时候,不仅需要考虑主摄像头与目标副摄像头之间的视角分布,即根据视角范围进行比例运算,此外,由于主摄像头与各个副摄像头在移动终端上安装时,还存在安装位置差异,因此,还需要考虑安装位置的分布,将安装位置差异引起的视场差异进行提前标定。
在另一些实施例中,当第一目标对象为人脸或者其他物体对象(例如花、建筑物等)时,可以通过物体检测的方式确定第一目标对象是否存在于第二图像中。例如,当第一目标对象为人脸,可以对第二图像进行人脸检测,从而确定第二图像中是否存在于第一目标对象对应的图像。
在另一些实施例中,当主摄像头当前所处的对焦模式为触控对焦模式时,移动终端底层可以计算触屏点位置坐标,由于触控点对应的对焦区域的图像即为第一目标对象对应的图像,从而将触控点换算到第二图像中,看换算后的触控点是否存在于第二图像中,便可以确定第二图像中是否存在于第一目标对象对应的图像。
下面分别对应第二图像中存在第一目标对象对应的图像,以及第二图像中不存在第一目标对象对应的图像两种情况进行详细说明。
在一些实施方式中,当第二图像中存在第一目标对象对应的图像时,步骤S230可以包括:在第二图像中存在第一目标对象对应的图像时,基于主摄像头与目标副摄像头之间的坐标映射关系,对第一对焦区域进行映射处理,得到第二对焦区域。
本公开实施例中,当第二图像中存在第一目标对象对应的图像时,说明目标副摄像头的视角内也存在第一目标对象,从而目标副摄像头的视角内可以找到第一目标对象所处的对焦平面,因此,为了使得主摄像头以及目标副摄像头能够基于同一个目标对象进行对焦,从而使得主摄像头以及副摄像头的对焦平面相同,可以基于主摄像头与目标副摄像头之间的坐标映射关系,对第一对焦区域进行映射处理,得到目标副摄像头对应的第二对焦区域。
其中,确定主摄像头与目标副摄像头之间的坐标映射关系的方法可以参考前述实施例,此处不再赘述。
可以理解的是,经过对第一对焦区域进行映射处理得到的区域,可以看作是第二图像中的第一目标对象对应的图像所在的区域,从而使得主摄像头以及副摄像头能够基于同一个目标对象进行对焦,从而使得主摄像头以及副摄像头的对焦平面相同,使得多模组摄像头间切换更加平滑,以及使得多模组摄像头在配合的时候,副摄像头输入更加清晰。
在另一些实施方式中,当第二图像中不存在第一目标对象对应的图像时,步骤S230可以包括:在第二图像中不存在第一目标对象对应的图像时,确定第二对焦区域为,目标副摄像头采用第一目标对焦模式所确定的对焦区域。
本公开实施例中,第二图像中不存在第一目标对象对应的图像,说明目标副摄像头的视角内不存在第一目标对象。
示例性地,如图3所示,当主摄像头的视角范围大于目标副摄像头的视角范围,例如,当主摄像头为超广角摄像头,而目标副摄像头为广角摄像头时,第一目标对象可能存在于超广角摄像头的视角内,而不存在与广角摄像头的视角内。
由于目标副摄像头的视角内不存在第一目标对象,即不能够找到第一目标对象所处的对焦平面,因此,不管是否对第一对焦区域进行映射处理,均不能够使得主摄像头以及目标副摄像头基于同一个目标对象进行对焦,因此,这种情况下,可以为目标副摄像头选择第一目标对焦模式,从而确定第二对焦区域为目标副摄像头采用第一目标对焦模式所确定的对焦区域。
其中,第一目标对焦模式可以是任一种对焦模式。例如,人脸对焦、触控对焦、自由中心对焦等。第一目标对焦模式可以是临时随机选择的,也可以预先配置的,还可以是根据第二图像中的对象类型选择的。
可选地,第一目标对焦模式可以是自由中心对焦模式,此时,可以确定目标副摄像头对应的第二对焦区域为自由中心对焦所对应的对焦区域。采用自由中心对焦的方式使得目标副摄像头对焦过程简单,提高目标副摄像头的对焦速度。
可选地,虽然目标副摄像头的视角内没有第一目标对象,例如没有通过触控对焦选择的第一目标对象“大象”,但是可能存在人脸,此时,也可以选择人脸对焦模式作为第一目标对焦模式,从而将人脸所在的位置区域确定为目标副摄像头对应的第二对焦区域。采用该方法,可以使得副摄像头能够对焦到用户相对更加关心的对象,例如人脸,从而更加符合用户的拍照需求。
结合前述内容可知,当第一目标对象为人脸或者其他物体对象(例如花、建筑物等)时,可以通过物体检测的方式确定第一目标对象是否存在于第二图像中。这种情况下,步骤S230还可以包括以下步骤:
在第二图像中存在第一目标对象对应的图像时,基于主摄像头与目标副摄像头之间的坐标映射关系,对第一目标对象对应的图像进行映射处理,得到映射图像位置,映射图像位置为第一目标对象对应在第二图像中的位置;对第二图像进行对象检测,得到第二图像包括的至少一个候选对象图像分别对应的实际图像位置;基于至少一个候选对象分别对应的实际图像位置与映射图像位置之间的重合度,从至少一个候选对象图像中,确定第一目标对象对应在第二图像中的目标候选对象图像;确定目标候选对象图像所在的区域为第二对焦区域。
其中,候选对象图像是指第二图像中通过对象检测的方式检测出的候选对象对应的图像。例如,当第一目标对象为人脸时,候选对象图像即为第二图像中包括的人脸图像。
本公开实施例中,可以利用预先确定的主摄像头与目标副摄像头之间的坐标映射关系,对第一目标对象对应的图像进行映射处理,可以得到第一目标对象对应的图像在第二图像中对应的映射图像位置,接着还可以对第二图像进行对象检测,得到第二图像包括的至少一个候选对象图像分别对应的实际图像位置,接着便可以基于至少一个候选对象图像分别对应的实际图像位置与映射图像位置之间的重合度,从至少一个候选对象图像中,确定第一目标对象对应在第二图像中的目标候选对象图像,接着再将目标候选对象图像所在的区域为第二对焦区域。
其中,基于至少一个候选对象分别对应的实际图像位置与映射图像位置之间的重合度,从至少一个候选对象图像中,确定第一目标对象对应在第二图像中的目标候选对象图像可以存在多种情况。
在一些情况下,候选对象图像的数量为一个,这种情况下,确定第一目标对象对应在第二图像中的目标候选对象图像,可以通过判断该候选对象图像对应的实际图像位置与映射图像位置的重合度是否大于一个预设的阈值的方式,例如95%,当重合度大于95%时,即确定该候选对象图像为第一目标对象对应在第二图像中的目标候选对象图像,此时,该目标候选对象图像所在的区域即为第二对焦区域。
在另一些情况下,候选对象图像的数量为至少为两个,此时,需要从至少两个候选对象图像中确定目标候选对象图像,这种情况下,确定第一目标对象对应在第二图像中的目标候选对象图像,可以从至少两个候选对象图像中确定重合度最大的候选对象图像为第一目标对象对应在第二图像中的目标候选对象图像。
可以理解的是,同一个目标对象的重合度较大,因此,根据重复度的大小便可以从多个候选对象图像中确定目标候选对象图像。例如,第一目标对象为某一人脸,则目标候选对象图像为第二图像中的至少两个人脸图像,可以从至少两个人脸图像中确定重合度最大的人脸图像为目标候选对象图像。
采用上述方法,先通过对象检测的方式得到第二对焦区域可能存在的候选对象图像的位置,然后再根据重合度对候选对象图像的位置进行筛选,得到第二对焦区域,由于对象检测方式得到的位置相较于通过将第一对焦区域映射到第二图像得到第二对焦区域的方式更加准确,因此,可以提高第二对焦区域确定的准确性,进一步使得主摄像头以及副摄像头能够基于同一个目标对象进行对焦,进一步使得主摄像头以及副摄像头的对焦平面相同,使得多模组摄像头间切换更加平滑,以及使得多模组摄像头在配合的时候,副摄像头输入更加清晰。
图4是根据一示例性实施例示出的一种对焦控制方法的流程图,该方法可以应用于包括主摄像头以及至少一个副摄像头的移动终端中,移动终端包括:手机、笔记本、平板电脑、台式计算机、智能音箱、智能电视、可穿戴设备以及智能机器人等,当移动终端的主摄像头当前所处的对焦模式为人脸对焦或者触屏对焦时,该方法包括:
S310,获取主摄像头采集的第一图像以及目标副摄像头采集的第二图像,目标副摄像头为至少一个副摄像头中任一个副摄像头。
其中,步骤S310的具体实现方式可以参照S110的具体描述,这里不再赘述。
S320,确定第二目标对象在第一图像中的存在情况,第二目标对象为第二图像中的目标区域包括的对象。
S330,基于第二目标对象在第一图像中的存在情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
在一些情况下,可能存在不能够从第一图像中确定第一对焦区域以及第一目标对象的情况。
例如,对于主摄像头当前处在人脸对焦模式下时,由于是通过人脸检测的方式在第一图像中确定第一目标对象,那么当第一图像中不存在人脸时,示例性地,如图5所示,当主摄像头的视角范围小于目标副摄像头的视角范围,例如,主摄像头为广角摄像头,副摄像头为超广角摄像头,人脸存在于主摄像头视角外,或者第一图像中存在人脸,但由于人脸太小(例如,主摄像头为超广角摄像头,副摄像头为广角摄像头的情况)时,检测不到人脸,则主摄像头不能够主动从第一图像中得到第一目标对象。此时,不再基于第一对焦区域确定第二对焦区域,而可以先确定第二图像中的目标区域包括的第二目标对象在第一图像中的存在情况,基于第二目标对象在第一图像中的存在情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
其中,目标区域可以理解为第二图像中的存在第二目标对象对应的图像的区域。第二目标对象可以理解为与第一目标对象属于相同类型的对象。例如,在人脸检测模式下,第一目标对象为人脸,此时第二目标对象也为人脸对象。
第二目标对象在第一图像中的存在情况可以理解为第二目标对象对应的图像在第一图像中的存在情况,其中,当第一图像中存在第二目标对象对应的图像时,确定第二目标对象存在于第一图像中,当第一图像中不存在第二目标对象对应的图像时,确定第二目标对象不存在于第一图像中。
需要说明的是,目标区域可以为第二目标对象对应的图像的区域,也可以为包括第二目标对象对应的图像的区域。
S340,控制主摄像头基于第一对焦区域进行对焦,以及控制目标副摄像头基于第二对焦区域进行对焦。
其中,步骤S340的具体实现方式可以参照S130的具体描述,这里不再赘述。
结合前述内容可知,主摄像头不能够主动从第一图像中得到第一目标对象对应的图像可以有两种情况。
在一些情况下,在第一图像中不存在人脸时,不能够主动从第一图像中得到第一目标对象对应的图像。此时,由于第一图像中不存在人脸,因此,在第一图像中也不存在第二目标对象。
在另一些情况下,在第一图像中存在人脸,但是人脸对应的图像太小时,同样不能够主动从第一图像中得到第一目标对象对应的图像。此时,由于第一图像中存在人脸,且主摄像头的视角大于目标副摄像头的视角,这种情况下,可以确定在第一图像中存在第二目标对象。
在一些实施方式中,在第一图像中存在人脸,但是人脸对应的图像太小时,在确定第二目标对象对应的图像所在的区域之后,将第二目标对象对应的图像所在的区域进行映射处理,看映射之后得到的区域的坐标范围是否属于第一图像中的坐标区域范围,从而确定第一图像中是否存在第二目标对象对应的图像。
下面分别对应第一图像中存在第二目标对象对应的图像,以及第一图像中不存在第二目标对象对应的图像两种情况进行详细说明。
在一些实施方式中,当第二图像中存在第一目标对象对应的图像时,步骤S330可以包括:在第一图像中存在第二目标对象时,确定目标区域为目标副摄像头对应的第二对焦区域。
本公开实施例中,考虑到用户从主摄像头切换到目标副摄像头时,由于目标副摄像头的视角内存在第二目标对象(例如人脸),此时用户是希望对焦到第二目标对象(例如人脸)的,因此,这种情况下,可以确定目标区域为目标副摄像头对应的第二对焦区域,从而实现用户在从主摄像头切换到副摄像头时,可以对焦到第二目标对象(例如人脸)上,更加符合用户的使用逻辑,提高用户观看到的第二目标对象(例如人脸)的清晰度。
在一些实施方式中,当第二图像中不存在第一目标对象对应的图像时,步骤S330可以包括:在第一图像中不存在第二目标对象时,确定第二对焦区域为,目标副摄像头采用第二目标对焦模式所确定的对焦区域。
本公开实施例中,在第一图像中不存在第二目标对象时,可以确定第二对焦区域为目标副摄像头采用第二目标对焦模式所确定的对焦区域。
在一些实施方式中,第二目标对焦模式可以是根据用户不同的需求预先设置的一种对焦模式。例如,人脸对焦、触控对焦、自由中心对焦等。
在一些实施方式中,第二目标对焦模式可以与主摄重新确定的对焦模式相同,例如,都使用自由中心对焦。由于主摄像头以及目标副摄像头均是采用的自由中心对焦所对应的对焦区域,从而使得主摄像头以及副摄像头能够尽可能基于同一个对象进行对焦,从而使得主摄像头以及目标副摄像头的对焦平面尽可能相同,使得多模组摄像头间切换更加平滑,以及使得多模组摄像头在配合的时候,目标副摄像头输入更加清晰。
此外,在一些情况下,主摄像头基于自身当前所处的对焦模式未确定第一对焦区域,并且在基于对焦切换逻辑切换对焦模式之后,依然不能够确定对焦区域,这种情况下,可以确定第二对焦区域为目标副摄像头采用第三目标对焦模式所确定的对焦区域。
其中,第三目标对焦模式的确定方法可以参考第一目标对焦模式的确定方法,此处不再赘述。
图6是根据一示例性实施例示出的一种对焦控制装置400的结构框图。参照图6,该装置包括:图像获取模块410、对焦区域确定模块420和对焦模块430。其中:
该图像获取模块410,被配置为获取主摄像头采集的第一图像以及目标副摄像头采集的第二图像,目标副摄像头为至少一个副摄像头中任一个副摄像头;
该对焦区域确定模块420,被配置为基于第一图像与第二图像中的对象分布情况,从第二图像中确定目标副摄像头对应的第二对焦区域;
该对焦模块430,被配置为控制主摄像头基于第一对焦区域进行对焦,以及控制目标副摄像头基于第二对焦区域进行对焦。
在一些实施例中,该对焦区域确定模块420包括:
第一确定子模块,被配置为确定第一目标对象在第二图像中的存在情况,第一目标对象为第一对焦区域中包括的对象。
第二确定子模块,被配置为基于第一目标对象对应的图像在第二图像中的存在情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
在一些实施例中,第二确定子模块还被配置为在第二图像中存在第一目标对象对应的图像时,基于主摄像头与目标副摄像头之间的坐标映射关系,对第一对焦区域进行映射处理,得到第二对焦区域。
在一些实施例中,第二确定子模块,还被配置为在第二图像中不存在第一目标对象对应的图像时,确定第二对焦区域为,目标副摄像头采用第一目标对焦模式所确定的对焦区域。
在一些实施例中,第二确定子模块,还被配置为在第二图像中存在第一目标对象对应的图像时,基于主摄像头与目标副摄像头之间的坐标映射关系,对第一目标对象对应的图像进行映射处理,得到映射图像位置,映射图像位置为第一目标对象对应在第二图像中的位置;对第二图像进行对象检测,得到第二图像包括的至少一个候选对象图像分别对应的实际图像位置;基于至少一个候选对象图像分别对应的实际图像位置与映射图像位置之间的重合度,从至少一个候选对象图像中,确定第一目标对象对应在第二图像中的目标候选对象图像;确定目标候选对象图像所在的区域为第二对焦区域。
在一些实施例中,该对焦区域确定模块420包括:
第三确定子模块,被配置为确定第二目标对象在第一图像中的存在情况,第二目标对象为第二图像中的目标区域包括的对象。
第四确定子模块,被配置为基于第二目标对象在第一图像中的存在情况,从第二图像中确定目标副摄像头对应的第二对焦区域。
在一些实施例中,第四确定子模块,还被配置为在第一图像中存在第二目标对象时,确定目标区域为目标副摄像头对应的第二对焦区域。
在一些实施例中,第四确定子模块,还被配置为在第一图像中不存在第二目标对象时,确定第二对焦区域为,目标副摄像头采用第二目标对焦模式所确定的对焦区域。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开提供的对焦控制方法的步骤。
图7是根据一示例性实施例示出的一种电子设备500的框图。例如,电子设备500可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图7,电子设备500可以包括以下一个或多个组件:处理组件502,存储器504,电力组件506,多媒体组件508,音频组件510,输入/输出(I/O)的接口512,传感器组件514,以及通信组件516。
处理组件502通常控制电子设备500的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令,以完成上述的对焦控制方法的全部或部分步骤。此外,处理组件502可以包括一个或多个模块,便于处理组件502和其他组件之间的交互。例如,处理组件502可以包括多媒体模块,以方便多媒体组件508和处理组件502之间的交互。
存储器504被配置为存储各种类型的数据以支持在电子设备500的操作。这些数据的示例包括用于在电子设备500上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件506为电子设备500的各种组件提供电力。电力组件506可以包括电源管理***,一个或多个电源,及其他与为电子设备500生成、管理和分配电力相关联的组件。
多媒体组件508包括在电子设备500和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件508包括一个前置摄像头和/或后置摄像头。当电子设备500处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜***或具有焦距和光学变焦能力。
音频组件510被配置为输出和/或输入音频信号。例如,音频组件510包括一个麦克风(MIC),当电子设备500处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中,音频组件510还包括一个扬声器,用于输出音频信号。
I/O接口512为处理组件502和***接口模块之间提供接口,上述***接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件514包括一个或多个传感器,用于为电子设备500提供各个方面的状态评估。例如,传感器组件514可以检测到电子设备500的打开/关闭状态,组件的相对定位,例如组件为电子设备500的显示器和小键盘,传感器组件514还可以检测电子设备500或电子设备500一个组件的位置改变,用户与电子设备500接触的存在或不存在,电子设备500方位或加速/减速和电子设备500的温度变化。传感器组件514可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件514还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件516被配置为便于电子设备500和其他设备之间有线或无线方式的通信。电子设备500可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件516经由广播信道接收来自外部广播管理***的广播信号或广播相关信息。在一个示例性实施例中,通信组件516还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述对焦控制方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器504,上述指令可由电子设备500的处理器520执行以完成上述对焦控制方法。例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的对焦控制方法的代码部分。
本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (11)
1.一种对焦控制方法,其特征在于,应用于包括主摄像头以及至少一个副摄像头的移动终端,所述方法包括:
获取所述主摄像头采集的第一图像以及目标副摄像头采集的第二图像,所述目标副摄像头为所述至少一个副摄像头中任一个副摄像头;
基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域;
控制所述主摄像头基于所述第一对焦区域进行对焦,以及控制所述目标副摄像头基于所述第二对焦区域进行对焦。
2.根据权利要求1所述的方法,其特征在于,基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
确定第一目标对象在所述第二图像中的存在情况,所述第一目标对象为所述第一对焦区域中包括的对象;
基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第二图像中存在所述第一目标对象对应的图像时,基于所述主摄像头与所述目标副摄像头之间的坐标映射关系,对所述第一对焦区域进行映射处理,得到所述第二对焦区域。
4.根据权利要求2所述的方法,其特征在于,所述基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第二图像中不存在所述第一目标对象对应的图像时,确定所述第二对焦区域为,所述目标副摄像头采用第一目标对焦模式所确定的对焦区域。
5.根据权利要求2所述的方法,其特征在于,所述基于所述第一目标对象在所述第二图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第二图像中存在所述第一目标对象对应的图像时,基于所述主摄像头与所述目标副摄像头之间的坐标映射关系,对所述第一目标对象对应的图像进行映射处理,得到映射图像位置,所述映射图像位置为所述第一目标对象对应在所述第二图像中的位置;
对所述第二图像进行对象检测,得到所述第二图像包括的至少一个候选对象图像分别对应的实际图像位置;
基于所述至少一个候选对象图像分别对应的实际图像位置与所述映射图像位置之间的重合度,从所述至少一个候选对象图像中,确定所述第一目标对象对应在所述第二图像中的目标候选对象图像;
确定所述目标候选对象图像所在的区域为所述第二对焦区域。
6.根据权利要求1所述的方法,其特征在于,所述基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
确定第二目标对象在所述第一图像中的存在情况,所述第二目标对象为所述第二图像中的目标区域包括的对象;
基于所述第二目标对象在所述第一图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域。
7.根据权利要求6所述的方法,其特征在于,所述基于所述第二目标对象在所述第一图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第一图像中存在所述第二目标对象时,确定所述目标区域为所述目标副摄像头对应的第二对焦区域。
8.根据权利要求6所述的方法,其特征在于,所述基于所述第二目标对象在所述第一图像中的存在情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域,包括:
在所述第一图像中不存在所述第二目标对象时,确定所述第二对焦区域为,所述目标副摄像头采用第二目标对焦模式所确定的对焦区域。
9.一种对焦控制装置,其特征在于,应用于包括主摄像头以及至少一个副摄像头的移动终端,所述装置包括:
图像获取模块,被配置为获取所述主摄像头采集的第一图像以及目标副摄像头采集的第二图像,所述目标副摄像头为所述至少一个副摄像头中任一个副摄像头;
对焦区域确定模块,被配置为基于所述第一图像与所述第二图像中的对象分布情况,从所述第二图像中确定所述目标副摄像头对应的第二对焦区域;
对焦模块,被配置为控制所述主摄像头基于所述第一对焦区域进行对焦,以及控制所述目标副摄像头基于所述第二对焦区域进行对焦。
10.一种电子设备,其特征在于,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现权利要求1-8中任一项所述方法的步骤。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-8中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110910452.3A CN115706848A (zh) | 2021-08-09 | 2021-08-09 | 对焦控制方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110910452.3A CN115706848A (zh) | 2021-08-09 | 2021-08-09 | 对焦控制方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115706848A true CN115706848A (zh) | 2023-02-17 |
Family
ID=85179321
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110910452.3A Pending CN115706848A (zh) | 2021-08-09 | 2021-08-09 | 对焦控制方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115706848A (zh) |
-
2021
- 2021-08-09 CN CN202110910452.3A patent/CN115706848A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108419016B (zh) | 拍摄方法、装置及终端 | |
US9674395B2 (en) | Methods and apparatuses for generating photograph | |
CN105282441B (zh) | 拍照方法及装置 | |
CN106210496B (zh) | 照片拍摄方法及装置 | |
CN108462833B (zh) | 拍摄方法、装置及计算机可读存储介质 | |
CN108154466B (zh) | 图像处理方法及装置 | |
US20180144546A1 (en) | Method, device and terminal for processing live shows | |
CN112219224A (zh) | 图像处理方法及装置、电子设备和存储介质 | |
CN113364965A (zh) | 基于多摄像头的拍摄方法、装置及电子设备 | |
CN110876014B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
US11265529B2 (en) | Method and apparatus for controlling image display | |
CN114422687B (zh) | 预览图像切换方法及装置、电子设备及存储介质 | |
US11252341B2 (en) | Method and device for shooting image, and storage medium | |
CN111835977B (zh) | 图像传感器、图像生成方法及装置、电子设备、存储介质 | |
CN115706848A (zh) | 对焦控制方法、装置、电子设备及存储介质 | |
CN114666490A (zh) | 对焦方法、装置、电子设备和存储介质 | |
CN114418865A (zh) | 图像处理方法、装置、设备及存储介质 | |
CN114390189A (zh) | 图像处理方法、装置、存储介质及移动终端 | |
CN109447929B (zh) | 图像合成方法及装置 | |
CN110874829A (zh) | 图像处理方法及装置、电子设备及存储介质 | |
CN109862252B (zh) | 图像拍摄方法及装置 | |
CN112866555B (zh) | 拍摄方法、装置、设备及存储介质 | |
CN110955328B (zh) | 电子设备的控制方法、装置及存储介质 | |
CN110876013B (zh) | 确定图像分辨率的方法及装置、电子设备及存储介质 | |
CN106713748B (zh) | 发送图片的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |