CN109544616A - 一种深度信息确定方法和终端 - Google Patents
一种深度信息确定方法和终端 Download PDFInfo
- Publication number
- CN109544616A CN109544616A CN201811509856.6A CN201811509856A CN109544616A CN 109544616 A CN109544616 A CN 109544616A CN 201811509856 A CN201811509856 A CN 201811509856A CN 109544616 A CN109544616 A CN 109544616A
- Authority
- CN
- China
- Prior art keywords
- depth information
- area object
- subject
- effective
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本发明提供一种深度信息确定方法和终端,该方法包括:通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。本实施例中,可以使得终端获取深度信息的性能较好。
Description
技术领域
本发明涉及信息获取技术领域,尤其涉及一种深度信息确定方法和终端。
背景技术
在当今社会,越来越多的终端上都设置有摄像装置,从而方便用户可以随时随地的拍照。在实际运用中,现有的摄像装置一般采用飞行时间技术(Time Of Light,TOF)摄像头,通过TOF摄像头获取对象的深度信息,且往往只能通过TOF摄像头获取对象的深度信息,即直接将TOF摄像头获取的深度信息作为有效深度信息。但某一些场景通过TOF摄像头获取的深度信息的准确低可能会比较低,从而导致终端获取深度信息的性能比较差。
发明内容
本发明实施例提供一种深度信息确定方法和终端,以解决终端获取深度信息的性能比较差的问题。
第一方面,本发明实施例提供了一种深度信息确定方法,应用于包括TOF摄像头和彩色摄像头的终端,所述TOF摄像头和所述彩色摄像头位于所述终端的同一侧,所述方法包括:
通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;
从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
第二方面,本发明实施例还提供一种终端,包括TOF摄像头和彩色摄像头的终端,所述TOF摄像头和所述彩色摄像头位于所述终端的同一侧,所述终端还包括:
获取模块,用于通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;
确定模块,用于从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
第三方面,本发明实施例还提供一种移动终端,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述深度信息确定方法中的步骤。
第四方面,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述深度信息确定方法中的步骤。
本发明实施例中,通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过TOF摄像头和彩色摄像头获取被拍摄对象的第二深度信息;从第一深度信息和第二深度信息中确定被拍摄对象的有效深度信息。这样,终端可以通过TOF摄像头获取被拍摄对象的深度信息,或者通过TOF摄像头和彩色摄像头共同获取被拍摄对象的深度信息,从而使得终端获取深度信息的性能较好。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种深度信息确定方法的流程图;
图2是本发明实施例提供的另一种深度信息确定方法的流程图;
图3是本发明实施例提供的另一种深度信息确定方法的应用场景图;
图4是本发明实施例提供的一种终端的结构示意图;
图5是本发明实施例提供的另一种终端的结构示意图;
图6是本发明实施例提供的另一种终端的结构示意图;
图7是本发明实施例提供的一种移动终端的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,图1是本发明实施例提供的一种深度信息确定方法的流程图,本方法应用于包括TOF摄像头和彩色摄像头的终端,所述TOF摄像头和所述彩色摄像头位于所述终端的同一侧,如图1所示,本方法包括以下步骤:
步骤101、通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息。
其中,被拍摄对象可以为终端通过TOF摄像头,或者通过TOF摄像头和彩色摄像头获取到的图像或者视频中包括的所有对象,例如:终端获取到一张图像,则此时被拍摄对象可以为图像中包括的人以及拍摄背景等全部对象。需要说明的是,上述图像可以为终端上预览界面中的图像,也可以为终端通过上述摄像头拍摄得到的图像。另外,被拍摄对象的深度信息也可以称为图像的深度信息。
另外,终端通过TOF摄像头可以通过测量红外激光发射器发出的光线与红外激光接收器接收到光线之间的时间间隔,此时间间隔乘以光速再除以2,即可计算出来被拍摄对象的深度信息。
另外,终端上包括的彩色摄像头的数量在此不做限定。例如:彩色摄像头的数量可以为一个或者多个。例如:终端上可以包括1个TOF摄像头和1个彩色摄像头;或者,终端上也可以包括1个TOF摄像头和2个彩色摄像头。需要说明的是,彩色摄像头可以为红绿蓝(RedGreen Blue,RGB)摄像头。
当彩色摄像头的数量为多个时,终端可以通过TOF摄像头和多个彩色摄像头针对被拍摄对象采集图像,并根据采集的图像确定被拍摄对象的有效深度信息。
例如:TOF摄像头和每一个彩色摄像头均可以分别针对被拍摄对象采集图像,这样,即可得到被拍摄对象的多幅图像,并且,由于TOF摄像头和每一个彩色摄像头在终端上的位置均已固定,从而使得TOF摄像头和每一个彩色摄像头与被拍摄对象之间的位置关系也可以获知,这样,通过多幅图像之间的差异,以及TOF摄像头和每一个彩色摄像头与被拍摄对象之间的位置关系,从而使得终端可以确定被拍摄对象的有效深度信息。
步骤102、从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
其中,可以先判断第一深度信息和第二深度信息之间的差值是否小于目标差值,当差值小于目标差值时,可以通过比较第一深度信息和第二深度信息的精确度,从而在第一深度信息和第二深度信息中确定被拍摄对象的有效深度信息。例如:第一深度信息和第二深度信息的差值为0.1单位或者0.2单位,而目标差值的取值为1单位,则可以比较第一深度信息和第二深度信息的精确度,若第一深度信息精确到小数点后1位,第二深度信息精确到小数点后2位,则可以确定第二深度信息为被拍摄对象的有效深度信息。此处单位可以根据实际需要确定。
通过上述步骤,通过TOF摄像头获取被拍摄对象的第一深度信息,以及,通过TOF摄像头和彩色摄像头获取被拍摄对象的第二深度信息,然后再从第一深度信息和第二深度信息中进行筛选,并将筛选出的深度信息确定为被拍摄对象的有效深度信息。这样,与现有技术中只能采用TOF摄像头获取被拍摄对象的有效深度信息的方式相比,终端获取被拍摄对象的有效深度信息的方式更多,也使得终端获取深度信息的性能较好。
本发明实施例中,终端可以是移动终端,也可以是不能移动的终端,而上述移动终端可以是手机、平板电脑(Tablet PersonalComputer)、膝上型电脑(Laptop Computer)、个人数字助理(PersonalDigital Assistant,简称PDA)、移动上网装置(Mobile InternetDevice,MID)或可穿戴式设备(Wearable Device)等等。
本发明实施例中,通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。这样,终端可以分别通过TOF摄像头获取被拍摄对象的深度信息,或者通过TOF摄像头和彩色摄像头共同获取被拍摄对象的深度信息,从而使得终端获取深度信息的性能较好。
参见图2,图2是本发明实施例提供的另一种深度信息确定方法的流程图。本实施例与上个实施例的主要区别在于:被拍摄对象包括第一区域对象和第二区域对象,并可以确定第一深度信息中第一区域对象的深度信息为第一区域对象的有效深度信息,以及,确定第二深度信息中第二区域对象的深度信息为第二区域对象的有效深度信息。如图2所示,包括以下步骤:
步骤201、通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息。
需要说明的是,终端上彩色摄像头的数量在此不做限定。
步骤202、确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,确定所述第一深度信息为所述被拍摄对象的有效深度信息。
其中,第二深度信息中第一区域对象的深度信息可以小于第二区域对象的深度信息,另外,第一区域对象和第二区域对象的类型在此不做限定,例如:第一区域对象的类型可以为人,第二区域对象的类型可以为树木。
例如:参见图3,终端301上设置有TOF摄像头3011和彩色摄像头3012,终端301通过TOF摄像头3011可以获取被拍摄对象302的第一深度信息,通过TOF摄像头3011和彩色摄像头3012可以获取被拍摄对象302的第二深度信息,而被拍摄对象302包括第一区域对象3021和第二区域对象3022。另外,图3中箭头方向表示红外光线在终端301与被拍摄对象302之间的传输方向,例如:红外光从TOF摄像头3011中的红外发射器中发出,遇到被拍摄对象302后反射回到TOF摄像头3011的红外接收器或者彩色摄像头3012中。
这样,终端301可以确定第一深度信息中第一区域对象3021的深度信息为第一区域对象3021的有效深度信息,以及,确定第二深度信息中第二区域对象3022的深度信息为第二区域对象3022的有效深度信息;或者,确定第一深度信息为被拍摄对象302的有效深度信息,从而使得终端301确定被拍摄对象302的有效深度信息的方式更加灵活。
另外,第一区域对象的有效深度信息可以为:第一区域对象中包括的多个点的平均深度信息,或者多个点的深度信息的中位数等。需要说明的是,第二区域对象的有效深度信息可参照上述第一区域对象的有效深度信息的表述。
可选的,所述确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息的步骤,包括:
若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值大于或者等于预设阈值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
若所述第二深度信息中所述第一区域对象的深度信息小于或等于第一预设值,且所述第二深度信息中所述第二区域对象的深度信息大于或等于第二预设值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
当第二深度信息中第一区域对象的深度信息与第二区域对象的深度信息的差值大于或者等于预设阈值时,第二深度信息中第一区域对象的深度信息小于第二区域对象的深度信息,而通过TOF摄像头获取的第一深度信息中,第二区域对象的深度信息远小于第二深度信息中第二区域对象的深度信息。若该区域对象为背景时,则上述通过TOF摄像头获得的第二区域对象的深度信息准确度较低的现象可以称为“背景拉近现象”。
这样,当第二深度信息中第一区域对象的深度信息与第二区域对象的深度信息的差值大于或者等于预设阈值时,可以确定第一深度信息中第一区域对象的深度信息为第一区域对象的有效深度信息,以及,确定第二深度信息中第二区域对象的深度信息为第二区域对象的有效深度信息。
同理,当第二深度信息中第一区域对象的深度信息小于或等于第一预设值,且第二深度信息中第二区域对象的深度信息大于或等于第二预设值,则同样会出现上述“背景拉近现象”。例如:第一预设值的取值可以为20厘米,第二预设值的取值可以为1米。当然,具体取值在此不做限定。需要说明的是,深度信息可以理解为被拍摄对象与终端之间的距离。
本实施方式中,当通过TOF摄像头获得的被拍摄对象的深度信息的准确度较低时,即出现“背景拉近现象”时,可以确定第一深度信息中第一区域对象的深度信息为第一区域对象的有效深度信息,以及,确定第二深度信息中第二区域对象的深度信息为第二区域对象的有效深度信息,从而可以提高被拍摄对象的深度信息的准确度。
可选的,所述确定所述第一深度信息为所述被拍摄对象的有效深度信息的步骤,包括:
若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值小于预设阈值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息;或者,
若所述第二深度信息中所述第一区域对象的深度信息大于第一预设值,和/或,所述第二深度信息中所述第二区域对象的深度信息小于第二预设值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
其中,当第二深度信息中第一区域对象的深度信息与第二区域对象的深度信息的差值小于预设阈值时,则说明通过TOF摄像头获取的第一深度信息未出现“背景拉近现象”,这样,由于未出现“背景拉近现象”,且通过TOF摄像头获取的被拍摄对象的有效深度信息时,在没有可见光的情况下也可以获取,使得对深度信息的获取较为方便,从而使得对被拍摄对象的有效深度信息的获取的方式更加灵活。
若第二深度信息中第一区域对象的深度信息大于第一预设值,和/或,第二深度信息中所述第二区域对象的深度信息小于第二预设值,则同样可以说明通过TOF摄像头获取的第一深度信息未出现“背景拉近现象”。
另外,预设阈值、第一预设值和第二预设值的表述可以参见上个实施方式中的表述,在此不再赘述。
本实施方式中,当通过TOF摄像头获得的被拍摄对象的第一深度信息未出现“背景拉近现象”时,即第一深度信息的准确度较高时,可以确定第一深度信息为被拍摄对象的有效深度信息,从而可以使得被拍摄对象的有效深度信息的精度较高。
可选的,所述彩色摄像头的滤波片为双通滤波片。
其中,当可见光的强度较低时,例如:在夜晚,或者在较黑的室内,终端可以通过彩色摄像头接收透过双通滤波片的检测红外光,并根据上述检测红外光的数量,获取被拍摄对象的第二深度信息。上述检测红外光为TOF摄像头中的红外发射器发射的,且遇到被拍摄对象后返回至彩色摄像头中的红外光。
由于常规的彩色摄像头中的红外滤光片在红外光部分是完全截止的,即红外光的透过性较低,而本实施例中的彩色摄像头的滤波片为双通滤波片,上述双通滤波片通过改变膜系设计,从而可以供波段在830-1020纳米的红外光和波段在400-600纳米的可见光通过,从而完成对被拍摄对象的第二深度信息的获取。
另外,需要说明的是,由于波段在830-1020纳米的红外光的透过率较低,一般低于2%,且平均透过率在0.5%左右,而波段在400-600纳米的可见光的透过率较高,透过率可以达到90%以上。因此,在通过TOF摄像头和彩色摄像头拍摄照片时,透过彩色摄像头的滤波片的红外光对照片的成像质量较低,基本上可以忽略不计。
本实施方式中,彩色摄像头的滤波片为双通滤波片,从而使得在可见光强度较低时,TOF摄像头和彩色摄像头也可以较好的获取到被拍摄对象的第二深度信息,从而使得对被拍摄对象的第二深度信息的获取更加方便。
本发明实施例中,通过步骤201和202,使得确定被拍摄对象的有效深度信息的方式更加灵活,从而使得终端获取深度信息的性能较好。
参见图4,图4是本发明实施例提供的终端的结构图,能实现上述实施例中一种深度信息确定方法的细节,并达到相同的效果。如图4所示,终端400包括TOF摄像头和彩色摄像头的终端,所述TOF摄像头和所述彩色摄像头位于所述终端的同一侧,终端400包括:
获取模块401,用于通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;
确定模块402,用于从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
可选的,参见图5,所述被拍摄对象包括第一区域对象和第二区域对象,所述确定模块402包括:
第一确定子模块4021,用于确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
可选的,参见图6,所述确定模块402包括:第二确定子模块4022,用于确定所述第一深度信息为所述被拍摄对象的有效深度信息。
可选的,所述第一确定子模块4021,还用于若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值大于或者等于预设阈值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
所述第一确定子模块4021,还用于若所述第二深度信息中所述第一区域对象的深度信息小于或等于第一预设值,且所述第二深度信息中所述第二区域对象的深度信息大于或等于第二预设值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
可选的,所述第二确定子模块4022,还用于若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值小于预设阈值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息;或者,
所述第二确定子模块4022,还用于若所述第二深度信息中所述第一区域对象的深度信息大于第一预设值,和/或,所述第二深度信息中所述第二区域对象的深度信息小于第二预设值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息。
可选的,所述彩色摄像头的滤波片为双通滤波片。
本发明实施例提供的终端能够实现图1至图2的方法实施例中终端实现的各个过程,为避免重复,这里不再赘述。本实施例中,同样可以使得终端获取深度信息的性能较好。
图7为实现本发明各个实施例的一种移动终端的硬件结构示意图。
该移动终端700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解,图7中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
处理器710,用于:
通过TOF摄像头获取被拍摄对象的第一深度信息,以及,通过TOF摄像头和彩色摄像头获取所述被拍摄对象的第二深度信息;
从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
可选的,所述被拍摄对象包括第一区域对象和第二区域对象,所述处理器710执行的所述从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息的步骤,包括:
确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
确定所述第一深度信息为所述被拍摄对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
可选的,所述处理器710执行的所述确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息的步骤,包括:
若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值大于或者等于预设阈值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
若所述第二深度信息中所述第一区域对象的深度信息小于或等于第一预设值,且所述第二深度信息中所述第二区域对象的深度信息大于或等于第二预设值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
可选的,所述处理器710执行所述确定所述第一深度信息为所述被拍摄对象的有效深度信息的步骤,包括:
若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值小于预设阈值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息;或者,
若所述第二深度信息中所述第一区域对象的深度信息大于第一预设值,和/或,所述第二深度信息中所述第二区域对象的深度信息小于第二预设值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息。
可选的,所述彩色摄像头的滤波片为双通滤波片。
本发明实施例中的移动终端同样可以通过TOF摄像头获取被拍摄对象的深度信息,或者通过TOF摄像头和彩色摄像头共同获取被拍摄对象的深度信息,进而使得获取深度信息的性能较好。
应理解的是,本发明实施例中,射频单元701可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器710处理;另外,将上行的数据发送给基站。通常,射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元701还可以通过无线通信***与网络和其他设备通信。
移动终端通过网络模块702为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元703还可以提供与移动终端700执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
移动终端700还包括至少一种传感器705,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度,接近传感器可在移动终端700移动到耳边时,关闭显示面板7061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
用户输入单元707可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器710,接收处理器710发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071,用户输入单元707还可以包括其他输入设备7072。具体地,其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板7071可覆盖在显示面板7061上,当触控面板7071检测到在其上或附近的触摸操作后,传送给处理器710以确定触摸事件的类型,随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图7中,触控面板7071与显示面板7061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板7071与显示面板7061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元708为外部装置与移动终端700连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。
存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器709可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器710是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器709内的软件程序和/或模块,以及调用存储在存储器709内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器710可包括一个或多个处理单元;优选的,处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
移动终端700还可以包括给各个部件供电的电源711(比如电池),优选的,电源711可以通过电源管理***与处理器710逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。
另外,移动终端700包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器710,存储器709,存储在存储器709上并可在所述处理器710上运行的计算机程序,该计算机程序被处理器710执行时实现上述一种深度信息确定方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述一种深度信息确定方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random AccessMemory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (12)
1.一种深度信息确定方法,其特征在于,应用于包括飞行时间技术TOF摄像头和彩色摄像头的终端,所述TOF摄像头和所述彩色摄像头位于所述终端的同一侧,所述方法包括:
通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;
从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
2.如权利要求1所述的方法,其特征在于,所述被拍摄对象包括第一区域对象和第二区域对象,所述从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息的步骤,包括:
确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
确定所述第一深度信息为所述被拍摄对象的有效深度信息。
3.如权利要求2所述的方法,其特征在于,所述确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息的步骤,包括:
若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值大于或者等于预设阈值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
若所述第二深度信息中所述第一区域对象的深度信息小于或等于第一预设值,且所述第二深度信息中所述第二区域对象的深度信息大于或等于第二预设值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
4.如权利要求2所述的方法,其特征在于,所述确定所述第一深度信息为所述被拍摄对象的有效深度信息的步骤,包括:
若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值小于预设阈值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息;或者,
若所述第二深度信息中所述第一区域对象的深度信息大于第一预设值,和/或,所述第二深度信息中所述第二区域对象的深度信息小于第二预设值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
5.如权利要求1-4中任一项所述的方法,其特征在于,所述彩色摄像头的滤波片为双通滤波片。
6.一种终端,其特征在于,包括TOF摄像头和彩色摄像头的终端,所述TOF摄像头和所述彩色摄像头位于所述终端的同一侧,所述终端还包括:
获取模块,用于通过所述TOF摄像头获取被拍摄对象的第一深度信息,以及,通过所述TOF摄像头和所述彩色摄像头获取所述被拍摄对象的第二深度信息;
确定模块,用于从所述第一深度信息和所述第二深度信息中确定所述被拍摄对象的有效深度信息。
7.如权利要求6所述的终端,其特征在于,所述被拍摄对象包括第一区域对象和第二区域对象,所述确定模块包括:
第一确定子模块,用于确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
第二确定子模块,用于确定所述第一深度信息为所述被拍摄对象的有效深度信息。
8.如权利要求7所述的终端,其特征在于,所述第一确定子模块,还用于若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值大于或者等于预设阈值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息;或者,
所述第一确定子模块,还用于若所述第二深度信息中所述第一区域对象的深度信息小于或等于第一预设值,且所述第二深度信息中所述第二区域对象的深度信息大于或等于第二预设值,则确定所述第一深度信息中所述第一区域对象的深度信息为所述第一区域对象的有效深度信息,以及,确定所述第二深度信息中所述第二区域对象的深度信息为所述第二区域对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
9.如权利要求7所述的终端,其特征在于,所述第二确定子模块,还用于若所述第二深度信息中所述第一区域对象的深度信息与所述第二区域对象的深度信息的差值小于预设阈值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息;或者,
所述第二确定子模块,还用于若所述第二深度信息中所述第一区域对象的深度信息大于第一预设值,和/或,所述第二深度信息中所述第二区域对象的深度信息小于第二预设值,则确定所述第一深度信息为所述被拍摄对象的有效深度信息,其中,所述第一预设值小于所述第二预设值。
10.如权利要求6-9中任一项所述的终端,其特征在于,所述彩色摄像头的滤波片为双通滤波片。
11.一种移动终端,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1-5中任一项所述的深度信息确定方法中的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-5中任一项所述的深度信息确定方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811509856.6A CN109544616B (zh) | 2018-12-11 | 2018-12-11 | 一种深度信息确定方法和终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811509856.6A CN109544616B (zh) | 2018-12-11 | 2018-12-11 | 一种深度信息确定方法和终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109544616A true CN109544616A (zh) | 2019-03-29 |
CN109544616B CN109544616B (zh) | 2021-02-26 |
Family
ID=65854007
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811509856.6A Active CN109544616B (zh) | 2018-12-11 | 2018-12-11 | 一种深度信息确定方法和终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109544616B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021087812A1 (zh) * | 2019-11-06 | 2021-05-14 | Oppo广东移动通信有限公司 | 图像的深度值的确定方法、图像处理器以及模组 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120162390A1 (en) * | 2010-12-24 | 2012-06-28 | Wen-Chin Chang | Method of Taking Pictures for Generating Three-Dimensional Image Data |
CN106612387A (zh) * | 2015-10-15 | 2017-05-03 | 杭州海康威视数字技术股份有限公司 | 一种组合深度图获得方法及深度相机 |
CN107403447A (zh) * | 2017-07-14 | 2017-11-28 | 梅卡曼德(北京)机器人科技有限公司 | 深度图像获取方法 |
CN107851322A (zh) * | 2015-07-13 | 2018-03-27 | 皇家飞利浦有限公司 | 用于为图像确定深度图的方法和装置 |
US20180205926A1 (en) * | 2017-01-17 | 2018-07-19 | Seiko Epson Corporation | Cleaning of Depth Data by Elimination of Artifacts Caused by Shadows and Parallax |
CN108564613A (zh) * | 2018-04-12 | 2018-09-21 | 维沃移动通信有限公司 | 一种深度数据获取方法及移动终端 |
CN108777784A (zh) * | 2018-06-06 | 2018-11-09 | Oppo广东移动通信有限公司 | 深度获取方法和装置、电子装置、计算机设备和存储介质 |
-
2018
- 2018-12-11 CN CN201811509856.6A patent/CN109544616B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120162390A1 (en) * | 2010-12-24 | 2012-06-28 | Wen-Chin Chang | Method of Taking Pictures for Generating Three-Dimensional Image Data |
CN107851322A (zh) * | 2015-07-13 | 2018-03-27 | 皇家飞利浦有限公司 | 用于为图像确定深度图的方法和装置 |
CN106612387A (zh) * | 2015-10-15 | 2017-05-03 | 杭州海康威视数字技术股份有限公司 | 一种组合深度图获得方法及深度相机 |
US20180205926A1 (en) * | 2017-01-17 | 2018-07-19 | Seiko Epson Corporation | Cleaning of Depth Data by Elimination of Artifacts Caused by Shadows and Parallax |
CN107403447A (zh) * | 2017-07-14 | 2017-11-28 | 梅卡曼德(北京)机器人科技有限公司 | 深度图像获取方法 |
CN108564613A (zh) * | 2018-04-12 | 2018-09-21 | 维沃移动通信有限公司 | 一种深度数据获取方法及移动终端 |
CN108777784A (zh) * | 2018-06-06 | 2018-11-09 | Oppo广东移动通信有限公司 | 深度获取方法和装置、电子装置、计算机设备和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021087812A1 (zh) * | 2019-11-06 | 2021-05-14 | Oppo广东移动通信有限公司 | 图像的深度值的确定方法、图像处理器以及模组 |
Also Published As
Publication number | Publication date |
---|---|
CN109544616B (zh) | 2021-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110266930A (zh) | 图像拍摄的补光方法、移动终端及灯光调节方法 | |
CN107846537B (zh) | 一种摄像头组件、图像获取方法及移动终端 | |
CN108989678A (zh) | 一种图像处理方法、移动终端 | |
CN107864336B (zh) | 一种图像处理方法、移动终端 | |
CN110298304A (zh) | 一种皮肤检测方法及终端 | |
CN110113528A (zh) | 一种参数获取方法及终端设备 | |
CN108174103A (zh) | 一种拍摄提示方法及移动终端 | |
CN109788174A (zh) | 一种补光方法及终端 | |
CN109144361A (zh) | 一种图像处理方法及终端设备 | |
CN109068116A (zh) | 基于补光的图像处理方法、装置、移动终端和存储介质 | |
CN108881719A (zh) | 一种切换拍摄方式的方法及终端设备 | |
CN110290331A (zh) | 一种屏幕控制方法及终端 | |
CN108174081B (zh) | 一种拍摄方法及移动终端 | |
CN110213412A (zh) | 一种显示方法及终端 | |
CN110138967A (zh) | 一种终端的操作控制方法及终端 | |
CN109445653A (zh) | 一种图标处理方法及移动终端 | |
CN108718388A (zh) | 一种拍照方法及移动终端 | |
CN109192153A (zh) | 一种终端及终端控制方法 | |
CN108650466A (zh) | 一种强光或逆光拍摄人像时提升照片宽容度的方法及电子设备 | |
CN110276329A (zh) | 一种皮肤检测方法及终端 | |
CN109639981A (zh) | 一种图像拍摄方法及移动终端 | |
CN109358913A (zh) | 一种应用程序的启动方法及终端设备 | |
CN109274957A (zh) | 一种深度图像拍摄方法及移动终端 | |
CN109547700A (zh) | 拍照方法及终端 | |
CN109729336A (zh) | 一种视频图像的显示方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |