CN113141496A - 3d拍摄方法、装置及3d显示终端 - Google Patents

Abstract

本申请涉及3D技术领域，公开一种3D拍摄方法，适用于包括至少两个景深摄像头的景深摄像头模组，以及包括至少两个彩色摄像头的彩色摄像头模组，该方法包括：协调景深摄像头模组中的至少两个景深摄像头以获取拍摄对象的第一景深信息，通过彩色摄像头模组中的至少两个彩色摄像头获取能够根据第一景深信息调整的拍摄对象的彩色图像。上述的3D拍摄方法，能够协调景深摄像头模组中的至少两个景深摄像头以对彩色摄像头模组所获取的彩色图像进行景深调整，能够有效提高彩色图像的景深准确度。本申请还公开一种3D拍摄装置及3D显示终端。

Description

3D拍摄方法、装置及3D显示终端

技术领域

本申请涉及3D技术领域，例如涉及一种3D拍摄方法、装置及3D显示终端。

背景技术

目前，有些终端上设置有两个不同类型的摄像头，以获取拍摄对象的景深信息用于3D显示。

在实现本公开实施例的过程中，发现相关技术中至少存在如下问题：

仅通过两个摄像头获取的景深信息的准确度较低。

发明内容

为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。该概括不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。

本公开实施例提供了一种3D拍摄方法、装置及3D显示终端，以解决仅通过两个摄像头获取的景深信息的准确度较低的技术问题。

本公开实施例提供的3D拍摄方法，适用于包括至少两个景深摄像头的景深摄像头模组，以及包括至少两个彩色摄像头的彩色摄像头模组，该3D拍摄方法包括：

协调景深摄像头模组中的至少两个景深摄像头以获取拍摄对象的第一景深信息，通过彩色摄像头模组中的至少两个彩色摄像头获取能够根据第一景深信息调整的拍摄对象的彩色图像。

在一些实施例中，还可以根据第一景深信息调整彩色图像中的第二景深信息。

在一些实施例中，还可以对调整后的彩色图像进行3D显示。

在一些实施例中，根据第一景深信息调整彩色图像中的第二景深信息，可以包括：

以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深，使第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深靠近。

在一些实施例中，以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深，可以包括：

将第二景深信息中包括的对应像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

将第二景深信息中包括的对应像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，还可以以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素以外的像素的景深。

在一些实施例中，以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素以外的像素的景深，可以包括：

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，协调景深摄像头模组中的至少两个景深摄像头以获取第一景深信息，可以包括：

选择景深摄像头模组中的一个景深摄像头获取拍摄对象的景深信息，将获取的拍摄对象的景深信息作为第一景深信息；或

选择景深摄像头模组中的至少两个景深摄像头分别获取拍摄对象的景深信息，选择至少两个景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息；或

选择景深摄像头模组中的所有景深摄像头分别获取拍摄对象的景深信息，选择所有景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息。

在一些实施例中，选择至少两个景深摄像头中的一个景深摄像头，可以包括：选择至少两个景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择至少两个景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

在一些实施例中，选择至少两个景深摄像头中的一个景深摄像头，可以包括：

选择所有景深摄像头中的一个景深摄像头，包括：选择所有景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所有景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

在一些实施例中，通过至少两个彩色摄像头获取拍摄对象的彩色图像，可以包括：

通过第一彩色摄像头获取第一彩色图像，还通过第二彩色摄像头获取第二彩色图像；

根据第一彩色摄像头与第二彩色摄像头的间距和拍摄角度，将第一彩色图像与第二彩色图像合成为包含第二景深信息的彩色合成图像。

在一些实施例中，彩色合成图像可以包括左半幅图像、右半幅图像；

其中，左半幅图像可以为彩色图像，右半幅图像可以为景深图像。

本公开实施例提供的3D拍摄装置，包括处理器和存储有程序指令的存储器；处理器被配置为在执行程序指令时，执行上述的3D拍摄方法。

本公开实施例提供的3D拍摄装置，包括：

景深摄像头模组，包括至少两个景深摄像头，被配置为通过协调至少两个景深摄像头获取拍摄对象的第一景深信息；

彩色摄像头模组，包括至少两个彩色摄像头，被配置为获取能够根据第一景深信息调整的拍摄对象的彩色图像。

在一些实施例中，还可以包括：图像处理器，被配置为根据第一景深信息调整彩色图像中的第二景深信息。

在一些实施例中，图像处理器，还可以被配置为：对调整后的彩色图像进行3D显示。

在一些实施例中，图像处理器，可以被配置为：

以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深，使第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深靠近。

在一些实施例中，图像处理器，可以被配置为：

将第二景深信息中包括的对应像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

将第二景深信息中包括的对应像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，图像处理器，还可以被配置为：以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素以外的像素的景深。

在一些实施例中，图像处理器，可以被配置为：

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，景深摄像头模组，可以被配置为：

选择景深摄像头模组中的一个景深摄像头获取拍摄对象的景深信息，将获取的拍摄对象的景深信息作为第一景深信息；或

选择景深摄像头模组中的至少两个景深摄像头分别获取拍摄对象的景深信息，选择至少两个景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息；或

选择景深摄像头模组中的所有景深摄像头分别获取拍摄对象的景深信息，选择所有景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息。

在一些实施例中，景深摄像头模组，可以被配置为：

在选择至少两个景深摄像头中的一个景深摄像头的情况下，选择至少两个景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择至少两个景深摄像头中获取景深信息的准确度最高的一个景深摄像头；

或，

在选择所有景深摄像头中的一个景深摄像头的情况下，选择所有景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所有景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

在一些实施例中，景深摄像头模组中的至少一个景深摄像头可以为结构光摄像头或飞行时间(TOF)摄像头。

在一些实施例中，景深摄像头模组中的至少一个景深摄像头可以为TOF摄像头，TOF摄像头可以位于彩色摄像头模组中的两个彩色摄像头之间。

在一些实施例中，彩色摄像头模组，可以包括：

第一彩色摄像头，被配置为获取第一彩色图像；

第二彩色摄像头，被配置为获取第二彩色图像；

可选地，图像处理器，可以被配置为：

根据第一彩色摄像头与第二彩色摄像头的间距和拍摄角度，将第一彩色图像与第二彩色图像合成为包含第二景深信息的彩色合成图像。

在一些实施例中，彩色摄像头模组中的至少两个彩色摄像头可以采用性能指标相同的光学镜头和传感器芯片。

本公开实施例提供的3D显示终端，包括上述的3D拍摄装置。

本公开实施例提供的3D拍摄方法、装置及3D显示终端，可以实现以下技术效果：

能够协调景深摄像头模组中的至少两个景深摄像头以对彩色摄像头模组所获取的彩色图像进行景深调整，能够有效提高彩色图像的景深准确度。

以上的总体描述和下文中的描述仅是示例性和解释性的，不用于限制本申请。

附图说明

一个或多个实施例通过与之对应的附图进行示例性说明，这些示例性说明和附图并不构成对实施例的限定，附图中具有相同参考数字标号的元件示为类似的元件，附图不构成比例限制，并且其中：

图1是本公开实施例提供的3D拍摄方法流程图；

图2A、图2B、图2C分别是本公开实施例提供的又一3D拍摄方法流程图；

图3是本公开实施例提供的又一3D拍摄方法流程图；

图4是本公开实施例提供的3D拍摄装置结构图；

图5是本公开实施例提供的又一3D拍摄装置结构图；

图6是本公开实施例提供的又一3D拍摄装置结构图；

图7是本公开实施例提供的又一3D拍摄装置结构图；

图8是本公开实施例提供的又一3D拍摄装置结构图；

图9是本公开实施例提供的3D显示终端的装置结构图。

附图标记：

300：3D拍摄装置；310：处理器；320：存储器；330：通信接口；340：总线；410：景深摄像头模组；411：第一景深摄像头；412：第二景深摄像头；420：彩色摄像头模组；421：第一彩色摄像头；422：第二彩色摄像头；430：图像处理器；500：3D显示终端。

具体实施方式

为了能够更加详尽地了解本公开实施例的特点与技术内容，下面结合附图对本公开实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本公开实施例。在以下的技术描述中，为方便解释起见，通过多个细节以提供对所披露实施例的充分理解。然而，在没有这些细节的情况下，一个或多个实施例仍然可以实施。在其它情况下，为简化附图，熟知的结构和装置可以简化展示。

参见图1，本公开实施例提供了一种3D拍摄方法，适用于包括至少两个景深摄像头的景深摄像头模组，以及包括至少两个彩色摄像头的彩色摄像头模组，该方法包括：

步骤110：协调景深摄像头模组中的至少两个景深摄像头，以获取拍摄对象的第一景深信息；

步骤120：通过彩色摄像头模组中的至少两个彩色摄像头获取能够根据第一景深信息调整的拍摄对象的彩色图像。

在一些实施例中，3D拍摄方法还可以包括：根据第一景深信息调整彩色图像中的第二景深信息。

在一些实施例中，还可以对调整后的彩色图像进行3D显示。可行的3D显示方式多种多样，在此不再赘述，只要能够对景深调整后的彩色图像顺利实现3D显示即可。

在一些实施例中，根据第一景深信息调整彩色图像中的第二景深信息，可以包括：

以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深，使第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深靠近，以缩小第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值。

相比较而言，上述至少两个彩色摄像头获取的彩色图像的分辨率高、景深准确性低，而景深摄像头获取的第一景深信息(可以以景深图像的形式呈现)的分辨率低、景深准确性高。因此，可以以第一景深信息中包括的像素的景深为基准对第二景深信息中包括的对应像素的景深进行调整，这样就可以使第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深靠近，以缩小第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值，有效提高了第二景深信息中包括的对应像素的景深的准确性。

在一些实施例中，以第一景深信息(景深图像)中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深之前，可以先统一景深图像和彩色图像的大小；之后，基于景深摄像头和彩色摄像头之间的视场角(FOV)对景深图像和彩色图像进行特征值抓取和匹配，以便以像素为单位将景深图像中的像素对应到彩色图像中的对应像素上；这样，就可以将景深图像中的像素的景深与彩色图像中的对应像素的景深进行比较，并根据比较结果进行景深调整。

在一些实施例中，以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深，可以包括：

将第二景深信息中包括的对应像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

将第二景深信息中包括的对应像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，可以基于第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值，将第二景深信息中包括的对应像素的景深按该差值的一定比例向第一景深信息中包括的像素的景深调整。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，可以根据实际情况或预设策略等操作方式将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm的10％、20％、30％、50％、80％等数值，即：调整5mm、1cm、1.5cm、2.5cm、4cm等数值。

在一些实施例中，也可以将第二景深信息中包括的对应像素的景深直接调整为第一景深信息中包括的像素的景深。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，可以根据实际情况或预设策略等操作方式直接将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm。

进行上述的景深调整时，由于景深摄像头获取的第一景深信息的分辨率低，因此景深图像中的全部像素可能只对应到彩色合成图像中的部分像素，导致第二景深信息中包括的对应像素以外的部分或全部像素的景深可能无法得到有效调整。在这种情况下，在一些实施例中，3D拍摄方法还可以包括：以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素以外的像素的景深，以便对第二景深信息中包括的对应像素以外的像素的景深进行有效调整，以有效提高景深准确度。

在一些实施例中，以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素以外的像素的景深，可以包括：

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，预设区域可以根据实际情况或预设策略等操作方式进行设定。可选地，预设区域可以包括第二景深信息中的单个对应像素以及该单个对应像素周围的非对应像素(即：第二景深信息中没有与第一景深信息中的像素对应上的像素)，例如：预设区域可以是以上述的单个对应像素为圆心，以与临近的另一个单个对应像素之间的距离的一半等其它值为半径所形成的圆形区域。可选地，不同的预设区域之间可以没有重叠，以避免可能出现的像素调整冲突。

可选地，预设区域也可以包括第二景深信息中的至少两个对应像素以及这两个对应像素周围的非对应像素，例如：对上述的至少两个对应像素进行的景深调整量相同时，预设区域可以是以上述的两个对应像素的中间点为圆心，以上述的两个对应像素之间的距离的一半等更大值为半径所形成的圆形区域。可选地，不同的预设区域之间可以具有重叠，只要能够避免可能出现的像素调整冲突即可。

可选地，预设区域的大小和形状也可以根据实际情况或预设策略等操作方式而有所不同，例如：预设区域的大小可以按比例扩大或缩小，预设区域的形状可以是椭圆形、多边形等。

在一些实施例中，在预设区域中进行景深调整时，可以基于第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值，将第二景深信息中包括的对应像素的景深按该差值的一定比例向第一景深信息中包括的像素的景深调整。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，可以根据实际情况或预设策略等操作方式将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm的10％、20％、30％、50％、80％等数值，即：调整5mm、1cm、1.5cm、2.5cm、4cm等数值。

在一些实施例中，在预设区域中进行景深调整时，也可以将第二景深信息中包括的对应像素的景深直接调整为第一景深信息中包括的像素的景深。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，可以根据实际情况或预设策略等操作方式直接将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm。

参见图2A，在一些实施例中，协调景深摄像头模组中的至少两个景深摄像头以获取第一景深信息，可以包括：

步骤201：选择景深摄像头模组中的一个景深摄像头获取拍摄对象的景深信息；

步骤202：将获取的拍摄对象的景深信息作为第一景深信息。

参见图2B，在一些实施例中，协调景深摄像头模组中的至少两个景深摄像头以获取第一景深信息，可以包括：

步骤211：选择景深摄像头模组中的至少两个景深摄像头分别获取拍摄对象的景深信息；

步骤212：选择至少两个景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息。

参见图2C，在一些实施例中，协调景深摄像头模组中的至少两个景深摄像头以获取第一景深信息，可以包括：

步骤221：选择景深摄像头模组中的所有景深摄像头分别获取拍摄对象的景深信息；

步骤222：选择所有景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息。

在一些实施例中，选择至少两个景深摄像头中的一个景深摄像头，可以包括：选择至少两个景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择至少两个景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

在一些实施例中，选择所有景深摄像头中的一个景深摄像头，包括：选择所有景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所有景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

在一些实施例中，无论是在两个景深摄像头中选择，还是在三个或更多景深摄像头中选择，均可根据景深摄像头的工作状态、准确度等选择最优的景深摄像头。可选地，景深摄像头的工作状态可以包括景深摄像头的工作温度、工作负载等；景深摄像头的准确度可以包括景深摄像头的出厂设定准确度，或实际准确度与出厂设定准确度之间的差异(差异越小，代表景深摄像头的准确度越高)等。

在一些实施例中，景深摄像头模组中的至少一个景深摄像头可以是结构光摄像头或飞行时间(Time Of Flight，TOF)摄像头，能够获取拍摄对象的包含像素景深在内的第一景深信息。可选地，获取的第一景深信息可以以景深图像的形式呈现。

参见图3，在一些实施例中，通过至少两个彩色摄像头获取拍摄对象的彩色图像，可以包括：

步骤231：通过第一彩色摄像头获取第一彩色图像，还通过第二彩色摄像头获取第二彩色图像；

步骤232：根据第一彩色摄像头与第二彩色摄像头的间距和拍摄角度，将第一彩色图像与第二彩色图像合成为包含第二景深信息的彩色合成图像。

在一些实施例中，第一彩色摄像头和第二彩色摄像头可以是相同的彩色摄像头。可选地，第一彩色摄像头和第二彩色摄像头也可以是不同的彩色摄像头。在这种情况下，为了顺利合成彩色合成图像，可以对第一彩色图像与第二彩色图像进行校准、矫正等处理。

在一些实施例中，还可以用不同于图3所示的其它可行方式通过至少两个彩色摄像头获取拍摄对象的彩色合成图像。可选地，获取彩色合成图像时还可以基于除间距和拍摄角度以外的参数。可选地，获取彩色合成图像时还可以用到多于两个彩色摄像头，例如：三个或更多彩色摄像头，只要能够成功合成彩色合成图像即可。

在一些实施例中，彩色合成图像可以包括左半幅图像、右半幅图像；其中，左半幅图像可以为彩色图像，右半幅图像可以为景深图像。

本公开实施例提供了一种3D拍摄装置300，包括处理器和存储有程序指令的存储器；处理器被配置为在执行程序指令时，执行上述的3D拍摄方法。

在一些实施例中，上述的3D拍摄装置300如图4所示，包括：

处理器(processor)310和存储器(memory)320，还可以包括通信接口(Communication Interface)330和总线340。其中，处理器310、通信接口330、存储器320可以通过总线340完成相互间的通信。通信接口330可以用于信息传输。处理器310可以调用存储器320中的逻辑指令，以执行上述实施例的3D拍摄方法。

此外，上述的存储器320中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。

存储器320作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序，如本公开实施例中的方法对应的程序指令/模块。处理器310通过运行存储在存储器320中的程序指令/模块，从而执行功能应用以及数据处理，即实现上述方法实施例中的3D拍摄方法。

存储器320可包括存储程序区和存储数据区，其中，存储程序区可存储操作***、至少一个功能所需的应用程序；存储数据区可存储根据终端设备的使用所创建的数据等。此外，存储器320可以包括高速随机存取存储器，还可以包括非易失性存储器。

参见图5，本公开实施例提供了一种3D拍摄装置300，包括：

景深摄像头模组410，包括至少两个景深摄像头，被配置为通过协调至少两个景深摄像头获取拍摄对象的第一景深信息；

彩色摄像头模组420，包括至少两个彩色摄像头，被配置为获取能够根据第一景深信息调整的拍摄对象的彩色图像；

其中，上述的至少两个彩色摄像头可以采用性能指标相同的光学镜头和传感器芯片。

在一些实施例中，景深摄像头模组410可以与彩色摄像头模组420通信，以收发拍摄或处理的图像等内容。

参见图6，在一些实施例中，3D拍摄装置300还可以包括图像处理器430，被配置为根据第一景深信息调整彩色图像中的第二景深信息。

在一些实施例中，图像处理器430，还可以被配置为：对调整后的彩色图像进行3D显示。可行的3D显示方式多种多样，在此不再赘述，只要图像处理器430能够对景深调整后的彩色图像顺利实现3D显示即可。

在一些实施例中，图像处理器430，可以被配置为：

以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深，使第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深靠近，以缩小第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值。

相比较而言，上述至少两个彩色摄像头获取的彩色图像的分辨率高、景深准确性低，而景深摄像头获取的第一景深信息(可以以景深图像的形式呈现)的分辨率低、景深准确性高。因此，图像处理器430可以以第一景深信息中包括的像素的景深为基准对第二景深信息中包括的对应像素的景深进行调整，这样就可以使第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深靠近，以缩小第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值，有效提高了第二景深信息中包括的对应像素的景深的准确性。

在一些实施例中，图像处理器430以第一景深信息(景深图像)中包括的像素的景深为基准，调整第二景深信息中包括的对应像素的景深之前，可以先统一景深图像和彩色图像的大小；之后，基于景深摄像头和彩色摄像头之间的FOV对景深图像和彩色图像进行特征值抓取和匹配，以便以像素为单位将景深图像中的像素对应到彩色图像中的对应像素上；这样，就可以将景深图像中的像素的景深与彩色图像中的对应像素的景深进行比较，并根据比较结果进行景深调整。

在一些实施例中，图像处理器430，可以被配置为：

将第二景深信息中包括的对应像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

将第二景深信息中包括的对应像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，图像处理器430可以基于第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值，将第二景深信息中包括的对应像素的景深按该差值的一定比例向第一景深信息中包括的像素的景深调整。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，图像处理器430可以根据实际情况或预设策略等操作方式将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm的10％、20％、30％、50％、80％等数值，即：调整5mm、1cm、1.5cm、2.5cm、4cm等数值。

在一些实施例中，图像处理器430也可以将第二景深信息中包括的对应像素的景深直接调整为第一景深信息中包括的像素的景深。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，图像处理器430可以根据实际情况或预设策略等操作方式直接将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm。

进行上述的景深调整时，由于景深摄像头获取的第一景深信息的分辨率低，因此景深图像中的全部像素可能只对应到彩色图像中的部分像素，导致第二景深信息中包括的对应像素以外的部分或全部像素的景深可能无法得到有效调整。在这种情况下，在一些实施例中，图像处理器430，还可以被配置为：以第一景深信息中包括的像素的景深为基准，调整第二景深信息中包括的对应像素以外的像素的景深，以便对第二景深信息中包括的对应像素以外的像素的景深进行有效调整，以有效提高景深准确度。

在一些实施例中，图像处理器430，可以被配置为：

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深按比例向第一景深信息中包括的像素的景深调整；或，

在预设区域中，将第二景深信息中包括的对应像素以外的像素的景深，调整为第一景深信息中包括的像素的景深。

在一些实施例中，预设区域可以根据实际情况或预设策略等操作方式进行设定。可选地，预设区域可以包括第二景深信息中的单个对应像素以及该单个对应像素周围的非对应像素(即：第二景深信息中没有与第一景深信息中的像素对应上的像素)，例如：预设区域可以是以上述的单个对应像素为圆心，以与临近的另一个单个对应像素之间的距离的一半等其它值为半径所形成的圆形区域。可选地，不同的预设区域之间可以没有重叠，以避免可能出现的像素调整冲突。

可选地，预设区域也可以包括第二景深信息中的至少两个对应像素以及这两个对应像素周围的非对应像素，例如：对上述的至少两个对应像素进行的景深调整量相同时，预设区域可以是以上述的两个对应像素的中间点为圆心，以上述的两个对应像素之间的距离的一半等更大值为半径所形成的圆形区域。可选地，不同的预设区域之间可以具有重叠，只要能够避免可能出现的像素调整冲突即可。

可选地，预设区域的大小和形状也可以根据实际情况或预设策略等操作方式而有所不同，例如：预设区域的大小可以按比例扩大或缩小，预设区域的形状可以是椭圆形、多边形等。

在一些实施例中，在预设区域中进行景深调整时，图像处理器430可以基于第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值，将第二景深信息中包括的对应像素的景深按该差值的一定比例向第一景深信息中包括的像素的景深调整。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，图像处理器430可以根据实际情况或预设策略等操作方式将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm的10％、20％、30％、50％、80％等数值，即：调整5mm、1cm、1.5cm、2.5cm、4cm等数值。

在一些实施例中，在预设区域中进行景深调整时，图像处理器430也可以将第二景深信息中包括的对应像素的景深直接调整为第一景深信息中包括的像素的景深。例如：第二景深信息中包括的对应像素的景深与第一景深信息中包括的像素的景深之间的差值为5cm，图像处理器430可以根据实际情况或预设策略等操作方式直接将第二景深信息中包括的对应像素的景深向第一景深信息中包括的像素的景深调整5cm。

在一些实施例中，景深摄像头模组410，可以被配置为：

选择景深摄像头模组410中的一个景深摄像头获取拍摄对象的景深信息，将获取的拍摄对象的景深信息作为第一景深信息；或

选择景深摄像头模组410中的至少两个景深摄像头分别获取拍摄对象的景深信息，选择至少两个景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息；或

选择景深摄像头模组410中的所有景深摄像头分别获取拍摄对象的景深信息，选择所有景深摄像头中的一个景深摄像头所获取的拍摄对象的景深信息作为第一景深信息。

在一些实施例中，景深摄像头模组410，可以被配置为：

在选择至少两个景深摄像头中的一个景深摄像头的情况下，选择至少两个景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择至少两个景深摄像头中获取景深信息的准确度最高的一个景深摄像头；

或，

在选择所有景深摄像头中的一个景深摄像头的情况下，选择所有景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所有景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

参见图7，在一些实施例中，景深摄像头模组410，可以包括：

第一景深摄像头411，被配置为获取拍摄对象的景深信息；

第二景深摄像头412，被配置为获取拍摄对象的景深信息。

在一些实施例中，第一景深摄像头411和第二景深摄像头412可以是相同的景深摄像头。可选地，第一景深摄像头411和第二景深摄像头412也可以是不同的景深摄像头。

在一些实施例中，景深摄像头模组410还可以包括多于两个的景深摄像头。

在一些实施例中，除了景深摄像头以外，景深摄像头模组410还可以包括能够控制景深摄像头的控制器，以有效控制景深摄像头的运转。

在一些实施例中，无论是在两个景深摄像头中选择，还是在三个或更多景深摄像头中选择，均可根据景深摄像头的工作状态、准确度等选择最优的景深摄像头。可选地，景深摄像头的工作状态可以包括景深摄像头的工作温度、工作负载等；景深摄像头的准确度可以包括景深摄像头的出厂设定准确度，或实际准确度与出厂设定准确度之间的差异(差异越小，代表景深摄像头的准确度越高)等。

在一些实施例中，景深摄像头模组410中的至少一个景深摄像头可以为结构光摄像头或TOF摄像头，能够获取拍摄对象的包含像素景深在内的第一景深信息。可选地，获取的第一景深信息可以以景深图像的形式呈现。

在一些实施例中，景深摄像头模组410中的至少一个景深摄像头可以为TOF摄像头，TOF摄像头可以位于彩色摄像头模组420中的两个彩色摄像头之间，或彩色摄像头周边等其他位置。可选地，景深摄像头模组410中的景深摄像头也可以和彩色摄像头模组420中的相同数量的彩色摄像头对位设置；例如：景深摄像头模组410中的两个景深摄像头可以和彩色摄像头模组420中的两个彩色摄像头对位设置。

参见图8，在一些实施例中，彩色摄像头模组420，可以包括：

第一彩色摄像头421，被配置为获取第一彩色图像；

第二彩色摄像头422，被配置为获取第二彩色图像；

可选地，图像处理器430，可以被配置为：

根据第一彩色摄像头421与第二彩色摄像头422的间距和拍摄角度，将第一彩色图像与第二彩色图像合成为包含第二景深信息的彩色合成图像。

在一些实施例中，第一彩色摄像头421和第二彩色摄像头422可以是相同的彩色摄像头。可选地，第一彩色摄像头421和第二彩色摄像头422也可以是不同的彩色摄像头。在这种情况下，为了顺利合成彩色合成图像，可以对第一彩色图像与第二彩色图像进行校准、矫正等处理。

在一些实施例中，彩色摄像头模组420还可以用不同于图6所示的其它可行方式通过至少两个彩色摄像头获取拍摄对象的彩色合成图像。可选地，彩色摄像头模组420获取彩色合成图像时还可以基于除间距和拍摄角度以外的参数。可选地，彩色摄像头模组420获取彩色合成图像时还可以用到多于两个彩色摄像头，例如：三个或更多彩色摄像头，只要能够成功合成彩色合成图像即可。

在一些实施例中，除了彩色摄像头以外，彩色摄像头模组420还可以包括能够控制彩色摄像头的控制器，以有效控制彩色摄像头的运转，以及顺利实现彩色合成图像的合成。

在一些实施例中，图像处理器430可以是基于CPU、现场可编程门阵列(FPGA)或专用集成电路(ASIC)等高速运算芯片的3D图像处理器。可选地，该3D图像处理器可以以芯片、单片机等形式呈现。

参见图9，本公开实施例提供了一种3D显示终端500，包括上述的由景深摄像头模组410、彩色摄像头模组420构成的3D拍摄装置300。可选地，3D显示终端500还可以包括图像处理器430。

在一些实施例中，3D显示终端500还可以包括用于支持3D显示终端500正常运转的构件，例如：导光板、偏光片、玻璃基板、液晶层、滤光片等构件中的至少之一。

在一些实施例中，3D显示终端500可以设置于3D显示器中。可选地，3D显示器还可以包括用于支持3D显示器正常运转的构件，例如：背光模组、主板、背板等构件中的至少之一。

上述的本公开实施例提供的3D拍摄方法、装置及3D显示终端，能够协调景深摄像头模组中的至少两个景深摄像头以对彩色摄像头模组所获取的彩色图像进行景深调整，能够有效提高彩色图像的景深准确度。

本公开实施例还提供了一种计算机可读存储介质，存储有计算机可执行指令，该计算机可执行指令设置为执行上述的3D拍摄方法。

本公开实施例还提供了一种计算机程序产品，包括存储在计算机可读存储介质上的计算机程序，该计算机程序包括程序指令，当该程序指令被计算机执行时，使上述计算机执行上述的3D拍摄方法。

上述的计算机可读存储介质可以是暂态计算机可读存储介质，也可以是非暂态计算机可读存储介质。

本公开实施例提供的计算机可读存储介质、计算机程序产品，能够协调景深摄像头模组中的至少两个景深摄像头以对彩色摄像头模组所获取的彩色图像进行景深调整，能够有效提高彩色图像的景深准确度。

在一些实施例中，上述的3D技术可以包括裸眼3D技术，即：上述的3D拍摄装置、3D显示终端可以实现与裸眼3D相关的功能，例如：裸眼3D图像的拍摄、显示等。

本公开实施例的技术方案可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括一个或多个指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开实施例的方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质，包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等多种可以存储程序代码的介质，也可以是暂态存储介质。

以上描述和附图充分地示出了本公开的实施例，以使本领域技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求，否则单独的部件和功能是可选的，并且操作的顺序可以变化。一些实施例的部分和特征可以被包括在或替换其他实施例的部分和特征。本公开实施例的范围包括权利要求书的整个范围，以及权利要求书的所有可获得的等同物。当用于本申请中时，虽然术语“第一”、“第二”等可能会在本申请中使用以描述各元件，但这些元件不应受到这些术语的限制。这些术语仅用于将一个元件与另一个元件区别开。比如，在不改变描述的含义的情况下，第一元件可以叫做第二元件，并且同样第，第二元件可以叫做第一元件，只要所有出现的“第一元件”一致重命名并且所有出现的“第二元件”一致重命名即可。第一元件和第二元件都是元件，但可以不是相同的元件。而且，本申请中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的，除非上下文清楚地表明，否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。类似地，如在本申请中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外，当用于本申请中时，术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的特征、整体、步骤、操作、元素，和/或组件的存在，但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下，由语句“包括一个...”限定的要素，并不排除在包括该要素的过程、方法或者设备中还存在另外的相同要素。本文中，每个实施例重点说明的可以是与其他实施例的不同之处，各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言，如果其与实施例公开的方法部分相对应，那么相关之处可以参见方法部分的描述。

本领域技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，可以取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法以实现所描述的功能，但是这种实现不应认为超出本公开实施例的范围。本领域技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本文所披露的实施例中，所揭露的方法、产品(包括但不限于装置、设备等)，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，可以仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外，在本公开实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

附图中的流程图和框图显示了根据本公开实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，上述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。在附图中的流程图和框图所对应的描述中，不同的方框所对应的操作或步骤也可以以不同于描述中所披露的顺序发生，有时不同的操作或步骤之间不存在特定的顺序。例如，两个连续的操作或步骤实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的***来实现，或者可以用专用硬件与计算机指令的组合来实现。

Claims (26)

1.一种3D拍摄方法，适用于包括至少两个景深摄像头的景深摄像头模组，以及包括至少两个彩色摄像头的彩色摄像头模组，其特征在于，所述方法包括：

协调所述景深摄像头模组中的至少两个景深摄像头以获取拍摄对象的第一景深信息，通过所述彩色摄像头模组中的至少两个彩色摄像头获取能够根据所述第一景深信息调整的所述拍摄对象的彩色图像。

2.根据权利要求1所述的方法，其特征在于，还包括：根据所述第一景深信息调整所述彩色图像中的第二景深信息。

3.根据权利要求2所述的方法，其特征在于，还包括：对调整后的所述彩色图像进行3D显示。

4.根据权利要求2所述的方法，其特征在于，根据所述第一景深信息调整所述彩色图像中的第二景深信息，包括：

以所述第一景深信息中包括的像素的景深为基准，调整所述第二景深信息中包括的对应像素的景深，使所述第二景深信息中包括的对应像素的景深向所述第一景深信息中包括的像素的景深靠近。

5.根据权利要求4所述的方法，其特征在于，以所述第一景深信息中包括的像素的景深为基准，调整所述第二景深信息中包括的对应像素的景深，包括：

将所述第二景深信息中包括的对应像素的景深按比例向所述第一景深信息中包括的像素的景深调整；或，

将所述第二景深信息中包括的对应像素的景深，调整为所述第一景深信息中包括的像素的景深。

6.根据权利要求4或5所述的方法，其特征在于，还包括：以所述第一景深信息中包括的像素的景深为基准，调整所述第二景深信息中包括的对应像素以外的像素的景深。

7.根据权利要求6所述的方法，其特征在于，以所述第一景深信息中包括的像素的景深为基准，调整所述第二景深信息中包括的对应像素以外的像素的景深，包括：

在预设区域中，将所述第二景深信息中包括的对应像素以外的像素的景深按比例向所述第一景深信息中包括的像素的景深调整；或，

在预设区域中，将所述第二景深信息中包括的对应像素以外的像素的景深，调整为所述第一景深信息中包括的像素的景深。

8.根据权利要求1至7任一项所述的方法，其特征在于，协调所述景深摄像头模组中的至少两个景深摄像头以获取所述第一景深信息，包括：

选择所述景深摄像头模组中的一个景深摄像头获取所述拍摄对象的景深信息，将获取的所述拍摄对象的景深信息作为所述第一景深信息；或

选择所述景深摄像头模组中的至少两个景深摄像头分别获取所述拍摄对象的景深信息，选择所述至少两个景深摄像头中的一个景深摄像头所获取的所述拍摄对象的景深信息作为所述第一景深信息；或

选择所述景深摄像头模组中的所有景深摄像头分别获取所述拍摄对象的景深信息，选择所述所有景深摄像头中的一个景深摄像头所获取的所述拍摄对象的景深信息作为所述第一景深信息。

9.根据权利要求8所述的方法，其特征在于，

选择所述至少两个景深摄像头中的一个景深摄像头，包括：选择所述至少两个景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所述至少两个景深摄像头中获取景深信息的准确度最高的一个景深摄像头；

或，

选择所述所有景深摄像头中的一个景深摄像头，包括：选择所述所有景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所述所有景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

10.根据权利要求1至9任一项所述的方法，其特征在于，所述通过至少两个彩色摄像头获取所述拍摄对象的彩色图像，包括：

通过第一彩色摄像头获取第一彩色图像，还通过第二彩色摄像头获取第二彩色图像；

根据所述第一彩色摄像头与所述第二彩色摄像头的间距和拍摄角度，将所述第一彩色图像与所述第二彩色图像合成为包含所述第二景深信息的彩色合成图像。

11.根据权利要求10所述的方法，其特征在于，所述彩色合成图像包括左半幅图像、右半幅图像；

其中，所述左半幅图像为彩色图像，所述右半幅图像为景深图像。

12.一种3D拍摄装置，包括处理器和存储有程序指令的存储器，其特征在于，所述处理器被配置为在执行所述程序指令时，执行如权利要求1至11任一项所述的方法。

13.一种3D拍摄装置，包括：

景深摄像头模组，包括至少两个景深摄像头，被配置为通过协调所述至少两个景深摄像头获取拍摄对象的第一景深信息；

彩色摄像头模组，包括至少两个彩色摄像头，被配置为获取能够根据所述第一景深信息调整的所述拍摄对象的彩色图像。

14.根据权利要求13所述的装置，其特征在于，还包括：图像处理器，被配置为根据所述第一景深信息调整所述彩色图像中的第二景深信息。

15.根据权利要求14所述的装置，其特征在于，所述图像处理器，还被配置为：对调整后的所述彩色图像进行3D显示。

16.根据权利要求14所述的装置，其特征在于，所述图像处理器，被配置为：

以所述第一景深信息中包括的像素的景深为基准，调整所述第二景深信息中包括的对应像素的景深，使所述第二景深信息中包括的对应像素的景深向所述第一景深信息中包括的像素的景深靠近。

17.根据权利要求16所述的装置，其特征在于，所述图像处理器，被配置为：

将所述第二景深信息中包括的对应像素的景深按比例向所述第一景深信息中包括的像素的景深调整；或，

将所述第二景深信息中包括的对应像素的景深，调整为所述第一景深信息中包括的像素的景深。

18.根据权利要求16或17所述的装置，其特征在于，所述图像处理器，还被配置为：以所述第一景深信息中包括的像素的景深为基准，调整所述第二景深信息中包括的对应像素以外的像素的景深。

19.根据权利要求18所述的装置，其特征在于，所述图像处理器，被配置为：

在预设区域中，将所述第二景深信息中包括的对应像素以外的像素的景深按比例向所述第一景深信息中包括的像素的景深调整；或，

在预设区域中，将所述第二景深信息中包括的对应像素以外的像素的景深，调整为所述第一景深信息中包括的像素的景深。

20.根据权利要求13至19任一项所述的装置，其特征在于，所述景深摄像头模组，被配置为：

选择所述景深摄像头模组中的一个景深摄像头获取所述拍摄对象的景深信息，将获取的所述拍摄对象的景深信息作为所述第一景深信息；或

选择所述景深摄像头模组中的至少两个景深摄像头分别获取所述拍摄对象的景深信息，选择所述至少两个景深摄像头中的一个景深摄像头所获取的所述拍摄对象的景深信息作为所述第一景深信息；或

选择所述景深摄像头模组中的所有景深摄像头分别获取所述拍摄对象的景深信息，选择所述所有景深摄像头中的一个景深摄像头所获取的所述拍摄对象的景深信息作为所述第一景深信息。

21.根据权利要求20所述的装置，其特征在于，所述景深摄像头模组，被配置为：

在选择所述至少两个景深摄像头中的一个景深摄像头的情况下，选择所述至少两个景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所述至少两个景深摄像头中获取景深信息的准确度最高的一个景深摄像头；

或，

在选择所述所有景深摄像头中的一个景深摄像头的情况下，选择所述所有景深摄像头中处于最佳工作状态的一个景深摄像头；或，选择所述所有景深摄像头中获取景深信息的准确度最高的一个景深摄像头。

22.根据权利要求20所述的装置，其特征在于，所述景深摄像头模组中的至少一个景深摄像头为结构光摄像头或飞行时间TOF摄像头。

23.根据权利要求22所述的装置，其特征在于，所述景深摄像头模组中的至少一个景深摄像头为TOF摄像头，所述TOF摄像头位于所述彩色摄像头模组中的两个彩色摄像头之间。

24.根据权利要求13至23任一项所述的装置，其特征在于，

所述彩色摄像头模组，包括：

第一彩色摄像头，被配置为获取第一彩色图像；

第二彩色摄像头，被配置为获取第二彩色图像；

所述图像处理器，被配置为：

根据所述第一彩色摄像头与所述第二彩色摄像头的间距和拍摄角度，将所述第一彩色图像与所述第二彩色图像合成为包含所述第二景深信息的彩色合成图像。

25.根据权利要求13所述的装置，其特征在于，所述彩色摄像头模组中的至少两个彩色摄像头采用性能指标相同的光学镜头和传感器芯片。

26.一种3D显示终端，其特征在于，包括如权利要求12或13至25任一项所述的装置。

Images