CN116996658A - 图像显示方法、***、设备及存储介质 - Google Patents

Abstract

本公开提供了一种图像显示方法、***、设备及存储介质。通过头戴式显示设备在获取到当前帧显示画面对应的左眼图像和右眼图像，并基于左眼图像和右眼图像进行3D显示的同时，将左眼图像和右眼图像传输给3D显示设备，以使得3D显示设备同步显示头戴式显示设备中的3D画面。

Description

图像显示方法、***、设备及存储介质

技术领域

本公开涉及显示技术领域，尤其涉及一种图像显示方法、***、设备及存储介质。

背景技术

目前，在一些具有3D显示功能的头戴式显示设备如VR(Virtual Reality，虚拟现实)产品的展示场所，一般会将显示内容同步投射到外部2D显示器上。用户戴着头戴式显示设备可以很好地体验3D效果，但是其他的观众只能观看2D显示器，无法体验到较好的3D效果。

发明内容

鉴于上述问题，提出了本公开以便提供一种有利于改善上述问题或者至少部分地改善上述问题的图像显示方法、***、设备及存储介质。

第一方面，本公开实施例提供了一种图像显示方法，应用于头戴式显示设备，所述方法包括：

获取当前帧显示画面对应的左眼图像和右眼图像；

基于所述左眼图像和所述右眼图像进行3D显示；

将所述左眼图像和所述右眼图像传输给3D显示设备，以使得所述3D显示设备基于接收到的左眼图像和右眼图像进行3D显示。

进一步地，将所述左眼图像和所述右眼图像传输给3D显示设备，包括：

分别在所述左眼图像和所述右眼图像的预设位置添加标记信息头，得到所述左眼图像对应的第一图像帧以及所述右眼图像对应的第二图像帧，其中，所述标记信息头包括图像帧校验信息，所述图像帧校验信息用于标记图像帧的传输顺序；

按照预设顺序将所述第一图像帧和所述第二图像帧依次传输给所述3D显示设备。

进一步地，所述左眼图像和右眼图像包括注视区域和非注视区域，所述注视区域的分辨率大于所述非注视区域的分辨率，分别在所述左眼图像和所述右眼图像的预设位置添加标记信息头，包括：

分别对所述左眼图像和所述右眼图像中的所述非注视区域进行压缩处理；

对所述注视区域和压缩后的非注视区域进行拼接，得到压缩后的左眼图像和压缩后的右眼图像；

分别在压缩后的左眼图像和压缩后的右眼图像的预设位置添加所述标记信息头，所述标记信息头还包括：所述注视区域和所述非注视区域对应的分区参数以及所述非注视区域的压缩比例。

第二方面，本公开实施例提供了一种图像显示方法，应用于3D显示设备，所述方法包括：

接收目标头戴式显示设备传输的左眼图像和右眼图像，所述左眼图像和右眼图像对应于所述目标头戴式显示设备显示的3D画面；

基于接收到的左眼图像和右眼图像显示3D画面。

进一步地，在接收目标头戴式显示设备传输的左眼图像和右眼图像之前，还包括：

展示可用设备列表，所述可用设备列表包括至少一个头戴式显示设备；

从所述可用设备列表中确定目标头戴式显示设备，与所确定的目标头戴式显示设备进行配对连接。

进一步地，从所述可用设备列表中确定目标头戴式显示设备，包括：

将所述可用设备列表中最近一次与所述3D显示设备配对连接的头戴式显示设备作为所述目标头戴式显示设备；或者，

响应于用户操作，从所述可用设备列表中选择目标头戴式显示设备。

进一步地，接收目标头戴式显示设备传输的左眼图像和右眼图像，包括：

接收目标头戴式显示设备传输的当前图像帧，所述当前图像帧携带有标记信息头，所述标记信息头包括图像帧校验信息；

基于所述图像帧校验信息识别所述当前图像帧对应的视图类型，若所述视图类型为左眼视图，则对所述当前图像帧进行解析，得到左眼图像，若所述视图类型为右眼视图，则对所述当前图像帧进行解析，得到右眼图像。

进一步地，所述图像帧校验信息包括奇偶校验位，基于所述图像帧校验信息识别所述当前图像帧对应的视图类型，包括：

若所述奇偶校验位表征奇数帧，则判定所述当前图像帧对应的视图类型为左眼视图，若所述奇偶校验位表征偶数帧，则判定所述当前图像帧对应的视图类型为右眼视图。

进一步地，所述接收目标头戴式显示设备传输的左眼图像和右眼图像，还包括：

基于所述图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像。

进一步地，所述图像帧校验信息包括：帧标记位，基于所述图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像，包括：

若所述当前图像帧对应的视图类型为左眼视图，则等待下一图像帧；

若所述当前图像帧对应的视图类型为右眼视图，且上一图像帧对应的视图类型为左眼视图，则基于所述帧标记位判断所述当前图像帧与所述上一图像帧是否属于同一帧显示画面，若否，则判定当前帧显示画面的右眼图像以及下一帧显示画面的左眼图像丢失，复用上一帧显示画面的右眼图像作为所述当前帧显示画面的右眼图像，复用所述当前帧显示画面的左眼图像作为下一帧显示画面的左眼图像。

进一步地，所述当前图像帧包括注视区域和压缩后的非注视区域，所述注视区域的分辨率大于所述非注视区域的分辨率，所述标记信息头还包括：所述注视区域和所述非注视区域对应的分区参数以及所述非注视区域的压缩比例，对所述当前图像帧进行解析，包括：

基于所述分区参数和所述压缩比例，对所述当前图像帧中被压缩的非注视区域进行像素扩展，并去除所述当前图像帧中的标记信息头。

进一步地，所述3D显示设备的显示屏为3D柱透镜显示屏，所述基于接收到的左眼图像和右眼图像显示3D画面，包括：

多次复用接收到的左眼图像和右眼图像，生成多视点拼接图；

基于所述多视点拼接图显示3D画面。

第三方面，本公开实施例提供了一种图像显示***，包括：头戴式显示设备以及3D显示设备，其中：

所述头戴式显示设备用于获取当前帧显示画面对应的左眼图像和右眼图像，基于所述左眼图像和所述右眼图像进行3D显示，以及将所述左眼图像和所述右眼图像传输给所述3D显示设备；

所述3D显示设备用于基于接收到的左眼图像和右眼图像进行3D显示。

第四方面，本公开实施例提供了一种头戴式显示设备，包括：处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述第一方面所述的图像显示方法的步骤。

第五方面，本公开实施例提供了一种3D显示设备，包括：3D显示屏、处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述第二方面所述的图像显示方法的步骤。

第六方面，本公开实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行上述第一方面或第二方面所述的图像显示方法的步骤。

本公开实施例中提供的技术方案，至少具有如下技术效果或优点：

本公开实施例提供的图像显示方法、***、设备及存储介质，头戴式显示设备在对获取到的左、右眼图像进行3D显示的同时，将该左、右眼图像传输给3D显示设备，使得3D显示设备同步显示头戴式显示设备中显示的3D画面。这样能够在用户体验头戴式显示设备时，其他观众也能在3D显示设备上看到该用户所看到的3D效果，得到较好的3D体验。

上述说明仅是本公开实施例提供的技术方案的概述，为了能够更清楚了解本公开实施例的技术手段，而可依照说明书的内容予以实施，并且为了让本本公开实施例的上述和其它目的、特征和优点能够更明显易懂，以下特举本公开实施例的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1为本公开实施例中第一方面提供的图像显示***的结构示意图；

图2为本公开实施例中一种示例性编码压缩过程示意图；

图3为本公开实施例中一个示例性解码过程示意图；

图4为本公开实施例中第二方面提供的图像显示方法的流程图；

图5为本公开实施例中第三方面提供的图像显示方法的流程图；

图6为本公开实施例中第五方面提供的3D显示设备的结构示意图。

具体实施方式

下面将参照附图更详细地描述本说明书的示例性实施例。虽然附图中显示了本说明书的示例性实施例，然而应当理解，可以以各种形式实现本说明书而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本说明书，并且能够将本说明书的范围完整的传达给本领域的技术人员。

需要说明的是，本文中出现的用语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。用语“多个”包括两个或大于两个的情况。

第一方面，本公开实施例提供了一种图像显示***。如图1所示，该图像显示***10包括：3D显示设备102以及能够与该3D显示设备102进行数据交互的头戴式显示设备101。需要说明的是，图像显示***10可以包括一个或多个头戴式显示设备101以及一个或多个外置的3D显示设备102，图1中示出的头戴式显示设备101和3D显示设备102的数量仅为示意，不作为限制，具体数量根据实际应用场景确定。

例如，头戴式显示设备101可以是VR眼镜、VR头盔等VR设备，或者，也可以是其他具有3D显示功能的头戴式设备，本实施例对此不做限制。3D显示设备102为具有3D显示功能的智能显示器，例如，该智能显示器可以采用光栅显示屏，也可以采用3D柱透镜显示屏，本实施例对此不做限制。

在一些示例中，3D显示设备102与头戴式显示设备101之间可以通过WIFI或蓝牙等无线传输方式通信连接，以实现无线投屏。可以理解的是，无线投屏又可以称为无线同屏、飞屏或屏幕共享。具体来说，就是通过无线传输方式将移动设备(如头戴式显示设备、手机、平板、笔记本、电脑)的画面“实时地”显示到另一个设备屏幕上，输出的内容包括各类媒体信息和实时操作画面。当然，在其他示例中，3D显示设备102与头戴式显示设备101也可以通过数据线进行连接，本实施例对此不做限制。

例如，可以将3D显示设备102和头戴式显示设备101布设在同一个局域网中，3D显示设备102和头戴式显示设备101通过有线或无线的网络连接方式接入该局域网。在局域网中，3D显示设备102以及各头戴式显示设备101可以通过路由器等实现网络连接，路由器会给局域网中的每个接入设备分配一个IP地址，从而根据IP地址实现头戴式显示设备101与3D显示设备102之间的相互通信。

例如，当图像显示***10应用于VR产品展厅时，头戴式显示设备101为展厅中需要展示VR产品如VR头盔等。3D显示设备102为展厅中设置的可以供头戴式显示设备101玩家之外的其他观众观看的3D智能显示器。

使用时，头戴式显示设备101用于获取当前帧显示画面对应的左眼图像和右眼图像，基于左眼图像和右眼图像进行3D显示，以及将左眼图像和右眼图像传输给3D显示设备102。3D显示设备102用于基于接收到的左眼图像和右眼图像进行3D显示。这样就可以在玩家自己观看头戴式显示设备101时，同步将其通过头戴式显示设备101看到的3D画面共享到3D显示设备102中进行显示，使得附近的其他观众也可以看到该3D画面，体验到3D效果，进一步丰富了VR展厅的功能。

在一些示例中，***中包括多个头戴式显示设备101，3D显示设备102启动后，需要先确定配对的头戴式显示设备101，也就是选择需要在3D显示设备102中同步展示3D画面的头戴式显示设备101，完成配对连接后，然后才能接收该头戴式显示设备101传输的显示数据。为了区分，本文中将需要在3D显示设备102中同步展示3D画面的头戴式显示设备101称为该3D显示设备102对应的目标头戴式显示设备。

以WIFI通信为例，3D显示设备102开机后，首先开启WIFI模块，对所在局域网内的头戴式显示设备101进行遍历，获取当前可用的头戴式显示设备101信息，展示可用设备列表，可用设备列表包括至少一个头戴式显示设备101。进而，从该可用设备列表中确定目标头戴式显示设备，与所确定的目标头戴式显示设备进行配对连接。

使用时，可以采用以下两种方式中的任意一种从可用设备列表中确定目标头戴式显示设备：

第一种：将可用设备列表中最近一次与3D显示设备102配对连接的头戴式显示设备101作为目标头戴式显示设备，以快速实现配对，提高图像显示效率。在一些使用场景中，可用设备列表存在配对过的头戴式显示设备101，3D显示设备102可以自动与可用设备列表中配对过的头戴式显示设备101进行连接。如果可用设备列表中有多个配对过的头戴式显示设备101，则自动选择最近一次连接的头戴式显示设备101进行配对。

第二种：响应于用户操作，从可用设备列表中选择目标头戴式显示设备。这样可以方便用户灵活选择需要展示的头戴式显示设备101。

用户操作3D显示设备102的方式可以有多种，例如，3D显示设备102配置有功能按键，可以包括屏幕上显示的触控按键，和/或，物理按键，用户通过这些功能按键执行相应的操作。又例如，3D显示设备102具有遥控功能，用户可以通过遥控器或者应用程序中的功能按键执行相应的操作。

例如，在3D显示设备102处于未配对状态时，用户可以在屏幕上显示的可用设备列表中选择需要展示的头戴式显示设备101名称，然后点击配对按钮，使得3D显示设备102与选定的目标头戴式显示设备握手进行连接，以实现数据传输。在3D显示设备102处于已配对状态时，如果用户想要切换目标头戴式显示设备，可以在屏幕上显示的可用设备列表里重新选择对应的头戴式显示设备101名称，然后点击切换按钮，即可实现目标头戴式显示设备的切换和重新配对。

当然，除了选择和切换操作以外，用户还可以进行其他操作。例如，如果可用设备列表中包含有不需要展示的头戴式显示设备101，用户可以在屏幕上显示的可用设备列表中选择需要隐藏的头戴式显示设备101名称，然后点击隐藏按钮，实现对相应头戴式显示设备101的隐藏。又例如，在3D显示设备102处于已配对状态时，用户还可以点击断开按钮，断开3D显示设备102与目标头戴式显示设备之间的连接，断开连接后，3D显示设备102不再同步展示该目标头戴式显示设备显示的3D画面。

下面先对3D显示设备102与目标头戴式显示设备配对成功后，目标头戴式显示设备端执行的图像显示过程进行说明。

目标头戴式显示设备可以根据场景进行数据处理，得到当前帧显示画面对应的左眼图像和右眼图像。在一些示例中，可以对通过眼球追踪确定用户左、右眼的注视区域，然后分别针对左、右眼视图，对注视区域和除注视区域以外的非注视区域按照不同的分辨率进行分区渲染，接着再对渲染得到的注视区域图像和非注视区域图像进行拼接，得到当前帧显示画面对应的左眼图像和右眼图像。

此时，左眼图像和右眼图像中注视区域的分辨率大于非注视区域的分辨率。例如，可以将注视区域理解为以人眼注视点为中心的高清区域，将非注视区域理解为注视区域周边的区域，这些区域的分辨率可以相对较低。这样可以保证视觉注视区域的高画质的同时，降低待显示图像的整体数据量和处理器的运算负担。

例如，原始左、右眼图像具有4K分辨率，可以对其中的非注视区域进行4倍压缩，使得非注视区域的分辨率为原有分辨率的四分之一，而对于注视区域的图像，则保留原有的4K分辨率，实现高低清分区渲染。

进一步地，目标头戴式显示设备将处理得到的左、右眼图像分为两路，其中一路渲染到该目标头戴式显示设备的屏幕上进行3D显示，另一路传输给3D显示设备102。

在一些示例中，可以分两帧对左、右眼图像进行传输。此时，将左眼图像和右眼图像传输给3D显示设备102的过程可以包括：分别在左眼图像和右眼图像的预设位置添加标记信息头，得到左眼图像对应的第一图像帧以及右眼图像对应的第二图像帧；按照预设顺序将第一图像帧和第二图像帧依次传输给所述3D显示设备102。

例如，可以按照先左眼图像再右眼图像的顺序依次传输，第一图像帧为奇数帧，第二图像帧为偶数帧，通过奇偶帧分开传输左右眼数据的方式，降低对无线传输的带宽要求。

标记信息头包括图像帧校验信息，图像帧校验信息用于标记图像帧的传输顺序，以便3D显示设备102可以通过图像帧校验信息识别接收到的图像帧的顺序，以保证显示画面的准确性。

例如，图像帧校验信息可以包括奇偶校验位，以便3D显示设备102可以通过奇偶校验位识别接收到的图像帧的视图类型，即是左眼视图，还是右眼视图。进一步地，考虑到虽然第一图像帧和第二图像帧交替传输并解析，但实际是同一帧显示画面的数据，为了避免相邻帧显示画面的图像出现错位解析，图像帧校验信息还可以包括：帧标记位，以便3D显示设备102可以通过帧标记位识别前后接收到的第一图像帧和第二图像帧是否属于同一帧显示画面，从而确定传输过程中是否发生帧丢失。

在一些示例中，为了降低每帧图像的数据量，从而进一步降低3D无线传输过程中的带宽要求，可以先分别对待传输的左眼图像和右眼图像进行压缩处理，然后再在压缩后的左眼图像和压缩后的右眼图像的预设位置添加标记信息头。此时，标记信息头除了包括上述图像帧校验信息以外，还可以包括编码压缩信息，以便3D显示设备102可以按照该编码压缩信息对接收到的图像帧进行解码。需要说明的是，除了上述内容以外，标记信息头还可以包括其他信息，例如，压缩前图像的分辨率信息，具体根据实际场景的需要设置，本实施例对此不做限制。

例如，待传输图像为经过上述高低清分区渲染并拼接后得到的左、右眼图像时，可以分别针对左、右眼图像，先对图像中的非注视区域进行压缩处理；然后再将压缩后的非注视区域和图像中原本的注视区域进行拼接，得到压缩后的左眼图像和压缩后的右眼图像。此时，上述编码压缩信息可以包括：注视区域和非注视区域对应的分区参数以及非注视区域的压缩比例。

在一些示例中，左、右眼图像可以包括：一个注视区域和多个非注视区域。可以预先按照非注视区域与注视区域的位置关系，设置各非注视区域对应的压缩策略，使用时，按照该压缩策略对相应位置的非注视区域进行压缩。

例如，如图2所示，左眼图像(L)和右眼图像(R)可以按照九宫格形式划分为九个区域。压缩前，区域A表示注视区域，非注视区域包括：分别位于注视区域A正左方和正右方的区域B，分别位于注视区域A正上方和正下方的区域C，分别位于注视区域A左上方、右上方、左下方和右下方的区域D。注视区域A和非注视区域B、C、D可以为矩形。此时，可以保持注视区域A的数据量不变，将非注视区域B横向压缩n倍，将非注视区域C纵向压缩n倍，将非注视区域D横向和纵向各压缩n倍。n的具体取值可以根据实际场景的需要确定。

压缩完成后，按照原本的位置关系对未压缩的注视区域和压缩后的非注视区域进行拼接，得到压缩后的左眼图像和压缩后的右眼图像。例如，图2中区域A1表示左眼图像的注视区域，B1、C1、D1表示左眼图像中相应非注视区域对应的压缩区域。区域A2表示右眼图像的注视区域，B2、C2、D2表示右眼图像中相应非注视区域对应的压缩区域。

需要说明的是，上述图2示出的分区以及相应的压缩方式仅为一种示例，具体可以根据实际需要进行分区，本实施例对此不做限制。例如，在一些示例中，也可以将图2中位于区域A正上方、左上方、右上方的区域划分为同一个非注视区域，相应地，将位于区域A正下方、左下方、右下方的区域划分为同一个非注视区域。

进一步地，再将标记信息头添加到压缩后的左眼图像和压缩后的右眼图像中。例如，可以分别生成左眼图像对应的标记信息头以及右眼图像对应的标记信息头，按行或按列将左眼图像对应的标记信息头对应拼接到压缩后的左眼图像和右眼图像中。如图2所示，E1表示左眼图像的标记信息头，E2表示右眼图像的标记信息头，将E1与压缩后左眼图像的起始行进行拼接，得到第一图像帧，将E2与压缩后右眼图像的起始行进行拼接，得到第二图像帧。

对于3D显示设备102来讲，匹配成功后即可开始接收目标头戴式显示设备传输的左、右眼图像数据。在一些示例中，接收目标头戴式显示设备传输的左眼图像和右眼图像的过程可以包括：接收目标头戴式显示设备传输的当前图像帧，当前图像帧中携带有标记信息头，标记信息头包括图像帧校验信息；从标记信息头中提取图像帧校验信息，基于图像帧校验信息，识别当前图像帧对应的视图类型，若视图类型为左眼视图，则对当前图像帧进行解析，得到左眼图像，若视图类型为右眼视图，则对当前图像帧进行解析，得到右眼图像。

例如，目标头戴式显示设备通过奇偶帧分开传输左右眼图像，若左眼图像对应的第一图像帧为奇数帧，右眼图像对应的第二图像帧为偶数帧。图像帧校验信息可以包括奇偶校验位，当识别到当前图像帧中的奇偶校验位表征奇数帧时，则判定当前图像帧对应的视图类型为左眼图像，当识别到当前图像帧中的奇偶校验位表征偶数帧时，则判定当前图像帧对应的视图类型为右眼图像。

当头戴式显示设备按照先左眼再右眼的顺序交替传输左、右眼图像对应的图像帧时，在不存在帧丢失的情况下，3D显示设备会先接收到当前帧显示画面的左眼视图对应的图像帧即上述第一图像帧，再接收到当前帧显示画面的右眼视图对应的图像帧即上述第二图像帧，接着，再按照此顺序接收下一帧显示画面的第一图像帧和第二图像帧，以此类推，从而顺序实现各帧显示画面的3D显示。

但是考虑到实际传输过程中，可能会因为网络或其他原因导致帧丢失，因此，为了尽量避免因帧丢失导致显示出错，在一些示例中，除了识别视图类型以外，还可以基于图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像，以避免后续帧发生错误解析。例如，如果当前帧显示画面的左眼图像丢失，也就是第一图像帧丢失，则复用上一帧显示画面的左眼图像进行显示，如果当前帧显示画面的右眼图像丢失，也就是第二图像帧丢失，则复用上一帧显示画面的右眼图像进行显示，以避免下一帧发生错误解析。

在一些示例中，上述图像帧校验信息还可以包括帧标记位，可以通过帧标记位识别出前后接收到的左眼图像和右眼图像是否属于同一帧显示画面，从而判断传输过程是否发生丢帧现象。

具体的，若接收到的当前图像帧对应的视图类型为左眼视图，则等待下一图像帧；若接收到的当前图像帧对应的视图类型为右眼视图，且上一图像帧对应的视图类型为左眼视图，则基于帧标记位判断当前图像帧与上一图像帧是否属于同一帧显示画面，若否，则判定当前帧显示画面的右眼图像以及下一帧显示画面的左眼图像丢失，复用上一帧显示画面的右眼图像作为当前帧显示画面的右眼图像，复用当前帧显示画面的左眼图像作为下一帧显示画面的左眼图像。当然，若判定当前图像帧与上一图像帧属于同一帧显示画面，则表示当前帧显示画面不存在丢帧问题，继续执行后续的图像解析以及3D显示过程。需要说明的是，图像数据是一帧接一帧按顺序传输的，此处的“下一图像帧”为排在当前图像帧后一位接收到的图像帧，“上一图像帧”为排在当前图像帧前一位接收到的图像帧。

当然，除了上述情况以外，还可能存在其他丢帧情况，具体可以根据实际需要进行设置。例如，若当前图像帧对应的视图类型为左眼视图，下一图像帧对应的视图类型仍为左眼视图，则判定当前帧显示画面的右眼图像丢失，需要复用上一帧显示画面的右眼图像作为当前帧显示画面的右眼图像。若当前图像帧对应的视图类型为右眼视图，且不存上一图像帧，即当前图像帧为3D显示设备开启并与目标头戴式显示设备配对成功后，接收到的首个图像帧，则说明第一帧显示画面的左眼图像丢失，则丢弃当前图像帧，不对第一帧显示画面进行显示，继续接收并解析下一图像帧。

在一些示例中，若头戴式显示设备101传输过来的左、右眼图像是经过编码压缩处理的图像，则在对图像帧进行解析时，需要对应对相应视图类型的图像进行解码处理。

例如，对应于上文中所列举的分区以及压缩方式，接收到的图像帧包括注视区域和压缩后的非注视区域。相应地，标记信息头还包括：注视区域和所述非注视区域对应的分区参数以及非注视区域的压缩比例。

此时，上述对图像帧进行解析的过程可以包括：基于分区参数和压缩比例，对图像帧中被压缩的非注视区域进行像素扩展，并去除图像帧中的标记信息头，以避免渲染时出现图像数据乱码现象。

以左眼图像对应的图像帧为例，可以先基于分区参数确定该图像帧中注视区域和压缩后的非注视区域的位置，然后对其中被压缩的非注视区域如图3中所示的B1区域、C1区域、D1进行像素扩展。假设各非注视区域的压缩比例为n，则分别将两个B1区域的像素横向扩展n倍，生成B′区域；分别将两个C1区域的像素纵向扩展n倍，生成C′区域；分别将两个D1区域的像素横向和纵向各扩展n倍，生成D′区域；接着，将B′区域、C′区域、D′区域和注视区域A1按照原始相对位置进行图像拼接，拼接完成后，去掉标记信息头，即完成对该图像帧的解析，得到左眼图像。

类似地，对于右眼图像对应的图像帧，根据标记信息头中的分区参数和压缩比例，对其中被压缩的非注视区域B2、C2和D2进行像素扩展后，与注视区域A2进行拼接，并去掉标记信息头，即完成对该图像帧的解析，得到右眼图像。

左眼图像和右眼图像解析完成后，就可以对左眼图像和右眼图像进行3D拼接，实现3D画面的显示。具体过程根据3D显示设备102采用的3D显示屏类型确定。

例如，当3D显示设备102采用光栅显示屏时，可以将左眼图像和右眼图像在纵向方向上逐像素间隔排列，生成3D光栅拼接图，然后采用眼球追踪控制光栅开启的位置，最终实现3D效果。

例如，3D显示设备102还包括3D屏控制器和视频处理芯片，3D屏控制器启动后，会对光栅状态进行初始化，设置光栅为全部开启。此时***界面直接在3D显示屏上显示，观众看到的是普通2D显示画面。当3D屏控制器接收到头戴式显示设备101传输的左眼图像和右眼图像后，将用于3D显示的左、右眼图像传到视频处理芯片，芯片会根据光栅算法生成3D合成图，并最终将合成图渲染到3D显示屏上。

进一步地，3D显示设备102还可以包括眼球追踪模块，3D屏控制器接收到头戴式显示设备101传输的左眼图像和右眼图像后，还会开启眼球追踪模块。眼球追踪模块会捕捉观众的注视坐标并通过注视点光栅算法计算出光栅开关坐标，并将光栅开关指令发送到3D显示屏上。在3D显示屏上，通过渲染3D合成图，执行光栅开关指令，最终让观众在3D显示屏上看到玩家头戴式显示设备101中展示的3D内容。

当3D显示设备102采用3D柱透镜显示屏，例如，采用多视场柱透镜3D显示屏时，考虑到头戴式显示设备101传输过来的是单视点的左、右眼图像，为了适配多视场柱透镜3D显示屏的显示，可以多次复用接收到的左眼图像和右眼图像，生成多视点拼接图；然后，基于该多视点拼接图显示3D画面。

例如，3D显示设备102中的3D屏控制器启动后，根据柱透镜的物理参数，视频处理芯片对***界面做复用拼接处理，并显示到3D显示屏上，此时观众看到的是普通的2D***显示画面。当3D屏控制器接收到头戴式显示设备101传输的左、右眼图像后，再将左、右眼图像传到视频处理芯片，芯片根据柱透镜的物理参数执行相应的拼接算法。针对拥有多视场柱透镜3D显示屏的3D显示设备102，假设屏幕使用n个视场设计，则视频处理芯片会复用n次接收到的左、右眼图像，按照屏幕参数对应的算法进行拼接和合成，生成依赖于3D柱透镜算法的多视点拼接图。此后，就可以在3D显示屏上，显示拼接合成的图像，实现3D显示效果。需要说明的是，由于柱透镜成像原理不同于光栅屏，不需要眼球追踪功能，观众也能在显示屏上看到玩家头戴式显示设备101中展示的3D内容。

第二方面，本公开实施例还提供了一种图像显示方法，应用于上述图像显示***10中的头戴式显示设备101。如图4所示，该方法可以包括以下步骤S401至步骤S403。

步骤S401，获取当前帧显示画面对应的左眼图像和右眼图像。

步骤S402，基于左眼图像和右眼图像进行3D显示。

步骤S403，将左眼图像和右眼图像传输给3D显示设备，以使得3D显示设备基于接收到的左眼图像和右眼图像进行3D显示。

需要说明的是，步骤S401至步骤S403的具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，将左眼图像和右眼图像传输给3D显示设备，包括：分别在左眼图像和右眼图像的预设位置添加标记信息头，得到左眼图像对应的第一图像帧以及右眼图像对应的第二图像帧，其中，标记信息头包括图像帧校验信息，图像帧校验信息用于标记图像帧的传输顺序；按照预设顺序将第一图像帧和第二图像帧依次传输给3D显示设备。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，左眼图像和右眼图像包括注视区域和非注视区域，注视区域的分辨率大于非注视区域的分辨率，分别在左眼图像和右眼图像的预设位置添加标记信息头，包括：分别对左眼图像和右眼图像中的非注视区域进行压缩处理；对注视区域和压缩后的非注视区域进行拼接，得到压缩后的左眼图像和压缩后的右眼图像；分别在压缩后的左眼图像和压缩后的右眼图像的预设位置添加标记信息头，标记信息头还包括：注视区域和非注视区域对应的分区参数以及非注视区域的压缩比例。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

第三方面，本公开实施例还提供了一种图像显示方法，应用于上述图像显示***10中的3D显示设备102。如图5所示，该方法可以包括以下步骤S501至步骤S502。

步骤S501，接收目标头戴式显示设备传输的左眼图像和右眼图像，所述左眼图像和右眼图像对应于目标头戴式显示设备显示的3D画面。

步骤S502，基于接收到的左眼图像和右眼图像显示3D画面。

需要说明的是，步骤S501至步骤S502的具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，在接收目标头戴式显示设备传输的左眼图像和右眼图像之前，还包括：展示可用设备列表，可用设备列表包括至少一个头戴式显示设备；从可用设备列表中确定目标头戴式显示设备，与所确定的目标头戴式显示设备进行配对连接。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，从可用设备列表中确定目标头戴式显示设备，包括：将可用设备列表中最近一次与3D显示设备配对连接的头戴式显示设备作为目标头戴式显示设备；或者，响应于用户操作，从可用设备列表中选择目标头戴式显示设备。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，上述接收目标头戴式显示设备传输的左眼图像和右眼图像的过程可以包括：接收目标头戴式显示设备传输的当前图像帧，当前图像帧携带有标记信息头，标记信息头包括图像帧校验信息；基于图像帧校验信息识别当前图像帧对应的视图类型，若视图类型为左眼视图，则对当前图像帧进行解析，得到左眼图像，若视图类型为右眼视图，则对当前图像帧进行解析，得到右眼图像。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，图像帧校验信息包括奇偶校验位。上述基于图像帧校验信息识别当前图像帧对应的视图类型的过程可以包括：若奇偶校验位表征奇数帧，则判定当前图像帧对应的视图类型为左眼视图，若奇偶校验位表征偶数帧，则判定当前图像帧对应的视图类型为右眼视图。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

进一步地，上述接收目标头戴式显示设备传输的左眼图像和右眼图像的过程还可以包括：基于图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，图像帧校验信息包括：帧标记位。头戴式显示设备按照先左眼再右眼的顺序交替传输左、右眼图像对应的图像帧。上述基于图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像的过程可以包括：若当前图像帧对应的视图类型为左眼视图，则等待下一图像帧；若当前图像帧对应的视图类型为右眼视图，且上一图像帧对应的视图类型为左眼视图，则基于帧标记位判断当前图像帧与上一图像帧是否属于同一帧显示画面，若否，则判定当前帧显示画面的右眼图像以及下一帧显示画面的左眼图像丢失，复用上一帧显示画面的右眼图像作为当前帧显示画面的右眼图像，复用当前帧显示画面的左眼图像作为下一帧显示画面的左眼图像。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，接收到的图像帧包括注视区域和压缩后的非注视区域，注视区域的分辨率大于非注视区域的分辨率，标记信息头还包括：注视区域和非注视区域对应的分区参数以及非注视区域的压缩比例，上述对当前图像帧进行解析可以包括：基于分区参数和压缩比例，对当前图像帧中被压缩的非注视区域进行像素扩展，并去除当前图像帧中的标记信息头。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

在一些示例中，3D显示设备的显示屏为3D柱透镜显示屏。上述基于接收到的左眼图像和右眼图像显示3D画面的过程可以包括：多次复用接收到的左眼图像和右眼图像，生成多视点拼接图；基于多视点拼接图显示3D画面。具体实施过程可以参见上述第一方面实施例中的相关描述，此处不再赘述。

第四方面，本公开实施例还提供了一种头戴式显示设备，包括：处理器、存储器及存储在存储器上并可在所述处理器上运行的计算机程序。该计算机程序被所述处理器执行时实现如上述第二方面所述的图像显示方法的步骤。此外，为了实现无线数据传输功能，头戴式显示设备还可以包括第一无线通信模块，例如，第一无线通信模块可以包括但不限于蓝牙模块和/或WIFI模块。头戴式显示设备可以通过第一无线通信模块向3D显示设备传输设备信息以及左、右眼图像。

例如，该头戴式显示设备可以为：VR头盔或VR眼镜等具有VR功能的头戴式设备，或者，也可以是其他具有3D显示功能的头戴式设备，本实施例对此不做限制。

第五方面，本公开实施例还提供了一种3D显示设备，包括：3D显示屏、处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序。该计算机程序被所述处理器执行时实现如上述第三方面所述的图像显示方法的步骤。

例如，图6示出了一种示例性3D显示设备的结构示意图。如图6所示，该3D显示设备60可以包括：3D显示屏603、3D屏控制器601、视频处理芯片602、第二无线通信模块604以及存储器605。

其中，3D屏控制器601分别与存储器605、视频处理芯片602、第二无线通信模块604、电源管理芯片606以及功能按键607连接，负责***逻辑和软件运作。例如，3D屏控制器601可以采用微处理器(Microcontroller Unit，MCU)。

第二无线通信模块604与头戴式显示设备中的第一无线通信模块对应设置，用于实现与头戴式显示设备的数据交互，例如，可以包括但不限于蓝牙模块和/或WIFI模块。具体来讲，第二无线通信模块604可以接收头戴式显示设备传输过来的图像帧，并将接收到的图像帧传输到视频处理芯片602进行图形处理。此外，第二无线通信模块604还可以用于将当前可用的头戴式显示设备信息传输给3D屏控制器601，3D屏控制器601会把设备信息存到存储器605中，以向用户展示可用设备列表。

存储器605负责长时间存储多个匹配的头戴式显示设备信息，设备配置信息等数据，同时存储器605是***和软件的载体，存储安装包和软件链接库。例如，存储器605可以包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。

视频处理芯片602用于对接收到的图像帧进行解码处理，并把解码得到的左眼图像和右眼图像传输给3D显示屏603。例如，视频处理芯片602可以采用图像处理器(GraphicsProcessing Unit，GPU)。

3D显示屏603用于对接收到的左眼图像和右眼图像进行3D显示，向用户呈现3D图像效果。

当然，除了上述结构以外，3D显示设备60还可以包括其他结构，如电源管理芯片606、功能按键607以及壳体(图中未示出)等，本实施例对此不做限制。电源管理芯片606以及功能按键607与3D屏控制器601连接。其中，电源管理芯片606用于管理设备电源。功能按键607用于给3D屏控制器601提供按键响应事件，3D屏控制器601处理后会对用户的操作进行响应。

第六方面，本公开实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行上述第二方面或第三方面提供的图像显示方法的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。举例来讲，该计算机可读存储介质可以是只读存储器(Read-OnlyMemory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

本领域内的技术人员应明白，本公开实施例可提供为方法、***、或计算机程序产品。因此，本说明书可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本说明书是参照根据本公开实施例的方法、设备、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

尽管已描述了本说明书的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本说明书范围的所有变更和修改。

Claims (16)

1.一种图像显示方法，其特征在于，应用于头戴式显示设备，所述方法包括：

获取当前帧显示画面对应的左眼图像和右眼图像；

基于所述左眼图像和所述右眼图像进行3D显示；

将所述左眼图像和所述右眼图像传输给3D显示设备，以使得所述3D显示设备基于接收到的左眼图像和右眼图像进行3D显示。

2.根据权利要求1所述的方法，其特征在于，将所述左眼图像和所述右眼图像传输给3D显示设备，包括：

分别在所述左眼图像和所述右眼图像的预设位置添加标记信息头，得到所述左眼图像对应的第一图像帧以及所述右眼图像对应的第二图像帧，其中，所述标记信息头包括图像帧校验信息，所述图像帧校验信息用于标记图像帧的传输顺序；

按照预设顺序将所述第一图像帧和所述第二图像帧依次传输给所述3D显示设备。

3.根据权利要求2所述的方法，其特征在于，所述左眼图像和右眼图像包括注视区域和非注视区域，所述注视区域的分辨率大于所述非注视区域的分辨率，分别在所述左眼图像和所述右眼图像的预设位置添加标记信息头，包括：

分别对所述左眼图像和所述右眼图像中的所述非注视区域进行压缩处理；

对所述注视区域和压缩后的非注视区域进行拼接，得到压缩后的左眼图像和压缩后的右眼图像；

分别在压缩后的左眼图像和压缩后的右眼图像的预设位置添加所述标记信息头，所述标记信息头还包括：所述注视区域和所述非注视区域对应的分区参数以及所述非注视区域的压缩比例。

4.一种图像显示方法，其特征在于，应用于3D显示设备，所述方法包括：

接收目标头戴式显示设备传输的左眼图像和右眼图像，所述左眼图像和右眼图像对应于所述目标头戴式显示设备显示的3D画面；

基于接收到的左眼图像和右眼图像显示3D画面。

5.根据权利要求4所述的方法，其特征在于，在接收目标头戴式显示设备传输的左眼图像和右眼图像之前，还包括：

展示可用设备列表，所述可用设备列表包括至少一个头戴式显示设备；

从所述可用设备列表中确定目标头戴式显示设备，与所确定的目标头戴式显示设备进行配对连接。

6.根据权利要求5所述的方法，其特征在于，从所述可用设备列表中确定目标头戴式显示设备，包括：

将所述可用设备列表中最近一次与所述3D显示设备配对连接的头戴式显示设备作为所述目标头戴式显示设备；或者，

响应于用户操作，从所述可用设备列表中选择目标头戴式显示设备。

7.根据权利要求4所述的方法，其特征在于，所述接收目标头戴式显示设备传输的左眼图像和右眼图像，包括：

接收目标头戴式显示设备传输的当前图像帧，所述当前图像帧携带有标记信息头，所述标记信息头包括图像帧校验信息；

基于所述图像帧校验信息识别所述当前图像帧对应的视图类型，若所述视图类型为左眼视图，则对所述当前图像帧进行解析，得到左眼图像，若所述视图类型为右眼视图，则对所述当前图像帧进行解析，得到右眼图像。

8.根据权利要求7所述的方法，其特征在于，所述图像帧校验信息包括奇偶校验位，基于所述图像帧校验信息识别所述当前图像帧对应的视图类型，包括：

若所述奇偶校验位表征奇数帧，则判定所述当前图像帧对应的视图类型为左眼视图，若所述奇偶校验位表征偶数帧，则判定所述当前图像帧对应的视图类型为右眼视图。

9.根据权利要求7所述的方法，其特征在于，所述接收目标头戴式显示设备传输的左眼图像和右眼图像，还包括：

基于所述图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像。

10.根据权利要求9所述的方法，其特征在于，所述图像帧校验信息包括：帧标记位，所述头戴式显示设备按照先左眼再右眼的顺序交替传输左、右眼图像对应的图像帧，基于所述图像帧校验信息检测传输过程中是否存在帧丢失，若是，则复用上一帧显示画面中相应视图类型的图像，包括：

若所述当前图像帧对应的视图类型为左眼视图，则等待下一图像帧；

若所述当前图像帧对应的视图类型为右眼视图，且上一图像帧对应的视图类型为左眼视图，则基于所述帧标记位判断所述当前图像帧与所述上一图像帧是否属于同一帧显示画面，若否，则判定当前帧显示画面的右眼图像以及下一帧显示画面的左眼图像丢失，复用上一帧显示画面的右眼图像作为所述当前帧显示画面的右眼图像，复用所述当前帧显示画面的左眼图像作为下一帧显示画面的左眼图像。

11.根据权利要求7所述的方法，其特征在于，所述当前图像帧包括注视区域和压缩后的非注视区域，所述注视区域的分辨率大于所述非注视区域的分辨率，所述标记信息头还包括：所述注视区域和所述非注视区域对应的分区参数以及所述非注视区域的压缩比例，对所述当前图像帧进行解析，包括：

基于所述分区参数和所述压缩比例，对所述当前图像帧中被压缩的非注视区域进行像素扩展，并去除所述当前图像帧中的标记信息头。

12.根据权利要求4所述的方法，其特征在于，所述3D显示设备的显示屏为3D柱透镜显示屏，所述基于接收到的左眼图像和右眼图像显示3D画面，包括：

多次复用接收到的左眼图像和右眼图像，生成多视点拼接图；

基于所述多视点拼接图显示3D画面。

13.一种图像显示***，其特征在于，包括：头戴式显示设备以及3D显示设备，其中：

所述头戴式显示设备用于获取当前帧显示画面对应的左眼图像和右眼图像，基于所述左眼图像和所述右眼图像进行3D显示，以及将所述左眼图像和所述右眼图像传输给所述3D显示设备；

所述3D显示设备用于基于接收到的左眼图像和右眼图像进行3D显示。

14.一种头戴式显示设备，其特征在于，包括：处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1-3中任一项所述的图像显示方法的步骤。

15.一种3D显示设备，其特征在于，包括：3D显示屏、处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求4-12中任一项所述的图像显示方法的步骤。

16.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行如权利要求1-12中任一项所述的图像显示方法的步骤。