CN115866311A

CN115866311A - 用于智能眼镜的虚拟屏幕周边氛围渲染方法

Info

Publication number: CN115866311A
Application number: CN202310117320.4A
Authority: CN
Inventors: 王洁
Original assignee: Shenzhen Tianqu Xingkong Technology Co ltd
Current assignee: Shenzhen Tianqu Xingkong Technology Co ltd
Priority date: 2023-02-15
Filing date: 2023-02-15
Publication date: 2023-03-28
Anticipated expiration: 2043-02-15
Also published as: CN115866311B

Abstract

本发明提供了一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，涉及智能眼镜技术领域。本发明通过服务器配合氛围渲染设备在投影面上生成待播放视频的每一帧的氛围渲染光效，再利用图像采集设备拍摄得到每一帧对应的氛围灯效图像，并基于此生成氛围渲染视频，在将其与待播放视频同步串流至智能眼镜进行显示，以在智能眼镜的观影模式下，实现在虚拟屏幕的周边模拟出氛围灯的效果。

Description

用于智能眼镜的虚拟屏幕周边氛围渲染方法

技术领域

本发明涉及智能眼镜技术领域，具体涉及一种用于智能眼镜的虚拟屏幕周边氛围渲染方法。

背景技术

在传统实体显示屏上播放视频文件时，可配合氛围灯实现随画面变换出相应的背景环境灯效，以提供更加优秀的观影体验。

在传统实体显示屏实现上述效果需要显示屏和氛围渲染设备（例如CN216721637U）连接，在显示屏上显示画面时，氛围渲染设备根据指令调节灯效，并将氛围渲染设备发出的光投影在显示屏的背景墙上，提高了观影的沉浸感。

但目前要想实现类似效果，只能在实体显示屏上使用；而智能眼镜作为新一代的显示设备，能够提供优秀的大屏观影体验，但目前未见有能够在智能眼镜的虚拟屏幕周围实现氛围灯环境渲染效果的方法。

发明内容

（一）解决的技术问题

针对现有技术的不足，本发明提供了一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，解决了如何在智能眼镜的虚拟屏幕周围实现氛围渲染的问题。

（二）技术方案

为实现以上目的，本发明通过以下技术方案予以实现：

一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，该方法包括：

S101、获取智能眼镜采集的待播放文件信息；

S102、依次获取视频库中待播放文件信息的帧图像；

S103、提取所述帧图像中的边缘色彩信息和对应的帧信息，并基于边缘色彩信息生成灯光控制指令再发送至氛围渲染设备；

S104、获取所述氛围渲染设备根据所述灯光控制指令在投影面上投影的氛围灯效图像；

S105、将各个预设区域对应氛围灯效图像合并成氛围渲染视频流；

S106、将所述氛围渲染视频流与待播放文件的视频流同步串流至所述智能眼镜。

进一步的，所述边缘色彩信息包括所述帧图像中至少两个预设区域中各像素的颜色信息；且所述帧信息包括帧数。

进一步的，所述预设区域为帧图像的左右两侧的边缘区域。

进一步的，该方法还包括：

S107、实时存储所述氛围渲染视频流，并在待播放文件完成播放后，将该氛围渲染视频流与待播放文件信息进行关联。

进一步的，所述S101还包括：

判断是否存储有待播放文件信息对应的氛围渲染视频流；

若是，执行S106；否则，执行S102。

进一步的，该方法还包括：

S201、所述智能眼镜在采集的待播放文件信息前，固定虚拟屏幕的位置，生成与预设区域一一对应的虚拟氛围渲染显示区域，并根据预设区域与帧图像的相对位置关系，将所述虚拟氛围渲染显示区域设置在虚拟屏幕四周；

S202、所述智能眼镜在接收到各个预设区域对应的氛围渲染视频流以及待播放文件的视频流后，将待播放文件的视频流显示在虚拟屏幕中，并将氛围渲染视频流显示在对应的虚拟氛围渲染显示区域中。

进一步的，所述氛围灯效图像的获取方法包括：

在获取氛围灯效图像前，采集氛围渲染设备的投影区域；将投影区域与图像采集设备的拍摄区域对齐；

利用图像采集设备获取氛围灯效图像。

进一步的，所述待播放文件采用帧率为24FPS的视频文件，所述图像采集设备的分辨率为8K，帧率为60FPS，色深为10bit的HDR拍摄设备。

（三）有益效果

本发明提供了一种用于智能眼镜的虚拟屏幕周边氛围渲染方法。与现有技术相比，具备以下有益效果：

本发明通过服务器配合氛围渲染设备在投影面上生成待播放视频的每一帧的氛围渲染光效，再利用图像采集设备拍摄得到每一帧对应的氛围灯效图像，并基于此生成氛围渲染视频，在将其与待播放视频同步串流至智能眼镜进行显示，以在智能眼镜的观影模式下，实现在虚拟屏幕的周边模拟出氛围灯的效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例的方法流程图；

图2为本发明实施例的硬件连接示意图；

图3为本发明实施例的预设区域示意图；

图4为本发明实施例的投影区域与灯效范围的示意图；

图5为本发明实施例的智能眼镜观影模式下虚拟氛围渲染显示区域与虚拟屏幕的示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请实施例通过提供一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，解决了如何在智能眼镜的虚拟屏幕周围实现氛围渲染的问题。

为了更好的理解上述技术方案，下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。

实施例1：

如图1所示，本发明提供了一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，该方法由服务器执行，且该方法包括：

S101、获取智能眼镜采集的待播放文件信息；

S102、依次获取视频库中待播放文件信息的帧图像；

本实施例的有益效果为：

下面对本发明实施例的实现过程进行详细说明：

本发明实施例中各设备的连接关系如图2所示，包括服务器，智能眼镜、氛围渲染设备、图像采集设备。

其中，所述智能眼镜与服务器通过互联网连接，且氛围渲染设备和图像采集设备均与服务器通过线缆连接，且氛围渲染设备为现有技术，包括若干个由多个灯珠组成的灯条，用于在投影面上产生氛围光效，以及用于控制灯条产生与屏幕画面匹配的氛围光效的控制器。而图像采集设备至少包括一个摄像模块，为了准确还原投影面上的光效色彩，图像采集设备可采用支持分辨率为8K，帧率为60FPS，色深为10bit的HDR拍摄设备。

在具体实施时，服务器中设有存储若干待播放文件的视频库，其中，待播放文件可以是24FPS（每秒传输帧数，Frames Per Second）的视频文件。

智能眼镜的用户在进行大屏幕观影时，首先会在视野范围内生成一个虚拟屏幕，并将其固定在视野的中心位置，随后用户可通过登录视频库结合与智能眼镜的交互操作选择出一个待播放文件，现有技术中此时智能眼镜会直接在虚拟屏幕显示待播放文件的画面，无法实现氛围光效果。为了在智能眼镜的虚拟屏幕周围实现氛围渲染的效果，本发明采用如下步骤：

S101、获取智能眼镜采集的待播放文件信息。

S102、依次获取视频库中待播放文件信息的帧图像。

例如，一个时长为1分钟的视频文件，其总帧数为=1min*60s*24帧=1440帧，因此可以从第1帧开始获取帧图像，处理完成后再对下一帧图像进行处理。

在具体实施时，所述边缘色彩信息包括所述帧图像中至少两个预设区域中各像素的颜色信息；如图3所示，所述预设区域可以为帧图像的左右两侧的边缘区域，该区域的和尺寸由人工预先设定好即可。且所述帧信息包括帧数。例如帧数可以表示为1/1440，即表示该图像是视频文件总1440帧中的第一帧。

S104、获取所述氛围渲染设备根据所述灯光控制指令在投影面上投影的氛围灯效图像。

在具体实施时，与现有的实体屏幕氛围渲染类似，在播放视频的同时利用与服务器连接的氛围渲染设备将光投影在投影面上。具体的，氛围渲染设备的灯条数量可以与预设区域一一对应，每个灯条负责一个区域的氛围渲染，例如，当预设区域为帧图像的左右两侧的边缘区域时，氛围渲染设备的灯条也为2条，一条对应左侧的预设区域中各像素的颜色信息，实现屏幕左侧的氛围渲染，另一条对应右侧的预设区域中各像素的颜色信息，实现屏幕右侧的氛围渲染。

当投影面上出现氛围渲染设备投出的灯效后，即可配合图像采集设备在固定位置拍摄得到氛围灯效图像，并将其传输至服务器。为了得到效果较好的氛围灯效图像，在获取氛围灯效图像前，可以预先测试确定氛围渲染设备的投影区域；并将投影区域与图像采集设备的拍摄区域对齐。如图4所示，以右侧投影区域为例，为了便于对齐，每个投影区域可以是一个矩形，使能够刚好覆盖氛围渲染设备投出的灯效范围（图中以椭圆区域表示，其真实形状与灯条的规格有关）即可，此时将图像采集设备拍摄的拍摄范围与该矩形对齐（即重合），而投影区域内，灯效范围外对应的氛围灯效图像区域填充纯黑色像素即可获取氛围灯效图像。

S105、将各个预设区域对应氛围灯效图像合并成氛围渲染视频流。

在具体实施时，利用现有的视频流生成算法配合串流软件，即可将多帧图像按帧数转为视频并进行串流。在生成视频时，优选的是按照原视频的帧率进行生成，例如原视频为24帧/秒，则氛围渲染视频流的帧率也可以是24帧/秒。至此，即可得到待播放视频对应的氛围灯效影像。

在具体实施时，可根据待播放视频的帧信息和氛围渲染视频流的帧信息将两者同步，进而同步串流至智能眼镜。

考虑到视频文件的可重复播放性，为了进一步提高使用效果，降低用户的等待时间，本申请还可以进一步包括如下步骤：

S107、实时存储所述氛围渲染视频流，并在待播放文件完成播放后（在服务器端完成），将该氛围渲染视频流与待播放文件信息进行关联。

通过上述步骤，可将已经生成的氛围渲染视频流直接存储为高清视频文件，这样下一个次在观看同样的视频时，就无需进行氛围灯效图像的采集和氛围渲染视频的生成，可以直接从库中调用。

因此，在S101中可进一步增加判断步骤，即：

判断是否存储有待播放文件信息对应的氛围渲染视频流；

若是，执行S106；否则，执行S102。

此外，在智能眼镜端获取到上述两种视频流后，将其分别显示在对应位置即可，具体步骤包括：

S201、所述智能眼镜在采集的待播放文件信息前，固定虚拟屏幕的位置，生成与预设区域一一对应的虚拟氛围渲染显示区域，并根据预设区域与帧图像的相对位置关系，将所述虚拟氛围渲染显示区域设置在虚拟屏幕四周。

在具体实施时，如图3、5所示，预设区域为待播放视频画面的左右两侧边缘区域，而虚拟屏幕是用于显示待播放视频的画面，因此，虚拟氛围渲染显示区域也分别设置在虚拟屏幕的左右两侧。优选的，虚拟氛围渲染显示区域的长宽比与氛围灯效图像相同，且虚拟氛围渲染显示区域的横向中轴线与虚拟屏幕的横向中轴线共线，所述虚拟屏幕的图层位于虚拟氛围渲染显示区域的上方，且虚拟氛围渲染显示区域与虚拟屏幕存在一定的重叠区域。

在具体实施时，如图3所示，若预设区域位于是帧图像左右两侧，则可获得对应左右两侧的两条氛围渲染视频流，将其显示在对应一侧的虚拟氛围渲染显示区域中即可。此外，也可将虚拟氛围渲染显示区域和虚拟屏幕设置为可手动调节状态，用户可根据需要进一步对虚拟氛围渲染显示区域和虚拟屏幕进行缩放、位置调整等操作，使其更具灵活性。

综上所述，与现有技术相比，本发明具备以下有益效果：

①本发明通过服务器配合氛围渲染设备在投影面上生成待播放视频的每一帧的氛围渲染光效，再利用图像采集设备拍摄得到每一帧对应的氛围灯效图像，并基于此生成氛围渲染视频，在将其与待播放视频同步串流至智能眼镜进行显示，以在智能眼镜的观影模式下，实现在虚拟屏幕的周边模拟出氛围灯的效果。

②每个视频只需采集生成一次氛围渲染视频流，后续再次播放时可从库中直接调取对应的视频文件进行串流即可。

需要说明的是，通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行各个实施例或者实施例的某些部分所述的方法。在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims

1.一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，所述方法包括：

S101、获取智能眼镜采集的待播放文件信息；

S102、依次获取视频库中待播放文件信息的帧图像；

2.如权利要求1所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，所述边缘色彩信息包括所述帧图像中至少两个预设区域中各像素的颜色信息；且所述帧信息包括帧数。

3.如权利要求2所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，所述预设区域为帧图像的左右两侧的边缘区域。

4.如权利要求1所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，该方法还包括：

5.如权利要求1所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，所述S101还包括：

判断是否存储有待播放文件信息对应的氛围渲染视频流；

若是，执行S106；否则，执行S102。

6.如权利要求1所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，该方法还包括：

7.如权利要求3所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，所述氛围灯效图像的获取方法包括：

利用图像采集设备获取氛围灯效图像。

8.如权利要求7所述的一种用于智能眼镜的虚拟屏幕周边氛围渲染方法，其特征在于，所述待播放文件采用帧率为24FPS的视频文件，所述图像采集设备的分辨率为8K，帧率为60FPS，色深为10bit的HDR拍摄设备。