CN110213640A - 虚拟物品的生成方法、装置及设备 - Google Patents
虚拟物品的生成方法、装置及设备 Download PDFInfo
- Publication number
- CN110213640A CN110213640A CN201910578523.7A CN201910578523A CN110213640A CN 110213640 A CN110213640 A CN 110213640A CN 201910578523 A CN201910578523 A CN 201910578523A CN 110213640 A CN110213640 A CN 110213640A
- Authority
- CN
- China
- Prior art keywords
- image data
- virtual objects
- adjusted
- mask
- transparent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000004891 communication Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 13
- 238000012545 processing Methods 0.000 claims description 13
- 238000009877 rendering Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 abstract description 39
- 230000001360 synchronised effect Effects 0.000 abstract description 16
- 239000011159 matrix material Substances 0.000 description 64
- 230000008569 process Effects 0.000 description 12
- 238000007906 compression Methods 0.000 description 7
- 230000006835 compression Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 239000011800 void material Substances 0.000 description 5
- 241001269238 Data Species 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000009738 saturating Methods 0.000 description 3
- 208000003164 Diplopia Diseases 0.000 description 2
- 238000013144 data compression Methods 0.000 description 2
- 208000029444 double vision Diseases 0.000 description 2
- 235000013399 edible fruits Nutrition 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/233—Processing of audio elementary streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2355—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例提供的一种虚拟物品的生成方法、装置及设备。其中，一种虚拟物品的生成方法，应用于服务器，在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。本方案可以实现保证生成的虚拟物品的多样化展示效果中，音画同步的效果。
Description
技术领域
本发明涉及行为虚拟物品技术领域，特别是涉及一种虚拟物品的生成方法、装置及设备。
背景技术
互联网相关的各类客户端通常会提供配置完成的各种虚拟物品，以便用户利用虚拟物品实现虚拟活动。示例性的，用户可以利用虚拟物品实现虚拟交易、以及装扮个人网络社区等等。例如：购买直播客户端中的虚拟礼物送给主播，以及使用社交软件中的虚拟挂件装饰头像和个人主页等等。其中，虚拟物品通常是静态的图像，例如，花朵图像，礼花图像等等。由于静态图像只有一个固定的画面，因此，容易导致生成的虚拟物品的展示效果较为单一。
对此，可以为虚拟物品添加音效，以提高虚拟物品的展示效果的多样化。但是，相关技术中，音效的添加方式仅仅是简单地在展示虚拟物品时，播放音乐，容易出现虚拟物品与音效不同步，也就是音画不同步的问题。因此，如何保证生成的虚拟物品的多样化展示效果中，音画同步，是亟待解决的问题。
发明内容
本发明实施例的目的在于提供一种虚拟物品的生成方法、装置及设备，以实现提高虚拟物品的配置检查的便捷性的效果。具体技术方案如下：
第一方面，本发明实施例提供了一种虚拟物品的生成方法，应用于服务器，该方法包括：
在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；
按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；
按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。
可选的，在所述按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品的步骤之前，所述方法还包括：
获取画面颜色为透明颜色的第二视频的第二图像数据；所述第二图像数据提供所述第二视频的画面；
所述按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，生成虚拟物品的步骤，包括：
按照预设的虚拟物品的外形信息，调整所述第一图像数据和所述第二图像数据，得到调整后的第一图像数据和调整后的第二图像数据；
获取用于展示与所述生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置；
利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据；
基于所述遮罩后的图像数据，获得虚拟物品。
可选的，所述利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据步骤，包括：
对所述调整后的第二图像数据进行转码，获得遮罩视频；所述遮罩视频的显示位置为所述透明位置；
将所述调整后的第一图像数据进行转码，获得物品视频；所述物品视频的显示位置为所述展示区域中除所述透明位置以外的位置；
将所述遮罩视频和所述物品视频设置为共同显示，得到遮罩后的图像数据。
可选的，所述利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据的步骤，包括：
将所述调整后的第一图像数据的所述透明位置作为透明通道；
将所述调整后的第二图像数据中，处于所述透明位置的像素，填充至所述透明通道中，得到透明通道数据；
将所述调整后的第一图像数据中，除处于所述透明位置的像素以外的像素，作为非透明通道数据；
对所述调整后的第一图像数据中的所述透明通道数据，以及所述非透明通道数据进行渲染，得到遮罩后的图像数据。
可选的，在所述对所述遮罩后的图像数据进行转码，获得虚拟物品的步骤之前，所述方法还包括：
获取第三图像数据，以及所述第三图像数据与所述遮罩后的图像数据之间的位置关系；所述第三图像数据用于作为虚拟物品的特定元素；
按照所述位置关系，在所述遮罩后的图像数据中添加所述第三图像数据，得到特效图像数据；
所述对所述遮罩后的图像数据进行转码，获得虚拟物品的步骤，包括：
对所述特效图像数据进行转码，获得虚拟物品。
可选的，所述位置关系包括：将所述遮罩后的图像数据的每个像素作为矩阵的元素，并将所述遮罩后的图像数据的每个像素在所述遮罩后的图像数据中的位置作为元素在矩阵中的位置；
所述位置关系为第二像素矩阵的元素与第一像素矩阵的元素之间的对应关系；所述第二像素矩阵为所述第三图像数据对应的像素矩阵；所述第一像素矩阵为所述遮罩后的图像数据对应的像素矩阵；
所述按照所述位置关系，在所述遮罩后的图像数据中添加所述第三图像数据，得到特效图像数据的步骤，包括：
分别将所述遮罩后的图像数据和所述第三图像数据，转化为第一矩阵和第二矩阵；
在所述第一矩阵中，按照所述位置关系，添加所述第二矩阵中的元素，获得第三矩阵；
将所述第三矩阵转化为图像数据，得到特效图像数据。
第二方面，本发明实施例提供了一种虚拟物品的生成装置，应用于服务器，该装置包括：
数据获取模块，用于在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；
虚拟物品生成模块，用于按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；
虚拟物品展示模块，用于按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。
可选的，所述数据获取模块，具体用于：
在所述按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品之前，获取画面颜色为透明颜色的第二视频的第二图像数据；所述第二图像数据提供所述第二视频的画面；
所述虚拟物品生成模块，包括：遮罩子模块和虚拟物品获取子模块；
所述遮罩子模块，用于按照预设的虚拟物品的外形信息，调整所述第一图像数据和所述第二图像数据，得到调整后的第一图像数据和调整后的第二图像数据；获取用于展示与所述生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置；利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据；
所述虚拟物品获取子模块，用于基于所述遮罩后的图像数据，获得虚拟物品。
可选的，所述遮罩子模块，具体用于：
对所述调整后的第二图像数据进行转码，获得遮罩视频；所述遮罩视频的显示位置为所述透明位置；
将所述调整后的第一图像数据进行转码，获得物品视频；所述物品视频的显示位置为所述展示区域中除所述透明位置以外的位置；
将所述遮罩视频和所述物品视频共同显示，得到遮罩后的图像数据。
可选的，所述遮罩子模块，具体用于：
将所述调整后的第一图像数据的所述透明位置作为透明通道；
将所述调整后的第二图像数据中，处于所述透明位置的像素，填充至所述透明通道中，得到透明通道数据；
将所述调整后的第一图像数据中，除处于所述透明位置的像素以外的像素，作为非透明通道数据；
对所述调整后的第一图像数据中的所述透明通道数据，以及所述非透明通道数据进行渲染，得到遮罩后的图像数据。
可选的，所述数据获取模块，具体用于：
获取第三图像数据，以及所述第三图像数据与所述遮罩后的图像数据之间的位置关系；所述第三图像数据用于作为虚拟物品的特定元素；
按照所述位置关系，在所述遮罩后的图像数据中添加所述第三图像数据，得到特效图像数据；
所述虚拟物品获取子模块，具体用于：
对所述特效图像数据进行转码，获得虚拟物品。
可选的，所述位置关系包括：将所述遮罩后的图像数据的每个像素作为矩阵的元素，并将所述遮罩后的图像数据的每个像素在所述遮罩后的图像数据中的位置作为元素在矩阵中的位置；
所述位置关系为第二像素矩阵的元素与第一像素矩阵的元素之间的对应关系；所述第二像素矩阵为所述第三图像数据对应的像素矩阵；所述第一像素矩阵为所述遮罩后的图像数据对应的像素矩阵；
所述数据获取模块，具体用于：
分别将所述遮罩后的图像数据和所述第三图像数据，转化为第一矩阵和第二矩阵；
在所述第一矩阵中，按照所述位置关系，添加所述第二矩阵中的元素，获得第三矩阵；
将所述第三矩阵转化为图像数据，得到特效图像数据。
第三方面，本发明实施例提供了一种电子设备，该设备包括：
处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序，实现上述第一方面提供的虚拟物品的生成方法的步骤。
第四方面，本发明实施例提供了一种计算机可读存储介质，该存储介质内存储有计算机程序，该计算机程序被处理器执行时实现上述第一方面提供的虚拟物品的生成方法的步骤。
本发明实施例提供的方案中，服务器在检测到虚拟物品的生成指令时，通过获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳，可以实现按照预设的虚拟物品的外形信息，调整第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；从而按照播放时间戳，展示虚拟物品，以及播放音频数据。由于服务器可以利用第一视频的第一图像数据，生成符合预设的虚拟物品的外形信息的虚拟物品，并将第一视频的音频数据作为虚拟物品的音效。因此，虚拟物品的画面效果与第一图像数据的内容相同，音效与音频数据的内容相同。在此基础上，第一视频的播放时间戳可以保证第一图像数据和音频数据的内容同步。因此，按照播放时间戳展示虚拟物品，以及播放音频数据，可以保证虚拟物品的画面效果与音效同步。可见，通过本方案，可以实现保证生成的虚拟物品的多样化展示效果中，音画同步的效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明一实施例提供的虚拟物品的生成方法的流程示意图；
图2为本发明另一实施例提供的虚拟物品的生成方法的流程示意图；
图3为本发明一实施例提供的虚拟物品的生成装置的结构示意图；
图4为本发明另一实施例提供的虚拟物品的生成装置的结构示意图；
图5为本发明一实施例提供的电子设备的结构示意图。
具体实施方式
为了使本领域技术人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面首先对本发明一实施例的虚拟物品的生成方法进行介绍。
本发明实施例提供的虚拟物品的生成方法，可以应用于与互联网相关的客户端对应的服务器，该服务器可以包括台式计算机、便携式计算机、互联网电视、智能移动终端以及可穿戴式智能终端等，在此不作限定，任何可以实现本发明实施例的服务器，均属于本发明实施例的保护范围。
在具体应用中，与互联网相关的客户端可以是多种的。示例性的，与互联网相关的客户端可以是直播客户端，或者社交客户端等等。相应的，虚拟物品具体可以是多种的。举例而言，虚拟物品可以是礼物，挂件等等虚拟物品
如图1所示，本发明一实施例的虚拟物品的生成方法的流程，该方法可以包括如下步骤：
S101，在检测到虚拟物品的生成指令时，获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳。其中，第一图像数据提供第一视频的画面；音频数据提供第一视频的声音；播放时间戳为用于保证第一图像数据和音频数据的内容同步的标识。
为了生成多样化的虚拟物品，可以下发针对不同的虚拟物品的生成指令，相应的，需要获取与生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳，以通过后续步骤S102至S103，生成与生成指令对应的虚拟物品。并且，用于生成不同虚拟物品的第一视频可以不同。
其中，第一视频具体可以包含第一图像数据和音频数据，第一图像数据提供第一视频的画面，音频数据提供第一视频的声音。因此，举例而言，第一图像数据具体可以是第一视频的图像帧队列，音频数据具体可以是第一视频的音频包队列。示例性的，第一图像数据和音频数据的获取方式具体可以包括：利用预设的模型，读取第一视频，得到图像帧队列以及音频包队列，分别作为第一图像数据和音频数据。例如，利用FFMPEG(Fast ForwardMPEG，具有视频采集功能、视频格式转换以及视频抓图等功能的工具)，对第一视频进行读取，从而得到第一图像数据和音频数据。
并且，为了避免第一视频的音画不同步，存在第一视频的播放时间戳，该播放时间戳可以作为第一图像数据和音频数据的播放顺序标签，用于保证播放第一视频时，所展示的第一图像数据和所播放的音频数据的内容同步。因此，可以获取第一视频的播放时间戳，以便后续获得具有音画同步效果的虚拟物品。
S102，按照预设的虚拟物品的外形信息，调整第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品。
其中，预设的虚拟物品的外形信息可以是多种的。示例性的，可以包括预设的虚拟物品的尺寸、颜色、亮度以及形状等等外形信息中的至少一种。相应的，按照预设的虚拟物品的外形信息，对第一图像数据进行的调整，具体可以是：将第一图像数据的外形调整至与预设的虚拟物品的外形信息所对应的外形相同。
并且，为了在后续步骤S103中保证虚拟物品的画面效果与音效同步，可以对调整后的第一图像数据进行转码，以得到具有视频的画面效果的虚拟物品。在具体应用中，对调整后的第一图像数据进行转码的方式可以是多种的。示例性的，可以采用帧间压缩，对调整后的第一图像数据进行转码，或者，可以采用帧内压缩，对调整后的第一图像数据进行转码。任何可以对调整后的第一图像数据进行转码的方式，均可用于本发明，本实施例对此不作限制。
其中，视频的连续前后两个图像帧之间很可能存在具有很大相关性的冗余数据，因此，帧间压缩可以通过比较时间轴上不同图像帧之间的数据实施压缩，提高压缩比，降低对数据处理资源的占用量。帧内压缩在压缩某一图像帧时，仅考虑本图像帧的数据，不考虑本图像帧与相邻图像帧之间的冗余信息，与静态图像的压缩类似，压缩比相对而言较低，对数据处理资源的占用量相对而言较多。在此基础上，对于需要降低占用数据处理资源的情况，例如直播中的礼物生成，采用帧间压缩获得虚拟物品，有利于降低对数据处理资源的占用量。
S103，按照播放时间戳，进行虚拟物品的展示和音频数据的播放。
由于播放时间戳可以保证第一图像数据和音频数据的内容同步，因此，按照播放时间戳展示虚拟物品，以及播放音频数据，可以保证虚拟物品的画面效果与音效同步。
示例性的，按照播放时间戳，进行虚拟物品的展示和音频数据的播放，具体可以包括：将代表虚拟物品的数据，即对调整后的第一图像数据进行转码后得到的数据发送给图像显示装置，以使得图像显示装置从代表虚拟物品的数据中，选择与播放时间戳对应的数据进行展示；并且，同步将音频数据发送给音频输出装置，以使得音频输出装置播放音频数据中与播放时间戳对应的数据。举例而言，在代表虚拟物品的数据中，与播放时间戳T1对应的数据是第0秒至第10秒的视频帧VF0，在音频数据中与播放时间戳T1对应的数据是视频帧VF0匹配的音频包AP0。在图像显示装置开始展示视频帧VF0的同时，音频播放装置可以开始播放音频包AP0。
本发明实施例提供的方案中，服务器在检测到虚拟物品的生成指令时，通过获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳，可以实现按照预设的虚拟物品的外形信息，调整第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；从而按照播放时间戳，展示虚拟物品，以及播放音频数据。由于服务器可以利用第一视频的第一图像数据，生成符合预设的虚拟物品的外形信息的虚拟物品，并将第一视频的音频数据作为虚拟物品的音效。因此，虚拟物品的画面效果与第一图像数据的内容相同，音效与音频数据的内容相同。在此基础上，第一视频的播放时间戳可以保证第一图像数据和音频数据的内容同步。因此，按照播放时间戳展示虚拟物品，以及播放音频数据，可以保证虚拟物品的画面效果与音效同步。可见，通过本方案，可以实现保证生成的虚拟物品的多样化展示效果中，音画同步的效果。
如图2所示，本发明另一实施例的虚拟物品的生成方法的流程，该方法可以包括：
S201，在检测到虚拟物品的生成指令时，获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳。
S201与本发明图1实施例的S101为相同的步骤，在此不再赘述，详见本发明图1实施例的描述。
S202，获取画面颜色为透明颜色的第二视频的第二图像数据；第二图像数据提供第二视频的画面。
在具体应用中，可以在虚拟物品的画面中设置透明的部分，以保证虚拟物品的展示效果更加真实立体。举例而言，对于某一虚拟物品：虚拟礼物汽车而言，可以将汽车本身以外的画面颜色设置为透明颜色，从而展示的虚拟物品的画面内容为汽车本身，不会存在大片黑色或者白色等于汽车本身无关的内容。为此，可以利用与透明颜色相关的数据对虚拟物品中需要具有透明效果的区域进行遮罩。其中，与透明颜色相关的数据可以是画面颜色为透明颜色的第二视频的第二图像数据，第二图像数据提供第二视频的画面，或者，可以是画面颜色为透明颜色的图像。
第二图像数据与第一图像数据均为视频提供画面，区别在于第二图像数据的画面颜色为透明颜色，且提供第二视频的画面。因此，将第二视频的第二图像数据作为与透明颜色相关的数据时，可以利用与获取第一图像数据类似的处理逻辑，只需将处理对象更换为第二视频以及第二图像数据，无需增加单独的处理逻辑。例如，可以利用得到第一图像数据的预设的模型，读取第二视频，得到第二图像数据。
S203，按照预设的虚拟物品的外形信息，调整第一图像数据和第二图像数据，得到调整后的第一图像数据和调整后的第二图像数据。
步骤S203与本发明图1实施例的S102中调整第一图像数据的过程相似，区别在于S203中调整的对象为第一图像数据和第二图像数据。并且，对第一图像数据和第二图像数据进行的调整，可以是并行调整，同时进行两种图像数据的调整，以提高效率；或者，可以是串行调整，先后进行两种图像数据的调整。对于相同内容在此不再赘述，详见本发明图1实施例的描述。
S204，获取用于展示与生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置。
在具体应用中，为了在展示与生成指令对应的虚拟物品的展示区域中完整展示虚拟物品，虚拟物品的画面尺寸通常与该展示区域匹配。因此，对于某一虚拟物品而言，该虚拟物品需要设置为透明颜色的透明部分的位置，相当于展示区域中属于透明区域的透明位置。因此，可以获取用于展示与生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置，用于在后续步骤S205中进行遮罩以得到具有透明颜色区域的遮罩后的图像数据。并且，示例性的，透明位置具体可以是在展示区域的二维坐标系中，透明区域对应的二维坐标。
其中，用于展示与生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置的获取方式可以是多种的。示例性的，展示区域的形状和尺寸固定的，并且虚拟物品在展示区域中的展示位置也可以是预先设置好的，此时，虚拟物品在展示区域中的展示位置可以看作是展示虚拟物品的画面内容本身，不展示虚拟物品的透明部分的位置。因此，可以预先根据虚拟物品的展示位置，以及展示区域的形状和尺寸，将展示区域中非虚拟物品的展示位置的位置，存储为透明位置。相应的，可以直接读取预存的透明位置。或者，示例性的，可以实时读取展示区域的形状和尺寸，以及虚拟物品的展示位置，并根据所读取的数据，从展示区域中确定非虚拟物品的展示位置的位置，作为透明位置。
任何可以对调整后的第一图像数据进行转码的方式，均可用于本发明，本实施例对此不作限制。
S205，利用调整后的第二图像数据，将调整后的第一图像数据中的透明位置遮罩为透明颜色，得到遮罩后的图像数据。
调整后的第二图像数据和调整后的第一图像按像素逐位对应，具有相同的尺寸和形状，并且，调整后的第二图像数据为透明颜色。因此，可以利用调整后的第二图像数据将调整后的第一图像数据中的透明位置遮罩为透明颜色，得到遮罩后的图像数据。在具体应用中，利用调整后的第二图像数据，将调整后的第一图像数据中的透明位置遮罩为透明颜色，得到遮罩后的图像数据的方式，可以是多种的。下面以可选实施例的形式进行具体说明。
在一种可选的实施方式中，上述步骤S205：利用调整后的第二图像数据，将调整后的第一图像数据中的透明位置遮罩为透明颜色，得到遮罩后的图像数据，具体可以包括如下步骤：
对调整后的第二图像数据进行转码，获得遮罩视频；遮罩视频的显示位置为透明位置；
将调整后的第一图像数据进行转码，获得物品视频；物品视频的显示位置为展示区域中除透明位置以外的位置；
将遮罩视频和物品视频进行共同显示，得到遮罩后的图像数据。
遮罩后的图像数据包含遮罩视频和物品视频，其中，遮罩视频是对调整后的第二图像数据进行转码获得的，显示效果为透明颜色；物品视频是对调整后的第一图像数据进行转码获得的，显示效果为虚拟物品本身。因此，可以在用于展示虚拟物品的展示区域的透明位置显示遮罩视频，并在该展示区域中除透明位置以外的位置显示物品视频，且遮罩视频和物品视频是共同显示的，从而在展示区域中除透明位置以外的位置以物品视频显示虚拟物品的画面内容本身，在透明位置以遮罩视频显示透明颜色，得到遮罩后的图像数据。
在具体应用中，可以将遮罩视频和物品视频拷贝给显示模块的缓存，以使得显示模块在用于展示虚拟物品的展示区域中，进行双视频的共同显示。举例而言，在Android(安卓)操作***中，可以将遮罩视频和物品视频拷贝给显示模块的缓存，以使得显示模块在NativeWindow(本地窗口)中，进行双视频的共同显示。
在本可选实施例中，遮罩后的图像数据的获取可以通过对调整后的第二图像和调整后第一图像的转码，以及共同显示实现，无需经过复杂的图像通道填充和渲染过程，因此，具有实现过程相对而言简单的优势，可以提高虚拟物品的生成效率。
在另一种可选的实施方式中，上述步骤S205：利用调整后的第二图像数据，将调整后的第一图像数据中的透明位置遮罩为透明颜色，得到遮罩后的图像数据，具体可以包括如下步骤：
将调整后的第一图像数据的透明位置作为透明通道；
将调整后的第二图像数据中，处于透明位置的像素，填充至透明通道中，得到透明通道数据；
将调整后的第一图像数据中，除处于透明位置的像素以外的像素，作为非透明通道数据；
对第一图像数据中的透明通道数据，以及非透明通道数据进行渲染，得到遮罩后的图像数据。
其中，调整后的第一图像中各个像素在调整后的第一图像数据中的位置，与该像素代表的内容在展示区域中的展示位置对应，展示区域的透明位置可以看作调整后的第一图像数据的透明位置。因此，可以将调整后的第一图像数据的透明位置作为透明通道，以便在后续步骤中为透明通道填充具有透明颜色的像素，实现透明效果。并且，调整后的第二图像数据与调整后的第一图像数据的像素逐位对应，因此，可以将调整后的第二图像数据中，处于透明位置的像素，填充至透明通道中，得到透明通道数据，从而得到包含透明通道和非透明通道的调整后的第一图像数据。在此基础上，为了得到在透明位置具有透明颜色、且能够显示虚拟物品的画面内容的遮罩后的图像数据，可以按照调整后的第一图像数据中像素的分布位置，对透明通道数据和非透明通道数据进行渲染。
示例性的，对调整后的第一图像数据中的透明通道数据，以及非透明通道数据进行渲染，得到遮罩后的图像数据，具体可以包括：将调整后的第一图像数据中的透明通道数据，以及非透明通道数据生成Texture(纹理)数据，利用OpenGL(Open Graphics Library，开放图形库)渲染Texture数据，得到遮罩后的图像数据。另外，进行渲染的执行主体具体可以是GPU(Graphics Processing Unit，图像处理器)，以提高遮罩后的图像的获取效率。
在本可选实施例中，遮罩后的图像数据的获取是将调整后的第二图像的像素填充至调整后的第一图像的透明通道中，从而对调整后的第一图像中的透明通道数据，以及非透明通道数据进行渲染，得到遮罩后的图像数据。由于可以针对性的渲染具有不同显示效果的透明通道数据和非透明通道数据，因此，与不经过渲染的遮罩后的图像数据的获取方式相比，相当于对进行二次渲染，可以提升后续基于遮罩后的图像数据得到的虚拟物品的显示质量。
S206，基于遮罩后的图像数据，获得虚拟物品。
在具体应用，基于遮罩后的图像数据，获得虚拟物品的方式，具体可以是多种的。示例性的，当遮罩后的图像数据为填充调整后的第二图像的透明通道得到的时，可以对遮罩后的图像数据进行转码，获得虚拟物品。此时，步骤S206与本发明图1实施例的S102中对调整后的第一图像数据进行转码，获得虚拟物品的过程相似，区别在于S206中转码的对象为遮罩后的图像数据。对于相同内容在此不再赘述，详见本发明图1实施例的描述。或者，示例性的，当遮罩后的图像数据为上述步骤S205另一可选实施例中的遮罩视频和物品视频进行共同显示得到的时，可以直接将遮罩后的图像数据作为虚拟物品。
任何能够基于遮罩后的图像数据，获得虚拟物品的方式均可用于本发明，本实施例对此不作限制。
S207，按照播放时间戳，进行虚拟物品的展示和音频数据的播放。
S207与本发明图1实施例的S103为相同的步骤，在此不再赘述，详见本发明图1实施例的描述。
在上述图2实施例中，通过获取第二视频的第二图像数据，在不增加单独的对第二图像的处理逻辑的情况下，对调整后的第一图像数据的透明位置进行遮罩，得到遮罩后的图像，进而基于遮罩后的图像，获得虚拟物品，从而实现虚拟物品的透明位置的透明效果。在展示该虚拟物品时，可以提高虚拟物品的立体感和真实感。
可选的，在上述步骤S206：基于遮罩后的图像数据，获得虚拟物品之前，本发明实施例提供的虚拟物品的生成方法，还可以包括如下步骤：
获取第三图像数据，以及第三图像数据与遮罩后的图像数据之间的位置关系；第三图像数据用于作为虚拟物品的特定元素；
按照位置关系，在遮罩后的图像数据中添加第三图像数据，得到特效图像数据；
相应的，上述步骤S206：基于遮罩后的图像数据，获得虚拟物品，具体可以包括：对特效图像数据进行转码，获得虚拟物品。
其中，第三图像数据具体可以为矢量图像。虚拟物品的特定元素可以是多种的。示例性的，特定元素可以是用户头像、用户输入的文字以及特效等等。第三图像数据与遮罩后的图像数据之间的位置关系的获取可以是多种的。示例性的，该位置关系可以是固定的，因此，可以直接读取预存的位置关系。举例而言，位置关系可以是在遮罩后的图像数据的左上角，或者右上角等等，预先存储该位置关系，以便在获取特效图像数据时读取。或者，示例性的，该位置可以是从预设的第三图像数据的种类与添加位置的对应关系中，查找所获取的第三图像的种类对应的添加位置，作为第三图像数据与遮罩后的图像数据之间的位置关系。举例而言，第三图像数据的种类为用户信息时，如用户头像和用户输入的文字时，对应的添加位置可以为透明位置，或者虚拟礼物的边界位置等等不遮挡虚拟礼物的位置。第三图像数据的种类为特效时，如下雪特效时，对应的添加位置可以为透明位置或者不遮挡虚拟礼物的指定位置。
任何第三图像数据与遮罩后的图像数据之间的位置关系的获取方式，均可用于本发明，本实施例对此不作限制。
在此基础上，由于位置关系能够表明第三图像数据在遮罩后的图像数据中的添加位置，因此，按照位置关系，在遮罩后的图像数据中添加第三图像数据，可以得到特效图像数据。具体的，可以根据位置关系所表明的添加位置，将第三图像数据添加在遮罩后的图像数据的该添加位置处，得到特效图像数据。举例而言，第三图像数据为用户头像，位置关系为第三图像数据在遮罩后的图像数据的左上角。因此，可以在遮罩后的图像数据的左上角添加用户头像，得到具有透明效果以及包含用户头像的特效图像数据。
相应的，需要对特效图像数据进行转码，获得虚拟物品。本步骤与本发明图1实施例的S102中对调整后的第一图像数据进行转码，获得虚拟物品的过程相似，区别在于本步骤中转码的对象为特效图像数据。对于相同内容在此不再赘述，详见本发明图1实施例的描述。
在本可选实施例中，通过为虚拟物品添加特定元素，可以增加虚拟物品所表达的内容的丰富程度，以及提高展示效果的多样化程度。并且，特定元素采用第三图像数据的形式，因此，在同样为图像数据的遮罩后的图像数据中添加第三图像数据的形式的特定元素，相对而言较为便捷。
可选的，上述位置关系为第二像素矩阵的元素与第一像素矩阵的元素之间的对应关系；第二像素矩阵为第三图像数据对应的像素矩阵；第一像素矩阵为遮罩后的图像数据对应的像素矩阵；
相应的，上述按照位置关系，在遮罩后的图像数据中添加第三图像数据，得到特效图像数据的步骤，具体可以包括：
分别将遮罩后的图像数据和第三图像数据，转化为第一矩阵和第二矩阵；
在第一矩阵中，按照位置关系，添加第二矩阵中的元素，获得第三矩阵；
将第三矩阵转化为图像数据，得到特效图像数据。
其中，第三图像数据对应的第二像素矩阵，是将第三图像数据的每个像素作为矩阵的元素，并将第三图像数据的每个像素在第三图像数据中的位置作为矩阵的元素在矩阵中的位置，得到的矩阵。类似的，第一像素矩阵，是将遮罩后的图像数据的每个像素作为矩阵的元素，并将遮罩后的图像数据的每个像素在遮罩后的图像数据中的位置作为元素在矩阵中的位置，得到的矩阵。因此，可以将第二像素矩阵的元素与第一像素矩阵的元素之间的对应关系作为第三图像数据和遮罩后的图像数据之间的位置关系。
在此基础上，为了按照位置关系，在遮罩后的图像数据中添加第三图像数据，得到特效图像数据，需要将遮罩后的图像数据转化为第一矩阵，将第三图像数据转化为第二矩阵，从而在第一矩阵中，按照位置关系，添加第二矩阵中的元素，获得第三矩阵；以及将第三矩阵转化为图像数据，得到特效图像数据。示例性的，位置关系为第二矩阵中的元素S11至S36，逐位对应第一矩阵中左上角的元素F11至F36，因此，可以在第一矩阵中元素F11至F36元素的位置处添加第二矩阵中的元素S11至S36，获得第三矩阵。
在本可选实施例中，作为特定元素的第三图像数据是按像素位置添加的，与传统的以绘画的方式添加相比，相对而言降低了添加时的复杂程度和需要处理的数据量，可以减少对数据处理资源的消耗。
相应于上述方法实施例，本发明一实施例还提供了虚拟物品的生成装置。
如图3所示，本发明一实施例提供的虚拟物品的生成装置，应用于服务器，该装置可以包括：
数据获取模块301，用于在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；
虚拟物品生成模块302，用于按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；
虚拟物品展示模块303，用于按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。
本发明实施例提供的方案中，服务器在检测到虚拟物品的生成指令时，通过获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳，可以实现按照预设的虚拟物品的外形信息，调整第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；从而按照播放时间戳，展示虚拟物品，以及播放音频数据。由于服务器可以利用第一视频的第一图像数据，生成符合预设的虚拟物品的外形信息的虚拟物品，并将第一视频的音频数据作为虚拟物品的音效。因此，虚拟物品的画面效果与第一图像数据的内容相同，音效与音频数据的内容相同。在此基础上，第一视频的播放时间戳可以保证第一图像数据和音频数据的内容同步。因此，按照播放时间戳展示虚拟物品，以及播放音频数据，可以保证虚拟物品的画面效果与音效同步。可见，通过本方案，可以实现保证生成的虚拟物品的多样化展示效果中，音画同步的效果。
如图4所示，本发明另一实施例提供的虚拟物品的生成装置，应用于服务器，该装置可以包括：
数据获取模块401，用于在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；获取画面颜色为透明颜色的第二视频的第二图像数据；所述第二图像数据提供所述第二视频的画面；
虚拟物品生成模块402，包括：遮罩子模块4021和虚拟物品获取子模块4022；
所述遮罩子模块4021，用于按照预设的虚拟物品的外形信息，调整所述第一图像数据和所述第二图像数据，得到调整后的第一图像数据和调整后的第二图像数据；获取用于展示与所述生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置；利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据；
所述虚拟物品获取子模块4022，用于基于所述遮罩后的图像数据，获得虚拟物品；
虚拟物品展示模块403，用于按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。
可选的，所述遮罩子模块4021，具体用于：
对所述调整后的第二图像数据进行转码，获得遮罩视频；所述遮罩视频的显示位置为所述透明位置；
将所述调整后的第一图像数据进行转码，获得物品视频；所述物品视频的显示位置为所述展示区域中除所述透明位置以外的位置；
将所述遮罩视频和所述物品视频共同显示，得到遮罩后的图像数据。
可选的，所述遮罩子模块4021，具体用于：
将所述调整后的第一图像数据的所述透明位置作为透明通道；
将所述调整后的第二图像数据中，处于所述透明位置的像素，填充至所述透明通道中，得到透明通道数据；
将所述调整后的第一图像数据中，除处于所述透明位置的像素以外的像素，作为非透明通道数据；
对所述调整后的第一图像数据中的所述透明通道数据，以及所述非透明通道数据进行渲染，得到遮罩后的图像数据。
可选的，所述数据获取模块401，具体用于：
获取第三图像数据，以及所述第三图像数据与所述遮罩后的图像数据之间的位置关系；所述第三图像数据用于作为虚拟物品的特定元素；
按照所述位置关系，在所述遮罩后的图像数据中添加所述第三图像数据，得到特效图像数据；
相应的，所述虚拟物品获取子模块4022，具体用于：
对所述特效图像数据进行转码，获得虚拟物品。
可选的，所述位置关系为第二像素矩阵的元素与第一像素矩阵的元素之间的对应关系；所述第二像素矩阵为所述第三图像数据对应的像素矩阵；所述第一像素矩阵为所述遮罩后的图像数据对应的像素矩阵；
所述数据获取模块401，具体用于：
分别将所述遮罩后的图像数据和所述第三图像数据，转化为第一矩阵和第二矩阵；
在所述第一矩阵中，按照所述位置关系，添加所述第二矩阵中的元素，获得第三矩阵；
将所述第三矩阵转化为图像数据，得到特效图像数据。
相应于上述实施例，本发明实施例还提供了一种电子设备，如图5所示，该设备可以包括：
处理器501、通信接口502、存储器503和通信总线504，其中，处理器501，通信接口502，存储器通503过通信总线504完成相互间的通信；
存储器503，用于存放计算机程序；
处理器501，用于执行上述存储器503上所存放的计算机程序时，实现上述实施例中任一虚拟物品的生成方法的步骤。
可以理解的是，本发明图5实施例中的电子设备具体可以为与互联网相关的客户端所对应的服务器。
本发明实施例提供的方案中，服务器在检测到虚拟物品的生成指令时，通过获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳，可以实现按照预设的虚拟物品的外形信息，调整第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；从而按照播放时间戳，展示虚拟物品，以及播放音频数据。由于服务器可以利用第一视频的第一图像数据，生成符合预设的虚拟物品的外形信息的虚拟物品，并将第一视频的音频数据作为虚拟物品的音效。因此，虚拟物品的画面效果与第一图像数据的内容相同，音效与音频数据的内容相同。在此基础上，第一视频的播放时间戳可以保证第一图像数据和音频数据的内容同步。因此，按照播放时间戳展示虚拟物品，以及播放音频数据，可以保证虚拟物品的画面效果与音效同步。可见，通过本方案，可以实现保证生成的虚拟物品的多样化展示效果中，音画同步的效果。
上述存储器可以包括RAM(Random Access Memory，随机存取存储器)，也可以包括NVM(Non-Volatile Memory，非易失性存储器)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离于上述处理器的存储装置。
上述处理器可以是通用处理器，包括CPU(Central Processing Unit，中央处理器)、NP(Network Processor，网络处理器)等；还可以是DSP(Digital Signal Processor，数字信号处理器)、ASIC(Application Specific Integrated Circuit，专用集成电路)、FPGA(Field-Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本发明一实施例提供的计算机可读存储介质，包含于电子设备，该计算机可读存储介质内存储有计算机程序，该计算机程序被处理器执行时，实现上述实施例中任一虚拟物品的生成方法的步骤。
本发明实施例提供的方案中，服务器在检测到虚拟物品的生成指令时，通过获取生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳，可以实现按照预设的虚拟物品的外形信息，调整第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；从而按照播放时间戳，展示虚拟物品，以及播放音频数据。由于服务器可以利用第一视频的第一图像数据，生成符合预设的虚拟物品的外形信息的虚拟物品，并将第一视频的音频数据作为虚拟物品的音效。因此，虚拟物品的画面效果与第一图像数据的内容相同，音效与音频数据的内容相同。在此基础上，第一视频的播放时间戳可以保证第一图像数据和音频数据的内容同步。因此，按照播放时间戳展示虚拟物品，以及播放音频数据，可以保证虚拟物品的画面效果与音效同步。可见，通过本方案，可以实现保证生成的虚拟物品的多样化展示效果中，音画同步的效果。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的虚拟物品的生成方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、DSL(Digital Subscriber Line，数字运维人员线)或无线(例如：红外线、无线电、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如：DVD(Digital Versatile Disc，数字通用光盘))、或者半导体介质(例如：SSD(Solid StateDisk，固态硬盘))等。
在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置和电子设备实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。
Claims (10)
1.一种虚拟物品的生成方法，其特征在于，应用于服务器，所述方法包括：
在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；
按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；
按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。
2.根据权利要求1所述的方法，其特征在于，在所述按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品的步骤之前，所述方法还包括：
获取画面颜色为透明颜色的第二视频的第二图像数据；所述第二图像数据提供所述第二视频的画面；
所述按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，生成虚拟物品的步骤，包括：
按照预设的虚拟物品的外形信息，调整所述第一图像数据和所述第二图像数据，得到调整后的第一图像数据和调整后的第二图像数据；
获取用于展示与所述生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置；
利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据；
基于所述遮罩后的图像数据，获得虚拟物品。
3.根据权利要求2所述的方法，其特征在于，所述利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据步骤，包括：
对所述调整后的第二图像数据进行转码，获得遮罩视频；所述遮罩视频的显示位置为所述透明位置；
将所述调整后的第一图像数据进行转码，获得物品视频；所述物品视频的显示位置为所述展示区域中除所述透明位置以外的位置；
将所述遮罩视频和所述物品视频设置为共同显示，得到遮罩后的图像数据。
4.根据权利要求2所述的方法，其特征在于，所述利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据的步骤，包括：
将所述调整后的第一图像数据的所述透明位置作为透明通道；
将所述调整后的第二图像数据中，处于所述透明位置的像素，填充至所述透明通道中，得到透明通道数据；
将所述调整后的第一图像数据中，除处于所述透明位置的像素以外的像素，作为非透明通道数据；
对所述调整后的第一图像数据中的所述透明通道数据，以及所述非透明通道数据进行渲染，得到遮罩后的图像数据。
5.一种虚拟物品的生成装置，其特征在于，应用于服务器，所述装置包括：
数据获取模块，用于在检测到虚拟物品的生成指令时，获取所述生成指令对应的第一视频的第一图像数据、音频数据以及播放时间戳；其中，所述第一图像数据提供所述第一视频的画面；所述音频数据提供所述第一视频的声音；所述播放时间戳为用于保证所述第一图像数据和所述音频数据的内容同步的标识；
虚拟物品生成模块，用于按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品；
虚拟物品展示模块，用于按照所述播放时间戳，进行所述虚拟物品的展示和所述音频数据的播放。
6.根据权利要求5所述的装置，其特征在于，所述数据获取模块，具体用于：
在所述按照预设的虚拟物品的外形信息，调整所述第一图像数据，并对调整后的第一图像数据进行转码，获得虚拟物品之前，获取画面颜色为透明颜色的第二视频的第二图像数据；所述第二图像数据提供所述第二视频的画面；
所述虚拟物品生成模块，包括：遮罩子模块和虚拟物品获取子模块；
所述遮罩子模块，用于按照预设的虚拟物品的外形信息，调整所述第一图像数据和所述第二图像数据，得到调整后的第一图像数据和调整后的第二图像数据；获取用于展示与所述生成指令对应的虚拟物品的展示区域中，属于透明区域的透明位置；利用所述调整后的第二图像数据，将所述调整后的第一图像数据中的所述透明位置遮罩为透明颜色，得到遮罩后的图像数据；
所述虚拟物品获取子模块，用于基于所述遮罩后的图像数据，获得虚拟物品。
7.根据权利要求6所述的装置，其特征在于，所述遮罩子模块，具体用于：
对所述调整后的第二图像数据进行转码，获得遮罩视频；所述遮罩视频的显示位置为所述透明位置；
将所述调整后的第一图像数据进行转码，获得物品视频；所述物品视频的显示位置为所述展示区域中除所述透明位置以外的位置；
将所述遮罩视频和所述物品视频共同显示，得到遮罩后的图像数据。
8.根据权利要求6所述的装置，其特征在于，所述遮罩子模块，具体用于：
将所述调整后的第一图像数据的所述透明位置作为透明通道；
将所述调整后的第二图像数据中，处于所述透明位置的像素，填充至所述透明通道中，得到透明通道数据；
将所述调整后的第一图像数据中，除处于所述透明位置的像素以外的像素，作为非透明通道数据；
对所述调整后的第一图像数据中的所述透明通道数据，以及所述非透明通道数据进行渲染，得到遮罩后的图像数据。
9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序，实现如权利要求1-4任一所述的方法步骤。
10.一种计算机可读存储介质，其特征在于，所述存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-4任一所述的方法步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910578523.7A CN110213640B (zh) | 2019-06-28 | 2019-06-28 | 虚拟物品的生成方法、装置及设备 |
| PCT/CN2020/077034 WO2020258907A1 (zh) | 2019-06-28 | 2020-02-27 | 虚拟物品的生成方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910578523.7A CN110213640B (zh) | 2019-06-28 | 2019-06-28 | 虚拟物品的生成方法、装置及设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110213640A true CN110213640A (zh) | 2019-09-06 |
| CN110213640B CN110213640B (zh) | 2021-05-14 |
Family
ID=67795510
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910578523.7A Active CN110213640B (zh) | 2019-06-28 | 2019-06-28 | 虚拟物品的生成方法、装置及设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN110213640B (zh) |
| WO (1) | WO2020258907A1 (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020258907A1 (zh) * | 2019-06-28 | 2020-12-30 | 香港乐蜜有限公司 | 虚拟物品的生成方法、装置及设备 |
| CN112348969A (zh) * | 2020-11-06 | 2021-02-09 | 北京市商汤科技开发有限公司 | 增强现实场景下的展示方法、装置、电子设备及存储介质 |
| WO2022271086A1 (en) * | 2021-06-21 | 2022-12-29 | Lemon Inc. | Rendering virtual articles of clothing based on audio characteristics |
Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101950405A (zh) * | 2010-08-10 | 2011-01-19 | 浙江大学 | 一种基于视频内容的水印添加方法 |
| CN102289339A (zh) * | 2010-06-21 | 2011-12-21 | 腾讯科技（深圳）有限公司 | 一种显示表情信息的方法及装置 |
| CN102663785A (zh) * | 2012-03-29 | 2012-09-12 | 上海华勤通讯技术有限公司 | 移动终端及其图像处理方法 |
| CN104619258A (zh) * | 2012-09-13 | 2015-05-13 | 富士胶片株式会社 | 三维图像显示装置、方法及程序 |
| CN104995662A (zh) * | 2013-03-20 | 2015-10-21 | 英特尔公司 | 基于化身的传输协议、图标生成和玩偶动画 |
| CN105338410A (zh) * | 2014-07-07 | 2016-02-17 | 乐视网信息技术（北京）股份有限公司 | 视频的弹幕显示方法及装置 |
| KR20160064328A (ko) * | 2014-11-27 | 2016-06-08 | 정승화 | 모션 카툰 시스템을 위한 특수 효과 지원 장치 및 방법 |
| CN106303653A (zh) * | 2016-08-12 | 2017-01-04 | 乐视控股（北京）有限公司 | 一种视频显示方法和装置 |
| CN107027046A (zh) * | 2017-04-13 | 2017-08-08 | 广州华多网络科技有限公司 | 辅助直播的音视频处理方法及装置 |
| CN107169872A (zh) * | 2017-05-09 | 2017-09-15 | 北京龙杯信息技术有限公司 | 用于生成虚拟礼物的方法、存储设备和终端 |
| CN108093307A (zh) * | 2017-12-29 | 2018-05-29 | 广州酷狗计算机科技有限公司 | 获取播放文件的方法和*** |
| CN108174227A (zh) * | 2017-12-27 | 2018-06-15 | 广州酷狗计算机科技有限公司 | 虚拟物品的显示方法、装置及存储介质 |
| WO2018116468A1 (ja) * | 2016-12-22 | 2018-06-28 | マクセル株式会社 | 投写型映像表示装置とそのための映像表示方法 |
| CN109191549A (zh) * | 2018-11-14 | 2019-01-11 | 广州酷狗计算机科技有限公司 | 显示动画的方法及装置 |
| CN109300180A (zh) * | 2018-10-18 | 2019-02-01 | 看见故事（苏州）影视文化发展有限公司 | 一种3d动画制作方法及计算制作装置 |
| CN109413338A (zh) * | 2018-09-28 | 2019-03-01 | 北京戏精科技有限公司 | 一种实时图像处理的方法及*** |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101005609B (zh) * | 2006-01-21 | 2010-11-03 | 腾讯科技（深圳）有限公司 | 生成互动视频图像的方法及*** |
| CN106713988A (zh) * | 2016-12-09 | 2017-05-24 | 福建星网视易信息***有限公司 | 一种对虚拟场景直播进行美颜处理的方法及*** |
| CN108769826A (zh) * | 2018-06-22 | 2018-11-06 | 广州酷狗计算机科技有限公司 | 直播媒体流获取方法、装置、终端及存储介质 |
| CN110213640B (zh) * | 2019-06-28 | 2021-05-14 | 香港乐蜜有限公司 | 虚拟物品的生成方法、装置及设备 |
-
2019
- 2019-06-28 CN CN201910578523.7A patent/CN110213640B/zh active Active
-
2020
- 2020-02-27 WO PCT/CN2020/077034 patent/WO2020258907A1/zh active Application Filing
Patent Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102289339A (zh) * | 2010-06-21 | 2011-12-21 | 腾讯科技（深圳）有限公司 | 一种显示表情信息的方法及装置 |
| CN101950405A (zh) * | 2010-08-10 | 2011-01-19 | 浙江大学 | 一种基于视频内容的水印添加方法 |
| CN102663785A (zh) * | 2012-03-29 | 2012-09-12 | 上海华勤通讯技术有限公司 | 移动终端及其图像处理方法 |
| CN104619258A (zh) * | 2012-09-13 | 2015-05-13 | 富士胶片株式会社 | 三维图像显示装置、方法及程序 |
| CN104995662A (zh) * | 2013-03-20 | 2015-10-21 | 英特尔公司 | 基于化身的传输协议、图标生成和玩偶动画 |
| CN105338410A (zh) * | 2014-07-07 | 2016-02-17 | 乐视网信息技术（北京）股份有限公司 | 视频的弹幕显示方法及装置 |
| KR20160064328A (ko) * | 2014-11-27 | 2016-06-08 | 정승화 | 모션 카툰 시스템을 위한 특수 효과 지원 장치 및 방법 |
| CN106303653A (zh) * | 2016-08-12 | 2017-01-04 | 乐视控股（北京）有限公司 | 一种视频显示方法和装置 |
| WO2018116468A1 (ja) * | 2016-12-22 | 2018-06-28 | マクセル株式会社 | 投写型映像表示装置とそのための映像表示方法 |
| CN107027046A (zh) * | 2017-04-13 | 2017-08-08 | 广州华多网络科技有限公司 | 辅助直播的音视频处理方法及装置 |
| CN107169872A (zh) * | 2017-05-09 | 2017-09-15 | 北京龙杯信息技术有限公司 | 用于生成虚拟礼物的方法、存储设备和终端 |
| CN108174227A (zh) * | 2017-12-27 | 2018-06-15 | 广州酷狗计算机科技有限公司 | 虚拟物品的显示方法、装置及存储介质 |
| CN108093307A (zh) * | 2017-12-29 | 2018-05-29 | 广州酷狗计算机科技有限公司 | 获取播放文件的方法和*** |
| CN109413338A (zh) * | 2018-09-28 | 2019-03-01 | 北京戏精科技有限公司 | 一种实时图像处理的方法及*** |
| CN109300180A (zh) * | 2018-10-18 | 2019-02-01 | 看见故事（苏州）影视文化发展有限公司 | 一种3d动画制作方法及计算制作装置 |
| CN109191549A (zh) * | 2018-11-14 | 2019-01-11 | 广州酷狗计算机科技有限公司 | 显示动画的方法及装置 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020258907A1 (zh) * | 2019-06-28 | 2020-12-30 | 香港乐蜜有限公司 | 虚拟物品的生成方法、装置及设备 |
| CN112348969A (zh) * | 2020-11-06 | 2021-02-09 | 北京市商汤科技开发有限公司 | 增强现实场景下的展示方法、装置、电子设备及存储介质 |
| CN112348969B (zh) * | 2020-11-06 | 2023-04-25 | 北京市商汤科技开发有限公司 | 增强现实场景下的展示方法、装置、电子设备及存储介质 |
| WO2022271086A1 (en) * | 2021-06-21 | 2022-12-29 | Lemon Inc. | Rendering virtual articles of clothing based on audio characteristics |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110213640B (zh) | 2021-05-14 |
| WO2020258907A1 (zh) | 2020-12-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102560187B1 (ko) | 3차원(＂3d＂) 장면의 2차원(＂2d＂) 캡처 이미지를 기반으로 하는 가상 현실 콘텐츠를 렌더링하기 위한 방법 및 시스템 | |
| CN110351592B (zh) | 动画呈现方法、装置、计算机设备和存储介质 | |
| CN110536151A (zh) | 虚拟礼物特效的合成方法和装置、直播*** | |
| CN110475150A (zh) | 虚拟礼物特效的渲染方法和装置、直播*** | |
| JP4481166B2 (ja) | ユーザによる合成画像およびビデオ画像のリアルタイムのミキシングを可能にする方法およびシステム | |
| CN106713988A (zh) | 一种对虚拟场景直播进行美颜处理的方法及*** | |
| CN110493630A (zh) | 虚拟礼物特效的处理方法和装置、直播*** | |
| CN108108140B (zh) | 一种多屏协同显示方法及存储装置及支持3d显示的设备 | |
| WO2022048097A1 (zh) | 一种基于多显卡的单帧画面实时渲染方法 | |
| CN110213640A (zh) | 虚拟物品的生成方法、装置及设备 | |
| CN111669646A (zh) | 透明视频的播放方法、装置、设备及介质 | |
| US20080012988A1 (en) | System and method for virtual content placement | |
| CN115908644A (zh) | 动画处理方法和装置 | |
| US20120170833A1 (en) | Multi-view image generating method and apparatus | |
| CN108235055A (zh) | Ar场景中透明视频实现方法及设备 | |
| US11468629B2 (en) | Methods and apparatus for handling occlusions in split rendering | |
| US11989814B2 (en) | Image processing method and apparatus, electronic device, and storage medium | |
| CN105554416A (zh) | 一种基于fpga的高清视频淡入淡出处理***及方法 | |
| CN105578172B (zh) | 基于Unity3D引擎的裸眼3D视频显示方法 | |
| CN113781660A (zh) | 一种用于直播间在线渲染加工虚拟场景的方法及装置 | |
| CN103685976A (zh) | 提高led显示屏在录制节目中显示质量的方法和设备 | |
| CN110012336A (zh) | 直播界面的图片配置方法、终端及装置 | |
| KR20230130756A (ko) | 셰이딩 아틀라스를 사용한 분할 렌더링에서의 에러 은닉 | |
| US20200221165A1 (en) | Systems and methods for efficient video content transition effects generation | |
| KR20200001750A (ko) | 특정 영역의 화질을 개선하기 위해 복수의 가상현실영상을 재생하는 가상현실영상재생장치 및 가상현실영상생성방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20210527 Address after: 25, 5th floor, shuangjingfang office building, 3 frisha street, Singapore Patentee after: Zhuomi Private Ltd. Address before: Room 1101, Santai Commercial Building, 139 Connaught Road, Hong Kong, China Patentee before: HONG KONG LIVE.ME Corp.,Ltd. |
|
| TR01 | Transfer of patent right |