CN107438200A - 直播间礼物展示的方法和装置 - Google Patents
直播间礼物展示的方法和装置 Download PDFInfo
- Publication number
- CN107438200A CN107438200A CN201710804566.3A CN201710804566A CN107438200A CN 107438200 A CN107438200 A CN 107438200A CN 201710804566 A CN201710804566 A CN 201710804566A CN 107438200 A CN107438200 A CN 107438200A
- Authority
- CN
- China
- Prior art keywords
- present
- video
- frame
- displaying
- application program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 230000001815 facial effect Effects 0.000 claims abstract description 95
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 30
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 30
- 230000005540 biological transmission Effects 0.000 claims description 12
- 238000005516 engineering process Methods 0.000 abstract description 6
- 230000001747 exhibiting effect Effects 0.000 abstract description 6
- 238000012545 processing Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000006854 communication Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 241000282326 Felis catus Species 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25875—Management of end-user data involving end-user authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4782—Web browsing, e.g. WebTV
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Security & Cryptography (AREA)
- Computer Graphics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种直播间礼物展示的方法和装置，属于计算机技术领域。所述方法包括：接收服务器发送的礼物赠送通知，其中，所述礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，所述目标礼物为萌脸礼物，根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息，确定当前采集到的视频流的视频帧中人脸图像的位置信息，根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成，向所述服务器发送合成后的视频流。采用本发明，提供了一种萌脸礼物的展示方法。
Description
技术领域
本发明涉及计算机技术领域，特别涉及一种直播间礼物展示的方法和装置。
背景技术
随着计算机技术和网络技术的发展，网络直播得到了广泛的普及，用户可以登录网络直播的应用程序，进入感兴趣的直播间，观看主播的直播节目，看到喜欢的主播还可以为主播送礼物。
现有技术中，礼物一般包括普通礼物和萌脸礼物，普通礼物指物品类的礼物，如游艇、鲜花等，萌脸礼物指与人脸图像有关的礼物，如胡须、嘴唇等，然而现有技术中仅针对普通礼物给出了展示方法，并没有提供萌脸礼物的展示方法。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种直播间礼物展示的方法和装置。所述技术方案如下：
第一方面，提供了一种直播间礼物展示的方法，所述方法包括：
接收服务器发送的礼物赠送通知，其中，所述礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，所述目标礼物为萌脸礼物；
根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
确定当前采集到的视频流的视频帧中人脸图像的位置信息；
根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
向所述服务器发送合成后的视频流。
可选的，所述接收服务器发送的礼物赠送通知，包括：通过网页直播应用程序，接收服务器发送的礼物赠送通知；通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知；
所述根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息，包括：通过所述音视频采集应用程序根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
所述确定当前采集到的视频流的视频帧中人脸图像的位置信息，包括：通过所述音视频采集应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息；
所述根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成，包括：通过所述音视频采集应用程序根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
所述向所述服务器发送合成后的视频流，包括：通过所述音视频采集应用程序向所述服务器发送合成后的视频流。
可选的，所述通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知，包括：
通过所述网页直播应用程序向flash插件发送礼物赠送通知；
通过所述flash插件向所述音视频采集应用程序发送礼物赠送通知。
可选的，所述方法还包括：
通过所述网页直播应用程序，将所述目标礼物的礼物标识，添加至礼物展示队列的最前面。
这样，可以及时的播放萌脸礼物。
可选的，所方法还包括：
当距离所述礼物动画数据中第一帧动画与视频帧中人脸图像的合成时间的时长达到所述展示时长时，通过所述音视频采集应用程序在向所述服务器发送的视频流中携带播放结束通知，并且向所述flash插件发送播放结束通知；
当通过所述flash插件接收到所述播放结束通知时，播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
可选的，所述方法还包括：
当通过所述flash插件接收到礼物赠送通知之后的预设时长内未通过所述flash插件接收到所述音视频采集应用程序发送的播放结束通知时，向所述服务器发送播放结束通知，并播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画，其中，所述预设时长大于展示时长。
这样，可以降低礼物展示的延迟。
第二方面，提供了一种直播间礼物展示的装置，所述装置包括：
接收模块，用于接收服务器发送的礼物赠送通知，其中，所述礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，所述目标礼物为萌脸礼物；
获取模块，用于根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
确定模块，用于确定当前采集到的视频流的视频帧中人脸图像的位置信息；
合成模块，用于根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
发送模块，用于向所述服务器发送合成后的视频流。
可选的，所述接收模块包括：
接收子模块，用于通过网页直播应用程序，接收服务器发送的礼物赠送通知；
发送子模块，用于通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知；
所述获取模块，用于通过所述音视频采集应用程序根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
所述确定模块，用于通过所述音视频采集应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息；
所述合成模块，用于通过所述音视频采集应用程序根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
所述发送模块，用于通过所述音视频采集应用程序向所述服务器发送合成后的视频流。
可选的，所述发送子模块，用于：
通过所述网页直播应用程序向flash插件发送礼物赠送通知；
通过所述flash插件向所述音视频采集应用程序发送礼物赠送通知。
可选的，所述装置还包括：
添加模块，用于通过所述网页直播应用程序，将所述目标礼物的礼物标识，添加至礼物展示队列的最前面。
可选的，所发送模块，还用于：
当距离所述礼物动画数据中第一帧动画与视频帧中人脸图像的合成时间的时长达到所述展示时长时，通过所述音视频采集应用程序在向所述服务器发送的视频流中携带播放结束通知，并且向所述flash插件发送播放结束通知；
所述装置还包括：
播放模块，用于当通过所述flash插件接收到所述播放结束通知时，播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
可选的，所述发送模块，还用于：
当通过所述flash插件接收到礼物赠送通知之后的预设时长内未通过所述flash插件接收到所述音视频采集应用程序发送的播放结束通知时，向所述服务器发送播放结束通知；
所述播放模块，还用于播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画，其中，所述预设时长大于展示时长。
本发明实施例提供的技术方案带来的有益效果是：
本发明实施例中，接收服务器发送的礼物赠送通知，其中，礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，目标礼物为萌脸礼物，根据展示内容链接，获取目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息，确定当前采集到的视频流的视频帧中人脸图像的位置信息，根据视频帧中人脸图像的位置信息、相对展示位置信息和展示时长，将礼物动画数据中的各帧动画按照播放顺序分别与视频帧以及视频帧之后的视频帧中的人脸图像进行合成，向服务器发送合成后的视频流。这样，不仅给出了萌脸礼物的展示方法，而且将萌脸礼物与视频帧中的人脸图像进行合成，可以达到萌脸礼物的展示效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种直播间礼物展示的方法流程图；
图2是本发明实施例提供的一种萌脸礼物的展示示意图；
图3是本发明实施例提供的一种礼物展示队列的示意图；
图4是本发明实施例提供的一种直播间礼物展示的方法流程图；
图5是本发明实施例提供的一种直播间礼物展示的装置结构示意图；
图6是本发明实施例提供的一种直播间礼物展示的装置结构示意图；
图7是本发明实施例提供的一种直播间礼物展示的装置结构示意图；
图8是本发明实施例提供的一种直播间礼物展示的装置结构示意图；
图9是本发明实施例提供的一种终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
本发明实施例提供了一种直播间礼物展示的方法，该方法的执行主体为主播终端，即主播在直播时所使用的终端。其中，主播终端可以是手机、电脑等，该主播终端中可以设置有处理器、存储器、收发器、视频采集部件和音频采集部件等，处理器可以用于直播间礼物展示的处理，存储器可以用于直播间礼物展示过程中需要的数据以及产生的数据，收发器可以用于接收以及发送消息等，视频采集部件可以用于采集视频数据，视频采集部件可以是摄像头，音频采集部件可以用于录制音频数据，音频采集部件可以是麦克风。主播终端中还可以设置有屏幕等输入输出设备，屏幕可以用于显示直播视频播放界面等。本实施例中以主播终端为电脑为例，进行方案的详细描述，其它情况与之类似，本实施例不再累述。
在进行实施前，首先介绍一下主播在直播间直播的过程，以及观众观看主播直播的处理，主播想要进行直播，可以在网页直播应用程序或直播应用程序的主界面中输入自己的账户(后续可以成为主播账户)和密码进行登录，然后点击主界面中开播选项，主播终端则会接收到直播选项的点击指令，然后提示主播开启视频采集部件与音频采集部件，主播可以开始直播。主播终端可以将录制的音视频流发送至网页直播应用程序的后台服务器(后续可以简称为服务器)，服务器可以确定直播间中除主播账户之外的各账户，然后将音视频流发送至各账户的登录终端，各账户的登录终端接收到服务器发送的音视频流后，可以播放音视频流。前面提到的各账户为直播间中观看主播直播的观众(后续可以称为用户)登录终端所使用的账户。
如图1所示，主播使用网页直播应用程序进行直播时，该方法的处理流程可以包括如下的步骤：
步骤101中，通过网页直播应用程序，接收服务器发送的礼物赠送通知。
在实施中，用户所使用的终端在播放当前接收到的音视频流时，在直播界面中显示有礼物选项、消息选项、分享选项等一些其它选项。用户想要向当前正在直播的主播送萌脸礼物，用户可以点击礼物选项，触发终端显示至少一个礼物图标，用户可以点击要送的礼物图标(此处为萌脸礼物的礼物图标)，然后点击赠送按键，终端则会检测到赠送按键的点击指令，这时，触发终端生成礼物赠送请求，并在礼物赠送请求中添加该礼物的礼物标识(后续可以称为目标礼物的礼物标识)，然后可以向服务器发送礼物赠送请求。
服务器接收到终端发送的礼物赠送请求后，可以从礼物赠送请求中获取到目标礼物的礼物标识。服务器中预先存储了各个礼物的礼物标识、展示内容链接与展示时长的对应关系，服务器可以使用目标礼物的标识，从该对应关系中查找目标礼物的礼物标识对应的展示内容链接和展示时长，然后生成礼物赠送通知，向主播终端发送礼物赠送通知，并在礼物赠送通知中携带目标礼物的展示内容链接和展示时长。
主播终端可以通过网页直播应用程序接收服务器发送的礼物赠送通知，该礼物赠送通知中携带有目标礼物的展示内容链接和展示时长。
另外，服务器还可以向直播间中除主播账户之外的各账户的登录终端发送礼物赠送通知。
可选的，展示内容链接可以是URL(Uniform Resource Locator，统一资源定位符)信息。
可选的，服务器确定目标礼物的展示内容链接和展示时长的方法还可以如下：服务器中可以存储各个礼物的礼物标识与展示内容链接的对应关系，以及账户等级与各个礼物的礼物标识的展示时长的对应关系，一般账户等级越高，各个礼物的礼物标识的展示时长越长。服务器可以使用目标礼物的礼物标识，查找到对应的展示内容链接，然后确定发送礼物赠送请求的终端登录的账户，确定该账户的等级，然后使用目标礼物的礼物标识和账户的等级，确定目标礼物的展示时长。
需要说明的是，展示时长可以大于或等于目标礼物的礼物动画数据的播放时长，如展示时长为0.5秒，礼物动画播放时长为0.1秒，展示时长为0.2秒，礼物动画播放时长为0.2秒等。
步骤102中，通过网页直播应用程序向音视频采集应用程序发送礼物赠送通知。
在实施中，主播终端通过网页直播应用程序接收到服务器发送的礼物赠送通知后，可以通过网页直播应用程序向音视频采集应用程序发送礼物赠送通知，主播终端可以通过音视频采集应用程序接收礼物赠送通知。
需要说明的是，音视频采集应用程序仅是用于控制音视频采集部件采集音视频流。
可选的，可以由flash插件将礼物赠送通知发送至音视频采集应用程序，相应的步骤102的处理可以如下：
通过网页直播应用程序向flash插件发送礼物赠送通知；通过flash插件向音视频采集应用程序发送礼物赠送通知。
在实施中，主播终端可以加载flash插件，通过网页直播应用程序向flash插件发送礼物赠送通知，通过flash插件接收到礼物赠送通知后，可以通过flash插件向音视频采集应用程序发送礼物赠送通知，主播终端可以通过音视频采集应用程序接收礼物赠送通知。
步骤103中，通过音视频采集应用程序根据展示内容链接，获取目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息。
在实施中，主播终端通过音视频采集应用程序接收到礼物赠送通知后，可以通过音视频采集应用程序从礼物赠送通知中解析得到展示内容链接和展示时长，如果是第一次展示目标礼物，可以通过音视频应用程序访问展示内容链接，下载目标礼物的展示资源包，然后对展示资源包进行解压缩，得到目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息。
上述提到的相对展示位置信息为目标礼物在人脸图像中的显示位置，例如，目标礼物为猫耳朵，猫耳朵中的两只耳朵应该树立在眉头的两侧，相对展示位置信息则为眉头的两侧，目标礼物为胡须，胡须应该在嘴唇的两侧显示，相对展示位置信息则为嘴唇的两侧。
可选的，主播终端还可以通过音视频应用程序对解压缩后的目标礼物的展示资源包进行存储，这样，下次再展示目标礼物时，则不需要下载目标礼物的展示资源包。
另外，主播终端在检测到直播结束时，可以将下载的展示资源包删除，这样，可以节约存储资源，下次开播，再重新进行下载。
步骤104中，通过音视频采集应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息。
在实施中，主播终端通过音视频采集应用程序获取到目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息后，可以确定当前视频采集部件采集到的视频流的视频帧，然后通过音视频采集应用程序调用人脸识别SDK(Software Development Kit，软件开发工具包)，对该视频帧进行人脸图像识别，确定出该视频帧中人脸图像的位置信息，确定出的人脸图像的位置信息中可以包括眼睛的位置、嘴唇的位置、鼻子的位置、耳朵的位置、眉毛的位置等。
步骤105中，通过音视频采集应用程序根据视频帧中人脸图像的位置信息、相对展示位置信息和展示时长，将礼物动画数据中的各帧动画按照播放顺序分别与视频帧以及视频帧之后的视频帧中的人脸图像进行合成。
在实施中，主播终端可以通过音视频应用程序使用人脸图像的位置信息与目标礼物与人脸图像的位置信息的相对展示位置信息，将礼物动画数据的第一帧动画与当前的视频帧中的人脸图像进行合成，将帧动画与人脸图像合成到一个视频帧中，然后将第二帧动画与当前的视频帧之后的第一个视频帧中的人脸图像进行合成，按照礼物动画数据的帧动画播放顺序，可以将礼物动画数据的各帧动画分别与当前的视频帧以及之后的视频帧中的人脸图像进行合成，如果礼物动画数据中的各帧动画已全部合成完毕时还未到展示时长，可以继续将礼物动画数据中的第一帧动动画开始依次与采集到的视频流的视频帧中的人脸图像进行合成，直到达到展示时长，得到合成后的视频流，如果礼物动画数据中的各帧动画已全部合成完毕时恰好到展示时长，则不再对礼物动画数据的帧动画进行合成的处理。例如，如图2所示，目标礼物是猫耳朵，将两只耳朵可以合成在人脸图像中眉头的上方，图2中仅示出了人脸部分。
需要说明的是，由于一般萌脸礼物的展示时长比较短，所以上述仅确定了当前采集到的视频流的视频帧的人脸图像的位置信息，并将该位置信息确定为与萌脸礼物的帧动画进行合成的所有视频帧中的人脸图像的位置信息，这样，可以节约处理时长。如果萌脸礼物的展示时长比较长，同样，本发明实施例中，也可以对每一视频帧都确定人脸图像的位置信息。
步骤106中，通过音视频采集应用程序向服务器发送合成后的视频流。
在实施中，主播终端可以通过音视频采集应用程序向服务器发送合成后的视频流，另外，还会发送采集到的音频流，服务器接收到主播终端发送的视频流和音频流后，可以将视频流和音频流转发至直播间中除主播账户之外的各账户的登录终端。各账户的登录终端接收到视频流和音频流后，可以进行播放。
另外，主播终端通过flash插件从音视频采集应用程序获取合成后的视频流进行发送。
需要说明的是，上述提到的主播终端向服务器发送视频流是合成后即进行发送，而不是将礼物动画数据中的全部帧动画与视频帧合成后才进行发送。
可选的，本发明实施例中，还提供了礼物展示队列的方案，相应的处理可以如下：
通过网页直播应用程序，将目标礼物的礼物标识，添加至礼物展示队列的最前面。
其中，展示队列中包括了观众送的多个礼物标识，多个礼物标识按照展示顺序进行排序，排在最前面的礼物标识对应的礼物首先被展示。
在实施中，主播终端每次在接收到服务器发送的礼物赠送通知后，可以判断礼物是萌脸礼物，还是普通礼物，普通礼物指不与人脸图像相关的礼物，如果是萌脸礼物，且当前展示的礼物是普通礼物，立即停止展示当前的礼物，然后通过网页应用程序，将目标礼物的标识，添加至礼物展示队列的最前面，如果是普通礼物，则将礼物的标识添加至礼物展示队列的最后面，这样，可以使萌脸礼物优先显示。例如，如图3所示，礼物展示列表中，礼物标识的排列顺序为礼物标识A、礼物标识B、礼物标识C、礼物标识C、礼物标识B、礼物标识F、礼物标识N，将目标礼物的礼物标识添加进去后，变为目标礼物的标识、礼物标识A、礼物标识B、礼物标识C、礼物标识C、礼物标识B、礼物标识F、礼物标识N。
另外，对于直播间中除主播终端之外的各账户的登录终端，服务器向主播终端发送礼物赠送通知时，也会向直播间中除主播终端之外的各账户的登录终端发送礼物赠送通知，各账户的登录终端接收到礼物赠送通知后，可以从中解析得到目标礼物的礼物标识，然后可以判断礼物是萌脸礼物，还是普通礼物，普通礼物指不与人脸图像相关的礼物，如游艇、鲜花等，如果是萌脸礼物，通过网页应用程序，将目标礼物的标识，添加至礼物展示队列的最前面，如果是普通礼物，则将礼物的标识添加至礼物展示队列的最后面。另外，各账户的登录终端在确定目标礼物是萌脸礼物，且当前展示的礼物为普通礼物时，立即停止展示当前展示的礼物。
可选的，本发明实施例中还提供了发送礼物播放结束通知的方案，相应的处理可以如下：
当距离礼物动画数据中第一帧动画与视频帧中人脸图像的合成时间的时长达到展示时长时，通过音视频采集应用程序在向服务器发送的视频流中携带播放结束通知，并且向flash插件发送播放结束通知；当通过flash插件接收到播放结束通知时，播放礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
其中，播放结束通知可以用于通知展示礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
在实施中，主播终端通过音视频采集应用程序对礼物动画数据中第一帧动画与视频帧中的人脸图像合成完时，可以通过音视频采集应用程序启动定时器，并记录启动定时的时间点，当通过定时器确定距离该时间点的时长达到展示时长时，确定目标礼物播放完成，可以通过音视频采集应用程序在向服务器发送的视频流中携带播放结束通知，并且向flash插件发送播放结束通知。
服务器接收到主播终端发送的播放结束通知后，可以将播放结束通知发送至直播间中除主播账户之外的各账户的登录终端，各账户的登录终端接收到播放结束通知时，可以确定礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识，然后播放该礼物标识对应的礼物动画。
主播终端通过flash插件从视频流中解析到播放结束通知时，可以确定礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识，然后播放该礼物标识对应的礼物动画。
可选的，为了防止各账户的登录终端和flash插件一直接收不到播放结束通知，而耽误其它礼物的展示，本发明实施例中提供了超时机制，相应的处理可以如下：
当通过flash插件接收到礼物赠送通知之后的预设时长内未通过flash插件接收到音视频采集应用程序发送的播放结束通知时，向服务器发送播放结束通知，并播放礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
其中，预设时长可以由技术人员预设，并且存储至主播终端中，预设时长大于展示时长，如预设时长为0.6秒，展示时长为0.3秒等。
在实施中，主播终端通过flash插件接收到礼物赠送通知时，可以通过flash插件启动定时器，并确定启动时的时间点，如果距离当前时间点的时长达到预设时长时，还未接收到音视频采集应用程序发送的播放结束通知，可以向服务器发送播放结束通知。
服务器接收到主播终端发送的播放结束通知后，可以将播放结束通知发送至直播间中除主播账户之外的各账户的登录终端，各账户的登录终端接收到播放结束通知时，可以确定礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识，然后播放该礼物标识对应的礼物动画。
主播终端通过flash插件接收到播放结束通知时，可以确定礼物展示队列中与目标礼物的礼物标识相邻的下一个礼物标识，然后播放该礼物标识对应的礼物动画。
需要说明的是，本发明实施例中，flash插件与音视频采集应用程序是使用socket连接进行通信的。
如图4所示，主播使用直播应用程序进行直播时，该方法的处理流程可以包括如下的步骤：
步骤401中，主播终端通过直播应用程序接收服务器发送的礼物赠送通知。
在实施中，步骤401中与步骤101、步骤102的区别仅在于主播终端通过直播应用程序可以直接接收到礼物赠送通知，其它处理见步骤102和步骤103，此处不再赘述。
步骤402中，通过直播应用程序根据展示内容链接，获取目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息。
在实施中，步骤402与步骤103的区别在于，主播终端是通过直播应用程序去下载目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息，其它处理见步骤103，此处不再赘述。
步骤403中，通过直播应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息。
在实施中，步骤403与步骤104的区别在于，主播终端是通过直播应用程序调用人脸识别SDK，来确定当前采集到的视频流的视频帧中人脸图像的位置信息，其它处理见步骤104，此处不再赘述。
步骤404中，通过直播应用程序根据视频帧中人脸图像的位置信息、相对展示位置信息和展示时长，将礼物动画数据中的各帧动画按照播放顺序分别与视频帧以及视频帧之后的视频帧中的人脸图像进行合成。
在实施中，步骤404与步骤105的区别在于，主播终端是通过直播应用程序进行合成，其它处理见步骤105，此处不再赘述。
步骤405中，通过直播应用程序向服务器发送合成后的视频流。
在实施中，步骤405与步骤106的区别在于，主播终端是通过直播应用程序发送合成后的视频流，其它处理见步骤106，此处不再赘述。
本发明实施例中，接收服务器发送的礼物赠送通知，其中，礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，目标礼物为萌脸礼物，根据展示内容链接，获取目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息，确定当前采集到的视频流的视频帧中人脸图像的位置信息，根据视频帧中人脸图像的位置信息、相对展示位置信息和展示时长，将礼物动画数据中的各帧动画按照播放顺序分别与视频帧以及视频帧之后的视频帧中的人脸图像进行合成，向服务器发送合成后的视频流。这样，不仅给出了萌脸礼物的展示方法，而且将萌脸礼物与视频帧中的人脸图像进行合成，可以达到萌脸礼物的展示效果。
基于相同的技术构思，本发明实施例还提供了一种直播间礼物展示的装置，如图5所示，该装置包括：
接收模块510，用于接收服务器发送的礼物赠送通知，其中，所述礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，所述目标礼物为萌脸礼物；
获取模块520，用于根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
确定模块530，用于确定当前采集到的视频流的视频帧中人脸图像的位置信息；
合成模块540，用于根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
发送模块550，用于向所述服务器发送合成后的视频流。
可选的，如图6所示，所述接收模块510包括：
接收子模块511，用于通过网页直播应用程序，接收服务器发送的礼物赠送通知；
发送子模块512，用于通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知；
所述获取模块520，用于通过所述音视频采集应用程序根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
所述确定模块530，用于通过所述音视频采集应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息；
所述合成模块540，用于通过所述音视频采集应用程序根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
所述发送模块550，用于通过所述音视频采集应用程序向所述服务器发送合成后的视频流。
可选的，所述发送子模块512，用于：
通过所述网页直播应用程序向flash插件发送礼物赠送通知；
通过所述flash插件向所述音视频采集应用程序发送礼物赠送通知。
可选的，如图7所示，所述装置还包括：
添加模块560，用于通过所述网页直播应用程序，将所述目标礼物的礼物标识，添加至礼物展示队列的最前面。
可选的，所发送模块550，还用于：
当距离所述礼物动画数据中第一帧动画与视频帧中人脸图像的合成时间的时长达到所述展示时长时，通过所述音视频采集应用程序在向服务器发送的视频流中携带播放结束通知，并且向所述flash插件发送播放结束通知；
如图8所示，所述装置还包括：
播放模块570，用于当通过所述flash插件接收到所述播放结束通知时，播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
可选的，所述发送模块550，还用于：
当通过所述flash插件接收到礼物赠送通知之后的预设时长内未通过所述flash插件接收到所述音视频采集应用程序发送的播放结束通知时，向所述服务器发送播放结束通知；
所述播放模块570，还用于播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画，其中，所述预设时长大于展示时长。
本发明实施例中，接收服务器发送的礼物赠送通知，其中，礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，目标礼物为萌脸礼物，根据展示内容链接，获取目标礼物的礼物动画数据、目标礼物与人脸图像的相对展示位置信息，确定当前采集到的视频流的视频帧中人脸图像的位置信息，根据视频帧中人脸图像的位置信息、相对展示位置信息和展示时长，将礼物动画数据中的各帧动画按照播放顺序分别与视频帧以及视频帧之后的视频帧中的人脸图像进行合成，向服务器发送合成后的视频流。这样，不仅给出了萌脸礼物的展示方法，而且将萌脸礼物与视频帧中的人脸图像进行合成，可以达到萌脸礼物的展示效果。
需要说明的是：上述实施例提供的直播间礼物展示的装置在进行直播间礼物展示时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的直播间礼物展示的装置与直播间进行礼物的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
请参考图9，其示出了本发明实施例所涉及的具有触敏表面的终端结构示意图，该终端可以用于实施上述实施例中提供的直播间礼物展示的方法。具体来讲：
终端900可以包括RF(Radio Frequency，射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi(wireless fidelity，无线保真)模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解，图9中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
RF电路110可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器180处理；另外，将涉及上行的数据发送给基站。通常，RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier，低噪声放大器)、双工器等。此外，RF电路110还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议，包括但不限于GSM(Global System of Mobile communication，全球移动通讯***)、GPRS(General Packet Radio Service，通用分组无线服务)、CDMA(CodeDivision Multiple Access，码分多址)、WCDMA(Wideband Code Division MultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service，短消息服务)等。
存储器120可用于存储软件程序以及模块，处理器180通过运行存储在存储器120的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据终端900的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器120还可以包括存储器控制器，以提供处理器180和输入单元130对存储器120的访问。
输入单元130可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器180，并能接收处理器180发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131，输入单元130还可以包括其他输入设备132。具体地，其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端900的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141，可选的，可以采用LCD(Liquid Crystal Display，液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的，触敏表面131可覆盖显示面板141，当触敏表面131检测到在其上或附近的触摸操作后，传送给处理器180以确定触摸事件的类型，随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图9中，触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能，但是在某些实施例中，可以将触敏表面131与显示面板141集成而实现输入和输出功能。
终端900还可包括至少一种传感器150，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板141的亮度，接近传感器可在终端900移动到耳边时，关闭显示面板141和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于终端900还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
音频电路160、扬声器161，传声器162可提供用户与终端900之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号，传输到扬声器161，由扬声器161转换为声音信号输出；另一方面，传声器162将收集的声音信号转换为电信号，由音频电路160接收后转换为音频数据，再将音频数据输出处理器180处理后，经RF电路110以发送给比如另一终端，或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔，以提供外设耳机与终端900的通信。
WiFi属于短距离无线传输技术，终端900通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图9示出了WiFi模块170，但是可以理解的是，其并不属于终端900的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
处理器180是终端900的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器120内的软件程序和/或模块，以及调用存储在存储器120内的数据，执行终端900的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器180可包括一个或多个处理核心；优选的，处理器180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作***、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器180中。
终端900还包括给各个部件供电的电源190(比如电池)，优选的，电源可以通过电源管理***与处理器180逻辑相连，从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电***、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出，终端900还可以包括摄像头、蓝牙模块等，在此不再赘述。具体在本实施例中，终端900的显示单元是触摸屏显示器，终端900还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行述一个或者一个以上程序包含终端进行直播间礼物展示的方法的指令。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器，上述指令可由终端的处理器执行以完成上述直播间礼物展示的方法。例如，所述非临时性计算机可读存储介质可以是ROM、RAM、CD-ROM、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (12)
1.一种直播间礼物展示的方法，其特征在于，所述方法应用于主播终端，所述方法包括：
接收服务器发送的礼物赠送通知，其中，所述礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，所述目标礼物为萌脸礼物；
根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
确定当前采集到的视频流的视频帧中人脸图像的位置信息；
根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
向所述服务器发送合成后的视频流。
2.根据权利要求1所述的方法，其特征在于，所述接收服务器发送的礼物赠送通知，包括：通过网页直播应用程序，接收服务器发送的礼物赠送通知；通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知；
所述根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息，包括：通过所述音视频采集应用程序根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
所述确定当前采集到的视频流的视频帧中人脸图像的位置信息，包括：通过所述音视频采集应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息；
所述根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成，包括：通过所述音视频采集应用程序根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
所述向所述服务器发送合成后的视频流，包括：通过所述音视频采集应用程序向所述服务器发送合成后的视频流。
3.根据权利要求2所述的方法，其特征在于，所述通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知，包括：
通过所述网页直播应用程序向flash插件发送礼物赠送通知；
通过所述flash插件向所述音视频采集应用程序发送礼物赠送通知。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
通过所述网页直播应用程序，将所述目标礼物的礼物标识，添加至礼物展示队列的最前面。
5.根据权利要求4所述的方法，其特征在于，所方法还包括：
当距离所述礼物动画数据中第一帧动画与视频帧中人脸图像的合成时间的时长达到所述展示时长时，通过所述音视频采集应用程序在向所述服务器发送的视频流中携带播放结束通知，并且向所述flash插件发送播放结束通知；
当通过所述flash插件接收到所述播放结束通知时，播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
当通过所述flash插件接收到礼物赠送通知之后的预设时长内未通过所述flash插件接收到所述音视频采集应用程序发送的播放结束通知时，向所述服务器发送播放结束通知，并播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画，其中，所述预设时长大于展示时长。
7.一种直播间礼物展示的装置，其特征在于，所述装置应用于主播终端，所述装置包括：
接收模块，用于接收服务器发送的礼物赠送通知，其中，所述礼物赠送通知中携带有目标礼物的展示内容链接和展示时长，所述目标礼物为萌脸礼物；
获取模块，用于根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
确定模块，用于确定当前采集到的视频流的视频帧中人脸图像的位置信息；
合成模块，用于根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
发送模块，用于向所述服务器发送合成后的视频流。
8.根据权利要求7所述的装置，其特征在于，所述接收模块包括：
接收子模块，用于通过网页直播应用程序，接收服务器发送的礼物赠送通知；
发送子模块，用于通过所述网页直播应用程序向音视频采集应用程序发送礼物赠送通知；
所述获取模块，用于通过所述音视频采集应用程序根据所述展示内容链接，获取所述目标礼物的礼物动画数据、所述目标礼物与人脸图像的相对展示位置信息；
所述确定模块，用于通过所述音视频采集应用程序确定当前采集到的视频流的视频帧中人脸图像的位置信息；
所述合成模块，用于通过所述音视频采集应用程序根据所述视频帧中人脸图像的位置信息、所述相对展示位置信息和所述展示时长，将所述礼物动画数据中的各帧动画按照播放顺序分别与所述视频帧以及所述视频帧之后的视频帧中的人脸图像进行合成；
所述发送模块，用于通过所述音视频采集应用程序向所述服务器发送合成后的视频流。
9.根据权利要求8所述的装置，其特征在于，所述发送子模块，用于：
通过所述网页直播应用程序向flash插件发送礼物赠送通知；
通过所述flash插件向所述音视频采集应用程序发送礼物赠送通知。
10.根据权利要求9所述的装置，其特征在于，所述装置还包括：
添加模块，用于通过所述网页直播应用程序，将所述目标礼物的礼物标识，添加至礼物展示队列的最前面。
11.根据权利要求10所述的装置，其特征在于，所发送模块，还用于：
当距离所述礼物动画数据中第一帧动画与视频帧中人脸图像的合成时间的时长达到所述展示时长时，通过所述音视频采集应用程序在向所述服务器发送的视频流中携带播放结束通知，并且向所述flash插件发送播放结束通知；
所述装置还包括：
播放模块，用于当通过所述flash插件接收到所述播放结束通知时，播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画。
12.根据权利要求11所述的装置，其特征在于，所述发送模块，还用于：
当通过所述flash插件接收到礼物赠送通知之后的预设时长内未通过所述flash插件接收到所述音视频采集应用程序发送的播放结束通知时，向所述服务器发送播放结束通知；
所述播放模块，还用于播放所述礼物展示队列中与所述目标礼物的礼物标识相邻的下一个礼物标识对应的礼物动画，其中，所述预设时长大于展示时长。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710804566.3A CN107438200A (zh) | 2017-09-08 | 2017-09-08 | 直播间礼物展示的方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710804566.3A CN107438200A (zh) | 2017-09-08 | 2017-09-08 | 直播间礼物展示的方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107438200A true CN107438200A (zh) | 2017-12-05 |
Family
ID=60461596
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710804566.3A Pending CN107438200A (zh) | 2017-09-08 | 2017-09-08 | 直播间礼物展示的方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107438200A (zh) |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108093307A (zh) * | 2017-12-29 | 2018-05-29 | 广州酷狗计算机科技有限公司 | 获取播放文件的方法和*** |
| CN108289234A (zh) * | 2018-01-05 | 2018-07-17 | 武汉斗鱼网络科技有限公司 | 一种虚拟礼物特效动画展示方法、装置和设备 |
| CN108391153A (zh) * | 2018-01-29 | 2018-08-10 | 北京潘达互娱科技有限公司 | 虚拟礼物显示方法、装置及电子设备 |
| CN108401179A (zh) * | 2018-04-02 | 2018-08-14 | 广州荔支网络技术有限公司 | 一种基于虚拟物品的动画播放方法、装置和移动终端 |
| CN108965977A (zh) * | 2018-06-13 | 2018-12-07 | 广州虎牙信息科技有限公司 | 直播礼物的展示方法、装置、存储介质、终端和*** |
| CN109191544A (zh) * | 2018-08-21 | 2019-01-11 | 北京潘达互娱科技有限公司 | 一种贴纸礼物展示方法、装置、电子设备及存储介质 |
| CN109391851A (zh) * | 2018-01-09 | 2019-02-26 | 深圳市珍爱网信息技术有限公司 | 视频直播方法、装置、计算机设备和存储介质 |
| CN110012334A (zh) * | 2018-01-04 | 2019-07-12 | 武汉斗鱼网络科技有限公司 | 一种动画播放方法、装置及电子设备 |
| CN110933454A (zh) * | 2019-12-06 | 2020-03-27 | 广州酷狗计算机科技有限公司 | 处理直播萌脸礼物的方法、装置、设备及存储介质 |
| CN110958463A (zh) * | 2019-12-06 | 2020-04-03 | 广州华多网络科技有限公司 | 虚拟礼物展示位置的检测、合成方法、装置和设备 |
| CN111147880A (zh) * | 2019-12-30 | 2020-05-12 | 广州华多网络科技有限公司 | 视频直播的互动方法、装置、***、电子设备及存储介质 |
| CN111246232A (zh) * | 2020-01-17 | 2020-06-05 | 广州华多网络科技有限公司 | 直播互动方法、装置、电子设备及存储介质 |
| CN111970533A (zh) * | 2020-08-28 | 2020-11-20 | 北京达佳互联信息技术有限公司 | 直播间的互动方法、装置及电子设备 |
| CN112087655A (zh) * | 2020-08-07 | 2020-12-15 | 广州华多网络科技有限公司 | 赠送虚拟礼物的方法、装置及电子设备 |
| CN112770128A (zh) * | 2020-12-31 | 2021-05-07 | 百果园技术(新加坡)有限公司 | 一种直播礼物的播放***以及方法、装置和服务器 |
| CN113163220A (zh) * | 2021-02-26 | 2021-07-23 | 广州方硅信息技术有限公司 | 虚拟礼物定位展示方法及其装置、设备与介质 |
| CN113596596A (zh) * | 2021-07-27 | 2021-11-02 | 百果园技术(新加坡)有限公司 | 用于直播应用的礼物打赏***、方法、设备和介质 |
| CN114827703A (zh) * | 2021-01-29 | 2022-07-29 | 武汉斗鱼网络科技有限公司 | 一种视图的排队播放方法、装置、设备及介质 |
| CN115484489A (zh) * | 2022-09-14 | 2022-12-16 | 抖音视界有限公司 | 资源处理方法、装置、电子设备、存储介质及程序产品 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105334963A (zh) * | 2015-10-29 | 2016-02-17 | 广州华多网络科技有限公司 | 一种虚拟物品展示方法及*** |
| CN105872442A (zh) * | 2016-03-30 | 2016-08-17 | 宁波三博电子科技有限公司 | 一种基于人脸识别的即时弹幕礼物赠送方法及*** |
| CN106101736A (zh) * | 2016-06-28 | 2016-11-09 | 广州华多网络科技有限公司 | 一种虚拟礼物的展示方法和*** |
| CN106658035A (zh) * | 2016-12-09 | 2017-05-10 | 武汉斗鱼网络科技有限公司 | 一种特效礼物动态展示方法及装置 |
| CN107071580A (zh) * | 2017-03-20 | 2017-08-18 | 北京潘达互娱科技有限公司 | 数据处理方法及装置 |
| CN107085540A (zh) * | 2017-03-22 | 2017-08-22 | 北京潘达互娱科技有限公司 | 虚拟礼物展示方法及装置 |
-
2017
- 2017-09-08 CN CN201710804566.3A patent/CN107438200A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105334963A (zh) * | 2015-10-29 | 2016-02-17 | 广州华多网络科技有限公司 | 一种虚拟物品展示方法及*** |
| CN105872442A (zh) * | 2016-03-30 | 2016-08-17 | 宁波三博电子科技有限公司 | 一种基于人脸识别的即时弹幕礼物赠送方法及*** |
| CN106101736A (zh) * | 2016-06-28 | 2016-11-09 | 广州华多网络科技有限公司 | 一种虚拟礼物的展示方法和*** |
| CN106658035A (zh) * | 2016-12-09 | 2017-05-10 | 武汉斗鱼网络科技有限公司 | 一种特效礼物动态展示方法及装置 |
| CN107071580A (zh) * | 2017-03-20 | 2017-08-18 | 北京潘达互娱科技有限公司 | 数据处理方法及装置 |
| CN107085540A (zh) * | 2017-03-22 | 2017-08-22 | 北京潘达互娱科技有限公司 | 虚拟礼物展示方法及装置 |
Cited By (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108093307A (zh) * | 2017-12-29 | 2018-05-29 | 广州酷狗计算机科技有限公司 | 获取播放文件的方法和*** |
| CN108093307B (zh) * | 2017-12-29 | 2021-01-01 | 广州酷狗计算机科技有限公司 | 获取播放文件的方法和*** |
| CN110012334A (zh) * | 2018-01-04 | 2019-07-12 | 武汉斗鱼网络科技有限公司 | 一种动画播放方法、装置及电子设备 |
| CN108289234A (zh) * | 2018-01-05 | 2018-07-17 | 武汉斗鱼网络科技有限公司 | 一种虚拟礼物特效动画展示方法、装置和设备 |
| CN109391851A (zh) * | 2018-01-09 | 2019-02-26 | 深圳市珍爱网信息技术有限公司 | 视频直播方法、装置、计算机设备和存储介质 |
| CN109391851B (zh) * | 2018-01-09 | 2020-04-07 | 深圳市珍爱网信息技术有限公司 | 视频直播方法、装置、计算机设备和存储介质 |
| CN108391153B (zh) * | 2018-01-29 | 2020-10-16 | 北京潘达互娱科技有限公司 | 虚拟礼物显示方法、装置及电子设备 |
| CN108391153A (zh) * | 2018-01-29 | 2018-08-10 | 北京潘达互娱科技有限公司 | 虚拟礼物显示方法、装置及电子设备 |
| CN108401179A (zh) * | 2018-04-02 | 2018-08-14 | 广州荔支网络技术有限公司 | 一种基于虚拟物品的动画播放方法、装置和移动终端 |
| CN108965977A (zh) * | 2018-06-13 | 2018-12-07 | 广州虎牙信息科技有限公司 | 直播礼物的展示方法、装置、存储介质、终端和*** |
| CN108965977B (zh) * | 2018-06-13 | 2021-08-20 | 广州虎牙信息科技有限公司 | 直播礼物的展示方法、装置、存储介质、终端和*** |
| CN109191544A (zh) * | 2018-08-21 | 2019-01-11 | 北京潘达互娱科技有限公司 | 一种贴纸礼物展示方法、装置、电子设备及存储介质 |
| CN110933454B (zh) * | 2019-12-06 | 2021-11-02 | 广州酷狗计算机科技有限公司 | 处理直播萌脸礼物的方法、装置、设备及存储介质 |
| CN110958463A (zh) * | 2019-12-06 | 2020-04-03 | 广州华多网络科技有限公司 | 虚拟礼物展示位置的检测、合成方法、装置和设备 |
| CN110933454A (zh) * | 2019-12-06 | 2020-03-27 | 广州酷狗计算机科技有限公司 | 处理直播萌脸礼物的方法、装置、设备及存储介质 |
| CN111147880A (zh) * | 2019-12-30 | 2020-05-12 | 广州华多网络科技有限公司 | 视频直播的互动方法、装置、***、电子设备及存储介质 |
| CN111246232A (zh) * | 2020-01-17 | 2020-06-05 | 广州华多网络科技有限公司 | 直播互动方法、装置、电子设备及存储介质 |
| CN112087655A (zh) * | 2020-08-07 | 2020-12-15 | 广州华多网络科技有限公司 | 赠送虚拟礼物的方法、装置及电子设备 |
| CN111970533A (zh) * | 2020-08-28 | 2020-11-20 | 北京达佳互联信息技术有限公司 | 直播间的互动方法、装置及电子设备 |
| WO2022042089A1 (zh) * | 2020-08-28 | 2022-03-03 | 北京达佳互联信息技术有限公司 | 直播间的互动方法及装置 |
| CN112770128A (zh) * | 2020-12-31 | 2021-05-07 | 百果园技术(新加坡)有限公司 | 一种直播礼物的播放***以及方法、装置和服务器 |
| CN112770128B (zh) * | 2020-12-31 | 2023-04-07 | 百果园技术(新加坡)有限公司 | 一种直播礼物的播放***以及方法、装置和服务器 |
| CN114827703A (zh) * | 2021-01-29 | 2022-07-29 | 武汉斗鱼网络科技有限公司 | 一种视图的排队播放方法、装置、设备及介质 |
| CN114827703B (zh) * | 2021-01-29 | 2024-02-20 | 鹰皇文化传媒有限公司 | 一种视图的排队播放方法、装置、设备及介质 |
| CN113163220A (zh) * | 2021-02-26 | 2021-07-23 | 广州方硅信息技术有限公司 | 虚拟礼物定位展示方法及其装置、设备与介质 |
| CN113163220B (zh) * | 2021-02-26 | 2023-02-28 | 广州方硅信息技术有限公司 | 虚拟礼物定位展示方法及其装置、设备与介质 |
| CN113596596A (zh) * | 2021-07-27 | 2021-11-02 | 百果园技术(新加坡)有限公司 | 用于直播应用的礼物打赏***、方法、设备和介质 |
| CN115484489A (zh) * | 2022-09-14 | 2022-12-16 | 抖音视界有限公司 | 资源处理方法、装置、电子设备、存储介质及程序产品 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107438200A (zh) | 直播间礼物展示的方法和装置 | |
| US10841661B2 (en) | Interactive method, apparatus, and system in live room | |
| CN106101736B (zh) | 一种虚拟礼物的展示方法和*** | |
| CN106101756B (zh) | 弹幕显示方法、弹幕添加方法、装置及*** | |
| CN105338368B (zh) | 一种视频的直播流转点播数据的方法、装置及*** | |
| CN106454404B (zh) | 一种播放直播视频的方法、装置和*** | |
| CN103905885B (zh) | 视频直播方法及装置 | |
| CN106331826B (zh) | 一种设置直播模板和视频模式的方法、装置和*** | |
| CN104822090B (zh) | 视频播放的方法、装置和*** | |
| CN104519404B (zh) | 图像互换格式文件的播放方法及装置 | |
| CN105828145B (zh) | 互动方法及装置 | |
| CN105808060B (zh) | 一种播放动画的方法和装置 | |
| CN105183296B (zh) | 交互界面显示方法及装置 | |
| CN106488296B (zh) | 一种显示视频弹幕的方法和装置 | |
| CN106686396A (zh) | 一种切换直播间的方法和*** | |
| CN106791958A (zh) | 位置标记信息生成方法及装置 | |
| CN104159140B (zh) | 一种视频处理的方法、装置和*** | |
| CN104935955B (zh) | 一种传输直播视频流的方法、装置和*** | |
| CN104036536B (zh) | 一种定格动画的生成方法和装置 | |
| CN106231433B (zh) | 一种播放网络视频的方法、装置和*** | |
| CN105094513B (zh) | 用户头像设置方法、装置及电子设备 | |
| CN106504303B (zh) | 一种播放帧动画的方法和装置 | |
| CN103886198B (zh) | 一种数据处理的方法、终端、服务器及*** | |
| CN106101764A (zh) | 一种显示视频数据的方法、装置和*** | |
| CN107333162A (zh) | 一种播放直播视频的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: 510660 Guangzhou City, Guangzhou, Guangdong, Whampoa Avenue, No. 315, self - made 1-17 Applicant after: Guangzhou KuGou Networks Co., Ltd. Address before: 510000 B1, building, No. 16, rhyme Road, Guangzhou, Guangdong, China 13F Applicant before: Guangzhou KuGou Networks Co., Ltd. |
|
| CB02 | Change of applicant information | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171205 |
|
| RJ01 | Rejection of invention patent application after publication |