CN111010588B - 直播处理方法、装置、存储介质及设备 - Google Patents

直播处理方法、装置、存储介质及设备 Download PDF

Info

Publication number
CN111010588B
CN111010588B CN201911354791.7A CN201911354791A CN111010588B CN 111010588 B CN111010588 B CN 111010588B CN 201911354791 A CN201911354791 A CN 201911354791A CN 111010588 B CN111010588 B CN 111010588B
Authority
CN
China
Prior art keywords
target area
anchor
video picture
display
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911354791.7A
Other languages
English (en)
Other versions
CN111010588A (zh
Inventor
梁衍鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Kugou Business Incubator Management Co ltd
Original Assignee
Chengdu Kugou Business Incubator Management Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Kugou Business Incubator Management Co ltd filed Critical Chengdu Kugou Business Incubator Management Co ltd
Priority to CN201911354791.7A priority Critical patent/CN111010588B/zh
Publication of CN111010588A publication Critical patent/CN111010588A/zh
Application granted granted Critical
Publication of CN111010588B publication Critical patent/CN111010588B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种直播处理方法、装置、存储介质及设备，属于互联网技术领域。方法包括：在直播间展示区域中确定目标区域和非目标区域，目标区域用于展示主播终端采集到的第一主播的视频画面，非目标区域不展示视频画面；对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；将编码处理后得到的直播流数据发送给至少一个观众终端。在无需通过整个直播展示区域对第一主播的视频画面进行展示时，本申请会在向观众终端推流之前，使用纯色像素对非目标区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果。

Description

直播处理方法、装置、存储介质及设备
技术领域
本申请涉及互联网技术领域，特别涉及一种直播处理方法、装置、存储介质及设备。
背景技术
随着互联网技术和流媒体技术的飞速发展，时下在应用市场上涌现出了很多直播类应用程序，这使得利用终端进行直播已逐渐成为人们展示自我以及进行娱乐休闲的重要途径之一。其中，用户通过直播类应用程序不但可以作为主播进行直播，还可以观看其他主播的直播。
在直播过程中，码率越高对数据传输过程的要求便越高，比如需要更多的网络带宽和更优的网络质量。基于此，为了达到节省码率的效果，如何进行直播处理，成为了本领域技术人员当下最为关心的问题之一。
发明内容
本申请实施例提供了一种直播处理方法、装置、存储介质及设备，能够达到节省码率的效果。所述技术方案如下：
一方面，提供了一种直播处理方法，所述方法包括：
在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示主播终端采集到的第一主播的视频画面，所述非目标区域不展示所述视频画面；
对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在所述非目标区域的纯色像素数据进行编码处理；
将编码处理后得到的直播流数据发送给至少一个观众终端。
在一种可能的实现方式中，所述在直播间展示区域中确定目标区域和非目标区域，包括：
接收服务器下发的展示信息；
当所述展示信息指示通过部分区域展示所述视频画面时，根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域。
在一种可能的实现方式中，所述对所述非目标区域进行纯色像素填充，包括：对所述非目标区域进行黑色像素填充。
在一种可能的实现方式中，所述接收服务器下发的展示信息，包括：
接收所述服务器下发的第一展示信息，所述第一展示信息指示了展示所述视频画面的区域位置；
所述根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域，包括：根据所述第一展示信息在所述直播间展示区域中确定所述目标区域，将除了所述目标区域之外的其他区域确定为所述非目标区域。
在一种可能的实现方式中，所述接收服务器下发的展示信息，包括：
接收所述服务器下发的第二展示信息，所述第二展示信息指示了不展示所述视频画面的区域位置；
所述根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域，包括：根据所述第二展示信息在直播间展示区域中确定所述非目标区域，将除了所述非目标区域之外的其他区域确定为所述目标区域。
在一种可能的实现方式中，所述方法还包括：
当所述展示信息指示通过全部区域展示所述视频画面时，对通过所述直播间展示区域展示的视频画面数据进行编码处理。
在一种可能的实现方式中，所述将编码处理后得到的直播流数据发送给至少一个观众终端，包括：
将编码处理后得到的直播流数据发送给内容分发网络，由所述内容分发网络将编码后得到的直播流数据发送给至少一个观众终端。
另一方面，提供了一种直播处理方法，所述方法包括：
接收服务器下发的展示信息；
根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示第一主播的视频画面，所述非目标区域不展示所述视频画面；
接收所述第一主播的直播流数据，所述直播流数据经过编码处理后得到，所述直播流数据包括所述第一主播的视频画面数据和纯色像素数据；
基于所述直播流数据，在所述目标区域展示所述第一主播的视频画面。
在一种可能的实现方式中，当主播数量为两个时，所述非目标区域用于展示第二主播的视频画面，所述目标区域和所述非目标区域为大小窗模式、上下分屏模式或左右分屏模式中的任意一种。
另一方面，提供了一种直播处理装置，所述装置包括：
确定模块，用于在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示主播终端采集到的第一主播的视频画面，所述非目标区域不展示所述视频画面；
处理模块，用于对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在所述非目标区域的纯色像素数据进行编码处理；
发送模块，用于将编码处理后得到的直播流数据发送给至少一个观众终端。
在一种可能的实现方式中，所述装置还包括：
接收模块，用于接收服务器下发的展示信息；
所述确定模块，还用于当所述展示信息指示通过部分区域展示所述视频画面时，根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域。
在一种可能的实现方式中，所述处理模块，还用于对所述非目标区域进行黑色像素填充。
在一种可能的实现方式中，所述接收模块，还用于接收所述服务器下发的第一展示信息，所述第一展示信息指示了展示所述视频画面的区域位置；
所述确定模块，还用于根据所述第一展示信息在所述直播间展示区域中确定所述目标区域，将除了所述目标区域之外的其他区域确定为所述非目标区域。
在一种可能的实现方式中，所述接收模块，还用于接收所述服务器下发的第二展示信息，所述第二展示信息指示了不展示所述视频画面的区域位置；
所述确定模块，还用于根据所述第二展示信息在直播间展示区域中确定所述非目标区域，将除了所述非目标区域之外的其他区域确定为所述目标区域。
在一种可能的实现方式中，所述处理模块，还用于当所述展示信息指示通过全部区域展示所述视频画面时，对通过所述直播间展示区域展示的视频画面数据进行编码处理。
在一种可能的实现方式中，所述发送模块，还用于将编码处理后得到的直播流数据发送给内容分发网络，由所述内容分发网络将编码后得到的直播流数据发送给至少一个观众终端。
另一方面，提供了一种直播处理装置，所述装置包括：
第一接收模块，用于接收服务器下发的展示信息；
确定模块，用于根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示第一主播的视频画面，所述非目标区域不展示所述视频画面；
第二接收模块，用于接收所述第一主播的直播流数据，所述直播流数据经过编码处理后得到，所述直播流数据包括所述第一主播的视频画面数据和纯色像素数据；
展示模块，用于基于所述直播流数据，在所述目标区域展示所述第一主播的视频画面。
在一种可能的实现方式中，当主播数量为两个时，所述非目标区域用于展示第二主播的视频画面，所述目标区域和所述非目标区域为大小窗模式、上下分屏模式或左右分屏模式中的任意一种。
另一方面，提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令，所述至少一条指令由处理器加载并执行以实现上述的直播处理方法。
另一方面，提供了一种直播处理设备，所述设备包括处理器和存储器，所述存储器中存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现上述的直播处理方法。
本申请实施例提供的技术方案带来的有益效果是：
对于任意一个主播用户，若因业务变化使得用于展示该主播用户的视频画面的区域发生变化，则本申请实施例会对相应主播终端推送的直播流数据进行处理，比如当需要使用部分区域展示该主播用户的视频画面时，本申请实施例会在直播间展示区域中确定用于展示该主播用户的视频画面的目标区域，以及不展示该主播用户的视频画面的非目标区域；之后，对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；之后，将编码处理后得到的直播流数据推送给观众终端。
基于以上描述可知，在无需通过整个直播展示区域对主播用户的视频画面进行展示时，本申请实施例会在向观众终端推流之前，使用纯色像素对不展示该主播用户的视频画面的那部分区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果，进而降低了对数据传输过程的要求，比如会减少对网络带宽的占用和降低对网络质量的要求。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种直播处理方法涉及的实施环境的示意图；
图2是本申请实施例提供的一种连麦场景的示意图；
图3是本申请实施例提供的一种直播处理方法的流程图；
图4是本申请实施例提供的一种直播处理方法的流程图；
图5是本申请实施例提供的一种直播处理方法的流程图；
图6是本申请实施例提供的一种展示区域和不展示区域的示意图；
图7是本申请实施例提供的一种直播处理效果的示意图；
图8是本申请实施例提供的一种直播处理装置的结构示意图；
图9是本申请实施例提供的一种直播处理装置的装置结构示意图；
图10是本申请实施例提供的一种直播处理设备的结构示意图；
图11是本申请实施例提供的一种直播处理设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
在对本申请实施例进行详细地解释说明之前，先对本申请实施例涉及到的名词术语或缩略语进行介绍。
直播流数据：在本申请实施例中，主播用户的主播终端通常也称之为直播推流端，而直播流数据便指在主播终端进行编码处理后的多媒体数据。
其中，该多媒体数据通常包括画面部分和语音部分。
示例性地，该多媒体数据通常是以流的形式由主播终端推送到直播后台，再经由直播后台侧的CDN(Content Delivery Network，内容分发网络)，将直播流数据转推给观众终端。
转码：对直播流进行流处理的一种方式。转码处理能够将直播流由原始分辨率和原始码率转换成多种不同分辨率以及多种不同码率。
码率：用于衡量直播流每秒数据量的大小，单位为kbps。其中，码率分为视频码率和音频码率，一般情况下，码率越高，对应的视频画面的清晰度越好、音频的音质也越好；另外，码率还会影响数据上传，一般情况下，码率越高，进行数据上传时要求相应便越高，比如需要的带宽和网络质量随之提高。
CDN：能够实时地根据网络流量和各个服务节点的连接、负载状况、到用户的距离以及响应时间等综合信息，将用户发起的请求重新导向离用户最近的服务节点上。其目的是使用户可就近取得所需内容，以解决网络拥挤的状况，提高用户访问网站的响应速度。
下面对本申请实施例提供的一种直播处理方法涉及的实施环境进行介绍。
参见图1，该实施环境包括：主播用户使用的主播终端101、直播后台102和观众用户使用的观众终端103。其中，直播后台102在本文中也称之为服务器。
在本申请实施例中，主播用户使用的主播终端101和观众用户使用的观众终端103的类型包括但不限于：移动式终端和固定式终端。
作为一个示例，移动式终端包括但不限于：智能手机、平板电脑、笔记本电脑、电子阅读器、MP3播放器(Moving Picture Experts Group Audio Layer III，动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group Audio Layer IV，动态影像专家压缩标准音频层面4)播放器等；固定式终端包括但不限于台式电脑，本申请实施例对此不进行具体限定。
示例性地，图1仅是以主播终端101和观众终端103均为智能手机进行举例说明。而直播后台102用于为主播终端101和观众终端103提供后台服务。在一种可能的实现方式中，直播后台102包括但不限于接流服务器、转码服务器和CDN，本申请实施例对此不进行具体限定。
另外，主播终端101和观众终端103上通常安装有直播类应用程序，以方便主播用户进入直播平台进行直播，以及观众用户进入直播间内观看直播。
在一种可能的实现方式中，主播终端101和观众终端103与直播后台102进行数据通信可基于RTMP(Real Time Messaging Protocol，实时消息传输协议)，本申请实施例对此同样不进行具体限定。
作为一个示例，基于上述的实施环境，本申请实施例可应用在主播用户数量为一个的直播场景下，也可以应用在主播用户数量为至少两个的连麦场景下。
其中，连麦场景是指一种线上互动场景，图2示出了连麦场景的一种示例性情形。如图2所示，连麦场景下一个直播间内会出现两个主播用户，这两个主播用户的视频画面会同时显示在观众终端的直播间展示区域，且共享直播间展示区域，即二者的视频画面分别占据直播间展示区域的一部分。
在一种可能的实现方式中，在连麦场景下除了图2所示的左右分屏模式之外，还可以为上下分屏模式或大小窗模式，本申请实施例对此不进行具体限定。
举例来说，以主播用户A和主播用户B为例，则主播用户B可以临时进入主播用户A的直播间，实现连麦PK。比如，在同一直播间内主播用户A和主播用户B可以进行唱歌PK，并在PK结束后主播用户B再退出该直播间。
需要说明的是，本申请实施例提供的直播处理方法既可以在主播终端侧执行，也可以在转码服务器侧执行，本申请实施例对此不进行具体限定。而无论在主播终端上执行还是在转码服务器上执行，均能够达到节省码率的效果。
下面通过下述实施例对本申请实施例提供的直播处理方法进行详细地解释说明。
图3是本申请实施例提供的一种直播处理方法的流程图。参加图3，本申请实施例提供的方法流程包括：
301、在直播间展示区域中确定目标区域和非目标区域，目标区域用于展示主播终端采集到的第一主播的视频画面，非目标区域不展示第一主播的视频画面。
302、对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理。
303、将编码处理后得到的直播流数据发送给至少一个观众终端。
本申请实施例提供的方法，对于任意一个主播用户，若因业务变化使得用于展示该主播用户的视频画面的区域发生变化，则本申请实施例会对相应主播终端推送的直播流数据进行处理，比如当需要使用部分区域展示该主播用户的视频画面时，本申请实施例会在直播间展示区域中确定用于展示该主播用户的视频画面的目标区域，以及不展示该主播用户的视频画面的非目标区域；之后，对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；之后，将编码处理后得到的直播流数据推送给观众终端。
基于以上描述可知，在无需通过整个直播展示区域对主播用户的视频画面进行展示时，本申请实施例会在向观众终端推流之前，使用纯色像素对不展示该主播用户的视频画面的那部分区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果，进而降低了对数据传输过程的要求，比如会减少对网络带宽的占用和降低对网络质量的要求。
在一种可能的实现方式中，所述在直播间展示区域中确定目标区域和非目标区域，包括：
接收服务器下发的展示信息；
当所述展示信息指示通过部分区域展示所述视频画面时，根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域。
在一种可能的实现方式中，所述对所述非目标区域进行纯色像素填充，包括：对所述非目标区域进行黑色像素填充。
在一种可能的实现方式中，所述接收服务器下发的展示信息，包括：
接收所述服务器下发的第一展示信息，所述第一展示信息指示了展示所述视频画面的区域位置；
所述根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域，包括：根据所述第一展示信息在所述直播间展示区域中确定所述目标区域，将除了所述目标区域之外的其他区域确定为所述非目标区域。
在一种可能的实现方式中，所述接收服务器下发的展示信息，包括：
接收所述服务器下发的第二展示信息，所述第二展示信息指示了不展示所述视频画面的区域位置；
所述根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域，包括：根据所述第二展示信息在直播间展示区域中确定所述非目标区域，将除了所述非目标区域之外的其他区域确定为所述目标区域。
在一种可能的实现方式中，所述方法还包括：
当所述展示信息指示通过全部区域展示所述视频画面时，对通过所述直播间展示区域展示的视频画面数据进行编码处理。
在一种可能的实现方式中，所述将编码处理后得到的直播流数据发送给至少一个观众终端，包括：
将编码处理后得到的直播流数据发送给内容分发网络，由所述内容分发网络将编码后得到的直播流数据发送给至少一个观众终端。
上述所有可选技术方案，可以采用任意结合形成本公开的可选实施例，在此不再一一赘述。
图4是本申请实施例提供的一种直播处理方法的流程图。该方法应用于观众终端，参见图4，本申请实施例提供的方法流程包括：
401、接收服务器下发的展示信息。
402、根据该展示信息在直播间展示区域中确定目标区域和非目标区域，目标区域用于展示第一主播的视频画面，非目标区域不展示第一主播的视频画面。
403、接收第一主播的直播流数据，该直播流数据经过编码处理后得到，该直播流数据包括第一主播的视频画面数据和纯色像素数据。
404、基于该直播流数据，在目标区域展示第一主播的视频画面。
本申请实施例提供的方法，对于任意一个主播用户，若因业务变化使得用于展示该主播用户的视频画面的区域发生变化，则本申请实施例会对相应主播终端推送的直播流数据进行处理，比如当需要使用部分区域展示该主播用户的视频画面时，本申请实施例会在直播间展示区域中确定用于展示该主播用户的视频画面的目标区域，以及不展示该主播用户的视频画面的非目标区域；之后，对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；之后，将编码处理后得到的直播流数据推送给观众终端。
基于以上描述可知，在无需通过整个直播展示区域对主播用户的视频画面进行展示时，本申请实施例会在向观众终端推流之前，使用纯色像素对不展示该主播用户的视频画面的那部分区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果，进而降低了对数据传输过程的要求，比如会减少对网络带宽的占用和降低对网络质量的要求。
在一种可能的实现方式中，当主播数量为两个时，所述非目标区域用于展示第二主播的视频画面，所述目标区域和所述非目标区域为大小窗模式、上下分屏模式或左右分屏模式中的任意一种。
上述所有可选技术方案，可以采用任意结合形成本公开的可选实施例，在此不再一一赘述。
图5是本申请实施例提供的一种直播处理方法的流程图。以主播终端执行直播处理过程为例，参加图5，本申请实施例提供的方法流程包括：
501、直播后台分别向主播终端A和观众终端下发展示信息。
在本申请实施例中，主播终端A用于对本侧的主播用户A进行视频采集，并将有关于主播用户A的直播流数据推送至观众终端侧。
作为一个示例，直播后台可根据业务变化需要下发展示信息。示例性地，业务变化需要可以为切换至连麦场景，比如其他主播用户临时进入主播用户A的直播间；另外，业务变化需要还可以为在单一主播用户进行直播的场景下，观众用户出现通过部分区域对主播用户A的视频画面进行展示的需求，比如想要通过另一部分区域来展示其他资源内容。
需要说明的第一点是，无论是针对主播终端还是观众终端，直播间展示区域在本申请实施例中均是指终端设备上用于展示直播过程中的视频画面的一整块屏幕区域。
需要说明的第二点是，当直播后台下发的展示信息指示通过部分区域展示主播用户A的视频画面时，触发主播终端执行下述步骤502至步骤505。
502、当直播后台下发的展示信息指示通过部分区域展示主播用户A的视频画面时，主播终端A在直播间展示区域中确定目标区域和非目标区域。
在直播过程中，主播终端A侧的摄像头对主播用户A进行视频采集，即主播用户A的视频画面是通过主播终端A侧的摄像头采集得到的。示例性地，该摄像头既可以为主播终端A上自带的摄像头，也可以为独立于主播终端A的摄像头，本申请实施例对此不进行具体限定。
在本申请实施例中，目标区域用于展示主播终端A采集到的主播用户A的视频画面，在本文中也称之为展示区域；非目标区域不展示主播用户A的视频画面，在本文中也称之为不展示区域。
如图6所示，目标区域和非目标区域的位置关系包括但不限于：左右分屏模式、目标区域位于直播间展示区域的中间位置且非目标区域位于除此之外的边缘位置、上下分屏模型和大小窗模式，本申请实施例对此不进行具体限定。
其中，直播后台下发的指示信息既可用于指示展示区域也可以用于指示不展示区域。相应地，主播终端A可通过如下两种方式来确定不展示区域：
5021、在接收到直播后台下发的第一展示信息后，其中，第一展示信息指示了用于展示主播用户A的视频画面的区域位置；主播终端A根据第一展示信息在直播间展示区域中确定目标区域，相应地，将除了目标区域之外的其他区域确定为非目标区域，即反推出不展示区域。
5022、在接收到直播后台下发的第二展示信息后，其中，第二展示信息指示了不展示主播用户A的视频画面的区域位置；根据第二展示信息在直播间展示区域中确定非目标区域，进而将除了非目标区域之外的其他区域确定为用于展示主播用户A的视频画面的目标区域。
503、主播终端A对不需要展示主播用户A的视频画面的非目标区域进行纯色像素填充。
在本申请实施例中，主播终端A可以使用任何单一颜色的纯色像素对非目标区域进行填充。示例性地，主播终端A可以对非目标区域进行黑色像素填充，本申请实施例对此不进行具体限定。
504、主播终端A对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理。
在一种可能的实现方式中，主播终端A可以继续复用原来的视频编码模块和视频流传输通道进行编码处理和推送编码处理后得到的直播流数据。
视频编码模块在对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理后，得到压缩形式的直播流数据。压缩形式的直播流数据在经过观众终端侧的视频解码模块的解码处理后，完成对数据的还原。
在本申请实施例中，由于经过编码处理后纯色像素数据会在占用很少的字节，因此可以达到节省码率的效果。
在另一个实施方式中，若直播后台下发的展示信息用于指示通过全部区域展示主播用户A的视频画面，则主播终端A对通过整个直播间展示区域展示的主播用户A的视频画面数据进行编码处理，该种情形相较于上述情形码率较高。
505、主播终端A将编码处理后得到的直播流数据发送给CDN，由CDN将编码后得到的直播流数据转发给观众终端。
在本申请实施例中，主播终端A会将编码处理后得到的直播流数据推送给直播后台，而直播后台在完成接流后，会依次对接收到的直播流数据进行诸如转码、转封装等处理，之后再通过CDN将完成上述处理后的直播流数据进行分发，即通过CDN将主播终端A推送的直播流数据转发给观众终端。
需要说明的是，此处的观众终端是指进入主播用户A的直播间进行观看的全部观众用户的终端。
以上步骤502至步骤505介绍了主播终端A的直播处理过程。针对观众终端侧来讲，至少包括如下步骤：
506、当直播后台下发的展示信息指示通过部分区域展示主播用户A的视频画面时，观众终端根据该展示信息在直播间展示区域中进行区域布局。
其中，此处提及的观众终端是指进入主播用户A的直播间进行观看的任意一个观众用户的终端。
本步骤即是在观众终端的直播间展示区域中确定需要展示主播用户A的视频画面的展示区域和不需要展示主播用户A的视频画面的不展示区域。
507、在接收到CDN转发的主播用户A的直播流数据后，观众终端基于接收到的直播流数据，在直播间展示区域的目标区域展示主播用户A的视频画面。
图7示出了单一主播用户进行直播的场景下的直播处理效果。以用黑色像素进行非目标区域填充为例，则如图7所示，在除了目标区域之外的非目标区域可以展示为黑色，而不用于展示主播用户A的视频画面。
另外，如果主播用户的数量为两个，则观众终端上的非目标区域和主播终端A上的非目标区域会用于展示另一个主播用户的视频画面。而另一个主播用户的主播终端同样也可采样上述步骤502至步骤505所示的方式进行直播处理，以实现节省码率的效果。
本申请实施例提供的方法至少具有如下有益效果：
对于任意一个主播用户，在因业务变化需要使得用于展示该主播用户的视频画面的展示区域发生变化时，相应主播终端会在推送直播流数据之前进行处理，比如当需要使用部分区域展示该主播用户的视频画面时，相应主播终端会在直播间展示区域中确定展示区域和不展示区域，其中，展示区域用于展示该主播用户的视频画面，不展示区域不展示该主播用户的视频画面；之后，相应主播终端会对不展示区域进行纯色像素填充，并对通过展示区域展示的视频画面数据和填充在不展示区域的纯色像素数据进行编码处理；之后，再将编码处理后得到的直播流数据推送给观众终端。
基于以上描述可知，在无需通过整个直播展示区域对主播用户的视频画面进行展示时，相应主播终端会在向观众终端推流之前，使用纯色像素对不展示区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果，进而降低了对数据传输过程的要求，比如会减少对网络带宽的占用和降低对网络质量的要求。
在另一个实施例中，除了由主播终端执行直播处理之外，还可以由直播后台的转码服务器执行直播处理。针对该种方式，主播终端A直接对主播用户A的视频画面数据进行编码处理，并将编码处理后得到的直播流数据推送给直播后台。进而，直播后台的转码服务器便可以根据与上述步骤502至步骤505类似的方式来完成直播处理，此处不再赘述。另外，针对转码服务器进行直播处理的情形，可能仅会覆盖到进入主播用户A的直播间拉取转码直播流进行观看的部分观众用户。因为，此时直播后台可能会向观众用户推送两路直播流数据，其中一路为原始的直播流数据，另一路则为经过转码服务器进行上述直播处理后的直播流数据。
图8是本申请实施例提供的一种直播处理装置的结构示意图。参见图8，该装置包括：
确定模块801，用于在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示主播终端采集到的第一主播的视频画面，所述非目标区域不展示所述视频画面；
处理模块802，用于对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；
发送模块803，用于将编码处理后得到的直播流数据发送给至少一个观众终端。
本申请实施例提供的装置，对于任意一个主播用户，若因业务变化使得用于展示该主播用户的视频画面的区域发生变化，则本申请实施例会对相应主播终端推送的直播流数据进行处理，比如当需要使用部分区域展示该主播用户的视频画面时，本申请实施例会在直播间展示区域中确定用于展示该主播用户的视频画面的目标区域，以及不展示该主播用户的视频画面的非目标区域；之后，对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；之后，将编码处理后得到的直播流数据推送给观众终端。
基于以上描述可知，在无需通过整个直播展示区域对主播用户的视频画面进行展示时，本申请实施例会在向观众终端推流之前，使用纯色像素对不展示该主播用户的视频画面的那部分区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果，进而降低了对数据传输过程的要求，比如会减少对网络带宽的占用和降低对网络质量的要求。
在一种可能的实现方式中，该装置还包括：
接收模块，用于接收服务器下发的展示信息；
所述确定模块，还用于当所述展示信息指示通过部分区域展示所述视频画面时，根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域。
在一种可能的实现方式中，处理模块，还用于对所述非目标区域进行黑色像素填充。
在一种可能的实现方式中，接收模块，还用于接收所述服务器下发的第一展示信息，所述第一展示信息指示了展示所述视频画面的区域位置；
所述确定模块，还用于根据所述第一展示信息在所述直播间展示区域中确定所述目标区域，将除了所述目标区域之外的其他区域确定为所述非目标区域。
在一种可能的实现方式中，接收模块，还用于接收所述服务器下发的第二展示信息，所述第二展示信息指示了不展示所述视频画面的区域位置；
所述确定模块，还用于根据所述第二展示信息在直播间展示区域中确定所述非目标区域，将除了所述非目标区域之外的其他区域确定为所述目标区域。
在一种可能的实现方式中，所述处理模块，还用于当所述展示信息指示通过全部区域展示所述视频画面时，对通过所述直播间展示区域展示的视频画面数据进行编码处理。
在一种可能的实现方式中，发送模块，还用于将编码处理后得到的直播流数据发送给内容分发网络，由所述内容分发网络将编码后得到的直播流数据发送给至少一个观众终端。
上述所有可选技术方案，可以采用任意结合形成本公开的可选实施例，在此不再一一赘述。
图9是本申请实施例提供的一种直播处理装置的结构示意图。参见图9，该装置包括：
第一接收模块901，用于接收服务器下发的展示信息；
确定模块902，用于根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示第一主播的视频画面，所述非目标区域不展示所述视频画面；
第二接收模块903，用于接收所述第一主播的直播流数据，所述直播流数据经过编码处理后得到，所述直播流数据包括所述第一主播的视频画面数据和纯色像素数据；
展示模块904，用于基于所述直播流数据，在所述目标区域展示所述第一主播的视频画面。
本申请实施例提供的装置，对于任意一个主播用户，若因业务变化使得用于展示该主播用户的视频画面的区域发生变化，则本申请实施例会对相应主播终端推送的直播流数据进行处理，比如当需要使用部分区域展示该主播用户的视频画面时，本申请实施例会在直播间展示区域中确定用于展示该主播用户的视频画面的目标区域，以及不展示该主播用户的视频画面的非目标区域；之后，对非目标区域进行纯色像素填充，并对通过目标区域展示的视频画面数据和填充在非目标区域的纯色像素数据进行编码处理；之后，将编码处理后得到的直播流数据推送给观众终端。
基于以上描述可知，在无需通过整个直播展示区域对主播用户的视频画面进行展示时，本申请实施例会在向观众终端推流之前，使用纯色像素对不展示该主播用户的视频画面的那部分区域进行填充，因此在编码处理后这部分纯色像素数据便会占用很少的字节，达到了节省码率的效果，进而降低了对数据传输过程的要求，比如会减少对网络带宽的占用和降低对网络质量的要求。
在一种可能的实现方式中，当主播数量为两个时，所述非目标区域用于展示第二主播的视频画面，所述目标区域和所述非目标区域为大小窗模式、上下分屏模式或左右分屏模式中的任意一种。
上述所有可选技术方案，可以采用任意结合形成本公开的可选实施例，在此不再一一赘述。
需要说明的是：上述实施例提供的直播处理装置在进行直播处理时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的直播处理装置与直播处理方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
图10示出了本申请一个示例性实施例提供的直播处理设备1000的结构框图。该设备1000可以是便携式移动终端，比如：智能手机、平板电脑、MP3播放器(Moving PictureExperts Group Audio LayerIII，动态影像专家压缩标准音频层面3)、MP4(MovingPicture Experts Group Audio Layer IV，动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。设备1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
示例性地，该设备1000可以为前述实施例的主播终端或观众终端。
通常，设备1000包括有：处理器1001和存储器1002。
处理器1001可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器1001可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1001也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器1001可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器1001还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器1002可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器1002还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器1002中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器1001所执行以实现本申请中方法实施例提供的直播处理方法。
在一些实施例中，设备1000还可选包括有：***设备接口1003和至少一个***设备。处理器1001、存储器1002和***设备接口1003之间可以通过总线或信号线相连。各个***设备可以通过总线、信号线或电路板与***设备接口1003相连。具体地，***设备包括：射频电路1004、触摸显示屏1005、摄像头1006、音频电路1007、定位组件1008和电源1009中的至少一种。
***设备接口1003可被用于将I/O(Input/Output，输入/输出)相关的至少一个***设备连接到处理器1001和存储器1002。在一些实施例中，处理器1001、存储器1002和***设备接口1003被集成在同一芯片或电路板上；在一些其他实施例中，处理器1001、存储器1002和***设备接口1003中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。
射频电路1004用于接收和发射RF(Radio Frequency，射频)信号，也称电磁信号。射频电路1004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1004将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路1004包括：天线***、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1004可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity，无线保真)网络。在一些实施例中，射频电路1004还可以包括NFC(Near Field Communication，近距离无线通信)有关的电路，本申请对此不加以限定。
显示屏1005用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1005是触摸显示屏时，显示屏1005还具有采集在显示屏1005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1001进行处理。此时，显示屏1005还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏1005可以为一个，设置设备1000的前面板；在另一些实施例中，显示屏1005可以为至少两个，分别设置在设备1000的不同表面或呈折叠设计；在再一些实施例中，显示屏1005可以是柔性显示屏，设置在设备1000的弯曲表面上或折叠面上。甚至，显示屏1005还可以设置成非矩形的不规则图形，也即异形屏。显示屏1005可以采用LCD(Liquid Crystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1006用于采集图像或视频。可选地，摄像头组件1006包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件1006还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
音频电路1007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器1001进行处理，或者输入至射频电路1004以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在设备1000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1001或射频电路1004的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路1007还可以包括耳机插孔。
定位组件1008用于定位设备1000的当前地理位置，以实现导航或LBS(LocationBased Service，基于位置的服务)。定位组件1008可以是基于美国的GPS(GlobalPositioning System，全球定位***)、中国的北斗***或俄罗斯的伽利略***的定位组件。
电源1009用于为设备1000中的各个组件进行供电。电源1009可以是交流电、直流电、一次性电池或可充电电池。当电源1009包括可充电电池时，该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池，无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中，设备1000还包括有一个或多个传感器1010。该一个或多个传感器1010包括但不限于：加速度传感器1011、陀螺仪传感器1012、压力传感器1013、指纹传感器1014、光学传感器1015以及接近传感器1016。
加速度传感器1011可以检测以设备1000建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器1011可以用于检测重力加速度在三个坐标轴上的分量。处理器1001可以根据加速度传感器1011采集的重力加速度信号，控制触摸显示屏1005以横向视图或纵向视图进行用户界面的显示。加速度传感器1011还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1012可以检测设备1000的机体方向及转动角度，陀螺仪传感器1012可以与加速度传感器1011协同采集用户对设备1000的3D动作。处理器1001根据陀螺仪传感器1012采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1013可以设置在设备1000的侧边框和/或触摸显示屏1005的下层。当压力传感器1013设置在设备1000的侧边框时，可以检测用户对设备1000的握持信号，由处理器1001根据压力传感器1013采集的握持信号进行左右手识别或快捷操作。当压力传感器1013设置在触摸显示屏1005的下层时，由处理器1001根据用户对触摸显示屏1005的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1014用于采集用户的指纹，由处理器1001根据指纹传感器1014采集到的指纹识别用户的身份，或者，由指纹传感器1014根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器1001授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1014可以被设置设备1000的正面、背面或侧面。当设备1000上设置有物理按键或厂商Logo时，指纹传感器1014可以与物理按键或厂商Logo集成在一起。
光学传感器1015用于采集环境光强度。在一个实施例中，处理器1001可以根据光学传感器1015采集的环境光强度，控制触摸显示屏1005的显示亮度。具体地，当环境光强度较高时，调高触摸显示屏1005的显示亮度；当环境光强度较低时，调低触摸显示屏1005的显示亮度。在另一个实施例中，处理器1001还可以根据光学传感器1015采集的环境光强度，动态调整摄像头组件1006的拍摄参数。
接近传感器1016，也称距离传感器，通常设置在设备1000的前面板。接近传感器1016用于采集用户与设备1000的正面之间的距离。在一个实施例中，当接近传感器1016检测到用户与设备1000的正面之间的距离逐渐变小时，由处理器1001控制触摸显示屏1005从亮屏状态切换为息屏状态；当接近传感器1016检测到用户与设备1000的正面之间的距离逐渐变大时，由处理器1001控制触摸显示屏1005从息屏状态切换为亮屏状态。
本领域技术人员可以理解，图10中示出的结构并不构成对设备1000的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
图11是本申请实施例提供的一种直播处理设备的结构示意图，该直播处理设备可以为前述实施例中的服务器。其中，该设备1110可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(central processing units，CPU)1101和一个或一个以上的存储器1102，其中，所述存储器1102中存储有至少一条指令，所述至少一条指令由所述处理器1101加载并执行以实现上述各个方法实施例提供的直播处理方法。当然，该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件，以便进行输入输出，该服务器还可以包括其他用于实现设备功能的部件，在此不做赘述。
在示例性实施例中，还提供了一种计算机可读存储介质，例如包括指令的存储器，上述指令可由终端中的处理器执行以完成上述实施例中的直播处理方法。例如，所述计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本申请的可选实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (12)

1.一种直播处理方法，其特征在于，所述方法应用在第一主播的终端，所述方法包括：
接收服务器下发的展示信息；
当所述展示信息指示通过部分区域展示视频画面时，根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示主播终端采集到的第一主播的视频画面，所述非目标区域不展示所述视频画面；
对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在所述非目标区域的纯色像素数据进行编码处理；
将编码处理后得到的直播流数据发送给至少一个观众终端。
2.根据权利要求1所述的方法，其特征在于，所述对所述非目标区域进行纯色像素填充，包括：对所述非目标区域进行黑色像素填充。
3.根据权利要求1所述的方法，所述接收服务器下发的展示信息，包括：
接收所述服务器下发的第一展示信息，所述第一展示信息指示了展示所述视频画面的区域位置；
所述根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域，包括：根据所述第一展示信息在所述直播间展示区域中确定所述目标区域，将除了所述目标区域之外的其他区域确定为所述非目标区域。
4.根据权利要求1所述的方法，所述接收服务器下发的展示信息，包括：
接收所述服务器下发的第二展示信息，所述第二展示信息指示了不展示所述视频画面的区域位置；
所述根据所述展示信息在所述直播间展示区域中确定所述目标区域和所述非目标区域，包括：根据所述第二展示信息在直播间展示区域中确定所述非目标区域，将除了所述非目标区域之外的其他区域确定为所述目标区域。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当所述展示信息指示通过全部区域展示所述视频画面时，对通过所述直播间展示区域展示的视频画面数据进行编码处理。
6.根据权利要求1所述的方法，其特征在于，所述将编码处理后得到的直播流数据发送给至少一个观众终端，包括：
将编码处理后得到的直播流数据发送给内容分发网络，由所述内容分发网络将编码后得到的直播流数据发送给至少一个观众终端。
7.一种直播处理方法，其特征在于，所述方法包括：
接收服务器下发的展示信息；
根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示第一主播的视频画面，所述非目标区域不展示所述视频画面；
接收所述第一主播的直播流数据，所述直播流数据经过所述第一主播根据服务器下发给第一主播的终端的展示信息对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在所述非目标区域的纯色像素数据进行编码处理后得到；
基于所述直播流数据，在所述目标区域展示所述第一主播的视频画面。
8.根据权利要求7所述的方法，其特征在于，当主播数量为两个时，所述非目标区域用于展示第二主播的视频画面，所述目标区域和所述非目标区域为大小窗模式、上下分屏模式或左右分屏模式中的任意一种。
9.一种直播处理装置，其特征在于，所述装置应用在第一主播的终端，所述装置包括：
确定模块，用于接收服务器下发的展示信息；当所述展示信息指示通过部分区域展示视频画面时，根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示主播终端采集到的第一主播的视频画面，所述非目标区域不展示所述视频画面；
处理模块，用于对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在所述非目标区域的纯色像素数据进行编码处理；
发送模块，用于将编码处理后得到的直播流数据发送给至少一个观众终端。
10.一种直播处理装置，其特征在于，应用于观众终端，所述装置包括：
第一接收模块，用于接收服务器下发的展示信息；
确定模块，用于根据所述展示信息在直播间展示区域中确定目标区域和非目标区域，所述目标区域用于展示第一主播的视频画面，所述非目标区域不展示所述视频画面；
第二接收模块，用于接收所述第一主播的直播流数据，所述直播流数据经过所述第一主播根据服务器下发给第一主播的终端的展示信息对所述非目标区域进行纯色像素填充，并对通过所述目标区域展示的视频画面数据和填充在所述非目标区域的纯色像素数据进行编码处理后得到；
展示模块，用于基于所述直播流数据，在所述目标区域展示所述第一主播的视频画面。
11.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令，所述至少一条指令由处理器加载并执行以实现如权利要求1至6中任一项权利要求所述的直播处理方法；或，如权利要求7至8中任一项权利要求所述的直播处理方法。
12.一种直播处理设备，其特征在于，所述设备包括处理器和存储器，所述存储器中存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如权利要求1至6中任一项权利要求所述的直播处理方法；或，如权利要求7至8中任一项权利要求所述的直播处理方法。
CN201911354791.7A 2019-12-25 2019-12-25 直播处理方法、装置、存储介质及设备 Active CN111010588B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911354791.7A CN111010588B (zh) 2019-12-25 2019-12-25 直播处理方法、装置、存储介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911354791.7A CN111010588B (zh) 2019-12-25 2019-12-25 直播处理方法、装置、存储介质及设备

Publications (2)

Publication Number Publication Date
CN111010588A CN111010588A (zh) 2020-04-14
CN111010588B true CN111010588B (zh) 2022-05-17

Family

ID=70117822

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911354791.7A Active CN111010588B (zh) 2019-12-25 2019-12-25 直播处理方法、装置、存储介质及设备

Country Status (1)

Country Link
CN (1) CN111010588B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114205658A (zh) * 2020-08-27 2022-03-18 西安诺瓦星云科技股份有限公司 图像显示方法、装置、***以及计算机可读存储介质
CN118158518A (zh) * 2020-11-11 2024-06-07 华为技术有限公司 控制相机的方法与电子设备
CN114268823A (zh) * 2021-12-01 2022-04-01 北京达佳互联信息技术有限公司 一种视频播放方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009239528A (ja) * 2008-03-26 2009-10-15 Sharp Corp デジタル放送受信装置
WO2018086417A1 (zh) * 2016-11-10 2018-05-17 广州华多网络科技有限公司 一种轮麦直播的方法、装置和***
CN110324654A (zh) * 2019-08-02 2019-10-11 广州虎牙科技有限公司 主播端直播视频帧处理方法、装置、设备、***及介质
CN110456998A (zh) * 2019-07-31 2019-11-15 广州视源电子科技股份有限公司 显示方法及装置、存储介质和处理器

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104202646A (zh) * 2014-08-07 2014-12-10 天津三星电子有限公司 一种电视画面显示方法及装置、一种电视
WO2017219347A1 (zh) * 2016-06-24 2017-12-28 北京小米移动软件有限公司 直播显示方法、装置及***
CN106484349A (zh) * 2016-09-26 2017-03-08 腾讯科技（深圳）有限公司 直播信息的处理方法和装置
US10380923B2 (en) * 2016-11-28 2019-08-13 Breakfast, Llc Modular flip-disc display system and method
CN107436658B (zh) * 2017-06-23 2021-03-19 Oppo广东移动通信有限公司 一种降低温升的方法、计算机可读存储介质、移动终端
CN109348276B (zh) * 2018-11-08 2019-12-17 北京微播视界科技有限公司 视频画面调整方法、装置、计算机设备和存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009239528A (ja) * 2008-03-26 2009-10-15 Sharp Corp デジタル放送受信装置
WO2018086417A1 (zh) * 2016-11-10 2018-05-17 广州华多网络科技有限公司 一种轮麦直播的方法、装置和***
CN110456998A (zh) * 2019-07-31 2019-11-15 广州视源电子科技股份有限公司 显示方法及装置、存储介质和处理器
CN110324654A (zh) * 2019-08-02 2019-10-11 广州虎牙科技有限公司 主播端直播视频帧处理方法、装置、设备、***及介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
面向混合场景屏幕图像序列的H.264实时编码码率控制技术的设计与应用;林艺;《中国优秀硕士学位论文全文数据库（电子期刊）信息科技辑》;20130715;全文 *

Also Published As

Publication number Publication date
CN111010588A (zh) 2020-04-14

Similar Documents

Publication Publication Date Title
CN108966008B (zh) 直播视频回放方法及装置
CN111093108B (zh) 音画同步判断方法、装置、终端及计算机可读存储介质
CN111083507B (zh) 连麦方法及***、第一主播端、观众端及计算机存储介质
CN109874043B (zh) 视频流发送方法、播放方法及装置
CN111464830B (zh) 图像显示的方法、装置、***、设备及存储介质
CN111010588B (zh) 直播处理方法、装置、存储介质及设备
CN111586431B (zh) 进行直播处理的方法、装置、设备及存储介质
CN110996117B (zh) 视频转码方法、装置、电子设备和存储介质
CN109168032B (zh) 视频数据的处理方法、终端、服务器及存储介质
CN112104648A (zh) 数据处理方法、装置、终端、服务器及存储介质
CN110958464A (zh) 直播数据处理方法、装置、服务器、终端及存储介质
CN108965711B (zh) 视频处理方法及装置
CN110750734A (zh) 天气显示方法、装置、计算机设备及计算机可读存储介质
CN111586444B (zh) 视频处理方法、装置、电子设备及存储介质
CN111083554A (zh) 直播礼物显示的方法和装置
CN111478915B (zh) 直播数据的推流方法、装置、终端及存储介质
CN111294551B (zh) 进行音视频传输的方法、装置、设备及存储介质
CN112616082A (zh) 视频预览方法、装置、终端及存储介质
CN109714628B (zh) 播放音视频的方法、装置、设备、存储介质及***
CN111698262B (zh) 带宽确定方法、装置、终端及存储介质
CN112492331B (zh) 直播方法、装置、***及存储介质
CN110996115B (zh) 直播视频播放方法、装置、设备、存储介质和程序产品
CN111586433B (zh) 码率调整方法、装置、设备及存储介质
CN111478914B (zh) 时间戳处理方法、装置、终端及存储介质
CN113141538A (zh) 媒体资源播放方法、装置、终端、服务器及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20220318

Address after: 4119, 41st floor, building 1, No.500, middle section of Tianfu Avenue, Chengdu hi tech Zone, China (Sichuan) pilot Free Trade Zone, Chengdu, Sichuan 610000

Applicant after: Chengdu kugou business incubator management Co.,Ltd.

Address before: No. 315, Huangpu Avenue middle, Tianhe District, Guangzhou City, Guangdong Province

Applicant before: GUANGZHOU KUGOU COMPUTER TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant