CN112383791A - 一种媒体数据处理方法、装置、电子设备和存储介质 - Google Patents
一种媒体数据处理方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN112383791A CN112383791A CN202011263092.4A CN202011263092A CN112383791A CN 112383791 A CN112383791 A CN 112383791A CN 202011263092 A CN202011263092 A CN 202011263092A CN 112383791 A CN112383791 A CN 112383791A
- Authority
- CN
- China
- Prior art keywords
- media data
- information
- network
- playing
- played
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 230000005540 biological transmission Effects 0.000 claims abstract description 144
- 238000012545 processing Methods 0.000 claims description 44
- 238000000034 method Methods 0.000 claims description 32
- 238000013507 mapping Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 11
- 238000007650 screen-printing Methods 0.000 claims description 3
- 238000004458 analytical method Methods 0.000 description 17
- 230000001133 acceleration Effects 0.000 description 9
- 239000000243 solution Substances 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000009286 beneficial effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000005457 optimization Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008713 feedback mechanism Effects 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012958 reprocessing Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
- H04N21/64723—Monitoring of network processes or resources, e.g. monitoring of network load
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
- H04N21/64746—Control signals issued by the network directed to the server or the client
- H04N21/64761—Control signals issued by the network directed to the server or the client directed to the server
- H04N21/64769—Control signals issued by the network directed to the server or the client directed to the server for rate control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例提供了一种媒体数据处理方法、装置、电子设备和存储介质,根据已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息确定待播放媒体数据的媒体参数。播放信息和网络传输信息分别从业务层和网络层反映了网络状态,相比于客户端本地网络状态,能够更加全面的反映真实网络状态,因而根据播放信息和网络传输信息调整媒体参数,有利于使得媒体数据的播放与真实网络允许的状态相匹配,从而提高网络资源的利用率。
Description
技术领域
本发明涉及通信传输技术领域,尤其是涉及一种媒体数据处理方法、装置、电子设备和存储介质。
背景技术
媒体数据(例如,流媒体数据)包括多种形式,例如,视频、音频、文本等等。媒体数据的传输会受到网络的影响导致实际播出的时候出现卡顿、播放延迟和花屏等问题。现有技术中存在一些能够自适应调节媒体数据,提高媒体数据播出质量的方法,例如,对于视频播放(例如,直播流的播放)可以采用HLS(HTTP Live Streaming,码率自适应技术)进行调节。
目前,HLS主要采用直播流在流媒体源站按照预先码率模板生成固定ts切片以及m3u8索引文件,再落盘存储在本地。当用户观看直播赛事流时,到CDN(Content DeliveryNetwork,内容分发网络)请求相关索引文件以及媒体数据切片ts资源,如果边缘缓存节点没有该资源,会一层层回到源站获取指定资源。当客户端本地网络不好或服务端无法按时将资源吐给客户端时,会出现卡顿现象。后来用户终端为了适应客户端本地网络状况,提升用户观看体验,当客户端本地网络状况良好时,请求高码率的ts,反之请求低码率的ts,从而达到降低视频卡顿率,提升观看体验效果的目的。然而,由于m3u8索引文件ts切片间隔固定、条数固定,一旦发生延迟,随着时间推进,用户观看的延迟会越来越大,且终端的码率自适应判断依据只结合了终端本地。
可见,现有HLS根据客户端本地网络状态调整媒体数据的码率,由于客户端本地网络状态不能反映真实网络状态,媒体数据的播放不能根据真实网络允许的状态调整,不利于充分利用网络资源。
发明内容
本发明实施例提供一种媒体数据处理方法、装置、电子设备和存储介质,用以解决现有HLS根据客户端本地网络状态调整媒体数据的码率,由于客户端本地网络状态不能反映真实网络状态,媒体数据的播放不能达到真实网络允许的最佳状态,也不能充分利用网络资源的问题。
针对以上技术问题,第一方面,本发明实施例提供一种媒体数据处理方法,包括:
获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;
根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
第二方面,本发明实施例提供一种媒体数据处理装置,包括:
获取模块,用于获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;
确定模块,用于根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
第三方面,本发明实施例提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以上所述的媒体数据处理方法的步骤。
第四方面,本发明实施例提供一种非暂态可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以上任一项所述的媒体数据处理方法的步骤。
本发明的实施例提供了一种媒体数据处理方法、装置、电子设备和存储介质,根据已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息确定待播放媒体数据的媒体参数。播放信息和网络传输信息分别从业务层和网络层反映了网络状态,相比于客户端本地网络状态,能够更加全面的反映真实网络状态,因而根据播放信息和网络传输信息调整媒体参数,有利于使得媒体数据的播放与真实网络允许的状态相匹配,从而提高网络资源的利用率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种媒体数据处理方法的流程示意图;
图2是本发明另一实施例提供的媒体数据传输的网络拓扑图;
图3是本发明另一实施例提供的媒体数据处理装置的结构框图;
图4是本发明另一实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了提高网络资源的利用率,图1为本实施例提供的一种媒体数据处理方法的流程示意图。该媒体数据处理方法可以由提供待播放媒体数据的网络节点执行,例如,由媒体数据的源节点执行,或者由源节点与终端之间的任一缓存服务节点执行,或者由独立于源节点和缓存服务节点之外的功能模块执行,本实施例对此不做具体限制。参见图1,该媒体数据处理方法包括:
步骤101:获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;
步骤102:根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
其中,播放现象至少包括如下一种:卡顿、播放延迟、花屏;网络性能至少包括如下一种:网络延迟、丢包率。
媒体参数用于处理媒体数据,包括如下至少一种:对媒体数据切片的切片时间间隔、切片的片段索引文件的索引长度、媒体数据传输的码率。
需要说明的是,播放延迟是业务层的延迟,通常指的是任一终端开始播放已播放媒体数据对应的第一时间点,和缓存服务节点向该任一终端推送已播放媒体数据对应的第二时间点之间的时间间隔。即播放延迟是一个至少包含了已播放媒体数据的传输、在任一终端的缓存、解码、加载到播放器等过程经历的总时长。网络延迟是指在传输介质中传输所用的时间,即报文从发送端到接收端网络之间经过的时间。对于本实施例,网络延迟是网络层的延迟,通常指的是已播放媒体数据从缓存服务节点发送到任一终端的时长。丢包率是指数据包丢失部分与所传数据包总数的比值。
可理解的是,在根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数之后,还可以包括:
将根据确定的媒体参数处理后的待播放媒体数据推送到任一终端,通过所述任一终端进行播放,和/或将根据确定的媒体参数处理后的待播放媒体数据推送到缓存服务节点,通过缓存服务节点进行再处理后推送到终端进行播放。
播放信息从业务层反映了网络状态,可以是根据播放现象确定的评分。网络传输信息从网络层反映了网络状态,网络传输信息可以是根据网络参数确定的评分。
本实施例提供了一种媒体数据处理方法,根据已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息确定待播放媒体数据的媒体参数。播放信息和网络传输信息分别从业务层和网络层反映了网络状态,相比于客户端本地网络状态,能够更加全面的反映真实网络状态,因而根据播放信息和网络传输信息调整媒体参数,有利于使得媒体数据的播放与真实网络允许的状态相匹配,从而提高网络资源的利用率。
通常,媒体数据需要先从源节点传输到缓存服务节点,再由缓存服务节点传输到终端进行播放。比如,通过CDN传输直播的媒体数据,CDN作为多级缓存分发网络,将用户需要访问的点直播资源预先推送到离用户最近的缓存服务节点(即边缘缓存服务节点),用户就近访问,能够有效解决地理分布、跨运营商等访问带来的延迟问题。
针对媒体数据,可以通过源节点和/或缓存服务节点对媒体参数进行调节,进一步地,在上述实施例的基础上,所述根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数,包括:
根据任一终端中已播放媒体数据的播放信息,以及缓存服务节点与所述任一终端之间的第一网络传输信息,确定对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理的媒体参数;
和/或,根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,以及源节点与所述缓存服务节点之间的第二网络传输信息,确定对源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数。
缓存服务节点指的是处于源节点和终端之间的网络节点。第一网络传输信息通常是将媒体数据发送到任一终端后,在缓存服务节点侧测量得到的网络延迟和丢包率。第二网络传输信息通常是将媒体数据发送到缓存服务节点后,在源节点测量的网络延迟和丢包率。
图2为本实施例提供的媒体数据传输的网络拓扑图,参见图2,媒体数据从源节点(流媒体源站)通过回源加速网关传输到与其连接的各缓存服务节点(边缘缓存服务节点),再通过缓存服务节点将媒体数据推送到每一终端。源节点连接多个缓存服务节点,每一缓存服务节点连接多个终端。通过源节点和/或缓存服务节点调节媒体数据的媒体参数,均能影响后续终端对媒体数据的播放效果。
由任一终端中已播放媒体数据的播放信息,以及第一网络传输信息,能够从业务层和网络层反映出任一终端与缓存服务节点之间的网络状态,因此,基于该任一终端的播放信息和第一网络传输信息对推送到该任一终端的媒体参数进行调节,有利于对该任一终端与缓存服务节点之间的网络资源进行充分合理利用。
由某一缓存服务节点连接的每一终端中已播放媒体数据的播放信息,能够在一定程度上从业务层反映缓存服务节点与源节点之间的网络状态,第二网络传输信息能够从网络层反映缓存服务节点与源节点之间的网络状态,因此,基于缓存服务节点连接的每一终端的播放信息和第二网络传输信息对推送到该缓存服务节点的媒体参数进行调节,有利于对源节点与缓存服务节点之间的网络资源进行充分合理利用。
本实施例中,通过缓存服务节点和/或源节点对媒体参数进行调节,从媒体数据传输的各节点进行媒体参数的调节,有利于在各节点之间进行网络资源的充分合理利用。
进一步地,在上述各实施例的基础上,所述根据任一终端中已播放媒体数据的播放信息,以及缓存服务节点与所述任一终端之间的第一网络传输信息,确定对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理的媒体参数,包括:
根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息;
根据第一映射关系确定与所述第一网络承载信息对应的媒体参数,作为第一媒体参数;其中,所述的第一映射关系中包括与不同第一网络承载信息对应的媒体参数;
根据所述第一媒体参数对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理。
其中,还包括:存储与不同的第一网络传输信息对应的媒体参数,作为所述第一映射关系。
还包括:分别根据所述第一映射关系中与每一第一网络传输信息对应的媒体参数,处理接收的由所述源节点推送的待播放媒体数据,存储处理后的待播放媒体数据。
第一网络承载信息是结合业务层和网络层确定的表示网络承载能力的信息。第一网络承载信息可以是根据任一终端中已播放媒体数据的播放信息和第一网络传输信息对网络质量的评分。
具体地,可以预先根据经验确定第一映射关系。例如,预先确定不同的第一网络承载信息对应的媒体参数(例如,“切片时间间隔、索引长度、码率”的组合信息)。在确定第一映射关系的过程中,可以对第一网络承载信息划分不同的等级,从而在确定了第一网络承载信息后,根据第一网络承载信息所属的等级确定与其对应的媒体参数,进而将预先根据该媒体参数处理的由所述源节点推送的待播放媒体数据,作为推送到该任一终端的待播放媒体数据。
本实施例中,在缓存服务节点中通过第一映射关系确定与第一网络承载信息对应的第一媒体参数,进而将根据第一媒体参数处理后的待播放媒体数据推送到任一终端。通过第一映射关系实现了根据播放信息和第一网络传输信息对媒体参数的快速调节,从而有利于快速适应实际网络状况实现媒体数据的推送,提高播放质量,优化网络资源利用率。
在常见的源节点、缓存服务节点和终端这样的网络架构中,缓存服务节点与终端之间的网络传输基于TCP协议,源节点与缓存服务节点之间的网络传输基于UDP协议。基于TCP协议进行网络传输的过程中,网络连接的建立过程也能从一定程度上反映网络状态。
进一步地,在上述各实施例的基础上,所述根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,以及所述缓存服务节点与所述任一终端之间的网络连接信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息;
其中,所述网络连接信息根据所述缓存服务节点与所述任一终端之间建立网络连接的过程确定。
具体地,网络连接信息可以至少包括如下一种:所述缓存服务节点与所述任一终端之间建立连接的平均时长、首字节响应平均时长、响应平均时长、所传输文件占用的平均字节数。
本实施例中,结合任一终端中已播放媒体数据的播放信息、第一网络传输信息和网络连接信息确定第一网络承载信息,确定的第一网络承载信息能够更加全面反映网络的真实状态,有利于根据第一网络承载信息使得调整的媒体参数与网络真实状态相匹配,提高网络资源利用率。
进一步地,在上述各实施例的基础上,所述根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,以及所述缓存服务节点与所述任一终端之间的网络连接信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据任一终端中已播放媒体数据的播放信息确定第一播放评分;其中,所述第一播放评分根据如下播放现象中的至少一种确定:卡顿、播放延迟;
根据所述第一网络传输信息确定网络传输评分,并根据所述网络连接信息确定网络连接评分;
根据所述第一播放评分、所述网络传输评分和所述网络连接评分,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息。
具体地,第一网络评分可以包括卡顿评分和播放延迟评分;其中,卡顿评分可以至少根据如下一种确定:在设定时长内所述任一终端出现卡顿的卡顿时长、在所述设定时长内所述任一终端出现卡顿的次数、在所述设定时长内所述任一终端出现卡顿之间的时间间隔;播放延迟评分可以根据所述任一终端开始播放所述已播放媒体数据对应的第一时间点,和所述缓存服务节点向所述任一终端推送所述已播放媒体数据对应的第二时间点确定。
设定时长实际为一统计周期,可以设定为2s或者其它时长。
卡顿评分的区间为[1,5]分,可以根据如下公式计算卡顿评分SQ,
其中,Sd为在设定时长内所述任一终端出现卡顿的卡顿时长(具体地,可以是卡顿时长的平均值),Sf为在所述设定时长内所述任一终端出现卡顿的次数(具体地,可以是卡顿的次数平均值),Si为在所述设定时长内所述任一终端出现卡顿之间的时间间隔(具体地,可以是出现卡顿之间的时间间隔的平均值),s0-s6为相关系数(可以根据业务情况制定)。
TB代表客户端反馈的当前播放的时间戳(即任一终端开始播放所述已播放媒体数据对应的第一时间点),TS表示回源加速网关处理当前流的最新时间戳(即缓存服务节点向该任一终端推送该已播放媒体数据对应的第二时间点),播放延迟评分TD可以为两者(TB和TS)时间差。
网络传输评分可以根据公式F(Y,Z)=F(Y)+F(Z)确定,其中,F(Y,Z)为网络传输评分,F(Y)为对缓存服务节点和任一终端之间,根据网络延迟确定的评分,F(Z)为对缓存服务节点和任一终端之间,根据丢包率确定的评分。
F(Y)的评分区间为[1,max],根据公式F(Y)=Y1+(Y2-Y)*Y3,结合所述任一终端和缓存服务节点之间的网络延迟Y和表1,确定F(Y)。
表1网络延迟评分规则对照表
F(Z)根据公式F(Z)=Z1+(Z2-Z)*Z3,结合所述任一终端和缓存服务节点之间的丢包率Z和表2,确定F(Y)。
表2丢包率评分规则对照表
网络连接评分可以根据如下公式FS=y*log(2)(Fs/Ft)*(1+(Fc+Ff)/(1+Fc+Ff))确定。其中,FS为网络连接评分,Fc为所述缓存服务节点与所述任一终端之间建立连接的平均时长,Ff为首字节响应平均时长,Ft为响应平均时长,Fs为所传输文件占用的平均字节数,y为浮动系数。
具体地,根据所述第一播放评分、所述网络传输评分和所述网络连接评分,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据公式确定第一网络承载信息F[U]:
本实施例中,通过第一播放评分(包括卡顿评分和播放延迟评分)、网络传输评分和网络连接评分实现了第一网络承载信息的计算,进而根据第一网络承载信息调整待播放媒体数据的媒体参数,提高网络资源利用率。
对于源节点向缓存服务节点传输的媒体数据,进一步地,在上述各实施例的基础上,所述根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,以及源节点与所述缓存服务节点之间的第二网络传输信息,确定对源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数,包括:
根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,确定第二播放评分;其中,所述第二播放评分至少根据如下播放现象确定:花屏;
根据所述第二播放评分和所述第二网络传输信息,确定对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数。
具体地,第二播放评分可以至少根据如下一种确定:在设定时长内每一终端中已播放媒体数据的花屏次数平均值、视频帧的损伤率平均值、视频流的损伤率平均值、视频复杂度;
源节点与缓存服务节点之间的网络传输,通常属于机房与机房之间的网络传输,为基于UDP协议的网络传输。基于UDP的网络传输中,通常会由于丢包导致终端播放媒体数据时出现花屏,因此,对于源节点处对媒体参数的调节可以考虑终端出现花屏这一因素。因此,可以通过第二播放评分和第二网络传输信息调节源节点推送到缓存服务节点的媒体数据(可以对码率进行调节),降低播放媒体数据时出现花屏的概率。
其中,第二播放评分(即花屏评分)区间为[1,5],花屏评分VQ可以根据如下公式确定:
其中,Va为视频帧的损伤率平均值,Vr为视频流的损伤率平均值,Vp为在设定时长内与所述缓存服务节点连接的每一终端中已播放媒体数据的花屏次数平均值,Vc为视频复杂度,s0-s6相关系数(可以根据业务情况制定)。
本实施例中,对于源节点传输到某一缓存服务节点的待播放数据,可以根据该缓存服务节点连接的各终端中的播放信息(例如,根据花屏确定的信息)确定花屏评分。由于缓存服务节点与终端之间通常基于TCP协议传输数据,不会出现花屏,因此与缓存服务节点连接的各终端上报的花屏这一播放信息反映了源节点与缓存服务节点在业务层的网络状态。结合源节点与缓存服务节点在业务层的网络状态和第二网络传输信息能够进一步确定出源节点与该缓存服务节点之间的真实网络状态,进而对源节点推送到该缓存服务节点的媒体数据进行调整,降低花屏的概率,提高播放质量。
进一步地,在上述各实施例的基础上,所述根据所述第二播放评分和所述第二网络传输信息,确定对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数,包括:
根据所述第二播放评分和所述第二网络传输信息,确定所述源节点与所述缓存服务节点之间的第二网络承载信息;
根据第二映射关系确定与所述第二网络承载信息对应的第二媒体参数;其中,所述第二映射关系包括与不同第二网络承载信息对应的媒体参数;
将所述第二媒体参数发送到所述源节点,以使所述源节点根据所述第二媒体参数对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理。
由于源节点与缓存服务节点通常是基于UDP协议的网络传输,而基于UDP协议的网络传输对播放过程是否出现花屏影响显著,因此第二播放评分可以是根据花屏这一播放现象进行的评分。在基于UDP协议的网络传输中,码率是调节花屏的重要因素,因此,第二媒体参数通常可以包括码率。即第二映射关系可以具体为与不同第二网络承载信息对应的码率。即可以,存储与不同的第二网络承载信息对应的码率,作为所述第二映射关系。第二映射关系可以根据经验设定,本实施例对此不做具体限制。
根据所述花屏评分和所述第二网络传输信息,确定所述源节点与所述缓存服务节点之间的第二网络承载信息。
具体可以根据如下公式确定第二网络承载信息F[U]':
其中,F(Y,Z)'为根据第二网络传输信息确定的网络传输评分,根据公式F(Y,Z)'=F(Y)'+F(Z)'确定,其中,F(Y)'为对源节点和缓存服务节点之间,根据网络延迟确定的评分,F(Z)'为对源节点和缓存服务节点之间,根据丢包率确定的评分。
F(Y)'的评分区间为[1,max],根据公式F(Y)'=Y1+(Y2-Y')*Y3,结合源节点和缓存服务节点之间的网络延迟Y'和上述表1,确定F(Y)'。
F(Z)'根据公式F(Z)'=Z1+(Z2-Z')*Z3,结合源节点和缓存服务节点之间的丢包率Z'和上述表2,确定F(Y)'。
需要说明的是,由于源节点和缓存服务节点之间为机房与机房之间的网络传输,通常情况下网络传输质量比较稳定,因此源节点在调节推动到缓存服务节点的待播放媒体数据时,可以仅根据花屏评分调节源节点推送到缓存服务节点的码率。
相应地,当源节点仅根据花屏评分调节源节点推送到缓存服务节点的码率时,第二映射关系可以包括花屏评分与码率的对应关系。
本实施例中,通过花屏评分和预置的第二映射关系实现了在源节点对推送到缓存服务节点的待播放媒体数据的调节,使得媒体数据的传输吻合源节点和缓存服务节点之间真实的网络承载能力,进而有利于提高媒体数据的播放质量。
以下提供一种具体的实施方式:
基于图2所示的网络拓扑结构,对于超高清直播赛事流传输的过程可以通过如下过程进行调节:
步骤1、流媒体源站将超高清直播赛事流通过基于UDP优化的私有传输协议通过内容分发网络内部推送到边缘缓存服务节点,根据终端花屏评分动态调整推流码率;
具体的,流媒体源站将超高清直播赛事流通过基于UDP协议优化的私有传输协议推流,经过二级中心转发到边缘缓存服务节点的回源加速网关;
步骤2、边缘缓存服务节点的回源加速网关对超高清直播赛事流按照多码率、多切片间隔、多索引长度三个维度组合进行切片,生成切片TS和索引文件注入到边缘缓存内存中,并将组合列表信息同步给边缘服务质量采集分析***;
具体地,边缘缓存服务节点的回源加速网关对超高清直播赛事流按照多码率、多切片间隔、多索引长度三个维度组合M,将生成的视频文件和索引注入到边缘缓存服务中;
步骤3、质量采集分析***根据组合列表信息,根据码率、切片间隔、索引长度三个维度生成对终端用户业务承载能力的打分阶梯要求;
具体的,边缘质量采集分析***根据超高清直播赛事的服务组合信息M,根据切片间隔Mc、码率系数Md,索引列表资源长度Mg生成对客户端网络传输质量的打分阶梯要求。根据规定的指标评级标准(E={e1,e2,e3,e3,e5,e6}),评分区间为[1,max],以下为具体为根据组合信息生成的对用客户端网络传输质量分数要求的函数公式,x为浮动系数:
F[M]=Md*x*(1+Mc0/Mc)*(1+1/Mg),按照指标评级标准,将F[M]分数转为对应的等级F[E];
步骤4、终端对观看视频体验质量重要指标卡顿、花屏、时延现象进行评分和统计,在跟边缘缓存服务交互时通过请求URL的参数带上;
其中,客户端在解码的时候,实时记录视频流中的时间戳用TB表示,保留最新的TB,当与服务端进行交互的时候,取该值在请求参数中进行反馈;
步骤5、质量采集分析***采集边缘缓存日志,根据主机名、用户唯一标识、文件类型、句柄标识、连接建立时间、首字节响应时间、响应时间、文件大小、时间戳、客户端地址等参数,计算该统计周期内ts的平均速率,根据打分公式进行计算;具体地,即计算网络连接评分FS;
步骤6、质量采集分析***根据统计周期计算所有用户对该路直播进行花屏评分,并通知源站进行推流码率调整,适应源站到回源加速网关之间的网络状态;
具体的,根据花屏评分所对应的码率评级标准(B={(b0,bt0),(b1,bt1),(b2,bt2),(b3,bt3),(b4,bt4),(b5,bt5)}),将质量采集分析***上报的花屏评分VQ根据b评分区间选择对应的码率进行推流;
步骤7、质量采集分析***采集从服务端到客户端的网络链路质量,根据延迟和丢包因子按照网络质量评分计算规则进行打分;
具体地,计算网络传输评分F(Y,Z);
步骤8、根据服务端到客户端网络质量、服务端对客户端提供流服务质量的权值结合终端的卡顿打分、延迟等因子进行综合评分,得出该用户网络质量评分,对外提供按照用户网络质量评分、用户观看体验评分等提供最佳的超高清直播赛事服务;
具体地,FS表示服务端对客户端提供流服务的质量评分,F(Y,Z)表示服务端到客户端网络质量的评分。评分区间为[1,max],当F(Y,Z)评分越高代表网络越好,同时对FS有正向的影响;SQ表示终端反馈的卡顿评分,评分越高代表用户体验越差,是对质量采集分析***打分的一种矫正。
可以按照指标评级标准,将F[U]分数转为对应的等级F[E],(E={e1,e2,e3,e3,e5,e6}),从而根据步骤3中规定的指标评级标准确定向终端推流的媒体参数。
步骤9、用户在请求超高清直播赛事索引文件时,边缘缓存服务根据会话标识到质量采集***获取为该用户提供直播服务的组合信息,提供对应的索引文件;
具体的,用户请求超高清直播赛事索引时候,边缘缓存服务根据参数中用户唯一标识以及该赛事流唯一标识到质量采集分析***获取该用户提供的直播服务组合信息,质量采集分析***根据终端用户业务承载能力评分以及对应的该路赛事流模板评分等级获取匹配组合信息返回给边缘缓存服务,边缘缓存服务根据返回的组合信息返回指定索引给用户端进行播放,以此类推。
总体来说,上述实施例提供的方法为:在一个统计周期内,边缘缓存服务节点的质量采集分析***通过对服务端到客户端网络质量、服务端对客户端流服务质量以及客户端观看体验质量进行综合评分。当用户观看超高清直播赛事到服务端请求索引时,边缘缓存服务到本节点的质量采集分析***获取该用户对应的根据码率、切片间隔、索引列表组合的直播服务,对用户提供直播服务。由于边缘缓存服务节点对用户提供的基于HLS协议的传输服务,用户观看体验质量主要体现在视频卡顿;从源站到边缘回源加速网关推流采用的是基于UDP优化的私有传输协议,用户观看体验质量主要体现在视频流花屏。质量采集分析***将周期内花屏平均打分通知源站,源站根据花屏打分情况调整推流的码率。
该方案主要特点是通过边缘质量采集分析***对用户端能够承载流服务进行综合评估,对其提供对称的超高清直播赛事服务。同时客户端针对本次服务进行反馈打分,影响边缘质量采集分析***下个周期的评分结果,反馈里花屏打分又能为源站给边缘回源加速网关推流码率调整提供依据,是一个端(客户端)到端(源站),带反馈机制的低延迟高效的传输分发直播控制方法。
该方案具有的优点可以包括:
(1)传统的HLS传输分发直播采用的被动回源或者主动注入的方式,采用的是TCP协议进行传输,当传输分发网络内部公网出现抖动或者丢包时,会导致回源失败或者缓存,严重影响用户观看直播赛事,尤其是超高清的直播赛事(码率大)。本方法采用基于UDP优化的私有协议进行传输,具有点对点安全加密传输,尤其在弱网传输的情况下,依然可以达到实时传输的效果。
(2)传统的HLS传输分发直播,源站会预先根据码率及固定的切片间隔两个维度生成m3u8索引及ts文件,用户终端只能局限于降低码率来降低卡顿率提升观看体验,没有实时与服务端进行反馈交互导致准确性下降,卡顿率、延迟效果不佳。本方法采用边缘回源加速网关根据码率、切片间隔、索引列表长度等维度组合信息实时为用户终端选择最佳的组合,可以更好的适应和解决终端卡顿、延迟的问题。
(3)本方法采用服务端主动给用户终端业务承载能力进行打分模式,质量采集分析***结合服务端到终端的网络质量、服务端对客户端流服务质量以及用户终端反馈的卡顿、花屏、时延等反馈因子进行综合打分,实时调整,可以更加准确的降低用户播放卡顿、降低用户观看超高清直播赛事的时延,时延不会受到时间及用户侧网络质量的影响而变的糟糕。
图3为本实施例提供的媒体数据处理装置的结构框图,参见图3,该媒体数据处理装置包括获取模块301和确定模块302,其中,
获取模块301,用于获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;
确定模块302,用于根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数
本实施例提供的媒体数据处理装置适用于上述各实施例提供的媒体数据处理方法,在此不再赘述。
本实施例提供了一种媒体数据处理装置,根据已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息确定待播放媒体数据的媒体参数。播放信息和网络传输信息分别从业务层和网络层反映了网络状态,相比于客户端本地网络状态,能够更加全面的反映真实网络状态,因而根据播放信息和网络传输信息调整媒体参数,有利于使得媒体数据的播放与真实网络允许的状态相匹配,从而提高网络资源的利用率。
可选地,所述根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数,包括:
根据任一终端中已播放媒体数据的播放信息,以及缓存服务节点与所述任一终端之间的第一网络传输信息,确定对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理的媒体参数;
和/或,根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,以及源节点与所述缓存服务节点之间的第二网络传输信息,确定对源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数。
可选地,所述根据任一终端中已播放媒体数据的播放信息,以及缓存服务节点与所述任一终端之间的第一网络传输信息,确定对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理的媒体参数,包括:
根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息;
根据第一映射关系确定与所述第一网络承载信息对应的媒体参数,作为第一媒体参数;其中,所述的第一映射关系中包括与不同第一网络承载信息对应的媒体参数;
根据所述第一媒体参数对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理。
可选地,所述根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,以及所述缓存服务节点与所述任一终端之间的网络连接信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息;
其中,所述网络连接信息根据所述缓存服务节点与所述任一终端之间建立网络连接的过程确定。
可选地,所述根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,以及所述缓存服务节点与所述任一终端之间的网络连接信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据任一终端中已播放媒体数据的播放信息确定第一播放评分;其中,所述第一播放评分根据如下播放现象中的至少一种确定:卡顿、播放延迟;
根据所述第一网络传输信息确定网络传输评分,并根据所述网络连接信息确定网络连接评分;
根据所述第一播放评分、所述网络传输评分和所述网络连接评分,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息。
可选地,所述根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,以及源节点与所述缓存服务节点之间的第二网络传输信息,确定对源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数,包括:
根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,确定第二播放评分;其中,所述第二播放评分至少根据如下播放现象确定:花屏;
根据所述第二播放评分和所述第二网络传输信息,确定对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数。
可选地,所述根据所述第二播放评分和所述第二网络传输信息,确定对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数,包括:
根据所述第二播放评分和所述第二网络传输信息,确定所述源节点与所述缓存服务节点之间的第二网络承载信息;
根据第二映射关系确定与所述第二网络承载信息对应的第二媒体参数;其中,所述第二映射关系包括与不同第二网络承载信息对应的媒体参数;
将所述第二媒体参数发送到所述源节点,以使所述源节点根据所述第二媒体参数对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理。
图4示例了一种电子设备的实体结构示意图,如图4所示,该电子设备可以包括:处理器(processor)401、通信接口(Communications Interface)402、存储器(memory)403和通信总线404,其中,处理器401,通信接口402,存储器403通过通信总线404完成相互间的通信。处理器401可以调用存储器403中的逻辑指令,以执行如下方法:获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
此外,上述的存储器403中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
进一步地,本发明实施例公开一种计算机程序产品,所述计算机程序产品包括存储在非暂态可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法实施例所提供的方法,例如包括:获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
另一方面,本发明实施例还提供一种非暂态可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各实施例提供的传输方法,例如包括:获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种媒体数据处理方法,其特征在于,包括:
获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;
根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
2.根据权利要求1所述的媒体数据处理方法,其特征在于,所述根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数,包括:
根据任一终端中已播放媒体数据的播放信息,以及缓存服务节点与所述任一终端之间的第一网络传输信息,确定对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理的媒体参数;
和/或,根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,以及源节点与所述缓存服务节点之间的第二网络传输信息,确定对源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数。
3.根据权利要求2所述的媒体数据处理方法,其特征在于,所述根据任一终端中已播放媒体数据的播放信息,以及缓存服务节点与所述任一终端之间的第一网络传输信息,确定对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理的媒体参数,包括:
根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息;
根据第一映射关系确定与所述第一网络承载信息对应的媒体参数,作为第一媒体参数;其中,所述的第一映射关系中包括与不同第一网络承载信息对应的媒体参数;
根据所述第一媒体参数对所述缓存服务节点推送到所述任一终端的待播放媒体数据进行处理。
4.根据权利要求3所述的媒体数据处理方法,其特征在于,所述根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,以及所述缓存服务节点与所述任一终端之间的网络连接信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息;
其中,所述网络连接信息根据所述缓存服务节点与所述任一终端之间建立网络连接的过程确定。
5.根据权利要求4所述的媒体数据处理方法,其特征在于,所述根据任一终端中已播放媒体数据的播放信息和所述第一网络传输信息,以及所述缓存服务节点与所述任一终端之间的网络连接信息,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息,包括:
根据任一终端中已播放媒体数据的播放信息确定第一播放评分;其中,所述第一播放评分根据如下播放现象中的至少一种确定:卡顿、播放延迟;
根据所述第一网络传输信息确定网络传输评分,并根据所述网络连接信息确定网络连接评分;
根据所述第一播放评分、所述网络传输评分和所述网络连接评分,确定所述缓存服务节点与所述任一终端之间的第一网络承载信息。
6.根据权利要求2所述的媒体数据处理方法,其特征在于,所述根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,以及源节点与所述缓存服务节点之间的第二网络传输信息,确定对源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数,包括:
根据连接所述缓存服务节点的每一终端中已播放媒体数据的播放信息,确定第二播放评分;其中,所述第二播放评分至少根据如下播放现象确定:花屏;
根据所述第二播放评分和所述第二网络传输信息,确定对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数。
7.根据权利要求6所述的媒体数据处理方法,其特征在于,所述根据所述第二播放评分和所述第二网络传输信息,确定对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理的媒体参数,包括:
根据所述第二播放评分和所述第二网络传输信息,确定所述源节点与所述缓存服务节点之间的第二网络承载信息;
根据第二映射关系确定与所述第二网络承载信息对应的第二媒体参数;其中,所述第二映射关系包括与不同第二网络承载信息对应的媒体参数;
将所述第二媒体参数发送到所述源节点,以使所述源节点根据所述第二媒体参数对所述源节点推送到所述缓存服务节点的待播放媒体数据进行处理。
8.一种媒体数据处理装置,其特征在于,包括:
获取模块,用于获取已播放媒体数据的播放信息,以及传输媒体数据的网络传输信息;其中,所述播放信息根据已播放媒体数据的播放现象确定;所述网络传输信息根据网络性能确定;
确定模块,用于根据获取的播放信息和网络传输信息,确定对待播放媒体数据进行处理的媒体参数。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述的媒体数据处理方法的步骤。
10.一种非暂态可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至7任一项所述的媒体数据处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011263092.4A CN112383791B (zh) | 2020-11-12 | 2020-11-12 | 一种媒体数据处理方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011263092.4A CN112383791B (zh) | 2020-11-12 | 2020-11-12 | 一种媒体数据处理方法、装置、电子设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112383791A true CN112383791A (zh) | 2021-02-19 |
CN112383791B CN112383791B (zh) | 2023-07-21 |
Family
ID=74583442
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011263092.4A Active CN112383791B (zh) | 2020-11-12 | 2020-11-12 | 一种媒体数据处理方法、装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112383791B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113573093A (zh) * | 2021-08-02 | 2021-10-29 | 杭州米络星科技(集团)有限公司 | 直播数据分析方法、装置、电子设备及存储介质 |
WO2022178824A1 (zh) * | 2021-02-26 | 2022-09-01 | 华为技术有限公司 | 一种媒体参数调整方法及装置 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060123445A1 (en) * | 2004-12-06 | 2006-06-08 | Sbc Knowledge Ventures, L.P. | System and method of displaying a video stream |
JP2007274621A (ja) * | 2006-03-31 | 2007-10-18 | Victor Co Of Japan Ltd | 画像伝送システム及び画像伝送方法 |
JP2009044392A (ja) * | 2007-08-08 | 2009-02-26 | Sony Corp | ビデオ再生方法およびビデオ再生装置 |
CN101835029A (zh) * | 2010-04-21 | 2010-09-15 | 深圳市紫云鑫软件技术有限公司 | 流媒体播放控制方法、***及客户端 |
CN104065665A (zh) * | 2014-07-02 | 2014-09-24 | 深圳深讯和科技有限公司 | 流媒体数据的处理方法和*** |
CN106657143A (zh) * | 2017-01-20 | 2017-05-10 | 中兴通讯股份有限公司 | 一种流媒体传输方法、装置、服务器及终端 |
CN107071529A (zh) * | 2017-03-29 | 2017-08-18 | 咪咕视讯科技有限公司 | 一种hls视频播放方法、终端及服务器 |
CN108696772A (zh) * | 2017-04-11 | 2018-10-23 | 上海谦问万答吧云计算科技有限公司 | 一种实时视频的传输方法及装置 |
CN109218759A (zh) * | 2018-09-27 | 2019-01-15 | 广州酷狗计算机科技有限公司 | 推送媒体流的方法、装置、服务器及存储介质 |
CN109729437A (zh) * | 2017-10-30 | 2019-05-07 | 中国电信股份有限公司 | 流媒体自适应传输方法、终端和*** |
US20190182512A1 (en) * | 2017-12-08 | 2019-06-13 | Sling Media Pvt Ltd | Systems and methods for selecting an initial streaming bitrate |
CN109982118A (zh) * | 2019-03-27 | 2019-07-05 | 北京奇艺世纪科技有限公司 | 一种视频码率自适应调整方法、装置及电子设备 |
CN109996094A (zh) * | 2017-12-29 | 2019-07-09 | 杭州海康威视***技术有限公司 | 视频播放方法、装置及*** |
CN110149299A (zh) * | 2018-02-13 | 2019-08-20 | 中兴通讯股份有限公司 | 一种视频优化方法、装置和***、终端和网络设备 |
CN110225420A (zh) * | 2019-06-18 | 2019-09-10 | 亦非云互联网技术(上海)有限公司 | 一种播放/决策方法/***、介质、播放端及服务端 |
CN110290402A (zh) * | 2019-07-31 | 2019-09-27 | 腾讯科技(深圳)有限公司 | 一种视频码率调整方法、装置、服务器及存储介质 |
CN111107440A (zh) * | 2019-12-26 | 2020-05-05 | 腾讯科技(深圳)有限公司 | 视频传输控制方法及装置、设备、存储介质 |
CN111431941A (zh) * | 2020-05-13 | 2020-07-17 | 南京工业大学 | 一种基于移动边缘计算的实时视频码率自适应方法 |
CN111683273A (zh) * | 2020-06-02 | 2020-09-18 | 中国联合网络通信集团有限公司 | 视频卡顿信息的确定方法及装置 |
-
2020
- 2020-11-12 CN CN202011263092.4A patent/CN112383791B/zh active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060123445A1 (en) * | 2004-12-06 | 2006-06-08 | Sbc Knowledge Ventures, L.P. | System and method of displaying a video stream |
JP2007274621A (ja) * | 2006-03-31 | 2007-10-18 | Victor Co Of Japan Ltd | 画像伝送システム及び画像伝送方法 |
JP2009044392A (ja) * | 2007-08-08 | 2009-02-26 | Sony Corp | ビデオ再生方法およびビデオ再生装置 |
CN101835029A (zh) * | 2010-04-21 | 2010-09-15 | 深圳市紫云鑫软件技术有限公司 | 流媒体播放控制方法、***及客户端 |
CN104065665A (zh) * | 2014-07-02 | 2014-09-24 | 深圳深讯和科技有限公司 | 流媒体数据的处理方法和*** |
CN106657143A (zh) * | 2017-01-20 | 2017-05-10 | 中兴通讯股份有限公司 | 一种流媒体传输方法、装置、服务器及终端 |
CN107071529A (zh) * | 2017-03-29 | 2017-08-18 | 咪咕视讯科技有限公司 | 一种hls视频播放方法、终端及服务器 |
CN108696772A (zh) * | 2017-04-11 | 2018-10-23 | 上海谦问万答吧云计算科技有限公司 | 一种实时视频的传输方法及装置 |
CN109729437A (zh) * | 2017-10-30 | 2019-05-07 | 中国电信股份有限公司 | 流媒体自适应传输方法、终端和*** |
US20190182512A1 (en) * | 2017-12-08 | 2019-06-13 | Sling Media Pvt Ltd | Systems and methods for selecting an initial streaming bitrate |
CN109996094A (zh) * | 2017-12-29 | 2019-07-09 | 杭州海康威视***技术有限公司 | 视频播放方法、装置及*** |
CN110149299A (zh) * | 2018-02-13 | 2019-08-20 | 中兴通讯股份有限公司 | 一种视频优化方法、装置和***、终端和网络设备 |
CN109218759A (zh) * | 2018-09-27 | 2019-01-15 | 广州酷狗计算机科技有限公司 | 推送媒体流的方法、装置、服务器及存储介质 |
CN109982118A (zh) * | 2019-03-27 | 2019-07-05 | 北京奇艺世纪科技有限公司 | 一种视频码率自适应调整方法、装置及电子设备 |
CN110225420A (zh) * | 2019-06-18 | 2019-09-10 | 亦非云互联网技术(上海)有限公司 | 一种播放/决策方法/***、介质、播放端及服务端 |
CN110290402A (zh) * | 2019-07-31 | 2019-09-27 | 腾讯科技(深圳)有限公司 | 一种视频码率调整方法、装置、服务器及存储介质 |
CN111107440A (zh) * | 2019-12-26 | 2020-05-05 | 腾讯科技(深圳)有限公司 | 视频传输控制方法及装置、设备、存储介质 |
CN111431941A (zh) * | 2020-05-13 | 2020-07-17 | 南京工业大学 | 一种基于移动边缘计算的实时视频码率自适应方法 |
CN111683273A (zh) * | 2020-06-02 | 2020-09-18 | 中国联合网络通信集团有限公司 | 视频卡顿信息的确定方法及装置 |
Non-Patent Citations (1)
Title |
---|
李婵文;: "基于丢包率统计的无线流媒体码率动态适配技术的研究", 中国新通信 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022178824A1 (zh) * | 2021-02-26 | 2022-09-01 | 华为技术有限公司 | 一种媒体参数调整方法及装置 |
EP4277289A4 (en) * | 2021-02-26 | 2024-01-03 | Huawei Technologies Co., Ltd. | METHOD AND APPARATUS FOR ADJUSTING MULTIMEDIA PARAMETERS |
CN113573093A (zh) * | 2021-08-02 | 2021-10-29 | 杭州米络星科技(集团)有限公司 | 直播数据分析方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112383791B (zh) | 2023-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107147919B (zh) | 直播快速启播方法及*** | |
Bolot et al. | Scalable feedback control for multicast video distribution in the internet | |
US10542064B2 (en) | Method, server side and system for computing bandwidth of network transmission of streaming media | |
JP2024519363A (ja) | ゲームデータの処理方法、装置、コンピュータ機器、及びコンピュータプログラム | |
EP4224758A1 (en) | Data retransmission processing method and apparatus, computer device, and storage medium | |
CN108696772B (zh) | 一种实时视频的传输方法及装置 | |
EP2088731A1 (en) | Network communication data processing method, network communication system and client end | |
US20150200992A1 (en) | Method for downloading, at a client terminal, an upcoming sequence of segments of a multimedia content, and corresponding terminal | |
EP2466911B1 (en) | Method and device for fast pushing unicast stream in fast channel change | |
KR101871303B1 (ko) | 멀티캐스트 클라이언트로부터 스트림을 구독하는 방법 | |
CN101282281A (zh) | 一种媒体分发***、装置及流媒体播放方法 | |
US9813742B2 (en) | Method, device and system for evaluating user experience value of video quality | |
CN107465526B (zh) | 互联网视频cdn服务器质量监测***及方法 | |
CN112383791A (zh) | 一种媒体数据处理方法、装置、电子设备和存储介质 | |
CN107864402A (zh) | 直播视频播放方法及装置 | |
CN113891175B (zh) | 直播推流方法、装置及*** | |
WO2023061060A1 (zh) | 音视频码流的调度方法、***、介质及电子装置 | |
CN107920072B (zh) | 一种基于数据特征的多媒体共享方法及*** | |
Montagud et al. | Enhanced adaptive RTCP-based Inter-Destination Multimedia Synchronization approach for distributed applications | |
CN104469538B (zh) | 面向画面画质较小损失的rtp视频流数据包重组方法 | |
CN101909194B (zh) | 提供频道切换服务的方法、***及频道切换服务器 | |
Clayman et al. | The future of media streaming systems: transferring video over new IP | |
Zhang et al. | The ACM multimedia 2021 meet deadline requirements grand challenge | |
Clayman et al. | In-network scalable video adaption using big packet protocol | |
JP3927486B2 (ja) | ストリーミング配信装置、ストリーミング配信システム、及びストリーミング配信方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |