CN108737885A - 一种分析在线视频播放卡顿的方法及装置 - Google Patents

一种分析在线视频播放卡顿的方法及装置 Download PDF

Info

Publication number
CN108737885A
CN108737885A CN201810579322.4A CN201810579322A CN108737885A CN 108737885 A CN108737885 A CN 108737885A CN 201810579322 A CN201810579322 A CN 201810579322A CN 108737885 A CN108737885 A CN 108737885A
Authority
CN
China
Prior art keywords
interim card
frame picture
icon
frame
card icon
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810579322.4A
Other languages
English (en)
Inventor
尹燃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201810579322.4A priority Critical patent/CN108737885A/zh
Publication of CN108737885A publication Critical patent/CN108737885A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供了一种分析在线视频播放卡顿的方法及装置，包括：在播放在线视频的过程中，按照固定帧率对播放的视频进行屏幕录制，得到录制视频；将录制视频按帧拆分成帧图片；识别每张帧图片中是否含有卡顿图标，得到识别结果；基于识别结果，确定出视频卡顿数据。应用本发明实施例，能够实现获取不同在线视频播放程序播放的在线视频的卡顿数据。

Description

一种分析在线视频播放卡顿的方法及装置
技术领域
本发明涉及图像识别技术领域，特别是涉及一种分析在线视频播放卡顿的方法及装置。
背景技术
对于在线视频提供方，卡顿是一个非常容易引起用户投诉的播放问题。研究用户观看在线视频时卡顿的情况，有助于提供更好的视频服务。现有分析在线视频卡顿的方法，是基于数据投递计算卡顿数据。数据投递是指，在线视频在播放的过程中发生卡顿，在线视频播放程序会发送一条携带卡顿相关信息的http请求到服务器。所述卡顿相关信息包括发生卡顿的视频信息，播放时间点，设备信息，地域信息，***时间，网络状态等。然后收到http请求的服务器进行卡顿数据统计。
发明人在实现本发明的过程中发现，现有技术至少存在如下问题：
数据投递是在视频播放应用程序的产品内部实现的功能，依赖于在线视频播放程序和在线视频播放程序的服务器的配合，无法应用到竞品上。所以在线视频播放程序只能获取自身播放的在线视频的卡顿数据，无法获取其他在线视频播放程序播放的在线视频的卡顿数据。
发明内容
本发明实施例的目的在于提供一种新的分析在线视频播放卡顿的方法及装置，以实现获取不同在线视频播放程序播放的在线视频的卡顿数据。具体技术方案如下：
本发明实施例提供一种分析在线视频播放卡顿的方法，包括：
在播放在线视频的过程中，按照固定帧率对播放的所述视频进行屏幕录制，得到录制视频；
将所述录制视频按帧拆分成帧图片；
识别每张所述帧图片中是否含有卡顿图标，得到识别结果；
基于所述识别结果，确定出视频卡顿数据。
进一步的，在所述将所述录制视频按帧拆分成帧图片之后，在所述识别每张所述帧图片中是否含有卡顿图标之前，还包括：
对所述帧图片编号；
所述识别每张所述帧图片中是否含有卡顿图标，得到识别结果，包括：
按照编号顺序依次识别每张所述帧图片中是否含有卡顿图标，得到含有卡顿图标的帧图片的编号。
进一步的，所述识别每张所述帧图片中是否含有卡顿图标，包括：
针对每张所述帧图片，在该帧图片的预先设定的一个区域位置参数表示的区域内，识别是否含有所述卡顿图标，如果含有，确定该帧图片中含有所述卡顿图标，如果不含有，确定该帧图片中不含有所述卡顿图标；或者
针对每张所述帧图片，在该帧图片的预先设定的多个区域位置参数表示的区域中，如果存在含有卡顿图标的区域，确定该帧图片中含有所述卡顿图标，如果不存在，确定该帧图片中不含有所述卡顿图标。
进一步的，所述识别每张所述帧图片中是否含有卡顿图标，包括：
针对每张所述帧图片，对该帧图片的区域位置参数表示的区域内的图像按照均值哈希算法提取第一特征值，按照感知哈希算法提取第二特征值；
基于所述第一特征值与第一预设特征值，计算得到第一汉明距离，所述第一预设特征值，是对所述卡顿图标的图像，按照均值哈希算法提取的；
基于所述第二特征值与第二预设特征值，计算得到第二汉明距离，所述第二预设特征值，是对所述卡顿图标的图像，按照感知哈希算法提取的；
当所述第一汉明距离小于第一距离阈值且所述第二汉明距离小于第二距离阈值时，确定该帧图片中含有所述卡顿图标，否则，确定该帧图片中不含有所述卡顿图标。
进一步的，所述基于所述识别结果，确定出视频卡顿数据，包括：
基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以帧图片的总数，得到卡顿比；或者
基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以所述固定帧率，得到卡顿总时长；或者
基于所述识别结果，确定卡顿发生的次数，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片；或者
基于所述识别结果，确定一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片的第二数量，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片，并使用所述第二数量除以所述固定帧率，得到该次卡顿的时长。
本发明实施例还提供一种分析在线视频播放卡顿的装置，包括：
录制模块，用于在播放在线视频的过程中，按照固定帧率对播放的所述视频进行屏幕录制，得到录制视频；
视频拆分模块，用于将所述录制视频按帧拆分成帧图片；
卡顿图标识别模块，用于识别每张所述帧图片中是否含有卡顿图标，得到识别结果；
卡顿确定模块，用于基于所述识别结果，确定出视频卡顿数据。
进一步的，上述装置，还包括：
编号模块，用于在所述视频拆分模块将所述录制视频按帧拆分成帧图片之后，对所述帧图片编号；
所述卡顿图标识别模块，具体用于按照编号顺序依次识别每张所述帧图片中是否含有卡顿图标，得到含有卡顿图标的帧图片的编号。
进一步的，所述卡顿图标识别模块，具体用于针对每张所述帧图片，在该帧图片的预先设定的一个区域位置参数表示的区域内，用于识别是否含有所述卡顿图标，如果含有，确定该帧图片中含有所述卡顿图标，如果不含有，确定该帧图片中不含有所述卡顿图标；或者
用于针对每张所述帧图片，在该帧图片的预先设定的多个区域位置参数表示的区域中，如果存在含有卡顿图标的区域，确定该帧图片中含有所述卡顿图标，如果不存在，确定该帧图片中不含有所述卡顿图标。
进一步的，所述卡顿图标识别模块，包括：
特征值提取子模块，用于针对每张所述帧图片，对该帧图片的区域位置参数表示的区域内的图像按照均值哈希算法提取第一特征值，按照感知哈希算法提取第二特征值；
第一汉明距离计算子模块，用于基于所述第一特征值与第一预设特征值，计算得到第一汉明距离，所述第一预设特征值，是对所述卡顿图标的图像，按照均值哈希算法提取的；
第二汉明距离计算子模块，用于基于所述第二特征值与第二预设特征值，计算得到第二汉明距离，所述第二预设特征值，是对所述卡顿图标的图像，按照感知哈希算法提取的；
卡顿图标确定子模块，用于当所述第一汉明距离小于第一距离阈值且所述第二汉明距离小于第二距离阈值时，确定该帧图片中含有所述卡顿图标，否则，确定该帧图片中不含有所述卡顿图标。
进一步的，所述卡顿确定模块，包括：
卡顿比确定子模块，用于基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以帧图片的总数，得到卡顿比；或者
卡顿总时长确定子模块，用于基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以所述固定帧率，得到卡顿总时长；或者
卡顿次数确定子模块，用于基于所述识别结果，确定卡顿发生的次数，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片；或者
卡顿时长确定子模块，用于基于所述识别结果，确定一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片的第二数量，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片，并使用所述第二数量除以所述固定帧率，得到该次卡顿的时长。
本发明实施例还提供一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一所述的分析在线视频播放卡顿方法的步骤。
在本发明实施的又一方面，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一所述的分析在线视频播放卡顿方法的步骤。
在本发明实施的又一方面，本发明实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一所述的分析在线视频播放卡顿方法的步骤。
本发明实施例提供的分析在线视频播放卡顿的方法及装置，不依赖数据投递，直接将在线视频观众看到的内容录制成视频，通过分析录制的视频中卡顿图标出现的情况，得到卡顿数据，并不需要在视频播放应用程序的产品内部实现，从而实现了获取不同在线视频播放程序播放的在线视频的卡顿数据。当然，实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的分析在线视频播放卡顿方法的流程图；
图2为本发明实施例提供的分析在线视频播放卡顿方法的一个实施例的详细流程图；
图3为本发明实施例提供的一个识别一张帧图片是否含有卡顿图标的方法的流程图；
图4为本发明实施例提供的分析在线视频播放卡顿的装置的结构示意图；
图5为本发明实施例提供的卡顿图标识别模块的结构示意图；
图6为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述。
本发明实施例提供了一种分析在线视频播放卡顿的方法，下面通过具体实施例，对本发明进行详细说明。
参见图1，图1为本发明实施例提供的分析在线视频播放卡顿方法的一种流程图，包括如下步骤：
步骤101、在播放在线视频的过程中，按照固定帧率对播放的视频进行屏幕录制。
步骤102、将录制的视频按帧拆分成帧图片。
步骤103、识别每张帧图片中是否含有卡顿图标，得到识别结果。
步骤104、基于识别结果，确定出视频卡顿数据。
本发明实施例提供的分析在线视频播放卡顿的方法，不依赖数据投递，直接将在线视频观众看到的内容录制成视频，通过分析录制的视频中卡顿图标出现的情况，得到卡顿数据，并不需要在视频播放应用程序的产品内部实现，从而实现了获取不同在线视频播放程序播放的在线视频的卡顿数据。
上述图1所示的方法中，卡顿图标可以是静态的图像，也可以是连续多帧图像组成的动态图标。
下面结合附图，对本发明实施例提供的上述分析在线视频播放卡顿的方法进行详细描述。
图2所示为本发明实施例提供的分析在线视频播放卡顿方法的一个实施例的详细流程图：
步骤201、播放在线视频。
本发明实施例中，终端设备可以全屏播放在线视频，或者在已知在线视频播放区域的尺寸和位置的情况下播放在线视频。
步骤202、按照固定帧率对播放的视频进行屏幕录制。
本发明实施例中，可以通过调用第三方的屏幕录制程序进行录制。为了卡顿数据的精确度，本发明采用的固定帧率可以不低于在线视频本身的帧率。
步骤203、将录制的视频按帧拆分成帧图片，并依次对得到的帧图片编号。
本发明实施例中，将录制的视频按帧拆分成帧图片，单位时间录制的视频拆分出来的帧图片的数量，和步骤202的固定帧率一致。拆分视频的同时，可以把拆出来的帧图片，按照录制视频的时间先后顺序，从小到大依次编号。
步骤204、获取待识别的帧图片。
本发明实施例中，第一次进入步骤204时，可以获取所有帧图片中编号最小的帧图片，之后再进入步骤204时，可以获取上一次进入步骤204获取的帧图片的下一编号帧图片。
步骤205、识别当前编号帧图片是否含有卡顿图标。如果当前编号帧图片中含有卡顿图标，进入步骤206，如果当前编号帧图片中不含有卡顿图标，进入步骤207。
步骤206、记录含有卡顿图标的帧图片的编号。
步骤207、判断当前编号帧图片是否是最后一张帧图片。如果当前编号帧图片是最后一张帧图片，进入步骤208，如果当前编号帧图片不是最后一张帧图片，进入步骤204。
步骤208、确定卡顿数据。
本发明实施例中，进入步骤208，可以根据步骤206记录的含有卡顿图标的帧图片的编号，分析并确定卡顿数据。
统计步骤206记录的含有卡顿图标的帧图片编号的总数，确定含有卡顿图标的帧图片的第一数量。使用该第一数量除以帧图片的总数，可以得到卡顿比。
使用该第一数量除以步骤202中的固定帧率，得到卡顿总时长。
分析步骤206记录的含有卡顿图标的帧图片编号，把一个或多个连续的编号作为一次卡顿所包括的帧图片的编号，可以确定卡顿发生的次数。
对于任意一次卡顿，确定属于该次卡顿的编号的第二数量，并使用该第二数量除以步骤202中的固定帧率，可以得到该次卡顿的时长。
本发明实施例中，在播放在线视频之前，可以预先设定好通过与特定的汉明距离比较大小来识别帧图片的阈值，包括第一距离阈值和第一距离阈值。如果两个图像按照均值哈希算法提取的特征值的汉明距离小于该第一距离阈值，并且这两个图像按照感知哈希算法提取的特征值的汉明距离小于该第二距离阈值，那么，可以认定这两个图像足够相似。对于足够相似的两个图像，如果其中一个图像是一张图片的一部分的话，可以认定该图片含有这两个图像。
进一步的，在播放在线视频之前，可以预先设定好卡顿图标的区域位置参数、第一预设特征值和第二预设特征值。其中，区域位置参数表示了卡顿图标的图像的位置和形状，第一预设特征值是卡顿图标的图像按照均值哈希算法提取的，第二预设特征值是卡顿图标的图像按照感知哈希算法提取的。
特别的，当卡顿图标是连续多帧图像组成的动态图标时，卡顿图标的每一帧都可以预先设定好该帧的图像的区域位置参数、该帧按照均值哈希算法提取的第一预设特征值和该帧图像按照感知哈希算法提取的第二预设特征值。而且，可以通过卡顿图标播放到第几帧的信息，获取与之相应的预先设定好的区域位置参数、第一预设特征值和第二预设特征值。
图3为本发明实施例提供的一个识别一张帧图片是否含有卡顿图标的方法的流程图，具体可以包括如下步骤：
步骤301、获取待识别的帧图片。
步骤302、确定卡顿图标的待识别的当前帧。
本发明实施例中，卡顿图标可以是静态的图像，也可以是连续多帧图像组成的动态图标。当卡顿图标是连续多帧图像组成的动态图标时，识别一张帧图片是否含有卡顿图标，需要对卡顿图标的每一帧进行识别，只要识别出该帧图片含有卡顿图标的一帧的图像，就可以判断该帧图片含有该卡顿图标。
本发明实施例中，第一次进入步骤302时，确定卡顿图标的待识别的当前帧为卡顿图标的第一帧，之后再进入步骤302时，确定卡顿图标的待识别的当前帧为上一次进入步骤302确定的帧的下一帧。
特别的，静态的卡顿图标可视为只有1帧图像的卡顿图标。
步骤303、获取卡顿图标的待识别的当前帧的区域位置参数、第一预设特征值和第二预设特征值。
步骤304、识别该帧图片是否含有卡顿图标当前帧的图像。如果该帧图片不含有卡顿图标当前帧的图像，进入步骤305，如果该帧图片含有卡顿图标当前帧的图像，进入步骤306.
本发明实施例中，对该帧图片在步骤303获取的区域位置参数表示的区域内的图像，按照均值哈希算法提取第一特征值，按照感知哈希算法提取第二特征值；基于该第一特征值与步骤303确定的第一预设特征值，计算得到第一汉明距离。基于该第二特征值与步骤303确定的第二预设特征值，计算得到第二汉明距离。
当该第一汉明距离小于第一距离阈值且该第二汉明距离小于第二距离阈值时，判断该帧图片含有卡顿图标当前帧的图像，否则，判断该帧图片不含有卡顿图标当前帧的图像。
步骤305、判断卡顿图标的当前帧是否是最后一帧。如果卡顿图标的当前帧是最后一帧，进入步骤307，如果卡顿图标的当前帧不是最后一帧，进入步骤302。
本发明的实施例中，特别的，静态的卡顿图标的第一帧也是最后一帧。
步骤306、确定该帧图片中含有卡顿图标。
步骤307、确定该帧图片中不含有卡顿图标。
基于同一发明构思，根据本发明上述实施例提供的分析在线视频播放卡顿方法，相应地，本发明另一实施例还提供了一种分析在线视频播放卡顿装置，其结构示意图如图4所示，具体包括：
录制模块401，用于在播放在线视频的过程中，按照固定帧率对播放的所述视频进行屏幕录制，得到录制视频；
视频拆分模块402，用于将所述录制视频按帧拆分成帧图片；
卡顿图标识别模块403，用于识别每张所述帧图片中是否含有卡顿图标，得到识别结果；
卡顿确定模块404，用于基于所述识别结果，确定出视频卡顿数据。
进一步的，上述装置，还包括：
编号模块405，用于在所述视频拆分模块402将所述录制视频按帧拆分成帧图片之后，对所述帧图片编号；
卡顿图标识别模块403，具体用于按照编号顺序依次识别每张所述帧图片中是否含有卡顿图标，得到含有卡顿图标的帧图片的编号。
进一步的，卡顿图标识别模块403，具体用于针对每张所述帧图片，在该帧图片的预先设定的一个区域位置参数表示的区域内，用于识别是否含有所述卡顿图标，如果含有，确定该帧图片中含有所述卡顿图标，如果不含有，确定该帧图片中不含有所述卡顿图标；或者
针对每张所述帧图片，在该帧图片的预先设定的多个区域位置参数表示的区域中，如果存在含有卡顿图标的区域，确定该帧图片中含有所述卡顿图标，如果不存在，确定该帧图片中不含有所述卡顿图标。
进一步的，卡顿图标识别模块403，如图5所示，包括：
特征值提取子模块501，用于针对每张所述帧图片，对该帧图片的区域位置参数表示的区域内的图像按照均值哈希算法提取第一特征值，按照感知哈希算法提取第二特征值；
第一汉明距离计算子模块502，用于基于所述第一特征值与第一预设特征值，计算得到第一汉明距离，所述第一预设特征值，是对所述卡顿图标的图像，按照均值哈希算法提取的；
第二汉明距离计算子模块503，用于基于所述第二特征值与第二预设特征值，计算得到第二汉明距离，所述第二预设特征值，是对所述卡顿图标的图像，按照感知哈希算法提取的；
卡顿图标确定子模块504，用于当所述第一汉明距离小于第一距离阈值且所述第二汉明距离小于第二距离阈值时，确定该帧图片中含有所述卡顿图标，否则，确定该帧图片中不含有所述卡顿图标。
进一步的，卡顿确定模块404，包括：
卡顿比确定子模块，用于基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以帧图片的总数，得到卡顿比；或者
卡顿总时长确定子模块，用于基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以所述固定帧率，得到卡顿总时长；或者
卡顿次数确定子模块，用于基于所述识别结果，确定卡顿发生的次数，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片；或者
卡顿时长确定子模块，用于基于所述识别结果，确定一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片的第二数量，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片，并使用所述第二数量除以所述固定帧率，得到该次卡顿的时长。
基于同一发明构思，根据本发明上述实施例提供的分析在线视频播放卡顿方法，相应地，本发明实施例还提供了一种电子设备，如图6所示，包括处理器601、通信接口602、存储器603和通信总线604，其中，处理器601，通信接口602，存储器603通过通信总线604完成相互间的通信，
存储器603，用于存放计算机程序；
处理器601，用于执行存储器603上所存放的程序时，实现上述任一分析在线视频播放卡顿方法的步骤。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一分析在线视频播放卡顿方法的步骤。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一分析在线视频播放卡顿方法的步骤。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置和电子设备实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (11)

1.一种分析在线视频播放卡顿的方法，其特征在于，包括：
在播放在线视频的过程中，按照固定帧率对播放的所述视频进行屏幕录制，得到录制视频；
将所述录制视频按帧拆分成帧图片；
识别每张所述帧图片中是否含有卡顿图标，得到识别结果；
基于所述识别结果，确定出视频卡顿数据。
2.根据权利要求1所述的方法，其特征在于，在所述将所述录制视频按帧拆分成帧图片之后，在所述识别每张所述帧图片中是否含有卡顿图标之前，还包括：
对所述帧图片编号；
所述识别每张所述帧图片中是否含有卡顿图标，得到识别结果，包括：
按照编号顺序依次识别每张所述帧图片中是否含有卡顿图标，得到含有卡顿图标的帧图片的编号。
3.根据权利要求1所述的方法，其特征在于，所述识别每张所述帧图片中是否含有卡顿图标，包括：
针对每张所述帧图片，在该帧图片的预先设定的一个区域位置参数表示的区域内，识别是否含有所述卡顿图标，如果含有，确定该帧图片中含有所述卡顿图标，如果不含有，确定该帧图片中不含有所述卡顿图标；或者
针对每张所述帧图片，在该帧图片的预先设定的多个区域位置参数表示的区域中，如果存在含有卡顿图标的区域，确定该帧图片中含有所述卡顿图标，如果不存在，确定该帧图片中不含有所述卡顿图标。
4.根据权利要求1所述的方法，其特征在于，所述识别每张所述帧图片中是否含有卡顿图标，包括：
针对每张所述帧图片，对该帧图片的区域位置参数表示的区域内的图像按照均值哈希算法提取第一特征值，按照感知哈希算法提取第二特征值；
基于所述第一特征值与第一预设特征值，计算得到第一汉明距离，所述第一预设特征值，是对所述卡顿图标的图像，按照均值哈希算法提取的；
基于所述第二特征值与第二预设特征值，计算得到第二汉明距离，所述第二预设特征值，是对所述卡顿图标的图像，按照感知哈希算法提取的；
当所述第一汉明距离小于第一距离阈值且所述第二汉明距离小于第二距离阈值时，确定该帧图片中含有所述卡顿图标，否则，确定该帧图片中不含有所述卡顿图标。
5.根据权利要求1所述的方法，其特征在于，所述基于所述识别结果，确定出视频卡顿数据，包括：
基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以帧图片的总数，得到卡顿比；或者
基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以所述固定帧率，得到卡顿总时长；或者
基于所述识别结果，确定卡顿发生的次数，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片；或者
基于所述识别结果，确定一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片的第二数量，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片，并使用所述第二数量除以所述固定帧率，得到该次卡顿的时长。
6.一种分析在线视频播放卡顿的装置，其特征在于，包括：
录制模块，用于在播放在线视频的过程中，按照固定帧率对播放的所述视频进行屏幕录制，得到录制视频；
视频拆分模块，用于将所述录制视频按帧拆分成帧图片；
卡顿图标识别模块，用于识别每张所述帧图片中是否含有卡顿图标，得到识别结果；
卡顿确定模块，用于基于所述识别结果，确定出视频卡顿数据。
7.根据权利要求6所述的装置，其特征在于，上述装置，还包括：
编号模块，用于在所述视频拆分模块将所述录制视频按帧拆分成帧图片之后，对所述帧图片编号；
所述卡顿图标识别模块，具体用于按照编号顺序依次识别每张所述帧图片中是否含有卡顿图标，得到含有卡顿图标的帧图片的编号。
8.根据权利要求6所述的装置，其特征在于，所述卡顿图标识别模块，具体用于针对每张所述帧图片，在该帧图片的预先设定的一个区域位置参数表示的区域内，用于识别是否含有所述卡顿图标，如果含有，确定该帧图片中含有所述卡顿图标，如果不含有，确定该帧图片中不含有所述卡顿图标；或者
针对每张所述帧图片，在该帧图片的预先设定的多个区域位置参数表示的区域中，如果存在含有卡顿图标的区域，确定该帧图片中含有所述卡顿图标，如果不存在，确定该帧图片中不含有所述卡顿图标。
9.根据权利要求6所述的装置，其特征在于，所述卡顿图标识别模块，包括：
特征值提取子模块，用于针对每张所述帧图片，对该帧图片的区域位置参数表示的区域内的图像按照均值哈希算法提取第一特征值，按照感知哈希算法提取第二特征值；
第一汉明距离计算子模块，用于基于所述第一特征值与第一预设特征值，计算得到第一汉明距离，所述第一预设特征值，是对所述卡顿图标的图像，按照均值哈希算法提取的；
第二汉明距离计算子模块，用于基于所述第二特征值与第二预设特征值，计算得到第二汉明距离，所述第二预设特征值，是对所述卡顿图标的图像，按照感知哈希算法提取的；
卡顿图标确定子模块，用于当所述第一汉明距离小于第一距离阈值且所述第二汉明距离小于第二距离阈值时，确定该帧图片中含有所述卡顿图标，否则，确定该帧图片中不含有所述卡顿图标。
10.根据权利要求6所述的装置，其特征在于，所述卡顿确定模块，包括：
卡顿比确定子模块，用于基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以帧图片的总数，得到卡顿比；或者
卡顿总时长确定子模块，用于基于所述识别结果，确定含有所述卡顿图标的帧图片的第一数量，并使用所述第一数量除以所述固定帧率，得到卡顿总时长；或者
卡顿次数确定子模块，用于基于所述识别结果，确定卡顿发生的次数，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片；或者
卡顿时长确定子模块，用于基于所述识别结果，确定一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片的第二数量，一张含有所述卡顿图标的帧图片或多张连续含有所述卡顿图标的帧图片，作为一次卡顿所包括的帧图片，并使用所述第二数量除以所述固定帧率，得到该次卡顿的时长。
11.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-5任一所述的方法步骤。
CN201810579322.4A 2018-06-07 2018-06-07 一种分析在线视频播放卡顿的方法及装置 Pending CN108737885A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810579322.4A CN108737885A (zh) 2018-06-07 2018-06-07 一种分析在线视频播放卡顿的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810579322.4A CN108737885A (zh) 2018-06-07 2018-06-07 一种分析在线视频播放卡顿的方法及装置

Publications (1)

Publication Number Publication Date
CN108737885A true CN108737885A (zh) 2018-11-02

Family

ID=63932707

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810579322.4A Pending CN108737885A (zh) 2018-06-07 2018-06-07 一种分析在线视频播放卡顿的方法及装置

Country Status (1)

Country Link
CN (1) CN108737885A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110324707A (zh) * 2019-07-12 2019-10-11 北京奇艺世纪科技有限公司 一种视频开播耗时测试方法及装置
CN110430425A (zh) * 2019-07-31 2019-11-08 北京奇艺世纪科技有限公司 一种视频流畅度确定方法、装置、电子设备及介质
CN110475124A (zh) * 2019-09-06 2019-11-19 广州虎牙科技有限公司 视频卡顿检测方法及装置
CN110996094A (zh) * 2019-11-01 2020-04-10 北京奇艺世纪科技有限公司 检测视频卡顿的方法、装置、计算机设备及存储介质
CN111614990A (zh) * 2020-05-08 2020-09-01 北京达佳互联信息技术有限公司 加载时长的获取方法、装置及电子设备
CN111726608A (zh) * 2020-06-28 2020-09-29 北京百度网讯科技有限公司 一种视频的卡顿测试方法、装置、电子设备及存储介质
CN112055198A (zh) * 2020-09-10 2020-12-08 百度在线网络技术（北京）有限公司 一种视频测试方法、装置、电子设备及存储介质
WO2021159609A1 (zh) * 2020-02-11 2021-08-19 深圳壹账通智能科技有限公司 一种视频卡顿识别方法、装置及终端设备
CN114125436A (zh) * 2021-11-30 2022-03-01 中国电信股份有限公司 软探针监测水平测试方法、装置、存储介质和电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104036009A (zh) * 2014-06-24 2014-09-10 北京奇虎科技有限公司 一种搜索匹配图片的方法、图片搜索方法及装置
US20140259045A1 (en) * 2013-03-06 2014-09-11 Yahoo! Inc. Video advertisement wall
CN104410516A (zh) * 2014-11-24 2015-03-11 中国联合网络通信集团有限公司 一种用户业务感知度评估方法和装置
CN104811751A (zh) * 2015-04-28 2015-07-29 深圳市优网科技有限公司 一种流媒体播放时的卡顿识别方法和装置
CN105761255A (zh) * 2016-02-04 2016-07-13 网易（杭州）网络有限公司 游戏画面卡顿测试方法及装置
CN105913088A (zh) * 2016-04-13 2016-08-31 厦门美图移动科技有限公司 一种卡顿识别方法、装置及计算设备
CN106375755A (zh) * 2016-08-31 2017-02-01 福建省天奕网络科技有限公司 一种视频数据卡顿检测方法及***
CN107509115A (zh) * 2017-08-29 2017-12-22 武汉斗鱼网络科技有限公司 一种获取游戏直播中精彩时刻画面的方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140259045A1 (en) * 2013-03-06 2014-09-11 Yahoo! Inc. Video advertisement wall
CN104036009A (zh) * 2014-06-24 2014-09-10 北京奇虎科技有限公司 一种搜索匹配图片的方法、图片搜索方法及装置
CN104410516A (zh) * 2014-11-24 2015-03-11 中国联合网络通信集团有限公司 一种用户业务感知度评估方法和装置
CN104811751A (zh) * 2015-04-28 2015-07-29 深圳市优网科技有限公司 一种流媒体播放时的卡顿识别方法和装置
CN105761255A (zh) * 2016-02-04 2016-07-13 网易（杭州）网络有限公司 游戏画面卡顿测试方法及装置
CN105913088A (zh) * 2016-04-13 2016-08-31 厦门美图移动科技有限公司 一种卡顿识别方法、装置及计算设备
CN106375755A (zh) * 2016-08-31 2017-02-01 福建省天奕网络科技有限公司 一种视频数据卡顿检测方法及***
CN107509115A (zh) * 2017-08-29 2017-12-22 武汉斗鱼网络科技有限公司 一种获取游戏直播中精彩时刻画面的方法及装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110324707A (zh) * 2019-07-12 2019-10-11 北京奇艺世纪科技有限公司 一种视频开播耗时测试方法及装置
CN110324707B (zh) * 2019-07-12 2021-12-10 北京奇艺世纪科技有限公司 一种视频开播耗时测试方法及装置
CN110430425B (zh) * 2019-07-31 2021-02-05 北京奇艺世纪科技有限公司 一种视频流畅度确定方法、装置、电子设备及介质
CN110430425A (zh) * 2019-07-31 2019-11-08 北京奇艺世纪科技有限公司 一种视频流畅度确定方法、装置、电子设备及介质
CN110475124A (zh) * 2019-09-06 2019-11-19 广州虎牙科技有限公司 视频卡顿检测方法及装置
CN110475124B (zh) * 2019-09-06 2021-10-08 广州虎牙科技有限公司 视频卡顿检测方法及装置
CN110996094A (zh) * 2019-11-01 2020-04-10 北京奇艺世纪科技有限公司 检测视频卡顿的方法、装置、计算机设备及存储介质
WO2021159609A1 (zh) * 2020-02-11 2021-08-19 深圳壹账通智能科技有限公司 一种视频卡顿识别方法、装置及终端设备
CN111614990A (zh) * 2020-05-08 2020-09-01 北京达佳互联信息技术有限公司 加载时长的获取方法、装置及电子设备
CN111726608A (zh) * 2020-06-28 2020-09-29 北京百度网讯科技有限公司 一种视频的卡顿测试方法、装置、电子设备及存储介质
CN112055198A (zh) * 2020-09-10 2020-12-08 百度在线网络技术（北京）有限公司 一种视频测试方法、装置、电子设备及存储介质
CN112055198B (zh) * 2020-09-10 2023-12-05 百度在线网络技术（北京）有限公司 一种视频测试方法、装置、电子设备及存储介质
CN114125436A (zh) * 2021-11-30 2022-03-01 中国电信股份有限公司 软探针监测水平测试方法、装置、存储介质和电子设备

Similar Documents

Publication Publication Date Title
CN108737885A (zh) 一种分析在线视频播放卡顿的方法及装置
US11863654B2 (en) Detecting user interest in presented media items by observing volume change events
CN110430425B (zh) 一种视频流畅度确定方法、装置、电子设备及介质
TWI399973B (zh) 用於區別源自於本地裝置的信號與廣播信號之方法、裝置及儲存其指令之機器可讀取媒體
CN110290419B (zh) 视频播放方法、装置及电子设备
CN110012302A (zh) 一种网络直播监测方法及装置、数据处理方法
CN108966016B (zh) 一种视频片段重播的方法、装置及终端设备
CN108471544B (zh) 一种构建视频用户画像方法及装置
CN101365102B (zh) 基于视频内容识别的收视率统计的方法和***
EP3345400A1 (en) Methods, systems and apparatus for media content control based on attention detection
CN110047513B (zh) 一种视频监测方法、装置、电子设备和存储介质
CN110876079B (zh) 视频处理方法、装置和设备
CN106934650A (zh) 一种广告机业务分析方法及装置
CN111601166A (zh) 确定家庭成员组成的方法、装置、存储介质及服务器
CN110324707B (zh) 一种视频开播耗时测试方法及装置
CN110806909A (zh) 一种应用程序页面掉帧信息确定方法、装置及电子设备
US11675775B2 (en) Systems and methods for improving accuracy of device maps using media viewing data
US20220201362A1 (en) Artificial intelligence and machine learning evaluation of elements in rendered video
CN113727167A (zh) 视频资源播放方法、装置、设备和可读存储介质
CN111294641B (zh) 视频播放方法、***、装置、电子设备及可读存储介质
CN109561327A (zh) 收视检测方法及装置
CN109672917B (zh) 视频文件读取分析方法
CN112511872A (zh) 多媒体数据播放控制方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181102

RJ01 Rejection of invention patent application after publication