CN106341711B - 一种多机位视频直播回放方法及*** - Google Patents

一种多机位视频直播回放方法及*** Download PDF

Info

Publication number
CN106341711B
CN106341711B CN201610852852.2A CN201610852852A CN106341711B CN 106341711 B CN106341711 B CN 106341711B CN 201610852852 A CN201610852852 A CN 201610852852A CN 106341711 B CN106341711 B CN 106341711B
Authority
CN
China
Prior art keywords
plane
seat
playback
picture
host bit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610852852.2A
Other languages
English (en)
Other versions
CN106341711A (zh
Inventor
唐振华
杨翰飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Love Technology Co., Ltd.
Original Assignee
Chengdu Xike Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Xike Technology Co Ltd filed Critical Chengdu Xike Technology Co Ltd
Priority to CN201610852852.2A priority Critical patent/CN106341711B/zh
Publication of CN106341711A publication Critical patent/CN106341711A/zh
Priority to PCT/CN2017/103712 priority patent/WO2018059449A1/en
Priority to US16/336,357 priority patent/US10681393B2/en
Application granted granted Critical
Publication of CN106341711B publication Critical patent/CN106341711B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/278—Content descriptor database or directory service for end-user access
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458—Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • H04N21/4586—Content update operation triggered locally, e.g. by comparing the version of software modules in a DVB carousel to the version stored locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种多机位视频直播回放方法及***，该方法的实现步骤如下：S1、判断回放模式是否为多机位回放模式；S2、以服务器接收视频的时间为同步基准，检测多机位回放模式下，机位的数量、开始时间、结束时间和视频流的断续情况；S3、根据用户指令或者***默认设置，确定主机位，同时确定第一备选机位，第二备选机位……第n备选机位，其中n为大于等于1的整数；S4、根据同步基准，在用户的显示终端进行回放，其中主机位回放视频位于显示终端的主机位画面区域，其余备选机位以缩略图的形式依次排列于副显示画面区域；S5、根据播放需求，切换备选机位画面与主机位画面；S6、根据预先设置的终止时间或者终止条件完成视频直播的回放。

Description

一种多机位视频直播回放方法及***
技术领域
本发明涉及一种视频直播播放技术，尤其涉及一种多机位视频直播回放方法及***。
背景技术
视频直播作为新兴的移动互联网业务，在近年来得到了快速的发展。相比于传统的电视直播形式，互联网视频直播能够使观众具有更多机会按照自己的需求定制和参与互动。目前，投入应用的互联网视频直播大多都是单机位直播，直播后的回放技术实现较为简单，但在面对体育比赛这类负责的场景时，单机位的直播回放形式不能很好的适应需求。而传统的电视直播回放中，多采用的是将直播过程剪辑完成的视频直接播放，观众无法按自己的需求进行选择。因此，需要一种不同的直播回放形式，以适应不同的场景和需求。
发明内容
本发明的目的在于克服现有技术的不足，提供一种多机位视频直播回放方法，能够根据预先获知的中断信息进行回放策略设置，能够适应不同的视频直播回复场景和需求。
本发明的目的是通过以下技术方案来实现的：一种多机位视频直播回放方法，所述的方法的实现步骤如下：
S1、判断回放模式是否为多机位，如果是则进入多机位回放模式，如果不是进入推荐机位进行单机位直播回放；
S2、以服务器接收视频的时间为同步基准，检测多机位回放模式下，机位的数量、开始时间、结束时间和视频流的断续情况；
S3、根据用户指令或者***默认设置，确定主机位，同时确定第一备选机位，第二备选机位……第n备选机位，其中n为大于等于1的整数；
S4、根据同步基准，在用户的显示终端进行回放，其中主机位回放视频位于显示终端的主机位画面区域，其余备选机位以缩略图的形式依次排列于副显示画面区域；
S5、根据播放需求，切换备选机位画面与主机位画面；
S6、根据预先设置的终止时间或者终止条件完成视频直播的回放。
所述的备选机位画面与主机位画面自动或根据预设好的替换机位或根据用户指令进行切换。
当备选机位画面与主机位画面在主机位回放视频因传送原因出现中断时进行自动切换包括如下子步骤：
S21、如果主机位画面发生中断，在主显示区域自动播放第一备选机位画面，主显示区域和副显示区域均不再显示中断的主机位画面；
S22、如果当前备选机位画面发生中断，在主显示区域自动播放下一顺位备选机位画面，否则，主显示区域继续播放当前播放画面；
S23、如果主机画面或者在先顺位备选机位的画面恢复，则在主显示区域显示恢复后的主机位画面或者在先顺位备选机位画面；
S24、根据预先设置的终止时间或者终止条件完成视频直播的回放。
所述的备选机位画面与主机位画面根据预设好的替换机位进行切换包括主机位画面有中断预设切换和主机位画面无中断预设切换；
所述的主机位有中断预设切换包括如下步骤：
S311、回放开始前确定当前设置的主机位画面在回放过程中是否有中断情况发生；
S312、如果无中断情况，直接在主显示区域显示主机位画面；
S313、如果有中断情况，提示用户中断时间点，并选择中断期间在主显示区域显示的替换机位；
A、如果用户有选择替换机位，则在中断期间，将替换机位画面切换到主显示区域进行显示，
B、如果用户没有选择替换机位，则在中断期间，将第一备选机位切换到主显示区域进行显示；
S314、根据预先设置的终止时间或者终止条件完成视频直播的回放；
所述的主机位画面无中断预设切换包括如下子步骤：
S321、回放开始前根据用户需求的视频播放时间或者内容预先设置好替换机位；
S322、当视频播放到预先设置好的时间后，自动将替换机位画面切换到主显示区域进行显示。
S323、当替换机位画面中用户需求的视频播放时间或者内容播放完毕后，自动将原主机位画面切换回主显示区域进行显示；
S324、根据预先设置的终止时间或者终止条件完成视频直播的回放。
所述的备选机位画面与主机位画面根据用户指令进行切换包括如下子步骤：
S41、当收到用户指令切换机位时，将用户指令所选择的机位作为主机位，在主显示区域进行显示；
S42、同时将原来的主机位作为第一备选机位，移入副显示区域以缩略图的形式显示，其余备选机位按照顺序依次下移一位；
S43、最后根据预先设置的终止时间或者终止条件完成视频直播的回放。
所述的终止条件包括用户指令停止、主机位画面播放完毕和最后一个机位画面播放完毕中的一种或者多种。
所述的***默认设置下备选机位顺序根据服务器主机位回放数据中的回放频次进行排列决定，或通过各机位的原始视频的断续情况决定，或根据回放内容决定。
所述的备选机位的缩略图为单个图片，或缓冲图像中截取的一帧，或根据每个机位顺序或作为主机位的回放频次决定的缩略图。
若根据视频流连续数据，视频流中断时长不足第一阈值，则视为没有中断，在播放过程中直接跳过。
一种多机位视频直播回放***，其特征在于：包括判断模块、检测模块、机位确定模块、显示区域确定模块、主机位画面切换模块和终止回放模块；
所述的判断模块主要判断回放模式是否为多机位模式，如果是，进入多机位回放模式，如果不是，进入推荐机位进行单机位回放模式；
所述的检测模块主要是在多机位回放模式下对机位的数量，开始时间、结束时间和视频流的断续情况进行检测；
所述的机位确定模块主要对主机位和多个备选机位进行选择确定；
所述的显示区域确定模块主要对主显示区域和副显示区域的显示画面内容进行确定；
所述的主机位画面切换模块主要是针对在视频直播回放的过程中出现的不同情况而进行不同的主机位的显示画面切换；
所述的终止回放模块依照预先定义的终止时间或者终止条件完成回放。
所述的主机位画面切换模块包括用户指令切换机位模块和替换机位模块；所述的用户指令切换模块主要是将用户指令所选择的机位作为主机位，在主显示区域进行显示；所述的替换机位模块主要是在中断期间，将替换机位换面切换到主显示区域进行显示。
本发明的有益效果是：提供一种多机位视频直播回放方法，能够根据预先获知的中断信息进行回放策略设置，如果主机位画面出现中断的情况，用户可以自行选择备选机位画面到主显示区域进行播放，也可以在回波播放之间预设好替换机位进行切换。用户也可以根据视频播放时间或者内容鱼线设置替换机位，即使没有发生中断也能自行将替换机位画面切换到主机位显示，当替换机位播放完毕后自动将原主机位画面切换回来。能够适应不同的视频直播回复场景和需求。
附图说明
图1为第一实施例回放方法流程图；
图2为第二实施例回放方法流程图；
图3为第三实施例回放方法流程图；
图4为***结构图；
图5为显示区域布局示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案，但本发明的保护范围不局限于以下所述。
如图1所示，一种多机位视频直播回放方法，所述的方法的实现步骤如下，步骤的先后顺序不限于图示的箭头方向和下面的数字顺序：
S1、判断是否为多机位回放模式，如果是，则进入多机位回放模式，如果不是，则进入默认机位进行单机位回放；默认机位可以为***依据之前服务器的主机位回放数据，选择回放频次最高的机位作为默认机位，也可以为依据用户个人播放记录所确定的最喜爱视角所对应的机位作为默认机位。
S2、以服务器接收视频的时间为同步基准，检测多机位回放模式下，机位的数量，每个机位视频流开始和结束时间以及断续情况。
S3、根据用户指令或者默认设置，确定主机位，同时确定第一备选机位，第二备选机位……第n备选机位，其中n为大于等于1的整数；***默认设置下，备选机位的顺序可根据服务器主机位回放数据中，对回放频次进行排列决定；也可以通过来自各机位的原始视频的断续情况决定；例如，顺序排列中，完全无中断情况出现过的机位优先于有轻微中断，次数不大于2次的机位优先于中断2次以上的机位。顺序排列也可以根据回放内容决定，例如，如果回放内容为足球比赛，则主机位为全景机位，备选机位顺序为副全景机位，中景机位，空中垂直机位，球门摆臂机位和特写机位和教练席机位等。
S4、回放开始，在主显示区域显示主机位画面，在副显示区域依次显示备选机位的缩略图。其中，备选机位的缩略图可以为单个图片，每个一段时间，例如一个关键帧I帧周期抓取一帧进行一次刷新，这样可以减少网络开销。
也可以在回放为每个备选机位的画面进行一段时间，例如一个视频图像组GOP的长度的预缓冲，并从缓冲图像中截取一帧，例如关键帧I帧作为缩略图像，每个关键帧I帧周期刷新一次。
还可以根据每个机位顺序或作为主机位的回放频次，来决定同步缓冲时间和缩略图策略。例如，对第一备选机位进行不限时的缓冲，然后在缩略图上以原始帧率同步回放，对第二备选机位进行一个视频图像组GOP的长度的预缓冲，对缩略图以每个关键帧I帧周期刷新一次，对第三备选机位的缩略图不进行缓冲，以每两个关键帧I帧周期刷新一次，对第四备选机位及之后机位不进行缓冲，缩略图也不进行刷新。这样可以合理的减少网络开销，最大化降低当用户需要切换机位时所产生的延迟。预缓冲时间和缩略图的设定策略可根据当前网络测速进行实时调整，例如在网络环境较好通过WiFi连接速度达到867Mbps，广域网访问速度大于50Mbps时，对所有备选机位进行无限时缓冲，以原始帧率在缩略图位置回放。当网速下降通过WiFi连接速度下降至150Mbps且广域网访问速度大于20Mbps时，停止对除前第一和第二备选机位之外的备选机位进行缓冲，缩略图每个关键帧I帧周期刷新一次。当WiFi网速下降至87Mbps以下时或广域网访问速度不大于10Mbps时，停止所有备用机位缓冲，缩略图每3个关键帧I帧周期刷新一次。当网速下降至无法保证主显示画面流畅时，停止所有备选机位的缓冲和缩略图刷新。
S5、根据播放需求，切换备选机位画面与主机位画面；
S6、当检测到终止条件发生时，终止回放。终止条件可以为下列条件之一：用户指令停止，主机位画面播放完毕，最后一个机位画面播放完毕。
所述的备选机位画面与主机位画面自动或根据预设好的替换机位或根据用户指令进行切换。
当备选机位画面与主机位画面在主机位回放视频因传送原因出现中断时进行自动切换包括如下子步骤：
S21、如果主机位画面发生中断，在主显示区域自动播放第一备选机位画面，主显示区域和副显示区域均不再显示中断的主机位画面；
S22、如果当前备选机位画面发生中断，在主显示区域自动播放下一顺位备选机位画面，否则，主显示区域继续播放当前播放画面；
S23、如果主机画面或者在先顺位备选机位的画面恢复，则在主显示区域显示恢复后的主机位画面或者在先顺位备选机位画面；
S24、根据预先设置的终止时间或者终止条件完成视频直播的回放。
如图2所示，所述的备选机位画面与主机位画面根据预设好的替换机位进行切换包括主机位画面有中断预设切换和主机位画面无中断预设切换；
所述的主机位有中断预设切换包括如下步骤：
S311、回放开始前确定当前设置的主机位画面在回放过程中是否有中断情况发生；
S312、如果无中断情况，直接在主显示区域显示主机位画面；
S313、如果有中断情况，提示用户中断时间点，并选择中断期间在主显示区域显示的替换机位；
A、如果用户有选择替换机位，则在中断期间，将替换机位画面切换到主显示区域进行显示，
B、如果用户没有选择替换机位，则在中断期间，将第一备选机位切换到主显示区域进行显示；
S314、根据预先设置的终止时间或者终止条件完成视频直播的回放；
所述的主机位画面无中断预设切换包括如下子步骤：
S321、回放开始前根据用户需求的视频播放时间或者内容预先设置好替换机位；
S322、当视频播放到预先设置好的时间后，自动将替换机位画面切换到主显示区域进行显示。
S323、当替换机位画面中用户需求的视频播放时间或者内容播放完毕后，自动将原主机位画面切换回主显示区域进行显示；
S324、根据预先设置的终止时间或者终止条件完成视频直播的回放。
如图3所示，所述的备选机位画面与主机位画面根据用户指令进行切换包括如下子步骤：
S41、当收到用户指令切换机位时，将用户指令所选择的机位作为主机位，在主显示区域进行显示；
S42、同时将原来的主机位作为第一备选机位，移入副显示区域以缩略图的形式显示，其余备选机位按照顺序依次下移一位；
S43、最后根据预先设置的终止时间或者终止条件完成视频直播的回放。
所述的终止条件包括用户指令停止、主机位画面播放完毕和最后一个机位画面播放完毕中的一种或者多种。
所述的***默认设置下备选机位顺序根据服务器主机位回放数据中的回放频次进行排列决定，或通过各机位的原始视频的断续情况决定，或根据回放内容决定。
所述的备选机位的缩略图为单个图片，或缓冲图像中截取的一帧，或根据每个机位顺序或作为主机位的回放频次决定的缩略图。
若根据视频流连续数据，视频流中断时长不足第一阈值，则视为没有中断，在播放过程中直接跳过。
如图4所示，一种多机位视频直播回放***，其特征在于：包括判断模块、检测模块、机位确定模块、显示区域确定模块、主机位画面切换模块和终止回放模块；
所述的判断模块主要判断回放模式是否为多机位模式，如果是，进入多机位回放模式，如果不是，进入推荐机位进行单机位回放模式；
所述的检测模块主要是在多机位回放模式下对机位的数量，开始时间、结束时间和视频流的断续情况进行检测；
所述的机位确定模块主要对主机位和多个备选机位进行选择确定；
所述的显示区域确定模块主要对主显示区域和副显示区域的显示画面内容进行确定；
所述的主机位画面切换模块主要是针对在视频直播回放的过程中出现的不同情况而进行不同的主机位的显示画面切换；
所述的终止回放模块依照预先定义的终止时间或者终止条件完成回放。
所述的主机位画面切换模块包括用户指令切换机位模块和替换机位模块；所述的用户指令切换模块主要是将用户指令所选择的机位作为主机位，在主显示区域进行显示；所述的替换机位模块主要是在中断期间，将替换机位换面切换到主显示区域进行显示。
如图5所示，主机位画面位于正中央主显示区域内，显示全景视图。第一备选机位，第二备选机位和第三备选机位依次排列于下方条形的副显示区域内。第三备选机位的位置示出了当回放过程中，当某个备选机位到达中断点时，在对应显示区域显示无信号标记，对中断期间不再进行刷新或缓冲，当中断结束时，恢复图像的缩略显示。在第三实施例中，备选机位到达中断点后，可以在画面上显示中断结束后的首帧图像并不再刷新直至中断结束，此外，根据具体设置，可以在中断时间内，对中断后的视频图像进行预缓冲。
以上所述仅是本发明的优选实施方式，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。

Claims (8)

1.一种多机位视频直播回放方法，其特征在于：所述的方法的实现步骤如下：
S1、判断回放模式是否为多机位，如果是则进入多机位回放模式，如果不是进入推荐机位进行单机位直播回放；
S2、以服务器接收视频的时间为同步基准，检测多机位回放模式下，机位的数量、开始时间、结束时间和视频流的断续情况；
S3、根据用户指令或者***默认设置，确定主机位，同时确定第一备选机位，第二备选机位……第n备选机位，其中n为大于等于1的整数；
S4、根据同步基准，在用户的显示终端进行回放，其中主机位回放视频位于显示终端的主机位画面区域，其余备选机位以缩略图的形式依次排列于副显示画面区域；
S5、根据播放需求，切换备选机位画面与主机位画面；
S6、根据预先设置的终止时间或者终止条件完成视频直播的回放；
所述的备选机位画面与主机位画面根据预设好的替换机位进行切换，包括主机位画面有中断预设切换和主机位画面无中断预设切换；
所述的主机位有中断预设切换包括如下步骤：
S311、回放开始前确定当前设置的主机位画面在回放过程中是否有中断情况发生；
S312、如果无中断情况，直接在主显示区域显示主机位画面；
S313、如果有中断情况，提示用户中断时间点，并选择中断期间在主显示区域显示的替换机位；
A、如果用户有选择替换机位，则在中断期间，将替换机位画面切换到主显示区域进行显示，
B、如果用户没有选择替换机位，则在中断期间，将第一备选机位切换到主显示区域进行显示；
S314、根据预先设置的终止时间或者终止条件完成视频直播的回放；
所述的主机位画面无中断预设切换包括如下子步骤：
S321、回放开始前根据用户需求的视频播放时间或者内容预先设置好替换机位；
S322、当视频播放到预先设置好的时间后，自动将替换机位画面切换到主显示区域进行显示；
S323、当替换机位画面中用户需求的视频播放时间或者内容播放完毕后，自动将原主机位画面切换回主显示区域进行显示；
S324、根据预先设置的终止时间或者终止条件完成视频直播的回放。
2.根据权利要求1所述的一种多机位视频直播回放方法，其特征在于：当备选机位画面与主机位画面在主机位回放视频因传送原因出现中断时，还能够进行自动切换，包括如下子步骤：
S21、如果主机位画面发生中断，在主显示区域自动播放第一备选机位画面，主显示区域和副显示区域均不再显示中断的主机位画面；
S22、如果当前备选机位画面发生中断，在主显示区域自动播放下一顺位备选机位画面，否则，主显示区域继续播放当前播放画面；
S23、如果主机画面或者在先顺位备选机位的画面恢复，则在主显示区域显示恢复后的主机位画面或者在先顺位备选机位画面；
S24、根据预先设置的终止时间或者终止条件完成视频直播的回放。
3.根据权利要求1所述的一种多机位视频直播回放方法，其特征在于：所述的备选机位画面与主机位画面还能够根据用户指令进行切换，包括如下子步骤：
S41、当收到用户指令切换机位时，将用户指令所选择的机位作为主机位，在主显示区域进行显示；
S42、同时将原来的主机位作为第一备选机位，移入副显示区域以缩略图的形式显示，其余备选机位按照顺序依次下移一位；
S43、最后根据预先设置的终止时间或者终止条件完成视频直播的回放。
4.根据权利要求1所述的一种多机位视频直播回放方法，其特征在于：所述的终止条件包括用户指令停止、主机位画面播放完毕和最后一个机位画面播放完毕中的一种或者多种。
5.根据权利要求1所述的一种多机位视频直播回放方法，其特征在于：所述的***默认设置下备选机位顺序根据服务器主机位回放数据中的回放频次进行排列决定，或通过各机位的原始视频的断续情况决定，或根据回放内容决定；
所述的备选机位的缩略图为单个图片，或缓冲图像中截取的一帧，或根据每个机位顺序或作为主机位的回放频次决定的缩略图。
6.根据权利要求2所述的一种多机位视频直播回放方法，其特征在于：若根据视频流连续数据，视频流中断时长不足第一阈值，则视为没有中断，在播放过程中直接跳过。
7.根据权利要求1-6任意一项所述方法的一种多机位视频直播回放***，其特征在于：包括判断模块、检测模块、机位确定模块、显示区域确定模块、主机位画面切换模块和终止回放模块；
所述的判断模块主要判断回放模式是否为多机位模式，如果是，进入多机位回放模式，如果不是，进入推荐机位进行单机位回放模式；
所述的检测模块主要是在多机位回放模式下对机位的数量，开始时间、结束时间和视频流的断续情况进行检测；
所述的机位确定模块主要对主机位和多个备选机位进行选择确定；
所述的显示区域确定模块主要对主显示区域和副显示区域的显示画面内容进行确定；
所述的主机位画面切换模块主要是针对在视频直播回放的过程中出现的不同情况而进行不同的主机位的显示画面切换；
所述的终止回放模块依照预先定义的终止时间或者终止条件完成回放。
8.根据权利要求7所述的一种多机位视频直播回放***，其特征在于：所述的主机位画面切换模块包括用户指令切换机位模块和替换机位模块；所述的用户指令切换模块主要是将用户指令所选择的机位作为主机位，在主显示区域进行显示；所述的替换机位模块主要是在中断期间，将替换机位换面切换到主显示区域进行显示。
CN201610852852.2A 2016-09-27 2016-09-27 一种多机位视频直播回放方法及*** Active CN106341711B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610852852.2A CN106341711B (zh) 2016-09-27 2016-09-27 一种多机位视频直播回放方法及***
PCT/CN2017/103712 WO2018059449A1 (en) 2016-09-27 2017-09-27 Systems and methods for displaying multiple videos
US16/336,357 US10681393B2 (en) 2016-09-27 2017-09-27 Systems and methods for displaying multiple videos

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610852852.2A CN106341711B (zh) 2016-09-27 2016-09-27 一种多机位视频直播回放方法及***

Publications (2)

Publication Number Publication Date
CN106341711A CN106341711A (zh) 2017-01-18
CN106341711B true CN106341711B (zh) 2019-09-24

Family

ID=57839253

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610852852.2A Active CN106341711B (zh) 2016-09-27 2016-09-27 一种多机位视频直播回放方法及***

Country Status (3)

Country Link
US (1) US10681393B2 (zh)
CN (1) CN106341711B (zh)
WO (1) WO2018059449A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106341711B (zh) * 2016-09-27 2019-09-24 成都西可科技有限公司 一种多机位视频直播回放方法及***
CN107835434B (zh) * 2017-06-09 2021-09-14 越野一族（北京）传媒科技有限公司 赛事宽视角直播设备和相关联的直播***和方法
CN109257611A (zh) * 2017-07-12 2019-01-22 阿里巴巴集团控股有限公司 一种视频播放方法、装置、终端设备和服务器
CN108737905B (zh) * 2018-06-12 2021-04-13 中国联合网络通信集团有限公司 直播互动同步方法及架构
US20200302363A1 (en) * 2018-06-18 2020-09-24 Necf Systems and methods for generating an architecture for production of goods and services
CN108900857B (zh) * 2018-08-03 2020-12-11 东方明珠新媒体股份有限公司 一种多视角视频流处理方法和装置
CN108989906A (zh) * 2018-08-22 2018-12-11 佛山龙眼传媒科技有限公司 一种直播视频处理方法及装置
CN109637561A (zh) * 2018-11-13 2019-04-16 成都依能科技股份有限公司 一种多通道音视频自动智能编辑方法
CN111787243B (zh) * 2019-07-31 2021-09-03 北京沃东天骏信息技术有限公司 导播方法、装置及计算机可读存储介质
CN112788392A (zh) * 2019-11-07 2021-05-11 西安诺瓦星云科技股份有限公司 多屏同步播放***
CN112866726A (zh) * 2020-12-17 2021-05-28 杭州当虹科技股份有限公司 一种基于移动平台的线上展会多机位直播装置和方法
CN113382267B (zh) * 2021-05-10 2023-08-08 北京奇艺世纪科技有限公司 视角切换方法、装置、终端及存储介质
CN113473086B (zh) * 2021-07-06 2022-09-06 阿波罗智联(北京)科技有限公司 视频播放的方法、装置、电子设备、智慧高速大屏

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139599A (zh) * 2011-11-29 2013-06-05 人民网股份有限公司 网络多画面直播***
CN104506922A (zh) * 2014-12-31 2015-04-08 乐视网信息技术（北京）股份有限公司 一种视频信号播放方法、装置及设备
CN105872705A (zh) * 2015-12-15 2016-08-17 乐视网信息技术（北京）股份有限公司 一种直播显示方法及装置
CN105872568A (zh) * 2015-11-19 2016-08-17 乐视云计算有限公司 基于云直播平台传输视频数据的方法和装置
CN105872570A (zh) * 2015-12-11 2016-08-17 乐视网信息技术（北京）股份有限公司 一种多机位视频同步播放的实现方法及装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104185070B (zh) * 2013-05-20 2017-12-29 青岛海尔电子有限公司 电视不同显示窗口的切换方法
WO2016014591A1 (en) * 2014-07-21 2016-01-28 Avigilon Corporation Timeline synchronization control method for multiple display views
CN104735542B (zh) * 2015-03-30 2018-09-28 北京奇艺世纪科技有限公司 一种视频播放方法及装置
US20180014037A1 (en) * 2016-07-09 2018-01-11 N. Dilip Venkatraman Method and system for switching to dynamically assembled video during streaming of live video
CN106341711B (zh) * 2016-09-27 2019-09-24 成都西可科技有限公司 一种多机位视频直播回放方法及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139599A (zh) * 2011-11-29 2013-06-05 人民网股份有限公司 网络多画面直播***
CN104506922A (zh) * 2014-12-31 2015-04-08 乐视网信息技术（北京）股份有限公司 一种视频信号播放方法、装置及设备
CN105872568A (zh) * 2015-11-19 2016-08-17 乐视云计算有限公司 基于云直播平台传输视频数据的方法和装置
CN105872570A (zh) * 2015-12-11 2016-08-17 乐视网信息技术（北京）股份有限公司 一种多机位视频同步播放的实现方法及装置
CN105872705A (zh) * 2015-12-15 2016-08-17 乐视网信息技术（北京）股份有限公司 一种直播显示方法及装置

Also Published As

Publication number Publication date
WO2018059449A1 (en) 2018-04-05
US20190230386A1 (en) 2019-07-25
US10681393B2 (en) 2020-06-09
CN106341711A (zh) 2017-01-18

Similar Documents

Publication Publication Date Title
CN106341711B (zh) 一种多机位视频直播回放方法及***
CN103856806B (zh) 视频流切换方法、装置及***
CN105323552B (zh) 一种全景视频播放方法及***
WO2016131223A1 (zh) 一种视频帧丢帧方法及视频发送装置
CN110248204A (zh) 一种直播缓存的处理方法、装置、设备和存储介质
TWI253306B (en) Method and system for control of a multi-field deinterlacer including providing visually pleasing start-up and shut-down
CN107071503B (zh) 视频直播的方法、装置和直播接流服务器
CN101815199B (zh) 一种视频处理方法及终端
CN100429942C (zh) 视频音频再生装置与视频音频再生方法
CN106792100A (zh) 一种视频弹幕显示方法及装置
CN201781583U (zh) 多路服务器录像回放同步控制***
CN103731727A (zh) 一种播放视频的方法和视频播放器
CN107231563A (zh) 视频处理方法和装置
CN109889882A (zh) 一种视频剪辑合成方法和***
US20090244093A1 (en) Method and device for adaptive video presentation
CN105376642A (zh) 视频播放分辨率切换方法及***
CN106658032A (zh) 一种多摄像头直播方法及***
JP2010141632A (ja) 映像再生装置、映像システム及び映像の再生速度変換方法
CN107247733A (zh) 一种视频片段观看热度分析方法及***
US10362266B2 (en) Video processing apparatus, video processing system, and video processing method
CN102665131A (zh) 一种网络视频服务***接收端的视频缓冲方法
US20170243613A1 (en) Image processing apparatus that processes a group consisting of a plurality of images, image processing method, and storage medium
CN105306837A (zh) 多图像拼接方法及装置
CN102215375A (zh) 多媒体会议中多画面的子画面的视频源的选择方法及装置
CN107071549A (zh) 单解码器下多播放器快速切换方法、装置及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20191129

Address after: Two Lu Tian Hua high tech Zone of Chengdu City, Sichuan province 610000 No. 219 building 3 layer 12

Patentee after: Chengdu Love Technology Co., Ltd.

Address before: Two Lu Tian Hua high tech Zone of Chengdu City, Sichuan province 610041 No. 219 Tianfu Software Park C District 12 building 6 layer

Patentee before: Chengdu Xike Technology Co.,Ltd.