CN111866574A - 一种移动端流媒体实时倒放方法 - Google Patents
一种移动端流媒体实时倒放方法 Download PDFInfo
- Publication number
- CN111866574A CN111866574A CN201910355822.4A CN201910355822A CN111866574A CN 111866574 A CN111866574 A CN 111866574A CN 201910355822 A CN201910355822 A CN 201910355822A CN 111866574 A CN111866574 A CN 111866574A
- Authority
- CN
- China
- Prior art keywords
- playing
- mobile terminal
- decoding
- streaming media
- picture frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000004590 computer program Methods 0.000 claims abstract description 5
- 230000009191 jumping Effects 0.000 claims 1
- 230000005540 biological transmission Effects 0.000 abstract description 5
- 230000006835 compression Effects 0.000 abstract description 2
- 238000007906 compression Methods 0.000 abstract description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
- H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种移动端流媒体实时倒放方法,属于视频播放技术。本发明方法利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存;使用计算机程序控制在缓冲区形成数据栈,由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据,由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈,解码时按照关键帧分割成多个子过程,每个解码子过程向前解码并顺序入栈,播放时图片帧数据倒序出栈,解码完一个过程后向后跳到上一个子过程继续解码,实现实时倒放和任意位置的播放方向可切换,解决了现有现有流媒体播放器不能由用户随时切换播放方向和移动端设备播放时容易滞卡的问题。
Description
技术领域
本发明属于视频播放技术领域,尤其与一种移动端流媒体实时倒放方法有关。
背景技术
在网络技术上,流媒体(streaming media)是指将一连串的媒体数据压缩后,经过网上分段发送数据,在网上即时传输影音以供观赏的一种技术与过程,此技术使得数据包得以像流水一样发送;如果不使用此技术,就必须在使用前下载整个媒体文件。流媒体技术是视频和声音信息经过压缩处理后放上网站服务器,让用户一边下载一边观看、收听,而不要等整个压缩文件下载到自己的计算机上才可以观看的网络传输技术。该技术先在使用者端的计算机上创建一个缓冲区,在播放前预先下一段数据作为缓冲,在网路实际连线速度小于播放所耗的速度时,播放程序就会取用一小段缓冲区内的数据,这样可以避免播放的中断,也使得播放品质得以保证。流媒体实现的关键技术就是流式传输,流媒体的传输过程中需要缓存的支持。
视频播放的原理是单帧图片的快速连续渲染,连续的图像变化每秒超过24帧画面以上时,根据视觉暂留原理,人眼无法辨别单幅的静态画面;看上去是平滑连续的视觉效果,这样连续的画面叫做视频。流媒体视频播放时需要对传输到缓存中的压缩文件进行解压。
视频倒放就是图片帧的倒序播放。要实现倒序播放就需要对压缩文件进行倒序解码,但目前视频播放器不能有效支持倒序解码,所以倒放视频需要通过预先制作好反向的短视频,然后以正向播放的方式播放该短视频实现视频内容的倒放,因而也不能由用户随时切换播放方向。
移动端主要是指手机或者具有多种应用功能的智能手机以及平板电脑。这类设备运算资源有限,解码速率可能跟不上视频帧速率,就会出现滞卡现象。
发明内容
本发明目的旨在解决现有流媒体播放器不能由用户随时切换播放方向和移动端设备由于运算资源限制导致流媒体播放时容易滞卡的问题,提供一种能使移动端设备顺畅倒序播放并支持用户随时切换播放方向的移动端流媒体实时倒放方法。
为此,本发明采用以下技术方案:一种移动端流媒体实时倒放方法,其特征是,利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存,缓存的文件长度要满足如下关系:N>Intr*fr*fr/sp(N:缓存帧数;Intr:关键帧间隔,单位秒;fr:视频帧速率,单位帧/秒;sp:解码速率,单位帧/秒);使用计算机程序控制在缓冲区形成数据栈,由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据,由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈,解码时按照关键帧分割成多个子过程,每个解码子过程向前解码并顺序入栈,播放时图片帧数据倒序出栈,解码完一个过程后向后跳到上一个子过程继续解码,形成宏观上解码方式是向后的,微观上每一个子过程解码上向前的。用户不管是在哪一个阶段切换播放方向进行倒放,总是对应上某一个子过程,从该子过程顺序解码入栈,倒序出栈播放,再向后跳到上一个子过程继续解码,实现任意位置切换播放方向。
本发明可以达到以下有益效果:通过采用CPU软解和GPU硬解结合的处理模式,解决了移动端运算资源受限的问题,使视频播放顺畅;计算机程序控制解码过程分成多个子过程,每一个子过程向前解码并顺序入栈,播放时图片帧数据倒序出栈,解码完一个过程后向后跳到上一个子过程继续解码,实现了实时倒放和任意位置的播放方向可切换。
具体实施方式
下面对本发明的具体实施方式进行详细描述,所描述的实施例只是对本发明创造的说明和解释,并不构成对本发明的唯一限定。
本发明方法利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存,缓存的文件长度要满足如下关系:N>Intr*fr*fr/sp(N:缓存帧数;Intr:关键帧间隔,单位秒;fr:视频帧速率,单位帧/秒;sp:解码速率,单位帧/秒);使用计算机程序控制在缓冲区形成数据栈,由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据,由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈,解码时按照关键帧分割成多个子过程,每个解码子过程向前解码并顺序入栈,播放时图片帧数据倒序出栈,解码完一个过程后向后跳到上一个子过程继续解码,形成宏观上解码方式是向后的,微观上每一个子过程解码上向前的。
Claims (1)
1.一种移动端流媒体实时倒放方法,其特征在于:利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存,缓存的文件长度要满足如下关系:N>Intr*fr*fr/sp(N:缓存帧数;Intr:关键帧间隔,单位秒;fr:视频帧速率,单位帧/秒;sp:解码速率,单位帧/秒);使用计算机程序控制在缓冲区形成数据栈,由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据,由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈,解码时按照关键帧分割成多个子过程,每个解码子过程向前解码并顺序入栈,播放时图片帧数据倒序出栈,解码完一个过程后向后跳到上一个子过程继续解码。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910355822.4A CN111866574A (zh) | 2019-04-29 | 2019-04-29 | 一种移动端流媒体实时倒放方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910355822.4A CN111866574A (zh) | 2019-04-29 | 2019-04-29 | 一种移动端流媒体实时倒放方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111866574A true CN111866574A (zh) | 2020-10-30 |
Family
ID=72966279
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910355822.4A Pending CN111866574A (zh) | 2019-04-29 | 2019-04-29 | 一种移动端流媒体实时倒放方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111866574A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114979763A (zh) * | 2022-04-13 | 2022-08-30 | 深圳市有为信息技术发展有限公司 | 视频回放时的播放控制方法和装置、视频回放*** |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101931808A (zh) * | 2010-07-26 | 2010-12-29 | 华为技术有限公司 | 文件逆序播放方法及装置 |
CN103281528A (zh) * | 2013-04-10 | 2013-09-04 | 深圳康佳通信科技有限公司 | 一种流媒体解码方法、***及移动终端 |
US20130294526A1 (en) * | 2012-05-01 | 2013-11-07 | Kevin Thornberry | Smooth reverse video playback on low-cost current generation set-top box hardware |
CN106507204A (zh) * | 2016-12-07 | 2017-03-15 | 腾讯科技(上海)有限公司 | 一种视频倒放方法和装置 |
CN107222779A (zh) * | 2017-06-08 | 2017-09-29 | 浙江大华技术股份有限公司 | 一种视频倒放的方法及装置 |
-
2019
- 2019-04-29 CN CN201910355822.4A patent/CN111866574A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101931808A (zh) * | 2010-07-26 | 2010-12-29 | 华为技术有限公司 | 文件逆序播放方法及装置 |
US20130294526A1 (en) * | 2012-05-01 | 2013-11-07 | Kevin Thornberry | Smooth reverse video playback on low-cost current generation set-top box hardware |
CN103281528A (zh) * | 2013-04-10 | 2013-09-04 | 深圳康佳通信科技有限公司 | 一种流媒体解码方法、***及移动终端 |
CN106507204A (zh) * | 2016-12-07 | 2017-03-15 | 腾讯科技(上海)有限公司 | 一种视频倒放方法和装置 |
CN107222779A (zh) * | 2017-06-08 | 2017-09-29 | 浙江大华技术股份有限公司 | 一种视频倒放的方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114979763A (zh) * | 2022-04-13 | 2022-08-30 | 深圳市有为信息技术发展有限公司 | 视频回放时的播放控制方法和装置、视频回放*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10027927B2 (en) | High quality multimedia transmission from a mobile device for live and on-demand viewing | |
WO2016131223A1 (zh) | 一种视频帧丢帧方法及视频发送装置 | |
US10349069B2 (en) | Software hardware hybrid video encoder | |
US8238420B1 (en) | Video content transcoding for mobile devices | |
US20070217505A1 (en) | Adaptive Decoding Of Video Data | |
US8483551B2 (en) | Method for generating double-speed IDR-unit for trick play, and trick play system and method using the same | |
US20090220003A1 (en) | Method of compressing video data and a media player for implementing the method | |
US9531983B2 (en) | Decoding interdependent frames of a video for display | |
CN107566918A (zh) | 一种视频分发场景下的低延时取流秒开方法 | |
US9055272B2 (en) | Moving image reproduction apparatus, information processing apparatus, and moving image reproduction method | |
TW201536042A (zh) | 用於移動視訊播放的方法和系統 | |
CN110708569B (zh) | 一种视频处理方法、装置、电子设备及存储介质 | |
CN114584769A (zh) | 一种视角切换方法及装置 | |
CN108184163A (zh) | 一种视频播放方法、存储介质及播放器 | |
JP4322944B2 (ja) | 映像再生装置、映像再生方法及び映像再生処理用プログラム | |
CN111866574A (zh) | 一种移动端流媒体实时倒放方法 | |
US20230300426A1 (en) | Dual stream dynamic gop access based on viewport change | |
KR20040037190A (ko) | 비디오 캡쳐 장치 및 저속 데이타 링크를 통해 고품질의비디오를 송신하는 방법 | |
CN112449239A (zh) | 视频播放方法、装置及电子设备 | |
JP7304419B2 (ja) | 送信装置、送信方法及びプログラム | |
WO2022205064A1 (zh) | 视频编码器、视频解码器及相应方法 | |
CN117579843B (zh) | 视频编码处理方法及电子设备 | |
JP2003309847A (ja) | 画像伝送方法および画像伝送装置 | |
JP2007067790A (ja) | 動画受信装置 | |
CN116962764A (zh) | 流媒体传输方法、装置、设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20201030 |