JPWO2018211613A1 - 符号化映像再生装置および符号化映像再生方法 - Google Patents
符号化映像再生装置および符号化映像再生方法 Download PDFInfo
- Publication number
- JPWO2018211613A1 JPWO2018211613A1 JP2019518657A JP2019518657A JPWO2018211613A1 JP WO2018211613 A1 JPWO2018211613 A1 JP WO2018211613A1 JP 2019518657 A JP2019518657 A JP 2019518657A JP 2019518657 A JP2019518657 A JP 2019518657A JP WO2018211613 A1 JPWO2018211613 A1 JP WO2018211613A1
- Authority
- JP
- Japan
- Prior art keywords
- video
- information
- audio
- access unit
- stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 49
- 238000004458 analytical method Methods 0.000 claims description 68
- 238000007405 data analysis Methods 0.000 claims description 4
- 238000000926 separation method Methods 0.000 abstract description 20
- 230000008569 process Effects 0.000 description 40
- 230000003068 static effect Effects 0.000 description 38
- 238000001094 photothermal spectroscopy Methods 0.000 description 24
- 230000006835 compression Effects 0.000 description 14
- 238000007906 compression Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000008707 rearrangement Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000008929 regeneration Effects 0.000 description 2
- 238000011069 regeneration method Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/93—Regeneration of the television signal or of selected parts thereof
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
Description
<装置構成>
図1は、本発明に係る実施の形態の符号化映像再生装置100のシステム構成を示す機能ブロック図である。
次に、符号化映像再生装置100における復号処理の流れについて説明する。再生ドライバ102がSDカード140から読み出したストリーム情報ファイルを再生する場合、システム制御部101はストリーム制御部110を制御して予めSDカード140から再生対象のストリーム情報ファイルに関連する再生制御情報を読み出しておく。システム制御部101は、読み出した再生制御情報をメモリ120に保持し、必要に応じて読み出す。システム制御部101は、メモリ120から読み出した再生制御情報に基づいて、制御統括下にある各部に対して再生準備を行うよう指示する。
本発明に係る符号化映像再生装置100においては、システム制御部101による制御に特徴を有している。すなわち、データ供給制御部151がAVバッファ112にデータを保存するのに先立って、静的解析部152がストリーム情報ファイル221のデータ解析を行い、完全にフレーム画像を復号可能なピクチャを開始点および終了点とするように並べ替えを行う。
図2は、SDカード140の論理ファイル構造を示す模式図である。ルートディレクトリ200は、論理的に階層構造を成すファイル構造の最上位階層のディレクトリ構造である。ルートディレクトリ200は、SDカード140に記録されているコンテンツ管理情報である再生制御情報ファイル211をまとめて記録したフォルダである再生制御情報ディレクトリ210と、ストリーム情報ファイル221をまとめて記録したフォルダであるストリーム管理ディレクトリ220とを有している。なお、再生制御情報ディレクトリ210が構築される記憶領域を再生制御情報領域と呼称し、ストリーム管理ディレクトリ220が構築される記憶領域をストリーム情報領域と呼称する。
図3は、再生制御情報ファイル211におけるシンタックスを説明する図である。「Start_PTS301」は対象となるストリーム情報ファイル221の最初のアクセスユニットの表示開始時刻を意味するPTS(Presentation Time Stamp)を示し、「End_PTS302」は最終のアクセスユニットの表示開始時刻を意味するPTSを示す。
図4は、符号化圧縮映像ファイルの蓄積順配列と表示順配列の関係を説明する模式図である。ストリーム情報ファイル221は、蓄積順配列401に示されるように、蓄積フレーム順に記録されるが、本実施の形では、再生開始前に、静的解析部152がストリーム情報ファイル221のデータ解析を静的に行い表示順配列402のように並べ替えを行う。
図5は、プレイリスト情報160におけるシンタックスを説明する図である。「num_of_PlayList501」は、サイネージ表示を行う単位となるプレイリストの総数、「PlayList_Attribute502」は、プレイリストの総時間、プレイリスト名称、および記録日時のようなプレイリストの属性情報が保持されている。
図6は、ストリーム分離部111で分離された符号化映像情報および符号化音声情報をAVバッファ112に保存する場合の保存形態を説明する図である。図6に示すように、SDカード140には、複数のストリーム情報ファイル221が記録されている。ストリーム情報ファイル221は、MPEG−TSフォーマットで作成されたMTSファイル、MP4フォーマットで作成されたMP4ファイルおよびWMVフォーマットで作成されたWMVファイルなど様々な多重化フォーマットで作成されたファイルを含んでも良い。
図7は、映像表示とデータ供給のタイミングを示す図であり、横軸は時間軸である。ここでは、プレイリストとして、MTSファイルの「00111.mts」を2回再生させた後、MP4ファイルの「99999.mp4」を再生させる場合についての説明を行うものとする。
次に、図1を参照しつつ、図9に示すフローチャートを用いて符号化映像再生装置100における全体動作を説明する。図9に示すように符号化映像再生装置100は、操作部130を介してプレイリストに基づいた再生の指示を受けることで動作を開始し、まず、システム制御部101は、SDカード140からストリーム情報ファイル221を読み出すように再生ドライバ102を制御する。
次に、図10に示す静的解析処理の動作を示すフローチャートを用いて、静的解析処理についてさらに説明する。
次に、図11に示すファイル再生処理の動作を示すフローチャートを用いて、ファイル再生処理についてさらに説明する。
Claims (10)
- 符号化された映像情報と音声情報とが多重化されたストリーム情報ファイルを再生する符号化映像再生装置であって、
前記ストリーム情報ファイルから、前記映像情報と前記音声情報とを分離し、それぞれアクセスユニット単位に分割するストリーム分離部と、
前記アクセスユニット単位に分割された、前記映像情報および前記音声情報を、それぞれの表示開始時刻と関連付けて記録するバッファと、
前記表示開始時刻に基づいて、前記映像情報および前記音声情報を前記バッファから読み出して復号するデコーダと、
前記バッファに対する前記表示開始時刻、前記映像情報および前記音声情報の記録の制御と、前記バッファから前記デコーダへの前記映像情報および前記音声情報の供給を制御するデータ供給制御部と、を備え、
前記データ供給制御部は、
先行するストリーム情報ファイルの映像情報および音声情報の供給を終えると、前記先行するストリーム情報ファイルの最終のアクセスユニットの表示開始時刻を、後続するストリーム情報ファイルの映像情報および音声情報の供給に先立って、前記後続するストリーム情報ファイルの最初のアクセスユニットの表示開始時刻に再設定する、符号化映像再生装置。 - 前記データ供給制御部による前記バッファへの前記映像情報および前記音声情報の記録に先立って、前記ストリーム情報ファイルの最初のアクセスユニットと、最終のアクセスユニットのデータ解析を行う解析部を備え、
前記解析部は、完全にフレーム画像を復号可能なアクセスユニットが前記最初のアクセスユニットおよび前記最終のアクセスユニットとなるように、アクセスユニットの並べ替えを行い、前記データ供給制御部は、並べ替えられた順に前記バッファに記録する、請求項1記載の符号化映像再生装置。 - 前記デコーダで復号された映像情報および音声情報を受け、それぞれの映像輝度および出力音量レベルの調整を行う映像音声調整部を備え、
前記解析部は、
前記ストリーム情報ファイルの前記最初のアクセスユニットを含む開始部分および、前記最終のアクセスユニットを含む終了部分の映像輝度および音声出力レベルを解析し、
前記映像音声調整部は、
前記先行するストリーム情報ファイルの前記終了部分と、前記後続するストリーム情報ファイルの前記開始部分において、前記映像輝度の差異および音声出力レベルの差異が、予め定めた差異よりも大きい場合に、前記予め定めた差異以内とするように、前記映像輝度および音声出力レベルを低減させる、請求項2記載の符号化映像再生装置。 - 前記映像音声調整部は、
前記先行するストリーム情報ファイルの前記最終のアクセスユニットと、前記後続するストリーム情報ファイルの前記最初のアクセスユニットにおいて、前記映像輝度の差異および前記音声出力レベルの差異が、前記予め定めた差異よりも大きい場合に、前記予め定めた差異以内とするように、前記映像輝度および音声出力レベルを低減させる、請求項3記載の符号化映像再生装置。 - 前記先行するストリーム情報ファイルの前記終了部分は、前記最終のアクセスユニットと、それより前の複数の先行アクセスユニットを含み、
前記後続するストリーム情報ファイルの前記開始部分は、前記最初のアクセスユニットと、それより後の複数の後続アクセスユニットを含み、
前記映像音声調整部は、
前記最終のアクセスユニットおよび前記複数の先行アクセスユニットにおける前記映像輝度および前記音声出力レベルのそれぞれの平均値と、
前記最初のアクセスユニットおよび前記複数の後続アクセスユニットにおける前記映像輝度および前記音声出力レベルのそれぞれの平均値との差異が、前記予め定めた差異よりも大きい場合に、前記予め定めた差異以内とするように、前記映像輝度および音声出力レベルを低減させる、請求項3記載の符号化映像再生装置。 - 符号化された映像情報と音声情報とが多重化されたストリーム情報ファイルを再生する符号化映像再生方法であって、
(a)前記ストリーム情報ファイルから、前記映像情報と前記音声情報とを分離するステップと
(b)前記映像情報および前記音声情報それぞれアクセスユニット単位に分割し、分割された、前記映像情報および前記音声情報を、それぞれの表示開始時刻と関連付けてバッファに記録するステップと、
(c)前記バッファから前記映像情報および前記音声情報を読み出してデコーダに供給するステップと、
(d)前記デコーダにおいて、前記表示開始時刻に基づいて、前記映像情報および前記音声情報を復号するステップと、を備え、
前記ステップ(d)の後に、
先行するストリーム情報ファイルの最終のアクセスユニットの表示開始時刻を、後続するストリーム情報ファイルの映像情報および音声情報の前記デコーダへの供給に先立って、前記後続するストリーム情報ファイルの最初のアクセスユニットの表示開始時刻に再設定するステップを備える、符号化映像再生方法。 - 前記ステップ(b)に先立って、
(e)前記ストリーム情報ファイルの最初のアクセスユニットと、最終のアクセスユニットのデータ解析を行うステップを備え、
前記ステップ(e)は、
完全にフレーム画像を復号可能なアクセスユニットが前記最初のアクセスユニットおよび前記最終のアクセスユニットとなるように、アクセスユニットの並べ替えを行うステップを含み、
前記ステップ(b)は、
前記ステップ(e)で並べ替えられた順に前記バッファに記録する、請求項6記載の符号化映像再生方法。 - 前記ステップ(d)の後に、
(f)前記デコーダで復号された映像情報および音声情報を受け、それぞれの映像輝度および出力音量レベルの調整を行うステップを備え、
前記ステップ(e)は、
前記ストリーム情報ファイルの前記最初のアクセスユニットを含む開始部分および、前記最終のアクセスユニットを含む終了部分の映像輝度および音声出力レベルを解析するステップを含み、
前記ステップ(f)は、
前記先行するストリーム情報ファイルの前記終了部分と、前記後続するストリーム情報ファイルの前記開始部分において、前記映像輝度の差異および音声出力レベルの差異が、予め定めた差異よりも大きい場合に、前記予め定めた差異以内とするように、前記映像輝度および音声出力レベルを低減させるステップを含む、請求項7記載の符号化映像再生方法。 - 前記ステップ(f)は、
前記先行するストリーム情報ファイルの前記最終のアクセスユニットと、前記後続するストリーム情報ファイルの前記最初のアクセスユニットにおいて、前記映像輝度の差異および前記音声出力レベルの差異が、前記予め定めた差異よりも大きい場合に、前記予め定めた差異以内とするように、前記映像輝度および音声出力レベルを低減させるステップを含む、請求項8記載の符号化映像再生方法。 - 前記先行するストリーム情報ファイルの前記終了部分は、前記最終のアクセスユニットと、それより前の複数の先行アクセスユニットを含み、
前記後続するストリーム情報ファイルの前記開始部分は、前記最初のアクセスユニットと、それより後の複数の後続アクセスユニットを含み、
前記ステップ(f)は、
前記最終のアクセスユニットおよび前記複数の先行アクセスユニットにおける前記映像輝度および前記音声出力レベルのそれぞれの平均値と、
前記最初のアクセスユニットおよび前記複数の後続アクセスユニットにおける前記映像輝度および前記音声出力レベルのそれぞれの平均値との差異が、前記予め定めた差異よりも大きい場合に、前記予め定めた差異以内とするように、前記映像輝度および音声出力レベルを低減させるステップを含む、請求項8記載の符号化映像再生方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2017/018464 WO2018211613A1 (ja) | 2017-05-17 | 2017-05-17 | 符号化映像再生装置および符号化映像再生方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018211613A1 true JPWO2018211613A1 (ja) | 2019-11-07 |
JP6742515B2 JP6742515B2 (ja) | 2020-08-19 |
Family
ID=64274223
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019518657A Expired - Fee Related JP6742515B2 (ja) | 2017-05-17 | 2017-05-17 | 符号化映像再生装置および符号化映像再生方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6742515B2 (ja) |
WO (1) | WO2018211613A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11985290B2 (en) | 2019-07-03 | 2024-05-14 | Sony Group Corporation | Information processing device, information processing method, reproduction processing device, and reproduction processing method |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04345285A (ja) * | 1991-05-22 | 1992-12-01 | Fuji Xerox Co Ltd | 動画像編集装置及び方法 |
JP2005302100A (ja) * | 2004-04-08 | 2005-10-27 | Sony Corp | 情報再生装置、情報再生方法および情報再生プログラム |
JP4438059B2 (ja) * | 2004-08-24 | 2010-03-24 | キヤノン株式会社 | 画像再生装置及びその制御方法 |
JP4704972B2 (ja) * | 2006-07-24 | 2011-06-22 | ルネサスエレクトロニクス株式会社 | ストリーム編集方法及びストリーム編集装置 |
JP2009290768A (ja) * | 2008-05-30 | 2009-12-10 | Toshiba Corp | 映像処理装置および映像処理方法 |
JP5687867B2 (ja) * | 2010-08-23 | 2015-03-25 | Necパーソナルコンピュータ株式会社 | 情報処理装置、動画ファイル編集方法及びプログラム |
JP6049410B2 (ja) * | 2012-11-09 | 2016-12-21 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2014239524A (ja) * | 2014-08-08 | 2014-12-18 | ヤマハ株式会社 | 連続する複数のフレームで構成される動画像の圧縮方法、および連続する複数のフレームで構成される動画像を圧縮符号化する画像処理装置 |
-
2017
- 2017-05-17 WO PCT/JP2017/018464 patent/WO2018211613A1/ja active Application Filing
- 2017-05-17 JP JP2019518657A patent/JP6742515B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP6742515B2 (ja) | 2020-08-19 |
WO2018211613A1 (ja) | 2018-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8326117B2 (en) | Data recording device, data recording method, data processing device, data processing method, program, program recording medium, data recording medium, and data structure | |
US8160422B2 (en) | Data recording device, data recording method, data processing device, data processing method, program, program recording medium, data recording medium, and data structure | |
TW200412801A (en) | Display of closed captioned information during video trick modes | |
US20140126885A1 (en) | Synchronized stream packing | |
KR20050032461A (ko) | 텍스트 기반의 자막 정보를 포함하는 저장 매체, 재생장치 및 그 재생 방법 | |
US8346059B2 (en) | Data processing device, data processing method, program, program recording medium, data recording medium, and data structure | |
JPH10262208A (ja) | 同期ずれ制御装置及び方法 | |
JP2024045366A (ja) | 情報処理装置、情報処理方法、記録媒体、再生装置、再生方法、およびプログラム | |
KR100777856B1 (ko) | 화상 기록 장치 및 방법, 화상 재생 장치 및 방법과 기록매체 | |
JP6742515B2 (ja) | 符号化映像再生装置および符号化映像再生方法 | |
US6999090B2 (en) | Data processing apparatus, data processing method, information storing medium, and computer program | |
US20080232782A1 (en) | Recording apparatus, image reproducing apparatus, and special reproduction method therefor | |
JP2002010254A (ja) | 特徴点検出方法および記録再生装置 | |
JP4225339B2 (ja) | 画像データ処理装置および方法、プログラム、並びに記録媒体 | |
JP2006148275A (ja) | ビデオ信号多重化装置、ビデオ信号多重化方法及び映像再生装置 | |
JP4763589B2 (ja) | 再生装置、および、その再生方法 | |
US20150255119A1 (en) | Display apparatus and method for editing and displaying recorded video content | |
JP6976219B2 (ja) | 映像記録再生装置および映像記録再生方法 | |
JP4288442B2 (ja) | 記録再生装置および映像処理方法 | |
JP2021166363A (ja) | 映像再生装置および映像再生方法 | |
JP2007027880A (ja) | デジタル放送蓄積・再生方法 | |
JP2020198560A (ja) | 映像記録再生装置及び映像記録再生方法 | |
JP4800824B2 (ja) | 記録媒体 | |
JP2005276246A (ja) | 情報再生方法および情報再生装置 | |
JP2011134415A (ja) | 映像記録再生装置及び映像記録再生方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190510 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200630 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200728 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6742515 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |