JP2022050369A - コーディングされたビデオにおけるサブピクチャ・エンティティ・グループ・シグナリング - Google Patents
コーディングされたビデオにおけるサブピクチャ・エンティティ・グループ・シグナリング Download PDFInfo
- Publication number
- JP2022050369A JP2022050369A JP2021151939A JP2021151939A JP2022050369A JP 2022050369 A JP2022050369 A JP 2022050369A JP 2021151939 A JP2021151939 A JP 2021151939A JP 2021151939 A JP2021151939 A JP 2021151939A JP 2022050369 A JP2022050369 A JP 2022050369A
- Authority
- JP
- Japan
- Prior art keywords
- syntax element
- visual media
- video
- media file
- format
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000011664 signaling Effects 0.000 title description 4
- 238000000034 method Methods 0.000 claims abstract description 163
- 230000000007 visual effect Effects 0.000 claims abstract description 141
- 238000006243 chemical reaction Methods 0.000 claims abstract description 38
- 230000008569 process Effects 0.000 claims description 10
- 230000015654 memory Effects 0.000 claims description 9
- 238000003672 processing method Methods 0.000 abstract description 7
- 239000010410 layer Substances 0.000 description 60
- 238000012545 processing Methods 0.000 description 27
- 238000005516 engineering process Methods 0.000 description 24
- 239000013598 vector Substances 0.000 description 20
- 230000003044 adaptive effect Effects 0.000 description 13
- 238000004590 computer program Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 238000013139 quantization Methods 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 7
- 230000009466 transformation Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000005192 partition Methods 0.000 description 4
- 230000000153 supplemental effect Effects 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000000638 solvent extraction Methods 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 2
- 241000023320 Luma <angiosperm> Species 0.000 description 2
- 241000209094 Oryza Species 0.000 description 2
- 235000007164 Oryza sativa Nutrition 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000000945 filler Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 235000009566 rice Nutrition 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000011229 interlayer Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
パリ条約に関して適用可能な特許法及び/又は規則の下で本願は2020年9月17日付で出願された米国仮特許出願第63/079,892号の優先権及び利益を適時に主張するために行われている。法に基づく全ての目的に関し、前述の出願の開示全体は、本願の開示の一部として参照により援用される。
本件特許明細書はデジタル・オーディオ・ビデオ・メディア情報をファイル・フォーマットで生成、保存、及び消費することに関連している。
デジタル・ビデオは、インターネット及びその他のデジタル通信ネットワークにおいて利用する最大の帯域幅を占めている。ビデオを受信及び表示することが可能な接続ユーザー・デバイスの台数が増加するにつれて、デジタル・ビデオの利用に対する帯域幅需要は増加し続けるであろうということが予想される。
本件明細書はビデオ・ファイル・フォーマットに関連する。具体的には、ISOベース・メディア・ファイル・フォーマット(ISOBMFF)に基づく多用途ビデオ・コーディング(VVC)ビデオ・ビットストリームを搬送するメディア・ファイルにおけるデコーダ構成情報及びサブピクチャ・エンティティ・グループのシグナリングに関連する。アイデアは、個々に又は様々な組み合わせで、例えばVVC規格のような任意のコーデックによってコーディングされたビデオ・ビットストリーム、及び例えば開発中のVVCビデオ・ファイル・フォーマットのような任意のビデオ・ファイル・フォーマットに適用することができる。
2.略語
ACT(adaptive colour transform) 適応色変換
ALF(adaptive loop filter) 適応ループフィルタ
AMVR(adaptive motion vector resolution) 適応動きベクトル分解能
APS(adaptation parameter set) 適応パラメータ・セット
AU(access unit) アクセス・ユニット
AUD(access unit delimiter) アクセス・ユニット・デリミタ
AVC(advanced video coding)(Rec. ITU-T H.264 | ISO/IEC 14496-10)アドバンスト・ビデオ・コーディング
B(bi-predictive) 双-予測
BCW(bi-prediction with CU-level weights) CUレベルのウェイトによる双-予測
BDOF(bi-directional optical flow) 双-予測オプティカル・フロー
BDPCM(block-based delta pulse code modulation) ブロック・ベースのデルタ・パルス・コード変調
BP(buffering period) バッファリング期間
CABAC(context-based adaptive binary arithmetic coding) コンテキスト・ベースの適応バイナリ算術コーディング
CB(coding block) コーディング・ブロック
CBR(constant bit rate) 固定ビット・レート
CCALF(cross-component adaptive loop filter) クロス・コンポーネント適応ループ・フィルタ
CPB(coded picture buffer) コーディングされたピクチャのバッファ
CRA(clean random access) クリーン・ランダム・アクセス
CRC(cyclic redundancy check) 巡回冗長検査
CTB(coding tree block) コーディング・ツリー・ブロック
CTU(coding tree unit) コーディング・ツリー・ユニット
CU(coding unit) コーディング・ユニット
CVS(coded video sequence) コーディングされたビデオ・シーケンス
DPB(decoded picture buffer) 復号化されたピクチャ・バッファ
DCI(decoding capability information) 復号化能力情報
DRAP(dependent random access point) 依存性ランダム・アクセス・ポイント
DU(decoding unit) 復号化ユニット
DUI(decoding unit information) 復号化ユニット情報
EG(exponential-Golomb) 指数ゴロム
EGk(k-th order exponential-Golomb) k次-指数ゴロム
EOB(end of bitstream) ビットストリーム末尾
EOS(end of sequence) シーケンス末尾
FD(filler data) フィラー・データ
FIFO(first-in, first-out) 先入れ先出し
FL(fixed-length) 固定長
GBR(green, blue, and red) グリーン,ブルー,レッド
GCI(general constraints information) 一般制約情報
GDR(gradual decoding refresh) 漸進的復号化リフレッシュ
GPM(geometric partitioning mode) 幾何学的パーティショニング・モード
HEVC(high efficiency video coding)(Rec. ITU-T H.265 | ISO/IEC 23008-2) 高効率ビデオ・コーディング
HRD(hypothetical reference decoder) 仮想リファレンス・デコーダ
HSS(hypothetical stream scheduler) 仮想ストリーム・スケジューラ
I(intra) イントラ
IBC(intra block copy) イントラ・ブロック・コピー
IDR(instantaneous decoding refresh) 瞬時復号化リフレッシュ
ILRP(inter-layer reference picture) インター・レイヤ参照ピクチャ
IRAP(intra random access point) イントラ・ランダム・アクセス・ポイント
LFNST(low frequency non-separable transform) 低周波ノン・セパラブル変換
LPS(least probable symbol) 最低確率シンボル
LSB(least significant bit) 最下位ビット
LTRP(long-term reference picture) 長期参照ピクチャ
LMCS(luma mapping with chroma scaling) クロマ・スケーリングによるルマ・マッピング
MIP(matrix-based intra prediction) 行列ベースのイントラ予測
MPS(most probable symbol) 最確シンボル
MSB(most significant bit) 最上位ビット
MTS(multiple transform selection) 多重変換選択
MVP(motion vector prediction) 動きベクトル予測
NAL(network abstraction layer) ネットワーク抽象化レイヤ
OLS(output layer set) 出力レイヤ・セット
OP(operation point) オペレーション・ポイント
OPI(operating point information) オペレーティング・ポイント情報
P(predictive) 予測
PH(picture header) ピクチャ・ヘッダ
POC(picture order count) ピクチャ・オーダー・カウント
PPS(picture parameter set) ピクチャ・パラメータ・セット
PROF(prediction refinement with optical flow) オプティカル・フローによる予測精密化
PT(picture timing) ピクチャ・タイミング
PU(picture unit) ピクチャ・ユニット
QP(quantization parameter) 量子化パラメータ
RADL(random access decodable leading (picture)) ランダム・アクセス復号可能リーディング(ピクチャ)
RASL(random access skipped leading (picture)) ランダム・アクセス・スキップ・リーディング(ピクチャ)
RBSP(raw byte sequence payload) 未処理バイト・シーケンス・ペイロード
RGB(red, green, and blue) レッド,グリーン,ブルー
RPL(reference picture list) 参照ピクチャ・リスト
SAO(sample adaptive offset) サンプル適応オフセット
SAR(sample aspect ratio) サンプル・アスペクト比
SEI(supplemental enhancement information) 補足エンハンスメント情報
SH(slice header) スライス・ヘッダ
SLI(subpicture level information) サブピクチャ・レベル情報
SODB(string of data bits) データ・ビット列
SPS(sequence parameter set) シーケンス・パラメータ・セット
STRP(short-term reference picture) 短期参照ピクチャ
STSA(step-wise temporal sublayer access) ステップ・ワイズ・テンポラル・サブレイヤ・アクセス
TR(truncated rice) トランケーテッド・ライス
VBR(variable bit rate) 可変ビット・レート
VCL(video coding layer) ビデオ・コーディング・レイヤ
VPS(video parameter set) ビデオ・パラメータ・セット
VSEI(versatile supplemental enhancement information)(Rec. ITU-T H.274 | ISO/IEC 23002-7) 多用途補足エンハンスメント情報
VUI(video usability information) ビデオ利用情報
VVC(versatile video coding)(Rec. ITU-T H.266 | ISO/IEC 23090-3) 多用途ビデオ・コーディング
3.1.ビデオ・コーディング規格
ビデオ・コーディング規格は、周知のITU-T及びISO・IEC規格の開発を通じて主に発展している。ITU-TはH.261とH.263を作成し、ISO/IECはMPEG-1とMPEG-4 Visualを作成し、2つの組織は共同してH.262/MPEG-2ビデオとH.264/MPEG-4アドバンスト・ビデオ・コーディング(AVC)とH.265/HEVC規格とを作成した。H.262以来、ビデオ・コーディング規格はハイブリッド・ビデオ・コーディング構造に基づいており、そこでは時間的予測と変換コーディングが使用される。HEVCを越える将来のビデオ・コーディング技術を探求するため、2015年に共同ビデオ探査チーム(Joint Video Exploration Team,JVET)がVCEGとMPEGにより共同で設立された。それ以来、多くの新しい方法がJVETによって採用されており、共同探索モデル(Joint Exploration Model,JEM)と名付けられる参照ソフトウェアに入れられている。多用途ビデオ・コーディング(VVC)プロジェクトが公式にスタートすると、以後JVETは共同ビデオ・エキスパート・チーム(JVET)に改名された。2020年7月1日付の第19回会合においてファイナライズされたVVC規格は、新しいコーディング規格であり、HEVCと比較した場合に50%のビットレート低減を目指している。
メディア・ストリーミング・アプリケーションは、典型的にはIP、TCP、HTTP転送方法に基づいており、典型的にはISOベースのメディア・ファイル・フォーマット(ISOBMFF)のようなファイル・フォーマット依存している。そのようなストリーミング・システムの一つは、HTTP(DASH)上の動的適応ストリーミングである。ISOBMFF及びDASHでビデオ・フォーマットを使用する場合、AVCファイル・フォーマット及びHEVCファイル・フォーマットのようなビデオ・フォーマットに特有のファイル・フォーマット仕様が、ISOBMFFトラック及びDASH表現及びセグメントにおけるビデオ・コンテンツのカプセル化に必要とされるであろう。ビデオ・ビットストリームに関する重要な情報、例えばプロファイル、階層、及びレベル、並びに他の多くは、コンテンツ選択の目的、例えばストリーミング・セッションの開始時の初期化のため及びストリーミング・セッション中のストリーム適応化のための両方に適切なメディア・セグメントの選択のために、ファイル・フォーマット・レベルのメタデータ及び/又はDASHメディア・プレゼンテーション記述(MPD)として公開されることを必要とするであろう。
Claims (15)
- ビジュアル・メディア・データを処理する方法であって、
フォーマット・ルールに従ってビジュアル・メディア・データのビットストリームとビジュアル・メディア・ファイルとの間の変換を実行するステップ
を含み、前記フォーマット・ルールは、前記ビジュアル・メディア・ファイルのシンタックス要素の特徴を指定し、
前記フォーマット・ルールは、レベル識別を表す値を有するシンタックス要素は、サブピクチャ共通グループ・ボックス又はサブピクチャ複数グループ・ボックスのうちの任意の1つ又は双方において8ビットを用いてコーディングされることを指定している、方法。 - 前記フォーマット・ルールは、シンタックス要素であってその値が前記レベル識別を表すもの、の直後の予約ビットの不存在を指定している、請求項1に記載の方法。
- 前記フォーマット・ルールは、シンタックス要素であってその値が前記レベル識別を表すもの、の直後の24ビットは予約ビットであることを指定している、請求項1に記載の方法。
- 前記フォーマット・ルールは、シンタックス要素であってその値が前記レベル識別を表すもの、の直後の8ビットは予約ビットであることを指定している、請求項1に記載の方法。
- 前記フォーマット・ルールは、ビジュアル・メディア・ファイルにおける第1シンタックス要素、第2シンタックス要素、又は第3シンタックス要素セットに関連する特徴を指定し、
前記第1シンタックス要素は、前記ビジュアル・メディア・ファイルにおけるアクティブなトラックの数を示す第1値を有し、
前記第2シンタックス要素は、前記ビジュアル・メディア・ファイルにおけるサブグループ識別子の数を示す第2値を有し、
前記第3シンタックス要素セットの各シンタックス要素は、前記ビジュアル・メディア・ファイルにおけるアクティブなトラックの数を示す第3値を有する、請求項1に記載の方法。 - 前記フォーマット・ルールは、前記ビジュアル・メディア・ファイルのサブピクチャ共通グループ・ボックスにおけるアクティブなトラックの数を示す第1値を有する第1シンタックス要素を指定するために、16ビットが使用されることを指定している、請求項5に記載の方法。
- 前記フォーマット・ルールは、前記ビジュアル・メディア・ファイルのサブピクチャ複数グループ・ボックスにおけるサブグループ識別子の数を示す第2値を有する前記第2シンタックス要素を指定するために、16ビットが使用されることを指定し、
前記フォーマット・ルールは、前記ビジュアル・メディア・ファイルのサブピクチャ複数グループ・ボックスにおけるアクティブなトラックの数を示す第3値を有する前記第3シンタックス要素セットの各シンタックス要素を指定するために、16ビットが使用されることを指定している、請求項5に記載の方法。 - 前記フォーマット・ルールは、アクティブなトラックの数を示す第1値を有する前記第1シンタックス要素の直後の16ビットは予約されており、前記第2シンタックス要素はサブグループ識別子の数を示し、或いはアクティブなトラックの数を示す第3値を有する前記第3シンタックス要素セットの各シンタックス要素は予約されていることを指定している。請求項5に記載の方法。
- 前記フォーマット・ルールは、アクティブなトラックの数を示す前記第1値を有する前記第1シンタックス要素の直後での予約ビットの不存在を指定し、前記第2シンタックス要素はサブグループ識別子の数を示し、或いはアクティブなトラックの数を示す前記第3値を有する前記第3シンタックス要素セットの各シンタックス要素は予約されている、請求項5に記載の方法。
- 前記変換は、前記ビジュアル・メディア・ファイルを生成すること、及び前記フォーマット・ルールに従って前記ビットストリームを前記ビジュアル・メディア・ファイルに保存することを含む、請求項1-9うちの何れか1項に記載の方法。
- 前記変換は、前記ビジュアル・メディア・ファイルを生成することを含み、前記方法は、前記ビジュアル・メディア・ファイルを、非一時的なコンピュータ読み取り可能な記録媒体に保存するステップを更に含む、請求項1-9うちの何れか1項に記載の方法。
- 前記変換は、前記ビットストリームを再構築するために前記フォーマット・ルールに従って前記ビジュアル・メディア・ファイルを分析することを含む、請求項1-9うちの何れか1項に記載の方法。
- 前記ビジュアル・メディア・ファイルは多用途ビデオ・コーディング(VVC)によって処理される、請求項1-12のうちの何れか1項に記載の方法。
- ビジュアル・メディア・データを処理する装置であって、プロセッサと命令を伴う非一時的なメモリとを含み、前記命令は、前記プロセッサによって実行されると、請求項1-13のうちの何れか1項に記載の方法を前記プロセッサに実行させる、装置。
- 請求項1-13のうちの何れか1項に記載の方法をプロセッサに実行させる命令を保存する非一時的なコンピュータ読み取り可能な記憶媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063079892P | 2020-09-17 | 2020-09-17 | |
US63/079892 | 2020-09-17 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022050369A true JP2022050369A (ja) | 2022-03-30 |
JP7209062B2 JP7209062B2 (ja) | 2023-01-19 |
Family
ID=77801577
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021151936A Active JP7268107B2 (ja) | 2020-09-17 | 2021-09-17 | ビジュアル・メディア・データ処理方法 |
JP2021151934A Active JP7268106B2 (ja) | 2020-09-17 | 2021-09-17 | ビジュアル・メディア・データ処理方法、装置、及び記憶媒体 |
JP2021151939A Active JP7209062B2 (ja) | 2020-09-17 | 2021-09-17 | コーディングされたビデオにおけるサブピクチャ・エンティティ・グループ・シグナリング |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021151936A Active JP7268107B2 (ja) | 2020-09-17 | 2021-09-17 | ビジュアル・メディア・データ処理方法 |
JP2021151934A Active JP7268106B2 (ja) | 2020-09-17 | 2021-09-17 | ビジュアル・メディア・データ処理方法、装置、及び記憶媒体 |
Country Status (5)
Country | Link |
---|---|
US (3) | US11902552B2 (ja) |
EP (3) | EP3972275A1 (ja) |
JP (3) | JP7268107B2 (ja) |
KR (3) | KR20220037388A (ja) |
CN (3) | CN114205598A (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7432735B2 (ja) * | 2019-12-26 | 2024-02-16 | バイトダンス インコーポレイテッド | ビデオコーディングにおけるプロファイルティアレベルパラメータセット |
CN114868158A (zh) | 2019-12-26 | 2022-08-05 | 字节跳动有限公司 | 层级视频中的解码图片缓冲区参数的信令通知 |
JP7431330B2 (ja) | 2019-12-26 | 2024-02-14 | バイトダンス インコーポレイテッド | ビデオコーディングにおけるプロファイル、層及びレイヤの指示 |
EP4066387A4 (en) | 2019-12-27 | 2023-02-15 | ByteDance Inc. | SUBPICTURE SIGNALING IN PARAMETER SETS |
EP4070466A4 (en) | 2020-01-09 | 2023-05-10 | ByteDance Inc. | SIGNALING A HIGH-LEVEL SYNTAX DISPLAY |
US11451811B2 (en) * | 2020-04-05 | 2022-09-20 | Tencent America LLC | Method and apparatus for video coding |
US11902552B2 (en) | 2020-09-17 | 2024-02-13 | Lemon Inc. | Decoder configuration record in coded video |
US11792433B2 (en) * | 2020-09-28 | 2023-10-17 | Sharp Kabushiki Kaisha | Systems and methods for signaling profile and level information in video coding |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019072795A1 (en) * | 2017-10-12 | 2019-04-18 | Canon Kabushiki Kaisha | METHOD, DEVICE, AND COMPUTER PROGRAM FOR GENERATING TIMED PARTITIONED MULTIMEDIA DATA |
WO2020146665A1 (en) * | 2019-01-09 | 2020-07-16 | Futurewei Technologies, Inc. | Sub-picture level indicator signaling in video coding |
US20220109861A1 (en) * | 2020-10-07 | 2022-04-07 | Nokia Technologies Oy | Coded Picture with Mixed VCL NAL Unit Type |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9161004B2 (en) | 2012-04-25 | 2015-10-13 | Qualcomm Incorporated | Identifying parameter sets in video files |
US20140301477A1 (en) * | 2013-04-07 | 2014-10-09 | Sharp Laboratories Of America, Inc. | Signaling dpb parameters in vps extension and dpb operation |
EP3026899A4 (en) | 2013-07-22 | 2016-12-28 | Sony Corp | IMAGE PROCESSING DEVICE AND METHOD |
US20150264404A1 (en) | 2014-03-17 | 2015-09-17 | Nokia Technologies Oy | Method and apparatus for video coding and decoding |
EP4020983A1 (en) * | 2014-12-31 | 2022-06-29 | Nokia Technologies Oy | An apparatus, a method and a computer program for video coding and decoding |
US20160373771A1 (en) * | 2015-06-18 | 2016-12-22 | Qualcomm Incorporated | Design of tracks and operation point signaling in layered hevc file format |
US10798422B2 (en) * | 2015-10-20 | 2020-10-06 | Intel Corporation | Method and system of video coding with post-processing indication |
US10419768B2 (en) | 2016-03-30 | 2019-09-17 | Qualcomm Incorporated | Tile grouping in HEVC and L-HEVC file formats |
CN110506421B (zh) | 2017-03-20 | 2023-11-07 | 夏普株式会社 | 用于以媒体应用程序格式发信号通知可伸缩视频的***和方法 |
WO2019234608A1 (en) | 2018-06-05 | 2019-12-12 | Beijing Bytedance Network Technology Co., Ltd. | Partition tree with more than four sub-blocks |
WO2020044254A1 (en) | 2018-08-28 | 2020-03-05 | Beijing Bytedance Network Technology Co., Ltd. | Binarization of partitioning related to extended quadtree |
EP3854106B1 (en) * | 2018-09-18 | 2023-10-04 | Nokia Technologies Oy | Method and apparatus for non-binary profile constraint signaling for video coding |
CA3127848C (en) | 2019-02-02 | 2024-06-11 | Beijing Bytedance Network Technology Co., Ltd. | Buffer management for intra block copy in video coding |
US11190793B2 (en) * | 2019-07-09 | 2021-11-30 | Qualcomm Incorporated | Memory constraint for adaptation parameter sets for video coding |
US11375223B2 (en) * | 2019-09-20 | 2022-06-28 | Tencent America LLC | Method for signaling output layer set with sub-picture |
US11778215B2 (en) | 2020-02-28 | 2023-10-03 | Qualcomm Incorporated | Coding output layer set data and conformance window data of high level syntax for video coding |
US11611778B2 (en) * | 2020-05-20 | 2023-03-21 | Sharp Kabushiki Kaisha | Systems and methods for signaling general constraint information in video coding |
US11902552B2 (en) | 2020-09-17 | 2024-02-13 | Lemon Inc. | Decoder configuration record in coded video |
-
2021
- 2021-09-15 US US17/476,134 patent/US11902552B2/en active Active
- 2021-09-15 US US17/476,178 patent/US20220086497A1/en active Pending
- 2021-09-15 US US17/476,081 patent/US20220086385A1/en active Pending
- 2021-09-16 EP EP21197205.4A patent/EP3972275A1/en active Pending
- 2021-09-16 EP EP21197127.0A patent/EP3972265A1/en active Pending
- 2021-09-16 EP EP21197202.1A patent/EP3972274A1/en active Pending
- 2021-09-17 KR KR1020210124589A patent/KR20220037388A/ko unknown
- 2021-09-17 CN CN202111090572.XA patent/CN114205598A/zh active Pending
- 2021-09-17 CN CN202111090725.0A patent/CN114205601A/zh active Pending
- 2021-09-17 KR KR1020210124542A patent/KR20220037387A/ko unknown
- 2021-09-17 CN CN202111090723.1A patent/CN114205600A/zh active Pending
- 2021-09-17 KR KR1020210124889A patent/KR20220037396A/ko unknown
- 2021-09-17 JP JP2021151936A patent/JP7268107B2/ja active Active
- 2021-09-17 JP JP2021151934A patent/JP7268106B2/ja active Active
- 2021-09-17 JP JP2021151939A patent/JP7209062B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019072795A1 (en) * | 2017-10-12 | 2019-04-18 | Canon Kabushiki Kaisha | METHOD, DEVICE, AND COMPUTER PROGRAM FOR GENERATING TIMED PARTITIONED MULTIMEDIA DATA |
WO2020146665A1 (en) * | 2019-01-09 | 2020-07-16 | Futurewei Technologies, Inc. | Sub-picture level indicator signaling in video coding |
US20220109861A1 (en) * | 2020-10-07 | 2022-04-07 | Nokia Technologies Oy | Coded Picture with Mixed VCL NAL Unit Type |
Non-Patent Citations (2)
Title |
---|
"Information technology - Coding of audio-visual objects - Part 15: Carriage of network abstraction l", ISO/IEC 14496-15:2019 DAM 2, JPN7022005722, 28 December 2020 (2020-12-28), pages 37 - 38, ISSN: 0004943229 * |
"SERIES H: AUDIOVISUAL AND MULTIMEDIA SYSTEMS: Versatile video coding", RECOMMENDATION ITU-T H.266, JPN6022052152, 31 August 2020 (2020-08-31), pages 55 - 139, ISSN: 0004943228 * |
Also Published As
Publication number | Publication date |
---|---|
JP7268106B2 (ja) | 2023-05-02 |
JP7268107B2 (ja) | 2023-05-02 |
JP7209062B2 (ja) | 2023-01-19 |
US20220086473A1 (en) | 2022-03-17 |
EP3972274A1 (en) | 2022-03-23 |
KR20220037387A (ko) | 2022-03-24 |
JP2022050368A (ja) | 2022-03-30 |
EP3972265A1 (en) | 2022-03-23 |
US20220086497A1 (en) | 2022-03-17 |
CN114205600A (zh) | 2022-03-18 |
CN114205598A (zh) | 2022-03-18 |
US20220086385A1 (en) | 2022-03-17 |
US11902552B2 (en) | 2024-02-13 |
JP2022050367A (ja) | 2022-03-30 |
KR20220037388A (ko) | 2022-03-24 |
CN114205601A (zh) | 2022-03-18 |
KR20220037396A (ko) | 2022-03-24 |
EP3972275A1 (en) | 2022-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7268107B2 (ja) | ビジュアル・メディア・データ処理方法 | |
KR20220043909A (ko) | 다층 비디오 스트림들을 위한 추가 향상 정보 | |
EP3972277A1 (en) | Versatile video coding track coding | |
US11831921B2 (en) | Video operating points record syntax and semantics | |
JP7307777B2 (ja) | ビデオコーディングにおける適応パラメータセットの格納 | |
WO2022068839A1 (en) | Signalling of auxiliary information | |
KR20220142957A (ko) | 서브픽처 엔티티 그룹에 대한 레벨 표시자 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221121 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230106 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7209062 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |