JP7303266B2 - 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 - Google Patents
効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 Download PDFInfo
- Publication number
- JP7303266B2 JP7303266B2 JP2021150344A JP2021150344A JP7303266B2 JP 7303266 B2 JP7303266 B2 JP 7303266B2 JP 2021150344 A JP2021150344 A JP 2021150344A JP 2021150344 A JP2021150344 A JP 2021150344A JP 7303266 B2 JP7303266 B2 JP 7303266B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- sub
- region
- data stream
- regions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Color Television Systems (AREA)
- Television Signal Processing For Recording (AREA)
Description
化パラメータ設定の第1のセットを調整するための置換パラメータからなる情報を有するビデオデータストリームを提供することにより達成される。元のビデオデータストリームのペイロード部分は、ペイロード部分に含まれるインデックスによってインデックスされた符号化パラメータ設定の第1のセットを使用して、その中でパラメータ化され符号化されたビデオの画像を有する。それに加えてまたは代替として、補助強化情報に関して同様の手段が実現可能である。従って、リダイレクトおよび/または調整を実行することによって、ビデオデータストリームを削減ビデオデータストリームに削減し、符号化パラメータ設定の第2のセットがペイロード部分のインデックスによってインデックス付けされ、したがって有効符号化パラメータ設定セットになり、所定の外側の画像の領域を参照するペイロード部分の一部を除去し、画像の周囲の代わりに所定のサブ領域の周囲から測定された位置を示すようにペイロード部分のスライスアドレスのような位置表示を、変更するようにすることが可能である。あるいは、所定のサブ領域の外側を参照するペイロード部分の部分を含まないように既に削減されたデータストリームは、パラメータおよび/または補助拡張情報のフライ調整(fly adjustment)によって変更されてもよい。
・アスペクト比調整ストリーミング:クライアント側の表示特性に応じて、符号化されたビデオのアスペクト比をサーバ側でライブ調整する。
・デコードの複雑さの調整:レベル制限によって所与のエンコードされたビデオビットストリームをデコードできないローコスト/ローテク装置は、ビデオの空間サブセットに対応する可能性がある。
・与えられたビデオビットストリームの空間サブセットを適合ビデオビットストリームに簡単に変換するために、ビデオに適合ポイントは存在しない。
・エンコーダが、与えられた識別子を持つタイルセットが、適合ビデオビットストリームに簡単に変換されるという保証を伝える手段は存在しない。
1.TMCTSに基づくサブ画像抽出プロセスの定義を介して、符号化されたビデオシーケンスから空間サブセット、すなわち、単一のTMCTSに基づくビデオビットストリームを抽出する手段
2.抽出されたサブ画像ビデオシーケンスの正しいパラメータセット値および(任意で)SEI情報を伝えて識別する手段
3.ビデオビットストリームおよびTMCTSに関するビットストリーム制約を可能にする特定のサブ領域抽出の保証を伝えるエンコーダについての手段
エンコーダ80は、例えば、適切なレート歪み最適化機能の最適化を使用してこの符号化を実行してもよい。この符号化の結果として、ペイロード部分18はセット20aをインデックス付けする。さらに、エンコーダ80はセット20bを生成する。この目的のために、エンコーダ80は、例えば、サブ領域22のサイズおよび占有されたタイルセットに対応するように、セット20a内のそれらの値から画像サイズ26およびタイル構造38を適合させることができる。それを超えると、エンコーダ80は、図5自体に関して上述したように削減処理を実質的に実行し、ビデオデコーダ82などのデコーダが、符号化パラメータ設定の第2のセット20b内のこのように計算されたバッファタイミング46を使用して符号化された画像バッファを正しく管理できるようにバッファタイミング46を計算する。
次のパラメータセットの態様は、空間サブセットを抽出するときに調整が必要である。
・VPS:単一層符号化に関する規範的情報
・SPS:
・レベル情報
・画像サイズ
・切取りまたは適合ウィンドウ情報
・バッファリングとタイミング情報(すなわちHRD情報)
・潜在的に、motion_vectors_over_pic_boundaries_flag、min_spatial_segmentation_idcなどのVUI(Video Usability Information;ビデオユーザビリティ情報)アイテムの追加の可能性
・PPS:
・空間的タイル情報、すなわち水平・垂直方向のタイルの量とサイズに関するタイル情報
・シグナリング1A:エンコーダは、各TMCTSについて、付加的な未使用の(すなわち、全く起動していない)VPS、SPSおよびPPSを帯域内(すなわち、それぞれのNALユニットとして)に送信し、補助拡張情報(SEI)メッセージにおいてTMCTSへのマッピングを提供することができる。
num_extraction_information_sets_minus1は、サブ画像抽出処理において適用されるべき所与のSignaling1A SEIに含まれる情報セットの数を示す。
num_vps_in_message_minus1は、サブ画像抽出処理で使用されるべき所与のSignaling1B SEIにおけるvpsシンタックス構造の数を示す。
次のSEIのHRD情報は、抽出プロセスが元のVPS内のシンタックス要素の連続するブロックをSEIからのシンタックス要素のそれぞれの連続するブロックで置換えることができるように構成されている。
元のビデオビットストリーム内の次のSEIメッセージのいずれかが発生すると、TMCTS抽出後の不整合性を回避するための調整メカニズムが必要になることがある。
・HRD関連バッファリング期間、画像タイミングおよびデコードユニット情報SEI
・パンスキャンSEI
・* FramePackingArrangement * SEI(フレームパックアレンジメント* SEI)
・DecodedPictureHash SEI(復号化画像ハッシュSEI)
・TMCTS SEI
・シグナリング2A:エンコーダは、すべてのTMCTSのコンテナスタイルのSEI内のTMCTSに関連して、上記SEIの適切な変位を提供することができる。そのようなシグナリングは、シグナリング1Cの実施形態と組合せることができ、図11に示されている。換言すれば、上述した説明に加えて、または代わりに、ビデオ14を表すビデオデータストリーム10は、ビデオの画像12がその中に符号化されるペイロード部分18と、ペイロード部分18に一致する補助拡張情報を示す補助拡張情報メッセージまたはより正確には、ビデオの画像12がペイロード部分18に符号化される方法を含むことができ、さらには画像12の所定のサブ領域22の表示52を含む情報50および補助増強情報メッセージを変位するための置換補助拡張情報メッセージを含み、置換補助拡張情報メッセージは、ペイロード部分18の部分70を除去68しビデオデータストリームと比較して修正された削減ビデオデータストリーム62を所定のサブ領域22の外側の画像12の領域を参照して、ペイロード部分18内の位置表示32を変更78するように選択して、前記交換補足エンハンスメント情報メッセージは、前記ペイロード部18のうち、前記所定のサブエリア22の外側の画像12の領域を参照する68個の部分70を削除し、前記画像12の代わりに前記所定のサブエリア22の円周から測定された方法で位置を示すように、前記ペイロード部18の78個の位置表示32を変更することによって、前記ビデオデータストリームと比較して修正された縮小ビデオデータストリーム62が選択されることと 置換補助拡張情報メッセージが縮小ペイロード部分に一致する置換補助拡張情報を示すように、画像の所定のサブエリア22を示すサブエリア固有画像86がエンコードされている縮小ペイロード部分を有している。 すなわち、サブエリア固有ピクチャ86が縮小ペイロード部分18に符号化される態様である。パラメータ設定器80aは、上述のパラメータ生成に加えて、または代替として、置換SEIメッセージによる潜在的な置換の対象である補助拡張情報メッセージを生成する。置換は、上述したリダイレクトおよび/または調整に加えて、または代替として、ネットワーク装置60によって実行される。
tile_sets_max_temporal_id_plus1 minus1は、配列applied_mcts_id [i]の要素と等しいmcts_idを有するタイルセットについて、サブ画像抽出プロセスで抽出されるべき最大時間レベルを示す。
・ビットストリーム
・目標MCTS識別子MCTSIdTarget。
・目標レイヤ識別子リストlayerIdListTarget。
・tiles_enabled_flagが1に等しい。
・num_tile_columns_minus1> 0 || num_rows_minus1> 0。
・MCTSIdTargetに等しいmcts_id [i]を持つTMCTS SEIメッセージが存在し、出力されるべきすべての画像に関連付けられる。
・MCTSIdTargetに等しいmcts_id [i]を持つTMCTSがTMCTS SEIに存在する。
・mcts_id [i]がMCTSIdTargetに等しいTMCTSについての適切なレベルは、TMCTS SEIシンタックス要素mcts_tier_level_idc_present_flag [i]、mcts_tier_idc [i]、mcts_level_idc [i]または、上記のシグナリング変数1Aまたは1Bの一方のいずれかにより示されるべきである。
・TMCTSのHRD情報は、シグナリング変数1A、1Bまたは1Cの1つを介してビットストリームに存在する。
・MCTSIdTargetに等しいmcts_id [i]を持つTMCTS内のすべての矩形は、輝度サンプルで同じ高さまたは同じ幅、またはその両方を持つ。
・MCTSIdTargetに等しいmcts_id [i]に関連付けられたタイルセットに存在しないすべてのタイルNALUを除去する。
・シグナリング1Xに応じてパラメータセットを置換/調整する。
・残りのNALUスライスヘッダを次のように調整する。
○ 必要に応じてpps_idを調整する。
・シグナリング2Aの存在下で、SEIを除去するか、置き換える。
従って、本発明のさらなる部分として、付加的な情報を考慮に入れた階層化された符号化ビデオビットストリームのために、上記と同様の方法の抽出プロセスが実現される。
・以下からなる多次元識別子ベクトル
・対象レイヤセットlayerSetIdTarget
・識別子layerSetIdTargetとともに設定されたレイヤ内の最上位レイヤについて少なくとも目標レイヤTMCTS識別子MCTSIdTarget_Lx
・以下に対応する目標ILCTS識別子LTCTSIdTarget_Lx_refLy
・ビットストリーム
単一層の場合に定義されているものに加えて:
・MCTSIdTarget_LBに等しいmcts_id [i]に関連付けられたタイルセットtsBを有する各被参照レイヤBについて:tsBを構成するレイヤBのタイルは、ilcts_id [i] ILCTSIdTarget_Lx_refLBと示される関連参照タイルセットに完全に含まれる。
レイヤxごとに:mcts id [i]識別子MCTS Id Target_Lxを持つタイルセット内に存在しないすべてのタイルNALユニットを除去する。
MCTS抽出情報セットSEIメッセージは、以下に指定されるようなサブビットストリームMCTS抽出を実行するための補助情報を提供し、動き制限付きタイルセット、すなわち全体画像領域のフラグメント84を形成するタイルのセットからHEVC適合ビットストリームを導出する。この情報は、抽出情報セットが適用される動き制約付きタイルセットの識別子をそれぞれ含む多数の抽出情報セットからなる。各抽出情報セットは、サブビットストリームMCTS抽出プロセス中に使用される変位ビデオパラメータセット、シーケンスパラメータセット、および画像パラメータセットのRBSPバイトを含む。
画像のセットassociatedPicSetを、MCTS抽出情報セットSEIメッセージ(これを含む)を含むアクセスユニットからの画像とし、以下のいずれかの最初のものまでをデコード順に含める。
-MCTS抽出情報セットSEIメッセージを含む、デコード順で次のアクセスユニット。
-NoRaslOutputFlagが1であるデコード順で次のIRAP画像。
-NoClrasOutputFlagが1であるデコード順で次のIRAPアクセスユニット。
MCTS抽出情報セットSEIメッセージの範囲は、picturesPicSetのセットである。
MCT抽出情報セットタイルセットSEIメッセージが、associatedPicSet内の任意の画像について存在すると、時間的に動きが制約されたタイルセットSEIメッセージが、associatedPicSetの最初の画像について復号化順序で存在し、associatedPicSetの他の画像についても存在してもよい。時間的に動きが制約されたタイルセットSEIメッセージは、associatedPicSet内のすべての画像についてmcts_identifer []と等しいmcts_id []を持たなければならない。
MCTS抽出情報セットタイルセットSEIメッセージがassociatedPicSet内の任意の画像に対して存在する場合、MCTS抽出情報セットSEIメッセージは、associatedPicSetの最初の画像に対して復号化順序で存在しなければならず、associatedPicSetの他の画像に対しても存在する。
MCTS抽出情報セットタイルセットSEIメッセージがassociatedPicSet内の任意の画像に対して存在する場合、MCTS抽出情報セットSEIメッセージは、復号化順序でassociatedPicSetの最初の画像について存在しなければならず、associatedPicSetの他の画像についても存在してもよい。
associatedPicSet内の任意の画像についてアクティブである任意のPPSについて、tiles_enabled_flagが0に等しい場合、MCTS抽出情報セットSEIメッセージはassociatedPicSet内のいかなる画像についても存在してはならない。
associatedPicSet内の任意の画像についてアクティブであるすべてのPPSが、シンタックス要素num_tile_columns_minus1、num_tile_rows_minus1、uniform_spacing_flag、column_width_minus1 [i]およびrow_height_minus1 [i]の同じ値を有さない限り、MCTS抽出情報セットSEIメッセージはassociatedPicSet内のいかなる画像についても存在してはならない。
注1-この制約は1に等しいtiles_fixed_structure_flagに関連する制約に類似しており、MCTS抽出情報セットSEIメッセージが存在する場合(これは必須ではないが)、tiles_fixed_structure_flagが1に等しいことが望ましい。
associatedPicSetの画像に対して複数のMCTS抽出情報セットSEIメッセージが存在する場合、それらは同じ内容を含むものとする。
タイルセットtileSetAに属するタイルを含むNALユニットは、タイルセットtileSetAに属さないタイルを含んではならない。
各アクセスユニットにおけるMCTS抽出情報セットSEIメッセージの数は、5を超えてはならない。
num_extraction_info_sets_minus1 plus 1は、mcts抽出プロセスに適用されるMCTS抽出情報セットSEIメッセージに含まれる抽出情報セットの数を示す。num_extraction_info_sets_minus1[i]の値は、0~232-2の範囲内でなければならない。
i番目の抽出情報セットには、iに等しいMCTS抽出情報セット識別子の値が割り当てられる。
num_associated_tile_set_identifiers_minus1 [i] plus 1は、i番目の抽出情報セット内のタイルセットのmcts_idの値の数を示す。num_extraction_info_sets_minus1 [i]の値は、0~232-2の範囲内でなければならない。
mcts_identifier [i] [j]は、i番目の抽出情報セットに関連付けられたmcts_identifier [i] [j]に等しいmcts_idでj番目のタイルセットを識別する。mcts_identifier [i] [j]の値は、0~232-2の範囲内でなければならない。
num_vps_in_extraction_info_set_minus1 [i] plus 1は、i番目の抽出情報セット内の変位ビデオパラメータセットの数を示す。num_vps_in_extraction_info_set_minus1 [i]の値は、0~15の範囲内でなければならない。
vps_rbsp_data_length [i] [j]は、i番目の抽出情報セットに設定された次のj番目の置換ビデオパラメータのバイト数vps_rbsp_data_bytes [i] [j] [k]を示す。
num_sps_in_extraction_info_set_minus1 [i] plus 1は、i番目の抽出情報セット内の置換シーケンスパラメータセットの数を示す。num_sps_in_extraction_info_set_minus1 [i]の値は、0~15の範囲内でなければならない。
sps_rbsp_data_length [i] [j]は、i番目の抽出情報セットに設定された次のj番目の置換シーケンスパラメータであるsps_rbsp_data_bytes [i] [j] [k]のバイト数を示す。
num_pps_in_extraction_info_set_minus1 [i] plus 1は、i番目の抽出情報セット内の置換画像パラメータセットの数を示す。num_pps_in_extraction_info_set_minus1 [i]の値は、0~63の範囲内でなければならない。
pps_nuh_temporal_id_plus1 [i] [j]は、i番目の抽出情報セットについてのj番目の変位画像パラメータセットについてpps_rbsp_data_bytes [i] [j] []で指定されたPPS RBSPで指定されたPPSデータに関連付けられたPPS NALユニットを生成するための一時識別子を指定する。
pps_rbsp_data_length [i] [j]は、i番目の抽出情報セットに設定された次のj番目の置換画像パラメータセットのバイト数pps_rbsp_data_bytes [i] [j] [k]を示す。
mcts_alignment_bit_equal_to_zeroは0に等しくなければならない。
vps_rbsp_data_bytes [i] [j] [k]は、i番目の抽出情報セット内の次のj番目の置換ビデオパラメータセットのRBSPのk番目のバイトを含む。
sps_rbsp_data_bytes [i] [j] [k]は、i番目の抽出情報セットに設定された次のj番目の置換シーケンスパラメータのRBSPのk番目のバイトを含む。
pps_rbsp_data_bytes [i] [j] [k]は、i番目の抽出情報セットに設定された次のj番目の変位画像パラメータのRBSPのk番目のバイトを含む。
サブビットストリームMCTS抽出プロセスは、以下のように適用される。
ビットストリームinBitstream、目標MCTS識別子mctsIdTarget、目標MCTS抽出情報セット識別子mctsEISIdTarget、および目標最高TemporalIdをmctsTIdTargetをサブビットストリームMCTS抽出プロセスへの入力とする。
サブビットストリームMCTS抽出プロセスの出力は、サブビットストリームoutBitstreamである。
入力ビットストリームについてのビットストリーム適合の要件は、ビットストリームとともにこの節で規定されているプロセスの出力である任意の出力サブビットストリームが、適合するビットストリームであることである。
出力サブビットストリームは、以下のように導出される。
-ビットストリームoutBitstreamは、ビットストリームinBitstreamと同一に設定される。
-ausWithVPS、ausWithSPSおよびausWithPPSのリストは、VPS_NUT、SPS_NUTおよびPPS_NUTタイプのVCL NALユニットを含むoutBitstream内のすべてのアクセスユニットで構成されるように設定される。
-0に等しいnuh_layer_idを有し、ネストされていないSEIメッセージを含むすべてのSEI NALユニットを除去する。
注2 - 「スマート」ビットストリーム抽出器は、サブビットストリームに適用可能なSEIメッセージが元のビットストリームのmcts_extraction_info_nesting()にネストされたSEIメッセージとして存在していれば、抽出されたサブビットストリームに適切な非ネストSEIメッセージを含めることができる。
-outBitstreamからすべてのタイプのNALユニットを除去する:
-mcts_id [i]がmctsIdTargetに等しいタイルセットに属していないタイルを含むVCL NALユニット。
-タイプVPS_NUT、SPS_NUT、またはPPS_NUTを有する非VCL NALユニット。
-mctsElSldTarget番目のMCTS抽出情報セット、つまり0からnum_vps_in_extraction_info_minus1 [mctsEISIdTarget]の範囲のjのすべての値についてのvps_rbsp_data_bytes [mctsEISIdTarget] [j] []におけるVPS RBSPデータから生成されたタイプVPS_NUTを有するoutBitstream num_vps_in_extraction_info_minus1 [mctsEISIdTarget] plus 1 NALユニット内のリストausWithVPS内の全てのアクセスユニットに挿入する。生成された各VPS_NUTに対して、nuh_layer_idは0に等しく設定され、nuh_temporal_id_plus1は1に等しく設定される。
-mctsEISIdTarget番目のMCTS抽出情報セット、つまり0からnum_sps_in_extraction_info_minus1 [mctsEISIdTarget]の範囲のjのすべての値についてのsps_rbsp_data_bytes [mctsEISIdTarget] [j] []におけるSPS RBSPデータから生成されたタイプSPS_NUTを有するoutBitstream num_sps_in_extraction_info_minus1 [mctsEISIdTarget] plus 1 NALユニット内のリストausWithSPS内の全てのアクセスユニットに挿入する。生成された各SPS_NUTに対して、nuh_layer_idは0に等しく設定され、nuh_temporal_id_plus1は1に等しく設定される。
-mctsEISIdTarget番目のMCTS抽出情報セット、つまり、pps_nuh_temporal_id_plus1 [mctsEISIdTarget] [j]がmctsTIdTarget以下の値を含む範囲0からnum_pps_in_extraction_info_minus1 [mctsEISIdTarget]の範囲のjのすべての値についてのpps_rbsp_data_bytes [mctsEISIdTarget] [j] []におけるPPS RBSPデータから生成されたタイプPPS_NUTを有するoutBitstream NALユニット内のリストausWithPPS内の全てのアクセスユニットに挿入する。生成された各PPS_NUTに対して、nuh_layer_idは0に等しく設定され、nuh_temporal_id_plus1は、0からnum_pps_in_extraction_info_minus1 [mctsEISIdTarget]の範囲内のjのすべての値に対して、pps_nuh_temporal_id_plus1 [mctsEISIdTarget] [j]に等しく設定され、pps_nuh_temporal_id_plus1 [mctsEISIdTarget] [j]はmctsTIdTarget以下である。
-mctsTIdTargetより大きいTemporalIdを持つすべてのNALユニットをoutBitstreamから除去する。
-outBitstreamの残りのVCL NALユニットごとに、次のようにスライスセグメントヘッダを調整する。
-各アクセスユニット内の最初のVCL NALユニットについて、first_slice_segment_in_pic_flagの値を1に等しく設定し、それ以外の場合は0に等しく設定する。
-pps_pic_parameter_set_idがslice_pic_parameter_set_idと等しいPPSで定義されたタイル設定に従って、slice_segment_addressの値を設定する。
MCTS抽出情報セットSEIメッセージのセマンティクスで指定されたサブビットストリームMCTS抽出プロセスでは、MCTS抽出情報入れ子SEIメッセージに含まれる入れ子SEIメッセージを使用して、MCTS抽出情報入れ子SEIメッセージを含むアクセスユニット内の入れ子になっていないSEIメッセージを置換えることができる。
0に等しいall_tile_sets_flagは、mcts_identifierリストがmcts_identifier [i]で構成されていることを示す。1に等しいall_tile_sets_flagは、リストmcts_identifier [i]が、現在のアクセスユニットに存在するtemporal_motion_constrained_tile_sets SEIメッセージのmcts_id []のすべての値からなることを示す。
mcts_identifier [i]は、次の入れ子にされたSEIメッセージに関連付けられたmcts_identifier [i]に等しいmcts_idを持つタイルセットを示す。mcts_identifier [i]の値は、0~232-2の範囲内でなければならない。
num_seis_in_mcts_extraction_seis_minus1 plus 1は、次の入れ子にされたSEIメッセージの数を示す。
mcts_nesting_zero_bitは0に等しくなければならない。
unsigned int(32)proj_reg_width [i];
unsigned int(32)proj_reg_height [i];
unsigned int(32)proj_reg_top [i];
unsigned int(32)proj_reg_left [i];
unsigned int(8)transform_type [i];
unsigned int(32)packed_reg_width [i];
unsigned int(32)packed_reg_height [i];
unsigned int(32)packed_reg_top [i];
unsigned int(32)packed_reg_left [i];
]
むしろ、ここで論じる質問は、画像317のサブ領域Aを符号化するための符号化依存性が、イントラまたは空間コーディング依存性が参照画像が画像Bの1つであり画像317の中の以前に符号化/復号化された画像に関する時間的符号化依存性であるかに関する限り、セクションBに到達しないように制限されるか、または制限されないかどうかである。どちらの選択肢にもメリットがある。画像317のサブ領域Aを符号化するときに画像Bのサブ領域Bおよび画像317のサブ領域境界にも従うと、すなわちサブ領域Aについて符号化依存性が制限されてサブ領域Bに到達しない場合、サブ領域AはセクションBとは独立した方法で符号化され続け、したがって、上述のようにデータストリーム300が抽出可能または削減可能であるサブ領域を形成する。同じことが、サブ領域固有のランダムアクセス画像Aの直後に続く画像のサブ領域Bのコーディングに関して同じ状況を考えるとき、サブ領域Bにも当てはまる。サブ領域Aおよび/またはサブ領域Bなどの固有のサブ領域の削減性がそれほど重要でない場合、直前のコーディング依存性が、直接先行しているセクション単位のランダムアクセス画像は、サブ領域固有のランダムアクセスポイントを形成することが可能であることに関してサブ領域に到達する場合には、符号化効率に関して有益であることができる。その場合、例えば、先に進んだ議論のサブ領域Aのような他のサブ領域は、もはや削減することができないであろうが、ビデオエンコーダ316が例えばこれらの画像または画像Bのいずれかのサブ領域Bに基づいて画像317のサブ領域Aの一部を時間的に予測するように、サブ領域Bの境界を横切るように動きベクトルを選択することによる冗長性の利用に関してより少ない制限を有するので、コーディング効率は、増加する。例えば、データストリーム300は、以下のことが行われた場合、もはや領域Aに関しては削減できないであろう。画像317は、画像317および画像Bのうちの参照画像の第2画像サブ領域Bを少なくとも部分的に参照する時間的予測を使用して、第2画像サブ領域Bの外側の画像領域A内のビデオデータストリーム300に符号化される。すなわち、図22の場合、画像317の時間的予測符号化領域A、すなわちAだけでなく、Bも参照するために、完全な画像領域が利用可能となる。復号順序に関して、画像Aに続く画像317'、すなわち、Aと図22に示されていないタイプBの後続の画像との間の画像317'は、ビデオデータストリーム300内にエンコードされるとともに、画像Aと画像317'の間の復号化順序に関して先行する参照画像の第2の画像サブ領域Bを参照しないように、第2の画像サブ領域Bの外側の画像領域A内の時間的予測を制限する。すなわち、図22の場合、単に領域Aは画像317'の時間的予測符号化領域Aによって参照されるために利用可能である。サブ領域Bについても同様である。画像Bはサブ領域B内のサブ領域Bに付着し、画像BのBの符号化はサブ領域Aに加えてAも使用可能である。その場合、ストリーム300は、もはやサブ領域Bに対して削減できないであろう。
Claims (5)
- 画像をデータストリームに符号化するためのエンコーダであって、
前記エンコーダは前記データストリームに対し、
前記画像(204)の少なくとも1つの既定のサブ領域(214)のセットについて、
前記少なくとも1つの既定のサブ領域のセットの目標画像領域(216)への非変位コピーに対する、前記少なくとも1つの既定のサブ領域のセットの前記目標画像領域(216)内での変位(218)を示す変位情報(206)
をもたらすように構成され、
前記変位情報は、
前記画像の前記少なくとも1つの既定のサブ領域のセット内の前記既定のサブ領域のカウント(220)と、
前記目標画像領域のサイズを定義するサイズパラメータ(222)と、
前記変位情報によって示すことができる、目標画像領域(216)内での前記少なくとも1つの既定のサブ領域のセットの前記変位(218)によって、
前記目標画像領域内での前記既定のサブ領域の空間相対配置に対する前記画像内での前記既定のサブ領域の空間相対配置の変更、および
各既定のサブ領域の前記画像と前記目標画像領域との間でのスケーリング
が可能になるように、前記画像の前記少なくとも1つの既定のサブ領域のセットの既定のサブ領域のそれぞれについて、
前記目標画像領域における前記各既定のサブ領域の幅、高さ、一番上のサンプル行および最も左のサンプル列、および
前記画像内の各既定の領域のさらなる幅、さらなる高さ、さらなる一番上のサンプル行およびさらなる最も左のサンプル列と
を含む、
エンコーダ。
- 前記目標画像領域(216)は、パノラマシーンの立方体状投影を表す、請求項1に記載のエンコーダ。
- 画像をデータストリームに符号化するための方法であって、前記方法は前記データストリームに対し、前記画像(204)の少なくとも1つの既定のサブ領域(214)のセットについて、前記少なくとも1つの既定のサブ領域のセットの目標画像領域(216)への非変位コピーに対する、前記少なくとも1つの既定のサブ領域のセットの前記目標画像領域(216)内での変位(218)を示す変位情報(206)をもたらすステップを含み、
前記変位情報は、
前記画像の前記少なくとも1つの既定のサブ領域のセット内の前記既定のサブ領域のカウント(220)と、
前記目標画像領域のサイズを定義するサイズパラメータ(222)と、
前記変位情報によって示すことができる、目標画像領域(216)内での前記少なくとも1つの既定のサブ領域のセットの前記変位(218)によって、
前記目標画像領域内での前記既定のサブ領域の空間相対配置に対する前記画像内での前記既定のサブ領域の空間相対配置の変更、および
各既定のサブ領域の前記画像と前記目標画像領域との間でのスケーリング
が可能になるように、前記画像の前記少なくとも1つの既定のサブ領域のセットの既定のサブ領域のそれぞれについて、
前記目標画像領域における前記各既定のサブ領域の幅、高さ、一番上のサンプル行および最も左のサンプル列、および
前記画像内の各既定の領域のさらなる幅、さらなる高さ、さらなる一番上のサンプル行およびさらなる最も左のサンプル列と
を含む、
方法。
- 前記目標画像領域(216)は、パノラマシーンの立方体状投影を表す、請求項3に記載の方法。
- コンピュータ上で動作する時に、請求項3に記載の方法を実行するためのプログラムコードを有するコンピュータプログラムを格納している、コンピュータ可読記憶媒体。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16154947 | 2016-02-09 | ||
EP16154947.2 | 2016-02-09 | ||
JP2018541649A JP6784767B2 (ja) | 2016-02-09 | 2017-02-08 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2020178471A JP7303170B2 (ja) | 2016-02-09 | 2020-10-23 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020178471A Division JP7303170B2 (ja) | 2016-02-09 | 2020-10-23 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022008411A JP2022008411A (ja) | 2022-01-13 |
JP7303266B2 true JP7303266B2 (ja) | 2023-07-04 |
Family
ID=55361354
Family Applications (11)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018541649A Active JP6784767B2 (ja) | 2016-02-09 | 2017-02-08 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2020178471A Active JP7303170B2 (ja) | 2016-02-09 | 2020-10-23 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150328A Active JP7152574B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150331A Active JP7295186B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150333A Active JP7152575B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150338A Active JP7410101B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150330A Active JP7093454B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150335A Active JP7093455B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150344A Active JP7303266B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150325A Active JP7093453B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2023215659A Pending JP2024038008A (ja) | 2016-02-09 | 2023-12-21 | 効果的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
Family Applications Before (8)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018541649A Active JP6784767B2 (ja) | 2016-02-09 | 2017-02-08 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2020178471A Active JP7303170B2 (ja) | 2016-02-09 | 2020-10-23 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150328A Active JP7152574B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150331A Active JP7295186B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150333A Active JP7152575B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150338A Active JP7410101B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150330A Active JP7093454B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2021150335A Active JP7093455B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021150325A Active JP7093453B2 (ja) | 2016-02-09 | 2021-09-15 | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
JP2023215659A Pending JP2024038008A (ja) | 2016-02-09 | 2023-12-21 | 効果的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
Country Status (8)
Country | Link |
---|---|
US (13) | US10743007B2 (ja) |
EP (1) | EP3414907A1 (ja) |
JP (11) | JP6784767B2 (ja) |
KR (14) | KR102653128B1 (ja) |
CN (11) | CN113347442B (ja) |
CA (3) | CA3197905A1 (ja) |
TW (11) | TWI762260B (ja) |
WO (1) | WO2017137444A1 (ja) |
Families Citing this family (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9264508B2 (en) | 2011-08-19 | 2016-02-16 | Time Warner Cable Enterprises Llc | Apparatus and methods for reduced switching delays in a content distribution network |
CN105519115A (zh) | 2013-09-10 | 2016-04-20 | 株式会社Kt | 用于对可扩展视频信号进行编码/解码的方法及装置 |
WO2015060614A1 (ko) * | 2013-10-22 | 2015-04-30 | 주식회사 케이티 | 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치 |
CN105659598A (zh) * | 2013-10-22 | 2016-06-08 | 株式会社Kt | 用于对多层视频信号进行编码/解码的方法和装置 |
WO2015064990A1 (ko) * | 2013-10-29 | 2015-05-07 | 주식회사 케이티 | 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치 |
US20170026659A1 (en) * | 2015-10-13 | 2017-01-26 | Mediatek Inc. | Partial Decoding For Arbitrary View Angle And Line Buffer Reduction For Virtual Reality Video |
TWI762260B (zh) | 2016-02-09 | 2022-04-21 | 弗勞恩霍夫爾協會 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
FI20165114A (fi) * | 2016-02-17 | 2017-08-18 | Nokia Technologies Oy | Laitteisto, menetelmä ja tietokoneohjelma videokoodausta ja videokoodauksen purkua varten |
EP3249928A1 (en) * | 2016-05-23 | 2017-11-29 | Thomson Licensing | Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices |
US10652594B2 (en) | 2016-07-07 | 2020-05-12 | Time Warner Cable Enterprises Llc | Apparatus and methods for presentation of key frames in encrypted content |
WO2018043905A1 (ko) * | 2016-08-29 | 2018-03-08 | 엘지전자 주식회사 | 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치 |
EP3518534B1 (en) * | 2016-09-26 | 2023-05-17 | Sony Group Corporation | Encoding device, encoding method, decoding device, decoding method, transmission device, and reception device |
JP7018447B2 (ja) * | 2017-01-05 | 2022-02-10 | シャープ株式会社 | 仮想現実アプリケーション用の、動き制約タイルセットのシグナリングのためのシステム及び方法 |
JPWO2018135321A1 (ja) * | 2017-01-19 | 2019-11-07 | ソニー株式会社 | 画像処理装置および方法 |
US10897612B2 (en) | 2017-03-03 | 2021-01-19 | Qualcomm Incorporated | Coding identifiers for motion constrained tile sets |
WO2018182144A1 (ko) * | 2017-03-29 | 2018-10-04 | 엘지전자 주식회사 | 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치 |
US10958948B2 (en) * | 2017-08-29 | 2021-03-23 | Charter Communications Operating, Llc | Apparatus and methods for latency reduction in digital content switching operations |
CN109963176B (zh) * | 2017-12-26 | 2021-12-07 | 中兴通讯股份有限公司 | 视频码流处理方法、装置、网络设备和可读存储介质 |
US10939142B2 (en) | 2018-02-27 | 2021-03-02 | Charter Communications Operating, Llc | Apparatus and methods for content storage, distribution and security within a content distribution network |
WO2019191709A1 (en) * | 2018-03-30 | 2019-10-03 | Hulu, LLC | Reuse of block tree pattern in video compression |
EP3811624A1 (en) * | 2018-06-21 | 2021-04-28 | Telefonaktiebolaget LM Ericsson (publ) | Tile shuffling for 360 degree video decoding |
WO2019243539A1 (en) | 2018-06-21 | 2019-12-26 | Telefonaktiebolaget Lm Ericsson (Publ) | Tile partitions with sub-tiles in video coding |
EP3850841A1 (en) * | 2018-09-14 | 2021-07-21 | Vid Scale, Inc. | Methods and apparatus for flexible grid regions |
KR102629907B1 (ko) | 2018-10-02 | 2024-01-30 | 텔레호낙티에볼라게트 엘엠 에릭슨(피유비엘) | 타일 그룹 id에 기초한 화상들의 인코딩 및 디코딩 |
US10880354B2 (en) | 2018-11-28 | 2020-12-29 | Netflix, Inc. | Techniques for encoding a media title while constraining quality variations |
US11252434B2 (en) | 2018-12-31 | 2022-02-15 | Tencent America LLC | Method for wrap-around padding for omnidirectional media coding |
BR112021013512A2 (pt) * | 2019-01-09 | 2021-09-14 | Huawei Technologies Co., Ltd. | Codificador de vídeo, decodificador de vídeo e métodos correspondentes |
TWI799682B (zh) * | 2019-02-01 | 2023-04-21 | 弗勞恩霍夫爾協會 | 允許逐子圖像或逐區域隨機存取之視訊編碼解碼器及使用它之視訊合成技術 |
CN113785584A (zh) * | 2019-03-01 | 2021-12-10 | 弗劳恩霍夫应用研究促进协会 | 假想参考解码器 |
WO2020177702A1 (en) | 2019-03-04 | 2020-09-10 | Beijing Bytedance Network Technology Co., Ltd. | Two-level signaling of filtering information in video processing |
WO2020220249A1 (zh) * | 2019-04-30 | 2020-11-05 | 深圳市大疆创新科技有限公司 | 一种数据编码、数据解码方法、设备及存储介质 |
EP3991412A4 (en) * | 2019-06-25 | 2023-06-28 | INTEL Corporation | Sub-pictures and sub-picture sets with level derivation |
CN114073073B (zh) | 2019-07-08 | 2023-06-06 | 华为技术有限公司 | 一种支持混合nal单元的编解码方法和编解码器 |
EP3997868A4 (en) | 2019-08-10 | 2023-02-22 | Beijing Bytedance Network Technology Co., Ltd. | BUFFER MANAGEMENT DURING SUBPICTURE DECODING |
CN112532569B (zh) * | 2019-09-19 | 2022-05-31 | 澜至电子科技(成都)有限公司 | 视频码流保护装置、方法以及存储介质 |
CN114556952A (zh) | 2019-10-02 | 2022-05-27 | 北京字节跳动网络技术有限公司 | 包括子图片的视频比特流中的条带级信令通知 |
CN114631317B (zh) | 2019-10-18 | 2024-03-15 | 北京字节跳动网络技术有限公司 | 子图片的参数集信令中的语法约束 |
GB2590632B (en) * | 2019-12-20 | 2023-07-26 | Canon Kk | Video coding and decoding |
US11716474B2 (en) | 2020-01-02 | 2023-08-01 | Samsung Electronics Co., Ltd. | Storage of EVC decoder configuration information |
CN113382283B (zh) * | 2020-03-09 | 2023-07-04 | 上海哔哩哔哩科技有限公司 | 视频片头识别方法及*** |
CN115918077A (zh) * | 2020-06-09 | 2023-04-04 | 字节跳动有限公司 | 子图片子比特流提取过程中补充增强信息的处理 |
EP4287382A1 (en) | 2021-10-27 | 2023-12-06 | LG Energy Solution, Ltd. | Battery pack and energy storage system and vehicle comprising battery pack |
TWI828091B (zh) * | 2022-03-23 | 2024-01-01 | 中華電信股份有限公司 | 全景影像傳輸系統、方法以及電腦程式產品 |
CN115826630B (zh) * | 2023-02-20 | 2023-05-12 | 中国机械总院集团江苏分院有限公司 | 物料盒队列位置交换的控制方法和装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011120305A (ja) | 2011-03-10 | 2011-06-16 | Mega Chips Corp | 画像符号化装置及び画像復号化装置 |
WO2015059194A1 (en) | 2013-10-22 | 2015-04-30 | Canon Kabushiki Kaisha | Method, device, and computer program for encapsulating scalable partitioned timed media data |
Family Cites Families (75)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6141034A (en) | 1995-12-15 | 2000-10-31 | Immersive Media Co. | Immersive imaging method and apparatus |
DE69816185T2 (de) | 1997-06-12 | 2004-04-15 | Hewlett-Packard Co. (N.D.Ges.D.Staates Delaware), Palo Alto | Bildverarbeitungsverfahren und -vorrichtung |
JPH11346370A (ja) * | 1998-06-02 | 1999-12-14 | Matsushita Electric Ind Co Ltd | 符号化方法、符合化装置、復号方法、復号装置、及び記録媒体 |
IL159537A0 (en) | 2001-06-28 | 2004-06-01 | Omnivee Inc | Method and apparatus for control and processing of video images |
US7058239B2 (en) | 2001-10-29 | 2006-06-06 | Eyesee360, Inc. | System and method for panoramic imaging |
FI114679B (fi) * | 2002-04-29 | 2004-11-30 | Nokia Corp | Satunnaisaloituspisteet videokoodauksessa |
US7295717B2 (en) | 2002-10-16 | 2007-11-13 | Ecole polytechnique fédérale de Lausanne (EPFL) | Synthesis of superposition images for watches, valuable articles and publicity |
JP4575370B2 (ja) * | 2003-05-02 | 2010-11-04 | エヌエックスピー ビー ヴィ | ビデオアーチファクトを低減するためのバイアスされた動きベクトル補間 |
US7586924B2 (en) * | 2004-02-27 | 2009-09-08 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for coding an information signal into a data stream, converting the data stream and decoding the data stream |
US7588314B1 (en) | 2004-10-12 | 2009-09-15 | Lev Nisnevich | Image forming device and method using intermittent motion across a work surface |
CN101662683B (zh) * | 2005-04-14 | 2012-05-30 | 汤姆森特许公司 | 空间可缩放视频解码方法和空间可缩放视频解码器 |
US7474848B2 (en) | 2005-05-05 | 2009-01-06 | Hewlett-Packard Development Company, L.P. | Method for achieving correct exposure of a panoramic photograph |
KR20060122663A (ko) * | 2005-05-26 | 2006-11-30 | 엘지전자 주식회사 | 영상신호의 엔코딩 및 디코딩에서의 픽처 정보를 전송하고이를 이용하는 방법 |
EP1915860A2 (en) | 2005-08-12 | 2008-04-30 | Nxp B.V. | Method and system for digital image stabilization |
US7809211B2 (en) | 2005-11-17 | 2010-10-05 | Upek, Inc. | Image normalization for computed image construction |
JP4801428B2 (ja) | 2005-11-30 | 2011-10-26 | 株式会社リコー | 画像形成装置及び画像形成方法 |
CN101636761B (zh) * | 2007-03-23 | 2013-07-24 | 汤姆森特许公司 | 修改编码的比特流 |
DK2512136T3 (en) | 2007-04-12 | 2016-08-22 | Thomson Licensing | Tiling in video coding and decoding |
WO2008139708A1 (ja) * | 2007-04-27 | 2008-11-20 | Panasonic Corporation | 画像復号装置、画像復号システム、画像復号方法、及び集積回路 |
JP4723543B2 (ja) * | 2007-08-10 | 2011-07-13 | 株式会社リコー | 画像処理装置、画像処理方法、プログラム及び記憶媒体 |
JP2010049313A (ja) * | 2008-08-19 | 2010-03-04 | Sony Corp | 画像処理装置、画像処理方法、プログラム |
US8855203B2 (en) | 2009-04-08 | 2014-10-07 | Sharp Kabushiki Kaisha | Video encoding apparatus and video decoding apparatus |
US9357219B2 (en) | 2009-04-08 | 2016-05-31 | Sharp Kabushiki Kaisha | Video encoding apparatus and video decoding apparatus |
US8745677B2 (en) * | 2009-06-12 | 2014-06-03 | Cygnus Broadband, Inc. | Systems and methods for prioritization of data for intelligent discard in a communication network |
JP5718453B2 (ja) * | 2010-04-13 | 2015-05-13 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | 復号化方法 |
HUE026534T2 (en) | 2010-07-15 | 2016-06-28 | Ge Video Compression Llc | Hybrid video encoding to support intermediate view synthesis |
KR20120088488A (ko) | 2011-01-31 | 2012-08-08 | 한국전자통신연구원 | 시간적 움직임 벡터 저장 방법 및 그 장치 |
US20120195356A1 (en) * | 2011-01-31 | 2012-08-02 | Apple Inc. | Resource usage control for real time video encoding |
WO2012142510A1 (en) * | 2011-04-15 | 2012-10-18 | Skyfire Labs, Inc. | Real-time video detector |
CN102209241B (zh) * | 2011-05-25 | 2013-07-03 | 杭州华三通信技术有限公司 | 一种基于多子图的视频编解码方法及其装置 |
JP5729237B2 (ja) * | 2011-09-26 | 2015-06-03 | カシオ計算機株式会社 | 画像処理装置、画像処理方法、及びプログラム |
CN102333221B (zh) * | 2011-10-21 | 2013-09-04 | 北京大学 | 一种全景式背景预测的视频编解码方法 |
US20130114694A1 (en) * | 2011-11-08 | 2013-05-09 | Qualcomm Incorporated | Parameter set groups for coded video data |
US9516308B2 (en) * | 2012-04-27 | 2016-12-06 | Qualcomm Incorporated | Parameter set updates in video coding |
US9736476B2 (en) * | 2012-04-27 | 2017-08-15 | Qualcomm Incorporated | Full random access from clean random access pictures in video coding |
JP6422011B2 (ja) * | 2012-05-11 | 2018-11-14 | サン パテント トラスト | 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置 |
CN115442626A (zh) * | 2012-06-29 | 2022-12-06 | Ge视频压缩有限责任公司 | 视频数据流、编码器、编码视频内容的方法以及解码器 |
KR20140010823A (ko) | 2012-07-17 | 2014-01-27 | 삼성전자주식회사 | 영상 데이터 스케일링 방법 및 영상 디스플레이 장치 |
US20140086328A1 (en) * | 2012-09-25 | 2014-03-27 | Qualcomm Incorporated | Scalable video coding in hevc |
KR101812615B1 (ko) * | 2012-09-28 | 2017-12-27 | 노키아 테크놀로지스 오와이 | 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램 |
CN116708767A (zh) * | 2013-01-04 | 2023-09-05 | Ge视频压缩有限责任公司 | 高效可伸缩编码概念 |
US9749627B2 (en) | 2013-04-08 | 2017-08-29 | Microsoft Technology Licensing, Llc | Control data for motion-constrained tile set |
US10250902B2 (en) | 2013-05-24 | 2019-04-02 | Kt Corporation | Method for inducing motion information in multilayer structure and apparatus using same |
US9832378B2 (en) | 2013-06-06 | 2017-11-28 | Apple Inc. | Exposure mapping and dynamic thresholding for blending of multiple images using floating exposure |
JP6208993B2 (ja) | 2013-06-28 | 2017-10-04 | ルネサスエレクトロニクス株式会社 | 画像復号装置及び画像復号装置の復号処理方法 |
US9451254B2 (en) | 2013-07-19 | 2016-09-20 | Qualcomm Incorporated | Disabling intra prediction filtering |
EP3058747B1 (en) | 2013-10-15 | 2019-11-20 | Nokia Technologies Oy | Scalable video encoding and decoding using syntax element |
US9648348B2 (en) | 2013-10-23 | 2017-05-09 | Qualcomm Incorporated | Multi-layer video file format designs |
CN106416250B (zh) | 2013-12-02 | 2020-12-04 | 诺基亚技术有限公司 | 视频编码和解码 |
EP3090549A1 (en) | 2014-01-02 | 2016-11-09 | VID SCALE, Inc. | Methods and systems for scalable video coding with mixed interlace and progressive content |
KR101851479B1 (ko) * | 2014-01-03 | 2018-04-23 | 노키아 테크놀로지스 오와이 | 파라미터 세트 코딩 |
EP2894857A1 (en) * | 2014-01-10 | 2015-07-15 | Thomson Licensing | Method and apparatus for encoding image data and method and apparatus for decoding image data |
US20150264404A1 (en) | 2014-03-17 | 2015-09-17 | Nokia Technologies Oy | Method and apparatus for video coding and decoding |
US9986154B2 (en) | 2014-05-21 | 2018-05-29 | Here Global B.V. | Developing a panoramic image |
WO2015182342A1 (ja) | 2014-05-26 | 2015-12-03 | シャープ株式会社 | 画像復号装置、および、画像符号化装置 |
WO2015199040A1 (ja) | 2014-06-24 | 2015-12-30 | シャープ株式会社 | Dmm予測部、画像復号装置、および画像符号化装置 |
US10694192B2 (en) | 2014-06-27 | 2020-06-23 | Koninklijke Kpn N.V. | HEVC-tiled video streaming |
JP6440747B2 (ja) | 2014-06-27 | 2018-12-19 | コニンクリーケ・ケイピーエヌ・ナムローゼ・フェンノートシャップ | Hevcでタイル化されたビデオ・ストリームに基づく関心領域の決定 |
US9570113B2 (en) | 2014-07-03 | 2017-02-14 | Gopro, Inc. | Automatic generation of video and directional audio from spherical content |
US10204658B2 (en) * | 2014-07-14 | 2019-02-12 | Sony Interactive Entertainment Inc. | System and method for use in playing back panorama video content |
US9918105B2 (en) | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
US9854237B2 (en) | 2014-10-14 | 2017-12-26 | Qualcomm Incorporated | AMVP and merge candidate list derivation for intra BC and inter prediction unification |
JP2018050091A (ja) | 2015-02-02 | 2018-03-29 | シャープ株式会社 | 画像復号装置、画像符号化装置および予測ベクトル導出装置 |
EP3598760A1 (en) | 2015-06-11 | 2020-01-22 | Intellectual Discovery Co., Ltd. | Method for encoding and decoding image using adaptive deblocking filtering, and apparatus therfor |
CN108141582B (zh) | 2015-08-07 | 2022-06-03 | Lg 电子株式会社 | 视频编译***中的帧间预测方法和装置 |
US10282814B2 (en) | 2016-01-07 | 2019-05-07 | Mediatek Inc. | Method and apparatus of image formation and compression of cubic images for 360 degree panorama display |
TWI762260B (zh) | 2016-02-09 | 2022-04-21 | 弗勞恩霍夫爾協會 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
US10515429B2 (en) | 2016-07-01 | 2019-12-24 | Digimarc Corporation | Image-based pose determination |
WO2018174387A1 (ko) | 2017-03-20 | 2018-09-27 | 엘지전자 주식회사 | 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치 |
CN106993187B (zh) | 2017-04-07 | 2019-09-06 | 珠海全志科技股份有限公司 | 一种可变帧率的编码方法及装置 |
CN110495177B (zh) | 2017-04-13 | 2023-10-20 | 松下电器(美国)知识产权公司 | 解码装置、解码方法及存储介质 |
EP3649788A4 (en) | 2017-07-07 | 2020-12-30 | Sharp Kabushiki Kaisha | SIGNALING SYSTEMS AND METHODS OF A PROJECTED REGION FOR VIRTUAL REALITY APPLICATIONS |
WO2019050426A1 (en) | 2017-09-05 | 2019-03-14 | Huawei Technologies Co., Ltd. | METHOD FOR QUICKLY ADAPTING BLOCKS FOR COLLABORATIVE FILTERING IN LOSS VIDEO CODECS |
US20200275129A1 (en) | 2017-09-29 | 2020-08-27 | Sharp Kabushiki Kaisha | Systems and methods for signaling information associated with a constituent picture |
US20190297326A1 (en) | 2018-03-21 | 2019-09-26 | Nvidia Corporation | Video prediction using spatially displaced convolution |
-
2017
- 2017-02-08 TW TW110111381A patent/TWI762260B/zh active
- 2017-02-08 EP EP17703436.0A patent/EP3414907A1/en active Pending
- 2017-02-08 KR KR1020237022832A patent/KR102653128B1/ko active IP Right Grant
- 2017-02-08 TW TW110111378A patent/TWI747775B/zh active
- 2017-02-08 JP JP2018541649A patent/JP6784767B2/ja active Active
- 2017-02-08 TW TW110111382A patent/TWI750072B/zh active
- 2017-02-08 CA CA3197905A patent/CA3197905A1/en active Pending
- 2017-02-08 TW TW110106146A patent/TWI793532B/zh active
- 2017-02-08 KR KR1020217037643A patent/KR102373046B1/ko active IP Right Grant
- 2017-02-08 KR KR1020217004266A patent/KR102332006B1/ko active IP Right Grant
- 2017-02-08 CN CN202110492957.2A patent/CN113347442B/zh active Active
- 2017-02-08 CA CA3167144A patent/CA3167144C/en active Active
- 2017-02-08 CN CN202110492958.7A patent/CN113347443B/zh active Active
- 2017-02-08 KR KR1020187025989A patent/KR102256855B1/ko active IP Right Grant
- 2017-02-08 CN CN202110493007.1A patent/CN113347446B/zh active Active
- 2017-02-08 KR KR1020247009837A patent/KR20240044535A/ko active Search and Examination
- 2017-02-08 CN CN202110492874.3A patent/CN113347441B/zh active Active
- 2017-02-08 CN CN202110493096.XA patent/CN113347447B/zh active Active
- 2017-02-08 KR KR1020217008461A patent/KR102331887B1/ko active IP Right Grant
- 2017-02-08 TW TW110106149A patent/TWI762207B/zh active
- 2017-02-08 KR KR1020217004270A patent/KR102301352B1/ko active IP Right Grant
- 2017-02-08 CN CN201780024264.2A patent/CN109076247B/zh active Active
- 2017-02-08 CN CN202110492988.8A patent/CN113347444B/zh active Active
- 2017-02-08 KR KR1020227020781A patent/KR102553812B1/ko active Application Filing
- 2017-02-08 TW TW110106147A patent/TWI762206B/zh active
- 2017-02-08 CN CN202110493099.3A patent/CN113347448A/zh active Pending
- 2017-02-08 CA CA3013657A patent/CA3013657C/en active Active
- 2017-02-08 KR KR1020217037662A patent/KR102373078B1/ko active IP Right Grant
- 2017-02-08 TW TW112101522A patent/TW202344052A/zh unknown
- 2017-02-08 WO PCT/EP2017/052769 patent/WO2017137444A1/en active Application Filing
- 2017-02-08 KR KR1020217038076A patent/KR102433227B1/ko active IP Right Grant
- 2017-02-08 CN CN202110492873.9A patent/CN113347440B/zh active Active
- 2017-02-08 KR KR1020217025013A patent/KR102385126B1/ko active IP Right Grant
- 2017-02-08 KR KR1020217037646A patent/KR102373060B1/ko active IP Right Grant
- 2017-02-08 TW TW108117500A patent/TWI736895B/zh active
- 2017-02-08 CN CN202110492831.5A patent/CN113347439B/zh active Active
- 2017-02-08 KR KR1020217008468A patent/KR102301362B1/ko active IP Right Grant
- 2017-02-08 CN CN202110493006.7A patent/CN113347445B/zh active Active
- 2017-02-08 TW TW106104095A patent/TWI669946B/zh active
- 2017-02-08 KR KR1020217037762A patent/KR102373013B1/ko active IP Right Grant
- 2017-02-08 TW TW110106151A patent/TWI793533B/zh active
- 2017-02-08 TW TW110111379A patent/TWI762259B/zh active
-
2018
- 2018-08-29 US US16/116,680 patent/US10743007B2/en active Active
- 2018-08-30 US US16/118,146 patent/US10958921B2/en active Active
-
2020
- 2020-10-23 JP JP2020178471A patent/JP7303170B2/ja active Active
- 2020-12-15 US US17/122,753 patent/US11770546B2/en active Active
-
2021
- 2021-03-23 US US17/210,442 patent/US11089315B2/en active Active
- 2021-03-23 US US17/210,435 patent/US11089314B2/en active Active
- 2021-03-23 US US17/210,450 patent/US11190785B2/en active Active
- 2021-03-23 US US17/210,456 patent/US11146804B2/en active Active
- 2021-03-24 US US17/211,719 patent/US11122282B2/en active Active
- 2021-03-24 US US17/211,729 patent/US11212542B2/en active Active
- 2021-03-24 US US17/211,703 patent/US11184626B2/en active Active
- 2021-03-24 US US17/211,748 patent/US11172213B2/en active Active
- 2021-03-24 US US17/211,744 patent/US11128877B2/en active Active
- 2021-09-15 JP JP2021150328A patent/JP7152574B2/ja active Active
- 2021-09-15 JP JP2021150331A patent/JP7295186B2/ja active Active
- 2021-09-15 JP JP2021150333A patent/JP7152575B2/ja active Active
- 2021-09-15 JP JP2021150338A patent/JP7410101B2/ja active Active
- 2021-09-15 JP JP2021150330A patent/JP7093454B2/ja active Active
- 2021-09-15 JP JP2021150335A patent/JP7093455B2/ja active Active
- 2021-09-15 JP JP2021150344A patent/JP7303266B2/ja active Active
- 2021-09-15 JP JP2021150325A patent/JP7093453B2/ja active Active
-
2023
- 2023-07-26 US US18/359,202 patent/US20230412824A1/en active Pending
- 2023-12-21 JP JP2023215659A patent/JP2024038008A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011120305A (ja) | 2011-03-10 | 2011-06-16 | Mega Chips Corp | 画像符号化装置及び画像復号化装置 |
WO2015059194A1 (en) | 2013-10-22 | 2015-04-30 | Canon Kabushiki Kaisha | Method, device, and computer program for encapsulating scalable partitioned timed media data |
Non-Patent Citations (2)
Title |
---|
AUYEUNG, Cheung,HLS: Non-Significant Slice Segments with Tiles for Single Layer HEVC Extensions,JCTVC-N0269 (version 2),ITU,2013年07月25日,pp.1-4,JCTVC-N0269_r1.docx |
WU, Yongjun et al.,Motion-Constrained Tile Sets SEI Message,JCTVC-M0235 (version 3),,ITU,2013年04月25日,pp.1-4,JCTVC-M0235-v3.doc |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7303266B2 (ja) | 効率的削減または効率的ランダムアクセスを可能にする画像/ビデオデータストリームについての概念 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211015 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211029 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230622 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7303266 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |