TW202344052A - 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 - Google Patents
用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 Download PDFInfo
- Publication number
- TW202344052A TW202344052A TW112101522A TW112101522A TW202344052A TW 202344052 A TW202344052 A TW 202344052A TW 112101522 A TW112101522 A TW 112101522A TW 112101522 A TW112101522 A TW 112101522A TW 202344052 A TW202344052 A TW 202344052A
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- data stream
- region
- sub
- video data
- Prior art date
Links
- 238000000034 method Methods 0.000 claims abstract description 102
- 238000004590 computer program Methods 0.000 claims description 11
- 238000013507 mapping Methods 0.000 claims description 11
- 238000005192 partition Methods 0.000 claims description 9
- 238000006073 displacement reaction Methods 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 238000003786 synthesis reaction Methods 0.000 claims 1
- 230000002829 reductive effect Effects 0.000 abstract description 136
- 230000002123 temporal effect Effects 0.000 abstract description 70
- 230000000153 supplemental effect Effects 0.000 abstract description 50
- 230000009467 reduction Effects 0.000 abstract description 18
- 230000005540 biological transmission Effects 0.000 abstract description 9
- 230000000694 effects Effects 0.000 abstract description 4
- 238000013139 quantization Methods 0.000 abstract description 3
- 239000013589 supplement Substances 0.000 abstract description 2
- 238000000605 extraction Methods 0.000 description 91
- 230000011664 signaling Effects 0.000 description 63
- 239000010410 layer Substances 0.000 description 31
- 239000000872 buffer Substances 0.000 description 28
- 238000010586 diagram Methods 0.000 description 19
- 238000012545 processing Methods 0.000 description 16
- 239000013598 vector Substances 0.000 description 14
- 239000000284 extract Substances 0.000 description 11
- 239000003638 chemical reducing agent Substances 0.000 description 10
- 230000000670 limiting effect Effects 0.000 description 10
- 238000005259 measurement Methods 0.000 description 10
- 230000008859 change Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 8
- 238000011144 upstream manufacturing Methods 0.000 description 8
- 230000008901 benefit Effects 0.000 description 7
- 230000007246 mechanism Effects 0.000 description 7
- 238000011156 evaluation Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 230000007717 exclusion Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 239000002356 single layer Substances 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 3
- 230000003139 buffering effect Effects 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000011229 interlayer Substances 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- FMYKJLXRRQTBOR-UBFHEZILSA-N (2s)-2-acetamido-4-methyl-n-[4-methyl-1-oxo-1-[[(2s)-1-oxohexan-2-yl]amino]pentan-2-yl]pentanamide Chemical group CCCC[C@@H](C=O)NC(=O)C(CC(C)C)NC(=O)[C@H](CC(C)C)NC(C)=O FMYKJLXRRQTBOR-UBFHEZILSA-N 0.000 description 2
- 241000238876 Acari Species 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000012447 hatching Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000008707 rearrangement Effects 0.000 description 2
- 230000001502 supplementing effect Effects 0.000 description 2
- 108091026890 Coding region Proteins 0.000 description 1
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 241001247287 Pentalinon luteum Species 0.000 description 1
- 108010076504 Protein Sorting Signals Proteins 0.000 description 1
- 238000012952 Resampling Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Color Television Systems (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本發明係關於一種視訊資料串流，其以使得將該縮減引起經縮減視訊資料串流之圖像限制至該原始視訊資料串流之該等圖像之僅一預定子區的一方式，及以使得可避免諸如再量化之轉碼且維持該經縮減視訊資料串流相對於下伏於該原始視訊資料串流之該編解碼器之一符合性的一方式可縮減地呈現。此藉由為該視訊資料串流提供資訊來達成，該資訊包含對該預定子區之一指示，及替換索引，其用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定之一第二集合，及/或替換參數，其用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定之一第二集合。更有效地呈現圖像內容之一傳輸，原因在於該圖像內容並不需要以一預定方式來成形或定序。類似程序可應用於補充增強資訊。亦描述該等參數及/或一已經縮減資料串流之補充增強資訊的調整。根據一另一態樣，藉由為該視訊資料串流提供隨機存取點之兩個集合來降低由隨機存取點引起之一視訊資料串流中的位元速率峰值的負面效果：藉由至少在一第一圖像子區內暫時中止時間預測將一或多個圖像之一第一集合編碼成該視訊資料串流以便形成一或多個第一隨機存取點之一集合之一集合，及藉由在不同於該第一圖像子區之一第二圖像子區內暫時中止時間預測將一或多個圖像之第二集合編碼成該視訊資料串流以便形成一或多個第二隨機存取點之一集合。
Description
本申請案係關於視訊/圖像寫碼，且特定言之係關於一種允許此類資料串流之高效縮減的技術、一種允許此類資料串流之更容易處置之技術及/或允許對視訊資料串流進行更高效隨機存取之技術。
存在許多允許視訊資料串流之可縮放性而無需轉碼(亦即，在解碼及編碼之情況下不需要依序效能)的視訊編解碼器。此類可縮放視訊資料串流之實例為就例如時間解析度、空間解析度或信雜比而言藉由僅省去各別可縮放視訊資料串流之增強層中之一些而可縮放的資料串流。然而，直至目前為止，就場景剖切而言不存在允許計算上非複雜可縮放性的視訊編解碼器。在HEVC中，亦存在或已提議用於將HEVC資料串流限制於圖像子區之技術，但其在計算上亦為複雜的。
此外，取決於應用，待編碼成資料串流之圖像內容可呈可在通常所提供之矩形圖像區域內並未有效地寫碼的形式。舉例而言，可以使得投影目標(亦即，全景場景在圖像區域上之佔據區)可為非矩形的且甚至非凸面之方式將全景圖像內容投影至二維平面上，從而形成圖像區域。在彼情況下，圖像/視訊資料之更有效寫碼應為有利的。
另外，以引起相當大的位元速率峰值之方式將隨機存取點提供於現有視訊資料串流中。為減少由此等位元速率峰值產生之負面效果，可考慮減少此等隨機存取點之出現之時間粒度。然而，此增加用於隨機存取此類視訊資料串流之平均持續時間，且相應地在以更有效方式解決此問題方面具有技術將為有利的。
因此，本發明之一目標為解決上文所概述之問題。根據本申請案，此藉由獨立請求項之標的物來達成。
根據本申請案之第一態樣，以使得縮減引起經縮減視訊資料串流之圖像限制至原始視訊資料串流之圖像之僅一預定子區之方式及以使得可避免諸如再量化之轉碼及維持經減少的視訊資料串流相對於下伏於原始視訊資料串流之編解碼器之符合性的方式，可縮減地呈現視訊資料串流。此藉由為該視訊資料串流提供資訊來達成，該資訊包含對該預定子區之一指示，及替換索引，其用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定之一第二集合，及/或替換參數，其用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定之一第二集合。原始視訊資料串流之酬載部分具有在其中精編碼之使用由藉由酬載部分組成之索引來索引之寫碼參數設定之第一集合參數化之視訊之圖像。另外或替代地，就補充增強資訊而言類似量測係可行的。因此，可行的係，藉由執行重定向及/或調整將視訊資料串流縮減至經縮減視訊資料串流，使得寫碼參數設定之第二集合由酬載部分的索引索引，且因此變為有效寫碼參數設定集，移除酬載部分的指代在預定子區外部之圖像之區域之部分及改變諸如酬載部分中之圖塊位址之位置指示以指示自預定子區之圓周而非圖像之圓周量測的一位置。替代地，已縮減以免包含指代預定子區外部之酬載部分之部分的資料串流可藉由參數及/或補充增強資訊之運行調整來修改。
根據本申請案之另一態樣，更有效地呈現圖像內容之傳輸，原因在於圖像內容並不需要以預定方式來成形或定序，諸如以使得通常由基礎編解碼器支援之矩形圖像區域被填滿的方式。確切而言，具有在其中經編碼之圖像之資料串流經提供包含移位資訊，該移位資訊指示圖像之至少一個預定子區域之集合在目標圖像之區域內相對於未經失真或一對一或嵌入目標圖像之區域之疊合複製的移位。此類移位資訊之提供(例如)適用於在投影為(例如)非矩形之情況下在圖像內輸送全景場景之投影。此移位資訊在由於資料串流縮減圖像內容損失其在經縮減的視訊資料串流之較小圖像內傳達之適合性之情況下(諸如，在所關注的全景視圖部分在跨越預測之過渡區邊界或類似者之經縮減的視訊資料串流內傳輸的情況下)亦為有效的。
根據本申請案之另一態樣，藉由為視訊資料串流提供隨機存取點之兩個集合來降低由隨機存取點引起之視訊資料串流中之位元速率峰值之負面效果：藉由至少在第一圖像子區內暫時中止時間預測將一或多個圖像之第一集合編碼成視訊資料串流以便形成一或多個第一隨機存取點之集合之集合，及藉由在不同於第一圖像子區之第二圖像子區內暫時中止時間預測將一或多個圖像之第二集合編碼成視訊資料串流以便形成一或多個第二隨機存取點之集合。以此方式，可行的係，解碼器尋求隨機存取或恢復視訊資料串流之解碼以選擇轉而可能暫時地分佈的第一及第二隨機存取點中之一者，且允許在第二隨機存取點的情況下關於第二圖像子區及就第一隨機存取點而言關於至少第一圖像子區的至少一隨機存取。
本申請案之實施方式係關於本申請案之上文所識別態樣。為提供相關於本申請案之第一態樣(其係關於視訊資料串流之子區提取/縮減)的先前技術，可引起此類需要之應用的實例及滿足此需要之問題經描述，且在下文中藉由例示性地指代HEVC來推動其克服。
可在HEVC中使用時間運動約束圖像塊集合(TMCTS) SEI訊息來發信空間子集(亦即，圖像塊之集合)。定義於此類訊息中之圖像塊集合具有「框間預測過程受限制，使得將各所識別圖像塊集合外部無樣本值及在使用所識別圖像塊集合外部之一或多個樣本值導出之部分樣本位置處無樣本值用於所識別圖像塊集合內之任何樣本之框間預測」的特性。換言之，可獨立於並不與相同層中之相同TMCTS相關聯之樣本解碼TMCTS之樣本。TMCTS涵蓋如圖A中所說明使用矩形900之一或多個圖像塊之一或多個矩形接頭。在該圖中，由使用者查看之所關注區域900涵蓋兩種不相交影像修補程式。
TMCTS SEI訊息之精確語法在圖B中給定以供參考。
存在許多應用，其中其有益於產生獨立地視訊位元串流之可解碼矩形空間子集(亦即，所關注區域(RoI))而無諸如視訊轉碼之重處理的負擔。此等應用包含但不限於：
‧ 全景視訊流式傳輸：僅經由頭戴式顯示器向終端使用者顯示廣角視訊(例如，360°視角)之特定空間區。
‧ 縱橫比調整之流式傳輸：根據用戶端側上之顯示器特性在伺服器側上即時調整經寫碼視訊之縱橫比。
‧ 解碼複雜度調整：歸因於層級限制，並不能夠解碼給定經編碼視訊位元串流之較低成本/較低技術裝置可潛在地處理視訊之空間子集。
在到目前為止描述的用於上文例示性應用之清單的目前先進技術的情況下出現許多問題。
● 不存在使視訊位元串流之空間子集之HRD參數(亦即，緩衝/時序資訊)可用於系統層的方法。
‧ 在視訊中不存在符合性點以便平凡地將給定視訊位元串流之空間子集轉化成符合視訊位元串流。
‧ 不存在用於編碼器輸送可將具有給定識別符之圖像塊集合平凡地轉化為符合視訊位元串流之保證的方法。
對所列舉問題給出解決方案，所有上文實例應用可以標準符合性方法來實現。預期將視訊寫碼層內之此能力定義為對於應用及系統層至關重要的符合性點。
HEVC說明書已包括用於可縮減經寫碼視訊位元串流之時間解析度或層之量(亦即，減少空間解析度、信號保真度或視圖之數目)之子位元串流的提取的方法。
本發明提供用於所識別問題之解決方案，特定言之：
1. 用於經由基於TMCTS之子圖像提取程序之定義自經寫碼視訊序列子圖像提取空間子集(亦即，基於單一TMCTS之視訊位元串流)的方法
2. 輸送且識別用於經提取子圖像視訊序列之正確參數集值及(視情況) SEI資訊的方法。
3. 用於編碼器輸送啟用關於視訊位元串流及TMCTS之位元串流約束之某一子區提取之保證的方法。
在下文中描述之實施例藉由為視訊資料串流提供來自視訊資料串流之酬載部分的視訊的圖像之重構不需要之資訊來克服剛剛所概述之問題，該資訊包含預定子區之指示及替換索引及/或替換參數，其之重要性及功能在下文中更詳細地描述。以下描述並不僅限於HEVC或HEVC之修改。確切而言，隨後描述之實施例可以任何視訊編解碼器技術實施，以便提供具有用於提供經縮減子區特定視訊資料串流之額外符合性點的此類視訊寫碼技術。隨後，呈現如何可特定地實施隨後描述之實施例以形成HEVC之擴展的細節。
圖1展示根據本申請案之實施例的視訊資料串流10。亦即，以維持符合性之方式，視訊資料串流可縮減為經縮減視訊資料串流，其之圖像僅展示經編碼成視訊資料串流10之視訊14之圖像12之預定子區而不需要轉碼或更精確、耗時及計算上複雜的操作(諸如，再量化、空間至光譜轉化及其反向及/或再執行運動估計)。
圖1之視訊資料串流10經展示包含指示寫碼參數設定80之參數集部分16及由視訊14之圖像12寫碼成之酬載部分18。在圖1中，藉由使用用於酬載部分18之陰影線同時非陰影展示參數集部分16，使部分16及18例示性區別於彼此。此外，將部分16及18例示性地展示為彼此交插在資料串流10內，儘管情況未必如此。
酬載部分18具有在其中以特定方式編碼之視訊14之圖像12。特定言之，圖1展示例示性預定子區22，關於該例示性預定子區視訊資料串流10具有可縮減至經縮減視訊資料串流的能力。酬載部分18具有在其中以使得任何寫碼依賴性受限的方式(就預定子區22而言)編碼以免跨越子區22之邊界之圖像12。亦即，某一圖像12經寫碼成酬載部分18，使得在子區22內，子區22之寫碼並不視此圖像內之此類區域22之空間相鄰而定。在亦使用時間預測將圖像12經編碼成酬載部分18的情況下，時間預測可受限在子區22內，使得無在視訊14之第一圖像之子區22內之部分係以取決於子區22外部之視訊14之參考(其他圖像)的區域的方式來寫碼。亦即，產生視訊資料串流14之對應編碼器以使得同樣並不指向參考圖像之部分的方式限制用於寫碼子區22之可用運動向量之集合，由此產生之運動補償之預測信號之形成將需要或涉及參考圖像之子區22外部之樣本。就空間依賴性而言，應注意，相同之限制可關於與逐樣本空間預測有關之空間預測、寫碼參數之空間預測及例如將由空間地跨越子區22之邊界連續算術寫碼產生的寫碼依賴性。
因此，酬載部分18具有在其中經編碼之圖像12，該等圖像具有限制寫碼依賴性之剛剛概述的服從，以免朝向預定子區22外部之部分伸出，且可因此由語法元素(包括(例如)，運動向量、圖像參考索引、分區資訊、寫碼模式、變換係數或表示經量化預測殘餘之殘餘樣本值、或一個或其任何組合)之語法上定序序列24組成。然而，最重要地，酬載部分18具有在其中以使用寫碼參數設定20之第一集合20a參數化的方式編碼之視訊14之圖像12。舉例而言，集合20a中之寫碼參數設定定義例如圖像12之圖像大小，諸如，圖像12之垂直高度及水平寬度。為說明圖像大小如何將圖像12之寫碼「參數化」為酬載部分18，簡要地參考圖2。圖2將圖像大小寫碼參數26展示為集合20a之寫碼參數設定中之一者之實例。顯然，圖像大小26指示必須由酬載部分18 「寫碼」之圖像區域之大小，且其可能藉由發信某一圖像12之各別子區塊保持未經寫碼且因此(例如)藉由預定樣本值(諸如，零)來填充，該圖像區域可對應於黑色。因此，圖像大小26影響28酬載部分18之語法描述24之量或大小30。另外，圖像大小26影響28酬載部分18 (就例如位置指示32之值範圍及位置指示32可在語法描述24中出現處之次序而言)之語法描述24內之位置指示32。舉例而言，位置指示32可包含酬載部分18內之圖塊位址。如圖1中所說明圖塊34為資料串流10之部分，以其為單位例如資料串流10可傳輸至解碼器。各圖像12可經寫碼成以此類圖塊34為單位之資料串流10，其中細分在圖像12經寫碼成資料串流10處之解碼次序之後經寫碼成圖塊34。各圖塊34對應於在其中經編碼之圖像12的對應區域36且因此具有該對應區域，然而，其中區域36在子區22內部或外部，亦即，其並不跨越子區之邊界。在此情況下，各圖塊34可具備指示圖像12之圖像區域內之對應區域36之位置(亦即相對於圖像12之圓周)的圖塊位址。為提及一具體實例，可相對於圖像12之左上方拐角來量測圖塊位址。顯然，此類圖塊位址不可高於超過具有圖像大小26之圖像內之圖塊位址之值的值。
以類似於圖像大小26之方式，寫碼參數設定之集合20a亦可定義圖像12可細分成之圖像塊的圖像塊結構38。使用虛點線40，圖1呈現將圖像12之細分成圖像塊42以使得該等圖像塊以行及列之圖像塊陣列佈置的實例。在使用對圖像塊42進行細分來使圖像12經編碼成酬載部分18之視情況選用之情況中，此可(例如)意謂，1)不允許跨越圖像塊邊界之空間互依性且因此不使用，及2)藉以將圖像12寫碼成資料串流10之解碼次序以光柵掃描圖像塊次序遍歷圖像12，亦即，在按圖像塊次序訪視下一圖像塊之前遍歷各圖像塊。因此，圖像塊結構38影響28藉以將圖像12編碼成酬載部分18之解碼次序44，且因此影響語法描述24。以類似於圖像大小26之方式，圖像塊結構38亦影響28酬載部分18內之位置指示32，亦即，就藉以允許位置指示32之不同實例化在語法描述24內存在之次序而言。
集合20a之寫碼參數設定亦可包含緩衝區時序46。緩衝區時序46可(例如)發信經寫碼圖像緩衝區移除時間(在其處將資料串流10之某一部分(諸如，指代一個圖像12之資料串流10之個別圖塊34或部分)自解碼器之經寫碼圖像緩衝區移除)，且此等時間值影響28或係關於資料串流10內之對應部分之大小使得緩衝區時序46亦影響28酬載部分18之量/大小30。
亦即，如所例示之圖2之描述，使用寫碼參數設定之集合20a來「參數化」或「描述」將圖像12寫碼成酬載部分18，其意義在於，一方面寫碼參數設定20之集合20a之間的任何不一致及另一方面酬載部分18及其語法描述2應被識別為與由任何待識別為符合之資料串流服從所需的符合性要求衝突。
由藉由酬載部分18組成且經穿插或藉由語法描述24組成之索引48指代或索引寫碼參數設定之第一集合20a。舉例而言，索引48可包含於圖塊34之圖塊標頭中。
儘管可以使得取消酬載部分18之部分(其並不關於子區22)且所得經縮減資料串流維持符合性的方式(與酬載部分18一致或連同該酬載部分)修改寫碼參數設定之所索引集合20a，但此方法並不遵循圖1之實施例。儘管一方面所索引集合20a及另一方面酬載部分18內之兩個寫碼參數設定之此類相關修改應不需要經由完全解碼及編碼的迂迴，但為執行此相關修改之計算負擔應仍需要大量解析步驟及其類似者。
因此，圖1之實施例遵循另一方法，根據該方法視訊資料串流10包含(亦即，具備)為自酬載部分18重構視訊的圖像12不需要的資訊50，該資訊包含預定子區之指示及替換索引及/或替換參數。舉例而言，資訊50可就預定子區22在圖像12內之位置而言指示預定子區。資訊50可(例如)指示以圖像塊為單位之子區22之位置。因此，資訊50可識別各圖像內之圖像塊42之集合以便形成子區22。可將各圖像12內之圖像塊42之集合固定在圖像12中(亦即，圖像塊形成)，在各圖像12內，子區22可彼此共置，且形成子區22之此等圖像塊之圖像塊邊界在不同圖像12之間可空間地一致。應提及，圖像塊之集合並不限於形成圖像12之連續矩形圖像塊子陣列。然而，各圖像12內之形成子區22之圖像塊之無重疊且無隙鄰接可與此無隙且無重疊鄰接或形成矩形區域之並接一起存在。然而，自然地，指示50並不限於指示以圖像塊為單位之子區22。應注意，不論如何僅視情況使用圖像12之圖像塊細分。指示50可(例如)指示以樣本為單位或藉由一些其他方式之子區22。在甚至另一實施例中，子區22之位置可甚至形成參與網路裝置及解碼器已知的預設資訊，該等參與網路裝置及解碼器應藉由僅關於子區22指示可縮減性或指示子區22之存在的資訊50處置視訊資料串流10。如上文已描述及如圖3中所說明，除預定子區之指示52以外，資訊50包含替換索引54及/或替換參數56。替換索引及/或替換參數用於改變所索引之寫碼參數設定之集合(亦即，由酬載部分18內之索引索引之寫碼參數設定之集合)，使得所索引之寫碼參數設定之集合擬合經縮減視訊資料串流之酬載部分，其中一方面酬載部分18已藉由相關於子區22外部之圖像12之部分之彼等部分的移除來修改，且改變位置指示32以便與子區22之圓周而非圖像12之圓周相關。
為清晰地呈現後一情況，參考圖4 ，該圖展示網路裝置60經組配以接收且處理根據圖1之視訊資料串流10以便自其導出經縮減視訊資料串流62。在「經縮減視訊資料串流」62中，術語「經縮減」應表示兩個事情，亦即：第一，與視訊資料串流10相比經縮減視訊資料串流62對應於更低位元速率的事實，及第二，經縮減視訊資料串流62所具有之在其中經編碼之圖像小於視訊資料串流10之圖像12，原因在於經縮減視訊資料串流62之更小圖像僅展示圖像12之子區22。
為滿足如下文更詳細地闡述之其任務，方法裝置60包含經組配以自資料串流10讀取資訊50之讀取器64，及基於資訊50以下文更詳細地描述之方式執行縮減或提取程序的縮減器66。
圖5說明用於在資訊50中使用替換索引54之例示性情況之網路裝置60的功能性。特定言之，如圖5中所說明，網路裝置60使用資訊50 (例如)以便自資料串流10之酬載部分18移除68並不與子區22相關之部分70 (亦即，指代子區22外部之圖像12之區域)。可(例如)基於圖塊執行移除68，其中縮減器66基於一方面圖塊34之圖塊標頭內之位置指示或圖塊位址及另一方面資訊50內之指示52識別酬載部分18內之並不與子區22相關的彼等圖塊34。
在圖5之實例中，當資訊50攜載替換索引54時，除寫碼參數設定之索引集合20a以外，視訊資料串流10之參數集部分16攜載並不參考或由酬載部分18內之索引48索引之寫碼參數設定的未索引的集合20b。在執行縮減時，縮減器66藉由具有圖5中所說明的使用弧形箭頭72之替換之替換索引54使用圖5中說明性地展示的一者來替換資料串流10內之索引48。藉由使用替換索引54之索引48之替換，執行重定向72，根據該重定向，由經縮減視訊資料串流62之酬載部分組成之索引指代或索引寫碼參數設定之第二集合20b，使得寫碼參數設定之第一集合20a變為未經索引。因此，重定向72可亦涉及自參數集部分16移除74寫碼參數設定之不再索引之集合20a的縮減器66將。
縮減器66亦改變酬載部分18內之位置指示32，以便相對於預定子區22之圓周來量測。在5圖中藉助於弧形箭頭78指示該改變，其中例示性之改變僅為自資料串流10至經縮減視訊資料串流62之一個所描繪之位置指示32，該經縮減視訊資料串流由以交叉陰影之方式展示經縮減視訊資料串流62中之位置指示32同時在資料串流10中使用無陰影線展示位置指示32來示意性地指示。
因此，概述圖5之描述，網路裝置60能夠以僅涉及相對較低複雜性之方式來獲得經縮減視訊資料串流62。恰當地調適寫碼參數設定之集合20b以恰當地參數化、或擬合經縮減視訊資料串流62之酬載部分18之量/大小30、位置指示32及解碼次序44的繁瑣任務可能已在其他執行，諸如，在藉由使用圖1中之虛線框代表性地說明之編碼器80內。一替代例應為改變資訊50之評定及如下文進一步描述之藉由縮減器66的縮減當中之次序。
圖6說明將經縮減視訊資料串流62饋入至視訊解碼器82時之情形，以便說明經縮減視訊資料串流62具有在其中經編碼之較小圖像86之視訊84，亦即，與圖像12相比大小更小且僅展示其子區22的圖像86。因此，藉由視訊解碼器82解碼經縮減視訊資料串流62來產生視訊84之重構。如關於圖5所闡述，經縮減視訊資料串流62具有經縮減酬載部分18，該經縮減酬載部分具有在其中以參數化方式編碼或藉由寫碼參數設定之第二集合20b相應地描述地較小圖像86。
視訊編碼器80可(例如)將圖像12編碼成視訊資料串流10，同時服從上文關於圖1結合子區22闡述之寫碼限制。編碼器80可(例如)使用適當速率-失真最佳化功能之最佳化來執行此編碼。作為此編碼之結果，酬載部分18索引集合20a。另外，編碼器80產生集合20b。為此目的，編碼器80可(例如)根據集合20a中之其值調適圖像大小26及圖像塊結構38以便對應於子區22之大小及所佔據的圖像塊集合。除彼以外，編碼器80應實質上執行如上文關於圖5自身所闡述之縮減方法且計算緩衝區時序46，以便啟用解碼器(諸如，視訊解碼器82)以使用由此計算之寫碼參數設定之第二集合20b內之緩衝區時序46來恰當地管理其經寫碼圖像緩衝區。
圖7說明網路裝置之操作模式之替代性方式，亦即在使用資訊50內之替換參數56的情況下。根據此替代例，如圖7中所描繪，參數集部分16僅包含寫碼參數設定之所索引集合20a，使得再索引或重定向72及集合移除器74並不需要藉由縮減器66執行。然而，替代此，縮減器66使用自資訊50獲得之替換參數56，以便調整88寫碼參數設定之所索引集合20a，以便變為寫碼參數設定之集合20b。甚至根據此替代例，執行步驟68、78及88之縮減器66不含相對複雜的操作，以便將經縮減視訊資料串流62導出至原始視訊資料串流10之外。
換言之，在圖7之情況下，替換參數56可(例如)包含例如圖像大小26、圖像塊結構38及/或緩衝區時序46中之一或多者。
應注意，就圖5及圖7而言，亦可存在具有包含替換索引及替換參數兩者之資訊50之兩個替代例的混合物。舉例而言，遭受自集合20a至20b之變化之寫碼參數設定可分佈至不同參數集圖塊(諸如，SPS、PPS、VPS或類似者)上或由該等不同參數集圖塊組成。因此，對於此等圖塊之不同者，可執行例如根據圖5或圖7之不同處理。
就改變78位置指示之任務而言，應注意，此任務必須相對地執行，通常係由於其經執行(例如)用於酬載部分18內之圖塊34之各酬載圖塊，但位置指示32之新替換值之計算為相對不複雜的。舉例而言，位置指示可藉助於水平座標及垂直座標指示一位置，且改變78可(例如)藉由相對於圖像12之左上方拐角形成原始位置指示32之對應座標與資料串流10與子區22之偏移之間的差分來計算位置指示之新座標。替代地，位置指示32可使用在例如前述解碼次序之後之以一些適當單位(諸如，以寫碼區塊為單位，諸如，樹根區塊)一些線性量測來指示一位置，其中圖像12以列及行經有規律地劃分。在此情況下，應在步驟78內再考慮僅子區22內之此等寫碼區塊之寫碼次序來計算位置指示。就此而言，亦應注意，以便形成視訊資料串流10外之經縮減視訊資料串流62之剛剛概述的縮減/提取程序，亦應適合於以使得經寫碼成經縮減視訊資料串流62之視訊84之較小圖像86以空間縫合之方式展示部分22及圖像84之相同圖像內容可位於在以不同空間佈置方式之子區22處之圖像12內的方式，來形成經縮減視訊資料串流62。
就圖6而言，應注意，展示於圖6中之視訊解碼器82可能夠或可不能夠解碼視訊資料串流10以便自其重構視訊14之圖像12。視訊解碼器82不能夠解碼視訊資料串流10之原因可為，視訊解碼器82之類級可例如滿足於解決經縮減視訊資料串流62之大小及複雜性，但可能不足以解碼原始視訊資料串流10。然而原則上，資料串流62及資料串流10均符合一個視訊編解碼器，此係由於藉助於再索引及/或參數調整上文概述之所索引寫碼參數設定之集合的適當適應。
在已描述用於就待縮減視訊資料串流之圖像之某一子區而言之視訊串流減少/提取的相當一般實施例後，在下文中恢復關於就HEVC而言之此類提取之動機及問題的上述描述以提供用於實施上述實施例之具體實例。
1. 用於單層sub 區域之發信態樣 1.1. 參數集 ：
以下參數集態樣需要調整何時提取空間子集：
‧ VPS： 對於單層寫碼無標準化資訊
‧ SPS：
￭ 層級資訊
￭ 圖像尺寸
￭ 裁剪或符合性窗口資訊
￭ 緩衝及時序資訊(亦即，HRD資訊)
￭ 潛在地另一視訊可用性資訊(VUI)項目，諸如 motion_vectors_over_pic_boundaries_flag, min_spatial_segmentation_idc
‧ PPS：
￭ 空間分段資訊，亦即，就在水平及垂直方向中圖像塊之量及維度而言的平鋪資訊。
發信實施例
‧
發信1A ：編碼器可為各TMCTS發送額外未使用的(亦即，從不啟動)帶內(亦即，如各別NAL單元) VPS、SPS及PPS，且在補充增強資訊(SEI)訊息中向TMCTS提供映射。
用於發信1A SEI之例示性語法/語義展示於圖8中。
語法元素90為視情況選用的，因為其可自圖像參數集識別符導出。
語義提供於下。
num_extraction_information_sets_minus1指示包含於待應用於子圖像提取程序中之給定發信1A SEI中之資訊集合之數目。
num_applicable_tile_set_identifiers_minus1指示以下i-th資訊集合應用於子圖像提取程序之圖像塊集合之mcts_id值之數目。
mcts_identifier[ i ][ k ]指示所有num_applicable_tile_set_identifers_minus1加以下i-th資訊集合應用於子圖像提取程序之圖像塊集合之mcts_id之1值。
num_mcts_pps_replacements[ i ]指示用於圖像塊集合(其中mcts_id等於mcts_id_map[ i ])之發信1A SEI中之pps識別符替換發信之數目。
mcts_vps_id[ i ]指示mcts_vps_idx[ i ]-th視訊參數集待用於子圖像提取程序中的圖像塊集合(其中mcts_id等於mcts_id_map[ i ])。
mcts_sps_id[ i ]指示mcts_sps_idx[ i ]-th序列參數集待用於子圖像提取程序中之圖像塊集合(其中mcts_id等於mcts_id_map[ i ])。
mcts_pps_id_in[ i ][ j ]指示圖像塊集合(其中mcts_id等於mcts_id_map[ i ])之圖塊標頭語法結構中之num_mcts_pps_replacements[ i ] pps識別符的j-th值在子圖像提取程序中待經替換。
mcts_pps_id_out[ i ][ j ]指示圖像塊集合(其中mcts_id等於mcts_id_map[ i ])之圖塊標頭語法結構中之num_mcts_pps_replacements pps識別符的j-th值在子圖像提取程序中替換等於值mcts_pps_id_in[ i ][ j ]之pps識別符。
●
發信1B：編碼器可為各TMCTS及映射向所有含於容器式SEI內之TMCTS發送VPS、SPS及PPS。
用於發信1B SEI之例示性語法/語義展示於圖9中。
黃色語法元素92為視情況選用的，因為其可自圖像參數集識別符導出。
語義如一下概述：
num_vps_in_message_minus1指示在給定發信1B SEI中用於子圖像提取程序之vps語法結構之數目。
num_sps_in_message_minus1指示在發信1B SEI中用於子圖像提取程序之sps語法結構之數目。
num_pps_in_message_minus1指示在給定發信1B SEI中用於子圖像提取程序之pps語法結構之數目。
num_extraction_information_sets_minus1指示包含於待應用於子圖像提取程序中之給定發信1B SEI中之資訊集合之數目。
num_applicable_tile_set_identifiers_minus1指示以下i-th資訊集合應用於子圖像提取程序之圖像塊集合之mcts_id值之數目。
mcts_identifier[ i ][ k ]指示所有num_applicable_tile_set_identifers_minus1加以下i-th資訊集合應用於子圖像提取程序之圖像塊集合之mcts_id之1值。
mcts_vps_idx[ i ]指示在發信1B SEI中發信之mcts_vps_idx[ i ]-th視訊參數集在子圖像提取程序中待用於圖像塊集合(其中mcts_id等於mcts_id_map[ i ])。
mcts_sps_idx[ i ]指示在發信1B SEI中發信之mcts_sps_idx[ i ]-th序列參數集在子圖像提取程序中待用於圖像塊集合(其中mcts_id等於mcts_id_map[ i ])。
num_mcts_pps_replacements[ i ]指示用於圖像塊集合(其中mcts_id等於mcts_id_map[ i ])之發信1B SEI中之pps識別符替換發信之數目。
mcts_pps_id_in[ i ][ j ]指示圖像塊集合(其中mcts_id等於mcts_id_map[ i ])之圖塊標頭語法結構中之num_mcts_pps_replacements[ i ] pps識別符的j-th值在子圖像提取程序中待經替換。
mcts_pps_idx_out[ i ][ j ]指示圖像參數集(其中pps識別符等於mcts_pps_id_in[ i ][ j ])在子圖像提取程序期間待用發信1C SEI中之mcts_pps_idx_out[ i ][ j ]-th發信之圖像參數集來替換。
●
發信1C：編碼器可向SEI內之可應用TMCTS提供與不能導出之TMCTS (基本上額外緩衝/時序(HRD)參數及映射相關聯的參數集資訊。
用於發信1C SEI之例示性語法/語義展示於圖10中。
以提取程序能夠替換原始VPS中之語法元素之連續區塊之方式將在下文SEI中之HRD資訊結構化，其中語法元素之各別連續區塊來自SEI。
num_extraction_information_sets_minus1指示包含於待應用於子圖像提取程序中之給定發信1C SEI中之資訊集合之數目。
num_applicable_tile_set_identifiers_minus1指示以下i-th資訊集合應用於子圖像提取程序之圖像塊集合之mcts_id值之數目。
mcts_identifier[ i ][ k ]指示所有num_applicable_tile_set_identifers_minus1加以下i-th資訊集合應用於子圖像提取程序之圖像塊集合之mcts_id之1值。
mcts_vps_timing_info_present_flag[ i ]等於1，指定mcts_vps_num_units_in_tick[ i ]、mcts_vps_time_scale[ i ]、mcts_vps_poc_proportional_to_timing_flag[ i ]及mcts_vps_num_hrd_parameters[ i ]在VPS中存在。mcts_vps_timing_info_present_flag[ i ]等於0，指定mcts_vps_num_units_in_tick[ i ]、mcts_vps_time_scale[ i ]、mcts_vps_poc_proportional_to_timing_flag[ i ]及mcts_vps_num_hrd_parameters[ i ]在發信1C SEI中並不存在。
mcts_vps_num_units_in_tick[ i ]為在對應於時脈滴答計數之一個增量(稱為時脈滴答)之頻率mcts_vps_time_scale Hz下之時脈操作之時間單位之i-th數目。mcts_vps_num_units_in_tick[ i ]之值應大於0。以秒為單位之時脈滴答等於mcts_vps_num_units_in_tick除以mcts_vps_time_scale之商。舉例而言，當視訊信號之圖像速率為25 Hz時，mcts_vps_time_scale可等於27 000 000且mcts_vps_num_units_in_tick可等於1 080 000，及因此時脈滴答可為0.04秒。
mcts_vps_time_scale[ i ]為在一秒內穿過之時間單位之i-th數目。舉例而言，使用27 MHz時脈量測時間之時間座標系統具有27 000 000之vps_time_scale。vps_time_scale之值應大於0。
mcts_vps_poc_proportional_to_timing_flag[ i ]等於1，指示在解碼次序中，不為CVS中之第一圖像之CVS中之各圖像之圖像次序計數值與相對於CVS中之第一圖像之輸出時間之圖像之輸出時間成正比。mcts_vps_poc_proportional_to_timing_flag[ i ]等於0，指示在解碼次序中，不為CVS中之第一圖像之CVS中之各圖像之圖像次序計數值可或可不與相對於CVS中之第一圖像之輸出時間之圖像之輸出時間成正比。
mcts_vps_num_ticks_poc_diff_one_minus1[ i ]加1，指定對應於圖像次序計數值之差異之時脈滴答的數目等於1。mcts_vps_num_ticks_poc_diff_one_minus1[ i ]之值應包括性的在0至232−2之範圍內。
mcts_vps_num_hrd_parameters[ i ]指定，hrd_parameters( )語法結構之數目在發信1C SEI之i-th項中存在。mcts_vps_num_hrd_parameters之值為包括性的在0至vps_num_layer_sets_minus1 + 1之範圍內。
mcts_hrd_layer_set_idx[ i ][ j ]指定發信1C SEI中之j-th hrd_parameters( )語法結構應用於之層集合之索引(至藉由發信1C SEI中之i-th條目之VPS指定之層集合的清單中)且用於子圖像提取程序。mcts_hrd_layer_set_idx[ i ][ j ]之值應包括性的在(vps_base_layer_internal_flag ? 0 : 1)至vps_num_layer_sets_minus1之範圍內。位元串流符合性之要求為，mcts_hrd_layer_set_idx[ i ][ j ]之值應不等於hrd_layer_set_idx[ i ][ k ]之值，因為j之任何值不等於k。
mcts_cprms_present_flag[ i ][ j ]等於1，指定通常用於所有子層之HRD參數在發信1C SEI之i-th項之j-th hrd_parameters( )語法結構中存在。mcts_cprms_present_flag[ i ][ j ]等於0，指定通常用於所有子層之HRD參數在發信1C SEI之i-th項之i-th hrd_parameters( )語法結構中並不存在，且經導出為與發信1C SEI之i-th項之( i − 1 )-th hrd_parameters( )語法結構相同。推斷mcts_cprms_present_flag[ i ][ 0 ]等於1。
如上文HRD資訊與VPS相關聯，用於SPS VUI HRD參數之類似資訊之發信可以相同方式實施，例如，將上文SEI延伸或如個別SEI訊息。
值得注意的為，本發明之另一實施例可使用由其他位元串流語法結構(諸如，VUI或如參數集之擴展)中之發信1A、1B及1C執行之機制。
1.2.SEI 訊息
原始視訊位元串流中之以下SEI訊息中之任一者之出現可需要用於調整以避免TMCTS提取之後之非一致性的機制：
‧ HRD相關聯緩衝期間、圖像時序及解碼單元資訊SEI
‧ PanScan SEI
‧ *FramePackingArrangement* SEI
‧ DecodedPictureHash SEI
‧ TMCTS SEI
發信實施例：
●
發信2A ：編碼器可提供用於與用於所有TMCTS之容器式SEI中之TMCTS相關聯之上文SEI的合適替換。此類發信可與發信1C中之實施例組合且展示於圖11中。換言之，對於上文提供之描述而言另外或替代地，表示視訊14之視訊資料串流10可包含視訊之圖像12被寫碼成之酬載部分18及指示匹配酬載部分18之補充增強資訊(或更精確的，藉以將視訊之圖像12寫碼成酬載部分18之方式)的補充增強資訊訊息，且進一步包含含有圖像12之預定子區22之指示52之資訊50及用於將補充增強資訊訊息替換之替換補充增強資訊訊息，其中替換補充增強資訊訊息經選擇使得與視訊資料串流相比，藉由移除68酬載部分18的指代在預定子區22外部之圖像12之區域之部分70及改變78酬載部分18中之位置指示32以便指示以自預定子區22之圓周而非圖像12量測之方式的位置來修改的經縮減視訊資料串流62具有經縮減酬載部分，該經縮減酬載部分具有在其中經編碼之子區特定圖像86，該等子區特定圖像以使得該替換補充增強資訊訊息指示匹配藉以將子區特定圖像86寫碼成經縮減酬載部分18之方式的替換補充增強資訊之一方式展示該等圖像之該預定子區。除上文所描述之參數產生以外或替代的，參數調節器80a應藉由替換SEI訊息產生潛在替換之目標之補充增強資訊訊息。除上文所描述之重定向及/或調整以外或替代的，替換應藉由網路裝置60執行。
all_tile_sets_flag等於0，指定，清單applicable_mcts_id[ 0 ]係藉由用於定義在位元串流內之所有圖像塊集合之wapplicable_mcts_id[ i ]來指定。all_tile_sets_flag 等於1，指定，清單applicable_mcts_id[ 0 ]由在目前SEINAL單元之大於或等於nuh_layer_id之目前存取單元中存在之nuh_layer_id之所有值以該等值之遞增次序來組成。
tile_sets_max_temporal_id_plus1減1，指示針對具有等於陣列applicable_mcts_id[ i ]上之元素的mcts_id之圖像塊集合待在子圖像提取程序中待提取的最大時間位準。
num_applicable_tile_set_identifiers_minus1加1，指定在子圖像提取程序中後續SEI訊息應用於之隨後可應用mcts id的數目。
mcts_identifier[ i ]指示所有num_applicable_tile_set_identifiers_minus1值，因為mcts_id當使用用於圖像塊集合之子圖像提取程序來提取各別圖像塊集合(其中mcts_id等於applicable_mcts_id[ i ])時應***mcts_id 後續SEI訊息。
2. 子圖像 提取程序：
提取程序細節明顯地視應用發信流程而定。
關於圖像塊設定及TMCTS SEI，具體言之所提取TMCTS之約束必須經調配以確保符合性輸出。上文位元串流內之發信實施例中之任一者之存在表示編碼器在視訊位元串流之產生期間服從以下調配之約束的保證。
輸入：‧ 位元串流。
‧ 目標MCTS識別符
MCTSIdTarget。
‧ 目標層識別符清單
layerIdListTarget。
約束或位元串流要求：‧ tiles_enabled_flag等於1。
‧ num_tile_columns_minus1 ＞ 0 || num_rows_minus1 ＞ 0。
‧ 存在TMCTS SEI訊息(其中mcts_id[ i ]等於
MCTSIdTarget)且與待輸出之所有圖像相關聯。
‧ TMCTS (其中mcts_id[ i ]等於
MCTSIdTarget)在TMCTS SEI中存在。
‧ 必須將用於TMCTS (其中mcts_id[ i ]等於
MCTSIdTarget)之合適的位準經由TMCTS SEI語法元素mcts_tier_level_idc_present_flag[ i ]、mcts_tier_idc[ i ]、mcts_level_idc[ i ]或上文發信變體1A或1B中之一者之任一者來發信。
‧ 用於TMCTS之HRD資訊經由發信變體1A、1B或1C中之一者在位元串流中存在。
‧ TMCTS (其中mcts_id[ i ]等於
MCTSIdTarget)中之所有矩形就明度樣本而言均具有相等高度或相等寬度或兩者。
程序 ：‧ 將並不在所關聯的圖像塊集合(其中mcts_id[ i ]等於
MCTSIdTarget)中之所有圖像塊NALU移除。
‧ 替換/調整參數集視發信1X而定。
‧ 根據以下調整殘餘NALU圖塊標頭
o 調整slice_segement_address及first_slice_segment_in_pic_flag自圖像塊集合中之所有矩形產生通常圖像平面。
o 必要時調整pps_id
‧ 在發信2A存在下，移除或替換SEI。
作為替代實施例，作為提取程序之部分之上文所描述之約束或位元串流要求可呈在位元串流內專用發信之形式(例如，獨立SEI訊息或VUI指示)，其之存在應為用於其上文提取程序之要求。
2. 多層
在一些情形中，分層的編解碼器可能有興趣提供每區域變化品質。可能令人感興趣的為，以較低層品質提供較大空間區域，使得使用者在必要時，且寬角度視訊之一些特定區域在較高層下不可用，內容在待經上取樣及與較高層內容一起呈現之較低層中為可用的。較低層視訊區域延伸較高層視訊區域至之程度應經允許視使用情況而變化。
除所描述之TMCTS SEI以外，在HEVC說明書(亦即，附件F)之分層擴展中，將層間受限制圖像塊集合(ILCTS) SEI訊息指定何者指示用於層間預測之本質上類似約束。對於參考，語法表在圖12中給出。
因此，作為本發明之另一部分，考慮額外資訊，對於分層寫碼視訊位元串流實現與上文類似之方式之提取程序。
在考慮用於多層子圖像之發信態樣的情況下，上文揭示之發信及處理之主要差異為位元串流之目標資料部分不再由mcts_id識別符之單一值識別。反而，層集合之識別符及在各所包括之層內之TMCTS之多個識別符(若可應用)且所包括層之間的各別ILCTS識別符(若可應用)形成識別位元串流之目標部分的多維向量。
● 本發明之實施例為上文所揭示之單層發信1A、1B、1C及2A之變體，由於該所揭示之單層發信語法元素[ i ][ k ]經所描述之多維識別符向量替換。
此外，如下延伸編碼器約束或位元串流要求。
2.2. 提取程序 ：
輸入：‧ 多維識別符向量由以下各者組成
‧ 目標層集合
layerSetIdTarget‧ 至少用於具有識別符
layerSetIdTarget 之層集合內之最高層的目標層TMCTS識別符
MCTSIdTarget _Lx‧
LTCTSIdTarget _Lx _refLy對應之目標ILCTS識別符
‧ 位元串流
位元串流要求 ：除何種已經用於單層情況所定義以外：
o TMCTSSEI訊息(其中mcts_id[ i ]等於
MCTSIdTarget _Lx)係為各別層
Lx而存在，且ILCTSSEI訊息(其中ilcts_id[ i ]等於
ILTCTSIdTarget _Lx _refLy)係為任何所使用之包含於位元串流及層集合
layerSetIdTarget中之參考層
Ly而存在於各別層
Lx中
為排除在所提取位元串流部分中遺失參考樣本之存在，定義位元串流部分之TMCTS及ILCTS另外必須滿足以下約束。
○ 對於與圖像塊集合tsA (其中mcts_id[ i ]等於
MCTSIdTarget _LA)相關聯之各參考層：構成tsA之層A中圖像塊為與圖像塊集合(其中ilcts_id[ i ]等於
ILTCTSIdTarget _LA _refLy)相關聯的相同圖像塊。
o 對於與圖像塊集合tsB (其中mcts_id[ i ]等於
MCTSIdTarget _LB)相關聯之各所參考層：構成tsB之層B中之圖像塊係完全包含於指示ilcts_id[ i ]
ILCTSIdTarget _Lx _refLB 之相關聯參考圖像塊集合中。
程序
每層x：將並不在具有mcts_id[ i ]識別符
MCTSIdTarget _Lx 之圖像塊集合內之所有圖像塊NAL單元移除。
在轉向本申請案之下一態樣之前，就子區22可由圖像塊之集合組成之上述可能性而言，應簡要注意，在圖像12內之相對位置可不同於此等圖像塊在由經縮減視訊資料串流62表示之視訊84之較小圖像86內的彼此相對位置。
圖13說明細分成所枚舉之圖像塊42之陣列(使用大寫字母A至I沿解碼次序)的圖像12。僅出於說明起見，圖13僅例示性地展示一個圖像及細分成3×3之圖像塊42。想像，以使得寫碼依賴性並不跨越圖像塊邊界40的方式將圖像12寫碼成視訊資料串流10，因此例如不僅包括圖像內空間互依性寫碼依賴性且亦時間獨立性均受限。因此，當前圖像內之圖像塊42僅視其自身或任何先前經寫碼/經解碼圖像(亦即，時間參考圖像)內之同置圖像塊而定。
在此情況下，子區22可例如由非連續之圖像塊42之集合(諸如，圖像塊{D, F, G, I}之集合)組成。由於相互的獨立性，視訊84之圖像86可以使得參與圖像塊以不同方式空間地佈置於圖像86內的方式展示子區22。此展示於圖13中：圖像86亦經編碼成以圖像塊42為單位之經縮減視訊資料串流62，但在圖像12中形成子區22之圖像塊在彼此另一相互的位置關係之處經空間地佈置於圖像86內。在圖13之實例中，如同圖像12展示水平全景視圖，形成子區22之圖像塊42佔據在圖像12之對置側處之圖像塊，使得在此等對置側處之圖像塊實際上展示全景場景之鄰近部分。然而，在圖像86中，各圖像塊列中之圖像塊切換相對於其在圖像12中之相對位置的位置。亦即，當與圖像12中之圖像塊D及圖像塊F之相互的水平定位相比時，圖像塊F例如在相對於圖像塊D之左側處出現。
在前進至本申請案之下一態樣之前，應注意，當寫碼依賴性受限以免跨越其邊界時，圖像塊42與部分22均不需要以上文所概述之方式編碼成圖像12。自然地，此限制減輕視訊資料串流減少/提取之上文所概述之概念，但由於此類寫碼依賴性僅傾向於影響沿子區22/圖像塊42之邊界之較小邊緣部分，所以視應用而定，在此等邊緣部分處之失真可視應用而定被接受。
另外應注意，到目前為止上文所描述之實施例呈現以使得相同最新包含所描述之一致點的方式延伸現有視訊編解碼器的可能性(亦即，將視訊串流減少至關於原始圖像12之子區22之經縮減視訊串流同時僅維持一致的可能性)，且為此目的，已根據喜歡或不喜歡將資訊50例示性地隱藏在SEI訊息、VUI或參數集擴展(亦即，可由解碼器跳過之原始視訊資料串流之部分)中。然而，替代地，可在視訊資料串流內在標準化部分之部分處傳送資訊50。亦即，可以從頭開始包含所描述之一致點的方式設定新穎視訊編解碼器。
另外，為完整性起見，描述用於以上實施例之另一具體實施實例，此實例說明以以便實施以上實施例之方式擴展HEVC標準的可能性。為此目的，提供新SEI訊息。換言之，描述對HEVC說明書之修改，該修改啟用運動受限制之圖像塊集合(MCTS)之提取作為個別HEVC符合性位元串流。使用且下文描述兩種SEI訊息。
第一SEI訊息(亦即，MCTS提取資訊集合SEI訊息)提供用於MCTS特定替換參數集之載運的語法且定義語義中之提取程序。第二SEI訊息(亦即，嵌套SEI訊息之MCTS提取資訊)提供用於MCTS特定嵌套SEI訊息的語法。
因此，為將此等SEI訊息包括至HEVC框架工作中，改善HEVC之一般SEI訊息語法以包括SEI訊息之新類型：
| sei_payload( payloadType, payloadSize ) { | 描述符 |
| if ( nal_unit_type = = PREFIX_SEI_NUT ) | |
| if ( payloadType = = 0 ) | |
| buffering_period( payloadSize ) | |
| … | |
| else if( payloadType = = 152 ) | |
| mcts_extraction_info_set( payloadSize ) | |
| else if( payloadType = = 153 ) | |
| mcts_extraction_info_nesting( payloadSize ) | |
| … | |
| else if( payloadType = = 160 ) | |
| layers_not_present( payloadSize ) /* specified in Annex F */ | |
| } | |
| } |
因此，清單SingleLayerSeiList經設定包括性的由payloadType值3, 6, 9, 15, 16, 17, 19, 22, 23, 45, 47, 56, 128, 129, 131, 132, and 134 to 153組成。類似地，應藉由新SEI訊息之類型編號152及153 (其編號僅出於說明之目的自然地選擇)來擴展清單VclAssociatedSeiList及PicUnitRepConSeiList。
HEVC之表D.1 (SEI訊息之暫留範疇)應另外包括對SEI訊息之新帶的暗示：
| SEI訊息 | 暫留範疇 |
| MCTS提取資訊集合 | 含有SEI訊息之CLVS |
| MCTS提取資訊嵌套 | 含有SEI訊息之存取單元 |
其語法應按如下。可將MCTS提取資訊集合SEI訊息語法設計為：
| mcts_extraction_info_set( ) { | 描述符 |
| num_extraction_info_sets_minus1 | ue(v) |
| for( i = 0; i ＜= num_extraction_information_sets_minus1; i++ ) { | |
| num_associated_tile_set_identifiers_minus1[ i ] | ue(v) |
| for( j = 0; j ＜= num_associated_tile_set_identifiers_minus1[ i ]; j++ ) | |
| mcts_identifier[ i ][ j ] | ue(v) |
| num_vps_in_extraction_info_set_minus1[ i ] | ue(v) |
| for( j = 0; j ＜= num_vps_in_extraction_set_minus1[ i ]; j++ ) | |
| vps_rbsp_data_length[ i ][ j ] | ue(v) |
| num_sps_in_extraction_info_set_minus1[ i ] | ue(v) |
| for( j = 0; j ＜= num_sps_in_extraction_set_minus1[ i ]; j++ ) | |
| sps_rbsp_data_length[ i ][ j ] | ue(v) |
| num_pps_in_extraction_info_set_minus1[ i ] | ue(v) |
| for( j = 0; j ＜= num_pps_in_extraction_set_minus1[ i ]; j++ ) { | |
| pps_nuh_temporal_id_plus1[ i ][ j ] | u(3) |
| pps_rbsp_data_length[ i ][ j ] | ue(v) |
| } | |
| while( !byte_aligned() ) | |
| mcts_alignment_bit_equal_to_zero | f(1) |
| for( j = 0; j ＜= num_vps_in_extraction_set_minus1[ i ]; j++ ) | |
| for( k = 0; k ＜= vps_rbsp_data_length[ i ][ j ]; k++ ) | |
| vps_rbsp_data_bytes[ i ][ j ][ k ] | u(8) |
| for( j = 0; j ＜= num_sps_in_extraction_set_minus1[ i ]; j++ ) | |
| for( k = 0; k ＜= sps_rbsp_data_length[ i ][ j ]; k++ ) | |
| sps_rbsp_data_bytes[ i ][ j ][ k ] | u(8) |
| for( j = 0; j ＜= num_pps_in_extraction_set_minus1[ i ]; j++ ) | |
| for( k = 0; k ＜= pps_rbsp_data_length[ i ][ j ]; k++ ) | |
| pps_rbsp_data_bytes[ i ][ j ][ k ] | u(8) |
| } | |
| } |
就語義而言，MCTS提取資訊集合SEI訊息為用於使用替換參數56之資訊50之一實例。
MCTS提取資訊集合SEI訊息提供補充資訊以如下文所指定執行子位元串流MCTS提取以自運動受限制圖像塊集合(亦即，形成整體圖像區域之片段84之圖像塊之集合)導出HEVC符合性位元串流。資訊由許多提取資訊集合組成，各含有提取資訊集合應用於之運動受限制圖像塊集合之識別符。各提取資訊集合含有在子位元串流MCTS提取程序期間使用之替換視訊參數集、序列參數集及圖像參數集之RBSP位元組。
使圖像associatedPicSet之集合為來自包括性的含有至多但不包括按解碼次序後續者中之第一任一者的MCTS提取資訊集合SEI訊息的存取單元的圖像：
- 在解碼次序中，含有MCTS提取資訊集合SEI訊息之下一存取單元。
- 在解碼次序中之下一IRAP圖像，其中NoRaslOutputFlag等於1。
- 在解碼次序中之下一IRAP存取單元，其中NoClrasOutputFlag等於1。
MCTS提取資訊集合SEI訊息之範疇為圖像associatedPicSet之集合。
當MCTS提取資訊集合圖像塊集合SEI訊息存在用於associatedPicSet中之任一圖像時，時間運動受限制圖像塊集合SEI訊息應存在用於在解碼次序中之associatedPicSet之第一圖像且亦可存在用於associatedPicSet之其他圖像。時間運動受限制圖像塊集合SEI訊息應使mcts_id[ ]等於mcts_identifer[ ]以用於associatedPicSet中之所有圖像。
當MCTS提取資訊集合圖像塊集合SEI訊息存在用於associatedPicSet中之任一圖像時，MCTS提取資訊集合SEI訊息應存在用於在解碼次序中之associatedPicSet之第一圖像且亦可存在用於associatedPicSet之其他圖像。
MCTS提取資訊集合SEI訊息不應存在用於associatedPicSet中之任一圖像，當tiles_enabled_flag等於0以用於對於associatedPicSet中之任一圖像起作用的任何PPS時。
MCTS提取資訊集合SEI訊息不應存在用於associatedPicSet中之任一圖像，除非對於associatedPicSet中之任一圖像起作用的每一PPS具有語法元素num_tile_columns_minus1、num_tile_rows_minus1、uniform_spacing_flag、column_width_minus1[ i ]及row_height_minus1[ i ]之相同值。
註釋1，此約束類似於所關聯之約束(其中tiles_fixed_structure_flag等於1)，且當MCTS提取資訊集合SEI訊息存在時，其可需要tiles_fixed_structure_flag 等於1 (儘管此不係所需的)。
當多於一個MCTS提取資訊集合SEI訊息存在用於associatedPicSet之圖像時，其應含有一致內容。
含有屬於圖像塊集合tileSetA之圖像塊之NAL單元不應含有並不屬於圖像塊集合tileSetA之圖像塊。
各存取單元中之MCTS提取資訊集合SEI訊息之數目不應超過5。
num _extraction_info_sets_minus1加1，指示包含於待應用於mcts提取程序之MCTS提取資訊集合SEI訊息中之提取資訊集合之數目。num_extraction_info_sets_minus1之值應包括性的在0至2
32−2範圍內。
指定i-th提取資訊集合為值等於i之MCTS提取資訊集合識別符。
num _associated_tile_set_identifiers_minus1[ i ]加1，指示i-th提取資訊集合中之圖像塊集合之mcts_id之值的數目。num_extraction_info_sets_minus1[ i ]之值應包括性的在0至2
32−2之範圍內。
mcts _identifier[ i ][ j ]識別與i-th提取資訊集合相關聯之j-th圖像塊集合(其中mcts_id等於mcts_identifier[ i ][ j ])。mcts_identifier[ i ][ j ]之值應包括性的在0至2
32−2之範圍內。
num _vps_in_extraction_ info _set_minus1[ i ]加1，指示i-th提取資訊集合中之替換視訊參數集之數目。num_vps_in_extraction_info_set_minus1[ i ]之值應包括性的在0至15之範圍內。
vps _rbsp_data_length[ i ][ j ]指示i-th提取資訊集合中之以下j-th替換視訊參數集之位元組vps_rbsp_data_bytes[ i ][ j ][ k ]之數目。
num _sps_in_extraction_ info _set_minus1[ i ]加1，指示i-th提取資訊集合中之替換序列參數集之數目。num_sps_in_extraction_info_set_minus1[ i ]之值應包括性的在0至15之範圍內。
sps _rbsp_data_length[ i ][ j ]指示i-th提取資訊集合中之以下j-th替換序列參數集之位元組sps_rbsp_data_bytes[ i ][ j ][ k ]之數目。
num _pps_in_extraction_ info _set_minus1[ i ]加1，指示i-th提取資訊集合中之替換圖像參數集之數目。num_pps_in_extraction_info_set_minus1[ i ]之值應包括性的在0至63之範圍內。
pps _nuh_temporal_id_plus1[ i ][ j ]指定用於產生與PPS RBSP中所指定之PPS資料相關聯之PPS NAL單元的時間識別符，該PPS RBSP指定藉由pps_rbsp_data_bytes[ i ][ j ][ ]指定用於j-th替換圖像參數集(其用於i-th提取資訊集合)。
pps _rbsp_data_length[ i ][ j ]指示i-th提取資訊集合中之以下j-th替換圖像參數集之位元組pps_rbsp_data_bytes[ i ][ j ][ k ]之數目。
mcts_alignment_bit_equal_to_zero應等於0。
vps _rbsp_data_bytes[ i ][ j ][ k ]含有i-th提取資訊集合中之以下j-th替換視訊參數集之RBSP之k-th位元組。
sps _rbsp_data_bytes[ i ][ j ][ k ]含有i-th提取資訊集合中之以下j-th替換序列參數集之RBSP之k-th位元組。
pps
_rbsp_data_bytes[ i ][ j ][ k ]含有i-th提取資訊集合中之以下j-th替換圖像參數集之RBSP之k-th位元組。
如下應用子位元串流MCTS提取程序：
使位元串流inBitstream、目標MCTS識別符mctsIdTarget、目標MCTS提取資訊集合識別符mctsEISIdTarget及目標最高TemporalId值mctsTIdTarget為至子位元串流MCTS提取程序之輸入。
子位元串流MCTS提取程序之輸出為子位元串流outBitstream。
其為位元串流符合性用於任何輸出子位元串流(其為此項中所指定之方法之輸出)之輸入位元串流的要求，其中位元串流應為符合位元串流。
如下導出輸出子位元串流：
- 將位元串流outBitstream設定成與位元串流inBitstream一致。
- 將清單ausWithVPS、ausWithSPS及ausWithPPS設定成由在含有具有類型VPS_NUT、SPS_NUT及PPS_NUT之VCL NAL單元之outBitstream內的所有存取單元組成。
- 將使nuh_layer_id 等於0及含有未嵌套SEI訊息之所有SEINAL單元移除。
註釋2，「智慧型」位元串流提取器可包含所提取子位元串流中之適當未嵌套SEI訊息，其限制條件為存在適用於子位元串流之SEI訊息作為原始位元串流中之mcts_extraction_info_nesting( )中之嵌套SEI訊息。
- 自outBitstream移除具有以下類型之所有NAL單元：
- 含有不屬於圖像塊集合(其中mcts_id[ i ]等於mctsIdTarget)之圖像塊的VCL NAL單元，
- 具有類型VPS_NUT、SPS_NUT或PPS_NUT之非VCL NAL單元。
- ***至具有類型VPS_NUT (其自mctsEISIdTarget-th MCTS提取資訊集合中之VPS RBSP資料產生)之outBitstream num_vps_in_extraction_info_minus1[mctsEISIdTarget]加1 NAL單元中之清單ausWithVPS內之所有存取單元中，亦即，用於包括性的在0至num_vps_in_extraction_info_minus1[ mctsEISIdTarget ]之範圍內之j之所有值的vps_rbsp_data_bytes[ mctsEISIdTarget ][ j ][ ]。對於所產生之各VPS_NUT，將nuh_layer_id設定為等於0且將nuh_temporal_id_plus1設定為等於1。
- ***至具有類型SPS_NUT (其自mctsEISIdTarget-th MCTS提取資訊集合中之SPS RBSP資料產生)之outBitstream num_sps_in_extraction_info_minus1[ mctsEISIdTarget ]加1 NAL單元中之清單ausWithSPS內的所有存取單元中，亦即，用於包括性的在0至num_sps_in_extraction_info_minus1[ mctsEISIdTarget ]之範圍內之j之所有值的sps_rbsp_data_bytes[ mctsEISIdTarget ][ j ][ ]。對於所產生之各SPS_NUT，將nuh_layer_id設定為等於0且將nuh_temporal_id_plus1設定為等於1。
- ***至具有類型PPS_NUT (其自mctsEISIdTarget-th MCTS提取資訊集合中之PPS RBSP資料產生)之outBitstream NAL單元中之清單ausWithPPS內之所有存取單元中，亦即用於包括性的在0至num_pps_in_extraction_info_minus1[ mctsEISIdTarget ] (pps_nuh_temporal_id_plus1[ mctsEISIdTarget ][ j ]小於或等於mctsTIdTarget)之範圍內之j之所有值的pps_rbsp_data_bytes[ mctsEISIdTarget ][ j ][ ]。對於所產生之各PPS_NUT，將nuh_layer_id設定為等於0且將nuh_temporal_id_plus1設定為等於用於包括性的在0至num_pps_in_extraction_info_minus1[ mctsEISIdTarget ] (pps_nuh_temporal_id_plus1[ mctsEISIdTarget ][ j ]小於或等於mctsTIdTarget)之範圍內之j之所有值的pps_nuh_temporal_id_plus1[ mctsEISIdTarget ][ j ]。
- 自outBitstream將具有TemporalId大於mctsTIdTarget之所有NAL單元移除。
- 對於outBitstream中之各殘餘VCL NAL單元，如下調整圖塊片段標頭：
- 對於各存取單元內之第一VCL NAL單元，設定first_slice_segment_in_pic_flag之值等於1，否則為0。
- 根據定義於具有pps_pic_parameter_set_id之PPS中之圖像塊設定，設定slice_segment_address之值等於slice_pic_parameter_set_id。
可將嵌套SEI訊息之MCTS提取資訊語法設計為：
| mcts_extraction_info_nesting( ) { | 描述符 |
| all_tile_sets_flag | u(1) |
| if( !all_tile_sets_flag ) { | |
| num_associated_mcts_identifiers_minus1 | ue(v) |
| for( i = 0; i ＜= num_associated_mcts_identifiers_minus1; i++ ) | |
| mcts_identifier[ i ] | ue(v) |
| } | |
| num_seis_in_mcts_extraction_seis_minus1 | ue(v) |
| while( !byte_aligned( ) ) | |
| mcts_nesting_zero_bit/* equal to 0 */ | u(1) |
| for( i = 0; i ＜= num_seis_in_mcts_extraction_seis_minus1; i++ ) | |
| sei_message( ) | |
| } |
關於語義，應注意，除MCTS提取資訊集合SEI訊息以外或替代的，可存在嵌套SEI訊息之MCTS提取資訊以形成資訊50。
嵌套SEI訊息之MCTS提取資訊提供機制以攜載嵌套SEI訊息及使嵌套SEI訊息與對應於一或多個運動受限制圖像塊集合之位元串流子集相關聯。
在如MCTS提取資訊集合SEI訊息之語義中所指定之子位元串流MCTS提取程序中，包含於嵌套SEI訊息之MCTS提取資訊中之嵌套SEI訊息可用於替換含有嵌套SEI訊息之MCTS提取資訊之存取單元中的未嵌套SEI訊息。
all _tile_sets_flag等於0，指定將mcts_identifier清單設定成由mcts_identifier[ i ]組成。all_tile_sets_flag等於1，指定清單mcts_identifier[ i ]由存在於目前存取單元中之temporal_motion_constrained_tile_sets SEI訊息之mcts_id[ ]之所有值組成。
num _associated_mcts_identifiers_minus1加1，指定在mcts_identifier之後之數目。num_associated_mcts_identifiers_minus1[ i ]之值應包括性的在0至2
32−2之範圍內。
mcts _identifier[ i ]識別與以下嵌套SEI訊息相關聯之圖像塊集合(其中mcts_id等於mcts_identifier[ i ])。mcts_identifier[ i ]之值應包括性的在0至2
32−2之範圍內。
num_seis_in_mcts_extraction_seis_minus1加1，指示隨後嵌套SEI訊息之數目。
mcts_nesting_zero_bit應等於0。
上文已指示，資訊50 (亦即，導引參數及/或SEI適應之資訊)之評定或產生可替代地在編碼器80外部(亦即，在將圖像12實際編碼成串流10執行處之位點的外部)執行。根據此類可替代例，可以伴隨著原始參數20a及/或僅關於未縮減串流10之原始SEI訊息之方式傳輸資料串流10。視情況，關於支援再一者之圖像12之sub區域22的資訊可在視訊串流10中存在，此甚至不係強制的，因為資訊50之評定可基於就其自身而言串流12之圖像塊結構之評價以便判定一或多個sub區域。藉此，儘管自編碼器位點將資訊50之評定之繁瑣任務移位至更接近用戶端之一些位點或甚至使用者位點(諸如，最終解碼器82之緊接著上游)，可藉由省去指代所需子區22外部之圖像12之區域之酬載部分18之部分70的傳輸來避免必須傳輸完全的(亦即，未縮減)資料串流10之必要性。原始寫碼參數集20a及/或關於未縮減資料串流12之SEI訊息亦應經自然地傳輸。執行實際減少或部分70之移除68之網路實體60可轉而駐留在執行資訊50之評定之實體的緊接著上游。舉例而言，串流裝置具體言之僅下載資料串流10之酬載部分18之不屬於部分70的部分。為此目的，可使用一些下載指令，諸如，資訊清單檔案。虛線方案可用於此目的。實際上，資訊50之評定可在存在於解碼器前方之此類網路裝置中內部地執行，僅作為分別地根據圖3或5之參數及/或SEI替換之實際參數調整的準備。總而言之，根據剛剛所論述之替代例，網路裝置可包含用於接收經縮減資料串流10的介面，該經縮減資料串流僅包含酬載部分18較少部分70，但仍具有將圖像12寫碼成酬載部分18 (包括部分70)之完全寫碼參數化的參數20a。位置指示32可仍為原始者。亦即，所接受資料串流實際上經錯誤地寫碼。所接收資料串流對應於展示於圖5中具有然而仍為原始參數20a之參數20b及仍為錯誤之位置指示32的資料串流62。在彼串流中之索引54指代在彼串流中之參數20a，且可並為已相對於未縮減資料串流之原始寫碼來修改。實際上，未縮減原始資料串流可僅不同於藉由部分70之省略所接受的一者。視情況，包括一或多個SEI訊息，然而該等SEI訊息指代原始寫碼，例如，完全寫碼之原始圖像12的大小或其他特性。在此類網路裝置之輸出處，用於藉由解碼器82解碼之資料串流62為輸出。在此輸入與輸出之間，將適應SEI訊息及/或參數以擬合就入埠資料串流10已經遭受減少而言之子區12的模組連接。亦即，此類模組應必須執行任務74 (亦即，參數20a之調整)以便變為參數20b，且執行任務78 (亦即，位置指示32之調整)以便恰當地指代子區22之圓周。在稍後特意地限制串流10之下載至指代子區22之酬載部分18之部分的情況下，關於就已執行減少而言之子區22的瞭解對於此類網路裝置可能為固有的，或在可駐留在網路裝置上游之另一網路裝置的情況下(假設減少68之任務)，可自外部來提供。對於包含在輸入與輸出之間的模組的網路裝置，如上文就圖4之網路裝置而言(例如，就以軟體、韌體或硬體之實施而言)之相同陳述為正確的。總結剛剛所概述之實施例，同樣係關於經組配以接收包含將視訊之圖像寫碼成酬載部分之一部分的資料串流的網路裝置。該部分對應於當自指代圖像之預定子區22外部之圖像之區域之酬載部分18排除部分70時的結果。在不排除之情況下以使用資料串流之參數集部分中之寫碼參數設定來參數化的方式將視訊之圖像12寫碼成酬載部分18。亦即，若不省去部分70，恰當地接收之資料串流之參數集部分將使圖像12寫碼成酬載部分18之寫碼參數化。另外或替代地，以無需排除匹配由資料串流之補充增強訊息指示之補充增強資訊的方式，將視訊之圖像12寫碼成酬載部分18。亦即，視情況由所接收資料串流組成之SEI訊息實際上匹配未縮減酬載部分18。網路裝置藉由改變78酬載部分中之位置指示32來修改所接收資料串流，以便指示自預定子區22之圓周而非圖像12量測之一位置，且調整參數集部分中之寫碼參數設定及/或調整補充增強資訊訊息，使得經修改之資料串流具有酬載部分18之部分(亦即，除70外之所有)或換言之，子區特定圖像84展示以使用因此調整之寫碼參數設定恰當地參數化之方式及/或以將補充增強資訊與由在調整之後之所調整補充增強資訊訊息指示之補充增強資訊匹配的方式在其中經編碼之圖像之預定子區。除參數20a以外，參數20b之產生已藉由編碼器80根據先前實施例來執行，以便產生攜載參數設定20a及20b兩者之資料串流。此處，在剛剛所描述之可替代例中，在準動態中將參數20a轉變為參數20b。將參數20a調整成參數20b之調整需要使用關於子區22瞭解之知識來修改參數20a。舉例而言，當設定20a內之圖像大小26對應於完全圖像12之大小時，圖像大小必須在設定20b中之調整之後分別地指示子區22或圖像86之大小。類似地，當設定20a內之圖像塊結構38對應於完全圖像12之圖像塊結構時，圖像塊結構38必須在設定20b中之調整之後分別地指示子區22或圖像86之圖像塊結構。舉例而言但非排他地，類似陳述對於緩衝區大小及時序46方面為正確的。若在入埠中未重新發送SEI訊息，則存在所接收資料串流，應不需要調整。替代地，可僅省去SEI訊息而非調整SEI訊息。
就以上實施例而言，應注意，補充增強資訊適應可關於緩衝區大小及/或緩衝區時序資料。換言之，視情況存在之SEI (其經調適或原始SEI與替換SEI之間不同，以符合經或經縮減視訊串流)內之資訊的類型可至少部分地關於緩衝區大小及/或緩衝區時序資料。亦即，串流10中之SEI資料可具有關於完全寫碼之緩衝區大小及/或緩衝區時序資料，同時替換SEI資料(其傳送除如就圖1而言所描述之前一者以外或如先前段中所描述即時產生)具有關於經縮減串流62及/或經縮減圖像86之緩衝區大小及/或緩衝區時序資料。
以下描述係關於本申請案之第二態樣，亦即，用於啟用不適於視訊編解碼器之通常矩形圖像形狀之視訊資料之較高效傳送。如前所述，就第一態樣而言，以下描述以一種介紹開始，亦即，當此類問題可發生以便激勵由以下所描述之實施例產生的優點時之應用的例示性描述。然而同樣應注意，此初步描述不應理解為限制隨後所描述實施例之寬度。除彼以外，應注意，接下來描述之本申請案之態樣亦可以有利的方法與上文所描述之實施例組合。亦在下文陳述關於此之細節。
接下來描述之問題由用於全景視訊之各種投影引起，尤其當應用諸如上文所描述子區提取之過程時。
例示性地，所謂的立方體投影係用於以下解釋。立方體投影為長方體投影之特定情況，亦稱為日晷投影。此投影描述當獲取場景之圖像表示時近似於大部分習知攝影機系統/晶體之轉化。將場景中之直線映射至所得影像中之直線，如圖14中所說明。
立方體投影目前應用長方體投影以映射立方體之環境至其六個面，自立方體之中心各具有90° × 90°視角。展示諸如立方體投影之結果為圖15中之圖像A。亦可能為通常影像中之六個面之其他佈置。
現為導出此類所得圖像A之更寫碼友好表示(亦即，較少未使用的影像區域130及矩形形狀)，可在圖像內移位影像修補程式(例如，如圖16中所說明)以導出圖像B。
自系統視角，理解圖像B (圖16)內之各種影像修補程式如何與圖像A中之原始(逐世界視圖)連續表示(亦即，額外資訊)空間地相關以導出在圖像B中給定表示之圖像A (圖15)係至關重要的。尤其在於伺服器側或網路元件上執行彼方法的情況下，該方法諸如在根據圖1至圖13之經寫碼結構域中之上文所描述之子區提取。在此情況下，僅如經由圖A中之不相交ROI 900所指示之圖像B之部分在末端裝置處為可用的。末端裝置必須能夠將給定(部分地)視訊之相關區域再映射至末端顯示器/呈現裝置預期之正確位置及區域。根據上文提取程序之更改經寫碼視訊位元串流之伺服器或網路裝置可視經更改之視訊位元串流而定產生及添加或調整各別發信移位發信。
因此，隨後所描述實施例提供在視訊位元串流內(矩形)指示圖像B之樣本群組的發信。另外，各組樣本在水平及垂直方向中關於圖像B之樣本的移位。在另一實施例中，位元串流發信包括明確關於圖像A之所得圖像大小之資訊。另外，樣本之預設明度及色度值未由樣本之所移位組覆蓋，或樣本原先藉由樣本之所移位組覆蓋。另外，可假定將圖像A之樣本之部分用圖像B中之對應樣本之樣本值初始化。
在圖17中之語法表中給出例示性實施例。
另一實施例利用用於屬於待移位之樣本組之樣本之指示的圖像塊結構發信。
就圖18而言，展示根據第二態樣之資料串流200之一實施例。資料串流200具有在其中經編碼之視訊202。應注意，圖18之實施例可經改善以指代僅經編碼成資料串流200之一個圖像，但為易化當根據第二態樣之實施例與本申請案之其他態樣中之任一者之實施例組合時之彼等實例之理解，圖18展示當資料串流200為視訊資料串流而非圖像資料串流時的實例。如剛剛所提及，資料串流200具有在其中經編碼之視訊202之圖像204。然而另外，視訊資料串流200包含移位資訊206。移位資訊具有以下重要性。實際上，資料串流200應必須輸送圖像204中之具有非矩形外圓周之圖像內容。圖18展示在參考符號200處之此類圖像內容之一實例。亦即，圖像內容208展示資料串流200係為輸送一個時戳(亦即，在一個圖像204內)之圖像內容。然而，實際圖像內容之外圓周210為非矩形。在圖18之實例中，實際圖像內容相反對應於立方體212之六個側之放捲繞，該立方體之側使用至立方體212之六個側上之編號1至6之常見分佈來在圖18中例示性地區別於彼此，亦即使得對置側之編號產生等於7的總和。因此，各側表示實際圖像內容208之一個子區域214，且可(例如)表示至根據此實例呈正方形形狀之各別子區域214上之完全三維全景場景之第六之合適的投影。然而，如上文已提及，子區域214亦可呈不同形狀，且可以不同於列及行中之常規佈置的方式經佈置於圖像內容208內。在任何情況下，208中描繪之實際圖像內容呈非矩形形狀，且因此完全包涵放捲繞之全景內容208之最小可能矩形目標圖像區域216具有未使用的部分130，亦即，未由關於全景場景之實際圖像內容佔據之部分。
因此，為了不「浪費」在資料串流200內所傳送之視訊202之圖像204中之圖像區域，圖像204以將當子區域214之空間相對佈置相對於其在目標圖像區域216內之佈置改變時的方式攜載完全實際圖像內容208。
如圖18中所說明，圖18說明當在圖像204至目標圖像區域216上之未失真或疊合複製之後，並不必須即刻將子區域之四個(亦即，子區域1、2、4及5)移位然而儘管必須將子區域3及6移位時的一實例。例示性地，在圖18中，移位為可由二維向量218所描述之純平動替換，但根據一替代實施例，可選擇更複雜的移位，諸如，另外包括當在一方面圖像204與另一方面目標圖像區域216之間移行時之各別子區域之縮放及/或反射(鏡像處理)及/或旋轉的移位。對於圖像204之至少一個預定子區域之集合中之各者，移位資訊206可指示目標圖像區域216內之各別子區域相對於圖像204至目標圖像區域216中未失真或未移位複製的移位。舉例而言，在圖18之實例中，移位資訊206可指示用於僅包涵子區域3及6之子區域214之集合的移位。替代地，移位資訊206可指示用於子區域214或所移位之子區域214之集合相對於目標區域216 (諸如，其左上方拐角)之一些預設點的移位。藉由預設，在圖像204內之殘餘子區域，在圖18之實例中，在其例如相對於該預設點未失真或疊合複製至目標圖像216上之後，如其殘餘即刻將1、2、4及5進行處理。
圖19說明，移位資訊可包含待移位之子區域214之計數220、指示目標圖像區域216、222之大小的目標圖像區域大小參數、(且對於n移位子區域中之各者)描述待移位之各別子區域214之移位218的座標224 (例如，量測相對於前面提及之預設點或當將圖像204內之其原始群集中之子區域214映射至目標區域216上時的其相對位置的移位)。除座標224以外，資訊206可包含用於待移位之各子區域214之縮放226，亦即，在將根據各別座標224所移位之各別子區域214映射在目標圖像區域216內時如何縮放各別子區域214的指示。縮放226可引起相對於未移位子區域214之放大或縮小。甚至替代地，可將水平及/或垂直反射及/或旋轉發信以用於各子區域214。且甚至進一步，對於待移位或佈置於目標區域216內之各子區域，移位資訊206可包含左上方拐角之座標及各別區域之右下方之座標，同樣兩者均針對預設點或當將各別子區域214映射至目標區域216上而無需移位時之各別邊角來量測。由此，可發信放置、縮放及反射。因此，可相對於圖像204中之其原始相對佈置將所傳輸圖像204之子區域214自由地移位。
移位資訊206可例如具有用於大於一個時戳或一個圖像204 (諸如，圖像204之序列或整個視訊202)之視訊202的時間間隔的範疇(亦即，有效性)。此外，圖18說明，資料串流200可視情況亦包含指示預設填充之預設填充資訊228，使用該預設填充，目標圖像區域之部分130在解碼側處待經填充，亦即，未由子區域214中之任一者覆蓋之彼等部分130，亦即，圖像204之移位或未移位子區域214中之任一者。舉例而言，在圖18之實例中，子區域1、2、4及5形成圖像204之未移位部分，該部分在圖18中展示為非陰影的，同時圖像204之剩餘部分(亦即，子區域3及6)在圖18中展示為陰影的，且此等六個子區域之全部均不覆蓋目標圖像區域216中之陰影部分130，之前子區域3及6根據資訊206移位，使得部分130應根據預設填充資訊228被填充。
圖20中說明適合於產生資料串流200之編碼器230。編碼器230僅伴有或提供具有指示為使用編碼器230亦編碼成資料串流200之圖像204的目標圖像區域所需之移位之資訊206的資料串流200。圖20另外說明，編碼器230可(例如)產生資料串流200 (諸如，圖1至圖13之實施例之資料串流10)以便以一致維持之方式為可縮減。換言之，可以以便亦實施圖1之編碼器80之方式實施編碼器230。出於說明之目的，圖20說明當根據圖18之實例將圖像204細分成子區域214之陣列(亦即，子區域之2×3陣列)時的情況。圖像204可對應於圖像12，亦即，對應於未縮減資料串流200之圖像。圖20例示性地說明就編碼器230呈現可縮減資料串流200而言之子區22。如就圖1而言所闡述，若干此類子區域22可存在。藉由此量測，網路裝置能夠減少資料串流200以便僅提取資料串流200之一部分以便獲得經縮減視訊資料串流，該經縮減視訊資料串流之圖像86僅展示子區22。在圖20中使用參考符號232來說明資料串流200可減少至且關於子區22之經縮減視訊資料串流。雖然未縮減視訊資料串流200之圖像204展示圖像204，但經縮減視訊資料串流232之圖像僅展示子區22。為提供接收經縮減視訊資料串流232 (其能夠用經縮減視訊資料串流232之圖像之內容填充目標圖像區域)之接收器(諸如，解碼器)，編碼器230可另外為視訊資料串流200提供特定針對子區22之移位資訊206'。在減少視訊資料串流200以產生經縮減視訊資料串流232的情況下，網路裝置(諸如，圖4之60)移除移位資訊206且僅將移位資訊206'接管至經縮減視訊資料串流232中。藉由此量測，接收器(諸如，解碼器)能夠將經縮減視訊資料串流232之圖像之內容(其係關於子區22之內容)填充至展示於圖18中之目標圖像區域216上。
同樣，應強調，圖20不應理解為限於可減少視訊資料串流。若視訊資料串流200為可縮減，則可使用不同於上文就圖1至圖13而言所呈現之概念的概念。
圖21展示可能的接收器：解碼器234接收視訊資料串流200或經縮減視訊資料串流232且自其重構其圖像，亦即分別地圖像204或僅基於經縮減視訊資料串流232展示子區22之圖像。接收器為解碼器且除解碼核心234以外包含使用移位資訊(亦即，在視訊資料串流200之情況下的206，而在經縮減視訊資料串流之情況下的206')以便基於圖像內容填充目標圖像區域216的移位器236。因此，移位器236之輸出為經填充用於各別資料串流200或232之各圖像的目標圖像區域216。如上文所闡述，目標圖像區域之一些部分仍末經圖像內容填充。視情況，呈現器238可隨後經連接至移位器236或至移位器236之輸出。呈現器238將內射投影應用至藉由目標圖像區域216 (或至少處於目標圖像區域之經填充區域內之其子區)形成之目標圖像，以便形成對應於目前查看之場景部分之輸出圖像或輸出場景240。藉由呈現器238執行之內射投影可為立方體投影之反向。
因此，以上實施例啟用全景或半全景場景或類似者之圖像資料之矩形逐區域填充。可如下提供特定語法實例。下文中，呈現一種呈偽程式碼(稱為RectRegionPacking (i))形式之語法實例，該偽程式碼指定如何將投影框架(亦即，216)之源矩形區域填充至填充框架之目標矩形區域上(亦即至204上)。可指示90、180或270度之水平鏡像處理及旋轉，且自區域之寬度及高度推斷垂直及水平重取樣。
aligned(8) class RectRegionPacking(i) {
unsigned int(32) proj_reg_width[i];
unsigned int(32) proj_reg_height[i];
unsigned int(32) proj_reg_top[i];
unsigned int(32) proj_reg_left[i];
unsigned int(8) transform_type[i];
unsigned int(32) packed_reg_width[i];
unsigned int(32) packed_reg_height[i];
unsigned int(32) packed_reg_top[i];
unsigned int(32) packed_reg_left[i];
}
語義如下。
以投影框架(亦即，216) (其中寬度及高度分別地等於proj_frame_width及proj_frame_height)中之像素為單位指示proj_reg_width[i]、proj_reg_height[i]、proj_reg_top[i]及proj_reg_left[i]。當若亦即圖像塊214之各別區域與圖18比較時，i為索引。proj_reg_width[i]指定投影框架之i-th區域之寬度。proj_reg_width[i]應大於0。proj_reg_height[i]指定投影框架之i-th區域之高度。proj_reg_height[i]應大於0。proj_reg_top[i]及proj_reg_left[i]指定所投影框架中之頂部樣本列及最左樣本行。該等值應在0 (包括0，指示所投影框架之左上拐角)分別地至proj_frame_height及proj_frame_width (不包括proj_frame_height及proj_frame_width)之範圍內。proj_reg_width[i]及proj_reg_left[i]應受限制使得proj_reg_width[i] + proj_reg_left[i]小於proj_frame_width。proj_reg_height[i]及proj_reg_top[i]應受限制使得proj_reg_height[i] + proj_reg_top[i]小於proj_frame_height。當投影框架216為立體時，proj_reg_width[i]、proj_reg_height[i]、proj_reg_top[i]及proj_reg_left[i]應使得藉由所投影框架上之此等領域識別之區域係在所投影框架之單一組成框架內。transform_type[i]指定已應用於所投影框架之i-th區域之旋轉及鏡像處理將其映射至經填充框架，且指定因此必須經反向以便將各別區域214映射回至區域216中之映射。自然地，可指示自圖像204至目標區域216之映射。當transform_type[i]指定旋轉及鏡像處理兩者時，在鏡像處理之後應用旋轉。自然地，應亦有可能為相反的。根據一實施例指定以下值，而可保留其他值：
1：未轉換；2：水平地鏡像處理；3：180度旋轉(逆時針)；4：在水平地鏡像處理之後180度旋轉(逆時針)；5：在水平地鏡像處理之後90度旋轉(逆時針)；6：90度旋轉(逆時針)；7：在水平地鏡像處理之後270度旋轉(逆時針)；8：270度旋轉(逆時針)。請注意，該等值對應於EXIF方向標記。
packed_reg_width[i]、packed_reg_height[i]、packed_reg_top[i]及packed_reg_left[i]分別地指定所填充框架中之區域(亦即，由圖像204中之圖像塊214覆蓋之區域)之寬度、高度、頂部樣本列及最左樣本行。對於包括性的在0至i-1之範圍內之j的任何值，藉由packed_reg_width[i]、packed_reg_height[i]、packed_reg_top[i]及packed_reg_left[i]指定之矩形應不與藉由packed_reg_width[j]、packed_reg_height[j]、packed_reg_top[j]及packed_reg_left[j]指定之矩形重疊。
總結且概括剛剛所概述之實例，上文進一步所描述之實施例不同之處可在於，對於區域中之各者或圖像214之圖像塊214，指示兩種矩形區域，亦即，各別區域或圖像塊214在目標區域216內覆蓋之區域及各別區域或圖像塊214在圖像區域204內覆蓋之矩形區域以及用於映射彼等兩種區域之間的各別區域或圖像塊214之圖像內容的映射法則，亦即反射及/或旋轉。可藉由發信不同大小之一對區域發信縮放。
在下文中，描述本申請案之第三態樣。第三態樣係關於一種視訊資料串流中之分佈存取點之有利的概念。特定言之，引入關於經編碼成視訊資料串流之圖像之一或多個子區之存取點。在下文中描述自其所得之優點。如同本申請案之其他態樣，第三態樣之描述應為描述存在之問題的介紹。如第一態樣之描述，此介紹例示性指代HEVC，但同樣此情況不應解釋為限制隨後所闡述之實施例以便指代HEVC及僅其擴展。
在上文呈現之TMCTS系統之上下文中，圖像塊特定隨機存取點可提供清晰益處。在圖像塊中在不同時間情況下之隨機存取應啟用跨越視訊序列內之圖像之位元速率峰值的較相等分佈。可將用於HEVC中之圖像特定隨機存取之所有機制或機制之子集轉移至圖像塊。
圖像特定隨機存取機制中之一者為經框內寫碼圖像或存取單元之指示，從其中在a)呈現次序或b)寫碼及呈現次序之後無圖像繼承對經框內寫碼圖像之前之圖像樣本的預測依賴性。換言之，在b)立即或a)自第一隨後後置圖像上任一者之情況下，指示參考圖像緩衝區重置。在HEVC中，在網路抽象層(NAL)經由特定NAL單元類型上發信此類存取單元，亦即，所謂的內部隨機存取點(IRAP)存取單元，諸如BLA、CRA (上文類別a兩者)或IDR (上文類別b)。下文進一步描述之實施例可例如經由新穎NAL單元類型使用NAL單元標頭位準指示或出於回溯相容性起見SEI訊息，該SEI訊息向解碼器或網路中間盒/裝置指示給定存取單元含有用於條件a)或b) (亦即，參考圖像緩衝區重置之一些形式)在每圖塊/圖像塊基礎上應用之至少一個經框內寫碼圖塊/圖像塊。另外，可經由就編碼器側上之圖像而言之圖塊標頭位準上之指示(另外或替代地，NAL單元類型信號化)來識別圖塊/圖像塊。解碼操作因此允許減少在提取之後解碼所需之DPB大小。
出於此目的，必須滿足用啟用fixed_tile_structure表達之約束，且在所指示存取單元之前之圖像塊之樣本不應藉由當前圖像之相同圖像塊(及任何其他圖像塊)參考。
根據一些實施例，經由子區域之間的時間預測，以使得對於經歷RA之各子區域，用作用於參考圖像中之時間預測之參考的圖像區域藉由被另外子區域覆蓋之圖像區域延伸，以及一旦此等另外子區域經受RA的方式，編碼器可限制寫碼依附性。在位元串流內例如以NAL單元或圖塊層級或SEI訊息指示此等圖圖塊/圖像塊/子區域。此類結構阻礙子區域之提取，但減少受限制時間預測之損失。子區域隨機存取(允許提取或不允許)之類型必須為可與位元串流指示區分的。
另一實施例藉由採用寫碼依賴性之某一結構利用以上發信機會之優勢。在此結構中，逐圖像隨機存取點以粗糙的時間粒度存在，該粒度使得能夠瞬時隨機存取而無需在某些時間瞬間處漂移及存在目前先進技術發信。
然而，以更精細時間粒度，寫碼結構允許逐圖像塊隨機存取，該逐圖像塊隨機存取使經框內寫碼圖像樣本隨時間之位元速率負擔朝向較少變化位元速率行為分佈。對於回溯相容性，可經由SEI訊息、保持各別圖塊作為非RAP圖像來發信此逐圖像塊隨機存取。
在子圖像位元串流提取程序中，經由基於指示圖像塊之上文SEI訊息所指示之NAL單元之類型的此類串流結構內的隨機存取，應經改變為如適於發信用於在所提取sub位元串流之各別圖像處之瞬時隨機存取之機會的逐圖像隨機存取。
就圖22而言描述本申請案之第三態樣之根據一實施例的視訊資料串流300。視訊資料串流300具有在其中經編碼之圖像302之序列，亦即，視訊304。如同之前描述之其他實施例，描繪圖像302之時間次序可對應於可符合或可不符合將圖像302編碼成資料串流300之解碼次序的呈現時間次序。亦即，儘管之前不就其他圖而言來描述，但視訊資料串流300可經細分成存取單元306之序列，其各自與圖像302中之一各別者相關聯，圖像302與存取單元306之序列相關聯之次序對應於解碼次序。
使用時間預測將圖像302編碼成視訊資料串流300。亦即，圖像302中之預測性地經寫碼圖像使用基於按解碼次序在各別圖像之前之一或多個時間參考圖像的時間預測來寫碼。
視訊資料串流300包含其至少兩種不同類型，如稍後所描述，而非僅具有一種類型之隨機存取圖像。特定言之，常見隨機存取圖像為當未使用時間預測時之圖像。亦即，以獨立於按解碼次序任何先前圖像之方式來寫碼各別圖像。對於此等常見隨機存取圖像，時間預測之暫時中止係關於完全圖像區域。根據下文描述之實施例，視訊資料串流300可包含或可不包含此類常見逐圖像隨機存取圖像。
如剛剛所描述，隨機存取圖像並不視按解碼次序之先前圖像而定。因此，其允許至解碼視訊資料串流300中之隨機存取。然而，無需時間預測之寫碼圖像意謂關於壓縮效率之寫碼懲罰。因此，常見視訊資料串流在隨機存取圖像處遭受位元速率峰值，亦即位元速率最大值。可藉助於上文所描述之實施例來解決此等問題。
根據圖22之實施例，視訊資料串流300包含類型A (其經編碼成視訊資料串流300，同時至少在第一圖像子區A內暫時中止時間預測以形成一或多個第一隨機存取點之集合)之一或多個圖像之第一集合及類型B (其經編碼成視訊資料串流300，同時在不同於第一圖像子區A第二圖像子區B內暫時中止時間預測以形成視訊資料串流300之一或多個第二隨機存取點之集合)之一或多個圖像之第二集合。
在圖22之情況下，使用陰影線來說明第一及第二圖像子區A及B，且如圖23a中所說明彼此不重疊，其中子區A及B沿共同邊緣308彼此鄰接使得子區A及B覆蓋圖像302之整個圖像區域。然而，情況未必如此。如圖23b中所展示，子區A及B可部分地重疊，或如圖23c中所展示，第一圖像區域A可實際上覆蓋圖像302之整個圖像區域。在圖23c的情況下，類型A之圖像應為當完全斷開時間預測時之逐圖像隨機存取點，亦即，經編碼成資料串流300而無需貫穿各別圖像之任何時間預測。出於完整性起見，圖23d展示，子區B並不需要定位於圖像區域302之內部中，但亦可毗鄰兩個圖像302的外部邊緣310。圖23e說明，除類型A及B之圖像以外，可存在具有所關聯子區C 之類型C之圖像，該等圖像一起完全覆蓋圖像302的圖像區域。
圖22之圖像B及A內之區域(在其中，時間預測係暫時中止的)限制至子區A及B之結果如下：通常用於將圖像302編碼成視訊資料串流300之位元速率較大以供圖像形成隨機存取點，此係因為避免貫穿各別圖像區域使用時間預測且打破自先前圖像(按解碼次序)之預測用於連續圖像(至少按呈現次序)。在圖22中之類型A及B之圖像的情況下，避免使用時間預測分別地用於子區A及B，僅使得在此等圖像A及B處之位元速率峰值312與逐圖像隨機存取點圖像相比相對較低。然而如以下文中所描述，除在子區邊界處之寫碼依賴性約束(至少就完全圖像隨機存取速率而言)以外，位元速率峰值312之減少得到相對較低成本。此在圖22中說明：此處，曲線314應表示展示視時間t而定之位元速率之時間變化的函式。如所闡述，在圖像A及B之瞬間時之峰值312低於將由逐圖像隨機存取圖像產生之峰值。與僅使用逐圖像隨機存取圖像之情況相比，視訊資料串流300之圖像相關聯隨機存取速率對應於穿過子區相關聯隨機存取圖像(一起覆蓋整個圖像區域)之速率(在圖22之情況下，遇到類型B之至少一個圖像及類型一之至少一個圖像之速率)。甚至在視訊資料串流300內之常見逐圖像隨機存取圖像之存在的情況下，如在圖23c之實例中之情況一樣(亦即圖像A)，當僅此類圖像係時間上分佈於視訊資料串流上時對於常見視訊資料串流存在優點。特定言之，在此情況下，可為如下文更詳細地闡述來採用子區相關聯隨機存取圖像(在圖23c之情況下亦即圖像B)之存在，以便降低與較高位元速率峰值一起出現之圖像A之圖像速率，但隨著補償藉由將類型B之圖像散置至類型A之圖像之間的視訊資料串流300中之增加的隨機存取時延，由此允許至視訊資料串流中之子區受限隨機存取橋連時間直至遇到下一逐圖像隨機存取點，亦即，下一圖像A。
在進行利用視訊資料串流300內之隨機存取圖像之特定類型的解碼器的描述之前，應對子區B及/或子區A及方法作一些註釋，該方法為藉由考慮子區超出子區A及B內之時間預測之暫時中止同時應用子區A及B外部之相同圖像內的時間預測來將圖像302編碼成視訊資料串流300的方法。
使用虛線框316，圖22說明經組配以將圖像302編碼成視訊資料串流300以便分別地包含剛剛概述之圖像A及B的視訊編碼器。如上文已概述，視訊編碼器316可為使用運動補償之預測用於將圖像302編碼成視訊資料串流300之混合視訊編碼器。視訊編碼器316可使用任何GOP (圖像之組) (諸如，開口GOP結構或閉合GOP結構)結構以便將圖像302編碼成視訊資料串流300。就子區相關聯隨機存取圖像A及B而言，此意謂，視訊編碼器316散置在圖像302圖像之間，其之子區(亦即，A或B)並不視按解碼次序之任何先前圖像而定。隨後將描述，此類子區B及/或A可對應於根據圖1至圖13之實施例之子區22，亦即，就其而言視訊資料串流300為可縮減子區。然而，儘管此僅為一實例且可縮減性不為視訊資料串流300之必需特徵，但應注意，若以服從子區B及/或A之邊界之方式以類似於承前上文就關於圖1至圖13之子區22之邊界而言的描述的方式，來將圖像312編碼成視訊資料串流300係有利的。
特定言之，儘管視訊資料串流300中之編碼圖像302中之空間寫碼依賴性機制之達成通常較短，但若以使得用於寫碼各別子區B/A之寫碼依賴性並不跨越各別子區之邊界以免引入對各別子區之外部或空間相鄰的寫碼依賴性的方式來將子區相關聯隨機存取圖像(在圖22的情況下，亦即圖像A及B)編碼成視訊資料串流300係有利的。亦即，在各別子區B/A內，在無時間預測之情況下及在無對各別子區A/B外部之各別圖像之部分的空間寫碼依賴性之情況下，寫碼子區相關聯隨機存取圖像A及B。除此以外，若以考慮部分之部分邊界(就其而言，緊接著前置部分特定隨機存取圖像形成子區特定隨機存取點)的方式，來亦將隨機存取圖像A及B之間的圖像編碼成視訊資料串流300則係有利的。
舉例而言，在圖22中，圖像B形成就子區B而言之子區特定隨機存取點，且因此若以考慮部分B之邊界的方式，來將在此圖像B之後且在下一子區域隨機存取圖像(亦即，圖像A)之第一次出現之前的圖像302 (使用大括號317來例示性地指示此序列)寫碼可為有利的。特定言之，若以使得將此等圖像以使得其部分並不視此等圖像之任何部分或部分B外部之自身圖像B而定的方式寫碼成視訊資料串流300的方式，來將空間及時間預測及用於將此等圖像寫碼成視訊資料串流300之寫碼依賴性限制係有利的。就運動向量而言，例如，視訊編碼器316將可用於將圖像B與圖像A之間的圖像之部分B寫碼的運動向量限制，以免指向圖像B及圖像B及圖像A與之間的圖像(其將延伸超出參考圖像之B之子區)中之參考圖像之部分。除彼以外，如圖像B形成就子區B而言之隨機存取點，用於時間預測圖像317之子區B之時間參考圖像不應處於相對於圖像B的上游。以類似方式(亦即，以免引入對子區B外部之鄰近部分的依賴性)，用於將圖像B與圖像A之間的中間圖像之子區B寫碼的空間依賴性應受限。同樣，可視應用而定減輕此限制，且此外，除此以外，參考圖1至圖13就針對漂移誤差之可能防範措施而言的描述。同樣，剛剛就隨機存取圖像之間的圖像而言所論述之限制(在其中，前置圖像為子區特定隨機存取圖像，諸如，圖像B)，可僅就時間預測而言來應用，而空間依賴性具有就漂移誤差而言較低嚴重效果。
承前緊接著前述段之論述係關於用於將逐子區隨機存取圖像B之即時後續圖像317 (就按解碼次序而言)僅就子區B內之圖像317之寫碼而言來寫碼的寫碼依賴性的限制，亦即，就該子區而言即時前置隨機存取圖像(亦即，圖像B)形成子區域特定隨機存取點的子區。一問題(應自其分開地處理)為用於寫碼圖像317在部分B外部(在圖22的情況下，亦即子區A)內的寫碼依賴性是否應或不應受限以便呈現視子區B而定之圖像317之外部部分的寫碼的問題。亦即，問題為，圖像317之子區A是否應以使得例如空間寫碼依賴性受限以免伸出至相同圖像之部分B中的方式來寫碼，及用於寫碼圖像317之子區A的時間寫碼依賴性是否應以以免伸出至參考圖像(其為圖像B中之一者或前述寫碼/解碼次序中之圖像317中之任一者)之子區B中的方式受限。為甚至更精確，應注意，用於寫碼圖像317之子區A之參考圖像可一方面屬於先前圖像317之經寫碼/經解碼圖像及另一方面前置隨機存取圖像B中之一者，或可處於相對於圖像B之上游(按解碼次序)。對於處於相對於圖像B上游之參考圖像，用於寫碼任一圖像317之子區A之時間寫碼依賴性仍受限以免伸出至子區B中。相反，此處論述之問題為，用於寫碼圖像317之子區A之任何寫碼依賴性是否受限或不受限以免伸出至部分B中，就內部或空間寫碼依賴性而言，或就為圖像B中之一者之參考圖像及圖像317中之任何先前經寫碼/經解碼圖像而言的時間寫碼依賴性。兩個替代例均具有其價值。若當圖像317之寫碼子區A (亦即，用於寫碼子區A之寫碼依賴性)受限以免伸出至子區B中時亦服從圖像B及圖像317之子區B之子區邊界，則以獨立於部分B之方式繼續將子區A寫碼且因此形成就其而言資料串流300可如上文所論述為可提取的或可縮減子區。當考慮就緊接著子區特定隨機存取圖像A之後之圖像之子區B之寫碼而言的相同情形時，其應用於子區B。若對於某一子區(諸如，子區A及/或子區B)之可縮減性並不重要，則在允許剛剛論述之寫碼依賴性伸出至子區(就其而言，緊接著前述逐部分隨機存取圖像形成子區特定隨機存取點)中的情況下就寫碼效率而言其可為有益的。在彼情況下，其他子區(諸如，剛剛承前所論述中之子區A)應不再為可縮減的，但寫碼效率經增加，由於視訊編碼器316具有就冗餘之採用(其藉助於例如選擇運動向量以便跨越子區B之邊界以便基於此等圖像或圖像B中之任一者之子區B時間預測圖像317之子區A之一部分)而言之較少限制。舉例而言，若下文已完成，就區域A而言資料串流300應不再為可縮減的。以使用時間預測(其至少部分地指代圖像317及圖像B中之參考圖像之第二圖像子區B)的方式，應將圖像317編碼成第二圖像子區B外部之圖像區域A內的視訊資料串流300。亦即，在圖22的情況下，完全圖像區域應可用於藉由時間預測性地圖像317 (亦即，不僅A且亦B)之寫碼區域A參考。就解碼次序而言圖像A之後之圖像317' (亦即，A與中圖22未展示之隨後類型B之圖像之間的圖像317')應藉由限定時間預測在第二圖像子區B外部之圖像區域A內以免指代就解碼次序而言圖像A及圖像317'中之前述參考圖像之第二圖像子區B來經編碼成視訊資料串流300。亦即，在圖22的情況下，僅區域A應可用於時間預測性地寫碼圖像317'之區域A參考。同樣對於子區B係正確的：圖像B黏附於子區B內之子區B，而圖像B中之寫碼亦具有除子區A以外之可用的A。在彼情況下，串流，300應就子區B而言不再為可縮減的。
在執行描述經組配以解碼圖22之視訊資料串流300之解碼器之前，應注意，視訊編碼器316可經組配以為視訊資料串流300提供信號化319，該信號化在關於整個視訊304或包涵圖像302之序列之範疇下指示將對應圖像空間細分成子區A及B或根據諸如例示於圖23a至圖23e中之彼等的替代例中之任一者。編碼器316亦為資料串流300提供指示圖像A及B之信號化318，亦即，關於由信號化319指示之子區中之任一者將某些圖像標記為子區特定隨機存取點的信號化318。亦即，信號化319發信其在信號化319有效用於之圖像中為恆定的空間細分，且信號化318將子區特定隨機存取圖像與其他圖像相區別並使此等子區隨機存取圖像相關聯至子區A及B中之一者。
應有可能的係，就圖像類型而言，不特定地在一方面圖像B及A與另一方面其他圖像之間的視訊資料串流300內區分。在圖22之實例中，圖像B及圖像A為「僅」子區特定隨機存取圖像，且因此不為真實逐圖像隨機存取圖像，諸如，IDR或類似者。因此，就視訊資料串流300內之圖像類型信號化320而言，視訊資料串流300可並不一方面圖像B及圖像A與另一方面其他時間預測圖像之間作區分。信號化318可例如包含於圖塊或此等圖塊之圖塊標頭中，以該等圖塊為單位，圖像302經寫碼成串流300，由此指示對應於各別圖塊之圖像區域形成部分B。替代地，可使用信號化320及318之組合，以便指示解碼器，某一圖像為子區特定隨機存取圖像及其屬於某一子區。舉例而言，可使用信號化320，以便指示，某一圖像為子區特定隨機存取圖像，然而同時不揭露各別圖像表示子區特定隨機存取點的子區。後者指示應藉由信號化318來執行，該信號化藉由信號化320關聯子區特定隨機存取圖像的某一圖像發信，其中藉由信號化319將圖像細分之子區中之任一者發信。然而，其可替代地可為，可為NAL單元類型語法元素之信號化320不僅在時間預測圖像(諸如，B圖像及P圖像)、逐圖像隨機存取圖像(諸如，IDR圖像)與逐子區隨機存取點(諸如，圖像A及B)之間作區分或區別，且亦在關於不同子區之逐子區隨機存取點之間(亦即，在圖像A與圖像B之間)藉由用於圖像A及B中之各者花費不同值來作區分或區別。
可藉由視訊編碼器316***另一信號化321以為資料串流300就各別子區而言應為可縮減的或不可縮減的某一子區發信。可在資料串流300內以允許子區中之一者發信作為子區(就其而言，資料串流300為可縮減的)之方式發信信號化321，而另一子區並不形成此類子區(就其而言，資料串流300為可縮減的)。替代地，信號化321可僅允許就所有子區而言之可縮減性之二進位信號化，亦即，信號化321可發信所有子區為子區(就其而言，資料串流300為可縮減的)或發信資料串流300對此等子區中之任一者為不可縮減的。然而，隨著子區(諸如，在圖22之實例中之子區A及B)分別地經處理作為完全獨立地寫碼子區(就其而言，資料串流300為可縮減的)或不經處理的效果，亦可省去信號化321，在此情況下，上文所概述之跨越子區邊界之不對稱寫碼依賴性用作先前所闡述。
儘管迄今為止，說明子區B及A為連續區域，但應注意，子區B及A可替代地可為未連續區域(諸如，圖像302之圖像塊之集合)，其中參考圖1至圖13就關於圖像塊特定處理而言之描述，根據此實例，至該等圖像塊中圖像302可經寫碼成資料串流300。
就圖23c而言，應注意，由於圖像A應為逐圖像隨機存取圖像，所以圖像A之圖像類型應不同於其他時間預測圖像之彼等類型，且因此應在圖像類型信號化320內發信圖像A。
圖24展示以利用圖像B及A之方式經組配以解碼視訊資料串流300的視訊解碼器330。以對應於圖22之描述方式例示性地展示圖24之視訊資料串流300，亦即，在經編碼成視訊資料串流300之視訊304之圖像302之間散置子區相關聯隨機存取圖像B。在隨機存取視訊資料串流300中，視訊解碼器330經組配以等待下一隨機存取圖像發生，亦即，任何子區相關聯或逐圖像隨機存取圖像。在視訊資料串流300不包含逐圖像隨機存取圖像之情況下，視訊解碼器330甚至可不回應於此類圖像。在任何情況下，視訊解碼器330一遇到第一子區相關聯隨機存取圖像(其為在圖24之實例中之圖像B)，視訊解碼器330就恢復解碼視訊資料串流300。以此圖像B開始，視訊解碼器330開始重構解碼及輸出僅展示子區B之圖像322。替代例應為，在具有或不具有發信隨附此等圖像何者指示向呈現裝置(諸如，顯示裝置或類似者)之情況下，視訊解碼器330亦解碼、重構及輸出子區B外部之此等圖像322之部分，由於遺失此外部子區，此等圖像之子區B外部之部分遭受作為參考圖像之漂移誤差。
視訊解碼器330以此方式保持解碼視訊資料串流300直至遇到下一隨機存取圖像(其為在圖24之實例中之圖像A)。子區A表示用於殘餘圖像區域(亦即，子區B外部之圖像302之區域)之隨機存取點，視訊解碼器330完全地自圖像A向前解碼、重構及輸出圖像302。亦即，藉助於就圖24而言功能性描述，使用者具備獲得較早看到視訊304之優勢的機會，至少就子區B (亦即，第一遇到子區相關聯隨機存取圖像B之子區)而言。接著，在已遇到關於覆蓋圖像302之剩餘部分之子區之下一子區相關聯隨機存取圖像之後，視訊解碼器330能夠提供完全圖像302而無漂移誤差。在圖23e之實例中，此應為在已遇到分別地關於子區A、B及C之子區特定隨機存取圖像中之各者中之第一者之後的情況。
圖25說明視訊解碼器330之替代性操作模式。此處，視訊解碼器330開始自遇到第一子區特定隨機存取圖像(此處為圖像B)向前解碼及重構子區B，但視訊解碼器330等待直至已遇到足夠隨機存取圖像使得其子區覆蓋圖像302之整個圖像區域直至視訊解碼器330實際上完全輸出圖像302。在本實例之情況下，此為在已遇到圖像B後之圖像A之後的情況。亦即，自圖像A向前，視訊解碼器330輸出圖像302，儘管子區B應已從圖像B向前可用。
圖26展示接收包括子區特定隨機存取圖像之視訊資料串流300之網路裝置322。然而，此時視訊資料串流300就子區特定隨機存取圖像之子區中之一或多者而言為可縮減的。舉例而言，圖26說明當視訊資料串流300就子區B而言為可縮減的時之情況。就可縮減性及網路裝置322之對應功能性而言，應注意，以對應於圖1至圖13之描述之方式組配此功能性為可能的或不可能的。在任何情況下，在視訊資料串流300內使用前述信號化318指示圖像B。在縮減視訊資料串流300以便僅與圖像B相關的情況下，網路裝置322自視訊資料串流300提取或縮減視訊資料串流300至經縮減視訊資料串流324，該經縮減視訊資料串流之圖像326形成僅展示亦即未縮減的視訊資料串流300之視訊304之子區B之內容的視訊328。然而，如藉由此量測，子區B不再表示就圖像326而言之子區，經縮減視訊資料串流324不再包含信號化318。相反，在經縮減視訊資料串流324內藉助於逐圖像隨機存取圖像(諸如，IDR圖像或類似者)之圖像類型信號化320，將對應於視訊資料串流之子區特定隨機存取圖像B之子區B之視訊328的圖像發信。複寫可進行此的方法。舉例而言，除在以對應於網路裝置60之方式組配之網路裝置322的情況下的上文關於圖5及圖7所描述之重定向及/或參數集校正以外，網路裝置322可改變在朝向就其自身而言經縮減的視訊資料串流324之縮減視訊資料串流300中對應NAL單元之NAL單元標頭中之圖像類型信號化320。
出於完整性起見，圖27展示經配置以處理圖20之資料串流20之網路裝置231。然而，圖20展示，資訊206'可或可不已存在於可縮減的視訊資料串流200中，諸如，在資訊50內。經由此，如上文已所描述，網路裝置231可經組配以，僅藉由接管自視訊資料串流200至經減少的視訊資料串流232之子區特定移位資訊206'，在減少視訊資料串流200至經減少的視訊資料串流232中丟棄移位資訊206，或網路裝置231可形成移位資訊206之重調整以便就其自身而言基於關於可減少的視訊資料串流200之圖像之子區22之位置之知識變為子區特定移位資訊206。
因此，上文描述揭露用於例如時間運動及層間預測受限制之圖像塊集合之提取的處理及發信。亦描述使用單一或多層視訊寫碼之經寫碼視訊位元串流之提取或空間子集。
就上文描述而言，應注意，任何所展示之編碼器、解碼器或網路裝置可以硬體、韌體或軟體來體現或實施。當以硬體實施時，各別編碼器、解碼器或網路裝置可(例如)以特殊應用積體電路之形式來實施。若以韌體實施則各別器件可實施為場可程式化陣列，且若以軟體實施則各別器件可為處理器或電腦程序性的以執行所描述功能性。
儘管已在裝置之上下文中描述一些態樣，但顯而易見，此等態樣亦表示對應方法之描述，其中區塊或器件對應於方法步驟或方法步驟之特徵。類似地，方法步驟之上下文中所描述之態樣亦表示對應區塊或項或對應裝置之特徵的描述。可由(或使用)硬體設備(如(例如)微處理器、可程式化電腦或電子電路)來執行方法步驟中之一些或全部。在一些實施例中，可由此類設備執行最重要之方法步驟中之一或多者。
本發明的經編碼資料串流或信號可儲存於數位儲存媒體上或可在諸如無線傳輸媒體之傳輸媒體或諸如網際網路之有線傳輸媒體上傳輸。只要已描述一些資訊***至資料串流中或編碼成資料串流，則此描述應同時被理解為所得資料串流包含各別資訊、旗標之語法元素或等之揭示內容。
視某些實施要求而定，本發明之實施例可以硬體或在軟體來實施。實施可使用數位儲存媒體來執行，該數位儲存媒體例如軟性磁碟、DVD、Blu-Ray、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體，該數位儲存媒體上儲存有電子可讀控制信號，該電子可讀控制信號與可程式化電腦系統協作(或能夠協作)使得執行各別方法。因此，數位儲存媒體可為電腦可讀的。
根據本發明之一些實施例包含具有電子可讀控制信號之資料向量，該等控制信號能夠與可程式化電腦系統協作，使得執行本文中所描述之方法中之一者。
一般而言，本發明之實施例可實施為具有程式碼之電腦程式產品，當電腦程式產品在電腦上運行時，程式碼操作性地用於執行該等方法中之一者。程式碼可例如儲存於機器可讀向量上。
其他實施例包含儲存於機器可讀向量上的用於執行本文中所描述之方法中的一者的電腦程式。
換言之，因此，本發明之方法之一實施例為具有用於當電腦程式在電腦上運行時執行本文中所描述之方法中之一者的程式碼之電腦程式。
因此，本發明之方法之另一實施例為資料向量(或數位儲存媒體或電腦可讀媒體)，該資料向量包含記錄於其上的用於執行本文中所描述之方法中的一者之電腦程式。資料向量、數位儲存媒體或所記錄媒體通常係有形的及/或非瞬變的。
因此，本發明方法之另一實施例為表示用於執行本文中所描述之方法中的一者之電腦程式之資料串流或信號序列。資料流或信號序列可例如經組配以經由資料通訊連接(例如，經由網際網路)而轉移。
另一實施例包含處理構件，例如，經組配或經調適以執行本文中所描述之方法中的一者的電腦或可程式化邏輯裝置。
另一實施例包含其上安裝有用於執行本文中所描述之方法中之一者之電腦程式的電腦。
根據本發明之另一實施例包含經組配以將用於執行本文中所描述之方法中之一者的電腦程式轉移(例如，電子地或光學地)至接收器的設備或系統。接收器可例如為電腦、行動裝置、記憶體裝置或類似者。設備或系統可例如包含用於將電腦程式轉移至接收器之檔案伺服器。
在一些實施例中，可程式化邏輯裝置(例如，場可程式化閘陣列)可用於執行本文中所描述之方法的功能性中之一些或所有。在一些實施例中，場可程式化閘陣列可與微處理器協作，以便執行本文中所描述之方法中之一者。一般而言，該等方法較佳地由任一硬體設備執行。
本文中所描述之設備可使用硬體設備或使用電腦或使用硬體設備與電腦之組合來實施。
本文中所描述之設備或本文中所描述之設備的任何組件可至少部分地以硬體及/或以軟體來實施。
本文中所描述之方法可使用硬體設備或使用電腦或使用硬體設備與電腦的組合來執行。
本文所描述之方法或本文中所描述之設備的任何組件可至少部分地由硬體及/或由軟體執行。
上文所描述之實施例僅說明本發明之原理。應理解，對本文中所描述之佈置及細節的修改及變化將對本領域熟習此項技術者顯而易見。因此，其僅意欲由接下來之申請專利範圍之範疇限制，而非由藉助於本文中實施例之描述及解釋所呈現的特定細節限制。
由上述討論，將可理解，本發明可以多種實施例形式體現，包含但不限於下列：
1. 一種表示一視訊的視訊資料串流，其包含：
一參數集部分，其指出寫碼參數設定；
一酬載部分，該視訊之圖像以使用該等寫碼參數設定之一第一集合參數化的方式來寫碼到該酬載部分中，該第一集合藉由由該酬載部分組成之索引來索引，
其中該視訊資料串流包含一資訊，該資訊包含：
對該等圖像之一預定子區之一指示，以及
替換索引及/或替換參數，該等替換索引用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定之一第二集合，該等替換參數用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定之該第二集合，
其中寫碼參數之該第二集合係選擇成使得與該視訊資料串流相比一經減少的視訊資料串流藉由以下操作修改：
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便以自該預定子區之一周邊而非該等圖像量測之方式指出一位置，
該經減少的視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以使用寫碼參數設定之該第二集合參數化的方式編碼到其中之子區特定圖像，該等子區特定圖像展示該等圖像之該預定子區。
2. 如實施例1之視訊資料串流，其中該視訊資料串流及該經減少視訊資料串流符合HEVC。
3. 如實施例1或2之視訊資料串流，其中該參數集部分由SPS NAL單元及/或VPS NAL單元及/或PPS NAL單元組成。
4. 如實施例1至3中任一實施例之視訊資料串流，其中該等寫碼參數設定定義以下各者中之一或多者：
圖像大小，
圖像塊結構，
緩衝區大小及時序。
5. 如實施例1至4中任一實施例之視訊資料串流，其中該等索引包含於該酬載部分之圖塊之圖塊標頭中，各圖塊具有編碼於其中之並不跨越該預定子區之一邊界之一圖像之一對應區域。
6. 如實施例1至5中任一實施例之視訊資料串流，其中該資訊包含於一SEI訊息、一VUI或一參數集擴展中。
7. 如實施例1至6中任一實施例之視訊資料串流，其中該酬載部分具有以圖像塊為單位寫碼於其中之該視訊之該等圖像，其中該等圖像經細分成圖像塊且該等圖像塊呈多行及多列之一圖像塊陣列佈置，其中該指示將該預定子區指示為該等圖像塊之一集合。
8. 如實施例7之視訊資料串流，其中該酬載部分具有以圖像塊為單位寫碼於其中之該視訊之該等圖像，使得該酬載部分以圖塊為單位細分，各圖塊具有編碼於其中之並不跨越該等圖像塊之間的一圖像塊邊緣之一圖像之一對應區域。
9. 如實施例1至8中任一實施例之視訊資料串流，其中：藉由待自其執行藉由該等替換索引進行之該重定向、及/或由該等替換參數替換之該等索引予以索引之寫碼參數設定之該第一集合的一部分，係關於以下各者中之一或多者：
圖像大小，
圖像塊結構，
緩衝區大小及時序。
10. 如實施例1至9中任一實施例之視訊資料串流，其中該酬載部分具有寫碼於其中之該視訊之該等圖像，使得在該預定子區內，該等圖像用跨越該預定子區之邊界之時間預測之中斷來寫碼。
11. 一種用於將視訊編碼成視訊資料串流的編碼器，其包含：
一參數調節器，其組配來判定寫碼參數設定及產生指出該等寫碼參數設定之該視訊資料串流之一參數集部分；
一寫碼核心，其組配來將該視訊之圖像以使用該等寫碼參數設定之一第一集合參數化的方式編碼入該視訊資料串流之一酬載部分，該第一集合藉由由該酬載部分組成的索引來索引，
其中該編碼器組配來為該視訊資料串流提供一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
替換索引及/或替換參數，該等替換索引用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定的一第二集合，該等替換參數用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定的該第二集合，
其中寫碼參數之該第二集合係選擇成使得與該視訊資料串流相比一經減少視訊資料串流藉由以下操作修改：
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便以自該預定子區之一周邊而非該等圖像量測之方式來指出一位置，
該經減少視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以使用寫碼參數設定之該第二集合參數化的方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該子區。
12. 如實施例11之編碼器，其中該視訊資料串流及該經減少視訊資料串流符合HEVC。
13. 如實施例11或12之編碼器，其中該參數集部分由SPS NAL單元及/或VPS NAL單元及/或PPS NAL單元組成。
14. 如實施例11至13中任一實施例之編碼器，其中該等寫碼參數設定定義以下各者中之一或多者：
圖像大小，
圖像塊結構，
緩衝區大小及時序。
15. 如實施例11至14中任一實施例之編碼器，其中該編碼器組配來將該等索引***該酬載部分之圖塊之圖塊標頭中，且將並不跨越該預定子區之一邊界之一圖像之一對應區域編碼入各圖塊。
16. 如實施例11至15中任一實施例之編碼器，其中該編碼器組配來將該資訊***一SEI訊息、一VUI或一參數集擴展中。
17. 如實施例11至16中任一實施例之編碼器，其中該編碼器組配來將以圖像塊為單位寫碼之該視訊之該等圖像編碼入該酬載部分，該等圖像經細分為圖像塊且該等圖像塊以多行及多列之一圖像塊陣列佈置，其中該指示將該預定子區指示為該等圖像塊之一集合。
18. 如實施例17之編碼器，其中該編碼器組配來將以圖像塊為單位寫碼之該視訊之該等圖像編碼入該酬載部分，使得該酬載部分以圖塊為單位細分，各圖塊具有編碼於其中之並不跨越該等圖像塊之間的一圖像塊邊緣之一圖像之一對應區域。
19. 如實施例11至18中任一實施例之編碼器，其中：藉由待自其執行藉由該等替換索引進行之該重定向、及/或由該等替換參數替換之該等索引予以索引之寫碼參數設定之該第一集合的一部分，係關於以下各者中之一或多者：
圖像大小，
圖像塊結構，
緩衝區時序。
20. 如實施例11至19中任一實施例之編碼器，其中該編碼器組配來將該視訊之該等圖像編碼入該酬載部分，使得在該預定子區內，該等圖像用跨越該預定子區之邊界之時間預測的中斷來寫碼。
21. 一種用於處理視訊資料串流之網路裝置，該視訊資料串流包含：
一參數集部分，其指出寫碼參數設定；
一酬載部分，其中該視訊之圖像以使用該等寫碼參數設定之一第一集合參數化的方式來寫碼到該酬載部分中，該第一集合藉由由該酬載部分組成之索引來索引，
其中該網路裝置組配來：
自該視訊資料串流讀取一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
替換索引及/或替換參數，該等替換索引用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定的一第二集合，該等替換參數用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定的該第二集合，
將該視訊資料串流縮減至藉由以下操作修改的一經縮減視訊資料串流：
執行該重定向及/或調整，以使得寫碼參數設定之該第二集合由該酬載部分的索引予以索引；
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便指出自該預定子區之一周邊而非該等圖像量測之一位置，
使得該經縮減視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以使用寫碼參數設定之該第二集合參數化的方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該預定子區。
22. 如實施例21之網路裝置，其中該視訊資料串流及該經縮減視訊資料串流符合HEVC。
23. 如實施例21或22之網路裝置，其中該參數集部分由SPS NAL單元及/或VPS NAL單元及/或PPS NAL單元組成。
24. 如實施例21至23中任一實施例之網路裝置，其中該等寫碼參數設定定義以下各者中之一或多者：
圖像大小，
圖像塊結構，
緩衝區大小及時序。
25. 如實施例21至24中任一實施例之網路裝置，其中該網路裝置組配來將該等索引定位在該酬載部分之圖塊之圖塊標頭中，各圖塊具有編碼於其中的並不跨越該預定子區之一邊界之一圖像之一對應區域。
26. 如實施例21至25中任一實施例之網路裝置，其中該網路裝置組配來從該視訊資料串流之一SEI訊息、一VUI或一參數集擴展讀取該資訊。
27. 如實施例21至26中任一實施例之網路裝置，其中該酬載部分具有以圖像塊為單位寫碼於其中之該視訊之該等圖像，其中該等圖像塊由該等圖像細分而成且以多行及多列之一圖像塊陣列佈置，其中該指示將該預定子區指出作為該等圖像塊之一集合。
28. 如實施例27之網路裝置，其中該酬載部分具有以圖像塊為單位寫碼於其中之該視訊之該等圖像，使得以圖塊為單位細分該酬載部分，各圖塊具有編碼於其中之並不跨越該等圖像塊之間的一圖像塊邊緣之一圖像之一對應區域。
29. 如實施例21至28中任一實施例之網路裝置，其中：藉由待自其執行藉由該等替換索引進行之該重定向、及/或由該等替換參數替換之該等索引予以索引之寫碼參數設定之該第一集合的一部分，係關於以下各者中之一或多者：
圖像大小，
圖像塊結構，
緩衝區大小及時序。
30. 如實施例21至29中任一實施例之網路裝置，其中該酬載部分具有寫碼於其中之該視訊之該等圖像，使得在該預定子區內，該等圖像用跨越該預定子區之邊界之時間預測之中斷來寫碼。
31. 如實施例21至30中任一實施例之網路裝置，其中該網路裝置為以下各者中之一者：
能夠解碼該視訊資料串流及該經縮減視訊資料串流的一視訊解碼器，
一視訊解碼器，其之一類級滿足該視訊解碼器能夠解碼該經縮減視訊資料串流之需要，但其之該類級不足而使得該視訊解碼器不能解碼該視訊資料串流，以及
網路裝置，其組配來取決於一控制信號將該視訊資料串流及該經縮減視訊資料串流中之一者轉遞至一視訊解碼器。
32. 如實施例21至31中任一實施例之網路裝置，其中該視訊資料串流包含一移位資訊，該移位資訊針對該等圖像之至少一個預定子區域之一集合指出至少一個預定子區域之該集合於一目標圖像區域內相對於至少一個預定子區域之該集合至該目標圖像區域內之一未移位複製之移位，以及
該網路裝置組配來將該移位資訊修改成經修改移位資訊，使得子區特定圖像在該目標圖像區域內與該等圖像之該預定子區重合，該等子區特定圖像複製至具有根據該經修改移位資訊移位之該等子區特定圖像之預定子區域之該目標圖像區域中，該等圖像之該預定子區複製至具有根據該移位資訊移位之該等圖像之至少一個預定子區域之該集合的該目標圖像區域中，且在縮減該視訊資料串流時，用該經修改移位資訊替換該移位資訊，或
該經修改移位資訊由與該等圖像之該預定子區相關聯之該視訊資料串流組成，且該移位資訊由與該等圖像相關聯之該視訊資料串流組成，並且在縮減該視訊資料串流時，該網路裝置組配來移除該移位資訊並將該經修改移位資訊延續至該經縮減視訊資料串流，以便與該等子區特定圖像相關聯。
33. 一種表示一視訊的視訊資料串流，其包含：
一酬載部分，該視訊之圖像被寫碼入該酬載部分，
一補充增強資訊訊息，其指出匹配藉以將該視訊之該等圖像寫碼入該酬載部分之方式的補充增強資訊，
其中該視訊資料串流包含一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
一替換補充增強資訊訊息，其用於替換該補充增強資訊訊息，
其中該替換補充增強資訊訊息係選擇成使得與該視訊資料串流相比一經縮減視訊資料串流藉由以下操作修改：
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，且
改變該酬載部分中之位置指示，以便以自該預定子區之一周邊而非該等圖像量測之方式指出一位置，
該經縮減視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以一方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該預定子區，該方式使得該替換補充增強資訊訊息指出匹配藉以將該等子區特定圖像寫碼入該經縮減酬載部分之方式的替換補充增強資訊。
34. 一種用於將視訊編碼成視訊資料串流的編碼器，其包含：
一寫碼核心，其組配來將該視訊之圖像編碼入該視訊資料串流之一酬載部分，
一參數調節器，其組配來產生指出匹配藉以將該視訊之該等圖像寫碼入該酬載部分之方式的補充增強資訊的一補充增強資訊訊息；
其中該編碼器組配來為該視訊資料串流提供一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
一替換補充增強資訊訊息，其待用於替換該補充增強資訊訊息，
其中該替換補充增強資訊訊息係選擇成使得與該視訊資料串流相比一經縮減視訊資料串流藉由以下操作修改：
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便以自該預定子區之一周邊而非該等圖像量測之方式來指出一位置，
該經縮減視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以一方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該子區，該方式使得該替換補充增強資訊訊息指出匹配藉以將該等子區特定圖像寫碼入該經縮減酬載部分之方式的替換補充增強資訊。
35. 一種用於處理視訊資料串流之網路裝置，該視訊資料串流包含：
一酬載部分，該視訊之圖像被寫碼入該酬載部分，
一補充增強資訊訊息，其指出匹配藉以將該視訊之該等圖像寫碼入該酬載部分之方式的補充增強資訊，
其中該網路裝置組配來：
自該視訊資料串流讀取一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
一替換補充增強資訊訊息，其待用於替換該補充增強資訊訊息，
將該視訊資料串流縮減至藉由以下操作修改的一經縮減視訊資料串流：
藉由該替換補充增強資訊訊息替換該補充增強資訊訊息，
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便指出自該預定子區之一周邊而非該等圖像量測之一位置，
使得該經縮減視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以一方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該預定子區，該方式使得該替換補充增強資訊訊息指出匹配藉以將該等子區特定圖像寫碼入該經縮減酬載部分之方式的替換補充增強資訊。
36. 一種用於處理視訊資料串流之網路裝置，其組配來：
接收包含該視訊之圖像被寫碼進去之一酬載部分之一部分的一視訊資料串流，其中該部分對應於指代在該等圖像之一預定子區外部之該等圖像之一區域的該酬載部分的多個部分之排除，其中該視訊之該等圖像被寫碼入該酬載部分，
在不排除之情況下以使用該視訊資料串流之一參數集部分中之寫碼參數設定來參數化的方式，及/或
在不排除之情況下以匹配藉由該視訊資料串流之一補充增強訊息指出之補充增強資訊的方式，
藉由以下操作修改該視訊資料串流：
改變該酬載部分中之位置指示，以便指出自該預定子區之一周邊而非該等圖像量測之一位置，以及
調整該參數集部分中之該等寫碼參數設定及/或調整該補充增強資訊訊息，使得該視訊資料串流具有該酬載部分的該部分，展示該等圖像之該預定子區之子區特定圖像以一方式編碼入該酬載部分的該部分，而該方式係：
使用該等寫碼參數設定參數化，及/或
匹配藉由如所調整之該經調整補充增強資訊補充增強訊息指出之該補充增強資訊補充增強資訊。
37. 如實施例36之網路裝置，其組配來接收關於該預定子區之資訊以及該視訊資料串流，或使用關於該預定子區之該資訊限制下載該視訊資料串流，使得指代在該預定子區外部之該等圖像之一區域的該酬載部分之部分未被下載。
38. 一種具有編碼於其中之圖像的資料串流，該資料串流包含：
一移位資訊，其針對該圖像之至少一個預定子區域之一集合指出至少一個預定子區域之該集合於一目標圖像區域內相對於至少一個預定子區域之該集合至該目標圖像區域內之一未移位複製之移位。
39. 如實施例38之資料串流，其中該移位資訊用以下各者中之一者為單位指出該移位：
圖像樣本，
圖像塊，該等圖像被細分成圖像塊，該圖像以圖像塊為單位寫碼而無需寫碼互依性，且至少一個子區域之集合中之各者由該等圖像塊組成。
40. 如實施例38或39之資料串流，其中該圖像之至少一個子區域之該集合為該圖像在子區域之一陣列中之一無隙且無重疊空間分區的一子集。
41. 如實施例38至39中任一實施例之資料串流，其中該移位資訊包含：
在該圖像之至少一個預定子區域之該集合內之該等預定子區域之一計數；
定義該目標圖像區域之一大小的一大小參數，以及
對於該圖像之至少一個預定子區域之該集合之各預定子區域，在該目標圖像區域內之該圖像之個別預定子區域之一移位的座標；或
該移位資訊針對該圖像之至少一個預定子區域之該集合中之各預定子區域包含：關於該目標區中之該個別預定子區域之一位置的第一位置資訊、關於該圖像內之該個別預定區域之一位置之第二資訊、及關於一旋轉之資訊及/或關於當在該目標區與該圖像之間映射該個別預定子區域時的一鏡像的資訊。
42. 如實施例41之資料串流，其中該移位資訊進一步指出該目標圖像區域內之該個別子區域之一縮放。
43. 如實施例38至42中任一實施例之資料串流，其中該資料串流進一步包含指出一預設填充之一預設填充資訊，該預設填充係待供用來填充該目標圖像區域之一部分，該部分既不由根據該移位資訊移位之該圖像之至少一個預定子區域之該集合中之任一者覆蓋，在至少一個預定子區域之該集合並不完全覆蓋該圖像時，亦不由該圖像之任何未移位部分覆蓋。
44. 如實施例38至42中任一實施例之資料串流，其中該資料串流具有編碼於其中之圖像之一序列，其中該移位資訊對圖像之該序列有效。
45. 一種解碼器，用於解碼具有編碼於其中之一圖像的一資料串流，該解碼器包含：
一解碼核心，其組配來從該資料串流重構該圖像，以及
一移位器，其組配來基於該圖像藉由根據包含於該資料串流中之移位資訊移位在一目標圖像之一區域內之該圖像的至少一個預定子區域之一集合中之各者來合成該目標圖像。
46. 如實施例45之解碼器，其中該移位器組配來在至少一個預定子區域之該集合並不完全覆蓋該圖像時，以一未移位方式將該圖像之任何未移位部分複製至該目標圖像區域中。
47. 如實施例45或46之解碼器，其中該移位資訊用以下各者中之一者為單位指出該個別子區域的移位：
圖像樣本，
圖像塊，該等圖像經細分成圖像塊，該圖像以圖像塊為單位來寫碼而無需寫碼互依性，且至少一個子區域之該集合中之各者由圖像塊組成。
48. 如實施例45至47中任一實施例之解碼器，其中該圖像之至少一個子區域之該集合為該圖像在子區域之一陣列中之一無隙且無重疊空間分區的一子集。
49. 如實施例45至48中任一實施例之解碼器，其中該移位器組配來：
作為該移位資訊之部分，自該資料串流讀取：
在該圖像之至少一個預定子區域之該集合內之該等預定子區域的一計數；
定義該目標圖像區域之一大小的大小參數，
對於該圖像之至少一個預定子區域之該集合之各預定子區域，在一目標圖像區域內之該圖像之該個別預定子區域之一移位的座標，
相對於該圖像之一覆疊，根據為該個別預定子區域讀取之移位之該等座標，將該圖像之至少一個預定子區域之該集合中之該等預定子區域中之各者移位至該目標圖像之該區域上。
50. 如實施例49之解碼器，其中該移位器組配來基於該圖像藉由根據包含於該資料串流中之移位資訊按比例縮放該圖像之至少一個預定子區域之一集合中之各者來合成一目標圖像，相對於該圖像至該目標圖像之該區域中之未經失真複製根據該移位資訊在該目標圖像的該區域內移位。
51. 如實施例45至50中任一實施例之解碼器，其中該移位器組配來根據包含於該資料串流中之預設填充資訊填充該目標圖像區域之一部分，此一部分無根據該移位資訊移位的該圖像之至少一個預定子區域之該集合中之任一者存在或在至少一個預定子區域之該集合並未完全覆蓋該圖像時無該圖像之任何未移位部分存在。
52. 如實施例45至51中任一實施例之解碼器，其中該解碼核心組配來從該資料串流重構圖像之一序列，且該移位器組配來將該移位資訊應用至圖像之該序列之該等圖像上。
53. 如實施例45至52中任一實施例之解碼器，其進一步包含：
一呈現器，其組配來將一內射投影應用至該目標圖像區域上以便形成一輸出圖像。
54. 一種網路裝置，其組配來將具有編碼於其中之一第一圖像的一資料串流縮減成具有編碼於其中之一子區特定圖像的一經縮減資料串流，該子區特定圖像展示該第一圖像之一預定子區，其中該資料串流包含一移位資訊，該移位資訊針對該第一圖像之至少一個預定子區域之一集合指出至少一個預定子區域之該集合於一目標圖像區域內相對於至少一個預定子區域之該集合至該目標圖像區域內之一未移位複製之移位，其中：
該網路裝置組配來將該移位資訊修改成經修改移位資訊，使得該子區特定圖像在該目標圖像區域內與該第一圖像之該預定子區重合，該子區特定圖像複製至該目標圖像區域中具有根據該經修改移位資訊移位之該子區特定圖像之至少一個預定子區域之一集合，該第一圖像之該預定子區複製至該目標圖像區域中具有根據該移位資訊移位之該圖像之至少一個預定子區域之該集合，且在縮減該資料串流時，用該經修改移位資訊替換該移位資訊，或
該經修改的移位資訊由與第一圖像之該預定子區相關聯之該資料串流組成，且該移位資訊由與該等第一圖像相關聯之該資料串流組成，並且在縮減該資料串流時，該網路裝置組配來移除該移位資訊且將該經修改移位資訊延續至該經縮減資料串流中以便與該子區特定圖像相關聯。
55. 一種視訊資料串流，其具有使用時間預測予以編碼於其中之圖像之一序列，使得：
藉由至少在一第一圖像子區(A)內暫時中止時間預測將一或多個圖像之一第一集合(圖像A)編碼入該視訊資料串流以便形成一或多個第一隨機存取點之一集合，以及
藉由在不同於該第一圖像子區(A)之一第二圖像子區(B)內暫時中止時間預測將一或多個圖像之一第二集合(圖像B)編碼入該視訊資料串流以便形成一或多個第二隨機存取點之一集合。
56. 如實施例55之視訊資料串流，其中該第一子區及該第二子區在無重疊之情況下彼此鄰接。
57. 如實施例56之視訊資料串流，其中該第一子區及該第二子區形成在該視訊資料串流中發信之圖像之該序列之一無重疊且無隙分區。
58. 如實施例57之視訊資料串流，其中藉由在該圖像的區域上方完全暫時中止時間預測將一或多個圖像之該第一集合(圖像A)編碼入該視訊資料串流以便形成一或多個逐圖像隨機存取點之一集合。
59. 如實施例55至58中任一實施例之視訊資料串流，其中：藉由在該第二圖像子區(B)內暫時中止該第二圖像子區外部之一空間部分上之一空間寫碼依賴性將一或多個圖像之該第二集合(圖像B)編碼入該視訊資料串流。
60. 如實施例55至59中任一實施例之視訊資料串流，其進一步包含：指出一或多個圖像之該第二集合(圖像B)之一信號化。
61. 如實施例60之視訊資料串流，其中該信號化至少部分地經由該視訊資料串流之一圖像類型信號化來指出一或多個圖像之該第二集合(圖像B)，該視訊資料串流之圖像類型信號化將逐圖像隨機存取點與子區特定隨機存取點相區別。
62. 如實施例61之視訊資料串流，其中該信號化藉由該視訊資料串流之該圖像類型信號化來指出一或多個圖像之該第二集合(圖像B)，該視訊資料串流之該圖像類型信號化將一或多個圖像之該第二集合(圖像B)指示為子區特定隨機存取點，且進一步將一或多個圖像之該第二集合(圖像B)關聯至該第二圖像子區(B)。
63. 如實施例61或62之視訊資料串流，其中該視訊資料串流之該圖像類型信號化包含於該視訊資料串流之NAL單元標頭中。
64. 如實施例55至63中任一實施例之視訊資料串流，其進一步包含一另一信號化，其針對圖像之該序列指出是否將該等圖像以一方式編碼入該視訊資料串流，以使得該第二圖像子區(B)之時間預測限於不伸出或允許伸出至處於該第二圖像子區外部之該等圖像之一圖像區域。
65. 如實施例55至64中任一實施例之視訊資料串流，其中藉由以一方式限制該第二圖像子區(B)內之時間預測，將一或多個圖像之該第二集合中之一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之一隨後一者(圖像A)之間的圖像編碼入該視訊資料串流，以免指代在該第二圖像子區(B)外部之參考圖像之一圖像區域(A)。
66. 如實施例55至65中任一實施例之視訊資料串流，其中藉由以一方式限制該第二圖像子區(B)內之時間預測，將一或多個圖像之該第二集合中之一者(圖像B)與就解碼次序而言一或多個圖像之該第一集合中之一隨後一者(圖像A)之間的圖像編碼入該視訊資料串流，以免指代就解碼次序而言相對於一或多個圖像之該第二集合中之該一者(圖像B)在上游的參考圖像。
67. 如實施例65及66中任一實施例之視訊資料串流，其中藉由以一方式限制該第二圖像子區(B)外部之該圖像區域(A)內之時間預測，將一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之隨後一者(圖像A)之間的該等圖像編碼入該視訊資料串流，以免指代參考圖像之該第二圖像子區(B)，其分別屬於一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之該隨後一者(圖像A)及一或多個圖像之該第二集合之該一者(圖像B)之間的圖像中之任一者。
68. 如實施例65及66中任一實施例之視訊資料串流，其中：
使用該第二圖像子區(B)外部之該圖像區域(A)內之時間預測將一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之隨後一者(圖像A)之間的該等圖像編碼入該視訊資料串流，該第二圖像子區至少部分地指代參考圖像之該第二圖像子區，其分別屬於一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之該隨後一者(圖像A)及一或多個圖像之該第二集合之該一者(圖像B)之間的圖像中之任一者，以及
藉由限制該第二圖像子區(B)外部之該圖像區域(A)內之時間預測，將就一解碼次序而言在一或多個圖像之該第一集合中之該隨後一者(圖像A)之後的圖像編碼入該視訊資料串流，以免指代就一解碼次序而言之先前參考圖像的該第二圖像子區，其屬於一或多個圖像之該第一集合中之該隨後一者(圖像A)及在一或多個圖像之該第一集合中之該隨後一者(圖像A)之後的該等圖像中之任一者。
69. 一種編碼器，用於使用時間預測將圖像之序列編碼成一視訊資料串流，該編碼器組配來：
藉由至少在一第一圖像子區內暫時中止時間預測，將一或多個圖像之一第一集合編碼入該視訊資料串流以便形成一或多個第一隨機存取點之一集合，以及
藉由在不同於該第一圖像子區之一第二圖像子區內暫時中止時間預測，將一或多個圖像之一第二集合編碼入該視訊資料串流以便形成一或多個第二隨機存取點之一集合。
70. 如實施例69之編碼器，其中該第一子區及該第二子區在無重疊之情況下彼此鄰接。
71. 如實施例70之編碼器，其中該第一子區及該第二子區形成圖像之該序列之一無重疊且無隙分區，且該編碼器組配來為該視訊資料串流提供該無重疊且無隙分區之一信號化。
72. 如實施例69之編碼器，其組配來藉由在該圖像的區域上完全暫時中止時間預測，將一或多個圖像之該第一集合編碼入該視訊資料串流以便形成逐圖像隨機存取點之一集合。
73. 如實施例69至72中任一實施例之編碼器，其組配來藉由在該第二圖像子區(B)內暫時中止該第二圖像子區外部之一空間部分上之一空間寫碼依賴性，將一或多個圖像之該第二集合編碼入該視訊資料串流。
74. 如實施例69至74中任一實施例之編碼器，其進一步組配來將一信號化***該視訊資料串流中指出一或多個圖像之該第二集合。
75. 如實施例69至74中任一實施例之編碼器，其組配來將一另一信號化***該視訊資料串流中，針對圖像之該序列指出是否以使得該第二圖像子區(B)之時間預測限於不伸出或允許伸出至處於該第二圖像子區外部之該等圖像之一圖像區域的方式，將該等圖像編碼入該視訊資料串流。
76. 如實施例69至75中任一實施例之編碼器，其中該編碼器組配來：
藉由以一方式限制該第二圖像子區內之時間預測，將一或多個圖像之該第二集合中之一者與就一解碼次序而言一或多個圖像之該第一集合中之一隨後一者之間的圖像編碼入該視訊資料串流，以免指代在該第二圖像子區外部之參考圖像之一圖像區域。
77. 如實施例69至75中任一實施例之編碼器，其中該編碼器組配來藉由以一方式限制該第二圖像子區(B)內之時間預測，將一或多個圖像之該第二集合中之一者(圖像B)與就解碼次序而言一或多個圖像之該第一集合中之一隨後一者(圖像A)之間的圖像編碼入該視訊資料串流，以免指代就一解碼次序而言相對於一或多個圖像之該第二集合中之該一者(圖像B)在上游的參考圖像。
78. 如實施例76及77中任一實施例之編碼器，其中該編碼器組配來藉由以一方式限制該第二圖像子區(B)外部之該圖像區域(A)內之時間預測，將一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之隨後一者(圖像A)之間的該等圖像編碼入該視訊資料串流，以免指代參考圖像之該第二圖像子區，其分別屬於一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之該隨後一者(圖像A)及一或多個圖像之該第二集合之該一者(圖像B)之間的圖像中之任一者。
79. 如實施例76至77中任一實施例之編碼器，其中該編碼器組配來：
使用該第二圖像子區(B)外部之該圖像區域(A)內之時間預測將一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之隨後一者(圖像A)之間的該等圖像編碼入該視訊資料串流，該第二圖像子區至少部分地指代參考圖像之該第二圖像子區，其分別屬於一或多個圖像之該第二集合中之該一者(圖像B)與就一解碼次序而言一或多個圖像之該第一集合中之該隨後一者(圖像A)及一或多個圖像之該第二集合之該一者(圖像B)之間的圖像中之任一者，以及
藉由限制該第二圖像子區(B)外部之該圖像區域(A)內之時間預測，將就一解碼次序而言在一或多個圖像之該第一集合中之該隨後一者(圖像A)之後的圖像編碼入該視訊資料串流，以免指代就一解碼次序而言之先前參考圖像的該第二圖像子區，其屬於一或多個圖像之該第一集合中之該隨後一者(圖像A)及在一或多個圖像之該第一集合中之該隨後一者(圖像A)之後的該等圖像中之任一者。
80. 一種解碼器，用於使用時間預測自一視訊資料串流解碼圖像之一序列，該解碼器使用以下各者支援隨機存取：
一或多個第一隨機存取點之一集合，在一或多個圖像之一第一集合處，該一或多個圖像之該第一集合藉由至少在一第一圖像子區內暫時中止時間預測而被編碼入該視訊資料串流，以及
一或多個第二隨機存取點之一集合，在一或多個圖像之一第二集合處，該一或多個圖像之該第二集合藉由在不同於該第一圖像子區之一第二圖像子區內暫時中止時間預測而被編碼入該視訊資料串流。
81. 如實施例80之解碼器，其組配來在一當前圖像為一或多個圖像之該第二集合中之一者時：
恢復以該當前圖像開始之圖像之該序列的解碼及/或輸出，但將圖像之該序列之該解碼及/或輸出中之至少一者初步限制至該第二圖像子區。
82. 如實施例81之解碼器，其組配來在遭遇第一隨機存取點之集合中之一者時，即停止該初步限制。
83. 如實施例80之解碼器，其組配來在一當前圖像為一或多個圖像之該第一集合或該第二集合中之一者時：
恢復對以該當前圖像開始之圖像之該序列進行解碼，但自恢復該解碼以後，限制圖像的該序列的該輸出直至遭遇一或多個圖像之集合中之各者中之一個圖像，其中，對於一或多個圖像之各集合，藉由在特定於一或多個圖像之該個別集合的一圖像子區內暫時中止時間預測將一或多個圖像之該個別集合中之各圖像編碼入該視訊資料串流，一或多個圖像之該等集合之該等子區彼此不同且一起完全覆蓋圖像之該序列之一圖像區域。
84. 如實施例80至83中任一實施例之解碼器，其中該第一子區及該第二子區在無重疊之情況下彼此鄰接，且該解碼器組配來在一當前隨機存取點為該等第二隨機存取點中之一者且一下一隨機存取點為該等第一存取點中之一者時，限制解碼至該當前隨機存取點與該下一隨機存取點之間的該第二圖像子區，且將自該第二圖像子區之解碼延伸至亦包括該第一圖像子區。
85. 如實施例80之解碼器，其中該第一子區及該第二子區形成圖像之該序列之一無重疊且無隙分區，且該解碼器組配來從該視訊資料串流中之一信號化導出上述者。
86. 如實施例80至83中任一實施例之解碼器，其組配來將一或多個圖像之該第一集合視為一或多個逐圖像隨機存取點之一集合來處理。
87. 如實施例80至86中任一實施例之解碼器，其組配來解碼如實施例55至68中任一實施例所述之資料串流。
88. 一種網路裝置，其組配來接收如實施例50至60中任一實施例之具有使用時間預測予以編碼於其中之圖像之序列的一視訊資料串流，其中該網路裝置組配來藉由移除具有編碼於其中之該等圖像之一圖像區域的視訊資料串流在該第二圖像子區外之部分，且用將一或多個圖像之該第二集合指示為逐圖像隨機存取圖像之圖像類型資訊替換該視訊資料串流內的將一或多個圖像之該第二集合指示為子區特定隨機存取點之一資訊，來縮減該資料串流，從而獲得具有編碼於其中之子區特定圖像的一經縮減視訊資料串流，該等子區特定圖像展示該第二圖像子區。
89. 一種儲存有資料串流之數位儲存媒體，該資料串流係為如實施例1至10、33、38至44及55至68中任一實施例之資料串流。
90. 一種用於將視訊編碼成視訊資料串流的方法，其包含：
判定寫碼參數設定及產生指出該等寫碼參數設定之該視訊資料串流之一參數集部分；
以使用該等寫碼參數設定之一第一集合參數化的方式將該視訊之圖像編碼入該視訊資料串流之一酬載部分，該第一集合藉由由該酬載部分組成之索引來索引，
為該視訊資料串流提供一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
替換索引及/或替換參數，該等替換索引用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定的一第二集合，該等替換參數用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定的該第二集合，
其中寫碼參數之該第二集合係選擇成使得與該視訊資料串流相比經縮減的視訊資料串流藉由以下操作修改：
移除該酬載部分之指代該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便以自該預定子區之一周邊而非該等圖像量測之方式來指出一位置，
該經縮減的視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以使用寫碼參數設定之該第二集合參數化的方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該子區。
91. 一種用於處理視訊資料串流之方法，該視訊資料串流包含：
一參數集部分，其指出寫碼參數設定；
一酬載部分，該視訊之圖像以使用該等寫碼參數設定之一第一集合參數化的方式來寫碼於該酬載部分中，該第一集合藉由由該酬載部分組成之索引來索引，
其中該方法包含：
自該視訊資料串流讀取一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
替換索引及/或替換參數，該等替換索引用於重定向由該酬載部分組成之該等索引以便指代寫碼參數設定的一第二集合，該等替換參數用於調整寫碼參數設定之該第一集合以便產生寫碼參數設定的該第二集合，
將該視訊資料串流縮減至藉由以下操作修改的一經縮減視訊資料串流：
執行該重定向及/或調整，以使得寫碼參數設定之該第二集合由該酬載部分的索引予以索引；
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及改變該酬載部分中之位置指示，以便指出自該預定子區之一周邊而非該等圖像量測之一位置，
使得該經縮減視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以使用寫碼參數設定之該第二集合參數化的方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該預定子區。
92. 一種用於將視訊編碼成視訊資料串流的方法，其包含：
將該視訊之圖像編碼入該視訊資料串流之一酬載部分，
產生指出匹配藉以將該視訊之該等圖像寫碼入該酬載部分之方式的補充增強資訊的一補充增強資訊訊息；
為該視訊資料串流提供一資訊，該資訊包含：
該等圖像之一預定子區之一指示，以及
一替換補充增強資訊訊息，其待用於替換該補充增強資訊訊息，
其中該替換補充增強資訊訊息係選擇成使得與該視訊資料串流相比一經縮減的視訊資料串流藉由以下操作修改：
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便以自該預定子區之一周邊而非該等圖像量測之方式來指出一位置，
該經縮減的視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以一方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該子區，該方式使得該替換補充增強資訊訊息指出匹配藉以將該等子區特定圖像寫碼入該經縮減酬載部分之方式的替換補充增強資訊。
93. 一種用於處理視訊資料串流之方法，該視訊資料串流包含：
一酬載部分，該視訊之圖像被寫碼入該酬載部分，
一補充增強資訊訊息，其指出匹配藉以將該視訊之該等圖像寫碼入該酬載部分之方式的補充增強資訊，
其中方法包含：
自該視訊資料串流讀取一資訊，該資訊包含：
對該等圖像之一預定子區之一指示，以及
一替換補充增強資訊訊息，其待用於替換該補充增強資訊訊息，
將該視訊資料串流縮減至藉由以下操作修改的一經縮減視訊資料串流：
藉由該替換補充增強資訊訊息替換該補充增強資訊訊息，
移除該酬載部分之指代在該預定子區外部之該等圖像之一區域的部分，以及
改變該酬載部分中之位置指示，以便指出自該預定子區之一周邊而非該等圖像量測之一位置，
使得該經縮減視訊資料串流具有一經縮減酬載部分，該經縮減酬載部分具有以一方式編碼於其中之子區特定圖像，該等子區特定圖像展示該等圖像之該預定子區，該方式使得該替換補充增強資訊訊息指出匹配藉以將該等子區特定圖像寫碼入該經縮減酬載部分之方式的替換補充增強資訊。
94. 一種用於處理視訊資料串流之方法，其包含：
接收包含視訊之圖像被寫碼於其中之一酬載部分之一部分的一視訊資料串流，其中該部分對應於指代在該等圖像之一預定子區外部之該等圖像之一區域的該酬載部分的一部分之排除，其中該視訊之該等圖像被寫碼入該酬載部分時係：
以在不排除之情況下使用該視訊資料串流之一參數集部分中之寫碼參數設定來參數化的方式，及/或
以在不排除之情況下匹配藉由該視訊資料串流之一補充增強訊息指出之補充增強資訊的方式，藉由以下操作修改該視訊資料串流：
改變該酬載部分中之位置指示，以便指出自該預定子區之一周邊而非該等圖像量測之一位置，以及
調整該參數集部分中之該等寫碼參數設定及/或調整該補充增強資訊訊息，使得該視訊資料串流具有該酬載部分的該部分，而展示該等圖像之該預定子區之子區特定圖像以一方式編碼入該酬載部分的該部分，
該方式係：使用該等寫碼參數設定來參數化及/或
匹配藉由如所調整之該經調整補充增強資訊補充增強訊息指出之該補充增強資訊補充增強資訊。
95. 一種用於解碼具有編碼於其中之圖像之資料串流的方法，該方法包含：
自該資料串流重構該圖像，以及
基於該圖像藉由根據包含於該資料串流中之移位資訊移位在一目標圖像之一區域內之該圖像之至少一個預定子區域的一集合中之各者來合成該目標圖像。
96. 一種用於縮減資料串流之方法，其用於將具有編碼於其中之一第一圖像的一資料串流縮減成具有編碼於其中之一子區特定圖像的一經縮減資料串流，該子區特定圖像展示該第一圖像之一預定子區，其中該資料串流包含一移位資訊，該移位資訊針對該第一圖像之至少一個預定子區域之一集合指出至少一個預定子區域之該集合於一目標圖像區域內相對於至少一個預定子區域之該集合至該目標圖像區域內之一未移位複製之移位，其中：
該方法包含將該移位資訊修改成經修改移位資訊，使得該子區特定圖像在該目標圖像區域內與該第一圖像之該預定子區重合，該子區特定圖像複製至具有根據該經修改移位資訊移位之該子區特定圖像之至少一個預定子區域之一集合的該目標圖像區域中，該第一圖像之該預定子區複製至具有根據該移位資訊移位之該圖像之至少一個預定子區域之該集合的該目標圖像區域中，且在縮減該資料串流時，用該經修改移位資訊替換該移位資訊，或
該經修改移位資訊由與該等第一圖像之該預定子區相關聯之該資料串流組成，且該移位資訊由與該等第一圖像相關聯之該資料串流組成，並且該方法包含在縮減該資料串流時，移除該移位資訊且將該經修改移位資訊延續至該經縮減資料串流中以便與子區特定圖像相關聯。
97. 一種用於使用時間預測將圖像之一序列編碼入視訊資料串流之方法，該方法包含：
藉由至少在一第一圖像子區內暫時中止時間預測，將一或多個圖像之一第一集合編碼入該視訊資料串流以便形成一或多個第一隨機存取點之一集合，以及
藉由在不同於該第一圖像子區之一第二圖像子區內暫時中止時間預測將一或多個圖像之一第二集合編碼入該視訊資料串流以便形成一或多個第二隨機存取點之一集合。
98. 一種用於使用時間預測自視訊資料串流解碼圖像之一序列的方法，該方法包含使用以下各者隨機存取該視訊資料串流：
一或多個第一隨機存取點之一集合，在一或多個圖像之一第一集合處，該一或多個圖像之該第一集合藉由至少在一第一圖像子區內暫時中止時間預測編碼入該視訊資料串流，以及
一或多個第二隨機存取點之一集合，在一或多個圖像之一第二集合處，該一或多個圖像之該第二集合藉由在不同於該第一圖像子區之一第二圖像子區內暫時中止時間預測編碼入該視訊資料串流。
99. 一種方法，其包含：
接收如實施例55至68中任一實施例之具有使用時間預測予以編碼於其中之圖像之一序列的一視訊資料串流，
藉由移除具有編碼於其中之該等圖像之一圖像區域的視訊資料串流在該第二圖像子區外之部分，且用將一或多個圖像之該第二集合指示為逐圖像隨機存取圖像之圖像類型資訊替換該視訊資料串流內的將一或多個圖像之該第二集合指示為子區特定隨機存取點之一資訊，來縮減該資料串流，從而獲得具有編碼於其中之子區特定圖像的一經縮減視訊資料串流，該等子區特定圖像展示該第二圖像子區。
100. 一種具有程式碼之電腦程式，該程式碼在一電腦上運行時用於執行如實施例90至99中任一實施例所述之方法。
10,200,300:視訊資料串流
12,86,204,302,317,317',326:圖像
14,202,304,328:視訊
16:參數集部分
18:酬載部分
20:寫碼參數設定
20a:寫碼參數設定之第一集合
20b:寫碼參數設定之第二集合
22:子區
24:定序序列/語法描述
26:圖像大小/圖像大小寫碼參數
28:影響
30:語法描述之量/大小
32:位置指示
34:圖塊
36:區域
38:圖像塊結構
40:圖像塊邊界/虛-點線
42:圖像塊
44:解碼次序
46:緩衝區時序
48:索引
50:資訊
52:指示
54:替換索引
56:替換參數
60,231:網路裝置
62,232,324:經縮減視訊資料串流
64:讀取/讀取器
66:縮減器
68:移除/步驟
70,130:部分
72:重定向/弧形箭頭
78:改變/步驟
80:寫碼參數設定/編碼器
80a:參數調節器
80b:寫碼核心
82:視訊解碼器
84:視訊/圖像
88:調整/步驟
90:語法元素
92:黃色語法元素
206,206':移位資訊
208:圖像內容
210:外圓周
212:立方體
214:子區域
216,222:目標圖像區域
218:移位
220:計數
224:座標
226:縮放
228:預設填充資訊
230:編碼器
234:解碼核心/解碼器
236:移位器
238:呈現器
240:輸出圖像或輸出場景
308:邊緣
310:圖像邊緣
312:峰值
314:曲線
316:虛線框/視訊編碼器
318,319,320,321:信號化
322:圖像/網路裝置
330:視訊解碼器
900:矩形/區域
可有利地一起使用上文提及之技術。此外，有利的實施為附屬申請專利範圍之標的。在下文中相對於諸圖來描述本申請案之較佳實施例，在該等圖中：
圖1 展示根據本申請案之實施例的視訊資料串流之示意圖，該實施例係關於第一態樣，根據該第一態樣視訊資料串流可縮減為與可縮減視訊資料串流的圖像的子區有關的經縮減視訊資料串流；
圖2 展示根據實施例說明圖1之視訊資料串流之酬載部分與可縮減參數集部分之間的互依性以便說明圖像藉以編碼成可縮減視訊資料串流的參數化的示意圖；
圖3 展示用於說明根據本發明之實施例為圖1之視訊資料串流提供以允許縮減的資訊之可能內容的示意圖；
圖4 展示示意圖，其展示接收可縮減視訊資料串流且自其導出經縮減視訊資料串流的網路裝置；
圖5 展示說明根據使用參數集重定向之實施例的縮減視訊資料串流之操作模式的示意圖；
圖6 展示示意圖，其展示接收經縮減視訊資料串流以自其重構經縮減視訊資料串流之圖像的視訊解碼器82，該等圖像轉而僅展示原始視訊資料串流之圖像之子區；
圖7 展示對可縮減視訊資料串流進行縮減之替代性操作模式的示意圖，此時使用參數集調整使用可縮減視訊資料串流經提供具有之資訊內的替換；
圖8 展示用於可縮減視訊資料串流可經提供具有之資訊之語法實例；
圖9 展示可縮減視訊資料串流可經提供具有之資訊之替代性語法實例；
圖10 展示用於可縮減視訊資料串流可經提供具有之資訊之語法的甚至另一實例。
圖11 展示用於資訊之語法之另一實例，此處為了替換SEI訊息；
圖12 展示可使用以形成關於多層視訊資料串流之資訊之語法表的實例；
圖13 展示示意圖，其根據一實施例說明一方面在可縮減視訊資料串流內之圖像之子區域內的圖像塊與另一方面在經縮減視訊資料串流之圖像內的對應圖像塊之間的關係以說明此等圖像塊之空間重排之可能性；
圖14 展示藉由全景場景之長方體預測獲得之圖像之實例；
圖15 展示攜載對應於全景場景之立方體投影之圖像內容之圖像的實例。
圖16 展示使用圖15之立方體投影內容藉由重排有效地填充之圖像；
圖17 展示根據關於本申請案之第二態樣之實施例的用於移位可用以提供資料串流之資訊的語法表實例；
圖18 展示說明根據關於本申請案之第二態樣之實施例的視訊資料串流之構造的示意圖；
圖19 展示說明根據實施例的移位資訊之可能內容的示意圖；
圖20 展示說明經組配以形成包含移位資訊且同時可縮減之資料串流之編碼器的示意圖；
圖21 展示說明經組配以接收包含移位資訊以便說明可如何有利地使用移位資訊之可能性之資料串流的解碼器的示意圖；
圖22 展示根據關於本申請案之另一態樣之實施例說明包含子區特定隨機存取圖像之視訊資料串流的示意圖；
圖23a至圖23e 展示根據不同替代例說明所使用之子區之可能佈置的示意圖；
圖24 展示根據實施例說明經組配以接收其中穿插有子區特定隨機存取圖像之視訊資料串流的視訊解碼器的示意圖；
圖25 展示示意圖，其說明圖24之情形，但說明視訊解碼器之替代性操作模式，在彼中視訊解碼器等待直至藉由子區特定隨機存取圖像之子區完全覆蓋入埠視訊資料串流之圖像區域，直至在隨機存取視訊資料串流中輸出或呈現視訊為止；
圖26 展示說明接收包含子區特定隨機存取圖像之視訊資料串流的網路裝置的示意圖，該等子區特定隨機存取圖像之子區同時形成可關於其縮減視訊資料串流之子區域；
圖27 展示說明網路裝置的示意圖，該網路裝置接收具備移位資訊且可縮減以說明網路裝置231可如何為子區特定移位資訊提供經縮減視訊資料串流之可能性的資料串流；
圖28 展示圖像之所關注子區之不相交區域的實例，該不相交區域例示性地為圓柱形全景；以及
圖29 展示HEVC之TMCTS SEI訊息之語法表。
10:視訊資料串流
12:圖像
14:視訊
16:參數集部分
18:酬載部分
20:寫碼參數設定
20a:寫碼參數設定之第一集合
20b:寫碼參數設定之第二集合
22:子區
24:語法描述
34:圖塊
36:區域
40:圖像塊邊界/虛-點線
42:圖像塊
48:索引
50:資訊
80:寫碼參數設定/編碼器
80a:參數調節器
80b:寫碼核心
Claims (18)
- 一種具有編碼於其中之一圖像的資料串流，該資料串流包含： 一移位資訊，其針對該圖像之至少一個預定子區域之一集合指出至少一個預定子區域之該集合於一目標圖像區域內相對於至少一個預定子區域之該集合至該目標圖像區域內之一未移位複製之移位。
- 如請求項1之資料串流，其中該移位資訊指出以下列各者中之一者為單位之該移位： 數個圖像樣本， 該圖像被細分成之數個圖像塊，該圖像以該等圖像塊為單位寫碼而無需寫碼互依性，且至少一個子區域之該集合中之各者由該等圖像塊組成。
- 如請求項1或2之資料串流，其中該圖像之至少一個子區域之該集合為將該圖像分成一子區域陣列之一無隙且無重疊空間分區的一子集。
- 如請求項1或2之資料串流，其中該移位資訊包含： 在該圖像之至少一個預定子區域之該集合內之該等預定子區域之一計數； 定義該目標圖像區域之一大小的一大小參數，以及 對於該圖像之至少一個預定子區域之該集合之各預定子區域，該圖像之各別預定子區域在該目標圖像區域內之一移位的座標；或 該移位資訊針對該圖像之至少一個預定子區域之該集合中之各預定子區域包含：關於目標區中之該各別預定子區域之一位置的第一位置資訊、關於該圖像內之各別預定區域之一位置之第二資訊、及關於一旋轉之資訊及/或關於當在該目標區與該圖像之間映射該各別預定子區域時的一鏡像的資訊。
- 如請求項4之資料串流，其中該移位資訊進一步指出該目標圖像區域內之該各別子區域之一縮放。
- 如請求項1至5中任一項之資料串流，其中該資料串流進一步包含指出一預設填充之一預設填充資訊，該目標圖像區域之一部分將使用該預設填充被填充，該部分既不由根據該移位資訊移位之該圖像之至少一個預定子區域之該集合中之任一者覆蓋，且若至少一個預定子區域之該集合並不完全覆蓋該圖像，亦不由該圖像之任何未移位部分覆蓋。
- 如請求項1至5中任一項之資料串流，其中該資料串流具有編碼於其中之一圖像序列，其中該移位資訊對該圖像序列有效。
- 一種解碼器，用於解碼具有編碼於其中之一圖像的一資料串流，該解碼器包含： 一解碼核心，其組配來從該資料串流重構該圖像，以及 一移位器，其組配來基於該圖像來合成一目標圖像，該合成係藉由根據包含於該資料串流中之移位資訊來在該目標圖像之一區域內移位該圖像之至少一個預定子區域之一集合中之各者。
- 如請求項8之解碼器，其中該移位器組配來在至少一個預定子區域之該集合並不完全覆蓋該圖像時，以一未移位方式將該圖像之任何未移位部分複製至目標圖像區域中。
- 如請求項8或9之解碼器，其中該移位資訊指出以下列各者中之一者為單位之該各別子區域的移位： 數個圖像樣本， 該圖像被細分成之數個圖像塊，該圖像以該等圖像塊為單位寫碼而無需寫碼互依性，且至少一個子區域之該集合中之各者由該等圖像塊組成。
- 如請求項8至10中任一項之解碼器，其中該圖像之至少一個子區域之該集合為將該圖像分成一子區域陣列之一無隙且無重疊空間分區的一子集。
- 如請求項8至11中任一項之解碼器，其中該移位器組配來： 作為該移位資訊之部分，自該資料串流讀取： 在該圖像之至少一個預定子區域之該集合內之該等預定子區域的一計數； 定義目標圖像區域之一大小的數個大小參數， 對於該圖像之至少一個預定子區域之該集合之各預定子區域，該圖像之各別預定子區域在一目標圖像區域內之一移位的座標， 相對於該圖像之一覆疊，根據為該各別預定子區域讀取之移位之該等座標，將該圖像之至少一個預定子區域之該集合中之該等預定子區域中之各者移位至該目標圖像之該區域上。
- 如請求項12之解碼器，其中該移位器組配來基於該圖像來合成一目標圖像，該合成係藉由根據包含於該資料串流中之移位資訊來在該目標圖像的該區域內縮放該圖像之至少一個預定子區域之一集合中之各者，該集合中之各者根據該移位資訊相對於該圖像至該目標圖像之該區域中之未失真複製被移位。
- 如請求項8至13中任一項之解碼器，其中該移位器組配來根據包含於該資料串流中之預設填充資訊來填充該目標圖像區域之一部分，此一部分無根據該移位資訊移位的該圖像之至少一個預定子區域之該集合中之任一者存在，或若至少一個預定子區域之該集合並未完全覆蓋該圖像，亦無該圖像之任何未移位部分存在。
- 如請求項8至14中任一項之解碼器，其中該解碼核心組配來從該資料串流重構一圖像序列，且該移位器組配來將該移位資訊應用至該圖像序列之圖像上。
- 如請求項8至15中任一項之解碼器，其進一步包含： 一呈現器，其組配來將一內射投影應用至該目標圖像區域上以便形成一輸出圖像。
- 一種用於解碼一資料串流之方法，該資料串流具有編碼於其中之一圖像，該方法包含： 自該資料串流重構該圖像，以及 基於該圖像來合成一目標圖像，該合成係藉由根據包含於該資料串流中之移位資訊來在該目標圖像之一區域內移位該圖像之至少一個預定子區域的一集合中之各者。
- 一種具有一程式碼之電腦程式，該程式碼在一電腦上運行時用於執行如請求項17之方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP16154947 | 2016-02-09 | ||
| EP16154947.2 | 2016-02-09 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| TW202344052A true TW202344052A (zh) | 2023-11-01 |
Family
ID=55361354
Family Applications (11)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW110111381A TWI762260B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110111378A TWI747775B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110111382A TWI750072B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106146A TWI793532B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106149A TWI762207B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106147A TWI762206B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW112101522A TW202344052A (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW108117500A TWI736895B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW106104095A TWI669946B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106151A TWI793533B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110111379A TWI762259B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
Family Applications Before (6)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW110111381A TWI762260B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110111378A TWI747775B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110111382A TWI750072B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106146A TWI793532B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106149A TWI762207B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106147A TWI762206B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
Family Applications After (4)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW108117500A TWI736895B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW106104095A TWI669946B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110106151A TWI793533B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| TW110111379A TWI762259B (zh) | 2016-02-09 | 2017-02-08 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
Country Status (8)
| Country | Link |
|---|---|
| US (13) | US10743007B2 (zh) |
| EP (1) | EP3414907A1 (zh) |
| JP (11) | JP6784767B2 (zh) |
| KR (14) | KR102653128B1 (zh) |
| CN (11) | CN113347442B (zh) |
| CA (3) | CA3197905A1 (zh) |
| TW (11) | TWI762260B (zh) |
| WO (1) | WO2017137444A1 (zh) |
Families Citing this family (44)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9264508B2 (en) | 2011-08-19 | 2016-02-16 | Time Warner Cable Enterprises Llc | Apparatus and methods for reduced switching delays in a content distribution network |
| CN105519115A (zh) | 2013-09-10 | 2016-04-20 | 株式会社Kt | 用于对可扩展视频信号进行编码/解码的方法及装置 |
| WO2015060614A1 (ko) * | 2013-10-22 | 2015-04-30 | 주식회사 케이티 | 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치 |
| CN105659598A (zh) * | 2013-10-22 | 2016-06-08 | 株式会社Kt | 用于对多层视频信号进行编码/解码的方法和装置 |
| WO2015064990A1 (ko) * | 2013-10-29 | 2015-05-07 | 주식회사 케이티 | 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치 |
| US20170026659A1 (en) * | 2015-10-13 | 2017-01-26 | Mediatek Inc. | Partial Decoding For Arbitrary View Angle And Line Buffer Reduction For Virtual Reality Video |
| TWI762260B (zh) | 2016-02-09 | 2022-04-21 | 弗勞恩霍夫爾協會 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| FI20165114A (fi) * | 2016-02-17 | 2017-08-18 | Nokia Technologies Oy | Laitteisto, menetelmä ja tietokoneohjelma videokoodausta ja videokoodauksen purkua varten |
| EP3249928A1 (en) * | 2016-05-23 | 2017-11-29 | Thomson Licensing | Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices |
| US10652594B2 (en) | 2016-07-07 | 2020-05-12 | Time Warner Cable Enterprises Llc | Apparatus and methods for presentation of key frames in encrypted content |
| WO2018043905A1 (ko) * | 2016-08-29 | 2018-03-08 | 엘지전자 주식회사 | 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치 |
| EP3518534B1 (en) * | 2016-09-26 | 2023-05-17 | Sony Group Corporation | Encoding device, encoding method, decoding device, decoding method, transmission device, and reception device |
| JP7018447B2 (ja) * | 2017-01-05 | 2022-02-10 | シャープ株式会社 | 仮想現実アプリケーション用の、動き制約タイルセットのシグナリングのためのシステム及び方法 |
| JPWO2018135321A1 (ja) * | 2017-01-19 | 2019-11-07 | ソニー株式会社 | 画像処理装置および方法 |
| US10897612B2 (en) | 2017-03-03 | 2021-01-19 | Qualcomm Incorporated | Coding identifiers for motion constrained tile sets |
| WO2018182144A1 (ko) * | 2017-03-29 | 2018-10-04 | 엘지전자 주식회사 | 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치 |
| US10958948B2 (en) * | 2017-08-29 | 2021-03-23 | Charter Communications Operating, Llc | Apparatus and methods for latency reduction in digital content switching operations |
| CN109963176B (zh) * | 2017-12-26 | 2021-12-07 | 中兴通讯股份有限公司 | 视频码流处理方法、装置、网络设备和可读存储介质 |
| US10939142B2 (en) | 2018-02-27 | 2021-03-02 | Charter Communications Operating, Llc | Apparatus and methods for content storage, distribution and security within a content distribution network |
| WO2019191709A1 (en) * | 2018-03-30 | 2019-10-03 | Hulu, LLC | Reuse of block tree pattern in video compression |
| EP3811624A1 (en) * | 2018-06-21 | 2021-04-28 | Telefonaktiebolaget LM Ericsson (publ) | Tile shuffling for 360 degree video decoding |
| WO2019243539A1 (en) | 2018-06-21 | 2019-12-26 | Telefonaktiebolaget Lm Ericsson (Publ) | Tile partitions with sub-tiles in video coding |
| EP3850841A1 (en) * | 2018-09-14 | 2021-07-21 | Vid Scale, Inc. | Methods and apparatus for flexible grid regions |
| KR102629907B1 (ko) | 2018-10-02 | 2024-01-30 | 텔레호낙티에볼라게트 엘엠 에릭슨(피유비엘) | 타일 그룹 id에 기초한 화상들의 인코딩 및 디코딩 |
| US10880354B2 (en) | 2018-11-28 | 2020-12-29 | Netflix, Inc. | Techniques for encoding a media title while constraining quality variations |
| US11252434B2 (en) | 2018-12-31 | 2022-02-15 | Tencent America LLC | Method for wrap-around padding for omnidirectional media coding |
| BR112021013512A2 (pt) * | 2019-01-09 | 2021-09-14 | Huawei Technologies Co., Ltd. | Codificador de vídeo, decodificador de vídeo e métodos correspondentes |
| TWI799682B (zh) * | 2019-02-01 | 2023-04-21 | 弗勞恩霍夫爾協會 | 允許逐子圖像或逐區域隨機存取之視訊編碼解碼器及使用它之視訊合成技術 |
| CN113785584A (zh) * | 2019-03-01 | 2021-12-10 | 弗劳恩霍夫应用研究促进协会 | 假想参考解码器 |
| WO2020177702A1 (en) | 2019-03-04 | 2020-09-10 | Beijing Bytedance Network Technology Co., Ltd. | Two-level signaling of filtering information in video processing |
| WO2020220249A1 (zh) * | 2019-04-30 | 2020-11-05 | 深圳市大疆创新科技有限公司 | 一种数据编码、数据解码方法、设备及存储介质 |
| EP3991412A4 (en) * | 2019-06-25 | 2023-06-28 | INTEL Corporation | Sub-pictures and sub-picture sets with level derivation |
| CN114073073B (zh) | 2019-07-08 | 2023-06-06 | 华为技术有限公司 | 一种支持混合nal单元的编解码方法和编解码器 |
| EP3997868A4 (en) | 2019-08-10 | 2023-02-22 | Beijing Bytedance Network Technology Co., Ltd. | BUFFER MANAGEMENT DURING SUBPICTURE DECODING |
| CN112532569B (zh) * | 2019-09-19 | 2022-05-31 | 澜至电子科技（成都）有限公司 | 视频码流保护装置、方法以及存储介质 |
| CN114556952A (zh) | 2019-10-02 | 2022-05-27 | 北京字节跳动网络技术有限公司 | 包括子图片的视频比特流中的条带级信令通知 |
| CN114631317B (zh) | 2019-10-18 | 2024-03-15 | 北京字节跳动网络技术有限公司 | 子图片的参数集信令中的语法约束 |
| GB2590632B (en) * | 2019-12-20 | 2023-07-26 | Canon Kk | Video coding and decoding |
| US11716474B2 (en) | 2020-01-02 | 2023-08-01 | Samsung Electronics Co., Ltd. | Storage of EVC decoder configuration information |
| CN113382283B (zh) * | 2020-03-09 | 2023-07-04 | 上海哔哩哔哩科技有限公司 | 视频片头识别方法及*** |
| CN115918077A (zh) * | 2020-06-09 | 2023-04-04 | 字节跳动有限公司 | 子图片子比特流提取过程中补充增强信息的处理 |
| EP4287382A1 (en) | 2021-10-27 | 2023-12-06 | LG Energy Solution, Ltd. | Battery pack and energy storage system and vehicle comprising battery pack |
| TWI828091B (zh) * | 2022-03-23 | 2024-01-01 | 中華電信股份有限公司 | 全景影像傳輸系統、方法以及電腦程式產品 |
| CN115826630B (zh) * | 2023-02-20 | 2023-05-12 | 中国机械总院集团江苏分院有限公司 | 物料盒队列位置交换的控制方法和装置 |
Family Cites Families (77)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6141034A (en) | 1995-12-15 | 2000-10-31 | Immersive Media Co. | Immersive imaging method and apparatus |
| DE69816185T2 (de) | 1997-06-12 | 2004-04-15 | Hewlett-Packard Co. (N.D.Ges.D.Staates Delaware), Palo Alto | Bildverarbeitungsverfahren und -vorrichtung |
| JPH11346370A (ja) * | 1998-06-02 | 1999-12-14 | Matsushita Electric Ind Co Ltd | 符号化方法、符合化装置、復号方法、復号装置、及び記録媒体 |
| IL159537A0 (en) | 2001-06-28 | 2004-06-01 | Omnivee Inc | Method and apparatus for control and processing of video images |
| US7058239B2 (en) | 2001-10-29 | 2006-06-06 | Eyesee360, Inc. | System and method for panoramic imaging |
| FI114679B (fi) * | 2002-04-29 | 2004-11-30 | Nokia Corp | Satunnaisaloituspisteet videokoodauksessa |
| US7295717B2 (en) | 2002-10-16 | 2007-11-13 | Ecole polytechnique fédérale de Lausanne (EPFL) | Synthesis of superposition images for watches, valuable articles and publicity |
| JP4575370B2 (ja) * | 2003-05-02 | 2010-11-04 | エヌエックスピー ビー ヴィ | ビデオアーチファクトを低減するためのバイアスされた動きベクトル補間 |
| US7586924B2 (en) * | 2004-02-27 | 2009-09-08 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for coding an information signal into a data stream, converting the data stream and decoding the data stream |
| US7588314B1 (en) | 2004-10-12 | 2009-09-15 | Lev Nisnevich | Image forming device and method using intermittent motion across a work surface |
| CN101662683B (zh) * | 2005-04-14 | 2012-05-30 | 汤姆森特许公司 | 空间可缩放视频解码方法和空间可缩放视频解码器 |
| US7474848B2 (en) | 2005-05-05 | 2009-01-06 | Hewlett-Packard Development Company, L.P. | Method for achieving correct exposure of a panoramic photograph |
| KR20060122663A (ko) * | 2005-05-26 | 2006-11-30 | 엘지전자 주식회사 | 영상신호의 엔코딩 및 디코딩에서의 픽처 정보를 전송하고이를 이용하는 방법 |
| EP1915860A2 (en) | 2005-08-12 | 2008-04-30 | Nxp B.V. | Method and system for digital image stabilization |
| US7809211B2 (en) | 2005-11-17 | 2010-10-05 | Upek, Inc. | Image normalization for computed image construction |
| JP4801428B2 (ja) | 2005-11-30 | 2011-10-26 | 株式会社リコー | 画像形成装置及び画像形成方法 |
| CN101636761B (zh) * | 2007-03-23 | 2013-07-24 | 汤姆森特许公司 | 修改编码的比特流 |
| DK2512136T3 (en) | 2007-04-12 | 2016-08-22 | Thomson Licensing | Tiling in video coding and decoding |
| WO2008139708A1 (ja) * | 2007-04-27 | 2008-11-20 | Panasonic Corporation | 画像復号装置、画像復号システム、画像復号方法、及び集積回路 |
| JP4723543B2 (ja) * | 2007-08-10 | 2011-07-13 | 株式会社リコー | 画像処理装置、画像処理方法、プログラム及び記憶媒体 |
| JP2010049313A (ja) * | 2008-08-19 | 2010-03-04 | Sony Corp | 画像処理装置、画像処理方法、プログラム |
| US8855203B2 (en) | 2009-04-08 | 2014-10-07 | Sharp Kabushiki Kaisha | Video encoding apparatus and video decoding apparatus |
| US9357219B2 (en) | 2009-04-08 | 2016-05-31 | Sharp Kabushiki Kaisha | Video encoding apparatus and video decoding apparatus |
| US8745677B2 (en) * | 2009-06-12 | 2014-06-03 | Cygnus Broadband, Inc. | Systems and methods for prioritization of data for intelligent discard in a communication network |
| JP5718453B2 (ja) * | 2010-04-13 | 2015-05-13 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | 復号化方法 |
| HUE026534T2 (en) | 2010-07-15 | 2016-06-28 | Ge Video Compression Llc | Hybrid video encoding to support intermediate view synthesis |
| KR20120088488A (ko) | 2011-01-31 | 2012-08-08 | 한국전자통신연구원 | 시간적 움직임 벡터 저장 방법 및 그 장치 |
| US20120195356A1 (en) * | 2011-01-31 | 2012-08-02 | Apple Inc. | Resource usage control for real time video encoding |
| JP5191013B2 (ja) | 2011-03-10 | 2013-04-24 | 株式会社メガチップス | 画像符号化装置及び画像復号化装置 |
| WO2012142510A1 (en) * | 2011-04-15 | 2012-10-18 | Skyfire Labs, Inc. | Real-time video detector |
| CN102209241B (zh) * | 2011-05-25 | 2013-07-03 | 杭州华三通信技术有限公司 | 一种基于多子图的视频编解码方法及其装置 |
| JP5729237B2 (ja) * | 2011-09-26 | 2015-06-03 | カシオ計算機株式会社 | 画像処理装置、画像処理方法、及びプログラム |
| CN102333221B (zh) * | 2011-10-21 | 2013-09-04 | 北京大学 | 一种全景式背景预测的视频编解码方法 |
| US20130114694A1 (en) * | 2011-11-08 | 2013-05-09 | Qualcomm Incorporated | Parameter set groups for coded video data |
| US9516308B2 (en) * | 2012-04-27 | 2016-12-06 | Qualcomm Incorporated | Parameter set updates in video coding |
| US9736476B2 (en) * | 2012-04-27 | 2017-08-15 | Qualcomm Incorporated | Full random access from clean random access pictures in video coding |
| JP6422011B2 (ja) * | 2012-05-11 | 2018-11-14 | サン パテント トラスト | 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置 |
| CN115442626A (zh) * | 2012-06-29 | 2022-12-06 | Ge视频压缩有限责任公司 | 视频数据流、编码器、编码视频内容的方法以及解码器 |
| KR20140010823A (ko) | 2012-07-17 | 2014-01-27 | 삼성전자주식회사 | 영상 데이터 스케일링 방법 및 영상 디스플레이 장치 |
| US20140086328A1 (en) * | 2012-09-25 | 2014-03-27 | Qualcomm Incorporated | Scalable video coding in hevc |
| KR101812615B1 (ko) * | 2012-09-28 | 2017-12-27 | 노키아 테크놀로지스 오와이 | 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램 |
| CN116708767A (zh) * | 2013-01-04 | 2023-09-05 | Ge视频压缩有限责任公司 | 高效可伸缩编码概念 |
| US9749627B2 (en) | 2013-04-08 | 2017-08-29 | Microsoft Technology Licensing, Llc | Control data for motion-constrained tile set |
| US10250902B2 (en) | 2013-05-24 | 2019-04-02 | Kt Corporation | Method for inducing motion information in multilayer structure and apparatus using same |
| US9832378B2 (en) | 2013-06-06 | 2017-11-28 | Apple Inc. | Exposure mapping and dynamic thresholding for blending of multiple images using floating exposure |
| JP6208993B2 (ja) | 2013-06-28 | 2017-10-04 | ルネサスエレクトロニクス株式会社 | 画像復号装置及び画像復号装置の復号処理方法 |
| US9451254B2 (en) | 2013-07-19 | 2016-09-20 | Qualcomm Incorporated | Disabling intra prediction filtering |
| EP3058747B1 (en) | 2013-10-15 | 2019-11-20 | Nokia Technologies Oy | Scalable video encoding and decoding using syntax element |
| GB2542282B (en) * | 2013-10-22 | 2018-08-01 | Canon Kk | Method, device, and computer program for encapsulating partitioned timed media data in a server |
| US9648348B2 (en) | 2013-10-23 | 2017-05-09 | Qualcomm Incorporated | Multi-layer video file format designs |
| CN106416250B (zh) | 2013-12-02 | 2020-12-04 | 诺基亚技术有限公司 | 视频编码和解码 |
| EP3090549A1 (en) | 2014-01-02 | 2016-11-09 | VID SCALE, Inc. | Methods and systems for scalable video coding with mixed interlace and progressive content |
| KR101851479B1 (ko) * | 2014-01-03 | 2018-04-23 | 노키아 테크놀로지스 오와이 | 파라미터 세트 코딩 |
| EP2894857A1 (en) * | 2014-01-10 | 2015-07-15 | Thomson Licensing | Method and apparatus for encoding image data and method and apparatus for decoding image data |
| US20150264404A1 (en) | 2014-03-17 | 2015-09-17 | Nokia Technologies Oy | Method and apparatus for video coding and decoding |
| US9986154B2 (en) | 2014-05-21 | 2018-05-29 | Here Global B.V. | Developing a panoramic image |
| WO2015182342A1 (ja) | 2014-05-26 | 2015-12-03 | シャープ株式会社 | 画像復号装置、および、画像符号化装置 |
| WO2015199040A1 (ja) | 2014-06-24 | 2015-12-30 | シャープ株式会社 | Ｄｍｍ予測部、画像復号装置、および画像符号化装置 |
| US10694192B2 (en) | 2014-06-27 | 2020-06-23 | Koninklijke Kpn N.V. | HEVC-tiled video streaming |
| JP6440747B2 (ja) | 2014-06-27 | 2018-12-19 | コニンクリーケ・ケイピーエヌ・ナムローゼ・フェンノートシャップ | Ｈｅｖｃでタイル化されたビデオ・ストリームに基づく関心領域の決定 |
| US9570113B2 (en) | 2014-07-03 | 2017-02-14 | Gopro, Inc. | Automatic generation of video and directional audio from spherical content |
| US10204658B2 (en) * | 2014-07-14 | 2019-02-12 | Sony Interactive Entertainment Inc. | System and method for use in playing back panorama video content |
| US9918105B2 (en) | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
| US9854237B2 (en) | 2014-10-14 | 2017-12-26 | Qualcomm Incorporated | AMVP and merge candidate list derivation for intra BC and inter prediction unification |
| JP2018050091A (ja) | 2015-02-02 | 2018-03-29 | シャープ株式会社 | 画像復号装置、画像符号化装置および予測ベクトル導出装置 |
| EP3598760A1 (en) | 2015-06-11 | 2020-01-22 | Intellectual Discovery Co., Ltd. | Method for encoding and decoding image using adaptive deblocking filtering, and apparatus therfor |
| CN108141582B (zh) | 2015-08-07 | 2022-06-03 | Lg 电子株式会社 | 视频编译***中的帧间预测方法和装置 |
| US10282814B2 (en) | 2016-01-07 | 2019-05-07 | Mediatek Inc. | Method and apparatus of image formation and compression of cubic images for 360 degree panorama display |
| TWI762260B (zh) | 2016-02-09 | 2022-04-21 | 弗勞恩霍夫爾協會 | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |
| US10515429B2 (en) | 2016-07-01 | 2019-12-24 | Digimarc Corporation | Image-based pose determination |
| WO2018174387A1 (ko) | 2017-03-20 | 2018-09-27 | 엘지전자 주식회사 | 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치 |
| CN106993187B (zh) | 2017-04-07 | 2019-09-06 | 珠海全志科技股份有限公司 | 一种可变帧率的编码方法及装置 |
| CN110495177B (zh) | 2017-04-13 | 2023-10-20 | 松下电器（美国）知识产权公司 | 解码装置、解码方法及存储介质 |
| EP3649788A4 (en) | 2017-07-07 | 2020-12-30 | Sharp Kabushiki Kaisha | SIGNALING SYSTEMS AND METHODS OF A PROJECTED REGION FOR VIRTUAL REALITY APPLICATIONS |
| WO2019050426A1 (en) | 2017-09-05 | 2019-03-14 | Huawei Technologies Co., Ltd. | METHOD FOR QUICKLY ADAPTING BLOCKS FOR COLLABORATIVE FILTERING IN LOSS VIDEO CODECS |
| US20200275129A1 (en) | 2017-09-29 | 2020-08-27 | Sharp Kabushiki Kaisha | Systems and methods for signaling information associated with a constituent picture |
| US20190297326A1 (en) | 2018-03-21 | 2019-09-26 | Nvidia Corporation | Video prediction using spatially displaced convolution |
-
2017
- 2017-02-08 TW TW110111381A patent/TWI762260B/zh active
- 2017-02-08 EP EP17703436.0A patent/EP3414907A1/en active Pending
- 2017-02-08 KR KR1020237022832A patent/KR102653128B1/ko active IP Right Grant
- 2017-02-08 TW TW110111378A patent/TWI747775B/zh active
- 2017-02-08 JP JP2018541649A patent/JP6784767B2/ja active Active
- 2017-02-08 TW TW110111382A patent/TWI750072B/zh active
- 2017-02-08 CA CA3197905A patent/CA3197905A1/en active Pending
- 2017-02-08 TW TW110106146A patent/TWI793532B/zh active
- 2017-02-08 KR KR1020217037643A patent/KR102373046B1/ko active IP Right Grant
- 2017-02-08 KR KR1020217004266A patent/KR102332006B1/ko active IP Right Grant
- 2017-02-08 CN CN202110492957.2A patent/CN113347442B/zh active Active
- 2017-02-08 CA CA3167144A patent/CA3167144C/en active Active
- 2017-02-08 CN CN202110492958.7A patent/CN113347443B/zh active Active
- 2017-02-08 KR KR1020187025989A patent/KR102256855B1/ko active IP Right Grant
- 2017-02-08 CN CN202110493007.1A patent/CN113347446B/zh active Active
- 2017-02-08 KR KR1020247009837A patent/KR20240044535A/ko active Search and Examination
- 2017-02-08 CN CN202110492874.3A patent/CN113347441B/zh active Active
- 2017-02-08 CN CN202110493096.XA patent/CN113347447B/zh active Active
- 2017-02-08 KR KR1020217008461A patent/KR102331887B1/ko active IP Right Grant
- 2017-02-08 TW TW110106149A patent/TWI762207B/zh active
- 2017-02-08 KR KR1020217004270A patent/KR102301352B1/ko active IP Right Grant
- 2017-02-08 CN CN201780024264.2A patent/CN109076247B/zh active Active
- 2017-02-08 CN CN202110492988.8A patent/CN113347444B/zh active Active
- 2017-02-08 KR KR1020227020781A patent/KR102553812B1/ko active Application Filing
- 2017-02-08 TW TW110106147A patent/TWI762206B/zh active
- 2017-02-08 CN CN202110493099.3A patent/CN113347448A/zh active Pending
- 2017-02-08 CA CA3013657A patent/CA3013657C/en active Active
- 2017-02-08 KR KR1020217037662A patent/KR102373078B1/ko active IP Right Grant
- 2017-02-08 TW TW112101522A patent/TW202344052A/zh unknown
- 2017-02-08 WO PCT/EP2017/052769 patent/WO2017137444A1/en active Application Filing
- 2017-02-08 KR KR1020217038076A patent/KR102433227B1/ko active IP Right Grant
- 2017-02-08 CN CN202110492873.9A patent/CN113347440B/zh active Active
- 2017-02-08 KR KR1020217025013A patent/KR102385126B1/ko active IP Right Grant
- 2017-02-08 KR KR1020217037646A patent/KR102373060B1/ko active IP Right Grant
- 2017-02-08 TW TW108117500A patent/TWI736895B/zh active
- 2017-02-08 CN CN202110492831.5A patent/CN113347439B/zh active Active
- 2017-02-08 KR KR1020217008468A patent/KR102301362B1/ko active IP Right Grant
- 2017-02-08 CN CN202110493006.7A patent/CN113347445B/zh active Active
- 2017-02-08 TW TW106104095A patent/TWI669946B/zh active
- 2017-02-08 KR KR1020217037762A patent/KR102373013B1/ko active IP Right Grant
- 2017-02-08 TW TW110106151A patent/TWI793533B/zh active
- 2017-02-08 TW TW110111379A patent/TWI762259B/zh active
-
2018
- 2018-08-29 US US16/116,680 patent/US10743007B2/en active Active
- 2018-08-30 US US16/118,146 patent/US10958921B2/en active Active
-
2020
- 2020-10-23 JP JP2020178471A patent/JP7303170B2/ja active Active
- 2020-12-15 US US17/122,753 patent/US11770546B2/en active Active
-
2021
- 2021-03-23 US US17/210,442 patent/US11089315B2/en active Active
- 2021-03-23 US US17/210,435 patent/US11089314B2/en active Active
- 2021-03-23 US US17/210,450 patent/US11190785B2/en active Active
- 2021-03-23 US US17/210,456 patent/US11146804B2/en active Active
- 2021-03-24 US US17/211,719 patent/US11122282B2/en active Active
- 2021-03-24 US US17/211,729 patent/US11212542B2/en active Active
- 2021-03-24 US US17/211,703 patent/US11184626B2/en active Active
- 2021-03-24 US US17/211,748 patent/US11172213B2/en active Active
- 2021-03-24 US US17/211,744 patent/US11128877B2/en active Active
- 2021-09-15 JP JP2021150328A patent/JP7152574B2/ja active Active
- 2021-09-15 JP JP2021150331A patent/JP7295186B2/ja active Active
- 2021-09-15 JP JP2021150333A patent/JP7152575B2/ja active Active
- 2021-09-15 JP JP2021150338A patent/JP7410101B2/ja active Active
- 2021-09-15 JP JP2021150330A patent/JP7093454B2/ja active Active
- 2021-09-15 JP JP2021150335A patent/JP7093455B2/ja active Active
- 2021-09-15 JP JP2021150344A patent/JP7303266B2/ja active Active
- 2021-09-15 JP JP2021150325A patent/JP7093453B2/ja active Active
-
2023
- 2023-07-26 US US18/359,202 patent/US20230412824A1/en active Pending
- 2023-12-21 JP JP2023215659A patent/JP2024038008A/ja active Pending
Also Published As
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI762207B (zh) | 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術 |