TWI625052B - 多層視訊編碼以片段為基礎之跨越模式傳訊 - Google Patents

多層視訊編碼以片段為基礎之跨越模式傳訊 Download PDF

Info

Publication number
TWI625052B
TWI625052B TW102129519A TW102129519A TWI625052B TW I625052 B TWI625052 B TW I625052B TW 102129519 A TW102129519 A TW 102129519A TW 102129519 A TW102129519 A TW 102129519A TW I625052 B TWI625052 B TW I625052B
Authority
TW
Taiwan
Prior art keywords
layer
picture
spanned
segment
area
Prior art date
Application number
TW102129519A
Other languages
English (en)
Other versions
TW201424388A (zh
Inventor
何永
葉言
何玉文
修小玉
Original Assignee
Vid衡器股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid衡器股份有限公司 filed Critical Vid衡器股份有限公司
Publication of TW201424388A publication Critical patent/TW201424388A/zh
Application granted granted Critical
Publication of TWI625052B publication Critical patent/TWI625052B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

方法和裝置可以被用於以信號發送多層可縮放的編碼系統的片段跨越模式。在多層中的視訊訊號的對應區域之間的關聯和層間處理技術使得從基本層畫面中的對應區域中推測增強層中的片段或畫面成為可能。相應地,視訊流可以被編碼以表明增強層片段或畫面可以被跨越。

Description

多層視訊編碼以片段為基礎之跨越模式傳訊
相關申請案的交叉引用
本申請案要求2012年8月16日提出的標題為“Slice Base Skip Mode Signaling for Multiple Layer Video Coding”的美國臨時專利申請61/683,923的權益:2012年9月26日提出的標題為“Slice Base Skip Mode Signaling for Multiple Layer Video Coding”的美國臨時專利申請案61/705,701的權益:以及2013年5月29日提出的標題為“Slice Base Skip Mode Signaling for Multiple Layer Video Coding”的美國臨時專利申請案61/828,369的權益,所述申請案的內容作為引用結合於此。
各種數位視訊壓縮技術已經被開發並且被標準化以使得能夠實現高效數位視訊通信、分發和消耗。這些視訊壓縮技術希望提高編碼效率。
在多層中的視訊訊號的對應區域之間的關聯和諸如針對空間可縮放的上取樣濾波器設計之類的層間處理技術可以使從基本層畫面中的對應區域中推測增強層畫面中的片段成為可能。
此處揭露了以信號發送多層可縮放編碼系統的片段跨越模式的方法和裝置。在多層中的視訊訊號的對應區域之間的關聯、和諸如針對空間可縮 放性的上取樣濾波器設計之類的層間處理技術使得從基本層畫面中的對應區域中推測增強層畫面中的片段或增強層畫面成為可能。相應地,增強層片段或畫面可以被跨越,因為其可以從基本層片段中推測。為了表明增強層片段或畫面被跨越,可以提供高級有效傳訊。例如,傳訊可以在片段標頭或網路抽象層(NAL)單元標頭中提供。例如,這樣可以改進可縮放視訊編碼的編碼效率。
一種無線傳輸/接收單元(WTRU)可以被提供用於視訊編碼。WTRU可以包括處理器。處理器可以被配置為執行多種動作。例如,處理器可以被配置為使用參考畫面的參考區域來確定待跨越的畫面片段。該片段可以是畫面的一部分或畫面。跨越可以在片段標頭中設定跨越片段模式以表明諸如在解碼期間畫面的片段將被跨越。參考區域的位址可以被***片段標頭中。該片段標頭可以被編碼為位元流。
一種WTRU可以被提供用於視訊解碼。WTRU包括處理器。處理器可以被配置為執行多種動作。例如,處理器可以被配置為從片段標頭中確定位元流中的畫面片段在編碼期間已經被跨越。該片段可以是畫面的一部分或畫面。參考層識別碼、參考畫面識別碼和參考區域位址可以從片段標頭中擷取。參考畫面可以使用參考層識別碼和參考畫面識別碼進行提取。該片段可以使用參考畫面的參考區域來產生。
提供了一種用於視訊編碼的方法。跨越可以使用參考畫面的參考區域來確定將被跨越的畫面片段。該片段可以是畫面的一部分或畫面。片段跨越模式可以在片段標頭中設定以表明畫面的片段將被跨越。參考區域的位址和參考畫面類型可以被***到片段標頭中。該參考畫面類型可以表明該參考畫面是混合層間參考(HILR)畫面還是層間參考(ILR)畫面。該片段標頭可以被編碼為位元流。
本發明內容被提供成以簡化的形式引入概念選擇,該概念選擇還將在以下實施方式中描述。本發明內容不是為了識別要求保護主題的關鍵特徵或者必要特徵,也不是為了用來限制要求保護主題的範圍。此外,要求保護主題並不限於解決在本揭露任何部分提到的任何或所有劣勢的限制。
CU‧‧‧編碼單元
DPB‧‧‧畫面緩衝器
HILR‧‧‧混合層間參考畫面
Id‧‧‧參考層
ILR、724‧‧‧層間參考
Iub、IuCS、IuPS、iur、S1、X2‧‧‧介面
R1、R3、R6、R8‧‧‧參考點
MV‧‧‧運動向量
POC‧‧‧參考畫面
Slice‧‧‧片段
100‧‧‧通信系統
102、102a、102b、102c、102d‧‧‧無線傳輸/接收單元(WTRU)
103、104、105‧‧‧無線電存取網路(RAN)
106、107、109‧‧‧核心網路
108‧‧‧公共交換電話網路(PSTN)
110‧‧‧網際網路
112‧‧‧其他網路
114a、114b‧‧‧基地台
115、116、117‧‧‧空中介面
118‧‧‧處理器
120‧‧‧收發器
122‧‧‧傳輸/接收元件
124‧‧‧揚聲器/麥克風
126‧‧‧鍵盤
128‧‧‧顯示器/觸控板
130‧‧‧不可移式記憶體
132‧‧‧可移式記憶體
134‧‧‧電源
136‧‧‧全球定位系統(GPS)晶片組
138‧‧‧週邊裝置
140a、140b、140c‧‧‧節點B
142a、142b‧‧‧無線電網路控制器(RNC)
144‧‧‧媒體閘道(MGW)
146‧‧‧行動交換中心(MSC)
148‧‧‧服務GPRS支援節點(SGSN)
150‧‧‧閘道GPRS支援節點(GGSN)
160a、160b、160c‧‧‧e節點B
162‧‧‧移動性管理閘道(MME)
164‧‧‧服務閘道
166‧‧‧封包資料網路(PDN)閘道
180a、180b、180c‧‧‧基地台
182‧‧‧ASN閘道
184‧‧‧行動IP本地代理(MIP-HA)
186‧‧‧驗證、授權、計費(AAA)伺服器
188‧‧‧閘道
202‧‧‧基本層畫面
204‧‧‧重建後的基本層畫面
206、313、320、322、324、328‧‧‧參考區域
212‧‧‧編碼後的片段
216、336‧‧‧跨越的片段
218、238‧‧‧增強層(EL)
222‧‧‧片段標頭
224、226、228‧‧‧片段資料
230‧‧‧增強層位元流
232‧‧‧跨越的片段標頭
242‧‧‧基本層(BL)
244‧‧‧BL0
246‧‧‧BL1
248‧‧‧BL2
250‧‧‧BL3
252‧‧‧BL4
254‧‧‧EL0
256‧‧‧EL1
258‧‧‧EL2
260‧‧‧EL3
262‧‧‧EL4
264‧‧‧EL5
302‧‧‧層0
304‧‧‧層1
306‧‧‧層2
312‧‧‧POC0,2
318‧‧‧POC1,1
326‧‧‧POC1,2
330‧‧‧POC1,3
338‧‧‧POC2,2
602‧‧‧BL0
604‧‧‧BL1
606‧‧‧BL2
608‧‧‧BL3
612‧‧‧映射後的MV
622‧‧‧層間畫面
630‧‧‧EL0
636‧‧‧EL1
638‧‧‧EL2
644‧‧‧EL3
700‧‧‧EL DPB
702‧‧‧EL(t-1)
704‧‧‧ILR(t)
706‧‧‧HILR(t)
708‧‧‧EL(t+1)
710‧‧‧EL時間參考
712‧‧‧上取樣後的紋理
714‧‧‧映射後的運動
716‧‧‧紋理
718‧‧‧混合ILR產生
720‧‧‧上取樣後的紋理資訊
726‧‧‧運動域映射
728‧‧‧映射後的運動
730‧‧‧層間處理單元
732‧‧‧BL運動域
734‧‧‧BL重建後的紋理
736‧‧‧BL(t-1)
738‧‧‧BL(t)
740‧‧‧BL(t+1)
742‧‧‧BL DPB
從以下描述中可以更詳細地理解本發明,這些描述是以實例方式給出的,並且可以結合附圖加以理解,其中:第1圖描述了可以用於可縮放視訊編碼的時間及/或層間預測結構的示例。
第2圖描述了在可縮放視訊編碼中用信號發送跨越的片段的示例方法。
第3圖描述了用於用信號發送跨越的片段的示例方法。
第4圖描述了用於片段編碼的示例方法。
第5圖描述了用於片段解碼的示例方法。
第6圖描述了使用針對跨越的片段的層間映射的運動向量(MV)的運動預測的示例方法。
第7圖描述了層間處理單元。
第8圖描述了用於使用層間參考(ILR)畫面及/或混合ILR畫面的片段編碼的示例方法。
第9圖描述了用於使用層間參考(ILR)畫面及/或混合ILR畫面的片段解碼的示例方法。
第10A圖描述了可以在其中實現一個或多個所揭露的實施方式的示例通信系統的系統圖。
第10B圖描述了示例無線傳輸/接收單元(WTRU)的系統圖,其中該WTRU可以在如第10A圖所示的通信系統中使用。
第10C圖描述了示例無線電存取網路和示例核心網路的系統圖,其中該示例核心網路可以在如第10A圖所示的通信系統中使用。 第10D圖描述了示例無線電存取網路和示例核心網路的系統圖,其中該示例核心網路可以在如第10A圖所示的通信系統中使用。
第10E圖描述了示例無線電存取網路和示例核心網路的系統圖,其中該示例核心網路可以在如第10A圖所示的通信系統中使用。
此處揭露了用信號發送針對多層可縮放編碼系統的片段跨越模式的方法和裝置。在多層中的視訊訊號的對應區域之間的關聯和諸如針對空間可縮放性的上取樣濾波器設計的層間處理技術可以使得從基本層畫面中的對應區域中推測增強層畫面中的片段或畫面成為可能。相應地,增強層片段或畫面可以被跨越,因為其可以從基本層片段中推測。為了表明增強層片段或畫面可以被跨越,可以提供高級有效傳訊。例如,傳訊可以在片段標頭或NAL單元標頭中提供。例如,這樣可以改進可縮放視訊編碼的編碼效率。
一種方法可以被用來對用於多層可縮放編碼的片段進行編碼。可以確定片段已經被跨越。該片段可以是畫面的一部分或畫面。當該片段被確定將被跨越時,片段跨越模式可以在片段標頭中設定。可以確定顯式信號是否已經被用來表明該片段已經被跨越。
一種方法可以被用來對多層可縮放編碼中的片段進行解碼。片段標頭可以被解析。可以確定片段是否已經被跨越。該片段可以是畫面的一部分或畫面。當該片段已經被確定將被跨越時,可以使用來自片段標頭的資料來重建該片段。
一種方法可以被用來提供針對跨越的片段的運動向量預測。基本層畫面可以被接收。運動向量映射可以從該基本層畫面中產生。運動向量預測可以從運動向量映射中產生。增強層畫面可以從運動向量預測中產生。
一種方法可以被用於對多層可縮放編碼的片段編碼。跨越片段模式可以在片段標頭中設定。混合取樣預測可以被賦能。層間參考畫面可以被確定並且被用於預測跨越的片段。可以在片段標頭中設定旗標以表明所確定的層間預測畫面。
一種方法可以被用解碼多層可縮放編碼中的片段。片段標頭可以被解析。已經被跨越的片段可以被確定。片段是畫面的一部分或畫面。可以確定混合取樣預測可以被啟用。可以使用片段標頭來確定層間參考畫面。跨越可以使用所確定的層間參考畫面來形成或預測跨越的片段。
無線傳輸/接收單元(WTRU)可以被提供用於視訊編碼。該WTRU包括處理器。該處理器可以被配置為執行多種動作。例如,處理器可以被配置為使用參考畫面的參考區域來確定可以被跨越的畫面片段。該片段可以是畫面的一部分或畫面。該參考畫面可以是混合層間參考(HILR)畫面或層間參考(ILR)畫面。該參考畫面可以與該畫面共置(co-located)或不共置。該參考區域可以被升級,使得該參考區域的大小與該片段的大小匹配。該參考畫面可以被升級以產生升級後的參考畫面,並且重建後的參考區域可以使用該參考區域的位址以在可以與該片段的大小匹配的升級後的參考畫面中被識別。可以使用來自基本層畫面的升級後的運動向量和來自增強層畫面的紋理來產生混合層間參考畫面。跨越片段模式可以在片段標頭中設定以例如在解碼期間表明該畫面的片段將被跨越。參考區域的位址可以被***到片段標頭中。該片段標頭可以被編碼為位元流。
WTRU可以被提供用於視訊解碼。該WTRU包括處理器。該處理器可以 被配置為執行多種動作。例如,處理器可以被配置為從片段標頭中確定位元流中的畫面片段在編碼期間已經被跨越。該片段可以是畫面的一部分或畫面。參考層識別碼、參考畫面識別碼和參考區域位址可以從片段標頭中擷取。參考畫面可以使用參考層識別碼和參考畫面識別碼來擷取。該片段可以使用參考畫面的參考區域來產生。
一種方法可以被提供用於視訊編碼。跨越可以使用參考畫面的參考區域來確定將被跨越的畫面的片段。該片段可以是畫面的一部分或畫面。跨越片段模式可以在片段標頭中設定以表明畫面的片段將被跨越。參考區欄位類型可以被***到片段標頭中。該參考畫面類型可以表明該參考畫面是混合層間參考(HILR)畫面還是層間參考(ILR)畫面。該片段標頭可以被編碼為位元流。
可以在異質環境中部署視訊應用,諸如IPTV、視訊聊天、行動視訊和流視訊。這種異質性可以存在於用戶端側及/或網路側。例如,在用戶端側,存在可以包括諸如智慧型電話、平板電腦和電視(TV)三個顯示裝置的三螢幕場景。三個螢幕具有不同的顯示空間解析度。在網路側,視訊可以在諸如網際網路、WiFi網路、行動(3G和4G)網路等或以上任何組合的網路間傳送。
為了改善在這種異質環境中的使用者體驗和視訊服務品質,可以使用可縮放視訊編碼。例如,在信號可以用依賴於由應用設定的及/或由用戶端裝置支援的速率和解析度的各種不同解析度被編碼時,可縮放視訊編碼可以允許信號以高解析度被編碼。解析度可以包括各種視訊參數。該視訊參數可以包括空間解析度,諸如畫面大小;時間解析度,諸如畫面速率;視訊品質,諸如平均意見評分(MOS,mean opinion score)、語音信號雜訊比(PSNR)、結構相似度(SSIM)或視野量子力學(VQM)等等或者其 任意組合。視訊參數可以包括色度格式,諸如YUV 420、YUV 422或YUV 444;位元深度,諸如8位元或10位元視訊;複雜度;視野(view);色域;縱橫比,諸如16:9,4:3等等或者其任意組合。
高效視訊編碼(HEVC)可以支援可縮放編碼。例如,HEVC的可縮放延伸可以支援空間可縮放性,由此可縮放位元流可以包括多於一種空間解析度的信號。HEVC的可縮放延伸可以支援品質可縮放性,由此可縮放位元流可以包括多於一種品質等級的信號。可縮放性也支援3D視訊。例如,可縮放位元流可以包括2D和3D視訊訊號兩者。
儘管空間和品質可縮放性在此處針對HEVC被討論,但此處揭露的實施方式可以被延伸至其它類型的可縮放性。此外,儘管增強層和基本層在此處被討論,但此處揭露的實施方式可以被延伸至可以存在的任意數量的層。
第1圖描述了可以被用於可縮放視訊編碼的時間及/或層間預測結構的示例。第1圖可以提供針對可縮放編碼的設計並且可以提供HEVC的可縮放性延伸。如在第1圖中240處,層間參考(ILR)畫面可以被用來預測增強層(EL)238。增強層(EL)238的預測可以藉由來自層間參考(ILR)畫面的運動補償後的預測來形成,其中該層間參考(ILR)畫面可以從基本層(BL)242中處理。例如,254處的EL0可以從已經從244處BL0中處理的ILR畫面中形成或預測。作為另一示例,在256處的EL1可以從可從244處的BL0、246處的BL1及/或248處的BL2中處理的ILR畫面中預測或形成。EL 238可以諸如當兩個層之間的空間解析度可以是不同時在上取樣之後被預測或形成、當基本層畫面可能具有低品質時在去雜訊及/或恢復之後被預測或形成、當基本層位元深度低於增強層位元深度時在逆色調映射之後被預測或形成。
如266處所示,增強層238內的時間參考畫面可以被用來預測或創建增強層畫面,諸如254處的EL0。例如,使用從時間參考畫面的運動補償後的 預測(諸如254處的EL0和262處的EL4),258處的EL2可以被形成或預測。
預測源的組合可以被用來創建及/或預測增強層238中的增強層訊框。例如,264處的EL5可以使用262處的時間參考畫面EL4以及從252處的從BL4創建的ILR畫面來產生。作為另一示例,260處的EL3可以使用252處的BL4、250處的BL3、248處的BL2、258處的EL2及/或262處的EL4來形成或預測。較低層畫面的完全重建可以被執行。
作為整數個編碼樹區塊的片段可以在HEVC中使用。畫面可以包括一個或多個片段。針對編碼單元(CU)的HEVC跨越模式可以被用來提高壓縮效率。當CU可以用跨越模式被編碼時,其運動資訊(例如,運動向量、參考畫面索引、參考畫面列表)使用旗標等等可以不在位元流中傳送。運動資訊可以從多個候選者(candidate)中推測,所述多個候選者可以藉由空間和時間相鄰預測單元(PU)來形成。剩餘係數可以在跨越模式中被推測為零。
在可縮放視訊編碼中,增強層片段的PU可以從相同增強層的其它片段中形成或預測、或者可以從較低層的片段中形成或預測。根據增強層和基本層之間的關聯,例如目前增強層片段和共置基本畫面中的對應區域之間的關聯,從基本層重建後的畫面中的對應區域中推測增強層的片段是可能的。例如,可以執行基本層重建的層間處理。與使用編碼單元等級的跨越模式相比,在片段等級處的跨越模式可以實現位元節省,因為編碼後的片段中的附加資訊可以不被發送,其中該編碼單元等級可以發送跨越旗標以及針對PU的索引資訊即使當該片段被跨越。可縮放視訊編碼的編碼效率可以藉由跨越的片段的信號發送來改進。
可縮放視訊編碼可支援多層,並且層可以被設計成啟用空間可縮放性、時間可縮放性、SNR可縮放性或其它類型的可縮放性。可縮放位元流可以包括混合的可縮放性層並且增強層可以取決於一個或多個將被解碼的 較低層。
第2圖描述了用於在可縮放視訊編碼中用信號發送跨越的片段的示例方法。例如,第2圖描述了用信號發送跨越的片段216可以在兩層可縮放編碼系統中跨越的示例。跨越的片段216可以處於增強層218並且可以對應於重建後的基本層畫面204的參考區域206。跨越的片段標頭232可以被用來以信號通知跨越的片段216可以被跨越。為了確定及/或用信號發送跨越的片段216,基本層畫面202可以被上取樣以產生重建後的基本層畫面,諸如重建後的基本層畫面204。基本層畫面202可以從位元流中解碼。重建後的基本層畫面可以藉由上取樣可以從位元流中解碼的基本層畫面來創建。重建後的基本層畫面可以是參考畫面。例如,重建後的基本層畫面204可以是參考畫面。重建後的基本層畫面204可以經由線性及/或非線性層間處理機制進行處理以提高預測精確度。例如,如果基本層202的解析度具有與增強層218的解析度不同的解析度,基本層畫面202可以被上取樣以創建重建後的基本層畫面204。如果基本層畫面202具有較低品質,那麼基本層畫面202可以被去雜訊。這可以發生在諸如當基本層畫面以更高量化參數(QP)被編碼時。當基本層畫面可以表示不同視圖(這可以發生在當使用3D視訊編碼時),那麼視差補償(disparity compensation)可以被應用來創建參考畫面。例如,當解碼3D視訊時,BL可以表示左視圖,EL可以表示右視圖。表示左視圖的BL可以被用來創建參考畫面,該參考畫面可以被用來預測由EL表示的右視圖。
重建後的基本層畫面204可以被用於增強層片段(例如,跨越的片段216)的層間預測跨越。例如,在214處,可以確定的是增強層218的跨越的片段216可以被跨越,因為跨越的片段216對應於參考區域206。可以在高層用信號發送跨越的片段216可以在編碼及/或解碼期間跨越。例如,跨越模式可以 在跨越的片段標頭232中以信號發送,以表明跨越的片段216可以在編碼及/或解碼期間跨越。跨越的片段標頭232可以在增強層位元流230中編碼。增強層編碼器可以繞過跨越的片段216的編碼。例如,跨越的片段216的CU,諸如在210處的跨越的片段的CU,可以不被包括在增強層位元流230中。
可以確定的是編碼後的片段212可以被編碼。例如,可以是編碼器的處理器可以將編碼後的片段212的CU(諸如208處的編碼後的CU)編碼為增強層位元流230。編碼後的片段212的片段標頭222可以被包括在增強層位元流230中。
增強層位元流230可以包括片段資料224、片段資料226、片段資料228、片段標頭222和跨越的片段標頭232。跨越的片段標頭232可以表明跨越的片段216可以被跨越。片段標頭222可以表明片段資料224、片段資料226和片段資料228可以屬於編碼後的片段212。增強層位元流230可以被發送至解碼器。解碼器可以接收增強層位元流230並且可以使用片段標頭222、片段資料224、片段資料226和片段資料228來建構編碼後的片段212。解碼器可以藉由上取樣基本層畫面、創建重建後的基本層畫面以及從重建後的基本層畫面中拷貝參考區域來建構為跨越的片段216,參考區域可以對應於跨越的片段216。
以下揭露的信號可以被用來表明跨越的片段並且可以被用來表明相關的資訊,諸如參考區域、運動資訊、片段範圍等等。
片段類型可以被用來表明片段可以在諸如編碼及/或解碼期間被跨越。混合視訊編碼標準(例如,MPEG-1、MPEG-2、H264和HEVC)可以在片段標頭中使用3種編碼後的片段(I片段、P片段以及的B片段)類型。跨越的片段可以被添加以表明目前片段可以被跨越。出於反向相容性,片段類型、跨越的片段可以在當該片段可以是增強層片段時為有效的,其中該增強層 片段可以由該片段的層id來表明。
位元旗標可以被用來表明片段可以在諸如編碼及/或解碼期間被跨越。例如,位元旗標可以被添加到片段標頭以表明目前片段是否被跨越。為了反向相容性,跨越如果該片段可以是增強層片段,可以用信號發送跨越的片段旗標,其中該增強層片段可以由該片段的層id來表明。
網路抽象層(NAL)單元可以被用來表明片段可以被跨越。例如,NAL類型(SKIP_SLICE(跨越_片段))可以在NAL單元標頭中定義,由此應用可以偵測處於NAL單元等級的跨越的片段(skipped slice)。出於反向相容性,可以用信號發送NAL類型SKIP_SLICE,如果該片段可以是增強層片段,其中該增強層片段可以由針對該片段的層id來表明。
第3圖描述了用於用信號發送跨越的片段的示例方法。用信號發送跨越的片段的方法可以是顯式地用信號發送、隱式地用信號發送或者其組合。用於編碼及/或解碼跨越後的片段的方法可以取決於是使用顯式的信號還是使用隱式的信號。例如,顯式的信號可以被用來表明可以用於創建重建後的畫面的參考層、以及將從重建後的畫面中使用的參考區域。該參考區域可以被用來創建跨越的片段。當可以不使用顯式信號時,可以確定跨越的片段已經被隱式地用信號發送。對於與可以包括跨越的片段的畫面共置的重建後畫面可以從參考層中選擇。處於與跨越的片段共置的區域中的參考區域可以被用來創建跨越的片段。該參考區域可以被上取樣、去雜訊、視差補償等等。可以用序列等級以信號發送層優先序和相關性,諸如使用視訊參數集合(VPS)。
如第3圖中所示,隱式傳訊可以在342處發生。例如,在342處,338處POC2,2的跨越的片段336可以從對應區域(例如,POC1,2的參考區域322)中預測。這可以發生在上取樣之後。304處的層1和302處的層0可以是針對306處 的層2的參考層。304處的層1具有比層302更高的優先序。POC1,2中的參考區域322可以根據POC2,2中跨越的片段336的起始位址和結束位址來推測。跨越的片段366的起始位址可以在片段標頭中用信號發送。跨越的片段336的結束位址從片段標頭中可以是未知的。多個選項可以被用來識別結束位址。例如,結束位址可以使用解碼器來識別,該解碼器可以解析下一個片段標頭並且可以從下一個片段的起始位址中推測目前片段的結束位址。作為另一示例,跨越的片段結束的位址可以在目前片段標頭中以信號發送,這樣可以使解碼延遲最小化。作為另一示例,多個跨越的編碼樹區塊(CTB)可以被用來表明該片段結束位址並且可以用信號發送。
顯式傳訊可以在346、344、348、350和352處發生。如果顯式傳訊可以被使用,參考區域可以從參考層的參考畫面中取得。參考區域的位置可以不同於參考層中的片段位置。跨越的片段可以從來自不同參考層的不同參考畫面的多於一個參考區域中形成或預測。
在346處,338處的畫面序數(POC)2,2中的跨越的片段336可以從318處的POC1,1中的參考區域320中預測。318處的POC1,1可以不是針對338處的POC2,2的共置參考畫面。參考區域320可以對應於338處的POC2,2中的336中的跨越的片段的區域。
在344處,338處的POC2,2中的跨越的片段336可以從326處的POC1,2中的參考區域322中預測。326處的POC1,2可以是針對338處的POC2,2的共置參考畫面。參考區域320可以是不對應於338處的POC2,2中的跨越的片段336的區域。326處的POC1,2可以在層1中,其中該層1可以是對於層2的最高優先序參考層。
在348處,338處的POC2,2中的跨越的片段336可以從312處的POC0,2中的參考區域313中預測。312處的POC0,2可以是針對338處的POC2,2的共置參考 畫面。參考區域313可以是可以與338處的POC2,2中的跨越的片段336對應的區域。312處的POC0,2可以在層0中,其中該層0具有比層1低的優先序。
如第3圖中所示,多假設預測可以在352和350處使用。例如,338處的POC2,2中跨越的片段336可以從318處的POC1,1中的參考區域320、以及330處的POC1,3中的參考區域328中預測。這可以被實現例如以提供靈活性以綜合參考區域。
此處揭露的多種方法可以被用來以信號發送例如參考區域320、參考區域322、參考區域324、參考區域313和參考區域328之類的參考區域的位置。例如,參考層索引;參考畫面的識別碼,諸如畫面序數(POC)值或者目前畫面和參考畫面之間的距離;及/或參考區域的起始和結束位址,諸如CTB位址或像素位置;等等可以被***到片段標頭中以表明參考區域的位置。作為另一示例,參考層索引、參考畫面識別碼、參考區域的起始位址及/或編碼樹區塊(CTB)的總數可以被***到片段標頭中以表明參考區域的位置。作為另一示例,參考層索引、參考畫面識別碼以及相對資訊(例如運動或不一致資訊)可以被用來表明參考區域的位置。運動資訊或不一致資訊可以被應用到片段區域並且可以表明跨越的片段以及其參考區域之間的相對移動(在X和Y方向上)。作為另一示例,其中多於一個參考區域可以被用來預測跨越的片段,多個參考區域、參考層ID、參考畫面POC和例如參考區域的運動向量之類的相對資訊可以用信號發送。附加地,取代平均參考區域,不同的權重可以被分配給不同的參考區域。當權重可以被應用,與參考區域相關聯的權重因數可以在片段標頭中用信號發送。
此處描述的跨越的片段相關的信號也可以被包括在自適應參數集合(APS)中。如果多於一個片段在畫面範圍內被跨越並且這些片段與其各自的參考區域分享相同關係,這樣可以降低與跨越的片段有關的傳訊負擔。
此處描述的跨越的片段相關的傳訊對於增強層片段可以是有效的。這可以被實現以例如維持與單層HEVC標準的反向相容性。
如果片段可以是跨越的片段,用於CU等級編碼的片段標頭中的語法元素可以被跨越以降低負擔。例如,針對迴路內濾波器的參數(例如,取樣自適應偏差(SAO)濾波器或解塊濾波器)以及熵編碼可以不位於片段標頭中。
為了維持解碼後的畫面緩衝器(DPB)操作一致性,其狀態可以在DPB中經歷改變的參考畫面可以用信號發送,即使該片段被跨越。這樣可以被應用到畫面的片段。如果該片段標頭可以是跨越的片段,在片段標頭中的參考畫面集合(RPS)傳訊可以被維持(即不被繞過)。在片段標頭中指定的RPS傳訊可以被移除並且語法元素集合可以被***以表明哪個參考畫面在目前畫面編碼之後經歷DPB狀態改變。例如,可以在跨越的片段標頭中***類似RPS的信號子集合以表明那些參考畫面可以被標記為“未用於參考”並且新的參考畫面可以被表示為“用於短期參考”或“用於長期參考”。
第4圖描述了用於片段編碼的示例方法。例如,參考層索引、POC值和參考片段位址可以被***到片段標頭以表明可以被用來重建跨越的片段的參考區域的位置。跨越的片段可以是被跨越的畫面的一部分、跨越的畫面等等。
在402處,可以開始將片段編碼為位元流。該位元流可以是關於第2圖所示的增強層位元流230。再次參考第4圖,在404處,可以確定畫面的片段是否被跨越。這樣可以例如藉由分析參考畫面的參考區域來實現以確定參考區域是否被用來在解碼期間重建跨越的片段。在406處,可以確定的是片段不被跨越並且片段標頭可以被編碼。該片段標頭可以被編碼在位元流中並且跟隨片段分段,該片段分段具有片段資料(例如,CU),該片段分段可 以被包括在位元流中或者被編碼在位元流中。在408處,CU可以被編碼在位元流中。在410處,針對在408處編碼的CU是否是對於片段進行編碼的最後一個CU做出判斷。如果CU不是進行編碼的最後一個CU,進行編碼的下一個CU可以被識別並且在408處被編碼為位元流;該過程可以被重複直到最後一個CU被編碼為位元流。如果該CU為進行編碼的最後一個CU,那麼將該片段編碼為位元流可以在422處結束。
在412處,可以確定的是該片段可以被跨越並且片段跨越模式可以在片段標頭中設定。該片段跨越模式可以表明該片段可以被跨越。在414處,可以確定是顯式傳訊還是隱式傳訊可被用來表明該片段可以被跨越。
在418處,當顯式傳訊被用來表明該片段被跨越時,該跨越片段標頭可以被編碼在位元流中。例如,例如跨越片段標頭之類的顯式信號可以表明參考層、參考畫面以及將從參考畫面中使用的參考區域來重建跨越的片段。例如,該參考區域可以被用來創建跨越的片段。該跨越片段標頭可以包括用來表明參考畫面的參考區域位置的資訊,該參考畫面可以被用來預測或創建跨越的片段。例如,在跨越片段標頭中的資訊可以包括參考層索引;參考畫面識別碼,諸如畫面序數(POC)值或者目前畫面和參考畫面之間的距離;及/或參考區域的起始和結束位址,例如CTB位址或像素位置;等等;作為另一示例,跨越片段標頭中的資訊可以包括參考層索引、參考畫面識別碼、參考區域的起始位址、編碼樹區塊(CTB)的總數等等。作為另一示例,跨越片段標頭中的資訊可以包括參考層索引;參考畫面識別碼;相對資訊,諸如運動或不一致資訊等等。運動資訊或不一致資訊可以被應用到片段區域並且表明跨越的片段以及其參考區域之間的相對移動(在X和Y方向上)。作為另一示例,其中多於一個參考區域被用來預測跨越的片段,跨越片段標頭中的資訊可以包括多個參考區域;參考層ID;參 考畫面POC;相對資訊,諸如參考區域的運動向量等等。片段標頭可以是關於第2圖所示的片段標頭232。
再次參考第4圖,在420處,來自參考畫面的參考區域可以被識別。例如,來自參考畫面的參考區域可以被識別,由此該參考區域可以被用來重建跨越的片段。這可以被實現以例如允許對下一個片段的編碼發生在當跨越的片段未編碼在位元流中時。該參考區域可以從參考層的參考畫面中取得。該參考畫面中的參考區域位置不同於跨越的片段的位置。該跨越的片段可以從來自不同參考層的不同參考畫面的多於一個參考區域中形成或預測。
參考畫面可以是由跨越的片段標頭表明的參考畫面。例如,該跨越的片段標頭可以表明參考畫面可以被用來創建或預測跨越的片段。作為另一示例,跨越的片段標頭可以表明被用來創建或預測跨越的片段的參考畫面的參考區域,其中該參考區域可以被用來重建跨越的片段。
該參考區域可以被用來編碼附加的片段。例如,基本層畫面可以被上取樣以創建重建後的基本層畫面。該基本層畫面或重建後的基本層畫面可是為參考畫面。該參考畫面可以經由線性及/或非線性層間處理機制進行處理以提高預測精確度。來自參考畫面的參考區域可以被用來預測跨越的片段。例如,來自參考畫面的參考區域可以被用於增強層片段的層間預測,該增強層片段可以是跨越的片段。
由於跨越的片段未被編碼為位元流,被用來預測跨越的片段的參考區域可以被用來編碼下一個片段。在422處,跨越的片段標頭可以被編碼為位元流,而參考區域未被編碼為位元流。
在416處,來自參考畫面的區域的資料可以被識別。參考畫面可以是共置的參考畫面並且在多層視訊編碼內具有最高優先序。跨越的片段可以從 對應於跨越的片段的參考區域中形成或預測。將被編碼的片段可以是包括諸如層0、層1和層2的多層視訊的一部分。層2可以是增強層。層1可以是另一增強層。層0可以是基本層。層2可以具有比層1更高的優先序,並且層1可以具有比層0更高的優先序。層2畫面可以從層1參考畫面及/或層0參考畫面中預測。參考區域可以來自來源於具有最高優先序的參考層的參考畫面。例如,跨越的片段可以在層2中並且用來重建跨越的片段的參考區域可以來自層1。層1可以是針對層2的參考層、並且可以具有比層0更高的優先序。為了允許在解碼期間推測參考區域,參考區域的起始位址可以***到片段標頭中。參考區域的結束位址可以***或不被***到片段標頭中。當參考區域的結束位址不被***到片段標頭中,結束位址仍然可以被解碼器識別。該結束位址可以由解碼器解析下一個片段標頭並且從下一個片段的起始位址中推測目前片段的結束位址的方式來識別。作為另一示例,跨越的片段結束的位址可以在目前片段標頭中用信號通知,這樣可以使解碼延遲最小化。作為另一示例,多個跨越的編碼樹區塊(CTB)可以被用來表明片段結束位址並且可以用信號發送。在422處,該片段標頭可以被編碼為位元流。
第5圖描述了用於片段解碼的示例方法。例如,參考層索引;參考畫面;POC值或目前畫面和參考畫面之間的距離;及/或參考區域的起始和結束位址(例如,CTB位址或像素位置)等等可以從片段標頭中讀取以確定參考區域的位置。跨越的片段可以是可被跨越的畫面的一部分、可被跨越的畫面等等。
在502處,可以開始解碼來自位元流的片段。該位元流可以是關於第2圖所示的增強層位元流230。再次參考第5圖,在504處,片段標頭可以被解析並且可以確定該片段標頭是否表明目前片段是否已經被跨越。該片段標 頭可以是跨越的片段標頭。
在508處,當片段標頭未表明目前片段還未被跨越時,該片段標頭可以被解析。該片段標頭可以表明片段資料諸如CU,該片段資料可以被編碼在位元流中。在510處,CU可以從位元流中進行解碼。在512處,針對在508處解碼的CU是否為對於由片段分段表明的片段進行解碼的最後一個CU做出判斷。如果CU不是進行解碼的最後一個CU,進行解碼的下一個CU可以被識別並且在510從位元流中進行解碼;該過程可以被重複,直到針對片段的最後一個CU從位元流中被解碼時為止。如果該CU可以是進行解碼的最後一個CU,那麼對來自位元流中的片段的解碼可以在524處結束。
在514處,當已經確定目前片段已經被跨越,該片段標頭可以被解析以確定片段跨越模式傳訊。在516處,來自片段標頭的片段跨越模式傳訊可以被分析,以確定該片段跨越模式傳訊是否已經為隱式或顯式。
在518處,可以確定顯式傳訊已經被用來用信號通知目前片段已經被跨越。例如,跨越片段標頭已經被編碼在位元流中,以表明該片段已經被跨越。該跨越片段標頭或片段標頭可以表明參考層、參考畫面以及將從該參考畫面中使用的參考區域來重建跨越的片段。例如,參考區域可以被用來重建跨越的片段。跨越片段標頭可以包括被用來表明參考畫面的參考區域位置的資訊,該參考畫面可以被用來預測或創建跨越的片段。例如,跨越片段標頭中的資訊可以包括參考層索引;參考畫面的識別碼,諸如畫面序數(POC)值或者目前畫面和參考畫面之間的距離;及/或參考區域的起始和結束位址,諸如CTB位址或像素位置;等等。作為另一示例,跨越片段標頭中的資訊可以包括參考層索引、參考畫面識別碼、參考區域的起始位址、編碼樹區塊(CTB)的總數等等。作為另一示例,跨越片段標頭中的資訊可以包括參考層索引;參考畫面識別碼;相對資訊,諸如運動或不一 致資訊等等。運動資訊或不一致資訊可以被應用到片段區域並且可以表明跨越的片段以及其參考區域之間的相對移動(在X和Y方向上)。作為另一示例,其中多於一個參考區域被用來預測跨越的片段,跨越片段標頭中的資訊可以包括多個參考區域;參考層ID;參考畫面POC;相對資訊,諸如參考區域的運動向量等等。該片段標頭可以是關於第2圖所示的片段標頭232。
再次參考第5圖,在522處,使用來自參考畫面的參考區域可以重建跨越的片段。例如,來自參考畫面的參考區域可以被確定,由此該參考區域可以被用來重建跨越的片段。這可以被實現以例如當跨越的片段未被編碼在位元流中時允許跨越的片段進行重建。該參考區域可以從參考層的參考畫面中取得。該參考畫面中的參考區域位置不同於跨越的片段的位置。該跨越的片段可以從來自不同參考層的不同參考畫面的多於一個參考區域中形成或預測。
該參考畫面可以是由跨越的片段標頭表明的參考畫面。例如,跨越的片段標頭可以表明參考畫面可以被用來創建或預測跨越的片段。作為另一示例,跨越的片段標頭可以表明被用於創建或預測跨越的片段的參考畫面的參考區域,該參考區域可以被用於重建跨越的片段。
參考區域可以被用來重建跨越的片段。例如,基本層畫面可以被上取樣以創建重建後的基本層畫面。該基本層畫面或重建後的基本層畫面可以是參考畫面。該參考畫面可以經由線性及/或非線性層間處理機制處理以提高預測精確度。來自參考畫面的片段可以被用於預測跨越的片段。例如,來自參考畫面的片段可以被用於增強層片段的層間預測,該增強層片段可以是跨越的片段。來自參考畫面的片段可以是參考區域。
在520處,當隱式傳訊被使用時,跨越的片段可以從共置的參考畫面的 參考區域中重建。跨越的片段可以從可以與跨越的片段對應的參考區域中形成或預測。將被解碼的片段可以是包括例如層0、層1和層2的多層視訊的一部分。層2可以是增強層。層1可以是另一增強層。層0可以是基本層。層2畫面可以從層1參考畫面及/或層0參考畫面中預測。層2可以具有比層1更高的優先序,而層1可以具有比層0更高的優先序。參考區域可以來自參考畫面,該參考畫面可以來自具有最高優先序的參考層。例如,跨越的片段可以在層2中、並且被用於重建跨越的片段的參考區域可以來自層1。層1可以是針對層2的參考層,並且可以具有比層0更高的優先序。為了允許在解碼期間推斷參考區域,參考區域的起始位址可以***到片段標頭中。參考區域的結束位址可以***或不***片段標頭中。當參考區域的結束位址未***片段標頭中時,結束位址仍然可以由解碼器識別碼。結束位址可以藉由解碼器來識別,該解碼器可以解析下一片段標頭、並且從下一片段的起始位址中推斷目前片段的結束位址。作為另一示例,跨越可以在目前片段標頭中以信號發送跨越的片段結束的位址,這使解碼延遲最小化。作為另一示例,大量跨越的編碼樹區塊(CTB)可以被用於表明片段結束位址並且被用信號發送。在524處,來自位元流中的片段的解碼可以結束。
第6圖描述了根據針對跨越的片段的層間映射的運動向量(MV)的運動預測的示例方法。時間運動向量預測(TMVP)技術可以被用於從之前編碼的畫面的MV中預測目前畫面的運動向量(MV)。這可以被實現以例如實現有效的視訊壓縮。TMVP可以在單層HEVC中使用。由於跨越片段不傳送任何編碼資料(例如,區塊參考索引和MV)至解碼器,如果跨越的片段可以是其共置畫面時,以下片段可能不能夠使用MV預測。這樣可能會造成編碼效率降低。
為了避免當使用跨越片段模式時編碼效率降低,層間運動資訊映射技 術可以被應用到跨越的片段中。層間運動映射技術可以被用來為處理後的層間參考畫面準備可以包括參考索引和MV的運動資訊。當共置的參考畫面為層間參考畫面時,準備的運動資訊接著可以被用來啟用時間運動向量預測。在增強層跨越的片段的情況下,運動資訊可以從基本層畫面中映射並且可以被用作跨越片段的運動域(motion field)。該運動資訊可以包括參考索引和MV。當跨越的片段可被用作另一增強片段的共置畫面時,跨越的片段的準備後的運動資訊可以被用作時間運動向量預測器。第6圖描述了該方法的示例。
參考第6圖,在基本層和增強層之間可以啟用空間可縮放性。基本層畫面(BL0、BL1、BL2和BL3)可以具有MV,該MV可以被進一步上取樣至層間映射的MV。例如,基本層畫面,諸如602處的BL0、604處的BL1、606處的BL2和608處的BL3可以包括運動向量。對於增強層畫面(例如630處的EL0、636處的EL1、638處的EL2和644處的EL3),運動向量可以從相同層內的先前編碼的畫面MV中預測。例如,在634處,636處的EL1的MV可以從630處的EL0的632處的MV中預測。638處的EL2可以是跨越的片段。在640處,644處的EL3的MV可以不從638處的EL2的MV中預測,因為EL2的MV可能並不可用。在642處,644處的EL3的MV可以從626處的上取樣後的層間映射的MV中預測。在626處上取樣後的層間映射的MV可以從606處的基本層畫面BL2的MV中上取樣。例如,在602處的BL0可以被上取樣,由此在614處的基本層MV可以使用MV映射以在610處被映射,從而在上取樣後的層間畫面622內產生映射後的MV 612。當跨越的片段在增強層處使用時,這可以被實現以諸如保護由時間運動向量預測達到的增益。時間運動向量預測也可以使用來自共置畫面的參考索引、並且也可以使用層間映射的運動資訊,該層間映射的運動資訊可以包括從基本層中映射的參考索引。
ILR畫面可以從處於空間可縮放中的參考層的重建後畫面中上取樣以諸如提高預測精確度。混合ILR(HILR)畫面可以從來自參考層的映射後的運動域以及增強層的時間參考畫面的紋理(texture)中形成。例如,使用來自EL的紋理資訊以及來自BL的運動資訊可以創建HILR。當被用來預測EL視訊時,混合層間參考畫面可以提供更好的可縮放編碼效率。EL紋理資訊可以不受與BL紋理資訊相同的限制。
映射後的運動域可以諸如以16x16區塊單元進行描述。ILR(t)的映射後的運動域的16x16區塊具有相同的運動資訊。映射後的運動域可以從BL畫面BL(t)的壓縮後的運動域中進行推導。可以假定的是相同的限制可以適用於用來產生混合ILR畫面的映射後的運動域。其它映射後的運動域,諸如不具有或具有於此描述的其中一種限制的運動域可以被用來產生混合ILR。
映射後的運動域可以包括以下運動資訊中的一者或多者,例如,假定位於(bx,by)的16x16區塊可以被表示為BMF(bx,by)。表明BMF(bx,by)的預測是否可以從參考畫面列表L0或參考畫面列表L1中推導的旗標表示為:PredFlagLx(BMF(bx,by)),Lx=L0,L1。L0、L1或L0/L1預測的運動向量表示為MVLx(BMF(bx,by)),Lx=L0,L1。L0、L1或L0/L1預測的參考畫面索引表示為RefIdxLx(BMF(bx,by)),Lx=L0,L1。如果PredFlagLx(BMF(bx,by))=0,Lx=L0或L1,對應RefIdxLx(BMF(bx,by)),Lx=L0,L1的值可以被設為無效。
假定位於(bx,by)處的混合ILR畫面中的16x16區塊可以被表示為BH-ILR(bx,by),區塊BH-ILR(bx,by)可以藉由應用使用了BMF(bx,by)的對應映射後的運動資訊以及EL時間參考畫面的運動補償後的預測來獲得。當PredFlagL0(BMF(bx,by))及/或PredFlagL1(BMF(bx,by))中的一者可以等於1時,位於BH-ILR(bx,by)的混合ILR畫面可以使用諸如等式(3)中提供的單向預測來預測: B H-ILR (bx,by)=RefEL(bx+mvx,by+mvy) (3)
例如,PredFlagL0(BMF(bx,by))=1及/或PredFlagL1(BMF(bx,by))=0,mvx和mvy可以分別為MVL0(BMF(bx,by)的水平和垂直分量。RefEL可以是滿足等式(4)中條件的EL參考畫面。RefEL的畫面序數(POC,或者等同於時間實例)可以與由RefIdxL0(BMF(bx,by))表示的BL參考畫面的POC相同。
POC(Ref EL )=POC(Ref BL (RefIdxLx(B MF (bx,by))) (4)
例如,當PredFlagL0(BMF(bx,by))=1及/或PredFlagL1(BMF(bx,by))=1時,可以使用由等式(5)提供的雙向預測來預測B H-ILR (bx,by) 其中mvx0和mvy0可以是MVL0(BMF(bx,by))的水平和垂直分量,並且mvx1和myy1可以是MVL1(BMF(bx,by))的水平和垂直分量。可以是滿足等式(6)和(7)中條件的EL參考畫面。
POC(Ref 0 EL )=POC(Ref BL (RefIdxL0(B MF (bx,by))) (6)
POC(Ref 1 EL )=POC(Ref BL (RefIdxL1(B MF (bx,by))) (7)
例如,當PredFlagL0(BMF(bx,by))=0並且PredFlagL1(BMF(bx,by))=0時,對應的16x16區塊可以被當作區塊間預測。可以使用等式(8)來獲得BH-ILR(bx,by):B H-ILR (bx,by)=B ILR (bx,by) (8)其中BILR(bx,by)可以是上取樣後(例如,如果空間比率>1)的重建的基本層區塊。
諸如當運動向量MVLx(BMF(bx,by)),Lx=L0,L1的分量具有分數像素精確度時,內插濾波器可以被用來獲得分數像素位置處的像素值。內插濾波器可以與在第5圖和第6圖中的單層編碼器/解碼器的時間預測過程中使用的內插濾波器相同。例如,可以使用與HEVC中相同的8分接頭亮度內插濾波器和4分接頭色度內插濾波器。其它內插濾波器可以被用來降低複雜度及/或改進在層間處理期間的運動補償後的預測的性能。例如,可以使用具有更短濾波器分接頭的內插濾波器。迴路濾波器(例如,解塊濾波器)可以被用來改進在層間處理期間的運動補償後的預測的品質。
第7圖描述了層間處理單元,其可以是處理器。例如,第7圖可以顯示處理ILR和HILR的層間處理單元。例如當參考層大量以SNR可縮放性量化時,HILR可以提供比ILR更好的層間預測精確度。這裡揭露的跨越的片段的方法可以從ILR畫面或HILR畫面的對應區域推斷增強層中的片段。
跨越片段傳訊可以被設計為從來自參考層的ILR畫面中推斷跨越的片段。傳訊可以在跨越的片段從多個參考層的多於一個共置ILR畫面或者從至少一個參考層的非共置ILR畫面中形成或預測時被使用。在ILR或HILR畫面是針對跨越片段的候選時,傳訊也可以被用於識別跨越的片段可以從哪個參考畫面中推斷。
可以在跨越的片段標頭中使用例如scalable_skipped_slice_pred_type(可縮放_跨越的_片段_預測_類型)之類的旗標跨越以表明哪個層間參考畫面可以被用於預測跨越的片段。參考畫面可以是ILR、HILR等等。在混合樣本預測被賦能用於那一片段時,可以用信號通知旗標。當旗標不存在時,預設值可以表明ILR可以被用於預測跨越的片段。旗標可以例如被添加到序列參數集合(SPS)或畫面參數集合(PPS)以識別涉及活動的SPS或PPS的跨越的片段可以從哪個ILR或HILR畫面中推斷出。
如第7圖所示,層間處理單元730可以包括多個模組,諸如ILR 724、運動域映射726和混合ILR產生718。ILR 724可以發送上取樣後的紋理資訊至增強層(EL)解碼後的畫面緩衝器(DPB)700、混合ILR產生718運動域映射726、及/或從增強層(EL)解碼後的畫面緩衝器(DPB)700、混合ILR產生718和運動域映射726中接收上取樣後的紋理資訊720。運動域映射726可以發送映射後的運動728至混合ILR產生718、及/或從混合ILR產生718中接收映射後的運動728。運動域映射728可以發送映射後的運動714至EL DPB 700、及/或從EL DPB 700中接收映射後的運動714。運動域映射728可以發送映射後的運動至ILR 724及/或從ILR 724中接收映射後的運動。運動域映射728可以發送BL重建後的紋理734和BL運動域732到BL DPB 742。運動域映射728可以從BL DPB 742接收BL重建後的紋理734和BL運動域732。混合ILR產生718可以發送紋理716及/或EL時間參考710到EL DPB 700。混合ILR產生718可以從EL DPB 700接收紋理716及/或EL時間參考710。
層間處理單元730可操作地連接到EL DPB 700。例如,層間處理單元730可以發送及/或從EL DPB 700接收資訊,該資訊可以包括上取樣後的紋理712、映射後的運動714、紋理716和EL時間參考710。EL DPB可以包括702處的EL(t-1)、704處的ILR(t)、706處的HILR(t)和708處的EL(t+1)。704處的ILR(t)可以包括上取樣後的紋理712和映射後的運動714。706處的HILR(t)可以包括映射後的運動714和紋理716。
層間處理單元730可操作地連接到基本層(BL)DPB。例如,層間處理單元730可以發送及/或從BL DPB 742接收資訊,該資訊可以包括736處的BL(t-1)、738處的BL(t)、740處的BL(t+1)。BL DPB 742可以接收及/或發送734處BL的重建後的紋理和732處的BL運動域。
第8圖描述了用於使用層間參考(ILR)畫面及/或混合ILR畫面的片段 編碼的示例方法。例如,ILR跨越片段旗標、參考層索引、POC值和參考片段位址可以被***到片段標頭以表明可以被用於重建跨越的片段的參考區域的位置。跨越的片段可以是被跨越的畫面的一部分、被跨越的畫面等等。
在802處,可以開始將片段編碼為位元流。位元流可以是關於第2圖顯示的增強層位元流230。再次參考第8圖,在804處,可以確定畫面的片段是否被跨越。這例如可以藉由分析參考畫面的參考區域來實現以確定參考區域在解碼期間是否可以被用於重建跨越的片段。在806處,可以確定片段不被跨越並且片段標頭被編碼。片段標頭可以編碼在位元流中並且可以跟隨可以具有諸如CU的片段資料的片段分段,該片段分段可以被包括或編碼在位元流中。在808處,CU可以被編碼在位元流中。在810處,針對在808處編碼的CU是否為對於片段進行編碼的最後一個CU做出判斷。如果CU不是進行編碼的最後一個CU,則進行編碼的下一個CU可以被識別並且在808處編碼為位元流;該過程可以被重複,直到針對片段的最後一個CU可以被編碼為位元流。如果CU是進行編碼的最後一個CU,則將片段編碼為位元流可以在826處結束。
在812處,可以確定片段可以被跨越並且片段跨越模式可以在片段標頭中設定。片段跨越模式可以表明片段可以被跨越。在814處,可以確定顯式傳訊還是隱式傳訊可以被用於表明片段可以被跨越。
在818處,當顯式傳訊被用於表明片段可以被跨越時,跨越片段標頭可以被編碼在位元流中。例如,顯式信號(諸如跨越片段標頭)可以表明ILR跨越片段旗標、參考層、參考畫面和將從參考畫面中使用的參考區域來重建跨越的片段。例如,參考區域可以被用於創建跨越的片段。ILR跨越片段旗標可以表明ILR還是HILR可以用於重建跨越的片段。例如旗標可以表明參考畫面是ILR或HILR。跨越的片段標頭可以包括用於表明參考畫面的參考 區域的位置的資訊,該參考區域可以被用於預測或創建跨越的片段。例如,跨越片段標頭中的資訊可以包括ILR跨越片段旗標;參考層索引;參考畫面的識別碼,諸如畫面序數(POC)值或目前畫面和參考畫面之間的距離;及/或參考區域的起始和結束位址,諸如CTB位址或像素位置;等等。作為另一示例,跨越片段標頭中的資訊可以包括ILR跨越片段旗標、參考層索引、參考畫面識別碼、參考區域的起始位址、編碼樹區塊(CTB)的總數等等。作為另一示例,跨越片段標頭中的資訊可以包括ILR跨越片段旗標、參考層索引、參考畫面識別碼、諸如運動或不一致資訊的相對資訊等等。運動資訊或不一致資訊可以在片段區域上應用並且可以表明跨越的片段和其參考區域之間的相對運動(在X和Y方向上)。作為另一示例,其中多於一個參考區域可以被用於預測跨越的片段,跨越片段標頭中的資訊可以包括ILR跨越片段旗標、多個參考區域、參考層ID、參考畫面POC、諸如參考區域的運動向量之類的相對資訊等等。片段標頭可以是關於第2圖顯示的片段標頭232。
再次參考第8圖,在820處,ILR跨越片段旗標可以被用於確定是使用ILR還是HILR。在822處,可以確定ILR被使用並且來自參考畫面的參考區域可以被用於形成或預測跨越的片段。參考畫面可以是ILR。例如,來自ILR畫面的參考區域可以被用於重建跨越的片段。這可以被實現例如以允許對下一片段的編碼在跨越的片段不被編碼在位元流中時發生。ILR畫面中的參考區域的位置可以與跨越的片段的位置不同。
ILR畫面可以由跨越的片段標頭表明。例如,跨越的片段標頭可以表明ILR畫面可以被用於創建或預測跨越的片段。作為另一示例,跨越的片段標頭可以表明被用於創建或預測跨越的片段的ILR畫面的參考區域,該參考區域可以被用於重建跨越的片段。
參考區域可以例如被用於編碼附加的片段。例如,基本層畫面可以被上取樣以創建ILR畫面。ILR畫面可以經由線性及/或非線性層間處理機制處理以改善預測精確度。來自ILR畫面的片段可以被用於預測跨越的片段。例如,來自ILR畫面的片段可以被用於增強層片段的層間預測,該增強層片段可以是跨越的片段。來自ILR畫面的片段可以是參考區域。
由於跨越的片段可能沒有編碼為位元流,可以被用於預測跨越的片段的參考區域可以被用於編碼下一片段。在826處,在參考區域沒有被編碼為位元流時,跨越的片段標頭可以被編碼為位元流。
在824處,可以確定HILR可以被使用並且來自HILR的參考區域可以被識別。HILR可以藉由使用來自EL的紋理資訊和來自BL的運動資訊作為運動補償後參考畫面被創建。來自HILR的參考區域可被用於重建跨越的片段。這可以被實現以例如允許對下一片段的編碼在跨越的片段沒有被編碼為位元流時發生。HILR中參考區域的位置可以與跨越的片段的位置不同。在826處,在參考區域沒有被編碼為位元流時,跨越的片段標頭可以被編碼為位元流。
在816處,來自參考畫面的區域的資料可以被用於形成或預測跨越的片段。參考畫面可以是共置參考畫面、並且在多層視訊編碼中具有最高優先序。跨越的片段可以從與跨越的片段對應的參考區域中形成或預測。將被編碼的片段可以是包括例如層0、層1和層2的多層視訊的一部分。層2可以是增強層。層1可以是另一增強層。層0可以是基本層。層2畫面可以從層1及/或層0參考畫面中預測。層2可以具有比層1更高的優先序,層1可以具有比層0更高的優先序。參考區域可以是來自參考畫面,該參考畫面可以來自具有最高優先序的參考層。例如,跨越的片段在層2中,被用於重建跨越的片段的參考區域可以來自層1。層1可以是層2的參考層、並且具有比層0更 高的優先序。為了允許在解碼期間推斷參考區域,參考區域的起始位址可以***到片段標頭中。參考區域的結束位址可以***或不***片段標頭中。當參考區域的結束位址未***片段標頭中時,結束位址仍然可以由解碼器識別。可以使用解碼器來識別結束位址,該解碼器可以解析下一片段標頭、並且可以從下一片段標頭的起始位址中推斷目前片段的結束位址。作為另一示例,跨越的片段結束的位址可以在目前片段標頭中用信號通知,這使得解碼延遲最小化。作為另一示例,大量跨越的編碼樹區塊(CTB)可以被用於表明片段結束位址並且被用信號發送。在826處,片段標頭可以編碼為位元流。
第9圖描述了用於使用層間參考(ILR)畫面及/或混合ILR畫面的片段解碼的示例方法。例如ILR跨越片段旗標;參考層索引;參考畫面;POC值或目前畫面和參考畫面之間的距離;關於CTB位址或像素位置的參考區域的起始和結束位址等等可以從片段標頭中讀取以確定參考區域的位置。跨越的片段可以是被跨越的畫面的一部分、被跨越的畫面等等。
在902處,可以開始從位元流解碼片段。位元流可以是關於第2圖顯示的增強層位元流230。再次參考第9圖,在904處,片段標頭可以被解析、並且可以在906處針對片段標頭是否表明目前片段已經跨越做出判斷。片段標頭可以是跨越的片段標頭。
在908處,在片段標頭表明目前片段未被跨越時,片段標頭可以被解析。片段標頭可以表明編碼在位元流中的片段資料,諸如CU。在910處,CU可以從位元流中解碼。在912處,可以針對在908處解碼的CU是否是針對片段進行解碼的最後一個CU做出判斷。如果CU不是進行解碼的最後一個CU,進行解碼的下一CU可以被識別並且在910處從位元流中解碼;該過程可以被重複,直到針對片段的最後一個CU從位元流中解碼。如果CU是進行 解碼的最後一個CU,則從位元流解碼片段在928處結束。
在914處,在已經確定目前片段已經被跨越時,片段標頭可以被解析以確定片段跨越模式傳訊。在916處,來自片段標頭的片段跨越模式傳訊被分析以確定片段跨越模式傳訊是隱式的還是顯式的。
在918處,可以確定顯式傳訊已被用於用信號通知目前片段已經被跨越。例如,跨越片段標頭可能已經編碼在位元流中以表明片段已經被跨越。跨越片段標頭或片段標頭可以表明ILR跨越片段旗標、參考層、參考畫面和將從參考畫面使用的參考區域以重建跨越的片段。例如,參考區域可以被用於重建跨越的片段。ILR跨越片段旗標可以表明ILR還是HILR被用於重建跨越的片段。例如,旗標可以表明參考畫面是ILR或HILR。跨越片段標頭可以包括被用於表明被用於預測或創建跨越的片段的參考畫面的參考區域的位置的資訊。例如,跨越片段標頭中的資訊包括ILR跨越片段旗標;參考層索引;參考畫面的識別碼,諸如畫面序數(POC)值或目前畫面和參考畫面之間的距離;及/或參考區域的起始和結束位址,諸如CTB位址或像素位置等等。作為另一示例,跨越片段標頭中的資訊可以包括ILR跨越片段旗標、參考層索引、參考畫面識別碼、參考區域的起始位址、編碼樹區塊(CTB)的總數等等。作為另一示例,跨越片段標頭中的資訊可以包括ILR跨越片段旗標、參考層索引、參考畫面識別碼、諸如運動或不一致資訊的相對資訊等等。運動資訊或不一致資訊可以在片段區域上應用並且可以表明跨越的片段和其參考區域之間的相對運動(在X和Y方向上)。作為另一示例,其中多於一個參考區域可以被用於預測跨越的片段,跨越片段標頭中的資訊可以包括ILR跨越片段旗標、多個參考區域、參考層ID、參考畫面POC、諸如參考區域的運動向量之類的相對資訊等等。片段標頭可以是關於第2圖顯示的片段標頭232。
再次參考第9圖,在922處,ILR跨越片段旗標可以被用於確定是使用ILR還是HILR。在924處,可以確定ILR畫面被使用並且跨越的片段可以從使用來自ILR畫面的參考區域中重建。例如,來自ILR畫面的參考區域可以被確定,使得參考區域可以被用於重建跨越的片段。這可以被實現,例如以允許將被重建的跨越的片段在跨越的片段不被編碼在位元流中時發生。參考區域可以從ILR畫面中獲取。ILR畫面中的參考區域的位置可以與跨越的片段的位置不同。
ILR畫面可以是由跨越的片段標頭表明的ILR畫面。例如,跨越的片段標頭可以表明ILR畫面可以被用於創建或預測跨越的片段。作為另一示例,跨越的片段標頭可以表明可以被用於創建或預測跨越的片段的ILR畫面的參考區域,該參考區域可以被用於重建跨越的片段。
參考區域可以被用於重建跨越的片段。例如,基本層畫面可以被上取樣以創建ILR畫面。ILR畫面可以經由線性及/或非線性層間處理機制處理以改善預測精確度。來自ILR畫面的片段可以被用於預測跨越的片段。例如,來自ILR畫面的片段可以被用於增強層片段的層間預測,該增強層片段可以是跨越的片段。來自ILR畫面的片段可以是參考區域。
在926處,可以確定HILR可以被使用,並且來自HILR的參考區域可以被識別。HILR可以使用來自EL的紋理資訊和來自BL的運動資訊被創建。來自HILR的參考區域可被識別以便參考區域可以被用於重建跨越的片段。這可以被實現以例如允許對下一片段的編碼在跨越的片段沒有被編碼在位元流中時發生。HILR中參考區域的位置可以與跨越的片段的位置不同。在928處,在參考區域沒有被編碼為位元流時,跨越的片段標頭可以被編碼為位元流。
在920處,當使用隱式傳訊時,跨越的片段可以從共置參考畫面的參 考區域中重建。跨越的片段可以從與跨越的片段對應的參考區域中形成或預測。將被解碼的片段可以是包括例如層0、層1和層2的多層視訊的一部分。層2可以是增強層。層1可以是另一增強層。層0可以是基本層。層2畫面可以從層1及/或層0參考畫面中預測。層2可以具有比層1更高的優先序,而層1可以具有比層0更高的優先序。參考區域可以來自參考畫面,該參考畫面可以來自具有最高優先序的參考層。例如,跨越的片段可以在層2中,被用於重建跨越的片段的參考區域可以來自層1。層1可以是層2的參考層,並且可以具有比層0更高的優先序。為了允許在解碼期間推斷參考區域,參考區域的起始位址可以***到片段標頭中。參考區域的結束位址可以***或不***片段標頭中。當參考區域的結束位址未***片段標頭中時,結束位址仍然可以由解碼器識別碼。可以使用解碼器來識別結束位址,該解碼器可以解析下一片段標頭、並且可以從下一片段標頭的起始位址中推斷目前片段的結束位址。作為另一示例,跨越的片段結束的位址可以在目前片段標頭中用信號通知,這使得解碼延遲最小化。作為另一示例,大量跨越的編碼樹區塊(CTB)可以被用於表明片段結束位址並且可以被用信號發送。在422處,從位元流對片段的解碼結束。
針對片段分段標頭的語法被提供。例如表1描述了可以被使用的片段分段標頭語法。
片段 分段層RBSP語法可以被提供。例如,表2描述了片段分斷層RBSP語法。
片段分段標頭語義可以被提供。例如scalable_slice_skip_flag(可縮放_片段_跨越_旗標)等於1可以表明slice_segment_data()(片段_分段_資料())對於目前片段不存在。scalable_slice_skip_flag等於0可以表明slice_segment_data()對於目前片段存在。當scalable_slice_skip_flag不存在時,其可以被推斷為等於0。
picture_skip_flag(畫面_跨越_旗標)等於1可以表明畫面可以被跨越。picture_skip_flag等於0可以表明大量編碼樹單元可以被跨越。當picture_skip_flag不存在時,其可以被推斷為等於0。
num_ctus_in_skipped_slice(跨越的片段中的編碼樹單元(ctu)的數量) 可以表明針對scalable_slice_skip_flag等於1的片段的編碼樹單元的數量。用於表示num_ctus_in_skipped_slice的位元數可以是Ceil(Log2(PicWidthInCtbsY*PicHeightInCtbsY))。
scalable_skipped_slice_ref_layer_idx(可縮放_跨越的_片段_參考_層_索引)可以表明用於跨越的片段預測的共置畫面。當不存在時,scalable_skipped_slice_ref_layer_idx的值可以被推斷為等於0。scalable_skipped_slice_ref_layer_idx的值可以在0(含)到NumDirectRefLayers[nuh_layer_id]-1(含)的範圍內。
scalable_skipped_slice_pred_type(可縮放_跨越的_片段_預測_類型)等於0可以表明跨越的片段可以從層間參考畫面(ILR)中預測。scalable_skipped_slice_pred_type的值等於1可以表明跨越的片段可以從混合層間參考畫面(HILR)中預測。當scalable_skipped_slice_pred_type不存在時,其可以等於0。
提供了用於編碼畫面的解碼過程。例如,解碼過程可以被用於nuh_layer_id大於0的編碼畫面。位元流一致性可以請求畫面的具有scalable_slice_skip_flag等於0的編碼片段可以包含用於畫面的編碼樹單元的片段分段資料,以便將畫面劃分成片段、將片段劃分成片段分段以及將片段分段劃分成編碼樹單元形成畫面的分部。
提供了具有nuh_layer_id大於0的跨越的片段的解碼過程。這一過程每個片段引動一次。例如,這一過程可以在解碼片段標頭和參考畫面列表建構之後但是在解碼編碼單元之前引動。
當SkippedSlicePredType等於0時,子函數可以被引動以產生重新取樣的參考層畫面,其可以被稱作rsPic。這一過程的輸出可以是預測的跨越後的片段,其可以稱作psSlice,並且其可以被設定為rsPid的編碼樹區塊的相應num_ctus_in_skipped_slice。
當SkippedSlicePredType等於1時,解碼過程可以被引動以產生混合層 間參考畫面(HILR)。這一過程的輸出可以被稱作psSlice,可以被設定為HILR畫面的編碼樹區塊的相應num_ctus_in_skipped_slice。對解塊及/或其他迴路濾波器的解碼過程可以被應用到混合層間參考畫面(HILR)或ILR畫面。
當層間運動預測被允許用於片段時,畫面運動域的重新取樣過程可以被引動以產生針對後續畫面的時間運動向量預測的跨越的片段的映射運動資訊。
第10A圖為可以在其中實施一個或者多個所揭露實施方式的示例通信系統100的圖式。通信系統100可以是將諸如語音、資料、視訊、訊息、廣播等之類的內容提供給多個無線使用者的多重存取系統。通信系統100可以經由系統資源(包括無線頻寬)的分享使得多個無線使用者能夠存取這些內容。例如,通信系統100可以使用一個或多個頻道存取方法,例如分碼多重存取(CDMA)、分時多重存取(TDMA)、分頻多重存取(FDMA)、正交FDMA(OFDMA)、單載波FDMA(SC-FDMA)等等。
如第10A圖所示,通信系統100可以包括無線傳輸/接收單元(WTRU)102a、102b、102c及/或102d(通常或者統稱為WTRU 102)、無線電存取網路(RAN)103/104/105、核心網路106/107/109、公共交換電話網路(PSTN)108、網際網路110和其他網路112,但可以理解的是所揭露的實施方式涵蓋任意數量的WTRU、基地台、網路及/或網路元件。WTRU 102a,102b,102c,102d中的每一個可以是被配置為在無線通訊中操作及/或通信的任何類型的裝置。作為示例,WTRU 102a、102b、102c、102d可以被配置為發送及/或接收無線信號、並且可以包括使用者設備(UE)、行動站、固定或行動使用者單元、呼叫器、行動電話、個人數位助理(PDA)、智慧型電話、膝上型電腦、隨身型易網機、個人電腦、無線感測器、消費電子產品等等。
通信系統100也可以包括基地台114a和基地台114b。基地台114a、114b 中的每一個可以是被配置為與WTRU 102a、102b、102c、102d中的至少一者無線交互作用,以便於存取一個或多個通信網路(例如,核心網路106/107/109、網際網路110及/或網路112)的任何類型的裝置。例如,基地台114a、114b可以是基地台收發站(BTS)、節點B、e節點B、家用節點B、家用e節點B、網站控制器、存取點(AP)、無線路由器以及類似裝置。儘管基地台114a、114b每個均被描述為單個元件,但是可以理解的是基地台114a、114b可以包括任何數量的互聯基地台及/或網路元件。
基地台114a可以是RAN 103/104/105的一部分,該RAN 103/104/105也可以包括諸如網站控制器(BSC)、無線電網路控制器(RNC)、中繼節點之類的其他基地台及/或網路元件(未示出)。基地台114a及/或基地台114b可以被配置為發送及/或接收特定地理區域內的無線信號,該特定地理區域可以被稱作胞元(未示出)。胞元也可以被劃分成胞元扇區。例如與基地台114a相關聯的胞元可以被劃分成三個扇區。因此,在一種實施方式中,基地台114a可以包括三個收發器,即針對該胞元的每個扇區都有一個收發器。在另一實施方式中,基地台114a可以使用多輸入多輸出(MIMO)技術,並且由此可以針對胞元的每個扇區使用多個收發器。
基地台114a、114b可以經由空中介面115/116/117與WTRU 102a、102b、102c、102d中的一者或多者通信,該空中介面115/116/117可以是任何合適的無線通訊鏈路(例如,射頻(RF)、微波、紅外(IR)、紫外(UV)、可見光等)。空中介面115/116/117可以使用任何合適的無線電存取技術(RAT)來建立。
更為具體地,如前所述,通信系統100可以是多重存取系統、並且可以使用一個或多個頻道存取方案,例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA以及類似的方案。例如,在RAN 103/104/105中的基地台114a和WTRU 102a、102b、102c可以實施諸如通用行動電信系統(UMTS)陸地無線電存取(UTRA)之類的無線電技術,其可以使用寬頻CDMA (WCDMA)來建立空中介面115/116/117。WCDMA可以包括諸如高速封包存取(HSPA)及/或演進型HSPA(HSPA+)的通信協定。HSPA可以包括高速下鏈封包存取(HSDPA)及/或高速上鏈封包存取(HSUPA)。
在另一實施方式中,基地台114a和WTRU 102a、102b、102c可以實施諸如演進型UMTS陸地無線電存取(E-UTRA)之類的無線電技術,其可以使用長期演進(LTE)及/或高級LTE(LTE-A)來建立空中介面115/116/117。
在其它實施方式中,基地台114a和WTRU 102a、102b、102c可以實施諸如IEEE 802.16(即全球互通微波存取(WiMAX))、CDMA2000、CDMA2000 1x、CDMA2000 EV-DO、臨時標準2000(IS-2000)、臨時標準95(IS-95)、臨時標準856(IS-856)、全球行動通信系統(GSM)、增強型資料速率GSM演進(EDGE)、GSM EDGE(GERAN)之類的無線電技術。
舉例來講,第10A圖中的基地台114b可以是無線路由器、家用節點B、家用e節點B或者存取點、並且可以使用任何合適的RAT,以用於促進在諸如公司、家庭、車輛、校園之類的局部區域的通信連接。在一種實施方式中,基地台114b和WTRU 102c、102d可以實施諸如IEEE 802.11之類的無線電技術以建立無線區域網路(WLAN)。在另一種實施方式中,基地台114b和WTRU 102c、102d可以實施諸如IEEE 802.15之類的無線電技術以建立無線個人區域網路(WPAN)。在又一種實施方式中,基地台114b和WTRU 102c、102d可以使用基於蜂巢的RAT(例如,WCDMA、CDMA2000、GSM、LTE、LTE-A等)以建立微微胞元(picocell)和毫微微胞元(femtocell)。如第10A圖所示,基地台114b可以具有至網際網路110的直接連接。因此,基地台114b不必經由核心網路106/107/109來存取網際網路110。
RAN 103/104/105可以與核心網路106/107/109通信,該核心網路可以 是被配置為將語音、資料、應用及/或網際網路協定語音(VoIP)服務提供到WTRU 102a、102b、102c、102d中的一者或多者的任何類型的網路。例如,核心網路106/107/109可以提供呼叫控制、帳單服務、基於移動位置的服務、預付費呼叫、網際連接、視訊分配等、及/或執行高階安全性功能,例如用戶驗證。儘管第10A圖中未示出,需要理解的是RAN 103/104/105及/或核心網路106/107/109可以直接或間接地與其他RAN進行通信,這些其他RAT可以使用與RAN 103/104/105相同的RAT或者不同的RAT。例如,除了連接到可以採用E-UTRA無線電技術的RAN 103/104/105,核心網路106/107/109也可以與使用GSM無線電技術的其他RAN(未顯示)通信。
核心網路106/107/109也可以用作WTRU 102a、102b、102c、102d存取PSTN 108、網際網路110及/或其他網路112的閘道。PSTN 108可以包括提供普通老式電話服務(POTS)的電路交換電話網路。網際網路110可以包括使用公共通信協定的互連電腦網路和裝置的全球系統,該公共通信協定例如傳輸控制協定(TCP)/網際網路協定(IP)網際網路協定套件的中的TCP、使用者資料包通訊協定(UDP)和IP。網路112可以包括由其他服務提供方擁有及/或操作的無線或有線通信網路。例如,網路112可以包括連接到一個或多個RAN的另一核心網路,這些RAN可以使用與RAN 103/104/105相同的RAT或者不同的RAT。
通信系統100中的WTRU 102a、102b、102c、102d中的一些或者全部可以包括多模式能力,即WTRU 102a、102b、102c、102d可以包括用於經由多不同通信鏈路以與不同的無線網路進行通信的多個收發器。例如,第10A圖中顯示的WTRU 102c可以被配置為與使用基於蜂巢的無線電技術的基地台114a進行通信、並且與使用IEEE 802無線電技術的基地台114b進行通信。
第10B圖為示例WTRU 102的系統圖。如第10B圖所示,WTRU 102可以包括處理器118、收發器120、傳輸/接收元件122、揚聲器/麥克風124、 鍵盤126、顯示器/觸控板128、不可移式記憶體130、可移式記憶體132、電源134、全球定位系統(GPS)晶片組136和其他週邊裝置138。需要理解的是,在保持與實施方式一致的同時,WTRU 102可以包括上述元件的任何子集合。此外,實施方式涵蓋基地台114a和114b及/或基地台114a和114b表示的節點(諸如但不限於收發站(BTS)、節點B、網站控制器、存取點(AP)、家用節點B、演進型家用節點B(e節點B)、家用演進型節點B(HeNB)、家用演進型節點B閘道和代理節點等等)可以包括第10B圖中所描述的以及此處所描述的元素的多個或者全部。
處理器118可以是通用處理器、專用處理器、常規處理器、數位訊號處理器(DSP)、多個微處理器、與DSP核心相關聯的一個或多個微處理器、控制器、微控制器、專用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)電路、其他任何類型的積體電路(IC)、狀態機等。處理器118可以執行信號編碼、資料處理、功率控制、輸入/輸出處理及/或使得WTRU 102能夠操作在無線環境中的其他任何功能。處理器118可以耦合到收發器120,該收發器120可以耦合到傳輸/接收元件122。儘管第10B圖中將處理器118和收發器120描述為獨立的元件,但是可以理解的是處理器118和收發器120可以被一起集成到電子封裝或者晶片中。
傳輸/接收元件122可以被配置為經由空中介面115/116/117將信號發送到基地台(例如,基地台114a)、或者從基地台(例如,基地台114a)接收信號。例如,在一種實施方式中,傳輸/接收元件122可以是被配置為發送及/或接收RF信號的天線。在另一實施方式中,傳輸/接收元件122可以是被配置為發送及/或接收例如IR、UV或者可見光信號的發射器/偵測器。在又一實施方式中,傳輸/接收元件122可以被配置為發送和接收RF信號和光信號兩者。需要理解的是傳輸/接收元件122可以被配置為發送及/或接收無線信號的任意組合。
此外,儘管傳輸/接收元件122在第10B圖中被描述為單一元件,但是 WTRU 102可以包括任何數量的傳輸/接收元件122。更特別地,WTRU 102可以使用MIMO技術。因此,在一種實施方式中,WTRU 102可以包括兩個或更多個傳輸/接收元件122(例如,多個天線)以用於經由空中介面115/116/117傳輸和接收無線信號。
收發器120可以被配置為對將由傳輸/接收元件122發送的信號進行調變、並且被配置為對由傳輸/接收元件122接收的信號進行解調。如以上所述,WTRU 102可以具有多模式能力。因此,收發器120可以包括多個收發器以用於使WTRU 102能夠經由多RAT進行通信,例如UTRA和IEEE 802.11。
WTRU 102的處理器118可以被耦合到揚聲器/麥克風124、鍵盤126及/或顯示器/觸控板128(例如,液晶顯示(LCD)單元或者有機發光二極體(OLED)顯示單元)、並且可以從上述裝置接收使用者輸入資料。處理器118也可以向揚聲器/麥克風124、鍵盤126及/或顯示器/觸控板128輸出使用者資料。此外,處理器118可以存取來自任何類型的合適的記憶體中的資訊、以及向任何類型的合適的記憶體中儲存資料,所述記憶體例如可以是不可移式記憶體130及/或可移式記憶體132。不可移式記憶體130可以包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬碟或者任何其他類型的記憶體儲存裝置。可移式記憶體132可以包括使用者身份模組(SIM)卡、記憶條、安全數位(SD)記憶卡等類似裝置。在其它實施方式中,處理器118可以存取來自實體上未位於WTRU 102上而位於伺服器或者家用電腦(未示出)上的記憶體的資訊、以及向上述記憶體中儲存資料。
處理器118可以從電源134接收功率、並且可以被配置為將功率分配給WTRU 102中的其他元件及/或對至WTRU 102中的其他元件的功率進行控制。電源134可以是任何適用於給WTRU 102供電的裝置。例如,電源134可以包括一個或多個乾電池(鎳鎘(NiCd)、鎳鋅(NiZn)、鎳氫(NiMH)、 鋰離子(Li-ion)等)、太陽能電池、燃料電池等。
處理器118也可以耦合到GPS晶片組136,該GPS晶片組136可以被配置為提供關於WTRU 102的目前位置的位置資訊(例如,經度和緯度)。作為來自GPS晶片組136的資訊的補充或者替代,WTRU 102可以經由空中介面115/116/117以從基地台(例如,基地台114a,114b)接收位置資訊,及/或基於從兩個或更多個相鄰基地台接收到的信號的定時來確定其位置。需要理解的是,在保持與實施方式一致的同時,WTRU 102可以用任何合適的位置確定方法來獲取位置資訊。
處理器118也可以耦合到其他週邊裝置138,該週邊裝置138可以包括提供附加特徵、功能性及/或無線或有線連接的一個或多個軟體及/或硬體模組。例如,週邊裝置138可以包括加速度計、電子指南針(e-compass)、衛星收發器、數位相機(用於照片或者視訊)、通用序列匯流排(USB)埠、震動裝置、電視收發器、免持耳機、藍芽R模組、調頻(FM)無線電單元、數位音樂播放機、媒體播放機、視訊遊戲播放機模組、網際網路瀏覽器等等。
第10C圖為根據一種實施方式的RAN 103和核心網路106的系統圖。如以上所述,RAN 103可以使用UTRA無線電技術經由空中介面115以與WTRU 102a、102b、102c通信。RAN 103也可以與核心網路106通信。如第10C圖所示,RAN 103可以包含節點B 140a、140b、140c,其中節點B 140a、140b、140c每個可以包含一個或多個收發器,該收發器經由空中介面115來與WTRU 102a、102b、102c通信。節點B 140a、140b、140c中的每個可以與RAN 103範圍內的特定胞元(未示出)相關聯。RAN 103也可以包括RNC 142a、142b。應該理解的是RAN 103可以包含任意數量的節點B和RNC而仍然與實施方式保持一致。
如第10C圖所示,節點B 140a、140b可以與RNC 142a進行通信。此外,節點B 140c可以與RNC 142b進行通信。節點B 140a、140b、140c可 以經由Iub介面與各自的RNC 142a、142b進行通信。RNC 142a、142b可以經由Iur介面相互進行通信。RNC 142a、142b可以分別被配置為控制與其連接的各自的節點B 140a、140b、140c。此外,RNC 142a、142b可以分別被配置為實施或者支援其它功能,諸如外環功率控制、負載控制、准許控制、封包排程、切換控制、巨集分集、安全性功能、資料加密等等。
第10C圖中所示的核心網路106可以包括媒體閘道(MGW)144、行動交換中心(MSC)146、服務GPRS支援節點(SGSN)148,及/或閘道GPRS支援節點(GGSN)150。儘管上述元素中的每個被描述為核心網路106的一部分,但是應該理解的是這些元素中的任何一個可以被除了核心網路操作者以外的實體擁有及/或操作。
RAN 103中的RNC 142a可以經由IuCS介面被連接至核心網路106中的MSC 146。MSC 146可以被連接至MGW 144。MSC 146和MGW 144可以向WTRU 102a、102b、102c提供至電路切換式網路(例如,PSTN 108)的存取,從而便於WTRU 102a、102b、102c與傳統陸線通信裝置之間的通信。
RAN 103中的RNC 142a也可以經由IuPS介面被連接至核心網路106中的SGSN 148。SGSN 148可以被連接至GGSN 150中。SGSN 148和GGSN 150可以向WTRU 102a、102b、102c提供至封包交換網路(例如,網際網路110)的存取,從而便於WTRU 102a、102b、102c與IP賦能裝置之間的通信。
如以上所述,核心網路106也可以連接至其它網路112,其中所述其它網路112可以包含被其他服務提供者擁有及/或操作的其他有線或無線網路。
第10D圖為根據一種實施方式的RAN 104和核心網路107的系統圖。如上所述,RAN 104可以使用E-UTRA無線電技術經由空中介面116以與WTRU 102a、102b、102c進行通信。RAN 104也可以與核心網路107進行 通信。
RAN 104可以包括e節點B 160a、160b、160c,但應該理解的是RAN 104可以包含任意數量的e節點B而仍然與實施方式保持一致。e節點B 160a、160b、160c每個可以包含一個或多個收發器,該收發器經由空中介面116來與WTRU 102a、102b、102c通信。在一種實施方式中,e節點B 160a、160b、160c可以使用MIMO技術。由此,例如e節點B 160a可以使用多個天線來傳送無線信號至WTRU 102a並且從WTRU 102a中接收無線資訊。
e節點B 160a、160b、160c中的每個可以與特定胞元(未示出)相關聯並且可以被配置為在上鏈及/或下鏈中處理無線電資源管理決定、切換決定、用戶排程。如第10D圖中所示,e節點B 160a、160b、160c可以經由X2介面彼此進行通信。
第10D圖中所示的核心網路107可以包括移動性管理閘道(MME)162、服務閘道164和封包資料網路(PDN)閘道166。儘管上述元素中的每個被描述為核心網路107的一部分,但是應該理解的是這些元素中的任何一個可以被除了核心網路操作者以外的實體擁有及/或操作。
MME 162可以經由S1介面被連接到RAN 104中的e節點B 160a、160b、160c中的每個並且可以作為控制節點。例如,MME 162可以負責認證WTRU 102a、102b、102c的用戶、承載啟動/停用、在WTRU 102a、102b、102c的初始連結期間選擇特定服務閘道等等。MME 162也可以是RAN 104與使用其他無線電技術(例如,GSM或WCDMA)的RAN(未示出)之間的交換提供控制平面功能。
服務閘道164可以經由S1介面被連接到RAN 104中的e節點B 160a、160b、160c的每個。服務閘道164通常可以路由和轉發使用者資料封包至WTRU 102a、102b、102c,或者路由和轉發來自WTRU 102a、102b、102c的使用者資料封包。服務閘道164也可以執行其他功能,例如在e節點B 間切換期間錨定用戶平面、當下鏈資料可用於WTRU 102a、102b、102c時觸發傳呼、為WTRU 102a、102b、102c管理和儲存上下文等等。服務閘道164也可以被連接到PDN閘道166,該PDN閘道166可以向WTRU 102a、102b、102c提供至封包交換網路(例如,網際網路110)的存取,從而便於WTRU 102a、102b、102c與IP賦能裝置之間的通信。
核心網路107可以促進與其他網路之間的通信。例如,核心網路107可以向WTRU 102a、102b、102c提供至電路切換式網路(例如,PSTN 108)的存取,從而便於WTRU 102a、102b、102c與傳統陸線通信裝置之間的通信。例如,核心網路107可以包括、或可以與下述通信:作為核心網路107和PSTN 108之間介面的IP閘道(例如,IP多媒體子系統(IMS)伺服器)。另外,核心網路107可以向提供WTRU 102a、102b、102c至網路112的存取,該網路112可以包含被其他服務提供者擁有及/或操作的其他有線或無線網路。
第10E圖為根據一種實施方式的RAN 105和核心網路109的系統圖。RAN 105可以是使用IEEE 802.16無線電技術以經由空中介面117來與WTRU 102a、102b、102c進行通信的存取服務網路(ASN)。正如下文將繼續討論的,WTRU 102a、102b、102c、RAN 105和核心網路109的不同功能實體之間的通信線路可以被定義為參考點。
如第10E圖所示,RAN 105可以包括基地台180a、180b、180c和ASN閘道182,但應該理解的是RAN 105可以包含任意數量的基地台和ASN閘道而仍然與實施方式保持一致。基地台180a、180b、180c分別與RAN 105中的特定胞元(未示出)相關聯、並且可以分別包括一個或多個收發器,該收發器經由空中介面117來與WTRU 102a、102b、102c通信。在一種實施方式中,基地台180a、180b、180c可以使用MIMO技術。由此,例如基地台180a可以使用多個天線來傳送無線信號至WTRU 102a並且從WTRU 102a中接收無線資訊。基地台180a、180b、180c也可以提供移動性管理功能,例如切換觸發、隧道建立、無線電資源管理、訊務分類、服務品質(QoS)策略執行,等等。ASN閘道182可以作為訊務聚合點且可以負責傳呼、使用者設定檔的快取、路由到核心網路109等等。
WTRU 102a、102b、102c與RAN 105之間的空中介面117可以被定義為執行IEEE 802.16規範的R1參考點。另外,WTRU 102a、102b、102c中的每個可以建立與核心網路109的邏輯介面(未示出)。WTRU 102a、102b、102c與核心網路109之間的邏輯介面可以被定義為R2參考點,可以被用來認證、授權、IP主機配置管理、及/或移動管理。
基地台180a、180b、180c中的每個之間的通信鏈路可以被定義為包括用於便於WTRU切換和基地台之間的資料傳輸的協定的R8參考點。基地台180a、180b、180c和ASN閘道182之間的通信鏈路可以被定義為R6參考點。R6參考點可以包括用於便於基於與每個WTRU 102a、102b、102c相關聯的移動事件的移動管理的協定。
如第10E圖所示,RAN 105可以被連接到核心網路109。RAN 105和核心網路109之間的通信鏈路可以被定義為例如包括用於便於資料傳輸和移動管理能力的協定的R3參考點。核心網路109可以包括行動IP本地代理(MIP-HA)184,驗證、授權、計費(AAA)伺服器186和閘道188。儘管每個上述元素被描述為核心網路109的一部分,但是應該理解的是這些元素中的任一個可以被除了核心網路操作者以外的實體擁有及/或操作。
MIP-HA可以負責IP位址管理、且可以使WTRU 102a、102b、102c在不同的ASN及/或不同的核心網路之間漫遊。MIP-HA 184可以向WTRU 102a、102b、102c提供至封包交換網路(例如,網際網路110)的存取,從而便於WTRU 102a、102b、102c和IP賦能裝置之間的通信。AAA伺服器186可以負責使用者認證和支援使用者服務。閘道188可以促進與其他網路之間的交互作用。例如,閘道188可以向WTRU 102a、102b、102c提供至 電路切換式網路(例如,PSTN 108)的存取,從而便於WTRU 102a、102b、102c與傳統陸線通信裝置之間的通信。另外,閘道188可以向WTRU 102a、102b、102c提供至網路112的存取,該網路112可以包含被其他服務提供者擁有及/或操作的其他有線或無線網路。
雖然在第10E圖中未示出,但應該理解的是RAN 105可以被連接到其他ASN且核心網路109可以被連接到其他核心網路。RAN 105和其他ASN之間的通信鏈路可以被定義為R4參考點,該R4參考點可以包括用於協調RAN 105和其他ASN之間的WTRU 102a、102b、102c的移動性的協定。核心網路109和其他核心網路之間的通信鏈路可以被定義為R5參考點,該R5參考點可以包括用於便於本地核心網路和受訪核心網路之間的交互作用的協定。
雖然本發明的特徵和元素以特定的結合在以上進行了描述,但本領域中具有通常知識者可以理解的是,每個特徵或元素可以單獨使用,或與其它特徵和元素結合使用。此外,此處描述的方法可以在由電腦或處理器執行的電腦程式、軟體或韌體中實施,其中所述電腦程式、軟體或韌體被包含在電腦可讀媒體中。電腦可讀媒體的實例包括電子信號(經由有線或無線連接而傳送)和電腦唯讀儲存媒體。關於電腦唯讀儲存媒體的實例包括但不限於唯讀記憶體(ROM)、隨機存取記憶體(RAM)、暫存器、快取記憶體、半導體存放裝置、磁性媒體(例如,內部硬碟或抽取式磁碟)、磁光媒體和CD-ROM光碟和數位多功能光碟(DVD)之類的光學媒體。與軟體有關的處理器可以被用於實施在WTRU、UE、終端、基地台、RNC或任何主機電腦中使用的射頻收發器。

Claims (24)

  1. 一種用於視訊編碼的無線傳輸/接收單元(WTRU),該WTRU包括:一處理器,被配置為:基於以一序列等級所傳訊的一增強層的至少兩參考層的各自的層優先序,確定該增強層的該至少兩參考層的哪一參考層具有一最高優先序;使用一層間參考畫面的一參考區域來確定將被跨越及預測的該增強層的一增強層畫面的一區域,其中該層間參考畫面是具有該最高優先序的所確定的參考層的部分;產生一語法元素,該語法元素表明該區域將被跨越以及該層間參考畫面將被用於預測該區域;以及將該語法元素編碼為一位元流。
  2. 如申請專利範圍第1項所述的WTRU,其中該語法元素包括一二進制旗標,該二進制旗標表明該區域是否將被跨越。
  3. 如申請專利範圍第1項所述的WTRU,其中該層間參考畫面是具有該最高優先序的該至少兩參考層的該參考層的一重建畫面,該重建畫面與一增強層畫面共置。
  4. 如申請專利範圍第1項所述的WTRU,其中該參考區域包括與該區域共置的該層間參考畫面的一區域。
  5. 如申請專利範圍第1項所述的WTRU,其中該處理器更被配置為將該語法元素編碼為該位元流中的一區域的一標頭。
  6. 如申請專利範圍第1項所述的WTRU,其中該處理器更被配置將該語法元素編碼為與該位元流中的一區域相關聯的一參數集合。
  7. 如申請專利範圍第6項所述的WTRU,其中該參數集合包括一自適應參數集合。
  8. 如申請專利範圍第1項所述的WTRU,其中該處理器更被配置為使用該層間參考畫面的一上取樣的部分來預測該區域。
  9. 如申請專利範圍第1項所述的WTRU,其中該被跨越的區域包括一片段。
  10. 一種用於視訊解碼的無線傳輸/接收單元(WTRU),該WTRU包括:一處理器,被配置為:恢復與一可縮放位元流的一增強層相關聯的一語法元素,該語法元素表明該增強層的一增強層畫面的一區域在編碼期間已被跨越、以及一層間參考畫面將被用於預測該區域,其中該增強層包括至少兩參考層:基於以一序列等級所傳訊的多個層優先序確定該增強層的該至少兩參考層中具有一最高優先序的該參考層;從所確定的參考層確定該層間參考畫面;確定該層間參考畫面的一參考區域;以及使用該參考區域以產生該區域。
  11. 如申請專利範圍第10項所述的WTRU,其中該至少兩參考層的一最高層是具有該最高優先序的該參考層。
  12. 如申請專利範圍第10項所述的WTRU,其中該語法元素包括一二進制旗標,該二進制旗標表明該區域是否被跨越。
  13. 如申請專利範圍第10項所述的WTRU,其中該處理器更被配置為從該可縮放位元流中的一區域的一標頭、以及與該可縮放位元流中的該區域相關聯的一參數集合中的至少一者恢復該語法元素。
  14. 如申請專利範圍第10項所述的WTRU,其中該層間參考畫面包括具有該最高優先序的該參考層的一畫面,該參考層的該畫面與一增強層畫面共置。
  15. 如申請專利範圍第10項所述的WTRU,其中該參考區域包括與該區域共置的該層間參考畫面的一區域。
  16. 如申請專利範圍第10項所述的WTRU,其中該處理器被配置為基於該層間參考畫面的一上取樣部分來預測該區域。
  17. 如申請專利範圍第10項所述的WTRU,其中該被跨越的區域包括一片段。
  18. 一種用於視訊編碼的方法,包括:使用以一序列等級所傳訊的多個層優先序,確定一增強層的至少兩參考層的哪一參考層具有一最高優先序;使用一層間參考畫面的一參考區域來確定將被跨越及預測的該增強層的一增強層畫面的一區域,其中該層間參考畫面是具有該最高優先序的該參考層的部分;產生一語法元素,該語法元素表明該區域將被跨越以及該層間參考畫面將被用於預測該區域;以及將該語法元素編碼為一位元流。
  19. 如申請專利範圍第18項所述的方法,其中該語法元素包括一二進制旗標,該二進制旗標表明該區域是否被跨越。
  20. 如申請專利範圍第18項所述的方法,其中該層間參考畫面是具有該最高優先序的該至少兩參考層的該參考層的一重建畫面,該參考畫面與一增強層畫面共置,以及該參考區域包括與該區域共置的該層間參考畫面的一區域。
  21. 如申請專利範圍第18項所述的方法,其中該語法元素被編碼為與該可縮放位元流中的一區域相關聯的一標頭。
  22. 如申請專利範圍第18項所述的方法,其中該語法元素被編碼為與該可縮放位元流中的一區域相關聯的一參數集合。
  23. 如申請專利範圍第18項所述的方法,更包括:基於該層間參考畫面的一上取樣部分,預測該被跨越的區域。
  24. 如申請專利範圍第18項所述的方法,其中該被跨越的區域包括一片段。
TW102129519A 2012-08-16 2013-08-16 多層視訊編碼以片段為基礎之跨越模式傳訊 TWI625052B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201261683923P 2012-08-16 2012-08-16
US61/683,923 2012-08-16
US201261705701P 2012-09-26 2012-09-26
US61/705,701 2012-09-26
US201361828369P 2013-05-29 2013-05-29
US61/828,369 2013-05-29

Publications (2)

Publication Number Publication Date
TW201424388A TW201424388A (zh) 2014-06-16
TWI625052B true TWI625052B (zh) 2018-05-21

Family

ID=49035950

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102129519A TWI625052B (zh) 2012-08-16 2013-08-16 多層視訊編碼以片段為基礎之跨越模式傳訊

Country Status (3)

Country Link
US (1) US9973751B2 (zh)
TW (1) TWI625052B (zh)
WO (1) WO2014028838A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2724534A2 (en) 2011-06-24 2014-04-30 Motorola Mobility LLC Selection of phase offsets for interpolation filters for motion compensation
GB2501115B (en) * 2012-04-13 2015-02-18 Canon Kk Methods for segmenting and encoding an image, and corresponding devices
US9473769B2 (en) 2012-06-08 2016-10-18 Texas Instruments Incorporated Method and system for reducing slice header parsing overhead in video coding
US20140078394A1 (en) * 2012-09-17 2014-03-20 General Instrument Corporation Selective use of chroma interpolation filters in luma interpolation process
US9270991B2 (en) * 2013-01-07 2016-02-23 Qualcomm Incorporated Inter-layer reference picture generation for HLS-only scalable video coding
US9648353B2 (en) * 2013-04-04 2017-05-09 Qualcomm Incorporated Multiple base layer reference pictures for SHVC
US9674533B2 (en) * 2013-04-05 2017-06-06 Qualcomm Incorporated Picture alignments in multi-layer video coding
WO2014163466A1 (ko) * 2013-04-05 2014-10-09 삼성전자 주식회사 정수 픽셀의 위치와 관련하여 비디오의 부호화 및 복호화를 수행하는 방법과 그 장치
US9596486B2 (en) 2013-04-05 2017-03-14 Qualcomm Incorporated IRAP access units and bitstream switching and splicing
US11438609B2 (en) 2013-04-08 2022-09-06 Qualcomm Incorporated Inter-layer picture signaling and related processes
US10003815B2 (en) 2013-06-03 2018-06-19 Qualcomm Incorporated Hypothetical reference decoder model and conformance for cross-layer random access skipped pictures
US9794558B2 (en) * 2014-01-08 2017-10-17 Qualcomm Incorporated Support of non-HEVC base layer in HEVC multi-layer extensions
US9848199B2 (en) * 2014-03-17 2017-12-19 Qualcomm Incorporated Device and method for scalable coding of video information
US10009622B1 (en) 2015-12-15 2018-06-26 Google Llc Video coding with degradation of residuals
US10547879B2 (en) * 2016-07-14 2020-01-28 Mediatek Inc. Method and apparatus for streaming video content
CN106231317A (zh) * 2016-09-29 2016-12-14 三星电子(中国)研发中心 视频处理、解码方法和装置、vr终端、视频播放***
WO2020044197A1 (en) 2018-08-26 2020-03-05 Beijing Bytedance Network Technology Co., Ltd. Pruning in multi-motion model based skip and direct mode coded video blocks
US11706411B2 (en) * 2020-09-02 2023-07-18 Tencent America LLC Content adaptive segmented prediction

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5973739A (en) * 1992-03-27 1999-10-26 British Telecommunications Public Limited Company Layered video coder
US20020118742A1 (en) * 2001-02-26 2002-08-29 Philips Electronics North America Corporation. Prediction structures for enhancement layer in fine granular scalability video coding
US20060153295A1 (en) * 2005-01-12 2006-07-13 Nokia Corporation Method and system for inter-layer prediction mode coding in scalable video coding
US20070086521A1 (en) * 2005-10-11 2007-04-19 Nokia Corporation Efficient decoded picture buffer management for scalable video coding
US20080089411A1 (en) * 2006-10-16 2008-04-17 Nokia Corporation Multiple-hypothesis cross-layer prediction
US20090003439A1 (en) * 2007-06-26 2009-01-01 Nokia Corporation System and method for indicating temporal layer switching points
US7742524B2 (en) * 2006-11-17 2010-06-22 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal using inter-layer prediction

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MXPA05003464A (es) * 2002-10-01 2005-07-05 Thomson Licensing Sa Ponderacion implicita de imagenes de referencia en un codificador de video.
EP1806930A1 (en) * 2006-01-10 2007-07-11 Thomson Licensing Method and apparatus for constructing reference picture lists for scalable video
KR100781524B1 (ko) * 2006-04-04 2007-12-03 삼성전자주식회사 확장 매크로블록 스킵 모드를 이용한 인코딩/디코딩 방법및 장치
EP2082576A4 (en) * 2006-10-23 2011-05-04 Vidyo Inc SYSTEM AND METHOD FOR VARIABLE-SCALE VIDEO ENCODING USING TELESCOPIC MODE INDICATORS
KR20120013966A (ko) * 2009-05-01 2012-02-15 톰슨 라이센싱 3dv를 위한 기준 화상 리스트
US20110182354A1 (en) * 2010-01-26 2011-07-28 Wonkap Jang Low Complexity, High Frame Rate Video Encoder
US20120213275A1 (en) * 2011-02-22 2012-08-23 Kwon Nyeong-Kyu Scalable video coding and devices performing the scalable video coding

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5973739A (en) * 1992-03-27 1999-10-26 British Telecommunications Public Limited Company Layered video coder
US20020118742A1 (en) * 2001-02-26 2002-08-29 Philips Electronics North America Corporation. Prediction structures for enhancement layer in fine granular scalability video coding
US20060153295A1 (en) * 2005-01-12 2006-07-13 Nokia Corporation Method and system for inter-layer prediction mode coding in scalable video coding
US20070086521A1 (en) * 2005-10-11 2007-04-19 Nokia Corporation Efficient decoded picture buffer management for scalable video coding
US20080089411A1 (en) * 2006-10-16 2008-04-17 Nokia Corporation Multiple-hypothesis cross-layer prediction
US7742524B2 (en) * 2006-11-17 2010-06-22 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal using inter-layer prediction
US20090003439A1 (en) * 2007-06-26 2009-01-01 Nokia Corporation System and method for indicating temporal layer switching points

Also Published As

Publication number Publication date
US9973751B2 (en) 2018-05-15
WO2014028838A1 (en) 2014-02-20
TW201424388A (zh) 2014-06-16
US20140050264A1 (en) 2014-02-20

Similar Documents

Publication Publication Date Title
TWI625052B (zh) 多層視訊編碼以片段為基礎之跨越模式傳訊
US11343519B2 (en) Method and apparatus of motion vector prediction for scalable video coding
JP6463799B2 (ja) スケーラブルビデオコーディングのための拡張時間的動きベクトル予測
JP6307650B2 (ja) スケーラブルビデオ符号化のための動き情報シグナリング
TWI578758B (zh) 視訊資料解碼的裝置及方法
TWI573445B (zh) 影像編碼參考圖像清單發信及建構方法
TW201408071A (zh) 視訊編碼加權預測參數傳訊